在对sqoop从mysql进行数据抽取的时候,sqoop中使用string类型split by作为参数类型,对--num-mappers进行调参时发现数据抽取和源库中的数据量有差别,经多次测试确实,只有num为1才不受影响。
另外网上也参考了http://guoyunsky.iteye.com/blog/1213966;
http://blog.itpub.net/11676357/viewspace-1060922/;两位的文章
在对sqoop从mysql进行数据抽取的时候,sqoop中使用string类型split by作为参数类型,对--num-mappers进行调参时发现数据抽取和源库中的数据量有差别,经多次测试确实,只有num为1才不受影响。
另外网上也参考了http://guoyunsky.iteye.com/blog/1213966;
http://blog.itpub.net/11676357/viewspace-1060922/;两位的文章