shengjk1的博客

原创 sqoop --split-by详解

其实sqoop中相对来说最有意思的就是–split-by了，咱们来唠唠 假设有一张表test，sqoop命令中–split-by ‘id’，-m 10，会发生怎样奇特的事情。首先呢，sqoop会去查表的元数据等等，重点说一下sqoop是如何根据–split-by进行分区的。首先sqoop会向关系型数据库比如mysql发送一个命令:select max(id),min(id) from test