以下的步骤都是我实验成功后的记录下来的,只记录了大体的步骤,由于环境的差异,可能导致你的操作并不一定会成功!不要机械的式的复制,要结合你本机的环境去处理。对于配置选项,有些我也不抬理解,待理解之后再来补充。
实验环境:
Linux 16.04.3
hadoop-2.8.1
hbse-1.2.6
hive-2.2.0
sqoop-1.4.6.bin__hadoop-2.0.4-alpha
一、从MySQL将表导入到Hbase中
从MySQL可以直接将表导入到Hbase之中,需要事先在Hbase中建立表.
语法:sqoop import --connect conectPath/databaseName --table tableName --username userName --password useNamePassword --bindir path --split-by columnName --hbase-table hbaseTableName --column-family columnFamilyName
需要根据你自己的具体信息填入相关信息。
举个例子:sqoop import --connect jdbc:mysql://localhost/jt --table gps --username root --password 123456 --bindir /home/test/sqoop-1.4.6.bin__hadoop-2.0.4-alpha/lib --split-by id --hbase-table gps --column-family info
我遇到的错误:某某类找不到
原因:在导入的过程之中会生成一个类,class文件和jar文件。在执行mapreduce的时候没有找到这些文件。
解决办法:找到这些文件复制到