###mysql-hbase写入熟读慢
注意:传输数据优化
1. 写入hbase之前,建表的时候要进行预分区
2. 预读mapping
3. 加大写入缓存
4. 修改hbase配置文件/conf/hbase-site.xml,将hbase的堆内存增加到3GB(根据硬件资源)
结果:传输速度低,优化之前200条/秒,优化后1700条/秒。
推荐尝试sqoop
转载于:https://my.oschina.net/zhouwang93/blog/1613670
###mysql-hbase写入熟读慢
注意:传输数据优化
1. 写入hbase之前,建表的时候要进行预分区
2. 预读mapping
3. 加大写入缓存
4. 修改hbase配置文件/conf/hbase-site.xml,将hbase的堆内存增加到3GB(根据硬件资源)
结果:传输速度低,优化之前200条/秒,优化后1700条/秒。
推荐尝试sqoop
转载于:https://my.oschina.net/zhouwang93/blog/1613670