- 博客(3)
- 问答 (3)
- 收藏
- 关注
原创 小端字节序和大端字节序
转自达内培训资料以32位整数:0x12345678为例,该数据位数从左至右依次降低小端字节序:数据的低位在低地址,高位在高地址。0x12345678的小端字节序为:[0x78, 0x56, 0x34, 0x12],地址从左至右依次升高大端字节序:数据的高位在低地址,低位在高低值。0x12345678的大端字节序为:[0x12, 0x34, 0x56, 0x78],地址从左至右依次降低...
2018-04-16 15:54:34 2510
原创 Spark实现MySQL到HBase数据迁移的Scala代码
Spark实现MySQL到HBase的数据迁移,其效率比Sqoop快数十倍。该代码识别MySQL表的主键作为HBase的行键,遇到联合主键则将主键用下划线连接后作为HBase的行键。1. 下图为工程目录结构2. MySQL2HBase.scalaimport java.sql.{DriverManager, SQLException}import org.apache.hadoop.hbase...
2018-04-09 16:21:12 1571 3
空空如也
libhdfs的hdfsWrite上传文件最大为4G,怎么办?
2017-05-08
hbase启动几十秒后,HMaster和HRegionserver自动关闭
2017-01-06
hbase启动几十秒后,HMaster和HRegionserver自动关闭
2016-12-26
TA创建的收藏夹 TA关注的收藏夹
TA关注的人