Hbase
bck1453925668
这个作者很懒,什么都没留下…
展开
-
hbase对HDFS开启短路读功能
1.增加短路读路径mkdir /var/lib/hadoop-hdfs chmod 775 /var/lib/hadoop-hdfschown hdfs:root -R /var/lib/hadoop-hdfs2.开启datanode 短路读(${HADOOP_HOME}/etc/hadoop/hdfs-site.xml)添加配置 <property> <name>dfs.client.read.shortcircuit</name> ...原创 2020-10-28 23:56:59 · 413 阅读 · 0 评论 -
使用MR入库hbase_BilkLoad(二)
使用MR任务读取txt文档, 将文件转换HFile文件, 再将HFile文件导入hbase表中, 这样对hbase无压力mapperpackage com.hbaseBulkLoad;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.conf.Configured;import org.apache.hadoop.fs.Path;import org.apache.hadoop.hbase.*;im原创 2020-10-28 16:37:56 · 231 阅读 · 0 评论 -
使用MR任务读写HBASE表(一)
以下代码是使用MR任务读取HBASE的表,然后再写到HBASE表中, 也可以写到另外的HBASE集群的表中Mapperpackage com.MRforHbaeToHbase;import org.apache.hadoop.hbase.Cell;import org.apache.hadoop.hbase.CellUtil;import org.apache.hadoop.hbase.client.Put;import org.apache.hadoop.hbase.client.Re原创 2020-10-25 22:16:41 · 292 阅读 · 0 评论