读取HBase的表数据，然后将数据写入到hdfs上面去

最新推荐文章于 2022-12-22 13:55:48 发布

a大数据yyds

最新推荐文章于 2022-12-22 13:55:48 发布

阅读量1.4k

点赞数 2

分类专栏： HBase 文章标签： hbase

本文链接：https://blog.csdn.net/qq_45765882/article/details/103705897

版权

该博客详细介绍了如何从HBase中读取表数据，并将其批量写入到HDFS文件系统的过程，包括Mapper、Reduce阶段以及驱动类的实现。

摘要由CSDN通过智能技术生成

读取HBase的表数据，然后将数据写入到hdfs上面去
1、Mapper

 public static class mapHdfs extends TableMapper<Text, Text> {
   

        @Override
        protected void map(ImmutableBytesWritable key, Result value, Context context) throws IOException, InterruptedException {
   
            byte[] bytes = key.get();
            String rowkey = Bytes.toString(bytes);
            String address="";
            String sex="";
            String name="";
            int id=0;

            Cell[] cells = value.rawCells();
            for (Cell cell : cells) {
   
                if ("f2".equals(Bytes.toString(CellUtil.cloneFamily(cell)))){
   
                    if ("address".equals(Bytes.toString(CellUtil<