mapreduce读取hbase中表的数据，直接打印或者回传数据到hbase数据库表

最新推荐文章于 2021-01-19 03:24:14 发布

飞鸟zjs

最新推荐文章于 2021-01-19 03:24:14 发布

阅读量1k

点赞数

分类专栏： hbase

本文链接：https://blog.csdn.net/asdfzjs/article/details/47981283

版权

这是一个使用HBase MapReduce读取名为`t_cdr3`的表中的数据，通过自定义的`MyMapper`和`MyTableReducer`类进行处理。Mapper将datetime字段提取并作为key输出，而Reducer则将结果直接打印。虽然注释掉了将结果回写到HBase的代码，但提供了如何将数据写入名为`t_cdr`的表的示例。在Windows环境下运行时，可能需要对NativeIO.java进行修改。

摘要由CSDN通过智能技术生成

package com.syyz.zjs;

import java.io.IOException;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.HBaseConfiguration;
import org.apache.hadoop.hbase.client.Put;
import org.apache.hadoop.hbase.client.Result;
import org.apache.hadoop.hbase.client.Scan;
import org.apache.hadoop.hbase.io.ImmutableBytesWritable;
import org.apache.hadoop.hbase.mapreduce.TableMapReduceUtil;
import org.apache.hadoop.hbase.mapreduce.TableMapper;
import org.apache.hadoop.hbase.mapreduce.TableReducer;
import org.apache.hadoop.hbase.util.Bytes;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Job;

public class ExampleTotalMapReduce{
	public static void main(String[] args) {
		try{
			Configuration config = HBaseConfiguration.create();
			config.set("hbase.zookeeper.quorum", "node7,node8,node9");
			Job job = new Job(config,"ExampleSummary");
			job.setJarByCla