hbase的API实现

最新推荐文章于 2023-12-25 08:14:47 发布
最新推荐文章于 2023-12-25 08:14:47 发布
阅读量218 收藏
点赞数
分类专栏： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ayqy42602/article/details/89470218
版权

一、实践内容
用java语言在hbase数据库中创建表，并完成增删改查等基本操作。
二、实践代码
（1）创建表

public static void createTable(String tableName, String... columnFamily)
			throws MasterNotRunningException, ZooKeeperConnectionException, IOException {
		HBaseAdmin admin = new HBaseAdmin(conf);
		// 判断表是否存在
		if (isTableExist(tableName)) {
			System.out.println("表" + tableName + "已存在");
		} else {
			// 创建表属性对象,表名需要转字节
			HTableDescriptor descriptor = new HTableDescriptor(TableName.valueOf(tableName)); 
			// 创建多个列族
			for (String cf : columnFamily) {
				descriptor.addFamily(new HColumnDescriptor(cf));
			}
			// 根据对表的配置,创建表
			admin.createTable(descriptor);
			System.out.println("表" + tableName + "创建成功!");
		}
	}

（2）删除表

public static void dropTable(String tableName)
			throws MasterNotRunningException, ZooKeeperConnectionException, IOException {
		HBaseAdmin admin = new HBaseAdmin(conf);
		if (isTableExist(tableName)) {
			admin.disableTable(tableName);
			admin.deleteTable(tableName);
			System.out.println("表" + tableName + "删除成功!");
		} else {
			System.out.println("表" + tableName + "不存在!");
		}
	}

（3）向表中插入数据

 public static void addRowData(String tableName, String rowKey, String columnFamily, String column, String value)
			throws IOException {
		// 创建 HTable 对象
		HTable hTable = new HTable(conf, tableName);
		// 向表中插入数据
		Put put = new Put(Bytes.toBytes(rowKey));
		// 向 Put 对象中组装数据
		put.add(Bytes.toBytes(columnFamily), Bytes.toBytes(column), Bytes.toBytes(value));
		hTable.put(put);
		hTable.close();
		System.out.println("插入数据成功");
	}

（4）查看表中所有的数据

public static void getAllRows(String tableName) throws IOException {
		HTable hTable = new HTable(conf, tableName);
		// 得到用于扫描 region 的对象
		Scan scan = new Scan();
		// 使用 HTable 得到 resultcanner 实现类的对象
		ResultScanner resultScanner = hTable.getScanner(scan);
		for (Result result : resultScanner) {
			Cell[] cells = result.rawCells();
			for (Cell cell : cells) {
				// 得到 rowkey， 得到列族
				System.out.println("行键:" + Bytes.toString(CellUtil.cloneRow(cell))+" "+"列族" + Bytes.toString(CellUtil.cloneFamily(cell))+" "+"列:" + Bytes.toString(CellUtil.cloneQualifier(cell))+" "+"值:" + Bytes.toString(CellUtil.cloneValue(cell)));		 
			}
		}
	}

（5）得到某一行所有数据

public static void getRow(String tableName, String rowKey) throws IOException {
		HTable table = new HTable(conf, tableName);
		Get get = new Get(Bytes.toBytes(rowKey));
		// get.setMaxVersions();显示所有版本
		// get.setTimeStamp();显示指定时间戳的版本
		Result result = table.get(get);
		for (Cell cell : result.rawCells()) {
			System.out.println("行键:" + Bytes.toString(result.getRow())+" "+"列族" + Bytes.toString(CellUtil.cloneFamily(cell))+" "+"列:" + Bytes.toString(CellUtil.cloneQualifier(cell))+" "+"值:" + Bytes.toString(CellUtil.cloneValue(cell))+" "+"时间戳:" + cell.getTimestamp());
		}
	}

（6）删除多行数据

public static void deleteMultiRow(String tableName, String... rows) throws IOException {
		HTable hTable = new HTable(conf, tableName);
		List<Delete> deleteList = new ArrayList<Delete>();
		for (String row : rows) {
			Delete delete = new Delete(Bytes.toBytes(row));
			deleteList.add(delete);
		}
		hTable.delete(deleteList);
		hTable.close();
	}

（7）获取某一行指定“列族：列”的数据

public static void getRowQualifier(String tableName, String rowKey, String family, String
			qualifier) throws IOException{
			HTable table = new HTable(conf, tableName);
			Get get = new Get(Bytes.toBytes(rowKey));
			get.addColumn(Bytes.toBytes(family), Bytes.toBytes(qualifier));
			Result result = table.get(get);
			for(Cell cell : result.rawCells()){
			System.out.println("行键:" + Bytes.toString(result.getRow())+" "+"列族" + Bytes.toString(CellUtil.cloneFamily(cell))+" "+"列:" + Bytes.toString(CellUtil.cloneQualifier(cell))+" "+"值:" + Bytes.toString(CellUtil.cloneValue(cell)));
			}
			}

（8）主函数

public static void main(String[] args) throws MasterNotRunningException, ZooKeeperConnectionException, IOException {
		 createTable("Teacher", "information","score");
		 dropTable("worker");
		 addRowData("Teacher", "Jerry", "information", "age", "87");
		 getAllRows("student");
		getRow("student", "Tom");
		getRowQualifier("student", "Jerry", "score", "art");
		 deleteMultiRow("student", "Tom");
 
	}

三、实践结果
在这里插入图片描述

完整代码：

package Student;

import java.io.IOException;
import java.util.ArrayList;
import java.util.List;
 
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.Cell;
import org.apache.hadoop.hbase.CellUtil;
import org.apache.hadoop.hbase.HBaseConfiguration;
import org.apache.hadoop.hbase.HColumnDescriptor;
import org.apache.hadoop.hbase.HTableDescriptor;
import org.apache.hadoop.hbase.MasterNotRunningException;
import org.apache.hadoop.hbase.TableName;
import org.apache.hadoop.hbase.ZooKeeperConnectionException;
import org.apache.hadoop.hbase.client.Admin;
import org.apache.hadoop.hbase.client.Connection;
import org.apache.hadoop.hbase.client.ConnectionFactory;
import org.apache.hadoop.hbase.client.Delete;
import org.apache.hadoop.hbase.client.Get;
import org.apache.hadoop.hbase.client.HBaseAdmin;
import org.apache.hadoop.hbase.client.HTable;
import org.apache.hadoop.hbase.client.Put;
import org.apache.hadoop.hbase.client.Result;
import org.apache.hadoop.hbase.client.ResultScanner;
import org.apache.hadoop.hbase.client.Scan;
import org.apache.hadoop.hbase.util.Bytes;
 
public class Student{
 
	public static Configuration conf;
	static {
		// 使用 HBaseConfiguration 的单例方法实例化
		conf = HBaseConfiguration.create();
	}
 
	// 判断表是否存在
	public static boolean isTableExist(String tableName) throws IOException {
		// 在 HBase 中管理、访问表需要先创建 HBaseAdmin 对象
		Connection connection = ConnectionFactory.createConnection(conf);
		Admin admin = connection.getAdmin();
		return admin.tableExists(TableName.valueOf(tableName));
	}
 
	// 创建表
	public static void createTable(String tableName, String... columnFamily)
			throws MasterNotRunningException, ZooKeeperConnectionException, IOException {
		HBaseAdmin admin = new HBaseAdmin(conf);
		// 判断表是否存在
		if (isTableExist(tableName)) {
			System.out.println("表" + tableName + "已存在");
		} else {
			// 创建表属性对象,表名需要转字节
			HTableDescriptor descriptor = new HTableDescriptor(TableName.valueOf(tableName));
			// 创建多个列族
			for (String cf : columnFamily) {
				descriptor.addFamily(new HColumnDescriptor(cf));
			}
			// 根据对表的配置,创建表
			admin.createTable(descriptor);
			System.out.println("表" + tableName + "创建成功!");
		}
	}
 
	// 删除表
	public static void dropTable(String tableName)
			throws MasterNotRunningException, ZooKeeperConnectionException, IOException {
		HBaseAdmin admin = new HBaseAdmin(conf);
		if (isTableExist(tableName)) {
			admin.disableTable(tableName);
			admin.deleteTable(tableName);
			System.out.println("表" + tableName + "删除成功!");
		} else {
			System.out.println("表" + tableName + "不存在!");
		}
	}
 
	// 向表中插入数据
	public static void addRowData(String tableName, String rowKey, String columnFamily, String column, String value)
			throws IOException {
		// 创建 HTable 对象
		HTable hTable = new HTable(conf, tableName);
		// 向表中插入数据
		Put put = new Put(Bytes.toBytes(rowKey));
		// 向 Put 对象中组装数据
		put.add(Bytes.toBytes(columnFamily), Bytes.toBytes(column), Bytes.toBytes(value));
		hTable.put(put);
		hTable.close();
		System.out.println("插入数据成功");
	}
 
	// 得到所有数据
	public static void getAllRows(String tableName) throws IOException {
		HTable hTable = new HTable(conf, tableName);
		// 得到用于扫描 region 的对象
		Scan scan = new Scan();
		// 使用 HTable 得到 resultcanner 实现类的对象
		ResultScanner resultScanner = hTable.getScanner(scan);
		for (Result result : resultScanner) {
			Cell[] cells = result.rawCells();
			for (Cell cell : cells) {
				// 得到 rowkey
				//System.out.println("行键:" + Bytes.toString(CellUtil.cloneRow(cell)));
				// 得到列族
				System.out.println("行键:" + Bytes.toString(CellUtil.cloneRow(cell))+" "+"列族" + Bytes.toString(CellUtil.cloneFamily(cell))+" "+"列:" + Bytes.toString(CellUtil.cloneQualifier(cell))+" "+"值:" + Bytes.toString(CellUtil.cloneValue(cell)));
				//System.out.println("列:" + Bytes.toString(CellUtil.cloneQualifier(cell)));
				//System.out.println("值:" + Bytes.toString(CellUtil.cloneValue(cell)));
			}
		}
	}
 
	// 得到某一行所有数据
	public static void getRow(String tableName, String rowKey) throws IOException {
		HTable table = new HTable(conf, tableName);
		Get get = new Get(Bytes.toBytes(rowKey));
		// get.setMaxVersions();显示所有版本
		// get.setTimeStamp();显示指定时间戳的版本
		Result result = table.get(get);
		for (Cell cell : result.rawCells()) {
			System.out.println("行键:" + Bytes.toString(result.getRow())+" "+"列族" + Bytes.toString(CellUtil.cloneFamily(cell))+" "+"列:" + Bytes.toString(CellUtil.cloneQualifier(cell))+" "+"值:" + Bytes.toString(CellUtil.cloneValue(cell))+" "+"时间戳:" + cell.getTimestamp());
			//System.out.println("列族" + Bytes.toString(CellUtil.cloneFamily(cell)));
			//System.out.println("列:" + Bytes.toString(CellUtil.cloneQualifier(cell)));
			//System.out.println("值:" + Bytes.toString(CellUtil.cloneValue(cell)));
			//System.out.println("时间戳:" + cell.getTimestamp());
		}
	}
 
	// 删除多行数据
	public static void deleteMultiRow(String tableName, String... rows) throws IOException {
		HTable hTable = new HTable(conf, tableName);
		List<Delete> deleteList = new ArrayList<Delete>();
		for (String row : rows) {
			Delete delete = new Delete(Bytes.toBytes(row));
			deleteList.add(delete);
		}
		hTable.delete(deleteList);
		hTable.close();
	}
//获取某一行指定“列族：列”的数据
	public static void getRowQualifier(String tableName, String rowKey, String family, String
			qualifier) throws IOException{
			HTable table = new HTable(conf, tableName);
			Get get = new Get(Bytes.toBytes(rowKey));
			get.addColumn(Bytes.toBytes(family), Bytes.toBytes(qualifier));
			Result result = table.get(get);
			for(Cell cell : result.rawCells()){
			System.out.println("行键:" + Bytes.toString(result.getRow())+" "+"列族" + Bytes.toString(CellUtil.cloneFamily(cell))+" "+"列:" + Bytes.toString(CellUtil.cloneQualifier(cell))+" "+"值:" + Bytes.toString(CellUtil.cloneValue(cell)));
			//System.out.println("列族" + Bytes.toString(CellUtil.cloneFamily(cell)));
			//System.out.println("列:" + Bytes.toString(CellUtil.cloneQualifier(cell)));
			//System.out.println("值:" + Bytes.toString(CellUtil.cloneValue(cell)));
			}
			}
	public static void main(String[] args) throws MasterNotRunningException, ZooKeeperConnectionException, IOException {
		 createTable("hehe3", "cf1","cf2");
		 dropTable("hehe2");
		 addRowData("hehe3", "1001", "cf1", "sex", "man");
		 getAllRows("student");
		getRow("student", "Tom");
		getRowQualifier("scores", "Jerry", "course", "art");
		 deleteMultiRow("scores", "Tom");
 
	}
}
y果子
关注
专栏目录
HBase实现原理及运行机制
qq_39579290的博客
03-17 2127
HBase原理
HBase的API操作---增删改查
TT15751097576的博客
09-21 977
HBase的API操作—增删改查 Java包的版本一定要统一，防止出现版本问题 第一步：创建maven工程 第二部：进入maven官网，输入三个版本jar包 通过类去找包： 问题：我知道一个类名，但是不知道这是那个包的。（通过类去找包的方法） 百度一下：search.maven.org 进入官网 比如：HBase 在输入 Admin //2.连接客户端的类 <!-- https:...
HBase实现分页浏览
热门推荐
胡同里的庇护所(Pirate Leo's Shelter)
08-29 2万+
文中可能涉及到的API： Hadoop/HDFS:http://hadoop.apache.org/common/docs/current/api/ HBase: http://hbase.apache.org/apidocs/index.html?overview-summary.html Begin！ 最近做的项目用到了HBase处理海量的数据记录，并在前端UI提供了查询浏览功能。
Hbase代码实现
Welcome to My blog
11-16 1534
引入相关依赖 <artifactId>hbase</artifactId> java代码 import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.*; import org.apache.hadoop.hbase.client.*; import org.apache.hadoop.hbase.util.Bytes; import org.slf4j.Logger; import
第七章：API实现HBase的DML操作
tyh1579152915的博客
10-21 257
1、插入数据 public static void putData(String tableName, String rk, String cf, String cn, String value) throws IOException { //1、获取表对象 Table table = connection.getTable(TableName.valueOf(tableName)); //2、创建put对象 Put put = new
Hbase API 学习1——实现建表、增、删、查等操作
weixin_45890771的博客
10-27 493
1、代码如下 import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.*; import org.apache.hadoop.hbase.client.*; import org.apache.hadoop.hbase.regionserver.ScanOptions; import org.apache.hadoop.hbase.util.Bytes; import org.apache.hadoop.ya
以HBase为基础，采用Java编程语言和HBase API实现了一套分布式数据存取操作系统具体如何操作？请写出详细代码步骤并作相应解释
06-01
好的，下面我将为你详细介绍基于 Java 编程语言和 HBase API 实现分布式数据存取操作的具体步骤。 1. 导入 HBase 依赖 首先需要导入 HBase 的依赖，可以使用 Maven 进行管理。在 pom.xml 文件中添加以下依赖： ``...
javaApi_sparkhiveAPI_hbaseAPI.zip
10-31
本压缩包"javaApi_sparkhiveAPI_hbaseAPI.zip"包含了2019年8月至10月期间针对这些技术的Java版API实现，以及与Spark相关的Hive和HBase API。以下是关于这些技术的详细知识： 1. **Java API for Hive**： - **Hive*...
Hbase调用JavaAPI实现批量导入操作.docx
11-17
Hbase 调用 JavaAPI 实现批量导入操作 在大数据时代，Hbase 作为一个分布式、面向列的 NoSQL 数据库，广泛应用于大规模数据存储和处理中。同时，JavaAPI 作为一个强大且流行的编程语言，广泛应用于各种软件开发中。...
HBASE API
04-26
HBase的查询主要通过`Get`对象实现，`Get`对象可以指定行键和列过滤条件。调用`HTable`的`get()`方法，传入`Get`对象，即可获取对应的数据。对于更复杂的查询需求，如范围扫描或使用过滤器，可以使用`Scan`对象。 5...
HBase架构实现
薛小布的博客
06-02 196
1、 存储 不同的排序、搜索算法在性能上差别可以非常大，从O(n^2)到O(log2N)甚至O(1)。同样不能的存储模型和索引结构对数据库的读写性能影响很大。HBase通过LSM存储模型提高写性能的同时又能保证读性能。 B+树比B树更适合做数据库系统索引。尤其是对于HBase这类常用区间扫描的数据库，因为B+树只需要遍历所有叶子节点即可实现区间扫描，B+树的最大性能问题就是插入，随着越来越多的数据插入，叶子节点会慢慢分裂，逻辑上会存储到磁盘的不痛快，做区间扫描产生大量随机读IO，同时数据写入时维护树的分裂、
HBase基础知识（四）：HBase API
最新发布
zuodingquan666的博客
12-25 1244
【代码】HBase基础知识（四）：HBase API。
关于HBase(二) HBase的概念和实现
ThisIsNobody的博客
06-28 311
概念HBase是在HDFS上开发的面向列的分布式数据库，结构化数据的分布式存储系统需要访问超大规模数据集时，可以用HBase面向列族的存储器，调优和存储在列族上进行，同意列族内的成员最好有相同的访问模式和大小特征表    &gt; 根据行的键值排序，排序按照字节序    &gt; 通过表的主键访问表cell 单元格    &gt; 行和列交叉决定    &gt; 版本号：插入单元格时的时间戳   ...
HBase基本代码实现（一）
Star-Technology
06-16 581
Step 1: 加载设置 HConnection hTablePool = null; static Configuration conf =null; public HBaseDAOImp() { conf = new Configuration(); String zk_list = "node12,node13,node14";
HBase详细介绍：起源、实现原理、系统架构
Allenzyg的博客
06-30 1万+
1.Hbase起源 HBase是一个开源的非关系型分布式数据库，它参考了谷歌的BigTable建模，实现的编程语言为Java。它是Apache软件基金会的Hadoop项目的一部分，运行于HDFS文件系统之上，为 Hadoop 提供类似于BigTable 规模的服务。因此，它可以容错地存储海量稀疏的数据。 HBase是一个高可靠、高性能、面向列、可伸缩的分布式数据库，是谷歌BigTable的开源实现，主要用来存储非结构化和半结构化的松散数据。HBase的目标是处理非常庞大的表，可以通过水平扩展的...
项目中hbase接口开发总结
菜菜的博客
12-24 3036
项目中查询hbase接口开发总结    最近在做关于查询hbase应用层接口的性能测试。从而有一个对于hbase查询的效率有了新的认识。 1、查询的rowkey设计和写入数据的rowkey设计要区分。    rowkey通常的设计规则是：    1、较短 2、唯一 3、散列 4、通常将需要查询的数据参与rowkey的设计    项目场景：    在一个查询请求过来时，在业务会查询两个表
HBase开发
shi_zi_183的博客
10-19 1454
HBase开发 Java API简介 HBase的Java API包含很多内容，已经比较完善。 1、HBaseConfiguration类 HBaseConfiguration类属于org.apache.hadoop.hbase包，功能是通过添加HBase相关文件对HBase进行配置文件对HBase进行配置。常用的方法 1） static org.apache.hadoop.conf.Configuration create() 通过读取默认位置(classpath)下的hbase-site.xml文件，
HBase Java API开发
weixin_44371237的博客
11-01 245
HBase Java API开发
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值