给大家整理了一些有关【HBase,AD】的项目学习资料（附讲解～～）：

 https://edu.51cto.com/course/31545.html

 https://edu.51cto.com/course/15764.html

HBase 数据存在哪？

HBase 是一个分布式、可扩展的 NoSQL 数据库，基于 Google 的 Bigtable 设计。它能够存储大量的结构化数据，并提供快速的随机读写能力。本文将介绍 HBase 的数据存储机制、数据模型、以及如何通过代码示例进行基本的操作。

HBase 数据存储机制

HBase 将数据以表的形式组织，但与传统的关系型数据库不同，HBase 的表是无模式的，这意味着同一个表中的记录可以有不同的列。HBase 使用列族（Column Family）来组织数据，每个列族可以有多个列。每个单元格的值由一个时间戳标识，这使得 HBase 能够存储历史数据。

HBase 的数据模型

以下是 HBase 的数据模型的简要概述。数据表由行、列族、列和时间戳组成。

  • 行：唯一标识记录的键。
  • 列族：一组相关列的集合。
  • 列：在列族下的具体数据字段。
  • 单元格：行和列交叉处的数据。
  • 时间戳：用于标识数据版本。
contains contains contains HBaseTable +String rowKey +Map>> data ColumnFamily +String name Column +String name Cell +Object value +long timestamp

如何在 HBase 中存储和查询数据

以下是一些使用 Java API 操作 HBase 的基本示例。首先，我们需要确保 HBase 服务已经启动，并且我们已经添加了相应的 HBase 依赖库到我们的项目中。

添加依赖

在 Maven 项目的 pom.xml 文件中添加 HBase 依赖：

<dependency>
    <groupId>org.apache.hbase</groupId>
    <artifactId>hbase-client</artifactId>
    <version>2.4.5</version>
</dependency>
<dependency>
    <groupId>org.apache.hbase</groupId>
    <artifactId>hbase-server</artifactId>
    <version>2.4.5</version>
</dependency>
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
连接到 HBase 并创建表

接下来，我们将连接到 HBase 并创建一个名为 students 的表，包含一个列族 info：

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.HBaseConfiguration;
import org.apache.hadoop.hbase.client.Admin;
import org.apache.hadoop.hbase.client.Connection;
import org.apache.hadoop.hbase.client.ConnectionFactory;
import org.apache.hadoop.hbase.table.HTableDescriptor;
import org.apache.hadoop.hbase.table.HColumnDescriptor;
import org.apache.hadoop.hbase.table.TableName;

public class HBaseExample {
    public static void main(String[] args) throws Exception {
        Configuration config = HBaseConfiguration.create();
        try (Connection connection = ConnectionFactory.createConnection(config)) {
            Admin admin = connection.getAdmin();
            TableName tableName = TableName.valueOf("students");
            if (!admin.tableExists(tableName)) {
                HTableDescriptor tableDescriptor = new HTableDescriptor(tableName);
                HColumnDescriptor columnDescriptor = new HColumnDescriptor("info");
                tableDescriptor.addFamily(columnDescriptor);
                admin.createTable(tableDescriptor);
                System.out.println("Table created: " + tableName);
            }
            admin.close();
        }
    }
}
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.
  • 19.
  • 20.
  • 21.
  • 22.
  • 23.
  • 24.
  • 25.
  • 26.
插入数据

使用以下代码将数据插入到 students 表中：

import org.apache.hadoop.hbase.client.Put;
import org.apache.hadoop.hbase.client.Table;
import org.apache.hadoop.hbase.client.Connection;
import org.apache.hadoop.hbase.client.ConnectionFactory;
import org.apache.hadoop.hbase.table.TableName;

public void insertData(String rowKey, String name, String age) throws Exception {
    try (Connection connection = ConnectionFactory.createConnection(config)) {
        Table table = connection.getTable(TableName.valueOf("students"));
        Put put = new Put(rowKey.getBytes());
        put.addColumn("info".getBytes(), "name".getBytes(), name.getBytes());
        put.addColumn("info".getBytes(), "age".getBytes(), age.getBytes());
        table.put(put);
        System.out.println("Data inserted for row: " + rowKey);
        table.close();
    }
}
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
查询数据

通过以下代码从 HBase 中查询数据：

import org.apache.hadoop.hbase.client.Get;
import org.apache.hadoop.hbase.client.Result;
import org.apache.hadoop.hbase.client.Table;
import org.apache.hadoop.hbase.client.Connection;
import org.apache.hadoop.hbase.client.ConnectionFactory;
import org.apache.hadoop.hbase.table.TableName;

public void fetchData(String rowKey) throws Exception {
    try (Connection connection = ConnectionFactory.createConnection(config)) {
        Table table = connection.getTable(TableName.valueOf("students"));
        Get get = new Get(rowKey.getBytes());
        Result result = table.get(get);
        byte[] name = result.getValue("info".getBytes(), "name".getBytes());
        byte[] age = result.getValue("info".getBytes(), "age".getBytes());
        System.out.println("Name: " + new String(name) + ", Age: " + new String(age));
        table.close();
    }
}
  • 1.
  • 2.
  • 3.
  • 4.
  • 5.
  • 6.
  • 7.
  • 8.
  • 9.
  • 10.
  • 11.
  • 12.
  • 13.
  • 14.
  • 15.
  • 16.
  • 17.
  • 18.

HBase 数据存储的优缺点

使用 HBase 存储数据有其优缺点。HBase 的优点包括高可扩展性、高性能、处理大规模数据的能力。然而，它也存在一些缺点，例如复杂的配置和维护、以及对实时数据处理的支持有限。

HBase 优缺点 60% 40% HBase 优缺点 优点 缺点

结论

HBase 是一个强大的工具，适用于处理大量结构化数据。通过上述示例，我们了解了如何在 HBase 中创建表、插入数据和查询数据。这些基本操作为我们进一步探索 HBase 的高级特性提供了良好的基础。随着数据处理需求的不断增加，HBase 在大数据生态系统中的重要性只会越来越大。希望这篇文章对你理解 HBase 的数据存储有帮助！