HBase的安装和基础使用

最新推荐文章于 2024-04-03 01:00:00 发布
最新推荐文章于 2024-04-03 01:00:00 发布
阅读量1.1k 收藏 4
点赞数 1
分类专栏： 笔记 文章标签： hbase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43279579/article/details/116143489
版权

文章目录

平台：阿里云轻量级应用服务器
hadoop：3.2.2
hbase：2.3.5

一、安装HBase

(一)下载安装文件

  1. 下载HBase
    hbase各个版本安装包查看链接：
    https://downloads.apache.org/hbase/
    HBase 2.3.5的安装包链接：
    https://downloads.apache.org/hbase/2.3.5/hbase-2.3.5-bin.tar.gz
  2. 终端下载
    wget https://downloads.apache.org/hbase/2.3.5/hbase-2.3.5-bin.tar.gz
  3. 解压并改名
    sudo  tar  -zxf  ./hbase-2.3.5-bin.tar.gz  -C  /usr/local
sudo  mv  /usr/local/hbase-2.3.5  /usr/local/hbase

(二)配置环境变量

  1. 添加环境变量
    sudo nano ~/.bashrc
    在这里插入图片描述
  2. 使环境变量生效
    source ~/.bashrc

(三)添加用户权限

  1. 系统的hadoop用户添加访问HBase目录的权限
    cd  /usr/local
sudo  chown  -R  hadoop  ./hbase

(四)查看HBase版本信息

  1. 查看版本
     /usr/local/hbase/bin/hbase version
    在这里插入图片描述

二、HBase的配置

  1. 模式的选择
    单机和伪分布式两者模式，本文章是对于单机模式的配置。

  2. 单机模式配置
    编辑hbase-env.sh

    sudo nano /usr/local/hbase/conf/hbase-env.sh

    将对应的变量修改如下

    路径是自己对应的路径
    export JAVA_HOME=/usr/lib/jvm/java-8-oracle
    export HBASE_CLASSPATH=/usr/local/hbase/conf
    export HBASE_MANAGES_ZK=true

    配置hbase-site.xml文件

    sudo nano /usr/local/hbase/conf/hbase-site.xml

    内容修改如下

    <configuration>
        <property>
                <name>hbase.rootdir</name>
                <value>hdfs://localhost:9000/hbase</value>
        </property>
        <property>
                <name>hbase.cluster.distributed</name>
                <value>true</value>
        </property>
        <property>
                <name>hbase.unsafe.stream.capability.enforce</name>
                <value>false</value>
        </property>
</configuration>

  3. 启动运行HBase

    说明：启动前必须先启动hadoop，再启动hbase，顺序不能更改

    启动过程

    ssh localhost
cd /usr/local/hadoop
./sbin/start-dfs.sh
cd /usr/local/hbase
bin/start-hbase.sh

  4. jps查看进程
    在这里插入图片描述

  5. 停止运行HBase

    bin/stop-hbase.sh
#停止运行hadoop
cd /usr/local/hadoop
./sbin/stop-dfs.sh

三、HBase常用Shell命令

  1. 进入shell模式
    bin/hbase shell
  2. 在HBase中创建表
    建表描述
    创建一个表student，该表包含Sname、Ssex、Sage、Sdept、course等字段
    建表方法
    create 'student','Sname','Ssex','Sage','Sdept','course'
    在这里插入图片描述
  3. 添加数据
    put：
    添加数据方法举例
    put 'student','95001','Sname','LiYing'
put 'student','95001','Ssex','male'
put 'student','95001','Sage','22'
put 'student','95001','Sdept','CS'
put 'student','95001','course:math','80'
    在这里插入图片描述
  4. 查看数据
    get命令：用于查看表的某一个单元格数据；
    scan命令：用于查看某个表的全部数据。
    查看数据举例
    #查看某一行数据
get 'student','95001'
#查看表的全部数据
scan 'student'
    在这里插入图片描述
  5. 删除数据
    delete：通常删除某一个单元格数据
    deleteall：通常删除某一行数据
    delete 'student','95001','Ssex'
deleteall 'student','95001'
    在这里插入图片描述
  6. 删除表
    先让该表不可用，再删除表
    disable 'student'  
drop 'student'
  7. 查询历史数据
    创建一个新的表（括号内的含义表示指定保存的版本数）
    create 'teacher',{NAME=>'username',VERSIONS=>5}
    添加数据
    put 'teacher','91001','username','Mary'
put 'teacher','91001','username','Mary1'
put 'teacher','91001','username','Mary2'
put 'teacher','91001','username','Mary3'
put 'teacher','91001','username','Mary4'  
put 'teacher','91001','username','Mary5'
    查询历史数据举例
    get 'teacher','91001',{COLUMN=>'username',VERSIONS=>5}
get 'teacher','91001',{COLUMN=>'username',VERSIONS=>3}
    在这里插入图片描述
    默认显示最新添加的数据
  8. 退出HBase数据库
    退出shell命令
    exit

四、HBase编程实践

(一)Eclipse中创建项目

  1. 打开Eclipse，选择File->New->other
    在这里插入图片描述
  2. 进行工程的设置
    在这里插入图片描述

(二)项目添加需要用到的JAR包

  1. 首先选中Classpath，然后点击Add External JARs
  2. 选择对应jar包所在的路径,我的路径为/usr/local/hbase/lib
    在这里插入图片描述

(三)编写Java应用程序

  1. 创建一个class
  2. 编写代码
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.*;
import org.apache.hadoop.hbase.client.*;
import org.apache.hadoop.hbase.util.Bytes;
 
import java.io.IOException;
public class ExampleForHBase {
    public static Configuration configuration;
    public static Connection connection;
    public static Admin admin;
    public static void main(String[] args)throws IOException{
        init();
    	createTable("student",new String[]{"score"});
        insertData("student","zhangsan","score","English","69");
        insertData("student","zhangsan","score","Math","86");
        insertData("student","zhangsan","score","Computer","77");
        getData("student", "zhangsan", "score","English");
        close();
    }
    public static void init(){
        configuration  = HBaseConfiguration.create();
        configuration.set("hbase.rootdir","hdfs://localhost:9000/hbase");
        try{
            connection = ConnectionFactory.createConnection(configuration);
            admin = connection.getAdmin();
        }catch (IOException e){
            e.printStackTrace();
        }
    }
    public static void close(){
        try{
            if(admin != null){
                admin.close();
            }
            if(null != connection){
                connection.close();
            }
        }catch (IOException e){
            e.printStackTrace();
        }
    }
     public static void createTable(String myTableName,String[] colFamily) throws IOException {
        TableName tableName = TableName.valueOf(myTableName);
        if(admin.tableExists(tableName)){
            System.out.println("talbe is exists!");
        }else {
            TableDescriptorBuilder tableDescriptor = TableDescriptorBuilder.newBuilder(tableName);
            for(String str:colFamily){
                ColumnFamilyDescriptor family = 
ColumnFamilyDescriptorBuilder.newBuilder(Bytes.toBytes(str)).build();
                tableDescriptor.setColumnFamily(family);
            }
            admin.createTable(tableDescriptor.build());
        } 
    }
    public static void insertData(String tableName,String rowKey,String colFamily,String col,String val) throws IOException { 
        Table table = connection.getTable(TableName.valueOf(tableName));
        Put put = new Put(rowKey.getBytes());
        put.addColumn(colFamily.getBytes(),col.getBytes(), val.getBytes());
        table.put(put);
        table.close(); 
    }
    public static void getData(String tableName,String rowKey,String colFamily, String col)throws  IOException{ 
        Table table = connection.getTable(TableName.valueOf(tableName));
        Get get = new Get(rowKey.getBytes());
        get.addColumn(colFamily.getBytes(),col.getBytes());
        Result result = table.get(get);
        System.out.println(new String(result.getValue(colFamily.getBytes(),col==null?null:col.getBytes())));
        table.close(); 
    }   
}

(四)编译运行程序

  1. 点击运行后，选择Run As->Java
  2. 出现问题
    Failed to instantiate SLF4J LoggerFactory
    解决方法
    导入slf4j-api和log4j相应的jar包，最后是在导入jar包的时候，将对于目录下所有的包及子目录下的包都导入。
  3. 运行结果
    控制台不断地打印输出，其中还存在一些错误。通过shell命令，可以对于hbase数据库进行查看，查看发现新建的表没有成功被创建。

五、参考资料

http://dblab.xmu.edu.cn/blog/2799-2/

HarrietLH
关注
专栏目录
HBase安装和基本使用
Mr.Sheep的博客
10-18 441
HBase安装和基本使用 安装前的规划 集群中机器名：master、slave1、slave2 单机方式安装 注意：单机方式安装时若安装所在的机器上有已经启动的zookeeper，要将其关闭，因为HBase内部会启动一个单机版的zookeeper，一般两者都使用2181端口，可能会造成端口冲突。  配置JAVA_HOME 进入到Hbase的安装路径下的conf目录，在hbase-env.sh文件...
hbase安装与使用
10-10
在本地模式下，hbase只需要安装JDK就可以了。 若使用HDFS文件系统模式，除了JDK，还需要安装hadoop(HDFS是hadoop的旗舰级文件系统，是hadoop项目的核心子项目，安装hadoop会带有hdfs)，本版本hbase依赖安装的hadoop版本是2.4.1
hbase安装和使用
04-23
本资源为hbase的安装和使用，内含hbase安装工具包，hbase的安装说明，hbase的使用说明 。
HBase的安装部署和使用
shenhao-stu的博客
04-24 778
HBase的安装部署和使用 文章目录HBase的安装部署和使用实验环境实验内容实验步骤1.点击"命令行终端"，打开新的命令行窗口2.解压安装包3.更改文件夹名和所属用户4.设置HBASE_HOME环境变量5.修改hbase-site.xml配置文件6.修改hbase-env.sh配置文件7.启动hadoop8.启动HBase9.启动HBase Shell10.创建表11.put添加数据12.查看表内容13.查询14.修改内容15.添加列族16.删除列族17.删除表 HBase的安装部署和使用 实验环境 Li
Hbase安装使用与入门学习
mijichui2153的博客
08-19 1032
1.前言 随着部门全面上云的展开tlist(腾讯内部自研UGC数据存储)也到退出历史舞台的时候了，在关于tlist的替代者数mongodb和Hbase了。这里更多是参照别人的文章记录下Hbase的一些知识。 HBase作为nosql的典型代表，是一个分布式的、面向列的开源数据库，在大数据存储上广受欢迎，因此，第一站就来到这里。 网络上对于HBase的文档有很多，但是看了一圈，没有特别能让一个小白快速入门的介绍(这一点和原作者感同身受)。 本文作为一个入门文档，希望能通过自己的理解，来快速认识HBas
Hbase安装和使用
libaowenBlog的博客
08-23 605
其中HBASE_MANAGES_ZK，如果使用内置的ZooKeeper，则用true,否则false。
Hbase的安装和使用
JAVA & HTML
05-11 282
Hbase的安装和使用准备工具安装步骤安装单机版的Hbase使用单机版的Hbase安装集群hbase启动集群hbase 准备工具 一部安装好的hadoop和zookeeper的虚拟机 Hbase压缩包 安装步骤 安装单机版的Hbase 上传解压 配置Hbase的环境变量 export HBASE_HOME=/opt/software/Hbase/hbase-2.0.0 export PAT...
大数据技术基础实验报告-HBase安装配置和应用实践.doc
08-21
【大数据技术基础实验报告-HBase安装配置和应用实践】 这篇实验报告主要涵盖了HBase的安装、配置以及基本应用，这是大数据技术中一个重要的组件，它是一个分布式的、面向列的数据库，尤其适合处理大规模的数据。 1...
大数据实验Hbase安装部署和使用javaapi调用.pdf
11-02
【大数据实验Hbase安装部署和使用javaapi调用】 在这个实验中，我们将深入理解HBase在Hadoop生态系统中的角色，并掌握如何在Ubuntu 19.04操作系统上安装、配置和使用HBase，同时利用Java API进行编程。实验中使用的...
HBase安装和使用.pdf
03-28
HBase 安装和使用 HBase 是一个分布式的、面向列的 NoSQL 数据库，基于 Google 的 BigTable，主要用于存储和处理大量数据。下面是 HBase 的安装和使用相关知识点。 一、HBase 数据模型 HBase 的数据模型主要包括...
Hbase 安装与基本使用
08-07
NULL 博文链接：https://username2.iteye.com/blog/2106533
Hbase的安装过程及基本操作
10-11
来自一位老学姐的Hbase安装详细教程（清华大学镜像下）及基本操作，希望能带给你们些许帮助。主要包含Hbase的下载过程及其遇到的小问题，后续会继续完善该文档！
CDH-Hbase的安装1
08-03
通过以上步骤，我们可以确认HBase安装成功，并且可以进行基本的数据操作。随着需求的增长，可以进一步配置HBase的高级特性，例如设置复制、分区策略、优化查询性能等。在生产环境中，还需要关注HBase的监控和维护，...
基于集群的HBase安装和配置
02-08
### 基于集群的HBase安装和配置 #### Zookeeper简介 Zookeeper作为Hadoop生态中的关键组件，主要用于提供高可用性和分布式协调服务。它能够有效地管理Hadoop集群中的各种资源和服务，例如Hadoop NameNode管理和...
HBase安装及基本操作
C_Xiang_Falcon的博客
09-18 657
HBase安装及基本操作HBase安装部署Zookeeper正常部署Hadoop正常部署HBase的解压HBase的配置文件HBase远程发送到其他集群HBase服务的启动1．启动方式2．启动方式2查看HBase页面HBase Shell操作基本操作表的操作创建表插入数据到表扫描查看表数据查看表结构更新指定字段的数据查看“指定行”或“指定列族:列”的数据统计表数据行数删除数据清空表数据删除表变更表...
HBase安装以及基本操作
qq_45143653的博客
11-06 948
一、Zookeeper正常部署 首先保证Zookeeper集群的正常部署，并启动（每个节点都要启动） 二、Hadoop正常部署 Hadoop集群的正常部署并启动：start-dfs.sh start-yarn.sh 三、HBase解压 在/usr/lcoa目录下 执行：tar -zxvf hbase-1.3.6-bin.tar.gz 四、修改配置文件（/usr/local/hbas...
Hbase安装以及基本操作
lmchhh的博客
04-21 2749
Hbase基礎學習 文章目录Hbase基礎學習一，HBASE的安裝（MAC環境）1.1 修改配置文件1.1.1 hbase-env.sh1.1.2 hbase-site.xml1.2 配置環境變量1.3 運行1.4 常見問題1.4.1 JAVA_HOME is not set1.4.2 KeeperErrorCode = ConnectionLoss for /hbase1.4.3 hadoop安裝後hbase的ruby出錯二，Hbase常用命令三，Java使用Hbase3.1 过滤器Filter3.2 H
【大数据存储】实验3 HBase的安装和基本操作
最新发布
m0_70098011的博客
04-03 1609
1、创建一个表student，该表包含两个列族Sinfo和Course，其中Sinfo包含。5、为student表增加“STel”列族，添加每位同学的联系方式（电话列和邮。关系型数据库（比如MySQL）中，需要首先创建数据库，然后再创建表，但。是，在HBase数据库中，不需要创建数据库，只要直接创建表就可以。查询时，默认情况回显示当前最新版本的数据，如果要查询历史数据，需要。指定查询的历史版本数，由于上面设置了保存版本数为3，所以，在查询时。，创建一个teacher表，在创建表的时候，需要指定保存。
Hbase的安装和基本使用
KujyouRuri的博客
04-17 1175
Hbase介绍 hbase是bigtable的开源java版本。是建立在hdfs之上，提供高可靠性、高性能、列存储、可伸缩、实时读写nosql的数据库系统。 它介于nosql和RDBMS之间，仅能通过主键(row key)和主键的range来检索数据，仅支持单行事务(可通过hive支持来实现多表join等复杂操作)。 主要用来存储结构化和半结构化的松散数据。 Hbase查询数据功能很简单，不支持join等复杂操作，不支持复杂的事务（行级的事务） Hbase中支持的数据类型：byte[] 与hadoop一样，
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值