在Python中通过spark访问hbase(单机版)

1、单机环境安装

(1)Jdk的安装,这个是后续环境安装的基础

(2)Hadoop的安装,这个是使用hbase的前提

(3)安装hbase,这个得找教程自己采坑了

(4)安装spark

2、Python中第三方包的安装

(1)thrift,这个是使用hbase的前提

(2)happybase,Python可以通过这个库访问hbase

(3)pyspark,Python通过这个连接spark

3、环境的启动顺序

(1)启动hadoop服务,这个是hbase能正常提供服务的基础

        ./sbin/start-all.sh

(2)在hbase安装目录的bin目录下启动thrift服务

        ./hbase-daemon.sh start thrift

(3)在hbase安装目录的bin目录下启动hbase服务

        ./start-hbase.sh

(4)在spark安装目录的sbin目录下启动spark服务

        bash start-all.sh

        ./start-all.sh

4、使用教程

(1)http://dblab.xmu.edu.cn/blog/1715-2/

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值