【大数据】利用Python进行Hbase查询的简易指南

一、基本信息

可用服务器IP:172.16.129.203
需要调用的Python扩展包:happybase、collections,分别用于与Hbase连接和字典计数。
查询前的准备需要在Linux命令行中输入代码,以查看thrift集群的调用情况:
jps //查看thrift是否得以调用
未被调用的情况:
被调用的情况:
如果未被调用,我们就要在Linux命令行中运行下列语句,实现thrift集群的调用:
hbase thrift start-port:9090
然后可以在同一个服务器下打开另一个窗口,进入到python shell中。
Python // 调用Python2.7的shell(目测语法上和Python3差别不大)

二、用Python实现项目所需的初步查询

Python连接HBASE数据集
import happybase #调用拓展包
connection=happybase.Connection(“172.16.129.203”,9090) #普通连接
#连接池连接
pool = happybase.ConnectionPool(size=10, host=‘172.16.129.203’) #建立连接池
connection.open()#打开连接
#输出HBASE的表格名称
with pool.connection() as connection:
print connection.tables()
connection.close()#关闭连接
#目前来看,需要通过打开与关闭连接来减少报错。连接池连接可能会好一些,但也要通过该方法减少报错。具体报错项为:
thriftpy2.transport.base.TTransportException: TTransportException(message=‘TSocket read 0 bytes’, type=4)

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值