python 连接HBase服务器遇到的一个坑

最新推荐文章于 2023-09-08 18:14:23 发布
最新推荐文章于 2023-09-08 18:14:23 发布
阅读量1.9k 收藏 1
点赞数
分类专栏： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_37587216/article/details/81185471
版权

在使用python连接HBase安装各种依赖包的过程中需要根据  HBase 的源码来生成一个gen-py包，我使用的是python3.5,HBase的版本是1.2.6，在/hbase-1.2.6.1/hbase-thrift/src/main/resources/org/apache/hadoop/hbase 文件夹下面有两个文件夹  thrift  thrift2，网上查来的许多资料都是使用 thrift下的 Hbase,执行thrift -gen py Hbase.thrift ：但是在我这里总是报一个错：

 [WARNING:/webapps/hbase-1.2.6.1/hbase-thrift/src/main/resources/org/apache/hadoop/hbase/thrift/Hbase.thrift:89] The "byte" type is a compatibility alias for "i8". Use "i8" to emphasize the signedness of this type.

后来我选择使用  thrift 下的 hbase.thrift:果然成功了

qq_37587216
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
完美解决 HBase 连接 Python3.88
个人博客地址为https://elikgrade.gitee.io/
04-21 927
完美解决 HBase 连接 Python3.88
[bigdata-128] python3以thrift2的方式连接hbase
大数据和机器学习研究
11-16 2318
1.hbase的版本是1.2.6。hbase必须启动thrift2服务。 2.客户端操作系统是ubuntu 16.04。python版本3.5 3.客户端 安装 thrift 3.1 官网 http://thrift.apache.org/ 3.1 获取源码 git clone https://github.com/apache/thrift.git 3.2 编译 cd th...
python3连接hbase包
07-06
网上好多Hbase.py都是python2的，各种报错，我提供一种python3的，无报错，欢迎大家下载。
python3 连接HBase
weixin_30794499的博客
08-08 968
db_url = 'http://47.93.89.99:8765' from traceback import format_exc import phoenixdb as pb class Utils(object): def get_db_conn(self, url): """ this function is able to...
Python3通过thrift连接hbase库_修改版，个人已验证
08-22
python3通过thrift连接hbase模块修改版,其中hbase-python3,里面的path，根据实际实际路径修改.
Python连接hbase错误原因详解
最新发布
lIujunXHU的博客
09-08 701
要解决这个问题，你可以将 hbase.regionserver.thrift.http 的值设置为 false，重启 HBase Thrift 服务，并使用 HappyBase 基于 Thrift 协议进行连接和数据操作。由于 HappyBase 是基于原生的 Thrift 协议实现的 Python 客户端库，它不直接支持通过 HTTP 进行连接和读取数据。因此，如果你在 HappyBase 中尝试通过 HTTP 访问 HBase Thrift 服务，可能会导致无法读取数据的问题。
Python访问Hbase的库文件
10-18
然而，在学习和开发过程中，`Hbase.py`和`ttypes.py`可以作为一个有用的临时工具，帮助开发者更快地上手HBase。 总结起来，`Hbase.py`和`ttypes.py`是为了解决Python在访问HBase时遇到的导入问题而创建的，它们通过...
【Python3】Hbase API
07-23
首先，我们需要了解Python中用于连接HBase的库——HappyBase。HappyBase是一个Python库，它提供了一种更面向对象的方式来与HBase交互，使Python程序员能够更容易地利用HBase的功能。安装HappyBase可以通过pip命令...
thrift_forPython3_0.9.3
11-01
标题 "thrift_forPython3_0.9.3" 指的是一个针对Python 3的Thrift库的特定版本，版本号为0.9.3。Thrift是一种跨语言的服务开发框架，它允许开发者定义服务接口和服务数据类型，然后自动生成在多种编程语言中使用的...
hbase-elasticsearch:从 hbase 创建弹性搜索索引的脚本
07-19
首先，你需要安装`happybase`，然后创建一个连接到HBase服务器的连接。 2. **定义映射**：确定HBase表中的列族和列如何映射到Elasticsearch的索引和字段。这涉及到对数据结构的理解，以便正确地组织和解析数据。 3...
python3访问HBase数据库
on the way . . .
01-17 2944
python3访问HBase数据库1 介绍2 启动thrift-server3 安装thrift-client3.1 安装依赖3.2 安装boost3.3 安装thrift客户端4 使用python3连接Hbase（hbase-thrift）5 常用方法介绍 1 介绍 Hbase是用Java写的，它原生地提供了Java接口，对非Java程序人员，它也提供了thrift接口，因此也可以采用其他语...
Python连接Hbase
02-14
Python环境下通过thrift操作hbase所需的模块
python3 hbase 库
09-07
解压后复制到dist-packages/目录下即可。 具体用法可以查看源码。。。。。。。。。。。。。。。。。。。。。
python3 使用 thrift 操作hbase 安装hbase-thirft后有一个Hbase报错
11-16
python3 使用 thrift 操作hbase 安装hbase-thirft后有一个Hbase报错 使用这个修改完成的Hbase类替换掉原来的Hbase类问题全部解决 主要是因为python版本兼容性带来的问题
python3使用thrift操作hbase hbase-thirft报错解决
10-24
python连接hbase需要用到hbase-thirft类库，但是hbase-thirft只在python2下能正常使用，如果在python3下，会报错，主要有一下几个错误 except IOError, io: SyntaxError: invalid syntax ModuleNotFoundError: No module named 'ttypes' NameError:name ‘xrange’ is not defined 这几个都是python3和python2语法不兼容导致的，下载的包已经把这些错误结果了，在python下能正常使用
Python通过Phoenix访问HBase
czdsdhryes的博客
06-09 427
直接上代码 首先是安装方式 pip install phoenixdb==0.7 记得加上版本号，不加的话在ubuntu 18.04及以上各种报错，类似g++、gcc找不到等等 测试代码 import phoenixdb import phoenixdb.cursor database_url = 'http://192.170.41.197:8765/' #Phoenix默认端口号8765 conn = phoenixdb.connect(database_url, autocommit=True)
【python 连接hbase】python连接hbase 简单
赖德发的博客
08-01 3408
python是通过thrift去访问操作hbase 1、首先需要先安装happyhbase和thrift pip install happybase pip install thrift 2、需要修改源码一个文件parser.py 如果执行的时候报错： py.parser.exc.ThriftParserError: ThriftPy does not support generati...
使用python通过Thrift连接Hbase(Demo)
code_lab
09-27 334
# coding=utf-8 from thrift.transport import TSocket, TTransport from thrift.protocol import TBinaryProtocol from hbase import Hbase socket = TSocket.TSocket('xxx.xxx.xxx.xxx', port) socket.setTimeou...
（Hadoop）HBase分布式数据库
Python1One的博客
09-05 696
简介 是一个高可靠性、高性能、面向列、可伸缩的分布式数据库。目标是储存并处理大型的数据。有一下特点 容量大：可以存储成千上万的行和列组成的数据 面向列：HBase是面向列的存储和权限控制。列存储，其数据在表中是按照每列存储的，根据数据动态怎能更加列，并且可以单独对列进行各种操作。 多版本：HBase中表的每一个列的数据存储都有多个版本Version。一般的每一列队形一条数据，但是有的数据会对应多...
python链接hbase模块_Python连接Hbase
05-25
要连接HBase，需要使用Python的happybase模块。安装happybase模块可以使用pip命令： ``` pip install happybase ``` 接下来，可以使用以下代码连接HBase： ```python import happybase # 连接HBase connection =...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值