Python API(happybase)操作Hbase案例

最新推荐文章于 2024-10-08 10:00:00 发布
最新推荐文章于 2024-10-08 10:00:00 发布
阅读量296 收藏 10
点赞数 4
分类专栏： 程序员 文章标签： python hbase 开发语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_83817689/article/details/137475475
版权
本文详细介绍了如何在Linux环境下安装HBase的Thrift服务，配置HappyBase库，以及通过Python代码连接和操作HBase，包括表格设计、创建和插入数据。还提供了自来水公司数据导入的需求和HBase表格示例。
摘要由CSDN通过智能技术生成 
# 进入hbase安装目录下的bin目录
cd /usr/local/hbase-2.5.6/bin
#启动Thrift
hbase-daemon.sh start thrift
#jps查看进程
jps

至此启动Thrift服务并安装了happybase库后，即可用python代码连接HBase了。

如果启动失败，出现依赖相关错误，可以通过以下命令安装Thrift服务所需要的一系列依赖软件。

yum install automake libtool flex bison pkgconfig gcc-c++ boost-devel libevent-devel zlib-devel python-devel ruby-devel openssl-devel

**注意：**HBase Thrift的端口默认在9090 。

三、使用python连接HBase

（1）在pycharm新建一个pythonProject项目。

（2）在pythonProject项目下新建一个python文件，编写连接Hbase的python代码。

#1.导入happybase库
import happybase
#2.建立HBase的连接
conn = happybase.Connection(
    host="192.168.25.200",   #主机名
    port=9090,      #Thrift的默认端口号
    timeout=60
最低0.47元/天 解锁文章
2401_83817689
关注
专栏目录
python 访问hbase
技术博客
01-16 1070
通过thrift，我们可以使用python访问hbase。 关于thrift thrift是一个跨语言服务的软件开发框架（Thrift is a software framework for scalable cross-language services development.）。 它的官方网站是：http://incubator.apache.org/thrift/
HBase基础之HappyBase操作Hbase(5)
汪云辉的博客
02-27 566
HBase基础之HappyBase操作Hbase 什么是HappyBase HappyBase is a developer-friendly Python library to interact with Apache HBase. HappyBase is designed for use in standard HBase setups, and offers application...
Python笔记：happybase库简介
codename_cys的博客
11-17 3132
Python笔记：happybase库简介 1. happybase库简介 2. happybase库的安装 3. HBase数据库实例 4. HBase表格实例 5. 总结 6. 参考链接 1. happybase库简介 happybase是一个针对与Apache HBase数据库进行交互的python接口库。 其官方文档详见：https://happybase.readthedocs.io/en/latest/ 因此，为了更好地了解happybase工具，我们这里先简单地介绍一下HBase..
HappyBase，一个超厉害的Python库
最新发布
黑马非马的博客
10-08 1329
``HappyBase`` 是一个用于访问 Apache HBase 的 Python 库，它提供了一个丰富的 API，使得 Python 程序员可以轻松地与 HBase 进行交互，进行数据的增删改查等操作。通过 ``HappyBase``，可以简化与 HBase 集群的通信，提高开发效率。
python访问Hbase
comecheer.com
03-29 227
通过thrift访问 thrift配置见http://blog.csdn.net/moxpeter/article/details/7403074 确认hbase已经启动thrift服务，如果未启动，报错打印 thrift.transport.TTransport.TTransportException: TSocket read 0 bytes cd 到$HBASE/bin执行 hb...
使用Python-3.6连接操作远程完全分布式集群中的HBase-2.1
SL_World的博客
03-02 2887
前提条件 已安装Python-3.6。 已经有搭建好的完全分布式集群，并已经成功启动Hadoop，Zookeeper和HBase。笔者当前搭建好的集群是Hadoop-3.0.3，Zookeeper-3.4.13和HBase-2.1.0。 Hostname IP master 10.0.86.245 ceph1 10.0.86.246 ceph2 10.0.86.221 ...
python基于happybase库实现hbase工具类封装
lIujunXHU的博客
09-08 717
【代码】python使用happybase操作hbase工具类。
26个数据分析案例——第一站：基于Python的HBase冠字号查询系统
u014552259的博客
08-07 2661
26个数据分析案例——第一站：基于Python的HBase冠字号查询系统 实验所需环境 • Python: Python 3.x； • Hadoop 2.7.7环境； • HBase 1.3.5； 实验背景 针对于人民币的真假识别，最传统的方式就是一看、二摸、三听、四测四种方式，但随着不法分子仿制水平的提高，可能会通过一些技术手段欺骗我们，针对于这种情况我们可以建立一套针对于冠字号管理查询系统进行识别，以唯一的冠字号查询手段，检验真假，冠字号钞票的唯一编号，全世界仅有一个，如果有一个大表可以把所有的人民币以
HBase CRUD操作指南
# 1. HBase简介和基础概念 ## 1.1 HBase简介 HBase是一个分布式、可扩展、面向列的用于大数据存储的数据库管理系统，它运行在Hadoop文件系统...在深入了解HBase的CRUD操作之前，我们需要先了解几个基础概念： - 表
Python访问Hbase的库文件
10-18
Hbase.py 和 ttypes.py 用来替换原有的 hbase包里的文件，解决 from hbase import Hbase 报错问题。
python3连接hbase包
07-06
网上好多Hbase.py都是python2的，各种报错，我提供一种python3的，无报错，欢迎大家下载。
Python连接Hbase
02-14
Python环境下通过thrift操作hbase所需的模块
HBase数据模型详解与实际案例分析
HBase简介与基本概念 ## 1.1 HBase概述 HBase是一个构建在Hadoop之上，用于存储大规模结构化数据的分布式开源数据库。它是一个基于列的NoSQL数据库，具备高可靠性、高可扩展性和面向列存储的特点。 HBase是Google...
python访问hbase数据
qq_21153619的博客
09-11 4718
使用Python调用happybase库。thrift 是facebook开发并开源的一个二进制通讯中间件，通过thrift，我们可以用Python来操作Hbase 1、概述 Thrift最初由Facebook开发的，后来提交给了Apache基金会将Thrift作为一个开源项目。当时facebook开发使用它是为了解决系统中各系统间大数据量的传输通信以及系统之间语言环境不同需要跨平台的特性问题...
python访问、操作hbase
u014257954的专栏
10-19 709
我的环境是ubuntu16.04，hadoop版本2.6.5，hbase版本1.2.6。 参考了这个安装：http://blog.csdn.net/u010066807/article/details/51440481 问题出现在这里：cd hbase-1.2.1/hbase-thrift/src/main/resources/org/apache/hadoop/hbase/thrift thrhttp://wr
python happybase API
qq_21153619的博客
06-19 1181
一、环境准备 下载happybase包 pip3 installhappybase 安装thrift 安装步骤：https://mp.csdn.net/postedit/82250725 二、接口调用 使用连接资源池方式 configuration.properties [Hbase] hbase_host:172.8.10.xx hbase_port:9090 hbase...
python hbase_通过Python操作hbase api
weixin_39922749的博客
11-28 118
#coding=utf-8#Author: ruin"""discrible:"""from thrift.transport importTSocketfrom thrift.protocol importTBinaryProtocolfrom thrift.transport importTTransportfrom hbase importHbaseimportstruct#Method f...
Python通过Thrift操作HBase实战指南
"使用Python操作HBase，通过Thrift框架实现" 在本文中，我们将探讨如何使用Python通过Thrift接口操作Apache HBase，一个基于Google Bigtable理念设计的分布式存储系统。HBase提供多种访问接口，如HBase Shell、Java...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值