Python
文章平均质量分 59
韦晓阳
忘川,相忘回首已成川
展开
-
python phoenix API
一、phoenix Phonix是搜索引擎,n个版本之前是作为独立的产品存在的,现在集成到hbase里面。Phoenix是一个开源的HBASE SQL层。Phoeinx可以用标准的JDBC API替代HBASE client API来创建表,插入和查询查询HBASE中的数据。Phoenix作为应用层和HBASE之间的中间件,以下特性使它在大数据量的简单查询场景有着独有的优势...原创 2019-06-19 17:36:29 · 1137 阅读 · 0 评论 -
python redis API
一、redis redis是一个key-value存储系统。和Memcached类似,它支持存储的value类型相对更多,包括string(字符串)、list(链表)、set(集合)、zset(sorted set --有序集合)和hash(哈希类型)。这些数据类型都支持push/pop、add/remove及取交集并集和差集及更丰富的操作,而且这些操作都是原子性的。在此基础上,redis支...原创 2019-06-19 17:20:33 · 336 阅读 · 0 评论 -
python happybase API
一、环境准备下载happybase包 pip3 installhappybase 安装thrift 安装步骤:https://mp.csdn.net/postedit/82250725二、接口调用使用连接资源池方式configuration.properties[Hbase]hbase_host:172.8.10.xxhbase_port:9090hbase...原创 2019-06-19 17:00:56 · 1161 阅读 · 1 评论 -
python hbase API (二) thrift2
一、python hbase API (一) thrift2环境准备python hbase API (一) thrift2环境准备https://mp.csdn.net/postedit/86501781二、python hbase API (二)1、configuration.properties将configuration.properties放在项目的resour...原创 2019-01-16 10:02:13 · 1058 阅读 · 2 评论 -
python hbase API (一) thrift2环境准备
一、搭建hbase集群,安装thrift服务并启动安装步骤:https://blog.csdn.net/qq_21153619/article/details/82250725cd /usr/hdp/2.6.2.0-205/hbase/bin/ ./hbase-common.sh start thrift二、Thrift API 在网上很多人说在hbase根目录下存在Hbase.t...原创 2019-01-16 09:47:46 · 1196 阅读 · 0 评论 -
python 关闭redis连接
python读写redis时,到底需不需要关闭redis连接池连接?import redisdef RedisUtils(): pool = redis.ConnectionPool(host='172.8.10.145', port=6379, password="xxxxxx", decode_responses=True) r = redis.Redis(conne...原创 2018-12-12 13:36:57 · 11029 阅读 · 0 评论 -
python字符串前面u、r、b含义以及str、bytes互转
u/U:表示unicode字符串 不但是针对中文,也针对任何的字符串,代表是对字符串进行unicode编码。 一般英文字符在使用各种编码下, 基本都可以正常解析, 所以一般不带u;但是中文, 必须表明所需编码, 否则一旦编码转换就会出现乱码。 建议所有编码方式采用utf8。r/R:非转义的原始字符串 与普通字符相比,其他相对特殊的字符,其中可能包含转义字符,即那...原创 2018-12-05 18:30:45 · 8631 阅读 · 0 评论 -
linux下python2与python3并存
ambari底层的协议是走python2的,但是storm和spark运行python脚本的时候,需要python3的方法,所有这时候就需要python2与python3并存。1、查看Python2的版本ambari默认安装了python2.7.5 因为一些命令要用它比如yum 它使用的是python2.7.5。使用 python -V 查看python版本然使用 which ...原创 2018-11-29 17:24:48 · 19111 阅读 · 0 评论 -
linux下pip和pip3安装
1、pip#执行wget命令提示 -bash: wget: command not found yum -y install wget#安装pipwget https://bootstrap.pypa.io/get-pip.pypython get-pip.py#查看pip版本pip -V如果出现错误Traceback (most recent cal...原创 2018-11-29 14:01:10 · 70216 阅读 · 1 评论 -
python访问hbase数据
使用Python调用happybase库。thrift 是facebook开发并开源的一个二进制通讯中间件,通过thrift,我们可以用Python来操作Hbase1、概述Thrift最初由Facebook开发的,后来提交给了Apache基金会将Thrift作为一个开源项目。当时facebook开发使用它是为了解决系统中各系统间大数据量的传输通信以及系统之间语言环境不同需要跨平台的特性问题...转载 2018-09-11 08:56:29 · 4621 阅读 · 0 评论 -
python mysql API
一、环境准备mysql安装https://mp.csdn.net/postedit/81771687 下载依赖包 pip3 install pymysql二、接口调用以下罗列两种实现方式,第一种:是原生的;第二种:集成pandas的,原理是ORM对象关系映射技术,即ORM(Object-Relational Mapping)技术,指的是把关系数据库的表结构映射到对象上,通过使...原创 2019-06-19 17:55:26 · 517 阅读 · 0 评论