python连接hbase

  1. # -*- coding: UTF-8 -*-  
  2. # Author: wt  
  3.   
  4. import happybase  
  5. import pandas as pd  
  6.   
  7. conn = happybase.Connection(host = 'host_ip', port = 9090,  
  8.                     timeout=None,autoconnect=True,table_prefix=None,table_prefix_separator=b'_',  
  9.                     compat='0.98', transport='buffered',protocol='binary')  
  10. conn.open()  
  11.   
  12. table_cli = happybase.Table('ticktocks',conn)  
  13. rows = table_cli.scan(columns=['static:is_sensitive','static:tt_timestamp','static:uid'],filter="(SingleColumnValueFilter('static','tt_timestamp',>=,'binary:1532793600')) AND (SingleColumnValueFilter('static','tt_timestamp',<=,'binary:1532880000'))")  
  14.   
  15. l = []  
  16. for row in rows:  
  17.     l.append(row)  
  18. conn.close  
  19.   
  20. res = []  
  21.   
  22. for i in range(len(l)):  
  23.     ss = []  
  24.     aa = str(l[i][1]).split(',')  
  25.   
  26.     if len(aa)==3:  
  27. #         print(aa)  
  28.         ss.append(int(aa[0][-2]))  
  29.         ss.append(int(aa[2][18:-2]))  
  30.   
  31.     elif len(aa)==2:  
  32.         ss.append(0)  
  33.         ss.append(int(aa[1][18:-2]))  
  34.     else:  
  35.         print(aa)  
  36.   
  37.     res.append(ss)  
  38.   
  39. data = pd.DataFrame(res)  
  40. data = data.loc[:,[1,0]]  
  41. ...........
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值