数据库
cactus233
这个作者很懒,什么都没留下…
展开
-
Python 爬取网页上的图片 以及hbase数据库中图片的读写
背景:根据图片网址爬取图片,使用python实现预习:Hbase数据库中是列族,可以根据列族:列名设置自己储存的列信息,列名可以自由添加和设置,灵活度很高1、使用urllib 保存到本地或者其他地址(数据库暂时还没有尝试)import urlliburllib.request.urlretrieve(imgurl, 'tmp.jpg')2、使用 opencv+urllib+nu...原创 2019-05-24 23:34:01 · 953 阅读 · 1 评论 -
Ubuntu下 使用impala 访问数据库
背景:Ubuntu系统下利用python访问集群上的数据库1、python环境中安装pandas包和impala 包apt install pandasapt install impala2、py文件中加入from impala.dbapi import connect3、相关功能代码from impala.dbapi import connectfrom imp...原创 2019-05-23 16:17:18 · 613 阅读 · 0 评论 -
HBase 相关包thriftpy2使用错误
背景:在使用thriftpy2包和happybase包读写数据是出现下面的错误出错代码在table.put()语句,实际是链接数据库的设置不恰当,在connnection的参数设置做以下修改 transport='framed', # Default: 'buffered' <---- Changed. protocol='compact' # Default: 'bin...原创 2019-05-29 01:05:38 · 1572 阅读 · 0 评论