python连接Hive数据库

import pandas as pd
from impala.dbapi import connect

class Hive:
    def __init__(self, host, port=1050):
        self.conn = connect(host, port)
        self.cursor = self.conn.cursor()

    def close(self):
        self.cursor.close()
        self.conn.close()

    def dataframe(self, sql):
        return pd.read_sql(sql, self.conn)

class DataQuery:
    def __init__(self):
        self.hive = Hive('120.0.12.23')

class EvaluationModel:

    def __init__(self):
        self.dataquery = DataQuery()
        self.hive = Hive('120.0.12.23')
        
    def get_fnid(self,left,right,top,bottom):
        sql = 'select fnid from sts.fishnet where grow_4326>="{}" and grow_4326 <="{}" and gcol_4326>="{}" and gcol_4326<="{}"'.format(left,right,top,bottom)
        fnid_info = self.hive.dataframe(sql)
        # print(fnid_info)
        fnid  = []                          #得到fnid每一个列表,写进文件
        fnid.append(custid)
        for row in fnid_info.values:
            fnid_list.append(row[0])     #得到fnid的总列表
            fnid.append(row[0])
        with open('fnid_jihe_1.csv', 'a+') as f:
            for line in fnid:
                f.write(line + ',')
            f.write('\n')

 if __name__ == '__main__':
     EM = EvaluationModel()
     EM.get_fnid()
  • 2
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值