python 连接 hive 并读取数据

最新推荐文章于 2024-08-28 21:03:40 发布

Kukafee

最新推荐文章于 2024-08-28 21:03:40 发布

阅读量1.9k

点赞数

分类专栏： python 大数据技术类文章标签： hive python

本文链接：https://blog.csdn.net/Kukafee/article/details/117329372

版权

本文介绍了如何使用Python连接到Hive数据库，并提供了具体的示例代码，包括定义连接Hive的类DB_hive及操作示例。

摘要由CSDN通过智能技术生成

1. 连接hive类 DB_hive

class DB_hive(object):
    def __init__(self, db, con_dict):
        """
        初始化说明
        Args:
            db: hive中数据库名称
            con_dict: hive链接信息字典 eg:
                                        {'host': '192.168.0.163', # 连接服务器IP
                                         'port': 10000, # 端口号,默认10000
                                         'username': 'username', # 服务器登录用户名
                                         'database': 'database_name'  # 数据库名称 未用
                                         }
        """
        retry_times = 3  # 重试3次
        for i in range(retry_times):
            try:
                self.db_connect = hive.Connection(host=con_dict.get('host'),
                                                  port=con_dict.get('port'),
                                                  username&#