Python 链接 presto

最新推荐文章于 2024-09-29 09:44:21 发布

嘻哈吼嘿呵

最新推荐文章于 2024-09-29 09:44:21 发布

阅读量3.2k

点赞数

分类专栏： # Python

本文链接：https://blog.csdn.net/s294878304/article/details/102475602

版权

本文介绍了在Anaconda 3.x 和 Python3.x环境下链接Presto时遇到的模块安装问题，特别是使用conda安装时出现的'目标服务器积极拒绝'错误。解决方案包括尝试更换conda源以及在无代理环境下使用pip install命令进行安装。

摘要由CSDN通过智能技术生成

链接presto 需要安装以下模块

问题

解决

Anaconda 3.x 、Python3.x

链接presto 需要安装以下模块

conda install sasl
conda install thrift
conda install thrift-sasl
conda install PyHive

from sqlalchemy import *
from sqlalchemy.engine import create_engine
from sqlalchemy.schema import *
import pandas as pd
class Main():
    def __init__(self):
        pass

    def test_presto_connect(self):
        # Presto
        # host是服务器ip，port是端口，hive指的是Presto的catalog，my_schema是hive的schema。
        engine = create_engine('presto://ip:port/hive/parquet')  
        print(engine)
        # 和一般pandas从数据库中读取数据无任何区别，分析师们应该非常熟悉了。
        df = pd.read_sql("select * from table_name  limit 10", engine) 
        print(df)

    def test_presto_