（二）presto安装并集成hive

最新推荐文章于 2024-07-30 04:03:58 发布
最新推荐文章于 2024-07-30 04:03:58 发布
阅读量3k 收藏 3
点赞数
分类专栏： presto presto安装 presto hive presto集成hive presto superset
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Alongpo/article/details/89499400
版权
本文档介绍了如何安装Presto并将其与Hive集成，以供Superset前端展示数据。详细步骤包括从官方网站下载Presto服务器，配置hadoop和hive的相关属性，启动Presto客户端和服务，以及利用Presto查询Hive数据并导出为CSV文件。
摘要由CSDN通过智能技术生成

目的是实现superset前端数据展示，presto作为后台查询引擎，查询hive中数据
前面的文章：（一）Superset安装 https://blog.csdn.net/Alongpo/article/details/89316827
安装presto:
1.下载presto：
官网地址： https://prestodb.github.io/
下载地址页面： https://prestodb.github.io/docs/current/installation/deployment.html
下载地址这个是我写文档是的最新版为0.218，我安装的是0.196，因为这个还是孵化的项目，所以更新的比较快：https://repo1.maven.org/maven2/com/facebook/presto/presto-server/0.218/presto-server-0.218.tar.gz
在这里插入图片描述
架构

最低0.47元/天 解锁文章
Alongpo
关注
专栏目录
PrestoHive整合原理与代码实例讲解
AI天才研究院
06-06 597
Presto-Hive整合原理与代码实例讲解 1.背景介绍 在大数据时代,海量数据的存储和计算成为了一个巨大的挑战。Apache Hive作为构建在Hadoop之上的数据仓库工具,为结构化数据的存储和查询提供了强大的SQL支持。然而,由于Hive基于MapReduce计算框架,其
presto集群安装&整合hive|mysql|jdbc
weixin_33979203的博客
09-20 292
Presto是一个运行在多台服务器上的分布式系统。 完整安装包括一个coordinator（调度节点）和多个worker。 由客户端提交查询，从Presto命令行CLI提交到coordinator。 coordinator进行解析，分析并执行查询计划，然后分发处理队列到worker中。目录：搭建前环境准备集群计划连接器安装步骤配置文件运行presto整合hive测试整合mys...
presto 集群安装 hive
最新发布
weixin_37083753的博客
07-30 35
Presto 集群安装 Hive 指南 Presto 是一个高性能、分布式 SQL 查询引擎，它允许用户以 SQL 的方式查询各种数据源。Hive 是一个基于 Hadoop 的数据仓库工具，它提供了一种类似于 SQL 的查询语言，称为 HiveQL。将 Presto 与 Hive 结合使用，可以充分利用 Presto 的查...
(二)presto集成Hive
hyj
11-17 1746
一、集成之前 在presto集成Hive之前，要先启动Hive;由于Hive依赖HDFS,并且这里环境其元数据存储在mysql中，故在启动Hive之前要先启动HDFS和Mysql; 1、主节点启动hdfs [root@master sbin]# pwd /opt/softWare/hadoop/hadoop-2.7.3/sbin [root@master sbin]# ./start-all.sh 2、启动Mysql [root@master ~]# mysql -u root -p 3、启
presto集群与hadoop，hive集群整合
热门推荐
lx91216的专栏
10-31 1万+
Presto是一个开源的分布式SQL查询引擎，适用于交互式分析查询，数据量支持GB到PB字节。Presto的设计和编写完全是为了解决像Facebook这样规模的商业数据仓库的交互式分析和处理速度的问题。 集群涉及到的插件有hdfs，hive。presto版本：presto-0.152.3，hadoop版本：hadoop-2.6.4，hive版本：hive-1.2.1，共三台集群。
presto集成Kerberos的hive
duanbaba的博客
06-23 604
目录 安装 下载安装包 解压presto-server包 创建etc目录 在etc目录创建需要配置文件 1. 创建config.propertie 2. 创建jvm.config 3. 创建log.properties 4. 创建node.properties 在etc目录下创建catlog目录 在catalog目录下配置数据源 1. 配置mysql数据源 2. 配置hive数据源（没权限） 客户端配置 测试 集成kerberos 生成persto主体
presto安装（基于cdh6.1集成hive+sentry）
belialxing的专栏
06-20 1971
官网： https://prestodb.github.io/docs/current/index.html 环境和软件信息: presto 0.221 linux centos7 cdh6.1.1 presto下载地址: https://repo1.maven.org/maven2/com/facebook/presto/presto-server/0.221/presto-server-...
单机版presto搭建 on hive3
zhu2525wei的博客
10-27 816
presto hive3
Presto最新版集成到Ambari
12-15
Presto最新版集成到Ambari，包含脱机安装。presto-server-rpm-0.191.rpm，presto-cli-0.190.gar
PyHive:Hive和Presto的Python接口。 :honeybee:
05-12
PyHive PyHive是和的Python 和接口的集合。 用法 数据库API from pyhive import presto # or import hive or import trino cursor = presto . connect ( 'localhost' ). cursor () cursor . execute ( 'SELECT * FROM my_awesome_data LIMIT 10' ) print cursor . fetchone () print cursor . fetchall () DB-API（异步） from pyhive import hive from TCLIService . ttypes import TOperationState cursor = hive . connect ( 'localhost' ). cu
Presto安装部署教程（附hive集成教程
08-24 1049
Presto安装部署教程前言环境安装配置config.propertiesjvm.configlog.propertiesnode.propertiescatalog启动并验证 前言 作为OLAP的一员，presto发挥着连接异构数据源的重要作用，目前presto已经集成了20多种数据源，可谓是非常丰富，官方还提供了自定义插件开发接口。所以，倘若你的数据源支持jdbc且使用的是标准的sql语法，那么只需要简单几步就可以整合其他数据源，比如clickhouse/kylin等。 本文只介绍presto安装部署教
Presto？还是 Hive？ 你们知道大数据查询性能谁更强吗？
博文视点（北京）官方博客
09-02 5610
技术控们，你们知道大数据查询性能谁更强吗？ 经过对 Presto 和 Hive 的性能做了大量的对比测试，最终结果表明： Presto 的平均查询性能是 Hive 的 10 倍！ 由于 Presto 的数据源具有完全解耦、高性能，以及对 ANSI SQL 的支持等特性，使得 Presto 在 ETL、实时数据计算、 Ad-Hoc 查询和实时数据流分析等多个业务场景中均能发挥重要的作用。一、实时...
hue整合sparksql和presto
Jatham_C的博客
10-29 1819
常见问题 参考文档 整合spark 先开启 ${spark_home}/sbin/start-thriftserver.sh [spark] # Host of the Spark Thrift Server # https://spark.apache.org/docs/latest/sql-distributed-sql-engine.html sql_server_host=localhost # Port of the Spark Thrift Server sql_server_port=1
用python连接hive和presto并进行查询和插入
Lenskit
12-12 1万+
安装pyhive，连接presto并用pandas读取： ​import pandas as pd from sqlalchemy.engine import create_engine from pyhive import hive # 准备语句 sql = "select * from table" engine1 = create_engine('presto://ip:port/...
Centos7- 之presto-0.252安装单节点(mysql、hive联表查询)
shufangreal的博客
05-09 230
Centos7 - 之presto-0.252安装 1 前提条件-jdk的安装，并且配置环境变量 # java必须是jdk8_151以上，这里选用jdk1.8.0_291 export JAVA_HOME=/opt/module/jdk1.8.0_291 export JRE_HOME=$JAVA_HOME/jre export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH export PATH=$JAVA_HOME/bin:$JRE_HOME/bin
安装Presto单机版
zwahut的专栏
05-21 860
1.下载presto安装包 https://prestodb.io/docs/current/installation/deployment.html presto-server-0.215.tar.gz #上传到192.168.6.12 /opt/presto目录下 scp presto-server-0.215.tar.gz root@192.168.6.12:/opt/presto ...
Hive入门指南：安装、运行与实战教程
3. **SQL-on-Hadoop技术扩展**：除了Hive本身，还有其他类似的技术如Cloudera Impala（使用Hive元数据）、Apache Stinger（支持Tez）、Facebook Presto和Apache Drill，这些都提供了更快的查询性能和SQL兼容性。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值