
presto
文章平均质量分 91
晓之木初
船到桥头自然直,前提是你努力过!
展开
-
Presto启动报错:No such file or directory
sudo方式启动Presto,提示No such file or directory原创 2023-07-07 16:16:21 · 577 阅读 · 0 评论 -
结合Presto CLI,Presto Client学习
结合Presto CLI,学习Presto client如何与coordinator交互的。其中,REST API返回的response中的nextUri是推动查询进度的关键,StatementClientV1.advance()更是访问nextUri的关键方法原创 2023-04-15 11:52:47 · 946 阅读 · 0 评论 -
Presto本地开发,plugin的设置
Presto本地开发如何配置plugin的加载目录原创 2023-03-08 21:00:00 · 868 阅读 · 1 评论 -
win10基于IDEA,搭建Presto 0.280开发环境
在win10上,基于IDEA搭建presto开发环境原创 2022-07-16 21:39:55 · 1556 阅读 · 0 评论 -
选择TPC-H作为Presto性能测试的benchmark
1. 絮絮叨叨读书的时候,帮师兄打过下手:在不同的大数据组件上,执行TPC-H的benchmark,测试改造后的HDFS的性能工作中,需要选择合适的benchmark对改造后的Presto进行测试在benchmark的调研的过程中,又关注到了大名名鼎鼎的TPC-H在学习的过程中发现,TPC提供了很多不同用处的benchmark,需要根据实际情况选择合适的benchmark2. 什么是TPC在TPC的官网首页,有这样一段介绍:The TPC is a non-profit corpor原创 2022-05-29 00:28:52 · 1366 阅读 · 0 评论 -
mybatis基于c3p0连接池访问presto
1. 絮絮叨叨作为基于内存的、MPP架构的大数据查询引擎,presto支持多种数据源、无需自己的存储很多报表系统,会使用presto做查询引擎,加速查询公司自建的报表系统,一般都是基于Spring的Java Web系统,会使用数据库连接池访问presto业务基于c3p0数据库连接池,实现mybatis访问pressto,出现了一个固定的、执行时间较长的探活SQLSELECT TABLE_CAT, TABLE_SCHEM, TABLE_NAME, TABLE_TYPE, REMARK原创 2022-01-27 10:48:39 · 1923 阅读 · 0 评论 -
presto本地开发,访问Hive报错:Unable to create input format org.apache.hadoop.mapred.TextInputFormat
1. 序言出于工作需要,使用mac + IntelliJ IDEA,搭建了一个可以访问Hive的本地开发环境执行查询时报错:Query 20220422_084012_00000_34axr failed: Unable to create input format org.apache.hadoop.mapred.TextInputFormat查看日志,具体的报错信息如下:com.facebook.presto.spi.PrestoException: Unable to crea原创 2022-04-22 17:59:53 · 4325 阅读 · 0 评论 -
Presto部署到maven私服实战
1. 序言在玩Presto时,最多是mvn clean install -DskipTests在没有通过MAVEN_OPTS设置为较大内存时,甚至还用上了多线程加速-DskipTests,表示跳过测试-Dmaven.compile.fork=true,表示允许进行多线程编译-T表示多线程,2C表示每核2个线程。假设这是一个64核的服务器,则在进行构建时可以使用 2 * 64 = 128个线程mvn -T 2C clean install -DskipTests -Dmaven.compil原创 2022-05-22 16:13:05 · 461 阅读 · 0 评论