presto
关注
分享
扫一扫
TracyGao01
保持专注
展开
-
Presto、Impala性能比较
下面是Presto、Impala这两种典型的内存数据库的简单测试比较，当然这种内存数据库类似的还有spark sql,这种数据库在大数据量，多表关联查询时，会展现出自己的优势，下面是一组impala和presto的性能对比图：环境准备：1台32G内存、2台16G内存，没有完全把内存配置饱和测试数据：hive中3张2000W数据量的表集群：impala和presro部署在3台机器上原创 2018-01-22 01:32:09 · 29475 阅读 · 5 评论 -
presto环境搭建
1、环境准备支持操作系统：Linux or Mac OS XJava 8, 64-bitPython 2.4+支持hadoop集群环境版本：Apache Hadoop 1.xApache Hadoop 2.xCloudera CDH 4Cloudera CDH 5备注：这里我们准备三台Ubuntu 14.04并且搭建CDH5.10集群2、下载安装包presto-se...原创 2018-01-09 15:22:45 · 6248 阅读 · 1 评论 -
presto报错：outputFormat should not be accessed from a null StorageFormat
报错如图：这个问题是因为presto不支持任何形式hHive StorageHandlers.像hbase,es这种在hive见外部表对于presto都是不可行的，也就是hive表InputFormat、OutputFormat不能为空，如下图就不行:...原创 2018-01-09 15:45:55 · 2345 阅读 · 2 评论