Data Warehouse
雨钓Moowei
一只
被硅基虫子调戏的
碳基猿
展开
-
Presto系列 | 六、Memory Management
Presto 内存管理机制翻译 2020-08-31 23:41:25 · 1196 阅读 · 0 评论 -
Presto系列 | 五、Tuning Presto SQL Query
Presto SQL 的优化翻译 2020-08-31 23:14:04 · 848 阅读 · 0 评论 -
Presto系列 | 三、Presto Architecture
一、Coordinator and Workers in a ClusterPresto是一个MPP风格的数据库查询引擎,他不依赖于运行Presto服务器的垂直扩展,他可以以水平的方式横向扩展集群,即可以通过增加节点来增大其处理能力。利用这种架构Presto可以跨集群的对大量数据进行处理。Presto的每个节点作为一个单独的服务运行,运行Presto的节点彼此相互协作,构成了Presto集群。图4-1展示了由一个coordinator和多个Worker组成的集群的简要描述。Presto通过 翻译 2020-06-08 00:20:36 · 644 阅读 · 0 评论 -
Presto系列 | 四、Presto Query Planner And Optimizer
Presto 执行计划以及相关优化策略详解;翻译 2020-05-22 00:24:11 · 1495 阅读 · 0 评论 -
Presto系列 | 二、Presto Web UI
Presto Web UI 可以用来检查和监控Presto集群,以及运行的查询。他所提供的关于查询的详细信息可以更好的理解以及调整整个集群和单个查询。需要注意的是,Presto Web UI所展示的信息都来自于Presto系统表,关于Presto系统表之后文章中再补充,这里不再多说;当你进入Presto Web时,你将会看到如同1所示的界面:主要分为上下两部分,上面描述了集群信息,下面是查询列表;首页集群信息Running Queries当前在集群中正在执行的查询的个数。包含所有用户提交的查翻译 2020-05-20 22:44:29 · 4423 阅读 · 2 评论 -
Presto系列 | 一、Presto SQL On Everything
presto是一个开源的分布式查询引擎,目前Facebook的大部分SQL分析工作由它支持。Presto被设计成自适应的、灵活的和可扩展的。它支持具有不同特征的多重查询场景这些包括:具有亚秒级延迟要求的面向用户的应用程序;统计或join tb级数据的多小时ETL作业Presto Connector API 已为数十个数据源提供高性能的I/O接口,包括Hadoop数据仓库、rdbms、NoSQL系统和流处理系统,在这个文章里, 我将列出一些Presto在Facebook上支持的用例。然后描述它的翻译 2020-05-20 08:09:15 · 3724 阅读 · 0 评论