presto使用及介绍

最新推荐文章于 2024-05-16 15:26:10 发布
最新推荐文章于 2024-05-16 15:26:10 发布
阅读量1.8k 收藏
点赞数
分类专栏： 大数据开发 java 文章标签： presto java sql hive olap
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhou12314/article/details/102886851
版权
Presto是一个开源的内存分布式的查询引擎，适用于OLAP，提供对多种数据源如Hive、MySQL等的高速查询。其优势在于低延迟、高并发，查询速度比Hive快数十倍。Presto采用Master-Slave架构，包括Coordinator、Discovery Server和Worker节点。接入方式多样，如presto-cli、jdbc和http。然而，Presto在容错能力、内存管理和并发查询方面存在挑战。
摘要由CSDN通过智能技术生成

什么是presto

presto是一个开源的分布式的查询引擎，基于内存，它本身不接入数据，可以连接多种数据源，例如 Hive ,Mysql,Kafka,MongeDB等，一条Presto查询可以将多个数据源进行合并查询。
preto适合OLAP,而非OLTP,所以不要将preto当成数据库来使用。

presto优势

低延迟，高并发，纯内存计算引擎，查询效率是hive的数十倍

presto查询速度规模

数G到数P规模

presto数据模型

分为Catalog,Schema,Table三层

Catalog: 数据源，例如是Hive，还是Mysql等等
Schema: 库
Table: 表

presto架构

preso是一个Master-Slave架构，由一个Coordinator节点，一个Disovery Server节点及多个Worker节点组成
Coordinator：负责query解析和分发，work管理，meta管理
Disovery Server: 节点心跳，默认内嵌于Coordinator中，于Coordinator共享一台机器
Worker:计算节点，收到分发的task任务后，就会去对应的数据源取数

简单流程

Worker节点启动后向Discovery Server服务注册，Coordinator从Disovery Server获得正常工作的Worker节点，

presto 接入方式

最低0.47元/天 解锁文章
zhou12314456
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
presto和hive的使用区别
11-27
Hive是把一个查询转化成多个MapReduce任务，然后一个接一个执行。执行的中间结果通过对磁盘的读写来同步。然而，Presto没有使用MapReduce，它是通过一个定制的查询和执行引擎来完成的。它的所有的查询处理是在内存中，这也是它的性能很高的一个主要原因。
presto的安装与简单使用
liyaya0201的博客
10-23 9436
这篇文章主要介绍了presto的安装步骤与简单实用，以及idea连接presto进行编码
大数据工具——Presto
最新发布
麦当当的博客
05-16 1242
Presto是一款分布式SQL查询引擎, Presto可以独立提供计算分析操作, 不需要依赖于其他的计算引擎。
Presto简介、部署、原理和使用介绍
wt334502157的博客
02-28 2994
​ Presto是由Facebook开发的一款开源的分布式SQL查询引擎，最初于2012年发布，并在2013年成为Apache项目的一部分；Presto 作为现在在企业中流行使用的即席查询框架，已经在不同的领域得到了越来越多的应用。Presto官方网站：https://prestosql.io/​ Presto被广泛用作即席查询引擎，用户可以使用标准的SQL语句向Presto提交查询，并且能够在几秒钟或更短的时间内获取结果。
Presto的介绍、使用和原理架构
迷雾总会解
06-15 7515
Presto是一款Facebook开源的MPP架构的OLAP查询引擎，可针对不同数据源执行大容量数据集的一款分布式SQL执行引擎，数据量支持GB到PB字节，主要用来处理秒级查询的场景。Presto 本身并不存储数据，，但是可以接入多种数据源，并且支持跨数据源的级联查询，而且基于内存运算，速度很快，实时性高。注意：虽然Presto可以解析SQL，但它不是一个标准的数据库。不是MySQL、Oracle的代替品，也不能用来处理在线事务 (OLTP)。适合：PB级海量数据复杂分析，交互式SQL。
Presto的概念和安装使用
SmallScorpion
03-25 940
一、概念 Pressto时一个开源的分布式SQL查询引擎，数据量支持GB到PB字节，主要用来处理秒级查询的场景 虽然Pressto可以解析SSQL，但它不是一个标准的数据库，不是MySQL、Oracle的代替品，也不能用来出来在线事务(OLTP) 1.1 Presto架构 Coordinator:决策者 -> 解析成MR Worker：工作者 -> 跑任务 Connecto...
Presto介绍、原理、安装使用
02-27
Presto介绍、原理、安装使用
Presto在Uber的使用
11-14
介绍Presto在Uber(优步)的应用，使得读者可以对Presto更加了解
presto部署并连接postgresql
12-26
本篇文章将详细介绍如何部署Presto并将其连接到PostgreSQL数据库，同时也会提及配置文件的设置和官方文档的参考。 首先，部署Presto涉及到以下几个步骤： 1. **获取Presto源码或二进制分发版**：你可以从Presto的...
presto on kubernetes-present
12-17
presto on kubernetes介绍
presto资源组配置
05-11
在本节中，我们将详细介绍 Presto 资源组配置的各个方面，包括配置文件、资源组、软限制、硬限制、并发限制、队列限制、调度策略、JMX 导出、子组以及选择器等。 资源组配置文件 Presto 资源组配置文件是 JSON ...
【大数据】Presto（Trino）SQL 语法进阶
匠人精神，持之以恒！
05-17 3374
Presto（Trino）是一个快速、分布式的SQL查询引擎，可以用于查询各种数据源，包括Hadoop、NoSQL、关系型数据库等。下面是Presto（Trino）SQL语法的概述：SELECT：用于从一个或多个表中检索数据，指定所需的列和过滤条件。FROM：用于指定要查询的表名、子查询或视图，这些源可能跨越数据库和表格。JOIN：用于将两个或多个表格中的列连接到单个结果集中。WHERE：用于指定WHERE子句中定义的条件，以从原始数据集中筛选数据。GROUP BY：用于根据一个或多个列对结果集进行分组。
Presto 安装和简单使用
yoshubom的专栏
08-18 1520
Presto 安装和简单使用 0. 集群工具脚本 ccmd.sh 集群命令执行 cd && cat > ccmd.sh << 'EOF' #!/bin/bash if((0==$#)); then echo no args; echo "Usage: $0 cmd1; cmd2; cmd3" # 多个命令用分号隔开 exit; fi # cd -P 透过软连接获取绝对路径 pdir=`cd -P . ; pwd` # 修改seq 范围以覆盖更多节点 for
是选impala还是presto_Impala？难道 Presto 不香吗？
weixin_31710835的博客
12-24 800
导读(老蒙)：Presto 是当下比较流行的即席查询引擎，相比另一个相似的引擎 Impala ，Presto 是 Java 开发的，拥有更好的社区资源(毕竟做大数据的都喜欢用 Java)。这篇文章比较基础，对 Presto 做了一个基本的讲解，包括各个进程的作用，编程模型，整体架构等等内容，是入门理解 Presto 的一篇好文章。Presto是专为大数据实时查询计算而设计开发的产品，拥有如下特...
常用的Prestosql
伟庭的博客
03-02 2170
常用的Prestosql
Presto介绍、原理、安装、使用
weixin_41367158的博客
02-27 89
支持标准的 ANSI SQL 语法：在大数据环境下提供交互式的 SQL 查询能力，提供统一的 SQL 接口进行查询，允许用户使用熟悉的 SQL 语言进行复杂的数据查询和分析。6.Coordinator从分发的Task之后，就会一直持续不断的从Single Stage中的Task获取计算结果，并将计算结果缓存到Buffer中，直到所有的计算结束。支持跨多数据源的查询：通过 Connector 接口可以支持许多不同数据源，让用户可以在单个查询中使用来自多个数据源的数据，提供一致的视图。
Presto基础用法介绍
ISIS7Protessional的博客
06-23 3302
http://note.youdao.com/noteshare?id=1115e26a8ed49d1c34a7a37c3013a200
Presto安装与使用
Markble
09-27 6848
目录 一、Presto概述 二、Presto架构 三、Presto优缺点 四、Presto、Impala性能比较 五、安装 5.1Presto Server安装 5.2Presto命令行Client安装 5.3 Presto可视化Client安装 一、Presto概述 Presto是由Facebook开发的，是一个运行在多台服务器上的分布式查询引擎，本身并不存储数据，但是可以接入多种数据源（Hive、Oracle、MySql、Kafka、Redis等），并且支持跨数据源的级联查询。...
介绍presto sql基础语法
04-05
Presto SQL是一种分布式SQL查询引擎，它可以查询多种数据源，包括Hadoop、Cassandra、MySQL等。以下是Presto SQL的基础语法： 1. SELECT语句：用于从表中选择数据。语法如下： ``` SELECT column_name1, column_name2, … FROM table_name; ``` 2. WHERE语句：用于过滤数据。语法如下： ``` SELECT column_name1, column_name2, … FROM table_name WHERE condition; ``` 3. ORDER BY语句：用于按照指定的列排序查询结果。语法如下： ``` SELECT column_name1, column_name2, … FROM table_name ORDER BY column_name1 [ASC|DESC]; ``` 4. GROUP BY语句：用于按照指定的列对查询结果进行分组。语法如下： ``` SELECT column_name1, column_name2, … FROM table_name GROUP BY column_name1; ``` 5. JOIN语句：用于将两个或多个表中的数据合并在一起。语法如下： ``` SELECT column_name1, column_name2, … FROM table1 JOIN table2 ON table1.column_name = table2.column_name; ``` 6. UNION语句：用于将两个或多个查询结果合并在一起。语法如下： ``` SELECT column_name1, column_name2, … FROM table1 UNION SELECT column_name1, column_name2, … FROM table2; ``` 7. LIMIT语句：用于限制查询结果的数量。语法如下： ``` SELECT column_name1, column_name2, … FROM table_name LIMIT number; ``` 以上是Presto SQL的基本语法，还有其他一些高级语法可以根据需要使用。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值