Presto日志中出现大量的Triggering GC to avoid Code Cache eviction bugs

最新推荐文章于 2024-07-06 23:27:11 发布

Lnho

最新推荐文章于 2024-07-06 23:27:11 发布

阅读量2.4k

点赞数 1

分类专栏： Presto 大数据学习之路文章标签： presto GC异常

本文链接：https://blog.csdn.net/Lnho2015/article/details/76598627

版权

问题描述：

Presto日志中出现大量的

2017-07-31T15:31:21.505+0800    INFO    Code-Cache-GC-Trigger   com.facebook.presto.server.CodeCacheGcTrigger   Triggering GC to avoid Code Cache eviction bugs

Presto版本为0.170。

排查过程：

1. 检查Presto源码

出现该条日志的代码为

// Hack to work around bugs in java 8 (

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Lnho

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
5
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

大数据Presto（二）：Presto安装搭建

Lansonli（蓝深李）的博客

10-07

1277

注意：--server执行连接Presto的coordinator节点，--catalog指定连接hive，这里写的名字和“/software/presto-0.259/etc/catalog”路径中配置的properties名称保持一致。分别在node3,node4,node5节点上启动Presto Server，启动可以采用前台方式，日志会打印到控制台，也可以采用后台方式启动Presto，日志存放在“/software/presto-0.259/data/var/log”路径下。

遇到的问题--presto---提取json中的数组值为null

直到世界的尽头

08-02

2466

情况我们有数据结构如下： skuIdsParams:{"skuIds":["123","456"]} 在presto中适用语句查询如下： presto> select skuIdsParams, json_extract_scalar(skuIdsParams,'$.skuIds') from v_event_2 where "$part_date">'2021-04-26' and "$part_event"='VIEW_ORDER_PAGE_EVENT' AND ( POSITION('

5 条评论您还未登录，请先登录后发表或查看评论

深入探讨 Presto 中的缓存

11-08

710

您可以将Alluxio的属性添加到HDFS配置文件中，例如core-site.xml和hdfs-site.xml，然后在文件${PRESTO_HOME}/etc/catalog/hive.properties中使用Presto属性hive.config.resources指向每个 Presto Worker 上的 HDFS 配置文件的位置。在本文中，我们介绍了Presto中不同的缓存机制，包括元存储缓存、列表文件状态缓存、Alluxio SDK缓存和Alluxio分布式缓存。

presto查看日志

前方的路在刚开始

03-12

3963

国内用presto的真是少武汉就我们公司在用吧查看日志 /data/presto/data/var/log

大数据面试题之Presto[Trino](4)

最新发布

自律给我自由

07-06

1007

大数据面试题之Presto[Trino](4)

即席查询之：Presto

科小勒的博客

03-09

356

一、Presto架构二、优缺点优点 1、Presto采用内存到内存的方式，相对于Mapreduce查询（容错机制，为了保障准确性，中间写入磁盘），减少了中间写入磁盘，从磁盘读取数据的方式。计算更快 2、减少阶段间的等待时间，Mapreduce不支持DAG，maptask未完成，不能执行reduce，Presto采取管道式传输的方式，边清理内存，边计算。 3、可以连接多个数据源，比如同时查询hive和mysql的数据再合并缺点 1、需要较大的内存 2、关联查询会变慢三、安装 0）官网地址

Presto&Trino缓存配置

zxf126126的博客

08-03

688

由于Presto进程是使用presto用户启动的，所以Presto进程作为Alluxio客户端会通过presto用户模拟hdfs访问Alluxio集群，需要在Alluxio的alluxio-site.properties配置允许presto 用户模拟hdfs访问Alluxio集群。由于Alluxio 的进程是使用alluxio用户启动的，在挂载alluxio文件目录时，也会用alluxio用户创建目录。Alluxio 2.9.3 之后不支持以下方式，访问现有的hive表，具体步骤官网没有明确说明。

android webview 503,android 离线打包启动白屏 4.27更新的sdk

weixin_33773084的博客

05-26

1884

回复 DCloud_Android_zl:04/30 17:42:54: Launching app$ adb shell am start -n "com.hua366.lehua/io.dcloud.PandoraEntry" -a android.intent.action.MAIN -c android.intent.category.LAUNCHERClient not ready ye...

大数据Presto（三）：Presto Connector连接器

Lansonli（蓝深李）的博客

11-12

1218

注意：以上mydb是指定的schema信息，需要配置读取Kafka数据的json配置文件，在Kafka中的数据一般是json格式，producer向Kafka中生产的数据有可能含有key，有可能没有key,使用presto查询Kafka中的数据，需要将Kafka中的数据映射到表字段上，那么presto读取Kafka数据时就需要有一个配置文件来配置这些内容。并且需要重启Presto才能正常访问Kafka中的数据。t1.json，映射“presto-topic1”中的用户数据，生产数据有key。

大数据Presto（四）：Presto自定义函数和JDBC连接

Lansonli（蓝深李）的博客

11-13

1467

Presto 自定义函数我们可以登录Presto客户端，使用命令：show functions 来查询对应的内置函数。我们也可以自己定义函数，自定义的函数包含UDF和UDAF函数。1、UDF函数自定义UDF函数及使用可以按照下面步骤来实现。1.1、创建Maven项目，加入如下依赖

Presto的介绍、使用和原理架构

迷雾总会解

06-15

8214

Presto是一款Facebook开源的MPP架构的OLAP查询引擎，可针对不同数据源执行大容量数据集的一款分布式SQL执行引擎，数据量支持GB到PB字节，主要用来处理秒级查询的场景。Presto 本身并不存储数据，，但是可以接入多种数据源，并且支持跨数据源的级联查询，而且基于内存运算，速度很快，实时性高。注意：虽然Presto可以解析SQL，但它不是一个标准的数据库。不是MySQL、Oracle的代替品，也不能用来处理在线事务 (OLTP)。适合：PB级海量数据复杂分析，交互式SQL。

【presto权威指南】presto目录结构

醉与浮的博客

02-20

284

包含 Presto 插件及其依赖关系，各个插件分开存放在不同的目录下。Presto 默认已经包含许多插件，你也可以添加第三方插件。Presto 允许多种可插拔的组件，如连接器、函数和安全访问控制等与其集成。存放日志信息的数据目录。Presto 服务端第一次启动时会创建此目录，它默认情况下位于安装目录下。我们推荐将其配置为安装目录之外的位置，以便在升级过程中保留这些数据。这些脚本用于启动、停止、重启、终结 Presto 进程，以及获得运行该进程的状态。此目录由用户创建并提供 Presto 必需的配置文件。

android libc错误,libc 异常退出的问题

weixin_28737399的博客

05-26

1313

使用产品：iMobile 9D 操作系统：win10 x64数据类型：文件型问题详细描述：我在调用绘制点，线，面要素的功能后，切换工作空间，系统就崩溃了，以下是调试的日志，能看出是什么问题吗？错误报的是A/libc: Fatal signal 11 (SIGSEGV), code 1, fault addr 0x970 in tid 27280 (Thread-862), pid 27111 (e...

presto内存分配参数

chuanzhongdu1的专栏

07-16

4024

假如设置最大Heap内存为35G 需要考虑的Heap最大值因素，因为需要给系统与其他守护进程留有空间，所以最好不要将内存设置为机器内存大小 prestor参数 query.max-memory-per-node 每个机器上用于执行用户任务的内存大小，比如：排序等操作,超出限制将kill query.max-total-memory-per-node 每个节点上用于系统与用户任务的内存大...

记录使用presto中的一些坑

Aries

08-08

7384

1.列名为中文的时候不能用`` (tab上方那个键)，需要用""，例如： select user_id as "用户ID" from order 2.没有ifnull()，可替代为： 1.coalesce(expr,defaultvalue) 2.if(expr is not null,expr,defaultvalue) to be continued ...

Eclipse抛出GC overhead limit exceeded异常问题的分析与解决