Phoenix偶尔出现OutOfMemoryError的问题排查

最新推荐文章于 2022-08-02 12:16:50 发布
最新推荐文章于 2022-08-02 12:16:50 发布
阅读量1.2k 收藏
点赞数
分类专栏： 源哥讲互联网技术 大数据、微服务、SaaS、CRM、在线客服、呼叫中心技术 文章标签： Phoenix
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sunlen/article/details/101547907
版权
在使用Phoenix通过sqlline执行查询时遇到偶发的OutOfMemoryError。最初认为是Phoenix或HBase的配置问题，但调整参数未解决问题。后来发现是Linux系统限制，max user processes默认值为1024，将其增加到241463后，解决了该错误。
摘要由CSDN通过智能技术生成

最近在使用Phoenix，采用sqlline模式执行的时候，经常时不时的出现OutOfMemoryError错误，如下：

java.lang.OutOfMemoryError: unable to create new native thread

刚开始一直以为的Phoenix和HBase的参数设置问题，经过多次调测，问题依然没有解决，后来才发现的Linux系统的参数设置问题。原先Linux的max user processes设置为1024，将其修改为241463之后，问题解决。

IT源哥
关注
专栏目录
订阅专栏
OutOfMemoryError异常OOM排查
Blueeyedboy521的博客
07-16 820
OutOfMemoryError 是 Java 虚拟机（JVM）抛出的一种错误，表示程序在尝试分配对象时无法获得足够的内存。这通常是由于应用程序内存泄漏、内存溢出或者程序需要的内存超过了 JVM 的限制所引起的。原文链接：https://blog.csdn.net/TreeShu321/article/details/135255821。内存泄漏： 未被使用的对象或者引用未被正确释放，导致堆积的对象占用了大量内存。内存资源耗尽： 应用程序需要的内存资源超过了 JVM 配置的最大堆大小。
phoenix常见问题总结
zjx_z的博客
09-29 1358
最近整合项目的时候遇到一些问题，记录并分享一下： 首先，保证phoenix和hbase版本match，并保存client jar用来项目远程jdbc连接。 问题1：连接池的问题 phoenix不需要连接池，原因：1.hbase连接的代价很小。2.hbase的连接不能共享。 但是为了项目的美观，我还是配置了阿里的druid连接池去管理。 问题2：项目集成问题 刚开始我没有集成spring，只是简单的maven项目通过jdbc的方式连接phoenix，进行增删改查没有遇到问题。 当我集成sprin
phoenix java game_java - 使用Java从Apache Phoenix读取和写入的Apache Spark方法 - 堆栈内存溢出...
weixin_39984201的博客
02-25 117
这是如何从凤凰读/写的例子import org.apache.spark.SparkConf;import org.apache.spark.SparkContext;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.sql.DataFrame;import org.apache.spark.sql....
云主机内存不够的解决办法
bloestone的博客
02-19 1475
购买了一个1G内存云主机，装了docker，发现在里面执行make报如下错误，怀疑是内存不够所致，几乎把所有程序都停了，编译还是报一样的错误，于是打算加点内存，发现加1G内存至少需要1K多的money，太贵了。 c++: fatal error: Killed signal terminated program cc1plus 于是想是否可以增加虚拟内存，在网上找了增加虚拟内存的方法，试了还...
phoenix 查询记录(内存不足、有趣的等效SQL、exists)
继续，Let's Go!
12-12 1092
-- hbase两张大表join查询，存在性能与逻辑的问题(特别是分页)。 -- 不同数据，需要在进入Hbase前进行整合，大数据只存在一张表。 -- 两张 200W+的表join，内存不足报错 select t1.seq_id,t2.country from T_EXTENSION_SHOW t1 inner join T_EXTENSION_LOGIN t2 on(t1.sho...
ProcessPhoenix使用方法 Android应用报错自动重启的方法
阿Gogo
08-02 3656
使用ProcessPhoenix库
通过dump文件，分析outOfMemoryError的排查过程和排查思路
qq_40606397的博客
03-14 4001
前段时间发现有一个内存溢出导致java线上服务OOM的问题，通过jvm启动配置增加-XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=/usr/local/app/oom的命令，在出现了第二次服务挂掉的时候，拿到了当时的dump文件，以下是我通过dump文件对异常进行梳理的过程。 首先，把服务器的dump文件拉到我本地后，使用jdk自带的jvisualvm装载dump文件 在载入后，我得到了各个类的内存占用情况分析图。如下： 在这个分析图表中，我发
一次OOM问题排查过程实战记录
08-26
OOM 问题排查过程实战记录 一、OOM 问题排查过程概述 在 Java 应用程序中，OutOfMemoryError 是一种常见的异常，它可能是由于堆空间不足、永久代空间不足或是无法分配对象所引发的。在本文中，我们将通过一个实战...
java.lang.OutOfMemoryError如何快速排查
qq_36031640的博客
11-25 1128
前言 作为一个java程序员，肯定遇到过内存泄漏的问题，那么如何快速定位到内存泄漏的原因呢？下面通过一个小的demo模拟一次内存泄漏的问题，并演示如何定位。 OOM现场 public class PigMachine { private List<Food> foodCache = new ArrayList<>(); public void eat() { foodCache.add(new Food()); } public
解决运行出现CUDA error:out of memory的问题
热门推荐
qq_30653631的博客
07-04 3万+
模型运行出现以下问题，经过查找资料发现解决方案如下： CUDA_VISIBLE_DEVICES限制一下使用的GPU。 比如有0,1,2,3号GPU，CUDA_VISIBLE_DEVICES=2,3，则当前进程的可见GPU只有物理上的2、3号GPU，此时它们的编号也对应变成了0、1，即cuda:0对应2号GPU，cuda:1对应3号GPU。 如何设置CUDA_VISIBLE_DEVICES: ① 使用python的os模块 import os os.environ[‘CUDA_VISIBLE_DEVICES
找不到GPU资源——[显存充足，但是却出现CUDA error:out of memory错误]
椰子奶糖的博客
02-03 3万+
说明: 系统：Centos（Redhat） 环境：python3.6+pytorch1.4.0（gpu）+tensorflow2.0.0（cpu） Cuda：9.2 Cudnn：7.0.6？ 模型 YOLOv3 描述 图找不到了，就去隔壁偷了一张（传送） 在运行git上的yolov3目标检测项目的时候尝试使用GPU加速，结果爆出CUDA error:out of memory 隔壁说是找不...
初次使用GPU，遇到的一些cuda error及解决办法
肥仔的博客
04-02 5846
1.GPU RuntimeError: CUDA error: invalid device ordinal 解决办法：可能是在程序的多个地方都定义了使用的cuda编号，即使编号是一样的也会报这样的错误。解决办法是只保留一个 2.使用os.environ['CUDA_VISIBLE_DEVICES'] = 'x'指定使用的GPU编号后，实际使用时还是0号GPU 解决办法：把这个语句用到所有需要加载参数、数据的语句前，最方便的就是在import各种包时顺便用os.environ[‘CUDA_VISIBLE_D
记录运行gpu错误及解决方案
ningyanggege的博客
08-21 8923
tensorflow.python.framework.errors_impl.InternalError: Dst tensor is not initialized 解决方案：运行程序之前，先运行export CUDA_VISIBLE_DEVICES=1；如图所示： 最后结果：虽然成功运行，但CPU爆满，GPU使用率为0，没有用到GPU +----------------------...
python运行提示显卡内存不足_Pytorch GPU显存充足却显示out of memory的解决方式
weixin_39890327的博客
12-08 1万+
Pytorch GPU显存充足却显示out of memory的解决方式今天在测试一个pytorch代码的时候显示显存不足，但是这个网络框架明明很简单，用CPU跑起来都没有问题，GPU却一直提示out of memory.在网上找了很多方法都行不通，最后我想也许是pytorch版本的问题，原来我的pytorch版本是0.4.1，于是我就把这个版本卸载，然后安装了pytorch1.1.0，程序就可以...
Java常见问题深度排查与解决策略
本文主要聚焦于Java常见问题的排查，包括但不限于`NoSuchMethodException`、应用无响应、调用另一应用超时、内存溢出（`OutOfMemoryError`）、以及CPU使用率异常（如CPUus高、CPUsy高和CPUiowait高）等问题。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值