- 博客(6)
- 收藏
- 关注
RSS订阅原创 git clone项目时报 Out of memory, malloc failed (tried to allocate 1048576000 bytes)
git config --global http.postBuffer 1048576000 无效。git config --global pack.windowMemory 1024m 无效。
2023-09-14 15:50:04
412
1
原创 windows无法终止PID的进程，拒绝访问
**问题描述**在windows上做本地开发时，程序重启后出现总是出现端口占用本来以为把使用这个端口的进程找出来kill掉就行了，但是在杀掉进程时出现拒绝访问导致进程关不掉，程序就一直重启不了。**解决方案**出现该问题的原因是因为权限不够，可以通过搜索cmd，用管理员权限打开，然后输入命令终止进程具体命令可参考：netstat -ano |findstr “端口号” --根据端口号找到进程，taskkill /f /t /im “进程PID” --根据进程的PID（上
2022-01-18 10:55:17
43574
12
原创 flink1.2 sql client连接hive出现的相关问题
前言最近空闲时间准备看一下flink sql&table模块，发现flink提供了sql client来直接进行交互式查询。体验了sql client的基本功能后准备去操作hive，kafka等数据源，但是在操作连接hive时就出现了相关问题，在此记录一下。本地使用软件的相关版本为flink1.12.3，hive2.1.0，hadoop2.7.3连接准备1.检查版本由于flink和hive的版本过多，flink支持hive的版本也有限2.下载依赖根据本地flink和hive的版本，下载
2021-06-03 11:31:04
4426
4
原创 OpenLooKeng连接hive出现UnknownHostException
背景最近在验证一个协同计算的方案，使用的是华为开源的数据虚拟化引擎OpenLookeng（hetu），底层是基于presto引擎来提供交互式查询分析能力。先前在内网部署过一套，添加hive，mysql等数据源一切正常。后重新在其他环境进行部署时，连接hive时出现java.net.UnknownHostException:hacluster。用的是华为平台，hadoop版本为3.1.1，hive版本3.1.1。问题定位与解决连接hive数据源需要指定两个配置文件core-site.xml和hdfs-s
2021-01-27 16:01:19
1230
2
原创 hbase获取ClientSideRegionScanner出现NoSuchMethodError org.google.common.base.Objects.ToStringHelper
问题描述程序中使用ClientSideRegionScanner来并行的查询hbase，但是在获取ClientSideRegionScanner对象时，出现这个错误NoSuchMethodError org.google.common.base.Objects.ToStringHelper，本地使用的是guava-24.1-jre版本出错原因找到guava-24.1-jre下出错的类Objects，发现下面就只有两个方法好像是因为guava在20.0以上的版本去掉了com.google.commo
2020-12-11 16:15:21
1441
原创 记一次Hbase RegionTooBusyException的处理记录
dflowchart.js/hbase批量put出现 RegionTooBusyException，over memstore limit =512.0m在使用BufferedMutator批量put数据到hbase时，程序在运行一段时间后，会出现RegionTooBusyException的异常，异常报的是超过了memstore的限制。通过查看报出异常的源代码，找到原因意思是Region在每次进行put时，会进行resource的检查。而这个512M是怎么来的呢？hbase.hregion.m
2020-12-10 09:07:46
3692
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人