- 博客(13)
- 资源 (2)
- 问答 (3)
- 收藏
- 关注
RSS订阅原创 Doris宕机问题排查
二、进入到fe的log文件下，找到fe.audit.log文件，可以通过下面命令知道Query id对应的sql，也可以vim fe.audit.log 然后通过命令:/ Query id 找到对应的sql。一、进入be的log目录下找到be.out日志文件，vim be.out，按大写字母G到最底下，往上找到Query id，复制该id。搭建的doris集群有段时间总是宕机，起初不懂如何检查问题所在，后来请社区的开发人员帮忙排查，现记录一次排查步骤。
2023-05-29 09:16:06
1284
2
原创 IDEA打包jar包将依赖包打包到一起
1. File >Project Structure2. Artifacts >> JAR >> From.......3. 第一，选择要打包成jar包的class（对应图中1）第二，将依赖包一起打包（对应图中2，选择这个）第三，将依赖包一起下载（对应图中3）第四， 这是生成 META-INF文件的路径，不能是默认路径，也不能在src目录下，一般直接把src后面的路径删掉就行，包含src。最后点击OK4. 此时在这里会有META-I..
2022-05-11 10:54:13
10717
4
原创 Linux 系统下安装JDK1.8的教程详解
一、检查是否安装rpm -qa | grep jdkrpm -qa | grep gcjyum -y remove java-xxx-xxx #删除存在的安装包二 ， 在线下载JDKwget --no-check-certificate --no-cookies --header "Cookie: oraclelicense=accept-securebackup-cookie" http://download.oracle.com/otn-pub/java/jdk/8u131-b11
2022-05-07 11:16:54
744
原创 Doris报错：You can change the limit by session variable exec_mem_limit
1. Doris查询时报以下错误，翻译以下应该是内存溢出errCode = 2, detailMessage = Memory exceed limit. New partitioned Aggregation in spill Backend: ip, fragment: 19530b73ae33475a-9fd4089caca411c3 Used: 2525366160, Limit: -1. You can change the limit by session variable exec_mem
2022-05-07 10:59:11
3608
原创 Doris导入数据错误success replica num is 1 ＜ quorum replica num 2 while error backends
Doris导入几十万条数据时，部分数据成功，查看FE日志报以下错误success replica num is 1 < quorum replica num 2 while error backends查看官方文档，
2022-04-16 11:42:57
4868
3
原创 HIVE 启动后执行命名报错
1. HIVE 启动后执行show databases 命名报错:FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient解决办法1. 进入到hive安装目录，重命名metast
2022-01-16 23:10:54
1290
原创 Hadoop集群启动没有Datanode
本人搭建的伪分布式集群，Hadoop集群启动没有Datanode,一开始以为是配置问题，检查了发现没什么问题，后来发现是Datanode与Namenode之间的ClusterID不一致导致的。可能造成的原因：频繁的格式化namenode环境：VMWARE+Centos7+Hadoop3.1.1解决：进入到你hadoop安装目录里面的/data/dfs文件夹中cd /opt/module/hadoop-3.1.1/data/dfs/这个有三个文件夹，分别是namenode，datanod
2022-01-12 11:15:22
8993
5
原创 Hadoop启动yarn报错
Hadoop启动yarn的时候，无法获取"/opt/module/hadoop-3.1.1/logs/hadoop-ajie-nodemanager-hadoop102.out" 的文件状态(stat): 没有那个文件或目录解决办法进入 vim /opt/module/hadoop-3.1.3/etc/hadoop/workers，删除localhost，如果已经删除，就是hostname可能写的有问题，hostname前后不允许有空格...
2022-01-06 16:13:34
1721
原创 克隆虚拟机修改静态IP不成功解决办法
Hadoop集群搭建的时候，克隆的虚拟机，想要修改静态IP地址，结果怎么修改都不成功。通过命令修改IP地址vim /etc/sysconfig/network-scripts/ifcfg-ens33 后面查看发现IP地址没有改变，重启也不行ifconfig解决办法可能是因为有2套网络管理工具，将NetworkManager关闭systemctl stop NetworkManagersystemctl disable NetworkManager...
2022-01-06 14:53:14
3772
2
原创 HIVE函数
文章仅作为笔记使用，会持续更新数学函数-- round(DOUBLE a) 返回对a四舍五入的最大整数值,类型为doubleselect round(10.234); -- 返回10select round(10.234,2); -- 返回10.23select round(10.235,2); -- 返回10.24-- floor(DOUBLE a) 向下取整select floor(10.3); -- 10select floor(-10.3); -- -11-- ceil(
2021-12-28 15:09:59
704
原创 Hive DDL语言（数据库定义）
Create，Drop，Alter创建数据库create database if not exists database_namecomment database_commentlocation hdfs_pathwith dbproperties (property_name = property value,)if not exists : 如果存在则不创建comment : 注释，解释location : 指定HDFS存放路径 默认/user/hive/warehouse/dat
2021-12-21 23:22:05
1184
各国语言代码表.xls
2022-02-08
2021年全国各个地区的区域代码.xls
2022-02-08
Doris BE数据迁移问题
2022-05-06
hadoop集群启动没有Datanode
2022-01-06
TA创建的收藏夹 TA关注的收藏夹
TA关注的人