学无止境，永不停歇

原因：CDH没有正常关闭，直接管的集群，再次启动时报错。[root@hadoop102 commands]# /opt/module/cm/cm-5.16.2/etc/init.d/cloudera-scm-server statuscloudera-scm-server dead but pid file exists解决方法：删除pid文件，重新启动。pid 所在路径为：[root@hadoop102 proc]# cd /opt/module/cm/cm-5.16.2/run/[root

前几天在用impala on CDH5.16.2查询数据的时候，突然遇到OOM（内存溢出）的问题，如下所示：经查阅资料发现，Impala的内存主要是由两个参数控制的。mem_limit: 256MImpala Daemon JVM Heap: 50MImpala Daemon进程其实是由两个不同的进程组成的。一个进程是用C++写的，它主要用来执行查询语句；另外一个进程是用Java写的，它主要是用来编译执行语句和存储metadata信息。Java的进程被嵌入到C++的进程中，因此他们两个进程共

20/05/05 23:52:24 WARN CorruptStatistics: Ignoring statistics because created_by could not be parsed (see PARQUET-251): parquet-mrorg.apache.parquet.VersionParser$VersionParseException: Could not par...