wangxj_2017的博客

今天遇到一个zookeeper启动的问题Reading snapshot /usr/local/zk/data/version-2/snapshot.8000000032017-08-09 21:15:01,955 [myid:1] - ERROR [main:QuorumPeer@453] - Unable to load database on diskjava.io.IOExce

FATAL: Spool Directory source source1: { spoolDir: /usr/local/logs }: Uncaught exception in SpoolDirectorySource thread. Restart or reconfigure Flume to continue processing.flume-conf.properties的配

每个 Spark 应用都由一个驱动器程序（driver program）来发起集群上的各种并行操作。驱动器程序包含应用的 main 函数，驱动器程序通过一个 SparkContext 对象来访问 Spark。调用了sc.textFile() 来创建一个代表文件中各行文本的 RDD驱动器程序一般要管理多个执行器（executor）节点。val conf = new Spark

遇到一个问题，在CDH中一个结点内存不够用，于是关闭CDH服务后，并且把虚拟机关闭了。重启虚拟机后在执行  /opt/cloudera-manager/cm-5.4.3/etc/init.d/cloudera-scm-serverstart 这个命令后，显示

在使用hive出现如下的问题：hive> insert overwrite local directory '/opt/data/traindata' row format delimited fields terminated by '\t' select * from dw_rcm_hitop_prepare2train_dm;FAILED: Parse Error: line 1:5

在学习Hadoop的时候遇到如下的问题：Exception in thread "main" java.io.IOException: Error opening job jar: /apache_logs/cleaned.jar        at org.apache.hadoop.util.RunJar.main(RunJar.java:90)Caused by: java.ut