2015年01月_余建新-18588497759

原创 Cloudera CM5.3.1&CDH-5.3.0集群安装

Cloudera Hadoop优点：1、友好的监控展示界面2、集成了Spark-1.2.0、Impala-2.1.0等缺点：可控性较Apache版本弱

2015-01-31 21:11:39 2922

原创 jxcx_Hermes（Mdrill）安装-1

一、依赖软件tar -xzvf util-linux-2.21.1.tar.gztar -xzvf zeromq-2.1.7.tar.gztar -xzvf lzo-2.08.tar.gztar -xzvf Linux-amd64-64.tar.gzunzip jzmq-master.zipcd util-linux-2.21.1 ./configu

2015-01-30 20:02:48 2132

原创 Flume-conf总结-5-http_self_to_kafka

http_self_to_kafka.sources=s1http_self_to_kafka.sinks=d1http_self_to_kafka.channels=c1http_self_to_kafka.sources.s1.channels=c1http_self_to_kafka.sinks.d1.channel=c1http_self_to_kafka.sources

2015-01-26 21:18:23 781

原创 Flume-conf总结-4-http_self_to_hdfs

http_self_to_hdfs.sources=s1http_self_to_hdfs.sinks=d1http_self_to_hdfs.channels=c1http_self_to_hdfs.sources.s1.channels=c1http_self_to_hdfs.sinks.d1.channel=c1http_self_to_hdfs.sources.s1.ty

2015-01-24 11:34:35 865

原创 Flume-conf总结-3-dir_dir_hdfs

dir_dir_hdfs.sources=source1dir_dir_hdfs.sinks=sink1dir_dir_hdfs.channels=channel1dir_dir_hdfs.sources.source1.type=spooldirdir_dir_hdfs.sources.source1.spoolDir=/home/jianxin/flume/test/test1/s

2015-01-24 09:56:40 724

原创 Flume-conf总结-2-dir_dir_console

dir_dir_console.sources=source1dir_dir_console.sinks=sink1dir_dir_console.channels=channel1dir_dir_console.sources.source1.channels=channel1dir_dir_console.sinks.sink1.channel=channel1dir_dir

2015-01-24 09:47:00 747

原创 PostgresSQL-1-安装-rpm方式

一、软件说明

2015-01-22 11:24:59 797

原创 PostgreSQL使用记录

一、配置PostgreSQL免密码登录vi /var/lib/pgsql/9.2/data/pg_hba.conf

2015-01-22 10:27:08 3303

原创 xxxHive-2-其他总结

错误总结一、问题编译出现，/usr/bin/ld: cannot find -lprotoc解决：cp -r /home/jianxin/other/compileHadoop22/protoc/lib/* /usr/lib64/

2015-01-19 16:41:30 939

原创编译官网spark-1.1.0.tgz至spark-1.1.0-bin-2.0.6-alpha.tgz

编译命令mvn -Pyarn-alpha -Phadoop-2.0.6-alpha -Phive -Phive-thriftserver -Dhadoop.version=2.0.6-alpha -DskipTests clean package./make-distribution.sh --tgz --name 2.0.6-alpha -Pyarn-alpha -Phadoop-2

2015-01-15 19:51:48 1206

原创 Spark Streaming-1-Flume-conf总结-1-http_self_to_avro_spark streaming

需求：Flume接收HTTP请求，数据流向Spark Streaming。Spark Streaming接收Flume数据：bin/run-example org.apache.spark.examples.streaming.FlumeEventCount bigdata3 6667运行后会在bigdata3:6667上开启一个Avro Source Server

2015-01-14 14:38:40 1269

原创 Java多线程之生产者消费者实例

实例说明：实例代码：package multithread.zxx.yjx;public class ProducerConsumerTest { public static void main(String[] args) { new ProducerConsumerTest().init(); } private void init() { Food

2015-01-06 21:17:52 975