2015年11月_me_lawrence

转载一共81个，开源大数据处理工具汇总（下），包括日志收集系统/集群管理/RPC等

http://www.36dsj.com/archives/25042一共81个，开源大数据处理工具汇总（下），包括日志收集系统/集群管理/RPC等诺蓝 2015-03-12 9:40:22 大数据工具评论(0)作者：大数据女神-诺蓝（微信公号：dashujunvshen）。本文是36大数据专稿，转载必须标明来源36大数据。接上一部分：一共81个

2015-11-27 15:38:50 9472

转载一共81个，开源大数据处理工具汇总（上）

http://www.36dsj.com/archives/24852一共81个，开源大数据处理工具汇总（上） Optimus Prime 2015-03-11 12:01:28 大数据工具评论(0)作者：大数据女神-诺蓝（微信公号：dashujunvshen）。本文是36大数据专稿，转载必须标明来源36大数据。本文一共分为上下两部分。我们将针对大

2015-11-27 15:37:36 1936

原创 eclipse编译调试tomcat7.0.65

一，编译下载JDK1.6 (本版本的tomcat只支持1.6。1.7及以后会报错）tomcat7.0.65源码安装 apache-tomcat-7.0.65-src/build.properties.default 重命名为 build.properties。修改build.properties的base.path=d:\tomca

2015-11-23 20:22:01 664 1

原创 cdh5.4.7 sqoop使用

sqoop导入hive1，为了连接mysql，首先在10.0.4.24 (CDH001)上 sudo apt-get install libmysql-java 2，sqoop list-databases --connectjdbc:mysql://10.0.3.218:3306/ --username directory --password

2015-11-11 15:33:54 671

原创 hbase整合hive

用途HBase属于Nosql不能使用HQL来进行查询，整合hive后，便于操作。基本过程参考原文链接 HBaseIntegration与已存在的HBase的‘test’表建立整合关系：

2015-11-11 10:28:18 530

原创 cdh5.4.7 flume使用

一，如何使用flumeflume的原理和使用二，关于配置文件可以知道， cloudera-monitor.properties里配置agent_name来使用。flume.conf里面设置具体的agent信息。

2015-11-06 09:31:36 3082

原创安装Windows下 CDH5开发环境

一，clouderahttp://archive-primary.cloudera.com/cdh5/二，下载源码包http://archive-primary.cloudera.com/cdh5/cdh/5/我在此页面下下载了hadoop-2.6.0-cdh5.4.7-src.tar.gz 与运行环境的版本匹配。三，

2015-11-04 20:32:00 2360

转载跨语言通信方案的比较—Thrift、Protobuf和Avro

http://www.bubuko.com/infodetail-605556.html常用的跨语言通信方案：基于SOAP消息格式的WebService基于JSON消息格式的RESTful 服务以上两种方案的弊端：XML体积太大，解析性能极差JSON体积相对较小，解析相对较快，但表达能力较弱现在比较流行的跨语言通信方案：Google protob

2015-11-02 17:10:11 1255

onlyForCloud的专栏