CDH学习
0我是书生0
路漫漫其修远兮,吾将上下而求索
展开
-
CDH安装
安装CM 1.下载Cloudera Manager.bin 2.建立本地源, a、去 http://archive.cloudera.com/cm5/repo-as-tarball/5.4.6/ 下载与本机相应源(centos6 : cm5.4.6-centos6.tar.gz), b、解压cm放到apache服务器上,保证本地资源跟cm5/redhat/6/x86_64/cm原创 2015-09-08 11:48:30 · 625 阅读 · 0 评论 -
kafka清空topics
1、缘由(需求):因为测试时不小心,写了一大堆topics,看监测时一顿揪心。 2、解决方案:kafka是被zookeeper监管的,topics是在zookeeper上的(描述可能不是很准确),我发现kakfa原生api好像没有批量删除topics的方式,我登陆到zookeeper后,在zookeeper的目录下发现了topics。于是写了个递归程序将其删除。以下是代码: public cl原创 2015-12-16 08:20:55 · 2024 阅读 · 0 评论 -
sqoop2 java 批量入库程序
1、需求,sqoop2写命令太麻烦,于是写了一个通用型的java 的sqoop2导入程序,很简单,有什么不足,望各位看官指出。 import org.apache.sqoop.client.SqoopClient; import org.apache.sqoop.model.MConnector; import org.apache.sqoop.model.MDriverConfig; impo原创 2016-01-07 09:43:45 · 2323 阅读 · 1 评论