- 博客(4)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 【甘道夫】Oozie-4.0.0-CDH5.2.0 安装部署
引言Oozie是Hadoop生态系统中的工作流控制组件，可以调度MR，Hive，Shell等各类任务，并配置复杂的工作流程。今天介绍如何安装部署，使用的是单机测试环境。欢迎转载，请注明来源：下载解压下载安装过程需要的相关文件：oozie4.0.0安装包http://archive.cloudera.com/cdh5
2014-11-21 18:59:33
4112
原创 【甘道夫】CDH5.2的Maven依赖
之前一直结合Maven开发Hadoop2.2.0的程序，环境换成CDH5.2后报错，发现是Maven依赖库的问题。之前一直使用http://mvnrepository.com/查找maven依赖，但这类网站只能查到通用的maven依赖，没有包含CDH依赖，还好Cloudera提供了CDH的依赖：http://www.cloudera.com/content/
2014-11-15 15:00:34
2679
原创 【甘道夫】开发Hive自定义UDF，生成32位字母数字随机串
引言曾经认为Hive自带的函数应该可以cover住我的日常所需，心想那些需要使用自定义函数的场景是不是太奇葩，谁知命运弄人，自己还是碰上了。需求很简单，我需要模拟Oracle中的SYS_GUID()函数，生成一个32位的字母数字随机串。开发环境：Eclipse+Maven，引入Hive0.13.1的依赖。欢迎转载，请注明来源：
2014-11-13 17:54:25
3528
1
原创 【甘道夫】通过bulk load将HDFS上的数据导入HBase
引言通过bulkload将HDFS上的数据装载进HBase是常用的入门级HBase技能，下面简单记录下关键步骤。bulkload的详细情况请参见官网文档。过程第一步：每台机器执行ln -s $HBASE_HOME/conf/hbase-site.xml $HADOOP_HOME/etc/hadoop/hbase-site.xml
2014-11-04 17:36:11
2369
【甘道夫】通过Mahout构建贝叶斯文本分类器案例详解 -- 配套源码
2015-01-07
【甘道夫】通过Mahout构建贝叶斯文本分类器案例详解--配套代码
2015-01-07
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人