hadoop
文章平均质量分 84
Nougats
这个作者很懒,什么都没留下…
展开
-
hadoop 常见问题+Windows下不能使用hostname的轻松解决
1. NameNode离开安全模式 bin/hadoop dfsadmin -safemode leave 分布式文件系统启动开始的时候NameNode会进入安全模式,进行检查各个DataNode上数据块的有效性,根据策略必要的复制或者删除部分数据块。运行期通过命令也可以进入安全模式,此时文件系统中的内容不允许修改,直到安全模式结束。在NameNode操作不当也会进入安全模式,可以通过命令解除原创 2017-04-29 21:30:47 · 1944 阅读 · 0 评论 -
hive UDAF详解
User Defined Aggregation Funcation 用户自定义聚类方法 需要继承org.apache.hadoop.hive.ql.exec.UDAF类 内部类Evaluator实现org.apache.hadoop.hive.ql.exec.UDAFEvaluator接口,主要实现init、iterate、terminatePartial、merge、terminate这几原创 2017-05-14 14:48:46 · 2637 阅读 · 1 评论 -
CentOS 7 Hadoop 集群搭建
linux 使用hadoop中常用的一些命令 hadoop 常见问题&解决方法前言新手上路面对陌生的Hadoop,在配置过程中会出现各种各样的问题,或者终于成功搭建却用了几次就被玩坏,查找各种修补方法都以失败告终,只好卸载重装。 这时候最期待的就是一份好的文字教程,一份好的文字教程比看视频,听讲解有用得多。 在经历了许多问题与重装之后,终于,这篇记录出现了,目的就是希望能在安装过程中尽量避免无原创 2017-04-21 15:35:53 · 946 阅读 · 0 评论