hadoop
love_lixr
这个作者很懒,什么都没留下…
展开
-
Hue中使用oozie调用shell启动sqoop报错
2020-12-01 14:23:01,841 INFO org.apache.oozie.command.wf.ActionStartXCommand: SERVER[cdh-dev5] USER[itview] GROUP[-] TOKEN[] APP[SqoopTest] JOB[0000000-201201142033410-oozie-oozi-W] ACTION[0000000-201201142033410-oozie-oozi-W@shell-2323] [***0000000-201201原创 2020-12-01 15:20:42 · 1394 阅读 · 5 评论 -
HDFS的原理
HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。HDFS上的角色:NameNode:是Master节点,管理数据块的映射,数据信息包括fsimage和edits。SecondaryNameNode:分担NameNode的工作,是NameNode的冷备份,合并fsimage和edits然后发给namenodeDataNode:Sl...原创 2020-05-04 15:40:54 · 323 阅读 · 0 评论 -
从认识Hadoop开始!
Hadoop前世今生:Hadoop起源于Apache Nutch项目,始于2002年,是Apache Lucene的子项目之一 [2] 。2004年,Google在“操作系统设计与实现”(Operating System Design and Implementation,OSDI)会议上公开发表了题为MapReduce:Simplified Data Processing on Large...原创 2020-05-04 07:12:16 · 450 阅读 · 0 评论