hadoop
mjlfto
这个作者很懒,什么都没留下…
展开
-
mapReduce
有一段时间没有写了,最近写MapReduce遇见一些问题,总结一下;图片来源网络借鉴首先看一下YARN的调度流程:首先各个NodeManager会向ResourceManager反馈自己的资源使用情况client向ResourceManager提交一个任务,然后根据各个NodeManger的资源使用情况来选择一个节点创建App MsterNodeManager在提交任务的时候也会拉回R...原创 2018-12-19 13:54:35 · 512 阅读 · 1 评论 -
windows hadoop winutils
hadoop-3.1.1https://gitee.com/mjlfto/hadoop-3.1.1/tree/master/hadoop-3.1.1原创 2018-12-19 14:18:50 · 920 阅读 · 0 评论 -
hive小记
struct:hive> create table t_struct( > id int, > info struct<name:string, age:int>) > row format delimited原创 2018-12-26 23:17:21 · 284 阅读 · 0 评论