Hadoop
Mr.Yun
精通Python web编程,乐于解答技术上问题,可直接加微信:3618353787
展开
-
编译Hadoop 2.6.0 的 eclipse插件
首先下载 hadoop2x-eclipse-plugin-master 先在 win7 下载 http://pan.baidu.com/s/1ntBmsDN解压hadoop2x-eclipse-plugin-master文件解压后将文件放入hadoop系统中(随便哪里)第二步:下载 eclipse(和win上的版本最好一致)安装方法如下http://b原创 2015-03-06 14:06:04 · 701 阅读 · 1 评论 -
搭建(win7)eclipse远程操作(Linux上)hadoop2.6.0_出错集
问题1:在DFS Lcation 上不能多文件进行操作: 在hadoop上的每个节点上修改该文件 conf/mapred-site.xml 增加: dfs.permissions false原创 2015-03-06 14:23:44 · 9234 阅读 · 2 评论 -
MapReduce_笔记1
Map Record reader:通过输入格式(inputformat)将输入split解析成记录,目的是将输入数据解析成记录,但不负责解析数据本身,将数据以键/值对的形式传送给mapper处理 ,通常“键”是数据在文件中的位置,值是组成的记录数据块。 Map:用户定义map函数通过处理Record reader处理的键/值,键/值得选择正确(即合理的inputformat)对原创 2016-08-16 19:42:42 · 373 阅读 · 0 评论