hadoop
文章平均质量分 80
iteye_9166
这个作者很懒,什么都没留下…
展开
-
hadoop运行环境的搭建和hadoop源代码的编译
hadoop运行环境搭建:http://blog.csdn.net/licongcong_0224/article/details/12972889注:(1)所有的配置文件和节点处不要有空格; (2)master和所有的slaves的hadoop安装路径要一致; (3)datanode无法启动的原因八成是你多次format namenode造成的;解...原创 2014-05-06 22:22:44 · 151 阅读 · 0 评论 -
hadoop shell命令
[color=blue][i][b]hadoop shell命令手册[/b][/i][/color][url]http://hadoop.apache.org/docs/r1.0.4/cn/commands_manual.html[/url]常用的有HDFS管理命令[color=red][i]fs[/i][/color]、作业管理命令[i][color=red]job[/color][/i...原创 2014-05-19 23:04:58 · 177 阅读 · 0 评论 -
hadoop代码调试
[url]http://book.51cto.com/art/201312/422006.htm[/url]原创 2014-05-19 23:22:52 · 111 阅读 · 0 评论 -
hadoop应用程序实例distributedshell
本文介绍YARN自带的一个非常简单的应用程序实例—distributedshell的使用方法。它可以看做YARN编程中的“hello world”,主要功能是并行执行用户提供的shell命令或者shell脚本。 (1)运行参数介绍DistributedShell的基本运行参数如下:(2)运行方法DistributedShell的运行方法如下:在YARN安装目录下,执行...原创 2014-06-23 14:47:12 · 341 阅读 · 0 评论 -
hadoop应用程序实例 Unamanaged AM
1. 概述在YARN中,一个ApplicationMaster需要占用一个container,该container可能位于任意一个NodeManager上,这给ApplicationMaster测试带来很大麻烦,为了解决该问题,YARN引入了一种新的ApplicationMaster—Unmanaged AM(具体参考:MAPREDUCE-4427),这种AM运行在客户端,不再由Res...原创 2014-06-23 14:50:18 · 151 阅读 · 0 评论 -
Hadoop各商业发行版之比较
转自<http://www.cnii.com.cn/technology/2012-11/19/content_1020624.htm>Hadoop的发行版除了社区的Apache hadoop外,cloudera,hortonworks,mapR,EMC,IBM,INTEL,华为等等都提供了自己的商业版本。商业版主要是提供了专业的技术支持,这对一些大型企业尤其重要。每个发行版都有...原创 2014-07-21 16:05:02 · 162 阅读 · 0 评论 -
Hadoop 2.2.0版本./start-all.sh错误解决
转自<http://www.lvcy.net/?post=162>001This script is Deprecated. Instead use start-dfs.sh and start-yarn.sh002Starting namenodes on [Java HotSpot(TM) 64-Bit Server VM warnin...原创 2014-08-27 14:29:35 · 347 阅读 · 0 评论