Hadoop
闫不由衷
这个作者很懒,什么都没留下…
展开
-
MapReduce远程调试
1、修改datanode上的mapred-site.xml,增加2个属性vi hadoop-2.5.2/etc/hadoop/mapred-site.xml mapred.map.child.java.opts -Xmx1024m -Xdebug -Xrunjdwp:transport=dt_socket,server=y,suspend=y,address=888原创 2014-12-18 14:29:52 · 955 阅读 · 0 评论 -
Win7下提交MapReduceJob到集群环境
1、下载hadoop-2.5.2.tar.gz,解压到D:\hadoop目录下2、下载hadoop-common-2.2.0-bin-master.zip,将其中的hadoop.dll和winutils.exe复制到D:\hadoop\hadoop-2.5.2\bin目录下3、配置环境变量HADOOP_HOME=D:\hadoop\hadoop-2.5.2,在PATH中原创 2014-12-09 14:06:44 · 538 阅读 · 0 评论 -
Hadoop 2.5.2 集群配置
1.环境准备3台主机,安装Centos 64-bit操作系统,采用最小安装。修改/etc/hosts 文件,增加三台机器的ip和hostname的映射关系192.168.11.196 cloud005192.168.11.158 nbddh01192.168.11.159 nbddh022.安装JDK、配置环境变量(每台机器执行相同操作,最后将java安装在相同路径原创 2014-12-09 14:00:05 · 653 阅读 · 0 评论