背着空空的行壤，一路走来，收拾着点点滴滴...

环境： win7+eclipse+ ubuntu+hadoop 开始运行时报没有权限，只要把 hdfs的权限加大： [code="java"] hadoop dfs -chmod -R 777 /usr/local/hadoop/hadoop-dir/hadoop-dev/tmp/ [/code] 接着运行MR报 内存一出： 运行时加入参数：因为 mapred.child.j...

Hbase在Hadoop Ecosystem中的位置 [url]http://dl.iteye.com/upload/attachment/0063/9761/6aa8e129-9c21-3fef-882d-deeac3f96fa9.jpg[/url]

[code="java"] //是否进入或者是否还在安全模式 hadoop dfsadmin -safemode get //输出 Safe mode is ON //namenode节点的启动和关闭 hadoop-daemon.sh stop namenode hadoop-daemon.sh start namenode //停止某个数据节点上的 HRegionse...

Linux文件系统参数调整: （1） noatime 和 nodiratime属性 文件挂载时设置这两个属性可以明显提高性能。。默认情况下，Linux ext2/ext3文件系统在文件被访问、创建、修改时会记录下文件的时间戳，比如：文件创建时间、最近一次修改时间和最近一次访问时间。如果系统运行时要访问大量文件，关闭这些操作，可提升文件系统的性能。Linux 提供了 noatime 这个参数来禁...

几天没有启动hbase，今天重新启动，却发现 HRegionServer没有启动， 到 region server 查看 jps，里面只有HQuorumPeer，没有 HRegionServer。 于是就单独启动: [code="java"] hbase-daemon.sh --config /usr/local/hbase/hbase-conf start regionserver [...

删除hdfs文件报 permission denied的处理, 参考: http://heipark.iteye.com/blog/1068139 http://blog.sina.com.cn/s/blog_5f3895a00100w2pu.html 分M/R和客户端程序两种情况. case A: M/R，只要在执行的机器上加入java参数 [code="java"]-...

1,master slaves文件只有 namenode secondnamenode jobtracker这3个机器需要知道，其他的datanode不需要知道，也就是说如果修改了这2个文件，那么只要同步以上提到的3个机器就可以了，而一般的开发测试环境，这3个机器是在同一个机器上。 2,需要的默认内存 datanode默认内存为2.8G namenode默认内存为3G secondname...

hadoop1.0.0没有eclipse 插件包，今晚自己编译了一个： [code="java"] check-contrib: init: [echo] contrib: eclipse-plugin init-contrib: ivy-download: [get] Getting: http://repo2.maven.org/maven2...