linux下搭建hadoop环境

参考网址http://www.linuxidc.com/Linux/2012-02/53927.html以及http://www.cnblogs.com/alexyoung/（小康康）

按照教程一步一步的来就差不多就能完成，我也懒，就不写了，这里就写几个出现的问题。

1 报错如下

ERROR namenode.NameNode: java.io.IOException: Cannot create directory /usr/local/hadoop/datalog1/current

这里面是因为hadoop的权限问题，因为我使用的是user身份，理论上无法写入/usr/localhadoop，因此输入 sudo chmod 757 hadoop来更改hadoop文件夹的权限，使能够输入。
2 用gedit打开文件时总会报错，但是不影响打开文件和更改文件，好像没什么问题，但是总是会报两行错误

由于ubuntu默认不启用root账户，所以root就从来没登录过，所以就没有/root/.local/share/目录在ubuntu中运行所以会出错，只要建立这个目录就解决了。

解决方法：sudo mkdir -p /root/.local/share/

操作的时候的小问题也有很多，现在都没什么印象了，只是搭建这个平台就花费了4天的时间，但是也让我学到了很多东西，至少熟悉了shell终端的基本使用以及一些命令。还是值得的。

截几个图留做纪念吧

lulu@ubuntu1:/usr/local/hadoop$ bin/hadoop namenode -format
13/07/18 19:04:21 INFO namenode.NameNode: STARTUP_MSG:
/************************************************************
STARTUP_MSG: Starting NameNode
STARTUP_MSG:   host = ubuntu1/127.0.1.1
STARTUP_MSG:   args = [-format]
STARTUP_MSG:   version = 1.0.3
STARTUP_MSG:   build = https://svn.apache.org/repos/asf/hadoop/common/branches/branch-1.0 -r 1335192; compiled by 'hortonfo' on Tue May  8 20:31:25 UTC 2012
************************************************************/
13/07/18 19:04:21 INFO util.GSet: VM type       = 32-bit
13/07/18 19:04:21 INFO util.GSet: 2% max memory = 17.77875 MB
13/07/18 19:04:21 INFO util.GSet: capacity      = 2^22 = 4194304 entries
13/07/18 19:04:21 INFO util.GSet: recommended=4194304, actual=4194304
13/07/18 19:04:22 INFO namenode.FSNamesystem: fsOwner=lulu
13/07/18 19:04:22 INFO namenode.FSNamesystem: supergroup=supergroup
13/07/18 19:04:22 INFO namenode.FSNamesystem: isPermissionEnabled=true
13/07/18 19:04:22 INFO namenode.FSNamesystem: dfs.block.invalidate.limit=100
13/07/18 19:04:22 INFO namenode.FSNamesystem: isAccessTokenEnabled=false accessKeyUpdateInterval=0 min(s), accessTokenLifetime=0 min(s)
13/07/18 19:04:22 INFO namenode.NameNode: Caching file names occuring more than 10 times
13/07/18 19:04:22 INFO common.Storage: Image file of size 110 saved in 0 seconds.
13/07/18 19:04:22 INFO common.Storage: Storage directory /usr/local/hadoop/hdfs/name has been successfully formatted.
13/07/18 19:04:22 INFO namenode.NameNode: SHUTDOWN_MSG:
/************************************************************
SHUTDOWN_MSG: Shutting down NameNode at ubuntu1/127.0.1.1
************************************************************/
lulu@ubuntu1:/usr/local/hadoop$ bin/start-all.sh

 

 

lulu@ubuntu1:/usr/local/hadoop$ jps
6972 NameNode
8524 Jps
8474 TaskTracker
7431 JobTracker
7832 DataNode
哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈哈

转载于:https://www.cnblogs.com/dolphinleaf/p/nanheblog1.html