配置Linux+Hadoop平台时的一些小心得(包含错误)

1.

source/etc/profile是让/etc/profile文件修改后立即生效,

还有一种方法是:. /etc/profile

注意:.和/etc/profile有空格

2.

执行cp命令时提示cp: 略过目录

加入-r之后成功拷贝

3.

今天全新安装Ubuntu 12.4的系统,想安装Openssh-server软件。

Openssh-server安装命令:sudo apt-get install openssh-server

按以上命令敲入后,会提示各种错误,导致无法正常的安装。

问题解决:

先 sudo apt-get update (用于更新安装源,如果安装源不好的话,就会导致软件安装失败)

然后在敲安装openssh-server的命令即可。

4.

启动Hadoop

1.hadoop namenode -format
2.start-dfs.sh

3.start-all.sh

5.

utlocalhost: tasktracker running as process 9175. Stop it first.这个表示tasktracker已经启动,执行stop-all.sh关闭所有进程再重新启动就好了。
6.

好用的启动Hadoop方式:

执行启动命令:

    sbin/start-dfs.sh    

    执行该命令时,如果有yes /no提示,输入yes,回车即可。    

    接下来,执行:

    sbin/start-yarn.sh    

    执行完这两个命令后,Hadoop会启动并运行    

    执行 jps命令,会看到Hadoop相关的进程,如下图:

7.

运行jps提示jps包含在多个jdk软件中时。以下方法配置。

我的正常;设置如下供参考:(我的jdk在/usr/jdk16下)
environment设置: sudo gedit /etc/environment

PATH="/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games:/usr/jdk16/bin:/usr/jdk16/jre/bin"

export JAVA_HOME=/usr/jdk16
export JRE_HOME=/usr/jdk16/jre
export CLASSPATH=.:$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib


profile设置: sudo gedit /etc/profile

export NDK=/home/jialiry/android/android-ndk-r8d
PATH=$NDK:$PATH
export JAVA_HOME=/usr/jdk16
export JRE_HOME=/usr/jdk16/jre
export CLASSPATH=.:$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib
export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH:$HOME/bin

8

开启Hadoop后JPS没有NameNode。未解决。(没解决?)

9.

Ubuntu中自定义VMNET8(NAT模式)可共享上网

Ubuntu中解压VMvaretool,然后终端中运行vmwaretool-install.pl 然后重启系统即可。

10.

问题解决:Input path does not exist: hdfs://localhost:9000/user/hadoop

一。datanode无法启动-----解决很方便,format直前rm -rf tmp呗,然后mkdir tmp,这样就OK了。 当然你没必要每次重启就format,不format就不会出现namesapceID的问题。

二。

11.

出现Not a valid JAR----路径错误。

12.

utubun位数查看

查看cpu信息
cat /proc/cpiinfo

查看ubuntu版本:

cat /etc/issue

查看系统是32位还是64位
方法1:
#查看long的位数,返回32或64 getconf LONG_BIT
 
方法2:
#查看文件信息,包含32-bit就是32位,包含64-bit就是64位
file /sbin/init




  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值