在部署Hadoop,spark的过程中,启动步骤比较繁琐,需要进入到各个目录进行启动。
现根据shell一键全部启动作为shell入门学习,测试通过。
vim startHadoop.sh
#! /bin/bash
## This is my first shell script
##start hadoop and spark jps
## create by sujun 2014-3-6
#####date格式化 '+%Y%m%d %H:%M:%S'%Y表示年,%m表示月,%d表示日期,%H表示小时,%M表示分钟,%S表示秒 +%w 周几
date
USER_JAVA=/usr/java
##start hadoop2.0.0
echo 'being start hadoop..'
cd $USER_JAVA/hadoop-2.0.0/sbin
echo 'hadoop--/usr/java/hadoop-2.0.0/sbin'
ls
start-all.sh
##start spark
cd $USER_JAVA/spark-0.8.1-incubating-bin-hadoop2
cd bin
ls
start-all.sh
##validate start is success
jps
## start hive server hwi
##cd $USER_JAVA/hive-0.9.0-bin
##cd bin
##hive --service hwi
第一行一定是 “#! /bin/bash” 它代表的意思是,该文件使用的是bash语法。如果不设置该行,那么你的shell脚本就不能被执行。’#’表示注释,在前面讲过的。后面跟一些该脚本的相关注释内容以及作者和创建日期或者版本等等。
另外使用sh命令去执行一个shell脚本的时候是可以加-x选项来查看这个脚本执行过程的,这样有利于我们调试这个脚本哪里出了问题。
----分配权限 chmod 777 **.sh