脚本
文章平均质量分 58
天然呆的技术博客
纯天然的技术小呆呆
展开
-
Shell学习总结
1,shell的基本元素 (1) #!/bin/bash ,指出shell的类型 (2)# 注释 (3)变量 (4)控制 2,一个简单的Shell程序 #!/bin/bash shell类型 #a simple shell script example #a function function sayhello()原创 2014-01-18 13:17:44 · 1627 阅读 · 0 评论 -
部署微博自动爬取组件
#!/bin/bash THIS_PATH='/home/bigdata/script/weibo-userid' cd $THIS_PATH if [ -z "$1" ];then echo "please input date,The data format is yyyymmdd." exit 1 fi DAY=$1 YEAR=${DAY:0:4} M原创 2015-04-30 21:24:55 · 495 阅读 · 0 评论 -
impala access hive table
HADOOP_CLIENT_DIR=/opt/cloudera/parcels/CDH/lib/hadoop/client/ HIVE_LIB_DIR=/opt/cloudera/parcels/CDH/lib/hive/lib IMPALA_LIB_DIR=/opt/cloudera/parcels/CDH/lib/impala/lib CLASSPATH=$HIVE_原创 2014-09-04 22:01:01 · 595 阅读 · 0 评论 -
phoenix access hbase
java -cp "$HADOOP_HOME/../phoenix/phoenix-4.0.0-incubating/hadoop-1/phoenix-4.0.0-incubating-client.jar:phoenixTest-1.0-SNAPSHOT-jar-with-dependencies.jar" com.gridsum.aud.phoenixTest.Test原创 2014-09-04 22:01:49 · 606 阅读 · 0 评论 -
不常用的命令
centoos 安装 rz和sz: yum -y install lrzsz原创 2014-06-09 22:33:50 · 524 阅读 · 0 评论 -
mapreduce access hive table
$ export HCAT_HOME=/usr/lib/hcatalog $ export HIVE_HOME=/usr/lib/hive $ HCATJAR=$HCAT_HOME/share/hcatalog/hcatalog-core-0.5.0-cdh4.3.0.jar $ HCATPIGJAR=$HCAT_HOME/share/hcatalog/hcatalog-pig-adapter-0原创 2014-09-04 22:00:02 · 577 阅读 · 0 评论 -
hadoop-0.20-env.sh
# Set Hadoop-specific environment variables here. # The only required environment variable is JAVA_HOME. All others are # optional. When running a distributed configuration it is best to # set JAVA原创 2014-06-05 20:27:52 · 571 阅读 · 0 评论 -
count.sh
#! /bin/bash tmpfile=`date '+%Y%m%d%H%M%S'`.txt echo $tmpfile for i in `find /home/hadoop/tmp/log -name localhost*` do echo $i if[ -s $i ] then cat $i >> $tmpfile rm -f $i fi done if原创 2014-04-27 20:20:26 · 517 阅读 · 0 评论 -
exp_start.sh
#! /usr/bin/expect set hostno [lindex $argv 0] set passwd [lindex $argv 1] set CD_HOME [lindex $argv 2] set commond [lindex $argv 3] spawn ssh $hostno expect "*password:" send "$passwd\r" e原创 2014-04-27 20:23:08 · 540 阅读 · 0 评论 -
start_all.sh
#! /bin/bash for host1 in master1 master1-s slave1 do ./exp_start.sh hadoop@$host1 '1234' "cd $ZOOKEEPER_HOME" 'bin/zkServer.sh start' done for host2 in master1 master1-s slave1 do原创 2014-04-27 20:21:52 · 773 阅读 · 0 评论 -
stop_all.sh
#! /bin/bash ./exp_start.sh hadoop@master1 '1234' "cd $HADOOP_HOME" 'sbin/stop-yarn.sh' ./exp_start.sh hadoop@master1 '1234' "cd $HADOOP_HOME" 'sbin/hadoop-daemons.sh stop datanode' for h原创 2014-04-27 20:22:27 · 664 阅读 · 0 评论 -
python-十分钟入门
http://developer.51cto.com/art/201207/347006.htm python十分钟入门 http://sebug.net/paper/python/ 简明python教程 【简介】 Python(蟒蛇)是一种动态解释型的编程语言。Python可以在Windows、UNIX、MAC等多种操转载 2014-03-06 12:04:51 · 1018 阅读 · 0 评论 -
python------大脚印
1,程序媛都懂的hello word! print 'hello world' 2,占位符 print "%s is number %d" % ("daidai",1) 3,中文输出 #! /usr/bin/env python # coding:UTF-8 import sys print >> sys.stderr,"错误信息:非法输入" 4,重定向到文件 #原创 2014-03-12 18:00:42 · 781 阅读 · 0 评论 -
perl----
第一课、Perl 概述 Perl概述 第一个Perl程序 提问并保留结果 增加选择 猜测密码 别期望在一刻钟内就能领略Perl的所有神奇之处, 这种情况很像吃香蕉, 用不着吃完整只香蕉后才知其味,每咬一口都是享受,并促使你再咬下一口,再下一口。 ----Larry Wall Perl概述 P原创 2014-03-11 15:08:57 · 792 阅读 · 0 评论 -
python入门地址
http://linux.chinaunix.net/techdoc/beginner/2008/05/05/1000568.shtml原创 2014-02-28 10:02:29 · 594 阅读 · 0 评论 -
java cp 和 hadoop cp
java -cp "/opt/cloudera/parcels/CDH/lib/hbase/conf/:/opt/cloudera/parcels/CDH/lib/hbase/hbase-common.jar:/opt/cloudera/parcels/CDH/lib/hbase/hbase-client.jar:/opt/cloudera/parcels/CDH/lib/hbase/hbase-原创 2015-04-30 21:29:09 · 812 阅读 · 0 评论