- 博客(7)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 停止启动集群命令
192.168.2.101 hadoop beixin*K88 切记一定要用hadoop账户 停止hadoop集群 cd /opt/hadoop-2.6.0/sbin ./stop-all.sh hbase集群关闭 cd /opt/hbase-0.98.11/bin ./stop-hbase.sh zookeeper集群关闭 ser
2016-02-14 13:21:04
1454
原创 常用shell例子
1、列出目录及其子目录和文件 #!/bin/sh function scandir() { local cur_dir parent_dir workdir workdir=$1 cd ${workdir} if [ ${workdir} = "/" ] then cu
2015-11-12 17:26:09
597
原创 shell必懂知识点
1、 exec 3>&1 #在当前SHELL环境中将文件标识3与标准输出相关联（备份一个stdout） exec 3>&- #为SHELL后续代码关闭文件标识3 2、 &>/dev/null解释 ：> 代表重定向到哪里，例如：echo "123" > /home/123.txt ：/dev/null 代表空设备文件 ：2> 表示stderr标准错误 ：& 表示等
2015-11-06 20:10:23
655
原创 工作常用命令汇总
1、查看磁盘总体使用情况以及可使用情况 df -lh 2、hadoop命令查看文件大小 hadoop fs -du -h / 3、hadoop查看总体使用情况 hadoop dfsadmin -report 4、查看文件在哪里 locate 文件名 5、文件按时间排序 ll -rt 6、查看tomcat是否启动 ps -ef | grep tomcat
2015-11-05 15:23:39
1287
原创 hive数据迁移
数据迁移脚本： 1、在原集群上创建，并设置相应权限 hadoop fs -mkdir /tmp/hive-export 2、生成导出脚本 hive -e "use fangyc;show tables " | awk '{printf "use fangyc;export table %s to @/tmp/hive-export/%s@;\n",$1,$1}' | sed "s/@/'
2015-11-04 21:07:38
1081
原创 java通过thrift调用python远程执行shell
1、首先是在centos安装thrift 2、thrift不懂得可以参考http://blog.csdn.net/weiliu0626/article/details/8237983这篇文章 3、首先编写middle.thrift文件 namespace java com.vrv.bigdata.deploy struct ReturnMessage { 1: list shellL
2015-10-16 19:32:01
1598
原创 内网编译thrift 0.8
1、 因为thrift的内网编译比较特殊，它需要在网络环境下面下载所依赖的maven的jar包 所以需要我们现在网络环境下安装thrift，如下网址为在网络环境下安装 http://www.cnblogs.com/siwei1988/archive/2012/07/23/2605140.html 安装完成后把/thrift-0.8.0/lib/java/build/tools目录中的m
2015-08-31 17:38:45
844
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人