- 博客(6)
- 收藏
- 关注
RSS订阅原创 bash脚本实例-linux性能数据清洗-1
1. 目标 性能采集脚本将用uptime、vmstat、free、iostat命令采集到的数据记录到了一个日志文件中。本脚本就是将按照不同的标签把数据提取出来，加上标题栏保存为csv文件，方便进一步的分析。 性能数据记录文件。文件的第一列文件时间，一分钟一组数据，第二列为标签，grep这个标签就可以分离数据了。 oliver@bigdatadev:~/_src/testing/analyse
2016-07-25 18:08:47
1726
原创 bash 基本技巧
整理汇总从网上、书上看到的bash脚本的基本技巧，实验记录。 1. select 语句与异常处理 修改/etc/hosts文件增加3条记录 127.0.0.1 server01.demo.com 127.0.0.1 server02.demo.com 127.0.0.1 server03.demo.com用ssh-keygen -t rsa 生产密钥，
2016-07-24 21:39:52
1351
原创 linux 性能数据采集bash脚本
本来是用zabbix来收集性能数据，但在生产环境中不能装zabbix_agent，所以改用shell脚本和操作系统自带的命令来类似的功能。用到的操作系统命令包括vmstat、uptime、free、iostat和ps，采集到的数据保存到文件，一天一个文件。 1.系统整体性能 os_monitor.sh #!/bin/bash os_logfile=$(date "+%Y%m%d")
2016-07-22 17:38:27
743
原创 bash 基础
整理汇总从网上、书上看到的bash脚本的基本用法。 1. -x和read set -x 设置显示shell执行时的没一行内容 set +x 禁用 -x功能 read 接收输入 demo01.sh #!/bin/bash set -x message="Hello" read name set +x echo "$message $name" oliver@bigda
2016-07-20 21:24:39
544
原创 hadoop 开发调试环境-eclipse配置记录
一 目标 基于前面安装的hadoop单机伪分布环境安装配置eclipse和eclipse hadoop 插件，并运行wordcount程序检验是否正确。参考了网上的资料。 二 配置过程 1. 准备软件 eclipse-jee-juno-SR2-linux-gtk-x86_64.tar.gz hadoop-eclipse-plugin-2.2.0.jar 2.安装 1）
2016-07-19 19:58:46
1824
原创 hadoop 开发调试环境
一 目标 虚拟机安装ubuntu14.04（64位），然后安装hadoop 2.6.0（伪分布），pig、hive和mahout，用作开发调试。 二 安装 1. 配置ssh ssh-keygen -t rsa cd ~/.ssh cat id_dsa.pub >> ~/.ssh/authorized_keys 2.软件准备 Jdk和mysql-server 直接用apt-g
2016-07-18 17:40:24
699
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人