2015年08月_reisang

12月 11月 10月 08月 07月 06月 05月 04月 03月 02月 01月

原创 sqoop基本操作

列出 hive的所有库 sqoop list-databases --connect jdbc:mysql://localhost --username hive --password hive列出所有的表 sqoop list-tables --connect jdbc:mysql://localhost/hive_metadata --username hive --passwo

2015-08-17 15:06:31 1132

原创 sed删掉换行符

cat urfile | sed 'N;s/\n/ /'

2015-08-17 09:07:26 7332

原创 sed 替换多个空格为一个

sed -i 's/[ ][ ]*/ /g' file.txt

2015-08-14 16:40:46 14389

原创 excel 补全所有空格

首先选中A列，按F5键，再按“定位条件„”按钮，选择空值，这样就把所有空列选中了，但是光标停留的位置是A3格上；然后直接输入“=A2”，再按Ctrl + 回车首先全选中所有列，按F5键，再按“定位条件„”按钮，选择空值，这样就把所有空列选中了，然后直接输入“你想要替换的值”，再按Ctrl + 回车

2015-08-14 16:22:42 1569

原创 hadoop常见操作命令

1、查看指定目录下内容hadoop dfs –ls [文件目录]eg: hadoop dfs –ls /user/wangkai.pt2、打开某个已存在文件hadoop dfs –cat [file_path]eg:hadoop dfs -cat /user/wangkai.pt

2015-08-13 09:01:06 510

原创 shell遍历建文件夹及文件

文件夹#!/bin/shHADOOP=/home/hadoop/hadoop/binfor i in {3..1}do getd=$(date +%Y%m%d -d " ${i} days ago") hadoop fs -mkdir /work/hpsouce/${getd}done文件 #!/bin/shHADOOP

2015-08-11 15:58:20 1189