大数据入门第一天总结

1.基础认识
[root@ruozedata001 ~]#
root ——登录的用户
ruozedata001 ——机器的名称
~ ——家目录
目录 = 文件夹=路径
绝对路径： / 根目录 以根目录开始的
相对路径： 不以根目录开始，以光标所在目录为开始（基础）
2.基本命令
① pwd ——查看当前光标所在目录
②切换目录
cd - ——回退上一次的目录
cd ——切换到家目录
cd ~ ——回退家目录
cd /root —— 回退家目录
cd…/ ——回退上一层目录 可叠加
进入某个目录： 1.cd /usr/local/bin
2.cd bin
3.cd ./bin
③clear 清空屏幕
④查看当前光标所在的目录 文件有哪些
ls ——光标所在目录的文件
ls -l ——光标所在目录的文件，以及时间、大小等信息
ll ——等价于ls -l
ll -a ——查看当前的文件文件夹+隐藏文件文件夹（以.开头）
ll -h ——文件的大小
ll -rt ——按时间排序
⑤查询命令帮助
所查询命令 --help
man 命令
⑥创建文件夹

mkdir a

创建单文件夹a

mkdir -p b/c/d

创建成套子文件夹b[c(d)]

mkdir 1 2 3

创建多个文件夹1 2 3
⑦剪切、复制
mv ruoze.log 1（文件夹） 直接移动到文件夹1中
mv ruoze.log ruoze.log20191110 不移动，直接重命名
mv ruoze.log 1/ruoze.log20191110 移动+重命名
cp -r ruoze.log 1（文件夹） 复制
cp ruoze.log 1/ruoze.log20191110 复制+重命名
⑧创建空文件 或者把一个文件设置为空
touch rz.org 设置一个空文件
echo “” > rz.org (慎用，会自带一个空字节)一个箭头为覆盖，两个为追加
cat /dev/null > rz.org 把一个文件设置为空文件
⑨查看文件内容
cat 文件内容全部显示
more 文件内容按空格键往下翻一页，按q退出
less 按方向键上下移动，按q键退出
一般来说配置文件，内容较少 cat more less*
⑩实时查看
tail -f xxx.log
tail -F xxx.log
flume exec source 切记使用 -F (=f+retry)
（xxx.log log4j代码项目 配置输出的日志）
例： xxx.log 保留10份 100M
先输入 aaa–>xxx.log 到达99m
xxx.log 到达100m
然后mv xxx.log xxx.log1
再touch xxx.log 空文件
此时实时查看，若用f，无法追踪新创建的xxx.log，只停留在最初的xxx.log
定位ERROR
a.文件内容很小 几十兆
上传给window
用editplus工具打开
上传下载 yum install -y lrzsz
上传到Windows sz - 文件名 回车上传
b.文件内容很大 几百兆 2G
管道符
cat xxx.log | grep ERROR 命令输出结果 | 命令输入的 管道符
grep过滤
当ERROR上下文不清楚时
cat xxx.log | grep -A 10 ERROR 后10行
cat xxx.log | grep -B 10 ERROR 前10行
cat xxx.log | grep -C 30 ERROR 前后各30行 经常用 迅速定位ERROR上下文
tail -300f messages 实时查看倒数300行文件
注：错误语法 tail -300F messages 不能用 -F

`