今日学习大数据Hadoop小总结

Linux命令

1. 服务器之间文件的简单拷贝

   scp -r /...  lianjie@hadoop103:/...   推 所有  
   scp -r lianjie@hadoop103:/...   ./    拉 所有
   rsync -av ./* lianjie@hadoop103:/...  推 不同的
   

2. 进入root su root

   退出root用户 exit

3. 把一个文件内容写到另外一个文件

cat 文件名 >> 文件名

4. tar -zxvf 压缩名 -C 指定到某个位置

Hadoop

1. bit byte kb MB GB TB PB EB (1024除了byte=8bit)

1.命令

-- mapred --daemon stop historyserver   关闭MR历史服务器的服务
-- sudo ntpdate hadoop102（或者互联网上的时间服务器地址） 
-- sudo systemctl status crond  查看定时同步时间的调度器是否开启
-- sudo crontab -l 查看当前crond的定时任务   -r关闭定时任务  -e创建定时任务
-- hadoop fs -moveFromLocal   本地文件    hdfs的路径    剪切式
-- hadoop fs -ls  hdfs上的路径
-- hadoop fs -put 本地文件    hdfs的路径    复制式
-- hadoop fs -appendToFile 文件名   hdfs上的文件  >追加<
-- hadoop fs -cat hdfs文件
-- hadoop fs -get(-copyToLocal) hdfs文件 本地路径(./ 当前路径下) 
-- hadoop fs -mv hdfs路径 hdfs路径
-- hadoop fs -rm -r 递归删
-- hadoop fs -du -s[累加统计] -h[换算单位] 查看目录大小