命令 使用

本文详细介绍了Hadoop HDFS的常用命令,包括文件操作如统计行数、查看文件、上传、重命名、删除,以及解决HDFS相关问题,如磁盘满、NameNode和DataNode启动问题、Web UI访问限制和安全模式等。还讨论了HDFS的参数设置、权限管理和数据迁移方法。
摘要由CSDN通过智能技术生成

停止任务
yarn application -kill jobId
在这里插入图片描述

hdfs常用命令:

统计行数
hadoop fs -cat ‘/data/ioc/20200327/*’ | wc -l

查看文件前5行
hdfs dfs -text /data/ioc/20200317/ioc99.txt.csv |head -5
上传:
hadoop fs -put wp.txt /user
添加文件到hdfs上已经有的文件:
hadoop fs -appendToFile a.txt /user/wp.txt
hdfs删除文件:
hadoop fs -rm -r 路径
把一个目录下的文件mv到另一个目录

hadoop fs -mv /user/vpetest.cripac/source_data/result/ssd/20181020/* /user/vpetest.cripac/source_data/result/ssd2/20181020

重命名

hadoop fs -mv /user/vpetest.cripac/source_data/result/ssd2 /user/vpetest.cripac/source_data/result/ssd

查看hadoop 状态
hadoop dfsadmin -report

磁盘写满:
http://qindongliang.iteye.com/blog/2091989
http://www.linuxidc.com/Linux/2015-02/113638.

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值