hdfs
代码邪皇
这个作者很懒,什么都没留下…
展开
-
hadoop的HDFS常用命令总结
HDFS常用命令:(注意:以下指的本地是:lunix虚拟机的)//查看根目录下的文件列表 hdfs dfs -ls ///递归查看根目录下的文件列表hdfs dfs -ls -R ///上传本地文件到hdfs的根目录hdfs dfs -put /export/data/logs/log.txt ///在hdfs上创建单级目录hdfs dfs -mkd...原创 2019-08-14 14:50:07 · 654 阅读 · 0 评论 -
hadoop distcp hftp hdfs跨集群拷贝常见问题归总
在工作中遇到部门间数据合作,需跨不同版本集群拷贝数据,从hadoop 2.6.0-cdh5.7.0 拷贝数据到hadoop 2.7.1, 记录所碰到的问题及解决方案。distcp基础用法比如拷贝A集群(src集群)的A1目录到B集群(dest集群)的B1目录,1.同版本集群拷贝(hdfs协议):在dest集群(目标集群)运行命令:hadoop distcp hdfs://10.190....原创 2019-08-31 09:26:48 · 6646 阅读 · 0 评论