hadoop 文件浏览器

在 Eclipse 环境下进行开发和调试
http://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop2/index.html
IBM Hadoop Eclipse Plugin
http://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop2/mapreduce_plugin.zip

它可以把本地代码在hadoop上运行. 右击main类, 点"Run on hadoop", 它会把类打包成jar上传到服务器, 然后运行. 但有个缺点:main 的输入参数无效, 必须写在代码里面.

项目show里可以看到蓝色象, 可以浏览hdfs, 这点方便, 还可以把本地的目录/文件上传到hdfs.

当然浏览hdfs还可以用hadoop的web, 比如:http://master:50070/ 然后, 点Browse the filesystem , 但这方法不能上传文件.

现推荐一个比较好的hdfs文件浏览器. muCommander HDFS, 详情请看: http://www.hadoop.org.cn/tools/mucommander-hdfs/

比IBM Hadoop Eclipse Plugin速度快, 我用hadoop-0.17.1可以运行

转载于:https://www.cnblogs.com/wycg1984/archive/2009/09/16/1567662.html

要查看Hadoop中的文件,可以使用以下命令:hadoop fs -ls <path>。其中,<path>是要查看的文件文件夹的路径。例如,如果要查看根目录下的文件文件夹,可以使用命令hadoop fs -ls /。这将列出根目录下的所有文件文件夹。\[1\]如果想要查看文件夹的总大小,可以使用命令hadoop fs -du -s -h <path>。其中,-s表示只显示文件夹的总大小,-h表示以合适的单位(KB,MB,GB,TB)显示文件大小。\[2\]另外,如果想要解决关于文件路径的各种问题,可以使用命令hadoop fs -test <path>。该命令可以检查文件文件夹是否存在,以及文件的大小等信息。\[3\] #### 引用[.reference_title] - *1* [HaDoop文件系统HDFS浏览器查看](https://blog.csdn.net/Haiyang_Duan/article/details/53287973)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* *3* [hadoop文件查询指令](https://blog.csdn.net/fangfanglovezhou/article/details/112305537)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值