HDFS
文章平均质量分 82
-点点滴滴-
这个作者很懒,什么都没留下…
展开
-
使用DFSClient实现 hadoop上传文件功能,采用使用输入输出流实现 Hadoop 版本2.7.0
Hadoop 版本2.7.0使用DFSClient实现hadoop上传文件功能,采用使用输入输出流实现。原创 2016-06-27 09:44:03 · 781 阅读 · 0 评论 -
利用 Hadoop FileSystem listStatus 遍历文件目录 实现HDFS操作
Hadoop 版本 2.7.0利用 Hadoop FileSystem listStatus 遍历文件目录 实现HDFS操作原创 2016-06-27 11:21:46 · 15523 阅读 · 1 评论 -
利用 Hadoop FileSystem moveToLocalFile 方法下载文件 实现HDFS操作
Hadoop 版本 2.7.0利用 Hadoop FileSystem moveToLocalFile 方法下载文件 实现HDFS操作原创 2016-06-27 11:16:48 · 2549 阅读 · 0 评论 -
利用 Hadoop FileSystem 和 FsPermission mkdirs 方法创建目录 实现HDFS操作
利用 Hadoop FileSystem 和 FsPermission mkdirs 方法创建目录 实现HDFS操作Hadoop 版本 2.7.0原创 2016-06-27 11:12:25 · 5548 阅读 · 0 评论 -
利用Hadoop的FileSystem create方法获取 FSDataOutputStream 实现文件的上传
hadoop 版本 2.7.0 这是第三个文件上传的方式:(之前发布了两种文件上传方式,都在我的CSDN的博客中)原创 2016-06-27 10:56:14 · 3281 阅读 · 0 评论 -
利用 hadoop 的 FileSystem copyFromLocalFile 方法实现文件上传HDFS中 Hadoop 版本 2.7.0
利用 Hadoop 的 FileSystem copyFromLocalFile 方法实现文件上传HDFS中 Hadoop 版本 2.7.0 另外说明: 远程调用机器 需要 liunx 修改 /etc/hosts 添加 10.11.12.4 master原创 2016-06-27 10:50:38 · 8983 阅读 · 1 评论 -
利用 hadoop 的 FileSystem open 方法获取 FSDataInputStream 实现文件下载到本地 Hadoop 版本 2.7.0
利用 hadoop 的 FileSystem open 方法获取 FSDataInputStream 实现文件下载到本地 Hadoop 版本 2.7.0原创 2016-06-27 10:37:06 · 5173 阅读 · 0 评论 -
使用DFSClient实现 hadoop上传文件功能,采用使用输入输出流实现 Hadoop 版本2.7.0
Hadoop 版本2.7.0 使用DFSClient实现hadoop上传文件功能,采用使用输入输出流实现。另外说明:代码运行环境中需要配置 /etc/hosts 添加 10.11.12.45 master 否则无法识别 hdfs://master:9000 报错!package com.feng.test.hdfs;import java.io.File;import java.原创 2016-06-27 10:44:36 · 1557 阅读 · 0 评论 -
利用 hadoop 的 FileSystem copyFromLocalFile 方法实现文件上传HDFS中 Hadoop 版本 2.7.0
利用 hadoop 的 FileSystem copyFromLocalFile 方法实现文件上传HDFS中 Hadoop 版本 2.7.0另外说明:远程调用机器 需要 liunx 修改 /etc/hosts 添加 10.11.12.4 master原创 2016-06-27 09:54:12 · 3883 阅读 · 1 评论 -
利用Hadoop的FileSystem create方法获取 FSDataOutputStream 实现文件的上传
利用Hadoop的FileSystem create方法获取 FSDataOutputStream 实现文件的上传hadoop 版本 2.7.0这是第三个文件上传的方式:(之前发布了两种文件上传方式,都在CSDN的博客中)原创 2016-06-27 10:02:04 · 2176 阅读 · 0 评论 -
Hadoop 2.7.1 集群搭建 基于CentOS 6.2
Hadoop 2.7.1 集群搭建 基于CentOS 6.2台式机一个,启动两个CentOS6.2的虚拟机虚拟机:VMware Workstation 12 Pro操作系统版本:CentOS x64 两个系统 master 10.11.12.3 用户root slave 10.11.12.4 用户roothadoop:hadoop-2.7.1.tar.gzJDK:java version "1.7.0_79-b15" 64-Bit原创 2016-06-30 12:39:26 · 1462 阅读 · 0 评论