hdfs的实验总结_HDFS原理及操作

本文详述了三个HDFS操作实验,包括从HDFS读取文件、将本地文件部分写入HDFS及从HDFS读取内容到本地。实验涉及创建HDFS目录、文件上传、配置环境、编写并编译Java代码以及验证操作结果。通过实验,加深了对HDFS读写流程的理解。
摘要由CSDN通过智能技术生成

HDFS实验报告

目录:

一、三个实验总结步骤

二、三个实验具体步骤

三、实验心得

一、三个实验总结步骤

(1)测试例子1.编译代码读取HDFS文件内容

在/app/hadoop-1.1.2目录下建立myclass和input目录,

在hdfs中建立目录/class4;

input目录下建立并编写quangle.txt文件,

将本地quangle.txt文件复制到class4目录下;

myclass目录下建立、编写并编译FileSystemCat.java代码文件,

使用编译代码读取class4目录下的quangle.txt文件。

(2)测试例子2.编译代码读取本地文件并将本地文件的部分内容写到HDFS

myclass目录下建立、编写并编译LocalFile2Hdfs.java代码文件;

input目录下建立并编写local2hdfs.txt文件;

使用编译代码将local2hdfs.txt文件的部分内容上传到HDFS,

成为class4目录下的新文件local2hdfs_part.txt;

读取local2hdfs_part.txt文件内容验证是否上传成功。

(3)测试例子3.编译代码读取HDFS中文件并将HDFS中文件的部分内容写到本地

myclass目录下建立、编写并编译Hdfs2LocalFile.java代码文件;

input目录下建立并编写hdfs2local.txt文件,

将该hdfs2local.txt文件复制到class4目录下;

使用编译代码将class4目录下hdfs2local.txt文件

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值