HDFS
默默谦行
这个作者很懒,什么都没留下…
展开
-
大数据学习之四 HDFS流程图解,网络拓扑,机架感知
大数据学习之四 HDFS流程图解,网络拓扑,机架感知HDFS读操作HDFS写操作网络拓步机架感知(副本节点选择)HDFS读操作流程解析:客户端(client)向NameNode请求上传文件,NameNode检查目标文件是否已经存在,父目录是否已经存在。NameNode返回是否可以上传文件。客户端请求第一个block(块,默认128MB)要上传到哪几个DataNode上。NameN...原创 2019-12-10 20:32:40 · 251 阅读 · 0 评论 -
大数据学习之 HDFS IO API的简单使用
大数据学习之三点五 HDFS IO API的简单使用以及四大机制和上传下载HDFSIO流 API练习HDFS四大机制1、心跳机制2、机架策略——副本存放策略3、负载均衡4、安全模式HDFS写入与下载HDFSIO流 API练习import java.io.FileOutputStream;import java.io.FileInputStream;import org.apache.had...原创 2019-10-27 21:08:03 · 304 阅读 · 0 评论 -
大数据学习之 HDFS API的简单使用
HDFS API的简单使用需要配置的pom.XML文件需要在****中添加如下内容 <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-common</artifactId> ...原创 2019-10-20 15:41:57 · 322 阅读 · 0 评论