hdfs

原创 2015年11月18日 12:44:09
http://www.cnblogs.com/chinacloud/archive/2010/12/03/1895369.html

大数据学习篇:hadoop深入浅出系列之HDFS(一)——HDFS简介和优缺点

上一篇,我们说了hadoop的伪分布式安装,今天我们来说说著名的HDFS HDFS,顾名思义 Hadoop Distributed File System,至于它的来历我就不说了,网上比比皆是。 随...
  • stronglyh
  • stronglyh
  • 2015年09月20日 23:24
  • 1375

HDFS客户端

刚自学完hadoop,想做个小项目练练手,看到网上普天盖地的基于hdfs的网盘设计,也就想实现一个,写着写着发现这根本就不是网盘,这明明就是HDFS客户端嘛。。。 这个客户端其实很简陋,学生嘛,可以...
  • lfdanding
  • lfdanding
  • 2015年08月10日 14:05
  • 2432

HDFS性能测试及优化部署

hadoop的存储系统hdfs在大数据领域有着无可比拟的地位,本篇文章对hdfs的存储性能做一个相对详细的测试,影响因素有哪些,来帮助我们优化部署应用程序和hadoop集群,最大化利用hadoop的吞...
  • cyony
  • cyony
  • 2017年03月16日 16:19
  • 1684

HDFS集群安装配置

HDFS 2.7.2 配置文档学习笔记。
  • wangwenzhi276
  • wangwenzhi276
  • 2016年11月17日 21:29
  • 1534

HDFS分布式安装配置笔记

1.准备三台虚拟机 centos6.5 192.168.20.171 node1 NameNode节点 centos6.5 192.168.20.172 node2 DataNode节点、Second...
  • xuxile
  • xuxile
  • 2017年02月17日 18:45
  • 1964

HDFS读写文件流程

1.HDFS写流程: 客户端要向HDFS写数据,首先要跟namenode通信以确认可以写文件并获得接收文件block的datanode,然后,客户端按顺序将文件逐个block传递给相应datanode...
  • qq_20641565
  • qq_20641565
  • 2016年11月24日 23:49
  • 5219

HDFS中的数据存储路径——StorageDirectory

在HDFS中,无论是NameNode节点还是DataNode节点都需要使用它们所在的本地文件系统来存储与自己相关的数据,如:NameNode节点存储系统命名空间的元数据,DataNode节点存储文件的...
  • xhh198781
  • xhh198781
  • 2011年12月31日 19:03
  • 5251

使用python的hdfs包操作分布式文件系统(HDFS)

使用python的hdfs包操作HDFS文件系统,实例+参数的详细说明,参考官网资料整理的一篇博客...
  • Gamer_gyt
  • Gamer_gyt
  • 2016年09月07日 00:00
  • 14734

HDFS数据恢复模式

前言 在现有的HDFS中,为了保证元数据的高可用性,我们可以在配置项dfs.namenode.name.dir中配置多个元数据存储目录来达到多备份的作用。这样一来,如果其中一个目录文件损坏了,我们可...
  • Androidlushangderen
  • Androidlushangderen
  • 2016年09月28日 15:45
  • 3000

HDFS源码分析(1)----HDFS概述

从这篇博文开始,我将会结合以前阅读HDFS源代码的记录,再看一遍HDFS的源码,并进行整理写出来。现在网上和市面上有很多HDFS源码分析的资料,而且写的都不错,我这里只是作为自己的一个资料备份吧,博文...
  • gaoxingnengjisuan
  • gaoxingnengjisuan
  • 2013年09月04日 21:59
  • 9094
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:hdfs
举报原因:
原因补充:

(最多只允许输入30个字)