大数据
松岛的枫叶
这个作者很懒,什么都没留下…
展开
-
HDFS的数据读写流程
读流程客户端------>DistributedFileSystem.open()------>FSDataInputStrean------>ClientProtocol.getBlockLocation()远程调用------>名称节点----------(返回块的数据节点,并排序)-------->DFSInputStream------>客户端----...原创 2019-07-12 18:13:48 · 184 阅读 · 1 评论 -
分布式文件系统的结构
块文件系统采用块的概念,原因是为了减少磁盘寻址时间,把寻道时间分摊到大量数据中Windows Linux等操作系统,文件系统一般会把磁盘空间划分为每512字节一组,称为“磁盘块”它是文件系统读写的最小单位,块(Block)的大小通常是磁盘块的整数倍,即每次读写的数据量必须是磁盘块大小的整数倍。磁盘块--512字节 块的大小一般几千字节 磁盘块与块不是同一概念分布式文件系...原创 2019-07-13 09:49:28 · 3364 阅读 · 1 评论