晴风拂面，消融严寒

上一节，讲解了HDFS的原理，以及相关的hadoop系统安装文档，参考文档可以轻松的搭建好，Hadoop伪分布式集群环境，这一节主要讲解一下如何操作HDFS，及HDFS文件的存储方式。本章对HDFS的常见操作方法做了简单介绍，掌握需要结合实际操作过程，实验操作手册请在下载专区下载。

Hadoop分布式文件系统（HDFS）扮演着非常重要的大数据存储作用，以文件的形式为上层应用提供海量的数据存储服务，高可靠、高容错、高扩展性。本文具体介绍HDFS分布式文件系统，实验安装部分可参考Hadoop伪分布式集群环境搭建可参考博客资源下载Hadoop集群部署及测试实验（一）.docxHadoop集群部署及测试实验（二）.docxHadoop集群部署及测试实验（三）.docx。

根据IDC 监测，人类产生的数据量正在呈指数级增长，大约每两年翻一番，这个速度会继续保持下去，数据结构日趋复杂，大量新数据源的出现则导致非结构化、半结构化数据爆发式的增长。2020 年，整个世界的数据总量达到60ZB（1ZB=10 亿TB）中国数据量增速迅猛，总量占全球占比达20%大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产。