赈川

常用命令官方文档：http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_shell.html文件的上传和下载推荐博客：https://blog.csdn.net/fuzhongfaya/article/details/80834396

前言以下示例均来自《Hadoop 权威指南》HDFS简介Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时，它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。HD...

推荐博客：https://blog.csdn.net/xujieyang4j/article/details/79721016

Windows系统推荐博客：https://blog.csdn.net/wangaz521/article/details/79717177Linux系统推荐博客：https://blog.csdn.net/YBK233/article/details/81478230

简介MapReduce是一种编程模型，用于大规模数据集（大于1TB）的并行运算。概念"Map（映射）“和"Reduce（归约）”，是它们的主要思想，都是从函数式编程语言里借来的，还有从矢量编程语言里借来的特性。它极大地方便了编程人员在不会分布式并行编程的情况下，将自己的程序运行在分布式系统上。 当前的软件实现是指定一个Map（映射）函数，用来把一组键值对映射成一组新的键值对，指定并发的Reduc...

前言该篇博客记录了Hadoop在使用I/O操作时涉及到的相关Java代码，案例均来自于《Hadoop权威指南》通过CompressionCodec对数据流进行压缩import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.io.IOUtils;import org.apache.hadoop.io.compre...