hadoop
qq342643414
这个作者很懒,什么都没留下…
展开
-
Hadoop入门-3.HDFS的简单API(demo)(基于hadoop-2.7.3)
条件准备 下载部署 下载Hadoop-2.7.3.tar.gz包,可以去官网下载。 然后部署在Linux上,可以参考点击打开链接 win下eclipse开发配置 通常习惯,我们会在win的eclipse下开发,那么下载下来的是基于Linux的编译后的包,包下的bin文件夹不兼容windows,那么在调用某些API时会报错原创 2017-03-01 20:48:17 · 3728 阅读 · 0 评论 -
Hadoop入门-1.配置部署启动(基于hadoop-2.7.3)
1.准备1.下载 hadoop-2.5.2.tar.gz 免安装包到指定的目录2.执行命令: tar -zxvf hadoop-2.5.2.tar.gz 解压目录2.配置1.切换到指定的目录:2.对相关的配置文件进行配置:core-site.xml注:此时配置的namenode的地址hdfs-site.xml注:配置datanode的数量slav原创 2017-02-21 17:40:54 · 5672 阅读 · 0 评论 -
Hadoop入门-2.HDFS原理和工作机制(基于hadoop-2.7.3)
简介 Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时,它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统,适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问,非常适合大规模数据集上的应用。实现原理原创 2017-02-28 15:37:30 · 2596 阅读 · 0 评论