Hadoop基础概念（面试可用）
关注
分享
扫一扫
dpc27149
这个作者很懒，什么都没留下…
展开
-
Hadoop基础概念1
名称节点（ NameNode）：管理文件系统的命名空间，记录文件系统树及这个树内所有的文件和索引目录，同时也记录每个文件的每个块，所在的数据节点。数据节点（ DataNode ）：文件系统的工作者，存储并提供定位块的服务，并定时向名称节点发送块的存储列表JobTracker：协调作业的运行。TaskTracker：运行作业划分后的任务。 NameNode记录着每个文件的元转载 2013-12-15 00:26:29 · 845 阅读 · 0 评论 -
HBase与MongoDB的区别
HBase与MongoDB的区别 1、HBase依赖于HDFS；MongoDB直接存储在本地磁盘中。2、HBase按照列族将数据存储在不同的文件中；MongoDB不分列，整个文档都存储在一个（或者说一组）文件中，通过一个有一个通用的.ns文件保存名称空间（Column-based和Document-Based之间的区别应该是指这个地方吧）。即HBase是列式存储而MongoDB是文转载 2014-01-23 16:09:42 · 7656 阅读 · 0 评论 -
Hadoop API 使用介绍
Hadoop API 使用介绍Hadoop API被分成（divide into）如下几种主要的包（package）org.apache.hadoop.conf 定义了系统参数的配置文件处理API。org.apache.hadoop.fs 定义了抽象的文件系统API。org.apache.hadoop.dfs Hadoop分布式文件系统（H转载 2014-04-10 16:51:34 · 7038 阅读 · 0 评论