Hadoop

转载 2016年04月28日 15:59:27

Hadoop:分布式系统基础架构
HDFS(分布式文件系统)

hdfs架构
配置的位置:
/letv/data/hadoop-2.6.0/etc/Hadoop
配置hdfs-site.xml:
hadoop2.0官方提供了两种HDFS HA的解决方案,一种是NFS,另一种是QJM(Qurom Journal Manager)。这里我们使用简单的QJM。在该方案中,主备NameNode之间通过一组JournalNode同步元数据信息,一条数据只要成功写入多数JournalNode即认为写入成功。通常配置奇数个JournalNode

YARN(资源管理器)
yarn架构

主节点ip:50070 是hdfs
主节点ip:8088 是查看运行程序的web ui

相关文章推荐

hadoop权威指南第三版

  • 3天前 23:46
  • 26.94MB
  • 下载

hadoop权威指南第四版

  • 2017-10-11 19:07
  • 11.77MB
  • 下载

Hadoop-No.12之数据采集的时效性

数据采集的时效性,指的是可进行数据采集的时间与Hadoop中工具可访问数量的时间之间的间隔.采集架构的时间分类会对存储媒介和采集方法造成很大的影响. 一般来说,在设计应用的采集构架之前建议使用以下分类...

Hadoop源代码分析

  • 2017-10-12 00:07
  • 5.90MB
  • 下载

Hadoop中HDFS优缺点

HDFS的优点:         1、处理超大文件               ...

hadoop-eclipse-plugin-2.7.4

  • 2017-10-13 16:48
  • 33.59MB
  • 下载

Hadoop 入门 云计算概念

Hadoop 入门 云计算概念

hadoop/bin文件

  • 2017-10-12 11:39
  • 1023KB
  • 下载
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:深度学习:神经网络中的前向传播和反向传播算法推导
举报原因:
原因补充:

(最多只允许输入30个字)