Hadoop

转载 2016年04月28日 15:59:27

Hadoop:分布式系统基础架构
HDFS(分布式文件系统)

hdfs架构
配置的位置:
/letv/data/hadoop-2.6.0/etc/Hadoop
配置hdfs-site.xml:
hadoop2.0官方提供了两种HDFS HA的解决方案,一种是NFS,另一种是QJM(Qurom Journal Manager)。这里我们使用简单的QJM。在该方案中,主备NameNode之间通过一组JournalNode同步元数据信息,一条数据只要成功写入多数JournalNode即认为写入成功。通常配置奇数个JournalNode

YARN(资源管理器)
yarn架构

主节点ip:50070 是hdfs
主节点ip:8088 是查看运行程序的web ui

windows-hadoop-2.7.4-bin

  • 2017年12月06日 09:48
  • 1.14MB
  • 下载

hadoop基本测试方法

最近在做hadoop的时候,总结了一些hadoop的一些基本的功能运用和一些基本性能测试,记录一下,希望可以帮助大家,由于输出信息太多,在这里只介绍命令,具体输出信息大家可以自己试验一下。不同的had...

Hadoop 2.6.5 API CHM帮助手册

  • 2017年11月24日 12:10
  • 9.67MB
  • 下载

【备忘】基于Hadoop,Spark大数据技术的推荐系统算法实战教程

基于Hadoop,Spark大数据技术的推荐系统算法实战教程

Windows 源码编译Hadoop 2.7.4

  • 2017年12月06日 23:25
  • 58B
  • 下载

《Apache Flume教程》第二章 Hadoop中的数据传输

摘要:   大数据,因为我们知道,是不能用传统的计算技术来处理大型数据集的集合。大数据在分析时给出了宝贵的结果。Hadoop的是一个开源框架,允许存储和跨中使用简单的编程模型的计算机集群的分布式环境中...

hadoop硬实战

  • 2017年12月06日 16:19
  • 93.02MB
  • 下载
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:Hadoop
举报原因:
原因补充:

(最多只允许输入30个字)