Hadoop
文章平均质量分 71
liumm0000
这个作者很懒,什么都没留下…
展开
-
Hadoop三种安装模式
Hadoop三种安装模式:单机模式,伪分布式,真正分布式一 单机模式standalone单机模式是Hadoop的默认模式。当首次解压Hadoop的源码包时,Hadoop无法了解硬件安装环境,便保守地选择了最小配置。在这种默认模式下所有3个XML文件均为空。当配置文件为空时,Hadoop会完全运行在本地。因为不需要与其他节点交互,单机模式就不使用HDFS,也不加载任何Hadoop的守原创 2013-10-28 23:19:13 · 27228 阅读 · 0 评论 -
Hadoop杂记
Hadoop杂记namenode(hdfs)+jobtracker(mapreduce)可以放在一台机器上,datanode+tasktracker可以在一台机器上,辅助namenode要单独放一台机器,jobtracker通常情况下分区跟datanode一样(目录最好分布在不同的磁盘上,一个目录对应一个磁盘),namenode存储目录需要格式化,datanode存储目录不需要格式化,原创 2013-10-28 23:20:53 · 787 阅读 · 0 评论 -
hadoop管理
1. hdfs基本统计情况fs是个比较抽象的层面,在分布式环境中,fs就是dfs,但在本地环境中,fs是local file system,这个时候dfs就不能用。hadoop dfsadmin -report2. hadoop安全模式NameNode在启动时会自动进入安全模式。安全模式是NameNode的一种状态,在这个阶段,文件系统不允许有任何修改。安全模式的目的是在系原创 2013-10-28 23:21:27 · 983 阅读 · 0 评论