HDFS
ffbc2020
从事Android开发
展开
-
HDFS的启动过程
欢迎使用马克飞象HDFS的启动过程HDFS的启动过程分为四个阶段:第一阶段:NameNode 读取包含元数据信息的fsimage文件,并加载到内存;第二阶段:NameNode读取体现HDFS最新状态的edits日志文件,并加载到内存中第三阶段:生成检查点,SecondaryNameNode将edits日志中的信息合并到fsimage文件中第四阶段:进入安全模式,检查数据块的完整性H...原创 2019-01-04 10:44:16 · 2767 阅读 · 0 评论 -
Hadoop的三种安装模式
Hadoop的三种安装模式一、本地模式二、伪分布模式三、全分布模式一、本地模式本地模式的特点:没有HDFS, 只能测试MapRduce (不是运行在Yarn中, 做一个独立的Java程序来运行), 只需配置etc/hadoop/hadoop-env.sh中的JAVA_HOME二、伪分布模式伪分布模式的特点:在单机上,模拟一个分布式的环境,具备Hadoop的所有功能,只需要一台机器(主机名为...原创 2019-01-01 09:37:38 · 4773 阅读 · 0 评论 -
大数据
LinuxLinux基本用法HadoopHadoop的三种安装模式HDFSHDFS的启动过程原创 2019-05-20 23:06:56 · 100 阅读 · 0 评论