hadoop介绍
AA赵师傅
人家只是个小职员啦,工作多,没提成。别人休假我加班。房贷没还清,保险自己买,不过好在我不用交停车费,因为我根本买不起车。
展开
-
hadoop生态圈各个组件简介
1,HDFS(hadoop分布式文件系统) 是hadoop体系中数据存储管理的基础。他是一个高度容错的系统,能检测和应对硬件故障。 client:切分文件,访问HDFS,与那么弄得交互,获取文件位置信息,与DataNode交互,读取和写入数据。 namenode:master节点,在hadoop1.x中只有一个,管理HDFS的名称空间和数据块映射信息,配置副本...原创 2018-05-22 10:51:28 · 79237 阅读 · 5 评论 -
HDFS分布式文件系统简介
分布式文件系统: 分布式文件系统管理的屋里存储资源不一定直接在本地节点上,而是通过计算机网络与节点相连。 分布式文件系统的基于客户机/服务器模式。通常,一个分布式文件系统提供多个供公户访问的服务器。 分布式文件系统一般都会提供备份和容错功能。 分布式文件系统一般都基于操作系统的本地文件系统 分布式文件系统的优点: -传统 文件系统最大问题是容量和吞吐量的限制。 -多用户多应...原创 2018-07-12 14:08:20 · 845 阅读 · 0 评论 -
大数据常见面试题总结
Hadoop部分1.Hadoop安装步骤?1使用root账户登录2 修改IP3 修改host主机名4 配置SSH免密码登录5 关闭防火墙6 安装JDK6 解压hadoop安装包7 配置hadoop的核心文件 hadoop-env.sh,core-site.xml , mapred-site.xml , hdfs-site.xml8 配置hadoop环境变量...原创 2018-09-10 16:37:01 · 5641 阅读 · 0 评论