![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 66
litao_csdn
如果有问题,或者博客有写错的地方,可以加我qq:2980364030
展开
-
解析hadoop相关shell运行流程
原创 2015-04-24 11:26:48 · 324 阅读 · 0 评论 -
hdfs原理及各个任务节点的职责详解
1、hdfs简介一个高可靠,高吞吐量的分布式文件系统,通俗的说就是把文件存储到多台服务器上hdfs官方架构图:可以通俗的理解为下图NameNode是主节点,存储文件的元数据如文件名,文件目录结构,文件属性(生成时间,副本数,文件权限),以及每个文件的块列表和块所在DataNode等。DataNode 在本地文件系统存储文件块数据,以及块数据的校验和。Se原创 2015-04-23 19:06:29 · 5540 阅读 · 0 评论 -
centos下编译hadoop2.x
前言:在Linux 64位系统上安装官网下载预编译好的二进制包【hadoop-2.6.0.tar.gz】启动起来后,总是出现这种警告:WARN util.NativeCodeLoader: Unable to load native-hadooplibrary for your platform... using builtin-java classes where applicabl原创 2015-04-23 09:50:35 · 484 阅读 · 0 评论