![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
HDFS
Jenrey
这个作者很懒,什么都没留下…
展开
-
HDFS的shell常用命令大全
1.启动相关 启动zookeeper: zkServer.sh start 启动HDFS : 不管在集群中的那个节点都可以 start-dfs.sh 启动YARN : 只能在YARN主节点中进行启动 start-yarn.sh HDFS : http://hadoop02:50070 YARN : http://hadoop05:80...原创 2018-03-28 21:35:49 · 2914 阅读 · 0 评论 -
hadoop的eclipse开发环境安装
配置eclipse可视化hadoop环境1.下载 hadoop-eclipse-plugin-2.7.5.jar 并解压 此文jar包的作用是配置hdfs在eclipse中的文档目录树可视化窗口,作用如下图 把hadoop-eclipse-plugin-2.7.5.jar放入到ECLIPSE_HOME/plugins中2.在window安装hadoop安装包,把hadoop-2...原创 2018-03-28 22:40:12 · 967 阅读 · 0 评论 -
HDFS的常用API详解
import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;import org.apache.hadoop.fs.Path;/** * hdfs入门程序: * 面向对象:一切皆对象 * 文件系统也可以看做是一类事物、FileSystem * * 一定有共同的行为和属性:...原创 2018-03-30 18:07:03 · 8320 阅读 · 1 评论 -
Secondary NameNode:它究竟有什么作用?
前言最近刚接触Hadoop, 一直没有弄明白NameNode和Secondary NameNode的区别和关系。很多人都认为,Secondary NameNode是NameNode的备份,是为了防止NameNode的单点失败的,直到读了这篇文章Secondary Namenode - What it really do? (需翻墙)才发现并不是这样。文章写的很通俗易懂,现将其翻译如下:Se...原创 2018-06-19 20:02:05 · 11588 阅读 · 5 评论