hdfs
WQ同学
这个作者很懒,什么都没留下…
展开
-
shell 命令操作hdfs
简介本编文章主要讲述shell 命令操作hdfs 主要讲述几个简单常用的shell 命令 如 ls get mkdir rm put 前提需要安装hdfs 作者用的是虚拟机搭建的伪分布式环境,如果没有搭建环境的可以参考这里http://www.haha174.top/article/details/251072 首先使用jps 确保 hdfs 都启动 hadoop fs原创 2017-12-13 08:04:44 · 7461 阅读 · 0 评论 -
java api 操作 hdfs
文章地址 :http://www.haha174.top/article/details/2551891.简介之前说到了shell 脚本操作hdfs 现在那么本篇文章讲述java 怎么操作hdfs 使用 sh start-dfs.sh 启动 hdfs jps 查看hdfs 状态 确保 hdfs SecondaryNameNode NameNode DataNode 都已经原创 2017-12-16 18:22:33 · 2912 阅读 · 0 评论 -
腾讯云部署hadoop-hdfs公网远程调用could only be replicated to 0 nodes
文章地址:http://www.haha174.top/article/details/253013 之前在本地虚拟机启动hdfs 然后通过java api 调用hdfs 都是没有问题的。 详情可以参考这两篇博客 伪分布式:http://www.haha174.top/article/details/251072 java-api:http://www.haha174.top/ar...原创 2018-05-04 00:31:50 · 3268 阅读 · 2 评论 -
HDFS HA 高可用
一.简介在 Hadoop 的整个生态系统中,HDFS NameNode 处于核心地位,NameNode 的可用性直接决定了 Hadoop 整个软件体系的可用性。本文主要从内部实现的角度对 NameNode 的高可用机制进行详细的分析,主要包括 NameNode 的主备切换实现分析和 NameNode 的共享存储实现分析。在 Hadoop 1.0 时代,Hadoop 的两大核心组件 HDFS N...转载 2019-01-27 10:19:30 · 1323 阅读 · 0 评论