HADOOP
Burette_Lee
多学习
展开
-
YARN命令使用
yarn命令使用记录参考:https://blog.csdn.net/jkdcdlly/article/details/53463822?utm_source=blogxgwz1yarn application说明:打印 application(s) 报告,或者 kill 掉 application,共7个可选项1、-list 列出所有 application 信...原创 2018-10-31 10:12:21 · 610 阅读 · 0 评论 -
Hadoop YARN中web服务的REST API介绍
本文转自:转载自过往记忆(https://www.iteblog.com/)欢迎前往原博客查看学习,还参考此篇博客:https://blog.csdn.net/lumingkui1990/article/details/52175263Hadoop YARN自带了一系列的web service REST API,我们可以通过这些web service访问集群(cluster)、节点(n...转载 2018-11-19 16:02:09 · 3508 阅读 · 2 评论 -
hadoop集群Restful接口的使用
上次了解了yarn的REST的API之后,进一步一想,yarn有相应的REST接口,那Hadoop呢?是不是也应该又相应的REST接口进行查看文件系统以及对文件系统一些操作呢?一查,果然是有的。官方文档地址:WebHDFS REST API操作目录:HTTP GET OPEN (see FileSystem.open) GETFILESTATUS (see FileSystem....原创 2018-11-22 21:56:17 · 1385 阅读 · 0 评论 -
Hadoop没有启动DataNode:There are 0 datanode(s) running and no node(s) are excluded in this operation
转自:https://blog.csdn.net/qiruiduni/article/details/50280943删除hdfs上的部分文件,格式化hadoop namenode -format后,存在版本残留的问题。于是,停掉hadoop,删除dfs.namenode.name.dir设置的(file:///dfs/data)目录下的current 文件夹,从节点相应目录也要删除,再次执行...转载 2018-11-27 10:05:44 · 551 阅读 · 0 评论 -
错误Name node is in safe mode的解决方法
做个笔记,还是要多实践,多实践就可以遇到各种坑。转自:https://blog.csdn.net/xw13106209/article/details/6866072将本地文件拷贝到hdfs上去,结果上错误:Name node is in safe mode这是因为在分布式文件系统启动的时候,开始的时候会有安全模式,当分布式文件系统处于安全模式的情况下,文件系统中的内容不允许修改也不允...转载 2018-11-30 17:05:42 · 267 阅读 · 0 评论 -
Hadoop学习错误集锦
1.Call From master/10.4.20.136 to master:9000 failed on connection exception: java.net.ConnectException: 拒绝连接; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused解决方案:https://bl...原创 2018-11-28 18:58:13 · 140 阅读 · 0 评论