- 博客(3)
- 收藏
- 关注
RSS订阅原创 hdfs、yarn配置的问题
后面我能查看集群但是使用hdfs命令将本地文件上传到hdfs上时却没办法上传，查看了日志文件都是一些进程突然被停止等等，这让我想到可能是防火墙的问题，好家伙一看从节点所有从节点的防火墙都没关（因为是学校里大家一起用的集群，想着之前的同学应该关了就没管防火墙哈哈），大家别犯这个错，一下给出几个命令。如下图所示，能打得开监控界面但是集群的内存大小和核个数完全没有显示，还有节点信息也完全没有显示。啊之类的检查好再看是不是其他上面的问题（具体配置请看之前写的hdfs的具体配置）如上述防火墙就是打开的。
2024-05-23 09:26:01
830
原创 linux下3.1.3Hadoop中yarn的环境详细配置
配置yarn其实可以和配置hdfs一起进行，其实也只是在几个配置文件中增加了一些信息进行配置。前面进行hadoop的安装配置只是相当于配置好了hdfs（hadoop distributed file system分布式文件系统），提供全局文件目录、动态的、有高可扩展性的，使得每个节点可以共享文件，不用重复拷贝文件。
2024-05-23 08:44:38
408
原创 linux下3.1.3Hadoop中hdfs环境详细配置过程
移动到该目录下，注意如果是在下可能找不到该目录，需要多执行一步cd /回到根目录cd etc打开里面的hosts文件vi hosts在该文件增加HDFS涉及的所有节点的ip地址和节点名称，例如我的就是：……执行完后记得回到~下。
2024-04-13 17:29:34
1258
1
空空如也
yarn网页看不了节点，如何解决？
2024-05-13
TA创建的收藏夹 TA关注的收藏夹
TA关注的人