Hadoop
文章平均质量分 83
洛水鱼
集幸:如鱼得水
展开
-
实验二 HDFS的Shell命令操作,和HDFS的API操作
【拓展与思考】思考题1、思考题2、思考题3必做,其余选做在Linux系统中,可以通过which命令来查找HDFS命令对应的程序所在的位置该命令会输出hdfs可执行程序所在的路径。原创 2023-03-17 17:56:57 · 7985 阅读 · 2 评论 -
Hadoop伪分布的搭建,有搭建好的成品直接下载(从安装Centos7开始或者ubuntu)
Hadoop集群是由多个计算机节点组成的分布式计算环境,每个节点都运行着Hadoop软件,并协同工作来完成数据存储和计算任务。原创 2023-03-13 13:01:08 · 417 阅读 · 0 评论 -
图文讲解,ping: www.baidu.com: 未知的名称或服务原因分析,真正的解决Ping不通的问题
这是我自己遇到的错误,基本找遍了全网都没有解决我这个问题,应为那些IP配置搞得我头晕,而通过我两天的踩坑已经解决,并帮同学也超过解决。这个错误让我印象深刻。希望也能解决你的错误,如果到后面还是没解决,我建议去看视频,应为我也是在看视频的过程中才找到了灵感。如果还是不行那就是通用错误了应该不难解决了,可以直接去看我Hadoop里面的Centos7的安装。看看ONBOOT 是不是yes BOOTPROTO:是不是static。原创 2023-03-10 18:28:08 · 17436 阅读 · 1 评论 -
Hadoop学习前言1-1
通过使用YARN,我们可以像餐厅管理员一样,对资源进行更好的管理和利用,使我们的数据处理应用程序更高效、可靠和可扩展。Hadoop集群搭建好以后,可以通过web页面查看集群的情况,还可以通过Hadoop命令来上传文件到hdfs集群,通过Hadoop命令在hdfs集群上建立目录,通过Hadoop命令删除集群上的文件等等。无论是在windows上装几台虚拟机玩Hadoop,还是真实的服务器来玩,说简单点就是把Hadoop的安装包放在每一台服务器上,改改配置,启动就完成了Hadoop集群的搭建。原创 2023-03-09 19:51:28 · 291 阅读 · 0 评论