![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据学习
文章平均质量分 83
张渝俊
这个作者很懒,什么都没留下…
展开
-
HDFS学习记录
HDFS目录HDFSHDFS的Shell操作1.基本语法2.命令大全3.常用命令实操4.HDFS直接操作HDFS客户端操作HDFS的API操作HDFS的数据流Fsimage和Edits解析HDFS的Shell操作1.基本语法hadoop fs 具体命令 OR hdfs dfs 具体命令两个是完全相同的。2.命令大全[atguigu@hadoop102 hadoop-3.1.3]$ bin/hadoop fs[-appendToFile <localsrc> ... <原创 2022-04-17 16:00:07 · 83 阅读 · 0 评论 -
搭建完全分布式系统+主机名无法访问hadoop web页面
搭建完全分布式系统目录搭建完全分布式系统一、通用脚本编写1.群发分发脚本编写群发脚本常用命令群发脚本编写2.查看三台java服务器进程的脚本3.群起群停脚本二、**SSH无密登录配置**三、配置集群1.核心配置文件2.HDFS配置文件3.YARN配置文件4.MapReduce配置文件5.配置历史服务器6.群发配置文件三、群起集群1.配置workers2.启动集群四、可能遇到的问题一、通用脚本编写1.群发分发脚本编写群发脚本常用命令scp -r $pdir/$fname $user@hado原创 2022-04-17 15:33:58 · 1820 阅读 · 0 评论 -
M1 安装centos7+hadoop模板机配置
M1 安装centos7+hadoop模板机配置所有资源百度网盘: https://pan.baidu.com/s/1nd6YohBbncDQCPDXvzpnNA?pwd=9ng4提取码:9ng4centos镜像安装和配置安装镜像根据资源中的文件,创建镜像,此操作简单省略配置模版机1. 配置主机名使用命令vi /etc/hostname2. 配置网络(非常重要)1)首先配置vm将配置点到WI-FI,这里的IP是宿主机的IP,待会配置网络成功后,会ping通2)查看本地的网关,原创 2022-04-12 11:13:48 · 793 阅读 · 0 评论