既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!
由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新
过程中遇到的一些情况:
(VMware装在移动硬盘有些不方便,如将硬盘移除时不仅仅要关闭程序,还要在任务管理器中关闭一些程序才行,频繁移动时比较麻烦)
(将操作系统的iso文件复制进移动硬盘会提示不复制其属性。)
增:克隆HadoopMaster和****HadoopSlave
三、VMware虚拟网络配置和CentOS静态IP配置
VMware虚拟机网络配置-NAT篇 (zhihu.com)")
Linux 虚拟机同步时间crontab以及crond详解_crontab 如何设置定时同步时间-CSDN博客
实现windows和linux的文件传输:下载ssh secure shell transfer。
弹出U盘需要将所有的虚拟机程序进行关闭(VMware的后台程序)
四、 CentOS 7上安装Hadoop
步骤1-Linux系统配置
同步时间,配置主机名(要hostname 指令确认一下然后重启终端)。关闭防火墙,永久关闭SELinux,配置host列表。
(以上就是命令行进行设置,原理不懂。但是没有出错。)
步骤2- ssh****免密登录
按教程即可实现,没有遇到问题
步骤****3-安装JDK
利用文件传输软件,将jdk安装包传输至虚拟机,然后命令行解压缩。设置环境变量,java -version检测。(master和slava都要设置)
出现的问题:在文件中设置的环境变量,需要再使用更改命令source才能真的有用
步骤4-Hadoop的安装与配置
就是三步:解压缩,配置环境路径和组件,测试
问题在测试时出现:JAVA_HOME con’t find ,文件不存在等问题。
JAVA_HOME问题在于:hadoop-env.sh文件中配置路径时#删除(会高亮)。
配置组件时:复制时其中的用户名是自己的要更改。
本文依据老师给的搭建虚拟机教程中个人的配置过程遇到的问题所写,包含大致框架和部分问题的解决,。由于过程相对繁琐及其容易出错,但是和同学一起解决问题很有趣,因此记录,不是教程。过程中的大部分只能傻瓜式的“抄作业”,一步也不敢变,没有出错时感到过程无聊和无用,出错时感到崩溃和绝望,深感个人基础的计算机知识和技能薄弱。虽然很“痛苦”,但也有收获。
既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,涵盖了95%以上大数据知识点,真正体系化!
由于文件比较多,这里只是将部分目录截图出来,全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新
讲义、实战项目、大纲路线、讲解视频,并且后续会持续更新**