大数据与云计算
文章平均质量分 72
记录学习的过程和一些感悟
小胡同1991
一个正在搬砖的研究生
展开
-
针对Hadoop搭建完成后无法在web上利用主机名去浏览的解决方案
一、打开Hadoop的两种方式方法一:输入 虚拟机ip:50070方法二:输入设置好的名称:50070二、问题1、方法一一般都没问题,安装完Hadoop后基本都能用IP地址的方式直接访问web端2、如果是使用自己设置好的名字打开,则直接显示无法访问回答:这个问题,如果是把你自己的设置的名字,如 hadoop01:50070 来访问。那么就需要这么操作:1、首先你肯定是要关闭防火墙,然后检查你的搭建过程有没有问题,若一切都没问题,请继续往下看。2、首先检查Linux中的/etc原创 2021-07-17 00:14:34 · 4128 阅读 · 5 评论 -
Linux下配置Spark框架(Python)
0 背景今天在弄毕业论文,是关于XGBoost的,打开虚拟机后,提示说虚拟机内存不出,然后打开VMware后查看,的确是不足了,只剩下160M左右。那就扩充内存呗,结果自己没搞过这个,安装步骤来,失败了,reboot后不能正常启动了,搞了一上午还是不能正常启动,只好启动备用系统。当时的心哇凉哇凉的,感觉人生一片灰暗,因为光配环境就要耗费好多时间,但是代码数据也在里面啊,进不了系统,意味着之前的努力全白费了。不过,幸亏平时有备份的习惯,代码数据都在网盘了,可以下载出来,就是这个配置环境,又要花费好多好多时原创 2021-01-05 22:37:40 · 451 阅读 · 0 评论 -
【云计算】初入云计算
0.前言三天后,就要去本地的一个大学(职业技术大学)去应聘云计算老师了,研究生学的方法是云计算与大数据,硕士论文也在辛苦的研习中。因为是两年制的专硕,所以现在面临着秋招和来年的春招。如果这次应聘能成功当上云计算的老师,那么就一直干下去,毕竟当年工作了四年后考研辞职的目标就是想去个学校当个大学老师,所以特别珍惜此次机会。如果没有当选,那么继续努力半年多,等到毕业的时候,再去应聘一次。现在在本地的一个工业学校代课,主要教授网络基础和计算机的组装与维修,教的孩子也都是没有考上高中的初中孩子。虽然两者都是老师,原创 2020-09-20 23:53:32 · 409 阅读 · 0 评论 -
Linux 修改主机名字不成功
在学习大数据的时候,需要安装三台虚拟机,三台都安装好了,主机名字也修改好了,可是在某一天登录的时候,突然主机名又改成了local。后来查了很多资料,比如修改/etc/sysconfig下的network,将HOSTNAME后面的值改为想要设置的主机名。这些统统不行,包括重启,不断重启,均不行。重点来了正确的做法是:CentOS7的主机名更改需要修改的文件是改/etc/hostname,修改后重启即可。...原创 2020-07-13 13:12:30 · 1201 阅读 · 0 评论