- 博客(15)
- 收藏
- 关注
RSS订阅
原创 Hadoop2.x的集群搭建与配置（七）——Hadoop安装与配置
这一步开始正式搭建hadoop，但是要确保前面的每一步都完成首先要下载一个一些工具：1.hadoop的安装包，linux版本的，后缀名市是tar.gz的这种2.跨平台数据传输工具，这里推荐使用xshell和xftp，xshell用来链接linux，而xftp则用来将一些文件从本机传到linux中（这个是在本机安装的，不要放到虚拟机里）第一步：将hadoop的安装包传输到master...
2020-03-21 14:49:00
259
原创 Hadoop2.x的集群搭建与配置（六）——JDK安装配置
这一步需要一个小工具，用来来连接主机和虚拟机之间，毕竟你要上网下载jdklinux版本的安装包（推荐jdk8，各方面条件都不错，还是那句话，最新的不是最好的），然后要在linux上安装配置。毕竟你的虚拟机不能上网（主要是我之前也没告诉你们怎么弄，主要是因为虚拟机上我个人认为不方便，不安全，不适合联网），所以我们要在windows上下载，然后通过小工具传输到linux上。我所使用的小工具叫X...
2019-07-23 15:31:05
208
原创 Hadoop2.x的集群搭建与配置（五）——ssh免密钥登录
最后一步了（忘记是第几次说了，不过这次应该是真的），ssh免密钥登录毕竟分布式工作的时候要不停的相互访问，但是每个结点都像一个独立的家庭，串门的话首先要相互都认识才行（能够相互ping通），然后还要相互熟悉到一定程度，以至于可以肆无忌惮的相互进门访问（这不现实，除非你有我家门的钥匙，能够直接进来），ssh相互免密钥登录就是这个意思。每个虚拟机都有一个公钥和私钥（id_rsa为私钥，id_r...
2019-07-23 14:59:48
142
原创 Hadoop2.x的集群搭建与配置（四）——CentOS7的网络配置
好久也没更新，这次应该到了部署网络的步骤了之前创建虚拟机的时候说过一嘴，这里比较麻烦，不着急，所以当时先选择了仅主机模式，不过这样的话无法满足需求，这章开始正确配置CentOS的网络启动CentOS并登入后：首先打开开始菜单，搜索“”设备管理器“, ——网络适配器，选中网络适配器，点击设备管理器工具栏中的操作——添加过时硬件在添加过时硬件中选择：安装我手动从列表中选择（高级）——网...
2019-04-23 11:35:26
472
原创 Hadoop2.x的集群搭建与配置（三）——VMware下CentOS7的安装与配置
这一章说的是如何安装CentOS7书接上文，刚刚打开配置好的虚拟机会出现有个问题——你的CentOS系统并没有初始化打开虚拟机后首先会出现让你选择语言的界面，这个大姐各凭喜好（不过强烈推荐English Untied States，不然以后容易出一些稀奇古怪的问题），选择后先级右下角的continue然后进入的界面叫INSTALATION SUMMARY，这个界面会让你对系统进行一些选...
2019-04-13 11:39:17
103
原创 Hadoop2.x的集群搭建与配置（二）——虚拟机配置
这一章，主要说一说虚拟机的安装（由于不专业做博客，仅当笔记所以就不妨图片了，全文文字赘述）我用的虚拟机是：VWare Workstations15(这个东西不是越新越好，新就代表着存在过去版本没有的东西，也就是你做的东西别人可能用不了)，所以再以后选版本的时候我有选择12版本下载这个虚拟机没什么好说的，正常软件下载操作就可以了（注意到官网下载，以免中毒， 顺便支持付费正版）还有下载Ce...
2019-04-09 21:55:35
174
原创 Hadoop2.x的集群搭建与配置（七）——Hadoop安装配置
终于进入了最核心，同样也是为以后打的最基础的操作——hadoop的集群安装与配置要问那之前的算什么 emmm充其量算是虚拟机啦，linux啦，基础环境什么的准备工作话不多说，正式开始。首先，我们需要去官网下载个hadoop的包，要linux版本的压缩包，应该是以tar.gz为结尾的，至于版本，不要最新的，因为最新的话很可能会出现生态圈开发不完全，与低版本不匹配等情况，我们这里以2...
2019-08-13 14:52:23
229
原创 Linux时间订正（ntp安装——时间同步）
本操作对所使用的系统镜像有一定要求，everything版本是是最好的，里面的软件仓库全 ，最小安装的可能就不大行了本操作回使Linux系统的时间同步为一个固定的时间，从而完成某些需要时间同步再能进行的操作，而且也可以没事看看点- -第一个办法就是在安装系统的时候选择时区，这样的话其实可以在一定程度上就有一个相对准确的时间，不过这篇博客的目的显然不是让大家重装系统。。。所以下一...
2019-07-29 10:49:04
195
原创 Linux防火墙操作
列几条很有用的linux防火墙命令：systemctl start firewalld #开启舫防火墙 （不影响重启后的防火墙状态）systemctl stop firewalld #停止防火墙（但是不影响重启后防火墙状态）systemctl enable firewalld #启用防火墙（启用防火墙，默认开机启动）systemctl disable fire...
2019-07-29 10:43:13
94
原创 Hadoop2.x的集群搭建与配置（一）——概述
我配置hadoop的时候用的时Linux系统（推荐）的CentOS7，由于本机是window10，所以需要借助虚拟机，这里我选用的是VMware这一章不说太多细节操作，说一些理论概述什么的东西，看操作的朋友可以跳过了。整个Hadoop的部署： 安装方式大概有两种：传统解压包方式和Linux的标准方式，各有优劣 ...
2019-04-09 21:20:10
270
原创 关于python数字类型的感悟随笔（y）
一直以为python只是省略了数据类型不用写，如果要定义一个整数型的变量就直接写:num=1就行了，这个num就是一个int性的变量了，但是由于某个突发的想法，我做了一个小实验：num1=2num2=3print(num2/num3)发现输出为1.5!!!这个1.5可是浮点类型！！我有用java语言试了一下，果然输出为1，因为整数型于整数型的运算也只是整数型所以，我个人目前对于py...
2018-09-26 21:35:54
188
原创 python学习周期（三）
8.python 中的变量是不需要声明的（写就完了），比如：temp=1 #这就是一个整型变量temp=1.0 #这就是一个浮点型变量temp=“我要上天~~啊啊啊！” #尽管他要上天，但还是无法阻止他只是一个字符串的命运这样的设定对于程序员来说是十分酸爽的，不用再考虑什么类型，占多少内存，该给多大空间什么乱七八糟的，上就完了！但是同时，这样的设定也有弊端，有的时候一不注意就会引发一些莫...
2018-09-26 21:20:27
363
原创 python学习周期（二）
话不多说，接着上一篇来4.空行函数之间或类的方法之间用空行分隔，表示一段新的代码的开始。类和函数入口之间也用一行空行分隔，以突出函数入口的开始。空行与代码缩进不同，空行并不是Python语法的一部分。书写时不插入空行，Python解释器运行也不会出错。但是空行的作用在于分隔两段不同功能或含义的代码，便于日后代码的维护或重构。记住：空行也是程序代码的一部分。5.控制台输入控制台输入需要使...
2018-09-25 21:08:34
321
原创 python学习周期（一）
对于该语言的学习，首先要有改语言的编程环境，大家可以使用Linux系统，这样就不用安装了（虽然我也没有这样做），Linux系统中自带了Python的开发环境，只要检查一下版本就可以了Windows系统的朋友们可以先去官网下载一下，顺便把Python的集成开发化境给下载下来，我用的是PyCharm,还是很好用的（推荐一下） [这个是Python官网的链接](https://www.pyt...
2018-09-25 20:55:27
586
原创 Python3学习周期-总p
最近在学习python，在我看来：由于版本更新等形势要求，python3相比python2版本更有优势。所以我会的python学习历程中以python3为起点这系列博客也作为我的学习笔记，作为博客公布也希望我的学习道路上会有一丝可能性帮助到其他的人除了本系列，还可能会有因为在学习中的疑问而衍生出的问题，因此而另写的特别篇因为个人精力额外难题，本博客不做定时更新本人实力有限，如有错误也请...
2018-09-25 20:26:54
177
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人