大数据集群搭建
蓦然_
大数据开发,公众号:旧时光大数据
展开
-
完全分布式集群模式(10)
完全分布式:1.准备三台客户机 通过克隆复制三台虚拟机hadoop102、hadoop103、hadoop104(从基本的虚拟机(未安装或者安装了jdk、hadoop都行)复制即可)1)准备3台客户机(关闭防火墙、静态ip、主机名称)2)安装jdk3)配置环境变量4)安装hadoop5)配置环境变量6)安装ssh7)配置集群8)启动测试集群配置上述...原创 2019-10-28 21:22:24 · 585 阅读 · 0 评论 -
伪分布式集群模式(9)
注意:伪分布式模式是在JDK、Hadoop安装好的情况下搭建的etc目录下配置:/opt/module/hadoop-2.7.2/etc/hadoop配置HDFS1、配置集群1)hadoop-env.sh(25行)(修改为绝对路径)export JAVA_HOME=/opt/module/jdk1.8.0_1442)core-site.xml修改,插入以下内容...原创 2019-10-28 20:53:44 · 306 阅读 · 0 评论 -
JDK、Hadoop安装(8)
一、JDK安装1、用SecureCRT的FX工具将jdk导入到opt目录下面的software文件夹下面 2、在linux系统下的opt目录中查看软件包是否导入成功 [atguigu@hadoop101 opt]$ cd software/ 3、解压jdk到/opt/module目录下 [atguigu@hadoop101 software]$ ...原创 2019-10-28 20:42:01 · 786 阅读 · 0 评论 -
虚拟机准备(7)
1、克隆虚拟机1)关闭要克隆的虚拟机2)欢迎页面 3)克隆虚拟机 4)设置创建完整克隆 6)设置克隆的虚拟机名称和存储位置(自己选定) 7)等待正在克隆 8)点击关闭,完成克隆 2、修改克隆虚拟机的静态ip1)在终端命令窗口中输入 [root@hadoop101 /]#vim /et...原创 2019-10-25 22:07:41 · 394 阅读 · 0 评论 -
网络配置和系统管理操作(4)
1、查看网络IP和网关1)查看虚拟网络编辑器2)修改IP地址3)查看网关2、配置网络IP地址(终端中进行)1)ifconfig查看当前IP[root@hadoop102 /]# ifconfig2)ping测试主机之间网络连通性(可做可不做)基本语法:ping 目的主机 (功能描述:测试当前服务器是否可以连接目的主机)[root@hadoop...原创 2019-10-25 21:23:46 · 1038 阅读 · 0 评论 -
SecureCRT中文乱码解决方法(6)
1、重新查看会话,是否中文显示正常2、依然无法正常显示中文,可能是由于Linux系统中默认的字符编码非UTF8所致用root用户登录。输入cat /etc/sysconfig/i18n如果安装系统为中文系统,则修改【LANG=“zh_CN.UTF-8”】如果安装系统为英文系统,则修改【LANG=“en_US.UTF-8”】保存文件。断开SSH,重新登录。就正常了下面是修改...原创 2019-10-25 20:35:16 · 708 阅读 · 0 评论 -
安装SecureCRT & SecureFX(Win7或Win10安装)(5)
安装SecureCRT & SecureFX下载地址:链接:https://pan.baidu.com/s/1xj0j2JJdQkKqpGTnUI--kQ提取码:ywvgWin7下安装参考:安装参考:https://jingyan.baidu.com/article/60ccbceb640a2064cab19702.htmlhttps://blog.csd...原创 2019-10-25 20:32:21 · 591 阅读 · 0 评论 -
安装VMTools工具(3)
安装VMTools工具注意:不安装也没事1、VMToolsVM tools顾名思义就是Vmware的一组工具。主要用于虚拟主机显示优化与调整,另外还可以方便虚拟主机与本机的交互,如允许共享文件夹,甚至可以直接从本机向虚拟主机拖放文件、鼠标无缝切换、显示分辨率调整等,十分实用。2、先启动CentOS并成功登录如下图,发现底部提示且窗口中等大小,准备安装3、选择虚拟机菜单栏...原创 2019-10-25 19:53:59 · 367 阅读 · 0 评论 -
安装CentOS(2)
CentOS安装下载地址:链接:https://pan.baidu.com/s/1t-BLTykzYW-rh5dfgHR59Q提取码:vq74一、安装虚拟机硬件注意: CentOS安装的磁盘空间一定要足够,因为后续要安装集群,建议安装集群的磁盘保留150G以上,每台虚拟机50G,方便后续集群任务的执行1、新建虚拟机 2、新建虚拟机向导 ...原创 2019-10-25 17:27:21 · 511 阅读 · 0 评论 -
安装VMWare(1)
VMWare下载地址:链接:https://pan.baidu.com/s/1NX8sV_cUfCcsK-69bnAfeg提取码:icv71、进入安装向导 2、接收许可协议 3、自定义安装 4、更改安装路径 5、启动时检查产品更新 6、用户体验改进计划 7、桌面创建快捷方式 ...原创 2019-10-25 16:09:48 · 532 阅读 · 0 评论