虚拟机安装+环境安装
文章平均质量分 53
weixin_45684171
这个作者很懒,什么都没留下…
展开
-
虚拟机安装(十一)|环境搭建--Spark集群安装部署
十一、Spark集群安装部署1. 下载spark安装包2. 解压spark安装包进入到/export/software/目录下cd /export/software/上传spark-2.3.2-bin-hadoop2.7.tgzrz查看ls解压安装包tar -zxvf spark-2.3.2-bin-hadoop2.7.tgz -C /export/servers/进入解压后的目录cd /export/servers/查看ls重命名mv spark-2.原创 2021-06-06 08:07:06 · 1118 阅读 · 0 评论 -
虚拟机安装(十)|环境搭建--在Linux下安装Scale
十、在Linux下安装Scale进入/export/software/目录下cd /export/software/上传安装包scala-2.11.8.tgzrz查看安装包ls解压到/export/servers/目录下tar -zxvf scala-2.11.8.tgz -C /export/servers/进到/export/servers/目录下cd /export/servers/查看ls配置环境变量vi /etc/profile添加export原创 2021-06-06 08:06:48 · 638 阅读 · 0 评论 -
虚拟机安装(九)|环境搭建--HBase集群部署
九、HBase集群部署9.1 安装HBase软件1.上传HBasecd /export/softwarerzls2. 解压HBasetar -vxzf hbase-1.2.1-bin.tar.gz -C /export/servers/查看cd /export/servers/ls9.2 修改配置文件1.将/Hadoop-2.7.4/etc/hadoop目录下的hdfs-site.xml和core-site.xml配置文件复制到/hbase-1.2.1/conf目原创 2021-06-05 23:10:35 · 451 阅读 · 2 评论 -
虚拟机安装(八)|环境搭建-- Zookeeper分布集群部署
八 、Zookeeper分布集群部署8.1 安装Zookeeper上传zookeepercd /ezport/software/rz2. 解压zookeepertar -zxvf zookeeper-3.4.10.tar.gz -C /export/servers/8.2 配置Zookeeper相关配置跳转到解压目录下conf文件cd /export/serverslscd zookeeper-3.4.10/lscd conf/ls2. 复制zoo原创 2021-06-05 22:54:27 · 199 阅读 · 0 评论 -
虚拟机安装(七)|环境搭建--测试Hadoop集群-单词统计
七、 测试Hadoop集群-单词统计1. Ip映射进入到Windows/System32/drivers/etc目录下打开hosts文件添加192.168.121.134 hadoop01192.168.121.135 hadoop02192.168.121.136 hadoop032. 关闭防火墙三个服务器都关闭防火墙和关闭开机启动service iptables stop检查chkconfig iptables off3. 再次启动hdfs和yarn进程start-原创 2021-06-05 22:40:07 · 283 阅读 · 0 评论 -
虚拟机安装(六)|环境搭建--Hadoop的集群和开启及关闭
六、Hadoop的集群和开启及关闭6.1 单节点逐个启动和关闭主节点输入命令运行脚本启动进程:hadoop-daemon.sh start namenode2. 启动从节点进程:hadoop-daemon.sh start datanode查看java相关的进程在hadoop02和hadoop03也执行命令开启hdfs从节点3. 在主节点上启动yarn的主节点和从节点在hadoop02和hadoop03也执行命令开启yarn从节点4. 在hadoop02运行原创 2021-06-05 22:17:47 · 377 阅读 · 0 评论 -
虚拟机安装(五)|环境搭建--格式化文件系统
五、格式化文件系统5.1 格式化在hadoop的任何一个目录下都可以运行命令:hdfs namenode -format或hadoop namenode -format注意:格式化文件系统只在第一次启动hdfs集群时执行原创 2021-06-05 21:59:23 · 522 阅读 · 0 评论 -
虚拟机安装(四)|环境搭建--Hadoop集群部署
四、Hadoop集群部署4.1 JDK安装1 安装rlzsz软件使用命令挂载光盘:mount /dev/cdrom /mnt打开:/mnt/Packagescd /mnt/Packages安装软件: lrzsz-0.12.20-27.1.el6.x86_64.rpmrpm –ivh lrzsz-0.12.20-27.1.el6.x86_64.rpm2 JDK安装跳转到安装目录上传cd /export/software/rz3. 解压和重命名解压命令:tar -zx原创 2021-06-05 21:53:45 · 150 阅读 · 0 评论 -
虚拟机安装(三)|环境搭建--SSH服务配置
三、SSH服务配置3.1查看安装并开启SSH服务通过命令安装SSH:yum install openssh-server命令行输入rpm –qa | grep ssh查看是否安装SSH启动SSH服务ps –e | grep sshd使用Xshell工具远程连接服务器打开文件-新建在连接中填写主机号,端口号选择22...原创 2021-06-05 21:21:31 · 4393 阅读 · 0 评论 -
虚拟机安装(一)|环境搭建--前置:安装vmware
虚拟机安装(一)前置:安装vmware1.1安装虚拟机-Linux点击新建虚拟机,选择自定义虚拟机兼容性默认即可客户机操作系统选择稍后安装操作系统选择客户机操作系统选择Linux,版本我选择了Red Hat Enterprise Linux 6 64位选择虚拟机位置和名称处理器配置把每个处理器的内核数量改为2设置虚拟机内存使用NAT网络控制器类型选择推荐磁盘类型选择推荐创建新虚拟磁盘磁盘容量大小50GB(要大一些,不然集群处理时因磁盘太小进入安全模式)原创 2021-06-05 18:19:59 · 225 阅读 · 0 评论