大数据技术软件安装
关注
分享
扫一扫
文章平均质量分 71
S_h_a_
学业中哦~~~
展开
-
大数据技术软件安装基础---HBase完全分布式安装
一.前提1.HBase:Apache HBase – Apache HBase™ Home二. HBase安装下载安装包hbase-2.0.2-bin.tar.gz解压安装包hbase-2.0.2-bin.tar.gz至路径 /usr/local配置系统环境，在/etc/profile中添加：export HBASE_HOME=/usr/local/hbase-2.0.2export PATH=$PATH:$HBASE_HOME/bin:/$HBASE_HOME/sbin执行.原创 2021-12-01 09:16:57 · 386 阅读 · 0 评论 -
大数据技术软件安装基础---Hadoop完全分布式安装
一.Hadoop的三种运行模式 ：1.独立（本地）运行模式：无需任何守护进程，所有的程序都运行在同一个JVM上执行。在独立模式调试MR程序非常高效方便。所以一般该模式主要是在学习或者开发阶段调试使用 。2.伪分布式模式： Hadoop守护进程运行在本地机器上，通过不同进程模拟集群中的节点，伪分布式是完全分布式的一个特例。3.完全分布式模式：完全分布式模式才是生产环境采用的模式， Hadoop守护进程运行在服务器集群上，生产环境一般都会做HA，以实现高可用。(本文 以此为 例)二.前提1.原创 2021-11-26 00:29:55 · 262 阅读 · 0 评论 -
hadoop运行出现错误：java.net.ConnectException:Connection refused
一.错误截图：master/ip to localhost:9000 failed on connection exception:java.net.ConnectException:Connection refused错误分析：1.一开始以为是自己的集群配置有问题（当然是有可能的）Hadoop： 主节点9000端口拒绝访问Call From hadoop3/192.168.91.132 to hadoop1:9000 failed on connection exception原创 2021-11-23 21:46:32 · 4223 阅读 · 0 评论 -
大数据技术软件安装基础---集群的基本配置
版本前提：1.vmware：VMware - Delivering a Digital Foundation For Businesses2.ubuntu:Get Ubuntu | Download | Ubuntu1.选择镜像进行安装 虚拟机 Ubuntu2.选择最小化安装（无图形界面--server版） 注：全为桌面版，内存太大会导致蓝屏3.安装完成后进行相应配置 1.配置静态 ip https://blog.csdn.net/qq_45830251/ar...原创 2021-11-03 21:40:31 · 119 阅读 · 0 评论 -
大数据技术软件安装基础---Zookeeper集群安装
一.前提1.要有一个集群：ZooKeeper是用Java编写的，运行在Java环境上，因此，在部署zk的机器上需要安装Java运行环境。为了正常运行zk，我们需要JRE1.6或者以上的版本。对于集群模式下的ZooKeeper部署， 3个ZooKeeper服务进程是建议的最小进程数量，而且不同的服务进程建议部署在不同的物理机器上面，以减少机器宕机带来的风险，以实现ZooKeeper集群的高可用。ZooKeeper对于机器的硬件配置无过高要求。例如，在Yahoo!内部，ZooKeeper部署的机器其配原创 2021-10-24 23:40:47 · 272 阅读 · 0 评论 -
大数据技术软件安装基础---主机之间的免密ssh登陆
一.相应版本1.vmware：VMware - Delivering a Digital Foundation For Businesses2.ubuntu:Get Ubuntu | Download | Ubuntu二.安装并启动 sshSSH 为 Secure Shell 的缩写，由 IETF 的网络小组（ Network Working Group）所制定；SSH 为建立在应用层基础上的安全协议。SSH是较可靠，专为远程登录会话和其他网络服务提供安全性的协议。1.安装 ss原创 2021-10-24 12:10:55 · 258 阅读 · 0 评论 -
大数据技术软件安装基础---修改并映射主机名
一.相应版本1.vmware：VMware - Delivering a Digital Foundation For Businesses2.ubuntu:Get Ubuntu | Download | Ubuntu二.查看主机名:gu1@gu1:~$ hostname主机名是 : @之后的那个三.修改主机名(永久)1.(前提:该步骤仅 server 可执行,桌面版若无相应文件,可略过) 首先修改 /etc/cloud/cloud.cfgsudo vi ...原创 2021-10-24 00:01:30 · 247 阅读 · 0 评论 -
大数据技术软件安装基础---静态ip配置
一.查看本虚拟机的相关信息（本人以 VMware 为例进行查看） 编辑 -> 虚拟网络适配器 -> 选中VMnet8 -> 点击 NAT 设置 -> 查看 网关 和 子网 IP网关：192.168.65.2子网IP： 192.168.65.0二.配置静态 IP查看配置文件：(配置文件可能不同，可通过下方命令进行查看)打开配置文件：slave1@slavea:~$ sudo vi /etc/netplan/00-installer-co...原创 2021-10-13 00:26:00 · 176 阅读 · 0 评论 -
大数据技术软件安装基础---jdk
一.配置版本：官网下载1.vmware：VMware - Delivering a Digital Foundation For Businesses2.ubuntu: Get Ubuntu | Download | Ubuntu3.jdk: Java Downloads | Oracle二.安装过程安装JDK,配置Java环境1.从官网下载JDK的tar安装包，上传至Linux上2.对tar包进行解压slave1@slavea:~$ tar -zxvf jdk-8u.原创 2021-10-06 23:50:22 · 215 阅读 · 0 评论