![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
软件安装和环境变量设置
文章平均质量分 69
软件安装和环境变量设置
May--J--Oldhu
这个作者很懒,什么都没留下…
展开
-
Phoenix安装及与HBase的集成
Phoenix安装及与HBase的集成一.Phoenix安装1.前置环境2.Phoenix安装部署(1)解压Phoenix到指定目录(2)配置环境变量3.Phoenix集成HBase4.Phoenix服务的启动一.Phoenix安装1.前置环境首先保证Zookeeper、Hadoop集群的正常部署,并启动。2.Phoenix安装部署使用的版本为phoenix-4.14.0-cdh5.14.2。下载地址http://archive.cloudera.com/cdh5/cdh/5/(1)解压Phoe原创 2021-01-05 19:53:00 · 211 阅读 · 0 评论 -
Scala在window上安装及基本概述(变量,数据类型,插值器,条件循环,数组,元祖,集合)
Scala一.Scala安装1.windows安装Scala2.在idea中使用Scala二.Scala简介1.Scala概述三.Scala变量与数据类型1.Scala变量与常量2.Scala关键字列表3.scala数据类型(1)Scala与Java有着相同的原始数据类型(2)scala数据类型层次结构4.字符串插值(1)s插值器(2)f插值器(3)raw插值器四.Scala程序控制1.Scala条件控制(1)if语句(2)if...else语句(3)条件语句返回值2.scala循环控制(1)while循环原创 2020-10-19 16:04:54 · 874 阅读 · 0 评论 -
Scala和Spark在linux上安装及环境配置
Scala和Spark安装及环境配置一.Scala安装及环境配置二.Spark安装及环境配置三.Spark初体验1.启动Spark2.启动spark-shell四.Spark进行wordcount计算1.准备测试数据2.启动spark-shell:`spark-shell`一.Scala安装及环境配置#1.解压scala安装包tar -zxvf scala-2.11.12.tgz -C /optmv scala-2.11.12 scala#改名#2.配置环境变量cd /optvi /etc/p原创 2020-10-30 16:56:57 · 687 阅读 · 0 评论 -
Linux 下安装 JDK 和 MySQL
Linux 下安装 JDK 和 MySQL一.Linux系统下的jdk安装和环境变量配置1.设置Linux系统静态IP地址:2.重启网络配置3.停止防火墙4.查看并关闭防火墙5.连接MobaXterm6.查看系统是否自带 jdk7.安装JDK8.修改配置文件、配置jdk环境9.使环境生效10.查看是否配置成功二.Linux系统MySQL安装和配置1.安装前检测系统是否自带安装 MySQL2.上传安装包到/opt目录下3.安装依赖包perl,new-tools,autoconf4. 卸载自带的 mariadb原创 2020-11-28 14:33:59 · 335 阅读 · 0 评论 -
虚拟机安装步骤
虚拟机安装步骤一.安装vmware Workstation(版本15.5)二.激活vmware三.安装虚拟机步骤一.安装vmware Workstation(版本15.5)下载链接:vmware安装包提取码:j532就一直“下一步”就行了二.激活vmware三.安装虚拟机步骤前提:链接:Centos镜像文件提取码:x7qs创建新的虚拟机设置内存大小定义虚拟机名称和虚拟机放置的位置(最好不要放C盘)自定义硬件信息配置项配置值内存4GCD/DVD原创 2020-11-28 13:02:50 · 349 阅读 · 0 评论 -
Hadoop分布式计算框架MapReduce(二)
Hadoop分布式计算框架MapReduce一.MapReduce实现join操作1.Reduce join1.1.需求1.2.原理1.3.缺点1.4.基本分析1.5.具体事例实现2.Map Join2.1使用场景2.2使用方法2.3具体事例实现二.推测执行一.MapReduce实现join操作使用MapReduce API来实现join1.Reduce join1.1.需求假如数据量巨大,两表的数据是以文件的形式存储在 HDFS 中,需要用 MapReduce 程序来实现以下 SQL 查询运算:原创 2020-10-02 16:04:37 · 333 阅读 · 0 评论 -
安装Sqoop及环境配置
安装Sqoop一.安装Sqoop及环境配置1.前提条件2.下载并解压3.修改配置文件4.拷贝JDBC驱动5.测试 Sqoop 是否能够成功连接数据库一.安装Sqoop及环境配置1.前提条件安装Sqoop的前提已经具备Java和Hadoop,Hive,Zookeeper,Hbase的环境2.下载并解压(1)上传安装包sqoop-1.4.6-cdh5.14.2.tar.gz到虚拟机需要安装的文件夹中(我直接放在我要安装的文件夹下/opt)(2)解压sqoop安装包到指定文件夹[root@hadoo原创 2020-09-26 15:46:22 · 499 阅读 · 0 评论 -
Hbase和hive单机安装及环境配置
Hbase和hive单机安装及环境配置一.Hbase单机伪分布式安装配置1.将安装包解压到opt文件夹下2.修改文件名并进行文件配置(1)配置hbase-env.sh(2)配置vi hbase-site.xml3.启动4.验证5.退出二.Hive1.前提条件2.将安装包解压到/opt文件夹下3.配置环境变量和配置文件(1) vi /etc/profile(2)hive-env.sh(3)加一个hive-site.xml文件4.启动5.验证一.Hbase单机伪分布式安装配置1.将安装包解压到opt文件夹下原创 2020-09-12 17:41:09 · 622 阅读 · 0 评论 -
Hadoop高可用集群搭建
搭建hadoop-HA模式一.前提条件1.在搭建hadoop-HA模式前需要构建hadoop集群、设置好时区以及配置好zookeeper2.集群架构表二.修改配置文件1.修改core-site.xml文件2.修改hdfs-site.xml文件3.修改yarn-site.xml文件4.远程发送配置文件三.进行启动1.前提2.先启动journalnode3.进行格式化4.复制tmp文件夹5.启动一.前提条件1.在搭建hadoop-HA模式前需要构建hadoop集群、设置好时区以及配置好zookeeper详原创 2020-09-08 21:45:45 · 196 阅读 · 0 评论 -
设置集群时区及Zookeeper安装及环境配置
设置集群时区一. 设置集群时区1.判断是否安装过安装过ntp2.安装ntp3.配置ntp配置文件4.验证二. Zookeeper安装及环境配置1.将安装包解压到/opt路径下2.配置全局环境变量3.zookeeper文件配置4.启动Zookeeper一. 设置集群时区1.判断是否安装过安装过ntprpm -qa | grep ntp#如果有可以进行删除yum -y remove2.安装ntpyum install -y ntp 3.配置ntp配置文件vi /etc/ntp.conf原创 2020-09-05 21:36:51 · 648 阅读 · 0 评论 -
hadoop集群搭建
hadoop集群搭建1.复制新的两台虚拟机2.在主机hadoop001上修改一下配置文件3.删除logs和tmp(注意:三台机器都需要删除成功)4.在第一台机器上进行格式化5.在第一台机器上进行开启6.通过jps进行验证1.复制新的两台虚拟机(三台机器都要确定都修改成功,互信要连接试试)(1)修改IP:vi /etc/sysconfig/network-scripts/ifcfg-ens33(2)重启网络:systemctl restart network(3)设置主机名:homenamectl原创 2020-09-05 21:15:13 · 230 阅读 · 0 评论 -
Hadoop安装以及环境配置
Hadoop安装以及环境配置1.创建一个纯净的虚拟机,安装好jdk和mysql2.解压hadoop.tar.gz(在根目录下创建一个software文件夹,把安装包都放在里面)[root@localhost /]# mkdir software[root@hadoop software]#tar -zxvf hadoop-2.6.0-cdh5.14.2.tar.gz -C/opt改名:[root@localhost opt]# mv hadoop-2.6.0-cdh5.14.2 hadoop3原创 2020-09-04 21:16:20 · 532 阅读 · 0 评论 -
Maven安装(apache-maven-3.6.1)
Maven安装(apache-maven-3.6.1)步骤如下:1.解压apache-maven-3.6.1安装包2.apache-maven-3.6.1进入conf文件夹,使用notepad++打开settings文件进行添加 1)在localRepository下添加jar包放的位置(在55行)<localRepository>d:\jar\jarstore</localRepository> 注:d:\jar\jarstore为自行放置j原创 2020-09-04 15:15:06 · 2208 阅读 · 0 评论 -
20200826(虚拟机克隆,实现自连与互联,进程,软件安装)
虚拟机克隆,实现自连与互联,进程,软件安装一.复制虚拟机二.通过mobaX连接两台虚拟机1. 实现自连2.实现互连三.进程管理四.远程传输五.软件安装1.解/压tar:2.yum:在线安装3.解压zip4.将文件上传到svn上一.复制虚拟机1.虚拟机关机状态下点击管理—克隆2.修改ip:vi /etc/sysconfig/network-scripts/ifcfg-ens33将IP地址192.168.135.30最后两位修改3.重启网络:systemctl restart network二.原创 2020-08-26 21:16:12 · 425 阅读 · 0 评论 -
20200706JDK的安装及配置环境变量
JDK的安装及配置环境变量1.JDK的下载和安装 通过Oracle 的官方网站下载JDK进行安装,网址: https://www.oracle.com/java/technologies/javase-downloads.html 下载后在默认路径下直接安装即可。出现如下图文件夹既安装成功2.JDK环境变量的设置(1)打开此电脑,右击点击属性—>高级系统设置—>环境变量(2)在系统变量中点击新建,添加环境变量新建JAVA_HOME 值为:C:\Program Files\原创 2020-07-06 22:42:58 · 289 阅读 · 0 评论