![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
安装配置
喵Ja
通往财富自由ing
--一位爱猫的程序猿
展开
-
spark的安装详细步骤
1.下载spark地址http://spark.apache.org/downloads.html2.把下载好的压缩包拖拽到虚拟机的software(自己建的)目录下3.进入到software目录里面把压缩包解压到 /opt 目录下cd /softwaretar -zxvf spark-2.4.5-bin-hadoop2.6.tgz -C /opt/4.进入opt目录里面将安装好的spark改名cd /optmv spark-2.4.5-bin-hadoop2.6 spark2455.原创 2020-10-30 14:56:00 · 8477 阅读 · 4 评论 -
2020-08-21Hadoop在Linux中的安装配置
资源 https://pan.baidu.com/s/1uPa7TAFNEJ5ZSUEaJW1VYg密码:fqi0进入/opt 把文件拖进去cd /opt解压 tar -zxvf hadoop-2.6.0-cdh5.14.2.tar.gz配置环境: vi /etc/profile在末行输入export PATH USER LOGNAME MAIL HOSTNAME HISTSIZE HISTCONTROLexport JAVA_HOME=/opt/jdk1.8.0_22原创 2020-09-03 22:59:28 · 150 阅读 · 0 评论 -
hadoop运行模式(本地运行模式,伪分布模式,完全分布模式,配置时间同步)
Hadoop运行模式包括:本地模式、伪分布式模式以及完全分布式模式。Hadoop官方网站:http://hadoop.apache.org/本地运行模式官方Grep案例创建在hadoop文件下面创建一个input文件夹[root@hadoop101 hadoop]# mkdir input将Hadoop的xml配置文件复制到input[root@hadoop101 hadoop]# cp etc/hadoop/*.xml input执行share目录下的MapReduce程原创 2020-09-08 19:16:13 · 679 阅读 · 0 评论 -
zookeeper的配置和zookeeper集群的时间同步设置
文章目录一.ZooKeeper下载安装二.ZooKeeper配置三.配置集群的时间同步四.启动和关闭ZooKeeper并验证ZooKeeper下载安装拖入opt目录解压安装: tar -zxvf zookeeper-3.4.6.tar.gz删除安装包 rm -rf zookeeper-3.4.6.gar.gz配置全局变量 vi /etc/profile在打开的文件中添加如下两行:export ZK_HOME=/opt/zookeeper-3.4.6exp原创 2020-09-15 09:31:15 · 168 阅读 · 0 评论 -
HA高可用集群搭建
前提需求:完全分布式zookeeper配置与时间同步配置HA集群配置1.core-site.xml1.core-site.xml设置name集群的名称设置zookeeper 2181地址<configuration> <property> <name>fs.defaultFS</name> <value>hdfs://ns</value>原创 2020-09-15 15:09:18 · 127 阅读 · 0 评论 -
HBase安装配置和Hive安装配置
目录Hbase的安装配置Hive安装配置Hbase的安装配置安装: 前置条件最少安装了Hadoop(如果只是安装单机版hbase,zookeeper使用hbase内置的即可)如果需要安装伪分布式或完整分布式则需要先安装zookeeper 下载hbase(建议下载hbase-1.2.0)并解压至/opt/目录下,修改解压后的名字为hbasetar -zxvf hbase-1.2.0-cdh5.14.2.tar.gz -C /opt/mv hbase-1.2.0-cdh5.14.2/ hb原创 2020-09-15 16:01:28 · 596 阅读 · 0 评论