![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据配置
大数据配置相关
软件手
在校大学生,B站:软件手
展开
-
华为云-鲲鹏集群-大数据环境搭建
一、系统环境配置1、修改hostname[root@master ~]# vim /etc/hostanme/etc/hostname 2、修改hosts,设置为内网ip[root@master ~]# vim /etc/hosts192.168.1.178 master192.168.1.51 slave1192.168.1.117 slave2192.168.1.67 sla...原创 2020-05-19 17:09:44 · 4456 阅读 · 2 评论 -
Kafka 安装配置及下载地址
使用安装包版本:kafka_2.11-1.0.0下载地址https://mvnrepository.com/artifact/org.apache.kafka/kafka_2.11/1.0.0已经安装 hadoop-2.6.0.tar ,zookeeper-3.4.5.tar虚拟机IPmaster192.168.176.41slave1192.16...原创 2020-01-01 14:44:12 · 1507 阅读 · 0 评论 -
Hive 安装配置及下载地址
使用安装包版本:apache-hive-1.2.2-bin.tar.gz下载地址http://www.apache.org/dyn/closer.cgi/hive/一、将hive解压至指定目录1、解压到/usr/local/src,并进入/usr/local/src[root@master app]# tar -zxvf apache-hive-1.2.2-bin.tar.gz -C /...原创 2019-12-31 20:48:48 · 1851 阅读 · 0 评论 -
Mysql-Linux 安装配置及下载地址
使用安装包版本:mysql-5.7.28-1.el7.x86_64.rpm-bundle.tar下载地址 https://dev.mysql.com/downloads/mysql/一、解压 mysql 安装包1、创建 mysql 解压目录[root@master mysql]# mkdir /usr/local/src/mysql 2、将 mysql 解压 至 指定目录[ro...原创 2019-12-30 21:50:22 · 1210 阅读 · 2 评论 -
Jdk-Linux 安装配置及下载地址
使用安装包版本:jdk-8u221-linux-x64.tar.gz下载地址https://www.java.com/en/download/manual.jsp一、创建目录[root@java java]mkdir /usr/java二、解压[root@java java]tar -zxvf jdk-8u221-linux-x64.tar.gz -c /usr/java[root@...原创 2020-01-02 11:28:06 · 1240 阅读 · 1 评论 -
Zookeeper-Hadoop HA (高可用) 安装配置及下载地址
使用安装包版本:hadoop-2.6.0.tar.gz下载地址 https://www.apache.org/dyn/closer.cgi/hadoop/commonjdk-8u221-linux-x64.tar.gz下载地址 https://www.java.com/en/download/manual.jspzookeeper-3.4.5.tar.gz下载地址https://www...原创 2020-01-02 12:10:51 · 442 阅读 · 0 评论 -
Sqoop 安装配置及下载地址
使用安装包版本:sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz下载地址 http://www.apache.org/dyn/closer.lua/sqoop/一.简介Sqoop是一种旨在在Hadoop与关系数据库或大型机之间传输数据的工具。您可以使用Sqoop将数据从MySQL或Oracle等关系数据库管理系统(RDBMS)或大型机导入Hadoop分布式文件系统(...原创 2020-01-05 13:01:53 · 1212 阅读 · 0 评论 -
Hadoop 安装配置及下载地址
使用安装包版本:hadoop-2.6.0.tar.gz下载地址 https://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-2.10.0/hadoop-2.10.0-src.tar.gz/主机IP映射[root@master conf]# vi /etc/hosts127.0.0.1 localhost localhost.l...原创 2020-01-06 21:45:08 · 771 阅读 · 0 评论 -
Spark 安装配置及下载地址
使用安装包版本:spark-2.0.0-bin-hadoop2.6下载地址 https://spark.apache.org/Spark概述Apache Spark是一个快速的通用集群计算系统。它提供Java,Scala,Python和R中的高级API,以及支持常规执行图的优化引擎。一、安装1、解压[root@master app] # tar -zxvf spark-2.0.0-b...原创 2020-02-05 22:29:03 · 4912 阅读 · 0 评论 -
HBase 安装配置及下载地址
使用安装包版本:hbase-1.2.0-bin.tar.gz下载地址 https://hbase.apache.org/downloads.htmlHBase 概述HBase是Hadoop的生态系统,是建立在Hadoop文件系统(HDFS)之上的分布式、面向列的数据仓库,通过利用Hadoop的文件系统提供容错能力。如果你需要进行实时读写或者随机访问大规模的数据集的时候,请考虑使用HBase...原创 2020-02-05 23:25:02 · 3590 阅读 · 0 评论