Hadoop
「已注销」
这个作者很懒,什么都没留下…
展开
-
【CDH部署】全网最简单CDH6.2.0环境部署
下载链接 官方下载链接: https://archive.cloudera.com/cdh6/6.2.0/parcels/ 百度网盘下载链接: https://pan.baidu.com/s/1Dm5Elf9uQqn14BUbgU3AFQ 提取码: mws3 主机规划 sparkproject1 manager 8G 50GB sparkproject2 agent 4G 50GB sparkpr...原创 2020-02-19 21:25:53 · 1504 阅读 · 0 评论 -
【Hadoop部署】Hadoop环境部署5-Zookeeper、Kafka安装
zookeeper配置 cd zk/conf cp zoo_sample.cfg zoo.cfg vim zoo.cfg 修改: dataDir=/usr/local/zk/data 新增: server.0=sparkproject1:2888:3888 server.1=sparkproject2:2888:3888 server.2=sparkproject3:2888:3888 同步...原创 2020-02-19 20:43:41 · 197 阅读 · 0 评论 -
【Hadoop部署】Hadoop环境部署4-Scala、Spark安装
Scala安装 scala解压,放到/usr/local/scala,配置好环境变量即可。 Spark安装 cd /usr/local/spark/conf cp spark-env.sh.template spark-env.sh vi spark-env.sh export JAVA_HOME=/usr/local/java export SCALA_HOME=/usr/local/scala...原创 2020-02-19 20:31:02 · 177 阅读 · 0 评论 -
【Hadoop部署】Hadoop环境部署3-HIVE安装
安装mysql(mariadb) yum安装 yum install mariadb-server yum install -y mysql-connector-java 设置开机启动并配置 systemctl start mariadb # 开启服务 systemctl enable mariadb # 设置为开机自启动服务 mysql_secure_installation mysql相关...原创 2020-02-19 20:25:14 · 221 阅读 · 0 评论 -
【Hadoop部署】Hadoop环境部署2-Hadoop安装
解压并移动 解压tar文件之后,移动文件夹到/usr/local/hadoop文件夹 tar -zxf hadoop-xxxx.tar mv hadoop-xxxxx /usr/local/hadoop 配置文件 修改如下配置文件 core-site.xml <configuration> <property> <nam...原创 2020-02-19 20:12:34 · 150 阅读 · 0 评论 -
【Hadoop部署】Hadoop环境部署1-Linux基础设置
1、先临时性设置虚拟机ip地址: ifconfig ens33 192.168.71.110 在/etc/hosts文件中配置本地ip到host的映射 2、配置windows主机上的hosts文件: C:\Windows\System32\drivers\etc\hosts 192.168.71.110 sparkproject1 192.168.71.111 sparkproject2 192....原创 2020-02-19 20:05:29 · 315 阅读 · 0 评论