mac下安装hadoop与hive

本文详细介绍了在mac系统中安装Hadoop 3.x和Hive的步骤,包括配置SSH免密登陆、Hadoop的下载安装、环境变量配置、格式化文件系统、启动HDFS和YARN,以及Hive的安装、启动、解决安装过程中的异常问题、安装MySQL作为元数据库、创建元数据表、配置hive-site.xml和初始化元数据库等操作。
摘要由CSDN通过智能技术生成

hadoop 3.x安装

1、ssh免密登陆配置
ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
chmod 0600 ~/.ssh/authorized_keys
2、下载并安装hadoop
brew install hadoop

下载完后hadoop的目录在/usr/local/Cellar/hadoop/

3、配置

目录:/usr/local/Cellar/hadoop/${版本号}/libexec/etc/hadoop

  1. 配置hadoop-env.sh
    输入/usr/libexec/java_home 拿到java_home的值
例如:/Library/Java/JavaVirtualMachines/jdk1.8.0_211.jdk/Contents/Home

在hadoop-env.sh中配置JAVA_HOME

export JAVA_HOME=/Library/Java/JavaVirtualMachines/jdk1.8.0_211.jdk/Contents/Home
  1. 配置core-site.xml
<configuration>
<!--指定namenode的地址-->
 <property>
 <name>fs.default
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值