【hadoop入门实战】Mac上安装hadoop，并运行程序（1）

最新推荐文章于 2025-10-16 16:34:25 发布
原创 最新推荐文章于 2025-10-16 16:34:25 发布 · 3.8w 阅读 · 13 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#hadoop #读书笔记 #hdfs

本文档详细介绍了如何在Mac系统上安装Hadoop，并通过执行Java程序验证其安装成功。首先，需要安装Java环境作为运行Hadoop的基础。参照给定链接的教程，完成Hadoop的安装步骤。成功后，运行HDFS，能够成功执行jar包，标志着Hadoop已在Mac上成功部署。

安装hadoop

参考：http://blog.csdn.net/ksgt00016758/article/details/23625007


系统版本：

————————————————————————————————————————————————————————————————————————————

1.安装JAVA——之后会运行jar包，肯定需要java的运行环境

查看java版本： 
java -version


————————————————————————————————————————————————————————————————————————————
2.下载hadoop
地址：http://hadoop.apache.org/releases.html


然后看到


我没有选版本太高的，因为不会用


最低0.47元/天 解锁文章
Mac 安装 Hadoop 详细教程（安装包 and Homebrew）
weixin_39149333的博客
10-16 3022
JDK 版本高于 JDK 8，可能会导致 Hadoop ResourceManager 打不开，从而导致无法访问 localhost:8088。因此最好的方法，就是准备好 JDK 8 的环境，然后导入到 Hadoop 当中。PS: 这种安装方式可能会少 lib/native 文件夹，具体原因未知。2. 如果失败，则在本地设置中，搜索“共享”，打开“远程登录”。4. 点击，下载到本地，然后解压，放在自己需要的目录中，我放在了。
MAC下搭建hadoop
Elion_jia的博客
02-23 1038
一：简介 Hadoop是一个用Java开发的开源框架，它允许使用简单的编程模型在跨计算机集群的分布式环境中存储和处理大数据。它的设计是从单个服务器扩展到数千个机器，每个都提供本地计算和存储。特别适合写一次，读多次的场景。 Hadoop一般用于对大量数据执行完整统计分析的应用程序。 二：安装步骤 1. 修改主机名 sudo scutil --set HostName localhost 2. ssh免密登录 具体配置方法： （1）ssh-keygen -t rsa （一路回车直...
大数据环境搭建
fcclzydouble的博客
02-26 1265
大数据环境准备 一、准备 准备一台内存最少8G（建议16G）、cpu i7 4核的电脑 二、主题 安装虚拟化软件VMware 准备3台linux虚拟机 搭建3节点zookeeper集群 搭建3节点的hadoop集群 三、目标 完成大数据环境准备 四、知识要点 文档说明： 在学习大数据课全程中，要求大家统一保持跟说明一样的操作系统、软件版本、环境设置 VMware版本： VMware建议使用比较新的版本，如VMware 15.5
Mac 安装 Hadoop 大数据框架完整教程
最新发布
qq_53401830的博客
10-16 666
mac电脑安装hadoop大数据框架，包含spark，flink安装教程
大数据第一步-Mac安装Hadoop3
dfBeautifulLive的博客
07-17 2805
前提是把jJDK8安装好，hadoop3.x最低需要jdk8。然后打开共享把远程登陆打开，不打开说是后面会报错，到终端输入命令：ssh localhost生成新的keygen否则后面会报错 Permission denied 命令：ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa。
hadoop搭建_在Mac环境中搭建Hadoop
weixin_39748773的博客
11-29 548
THANK YOU11.28在Mac环境下搭建Hadoop，简单粗暴一键安装，包含过程中可能会出现的坑，大家也可以看看解决方案。JAVA环境配置、jdk安装地址https://www.oracle.com/java/technologies/javase-jdk15-downloads.html(建议Chrome打开，有翻译功能，已安装或英语过关忽略)查看jdk版本信息1 ~$ ja...
Mac搭建Hadoop
王者归来
11-20 519
1.安装jdk 2.安装hadoop 配置ssh ssh-keygen -t rsa 授权你的公钥到本地可以避免每次登陆时都要询问你的密码, cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys sudo systemsetup -f -setremotelogin on 报错setremotelogin: Turning Remote Login on or off requires Full Disk Access privileges
Hadoop系列-01 Hadoop入门与集群实战：从环境搭建到架构解析全指南
yangwei2048的博客
11-24 2376
本文详细介绍了Hadoop集群的安装部署流程。首先进行环境准备，包括服务器配置、防火墙关闭、时钟同步设置、创建普通用户hadoop并配置sudo权限。然后配置SSH免密登录，安装JDK环境。接着下载Hadoop安装包并解压，检查本地库支持情况。最后修改hadoop-env.sh等配置文件，为后续Hadoop服务启动做准备。文中提供了完整的命令操作步骤和服务器角色规划表（NameNode、DataNode、ResourceManager等），适合初学者快速搭建Hadoop集群环境。
Hadoop学习笔记
weixin_45906989的博客
08-13 1747
Handoop学习笔记
hadoop-3.0.0-beta1运维手册（003）：安装全分布式HDFS3.0.0-准备软件和配置CentOS网络
aishuc的博客
11-29 852
3.1 准备软件 HDFS是Hadoop的一个组件，它并没有单独发布，因此，我们需要下载Hadoop的安装包。 1. 下载Hadoop3.0.0-beta1，保存到d:\hdfs3\soft 3-1 Hadoop存储路径图 有关beta1版本的介绍：它是API稳定的版本，但不保证质量，并且不打算用于生产环境。因此，此版本可以用来提前学习，待stable版本出来后，可以直接替换上生产环境
MAC下搭建Hadoop运行环境
热门推荐
公众号：白程序员的自习室
07-20 1万+
Hadoop环境的搭建和配置还是有些麻烦的，尤其是mac,此处整理下自己搭建的过程和步骤。
mac配置hadoop
长舒的博客
07-06 391
可以参考这篇博客 Mac配置hadoop环境 关于mac报22端口被拒绝的问题，参考解决Mac22端口报拒绝
mac配置hadoop完全分布式系统
weixin_45137410的博客
10-18 1170
mac系统配置hadoop完全分布式系统
Mac部署Hadoop环境
天然玩家的博客
12-24 702
环境 macOS Mojave10.14 openssl JDK1.8 Maven3.5.3 Hadoop2.8.5 1 openssl配置 export OPENSSL_ROOT_DIR=/usr/local/Cellar/openssl/1.0.2p export OPENSSL_INCLUDE_DIR=/usr/local/Cellar/openssl/1.0.2p/inclu...
Mac m2电脑上安装单机Hadoop（伪集群）
一只大耗子
12-13 1405
在Mac下配置ssh环境，防止后面启动hadoop时出现Connection refused 连接被拒绝的错误。再次输入ssh localhost会提示输入密码，这个时候要重新配置一下ssh免密登录。Mac电脑上安装Hadoop，必须首先安装JDK，并配置环境变量（此处不做详细描述）访问http://localhost:8088/cluster出现一下页面代表成功。访问http://localhost:9870出现一下页面代表成功。在配置文件中添加一下内容，注意配置中的路径。出现以下信息代表成功。
Mac安装Hadoop(超级无敌宇宙爆炸详细)
Horsleyli的博客
11-01 1万+
且视他人之疑目如盏盏鬼火,大胆地去走你的夜路
Mac 安装Hadoop教程（HomeBrew安装）
总结复盘，才能不迷失自己！
08-31 3421
本教程旨在介绍在Mac 电脑上安装Hadoop，便于编程开发人员对大数据技术的熟悉和掌握。
Mac 安装 Hadoop
weixin_36995355的博客
08-08 678
2. SSH 首先在系统里打开远程登录，位置在System Preference -> Sharing中，左边勾选Remote Login，右边选择All Users。 ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys chmod 0600 ~/.ssh/authorized_keys ssh localhost用来测试 3. 安装hado...
评论 6
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值