![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据学习笔记
文章平均质量分 71
文艺圈不知名刘先生
这个作者很懒,什么都没留下…
展开
-
windows搭建hadoop环境
前言 之前虽然在wsl和docker上都搭建了hadoop的环境,但由于需要本地的代码调试,不得以而再次搭建windows平台的运行环境。 文章目录前言下载拷贝dll文件配置环境变量配置JAVA_HOME配置HADOOP_HOME配置PATH检验伪分布式配置修改hadoop-env.cmd修改hdfs-site.xml检验 下载 首先下载我们需要的hadoop文件(这里的bin 和etc文件已经替换过,配置后直接使用即可): 下载地址 提取码:owtg 强调:将该文件解压到一个没有中文与空格的路径下原创 2021-04-10 03:10:34 · 529 阅读 · 0 评论 -
使用docker搭建大数据环境
文章目录Instruction使用方法clone本仓库到你的本地使用make进行docker镜像下载启动镜像进入镜像退出并解除容器 Instruction 使用docker进行构建单机伪分布式hadoop环境,搭建的docker-images使用的软件版本如下: hadoop版本:2.7.7 spark版本:3.1.1 jdk版本:1.8 hive版本:待添加 Hbase版本:1.4.13 ps: 1. 请先确保你的 git 、docker 和 make 是可用的。 2. 镜像内的用户密码.原创 2021-04-10 01:16:42 · 752 阅读 · 0 评论