![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 78
缪芮珂
计算机老菜鸟,没啥技术
Let life be beautiful like summer flowers!
展开
-
[hadoop笔记]使用Eclipse创建MapReduce工程A(持续更新中)
文章目录0. 准备工作:1. 在Windows环境下安装JDK,配置环境变量2. 安装eclipse,配置环境3. 在eclipse中连接Hadoop 0. 准备工作: ① 正确搭建好的Hadoop伪分布式/完全分布式平台 ② 需要的安装包: jdk-8u181-windows-x64.exe eclipse-jee-mars-1-win32-x86_64.zip hadoop-2.7.3.tar.gz hadoop-eclipse-plugin-2.7.3.jar winutils-m原创 2020-12-17 20:22:18 · 953 阅读 · 0 评论 -
[hadoop笔记]基于CentOS7虚拟机搭建Hadoop完全分布模式(3个节点)
文章目录1. 安装前准备① 虚拟机配置⑤克隆虚拟机⑥ 对每个主机固定IP地址,修改主机名,做主机映射⑦ 免密登录设置2. 搭建Hadoop完全分布模式① 修改Hadoop配置文件③ 分发给其他节点④ 在主节点wx1上格式化hdfs并启动hdfs和yarn:⑤分别在三个节点(虚拟机)上验证Hadoop进程,在撰写栏中输入:⑥通过web访问Hadoop:⑦完成后停止Hadoop进程: 1. 安装前准备 ① 虚拟机配置 可参考基于CentOS7虚拟机搭建Hadoop单机模式 在上一篇的基础上继续后续步骤 新增软原创 2020-12-10 13:58:42 · 538 阅读 · 0 评论 -
[hadoop笔记]基于CentOS7虚拟机搭建Hadoop伪分布模式
文章目录1. 安装前准备2. Hadoop伪分布模式搭建① 修改Hadoop配置文件② 格式化hdfs并启动hdfs和yarn:③ 验证Hadoop进程是否正常启动⑥通过web访问Hadoop:⑦完成后停止Hadoop进程: 1. 安装前准备 参考上一篇文章:Hadoop单机模式搭建 可以在上一篇文章完成的基础上做后续步骤 2. Hadoop伪分布模式搭建 ① 修改Hadoop配置文件 修改hadoop-env.sh 配置文件 [hadoop@wx hadoop]$ sudo vi $HADOOP_HOME原创 2020-12-10 11:58:35 · 379 阅读 · 0 评论 -
[hadoop笔记]基于CentOS7虚拟机搭建Hadoop单机模式
文章目录0 安装虚拟机,安装CentOS71. 配置虚拟机环境① 配置网络② 关闭防火墙和selinux③ 创建普通用户,并授权④修改主机名,做主机映射⑤安装jdk2. 安装Hadoop单机模式① 上传Hadoop安装包并解压,配置环境变量②运行Wordcount程序进行测试 0 安装虚拟机,安装CentOS7 安装环境及相关安装包: Windows10操作系统 VMware workstations 15.5 Pro CentOS7(最小化安装) jdk-8u261-linux-x64 Hadoop2.原创 2020-12-10 11:39:54 · 1123 阅读 · 2 评论