Hadoop
关注
分享
扫一扫
hadoop学习的笔记
https://www.bilibili.com/video/av64039568
温玉琳琅
多读书，多运动，少吃零食，多睡觉
展开
-
Hadoop学习（五）完全分布运行模式
一、虚拟机准备1、准备3台虚拟机，分别为hadoop102，hadoop103，hadoop104，并分别修改静态ip和主机名2、安装Hadoop和Java原创 2020-04-24 19:09:52 · 340 阅读 · 0 评论 -
Hadoop学习（四）伪分布运行模式
伪分布模式：只有一个节点的分布式一、启动HDFS并运行MapReduce程序1、配置集群将目录切换到：/opt/module/hadoop-2.7.2/etc/hadoop（1）配置hadoop-env.sh该配置文件中修改JAVA_HOME路径，上一篇文章修改过（2）配置core-site.xml打开文件：vim core-site.xml在标签configura...原创 2020-04-21 22:37:41 · 638 阅读 · 0 评论 -
Hadoop学习（三）本地运行模式——两个案例
（此篇内容基于上一篇博客配置的环境）Hadoop运行模式包括：本地模式、伪分布模式、完全分布模式依赖：Java，SSH本地运行模式：mapreduce跑在了本地的资源调度，本地的存储上。作用是测试，不用其来跑任务一、Grep案例1、编辑文件hadoop-env.sh，配置JAVA_HOME当前目录：/opt/module/hadoop-2.7.2/打开文件：etc/ha...原创 2020-04-21 21:35:07 · 525 阅读 · 0 评论 -
Hadoop学习（二）虚拟机配置
系统：CentOS7内存：2G1、关闭防火墙查看防火墙状态：systemctl status firewalld.service 绿色字样为防火墙开启状态关闭防火墙：systemctl stop firewalld.service 防火墙关闭关闭防火墙开机自启：systemctl disable firewalld2、创建一个一般...原创 2020-04-20 17:32:55 · 665 阅读 · 0 评论 -
Hadoop学习（一）Hadoop概述
一、Hadoop1、简介Hadoop是一个由Apache基金会开发阿德分布式系统基础架构主要解决，海量数据的存储和海量数据的分析计算问题PS：储存大小数量级：兆M->吉G->太T->拍P->艾E->泽ZHadoop三大发行版本：Apache（最原始，最基础，开源）、Cloudera（大型互联网企业中用的多）、Hortonworks（文档较好）...原创 2019-12-27 15:56:14 · 660 阅读 · 0 评论