Hadoop集群
文章平均质量分 75
该专栏介绍如何快速搭建hadoop集群、以及示例操作示范。
编程爱
谦虚一点,多得一点。
展开
-
Hadoop集群搭建全流程,看这一篇就够了
本篇文章将给各位展示如何快速地搭建的hadoop集群,本文搭建的环境为,以下是我总结出的,如果是新手,请按流程走完,如果是有过搭建经验的,可根据所需点击相应链接。原创 2023-07-29 11:23:23 · 343 阅读 · 0 评论 -
windows安装JDK、maven 和 IDEA
Java程序必须运行在JVM之上,或者说java.exe就是JVM。所以,使用Java的第一件事情是安装JDK。原创 2023-08-31 12:07:45 · 174 阅读 · 0 评论 -
windows安装虚拟机(VMware)
使用VMware快速创建多台虚拟机原创 2023-07-24 23:08:08 · 3318 阅读 · 2 评论 -
虚拟机网络配置
安装完虚拟机后,需要对其进行联网。原创 2023-07-29 11:27:00 · 14141 阅读 · 0 评论 -
linux安装JDK和Hadoop
前面我们实现了虚拟机的安装,也为每个节点配置的网络,使其能上网。但这样还远不能让集群进行工作,因为我们并没有为每个节点安装hadoop软件,又怎么使用它所提供的服务呢?下载完软件后,如何让虚拟机找到hadoop路径等?本篇将讲述如何安装jdk和hadoop。原创 2023-07-29 11:26:01 · 300 阅读 · 0 评论 -
hadoop设置主机映射、免密操作
前面在给其它节点传输文件时,我们需要输入节点的ip,当需要给多个节点传输文件时,就会显得不方便,而且节点之间传输文件/互相登录都需要输入密码,效率低。所以我们需要进行和等其它操作。原创 2023-07-29 11:26:17 · 884 阅读 · 0 评论 -
hadoop修改配置文件和环境变量
我们要修改的就是主要的自定义配置文件。原创 2023-07-29 11:25:27 · 4171 阅读 · 0 评论 -
Namenode格式化
先前我们在配置文件里指定了文件系统为默认的HDFS,但此时hdfs在磁盘中并不存在,我们需要进行对文件系统进行格式化。原创 2023-07-29 11:25:01 · 1723 阅读 · 1 评论 -
hadoop的集群启动与关闭指令
前面我们搭建好了集群,现在可以实现启动和关闭集群,实际上,启动集群就是在每台机子上启动相应的进程,这些进程我们通常称呼它们为角色,角色又有主从之分。我们要想使用集群,就必须得有这样的角色,就好比一个企业里的各种设施和配置都准备好了,得有员工才能工作,最终干活的肯定是这些员工(角色)。原创 2023-07-29 11:23:36 · 1134 阅读 · 0 评论