Hadoop
文章平均质量分 91
hadoop大数据处理与分析(慕课版)学习笔记
木北鲜生
确定的明天,不确定的未来!加油!
展开
-
virtualbox ubuntu20.04集群网络配置
解决Hadoop集群网络配置问题,使用VirtualBox+Ubuntu20.04版本,使集群网络互通并且可以上网。原创 2023-05-12 15:05:32 · 699 阅读 · 1 评论 -
Hadoop HDFS命令
hadoop集群搭建好之后,通过HDFS命令操作HDFS分布式文件系统,HDFS命令与linux命令类似所有命令有/bin/hadoop脚本引发,可以使用命令查看帮助文档hadoop fs-help使用HDFS命令之前,必须启动hadoop集群,且命令执行在master节点上原创 2022-05-22 01:18:03 · 820 阅读 · 0 评论 -
hadoop集群搭建和配置
hadoop的优势是分布式集群计算,即搭建hadoop集群(完全分布式Hadoop)原创 2022-05-20 16:35:20 · 1947 阅读 · 0 评论 -
解压jdk,配置ssh,安装hadoop
伪分布式安装步骤:下载VirtualBox软件创建虚拟机安装linux系统(Ubuntu版本)安装jdk,hadoop使用java的编写程序,使用jdk编译安装ssh(安全外壳协议),为了让从节点的各台主机密码联通安装hadoop原创 2022-05-03 17:00:16 · 3324 阅读 · 0 评论 -
下载VirtualBox,创建虚拟机,安装Linux系统(Ubuntu版)
VirtualBox软件可以创建虚拟机,虚拟机上可以安装linux系统,linux系统的环境支持hadoop集群。原创 2022-04-29 14:35:24 · 4437 阅读 · 1 评论 -
认识hadoop
大数据字面理解:大量的数据深层理解:海量数据的获取,分析,处理。让没有意义的数据变为有价值的数据。数据量超过传统数据库处理的能力,因而产生大数据技术。 大数据的大没有标准,TB~PB 大数据不仅仅大 大数据的标准可变 例如:问卷调查,获得信息;微博热搜,展示实时热点信息。大数据特点(5v) volume,数据量大,pez级别 velocity,速度快,有效的时间内处理数据才有价值 variety,种类多,结构化,非结构化,半结构化数据处理原创 2022-04-27 13:10:30 · 1278 阅读 · 0 评论