hadoop
文章平均质量分 93
老哥爱学习
不以物喜,不以己悲。
展开
-
ubuntu20.04.5 hadoop3.2.4伪分布式安装部署
本文章记录了在ubuntu20.04.5中部署hadoop3.x伪分布式和hive的安装过程原创 2023-06-20 10:34:16 · 241 阅读 · 0 评论 -
hadoop集群搭建
1.服务器信息[root@master ~]# cat /etc/hosts192.168.1.171 master192.168.1.172 slave01192.168.1.173 slave022.在三个节点分别添加安装用户groupadd ghadoopuseradd uhadoop -g ghadoop -d /home/uhadooppasswd uhadoop#密码uhadoop3.配置时间同步[root@master ~]# crontab -l*/5 * * * *原创 2020-08-04 14:57:30 · 264 阅读 · 0 评论 -
hive学习
hive学习1.hive介绍1.1 什么是hive1.2 hive的优缺点1.3 适用场景2.hive基本操作2.1 查数据库2.2 创建park数据库2.3 进入park数据库2.4 查看表2.5 创建stu表2.6 创建一个和表stu结构一样的stu2表2.7 向表stu插入数据(会产生临时表)2.8 查看表stu数据2.9 查看表stu结构2.10 删除表stu2.11 创建stu表,并指定分割符 空格2.12 通过加载文件数据到指定的表stu里(写入的数据是递增的)2.13 把stu表数据插入到st原创 2020-08-04 14:42:32 · 160 阅读 · 0 评论 -
Hdfs常用命令
Hdfs常用命令1.列出本地文件系统目录[root@hadoop-namenode sbin]# hadoop fs -ls file:///2.将数据文件上传到hdfs文件系统中,运行实列echo “hello world”>aaa.txthadoop fs -mkdir /inputhadoop fs -put aaa.txt /inputhadoop fs -ls /inputcd /opt/hadoop_reso...原创 2020-08-04 14:36:36 · 78 阅读 · 0 评论 -
hadoop初识
hadoop初识1.hadoop总体介绍2.hadoop工作原理3.其他模块4.其他相关项目1.hadoop总体介绍Apache Hadoop软件库是一个框架,允许使用简单的编程模型跨计算机集群分布式处理大型数据集。它旨在从单个服务器扩展到数千台计算机,每台计算机都提供本地计算和存储。该库本身不是依靠硬件来提供高可用性,而是设计用于检测和处理应用层的故障,从而在计算机集群之上提供高可用性服务,每个计算机都可能容易出现故障。2.hadoop工作原理Hadoop 是 Apache 软件基金会旗下的一个开原创 2020-08-04 14:29:59 · 140 阅读 · 0 评论