- 博客(3)
- 收藏
- 关注
原创 Hadoop集群搭建与初识Hive
Hadoop集群搭建HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群HDFS集群 :NameNode、DataNodeYARN集群 :Hive起承接作用,将hdfs上的文件按照某种格式(我们所指定的格式)将其转化为表结构,之后我们用SQL语言操作表结构,可以将SQL 查询转换为MapReduce 的job 在Hadoop集群上执行。(hive基于hadoop实现的)Hive架构Meta store(元数据存储)Client(用户接口)
2024-04-23 22:53:29
396
1
原创 Hadoop入门
格式: hadoop fs -rm [-r] [-skipTrash] URI [URI。格式 : hadoop fs -put ... 集群:集群主要是将同一个业务,部署在多个服务器上 ,多个人在一起做同样的事。分布式 :分布式的主要工作是分解任务,将职能拆解,多个人在一起做不同的事。格式 : hadoop fs -mv 这种部署模式下,主节点和从节点会分开部署。格式:hadoop fs -ls URI。集群模式主要用于生产环境部署。
2024-04-22 23:11:47
315
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人