weixin_65082744的博客

from_unixtime: 把unix时间戳转换为日期格式的时间 注意: 如果传入的参数是0,获取的是时间原点1970-01-01 00:00:00。分组查询格式: select 分组字段名,聚合函数(字段名) from 表名 [where 非聚合条件] group by 分组字段名 [having 聚合条件];注意: 加上extended关键字能查看详细信息示例。范围查询: x到y的连续范围:between x and y x或者y或者z类的非连续范围: in(x,y,z)

hadoop是一种解决方案,之前只有两个模块,后面发现有把资源调度和计算放在一起有点不太够,就剥夺成两个独立的部分,到现在我们看到的HDFS,YARN,mapreduce.作用之前讲过就不再细讲了.补充HDFS是存数据,但是也就数据了,像元数据存在hive里的mysql中,这就是为什么外部表删除只能删除数据,而删除不了结构,没有权限去mysql里操作.我们首先要在客户端启动服务一键启动hdfs和yarn集群:start-all.sh。

Hive元数据是Hive数据仓库的重要组成部分，它描述了Hive中数据的结构和属性。数据库信息：如数据库的名称、所有者、创建时间等。表信息：包括表名称、表的位置、表的类型（如外部表、内部表等）、表的属性（如存储格式、压缩方式等）、字段的顺序和类型等。分区信息：对于分区表，Hive会存储每个分区的元信息，包括分区的名称、分区的位置、分区的键值等。列信息：表中每个字段的详细信息，如字段名、字段类型、字段的注释等。

学习笔记