![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据系列
文章平均质量分 91
慢丫头
这个作者很懒,什么都没留下…
展开
-
Hadoop day06(DML语句+函数使用 )
(表名列名不区分大小写)示例:有一个感染情况的数据文件。创表加载简单查询为了提高sql编写率,有内置函数。分内置函数、用户自定义函数UDF内置函数可分为:数值类型函数、日期类型函数、字符串类型函数、几何函数、条件函数等;用户自定义函数根据输入输出的函数可分为3类:UDF、UDAF、UDTF。show functions可以查看可用的所有函数,describe function extended funcname 查看函数的使用方式UDF:普通函数,一进一出 (原创 2023-07-27 19:57:29 · 173 阅读 · 3 评论 -
Hadoop day05(数据仓库+ hive-DDL操作)
结构化查询语言简称sql,用于数据库查询和程序设计语言,用于存取数据以及查询、更新和管理数据。结构化数据:由二维表结构来逻辑表达和实现的数据严格地遵循数据格式与长度规范,主要通过关系型数据库进行存储和管理非结构化数据:相对的是不适于由数据库二维表来表现的非结构化数据,包含所有格式的办公文档、xml、HTML、各类报表、图片和音频、视频信息等。原创 2023-07-26 22:21:48 · 153 阅读 · 1 评论 -
Hadoop day04(MapReduce+YARN)
概念:是分布式计算框架,用于编写分布式应用程序,该程序可靠、容错处理大型硬件集群上的海量数据。是一种面向海量数据处理的一种指导思想,也是用于对大规模数据进行分布式计算的编程模型。易于使用和高度可拓展起源:2004年谷歌的一篇论文特点:易于编程:MapReduce框架提供了用于二次开发的接口,简单实现一些接口,就可以完成一个分布式程序。任务计算交给计算框架去处理,将分布式部署到Hadoop集群上运行,集群节点可以拓展到成百上千个等。良好的拓展性。原创 2023-07-25 22:18:47 · 104 阅读 · 0 评论 -
Hadoop day02(Linux)
Linux操作系统简介-命令-vim编辑器原创 2023-07-24 11:11:54 · 55 阅读 · 0 评论 -
Hadoop day01(入门概念)
视频参考b站黑马程序员Hadoop相关视频原创 2023-07-23 15:17:57 · 153 阅读 · 1 评论