- 博客(4)
- 收藏
- 关注
原创 基于Hive数仓实现需求开发
如果数据库已存在就删除 drop database if exists db_msg cascade;--创建数据库 create database db_msg;--切换数据库 use db_msg;--列举数据库 show databases;
2024-04-25 21:06:50 767 4
原创 对Apache Hive的认识与学习
2.使用Hive处理数据的好处,操作接口采用类SQL语法,提供快速开发的能力(简单、容易上 手),避免直接写MapReduce,减少开发人员的学习成本,支持自定义函数,功能扩展很方 便,背靠Hadoop,擅长存储分析海量数据集。客户端 --> 解析器 --> 编译器 --> 优化器 --> 执行器 --> 计算引擎 --> Yarn --> HDFS/ HBase;客户端 --> 解析器 --> MsClient --> Metastore --> RDBMS;
2024-04-23 16:50:57 1651 2
原创 实习日记Day.1
接着又学习了分布式和集群,它二者之间的区别,分布式的主要工作是分解任务,将智能拆解多个人在一起做不同的事,而集群主要是将同一个业务部署在多个服务器上,多个人一起做同样的事;DataNode是集群当中的重节点,主要用于存储集群当中的各种数据是集群当中的重节点,主要用于存储集群当中的各种数据。首先了解到了大数据在狭义上是对海量数据进行处理的软件技术体系,在广义上是数字化,信息化时代的基础支撑以数据为生活赋能,以及大数据的五个主要特征,分别是体积种类,价值速度,质量,还有大数据的核心工作存储计算和传输。
2024-04-22 19:47:42 318 3
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人