Apache Hive使用语法与概念原理

数据仓库和数据库

数据库和数据仓库的区别

数据库和数据仓库的区别实际讲的是OLTP和OLAP的区别。

  • 数据库(操作型处理):联机事务处理OLTP,也可以称为面向用户交易的处理系统,它是针对具体业务在数据库联机的日常操作,通常进行增删改查操作 。传统的数据库系统作为数据管理的主要手段,主要用于操作型处理。
  • 数据仓库(分析型数据):联机分析处理OLAP,也可以称为面向专业分析人员进行数据分析,通常进行查询操作,一般针对某些主题的历史数据进行分析,支持管理决策。

数据仓库主要特征:

面向主题的(Subject-Oriented)、集成的(Integrated)、非易失的(Non-Volatile)和时变的(Time-Variant)。

数据仓库架构

数据仓库架构可分为三层:源数据层、数据仓库层、数据应用层。

  • 源数据层(ODS):此层数据无任何更改,直接沿用外围系统数据结构和数据,不对外开放;为临时存储层,是接口数据的临时存储区域,为后一步的数据处理做准备。
  • 数据仓库层(DW):也称为细节层,DW层的数据应该是一致的、准确的、干净的数据,即对源系统数据进行了清洗(去除了杂质)后的数据。
  • 数据应用层(DA或APP):前端应用直接读取的数据源;根据报表、专题分析需求而计算生成的数据。

数据库操作

  • 创建数据库

create database if not exists myhive;

use myhive;

  • 查看数据库详细信息

desc database myhive;

  • 创建数据库并指定hdfs存储位置

create database myhive2 location '/myhive2';

  • 删除一个空数据库,如果数据库下面有数据表,那么就会报错

drop database myhive;

  • 强制删除数据库,包含数据库下面的表一起删除

drop database myhive2 cascade;

数据表操作

  • EXTERNAL,创建外部表
  • PARTITIONED BY,分区表
  • CLUSTERED BY,分桶表
  • STORED AS,存储格式
  • LOCATION,存储位置
  • 5
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 3
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值