Hive介绍及DDL

最新推荐文章于 2024-08-22 14:48:48 发布
最新推荐文章于 2024-08-22 14:48:48 发布
阅读量394 收藏 1
点赞数
文章标签： hive hadoop 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43601664/article/details/129463311
版权
文章探讨了OLTP（在线事务处理）系统，常用于关系型数据库如MySQL，以及OLAP（在线分析处理）系统在数据分析中的作用。数据仓库是为支持OLAP而建立的。Hive是一个基于Hadoop的数据仓库工具，它允许使用SQL查询HDFS上的结构化和半结构化数据，通过将HQL转换为MapReduce作业进行处理。Hive简化了对大数据的分析过程。
摘要由CSDN通过智能技术生成
1.OLTP和OLAP
  • OLTP： 联机事务处理系统。在前台接收的用户数据可以立即传送到后台进行处理，并在很短的时间内给出处理结果。
  • 关系型数据库是OLTP典型应用，如MySQL

OLTP环境开展数据分析是否可行？
在这里插入图片描述

为了更好的开展数据分析，于是有了数据仓库的建立。即联机分析处理系统OLAP，面向分析，支持分析。
在这里插入图片描述

2.数据仓库的主要特征

在这里插入图片描述

3.结构化数据与非结构化数据
  • 结构化数据就是指用二维表结构来逻辑表达和实现的数据
    在这里插入图片描述
4.SQL语法分类

在这里插入图片描述

5.Hive：SQL For Hadoop
  • 建立在Hadoop上的一款开源数据仓库系统，可以将存储在Hadoop文件中的结构化、半结构化数据映射为一张数据库表
  • Hive核心是将HQL转换为MapReduce程序，然后将程序提交到Hadoop集群上执行
  • Hive利用HDFS存储数据，利用MapReduce查询分析数据
  • Hive最大的好处就是用户可以专注于编写HQL，Hive帮我们转换成MapReduce程序完成对数据的分析，相当于一个接口
6.Hive的功能

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

7.Hive的架构

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

8.Hive建库、切换库、删除库

在这里插入图片描述
建库：
在这里插入图片描述
切换数据库：
在这里插入图片描述
删除数据库：
在这里插入图片描述

9.Hive建表（数据类型，分隔符）

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

10.show语法

在这里插入图片描述

半觞盛夏半觞秋
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
hive表ddl导出_HIVE常用命令(DDL)
weixin_34822215的博客
12-30 281
好记性不如烂笔头，何况记性不好本文都来自hive文档, 记下来方便查询。Database操作create database文法CREATE (DATABASE|SCHEMA) [IF NOT EXISTS] database_name[COMMENT database_comment][LOCATION hdfs_path][WITH DBPROPERTIES (property_name=pro...
Hive DDL 之 表
01-07
创建表 语法： CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMENT col_comment], …)] [COMMENT table_comment] [PARTITIONED BY (col_name data_type [COMMENT col_comment], …)...
Hive SQL DDL事务表、视图、物化视图
pljnb的博客
02-05 313
Hive SQL DDL事务表、视图、物化视图
【Hive-基础】DDL语句，数据库、表的基本CURD操作
一个写湿的程序猿
08-02 1289
DDL语句，数据库、表的基本操作 文章目录DDL语句，数据库、表的基本操作1 创建-数据库2 查询-数据库3 修改-数据库4 删除-数据库5 创建-表5.1 管理表5.2 外部表5.3 管理表与外部表的互相转换6 修改-表7 删除-表8 清除-表 1 创建-数据库 CREATE DATABASE [IF NOT EXISTS] database_name [COMMENT database_comment] [LOCATION hdfs_path] [WITH DBPROPERTIES (property_
oracle表碎片整理
congjiu2607的博客
10-27 368
数据库在日常使用过程中，不断的insert，delete，update操作，导致表和索引出现碎片是在所难免的事情，碎片多了，sql的执行效率自然就差了，道理很简单，高水位线（HWL）下的许多数据块都是无数据的，但全表扫描的时候要...
大数据学习12：Hive的整体框架和DDL整理
ggwxk1990的博客
09-14 445
一、hive的框架 hadoop是一个海量分布式存储和计算的框架，hdfs负责存储，yarn调度，MapReduce计算。 相对于MapReduce编程的不足，产生了hive的框架： 1）MapReduce繁琐：要写mapper，reducer，driver，package 2）海量数据存放在hdfs，如何快速对hdfs上的文件进行统计分析操作。 ①学java，学mapr ②DBA：s
Hive中的DDL操作
Mark_Frank的博客
08-25 1760
参考文章：https://www.cnblogs.com/qingyunzong/p/8723271.html 首先引入以下什么是DDL、DML、DCL： DDL（data manipulation language） 它们是SELECT、UPDATE、INSERT、DELETE，就象它的名字一样，这4条命令是用来对数据库里的数据进行操作的语言。 DML（data definition language） DDL比DML要多，主要的命令有CREATE、
hive DDL 语句
weixin_42435657的博客
06-16 902
ShowDescribe在hive中DATABASE|SCHEMA是等效的，可以相互替代oRESTRICT: 默认值，在数据库中存在表的时候会失败，但如果是手动复制到该数据库下的，因为元数据中并没有相关信息，所以照样可以删除成功oCASCADE: 不管是否库中有表，全部删除。
Hive之DDL表操作
luoyepiaoxue2014的博客
11-25 876
Hive系列第五章
Hive--DDL操作
ljh18885466426的博客
10-19 462
Hive–DDL操作 hql语句形式 DDL 库、表、视图 创建修改删除 create、alter、drop DML 表的具体数据的事务操作 数据写入 数据的修改 数据的删除 DQL 数据查询 from、where、group by、having 、聚合、select、order by，limit DCL 权限控制 grant 用户创建修改 重点 创建数据操作和查询数据操作 HQL建表 基本建表语句 create table tb_name( id i
bak_hive_ddl.sh
08-21
hive数仓databases，tables DDL语句 备份脚本,下载即可直接运行，需要运行脚本前须保证数据库已创建完成，数据库需要手动创建
Hive常用DDL操作.md
08-07
Hive常用DDL操作，基础篇
Hive DML
01-07
Hive不支持update的操作。数据一旦导入，则不可修改。要么drop掉整个表，要么建立新的表，导入新的数据。 load：加载数据到表 load data [local] inpath ‘filepath’ overwrite | into table 表名 [partition ...
第2章 HiveSQL 数据定义语言（DDL）1
08-08
在本章中，我们将深入探讨HiveSQL的数据定义语言（DDL），这是大数据处理领域中一个至关重要的工具。DDL主要用于创建、修改和管理数据库中的结构，包括表、分区、索引等对象。理解并熟练掌握Hive的DDL对于任何在...
学习大数据DAY40 基于 hive 的数据处理
shh2000424的博客
08-20 451
1 导入 user 数据 id name sex age address date lev s_info m_info a_info。3.2 统计各地区的不同手机型号使用人数,并按照老中青(35 以下青年 男 65 岁。3.3 统计不同地区,不同学历,使用的手机品牌(去重)collect_list。地区 安卓使用人数{老 中 青} ios 使用人数{老 中 青}3.4 统计不同等级,各个手机品牌的使用人数(需要行转列)-- 详细显示自带的函数的用法。-- 显示自带的函数的用法。-- 查看系统自带的函数。
学习大数据DAY39 基于 hive 的 SQL语句
shh2000424的博客
08-20 692
TBLPROPERTIES (property_name=property_value, ...)] --内外部表转换。CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name --内部表。[(col_name data_type [COMMENT col_comment], ...)] --数据类型。2.1 统计各班 语文平均分,数学平均分,英语平均分 语文最高分,英语最高分,2.3 统计每人平均分,总分,三科中的最高分,最高分科目名称,在本班的总分排。
Hive 记录
C18298182575的博客
08-20 478
1，不管内部表还是外部表，默认存储路径都是 hive/warehouse/xx.db/表名的目录下。1，元数据：Hive将元数据存储在数据库中（meatestore），目前只支持mysql。1，使用HDFS dfs -put '本地数据' 'hive表对应的HDFS目录下'元数据包含什么：表的名字，表的列和分区及其属性，表的数据所在目录。Hive是SQL解析引擎，将SQL转译成MR，在Hadoop上执行。Hive表就是HDFS的目录，数据存储在Hadoop HDFS。2，真实数据，存在在HDFS。
Ubuntu下部署Hadoop集群+Hive（一）
最新发布
darrenzzz的博客
08-22 279
准备环境：3台Ubuntu服务器（版本20.04），自建的虚拟机也可以；推荐内存：8GB以上；部署也支持Ubuntu20.04以上版本，或是Centos也可以。
Hive数据定义与DDL操作指南
"该资源是关于Hive基础的PPT，主要讲解了数据定义相关的操作，包括数据库定义、创建、查看、描述和删除。同时，提到了Hive的编译过程以及与数据加载、存储格式相关的内容。" 在Hive中，数据定义是构建和管理数据...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值