HIVE
文章平均质量分 92
爱家人爱生活的独行者
独自开拓属于自己的世界,理想和家人是此生奋斗的意义2018.11.11
展开
-
Hive的安装过程
文章目录1.hadoop:1. hdfs:2.mapreduce:yarn:产生背景:hadoop1.0的模块:hadoop2.0YARN的架构:1. 主节点:resourcemanager1.1 ASM:1.2 Scheduler:FIFO:FIRST IN FIRST OUT 先进先出Fair:公平调度器Capacity:计算能力调度器 容量调度器从节点:nodemanager概念:...原创 2018-11-29 20:59:12 · 201 阅读 · 0 评论 -
Hive的学习总结
一、Hive的基本概念 1.1 hive是什么? (1)Hive是建立在hadoop数据仓库基础之上的一个基础架构; (2)相当于hadoop之上的一个客户端,可以用来存储、查询和分析存储在hadoop中的数据; (3)是一种SQL解析引擎,能够将SQL转换成Map/Reduce中的Job在hadoop上执行。 1.2...转载 2019-01-13 23:14:30 · 179 阅读 · 0 评论 -
Hive的学习总结
一、Hive的基本概念 1.1 hive是什么? (1)Hive是建立在hadoop数据仓库基础之上的一个基础架构; (2)相当于hadoop之上的一个客户端,可以用来存储、查询和分析存储在hadoop中的数据; (3)是一种SQL解析引擎,能够将SQL转换成Map/Reduce中的Job在hadoop上执行。 1.2...转载 2019-01-13 23:34:34 · 374 阅读 · 0 评论 -
大数据技术之Hive实战——Youtube项目(一)
一、需求描述 统计 Youtube 视频网站的常规指标,各种 TopN 指标: –统计视频观看数 Top10 –统计视频类别热度 Top10 –统计视频观看数 Top20 所属类别包含这 Top20 视频的个数 –统计视频观看数 Top50 所关联视频的所属类别 Rank –统计每个类别中的视频热度 Top10 –统计每个类别中视频流量 Top10 ...转载 2019-05-07 09:31:38 · 588 阅读 · 0 评论 -
大数据技术之Hive实战——Youtube项目(二)
三、项目 原始数据youtube在此下载:https://pan.baidu.com/s/1we1KPA2IIEAGIJczyr2dMQ 3.1、数据结构 3.1.1、视频表 3.1.2、用户表 3.2 原始数据存放地 HDFS 目录: 视频数据集:/youtube/video/2008 用户数据集:/youtube/u...转载 2019-05-07 10:09:22 · 677 阅读 · 0 评论