hive：电影数据实战

最新推荐文章于 2024-01-14 10:40:58 发布

缦旋律

最新推荐文章于 2024-01-14 10:40:58 发布

阅读量1.9k

点赞数 2

分类专栏： hive

小陈一行一行地敲出来的啦~

本文链接：https://blog.csdn.net/weixin_41391619/article/details/110826269

版权

该博客详细介绍了使用Hive对电影数据进行实战分析的过程，包括视频观看数的排名、视频种类统计、观看数Top20视频的类别分布、视频观看数Top50的类别排序、每类视频的观看数Top10、上传视频最多的Top10用户及其观看数Top20的视频等。通过各种Hive查询操作，揭示了数据背后的深层信息。

摘要由CSDN通过智能技术生成

文章目录

原始数据：

（1）视频观看数top10

select videoid,views from video_orc 
order by views desc
limit 10;

在这里插入图片描述

（2）视频数top10的种类

炸开每个视频的category，并与原始videoid连接

--t1
select v.videoid,cate_view.cate
from video_orc v
lateral view
explode(category) cate_view as cate;

（下图只显示了部分结果）
在这里插入图片描述

统计每种类别下的视频个数

select cate,count(videoid) as n
from t1 
group by cate
order by n
limit 10;

完整版：

select cate,count(*) total
from (
select v.videoid,cate_view.cate
from video_orc v
lateral view
explode(category) cate_view as cate
) tbl
group by tbl.cate
order by total desc
limit 10;

在这里插入图片描述

（3）观看数top20视频所属类别，以及这些类别中每个类别包含Top20视频的个数

观看数前20的视频

--t1
select videoid,views,category
from video_orc
order by views desc
limit 20;

炸开category

--t2
select videoid,views,cate
from t1
lateral view explode(t1.category) cate_view as cate;

完整版：

select videoid,cate
from (
select videoid,views,category
from video_orc
order by views desc
limit 20
) t1
lateral view explode(t1.category) cate_view as cate;

（下图只显示了部分结果）
在这里插入图片描述

按类别分类，并统计每类中有多少个视频

select cate,count(videoid) n
from t2
group by cate
order by n desc;

完整版：

select cate,count(*) as n
from( 
	select videoid,views,cate
	from (
		select videoid,views,category
		from video_orc
		order by views desc
		)t1
	lateral view explode(t1.category) t2 as cate
	) t3
group by cate