大数据--hive11--留存指标的计算

最新推荐文章于 2024-07-28 06:12:33 发布
最新推荐文章于 2024-07-28 06:12:33 发布
阅读量522 收藏
点赞数
分类专栏： 大数据 # Hadoop生态
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yezonghui/article/details/116426441
版权
本文详细介绍了如何使用Hive SQL计算14日留存率，包括留存定义、具体需求分析、源数据说明、计算思路、SQL代码实现及关键想法。通过对用户访问数据的处理和表连接，结合时间约束，得出留存用户数量。
摘要由CSDN通过智能技术生成

目录

一：留存定义

二：真实需求，求14日的留存

2.1 源数据

2.2 思路分析

2.3 代码

2.4 结果

三：求留存的关键想法

一：留存定义

    以天为单位，跨天后再来访问即为留存，例如给定我们的需求：

知道指定日期后隔1-14天的留存，如2020-08-01天来的访客，之后1天，2天，3天，....再来人数。

注意：我们要清楚留存是针对谁（那个日期）来说的例如用户a25日有记录，26日没有记录，27日有记录。

那么我们是针对25日来说的，也就是说25日的用户a,1日留存没有, 有2日留存。

    留存率：具体问题具体分析，一般分母都是2020-08-01的人数。

二：真实需求，求14日的留存

2.1 源数据

我们以访问留存为例，数据表位于 dwd.pv_log，以下为其中涉及的部分：

uuid ctime p_day
562234 2020-05-08 11:09:19.0 20200508
783425 2020-05-08 12:09:19.0 20200508
342643 202
最低0.47元/天 解锁文章
斑马！
关注
专栏目录
hive 留存率 计算
码基的博客
07-30 2466
定义 留存率：某天活跃用户，在之后几天是否活跃，一日留存率就是用户注册后第二天仍然活跃，以此类推，三日留存率，七日留存率。 任务： 计算某段时间内注册的用户的一日留存率，三日留存率和七日留存率。 建表 use default; show tables; create table register_tbl( user_id string, register_date string) row for...
hive 关于用户留存率的计算
chenpe32cp的博客
12-18 9166
        最近接到一个需求，需要统计用户留存率，而且要一次统计多个模块，多个日期的留存率，那如何通过一段hive(SQL)来实现该需求呢，在网上看到一篇很精妙的文章，参考这篇文章实现了需求，可以说是目前见过的一次性统计多个时间区间留存率的最佳实践了，感谢楼主的经验分享，好东西，多记录，多分享！        查看原文，请点击这里 首先用户留存率一般是面向新增用户的概念,是指某一天注册后的...
HiveSQL题——用户留存数
最新发布
爱吃辣条的博客
07-28 641
HiveSQL题——用户留存数
几种留存计算
sxjadmin的博客
03-14 937
# 留存计算 项目中遇到留存计算,主要为n日留存和n日内留存。计算该指标需要用到未来n天(内)的数据。不同的计算方案,计算复杂度不同。 ### n日留存 **指标定义**:当日用户在未来第n日的留存。 **指标计算**:(当日活跃的用户且在第n日还活跃的用户数)/当日的活跃用户数 **计算思路**:如果采用大宽表计算,则需要重刷n天内的数据。如果采用竖表方式,就避免重刷n日的数据。 #### demo表: ``` result_table( `dt` varchar(8) COMM...
hive的一些指标计算
time_boy666的博客
03-15 1150
已知一个点击行为，求在这之前该用户的点击路径 已知点（DDD） --collect_list()//不去重 create table ev_1 as select tb.user_id,collect_set(tb.event_id) as ev_list from( select user_id,event_id,time from user_event, where from_unixt...
Hive 计算用户留存率（次日，3日，N日）
JIE的博客 --- moon_coder
12-12 1727
用户留存率是指在特定时间段内，用户在使用某个产品或应用程序后，再次使用该产品或应用程序的比例。它可以帮助公司了解用户是否喜欢他们的产品，并提供有价值的信息，用于改进产品和增加用户满意度。例如，如果有 100 名用户在第一次使用某个应用程序后，有 80 名用户再次使用该应用程序，那么这个应用程序的用户留存率就是 80%。
大数据--数据仓库1--电商数据仓库项目最全总结1
数据挖掘+大数据研发+算法学习
04-15 5806
目录 一：项目来源： 二：数据仓库概念 2.1 业务数据 2.2用户行为数据 2.3数据仓库结构图 三：项目需求及架构设计 3.1项目需求分析 3.2.1 技术选型 3.2.2 系统数据流程设计 3.2.3 框架版本选型 3.2.4测试集群服务器规划 四：数据生成模块 4.1目标数据 五：数据采集模块 六：电商业务简介 6.1电商业务流程 6.2电商业务表结构 七 业务数据采集模块 7.1 Mysql安装，配置 7.2 业务数据生成:sql脚本 7.3 Sqoop.
真实大数据简历模版（四）【大数据-2年经验】电影网数据分析
2401_84181340的博客
04-29 762
该客流量分析系统是为周边游网站进行景区的客流量、热门景点进行环境分析、客源市场洞察、营销主题分析，经过分析得到的数据给前端进行显示，从而可以为网站提供日常决策支撑，比如某些旅游景点的人气很高的话，就可以为该景点做更多的推荐介绍。4、统计玩家流失（7、14、30持续不在线），当日回流玩家、流失玩家流失前等级、游戏次数、是否付费等情况。1、统计活跃玩家：DAU、WAU、MAU、DAU/MAU，玩家等级、地区、年龄、性别维度分布；3、统计玩家留存：次日、周及月留存玩家，玩家留存条件下等级，游戏次数、是否付费等。
hive 创建访问用户_HIVE大数据实战项目---用户行为分析
weixin_39842955的博客
12-19 340
一、项目需求本案例的数据为小程序运营数据，以行业常见指标对用户行为进行分析，包括UV、PV、新增用户分析、留存分析、复购分析等内容。项目需求如下：1.日访问量分析，并观察其走势2.不同行为类型的访问量分析3.一天中不同时间段的访问量分析(时间段按小时划分)4.每日新增用户情况分析5.用户留存分析6.复购分析7.商品排行榜分析8.利用sqoop将数据分析结果导入mysql存储二、数据介绍1.用户行为...
hive经典面试题2--次日留存、3日、7日留存怎么计算
热门推荐
程老师的博客
11-25 1万+
背景：互联网公司，分析app上线后的效果，通常会通过很多指标来分析，其中一个指标就是留存率，留存率中最重要的就是次日留存，如果次日留存很高，说明这个app很成功，用户粘性高。 留存是怎么定义的呢？ 一个用户第一天来了，第二天又来了，说明这个用户留存了。次日留存率就是100% 第一天来了100个用户，第二天这100用户中只有50个用户过来了，第三天这100个用户中只有30个用户过来了；那么次日留存率就是50/100100=50%，3日留存率就是30/100100=30% 我们来看看通过代码怎么计算留存率：
Clickhouse 在大数据分析平台 - 留存分析
魂影魔宅
06-16 677
背景 你可能听说过Growingio、神策等数据分析平台，本文主要介绍实现留存分析工具相关的内容。留存分析是一种用来分析用户参与情况/活跃程度的分析模型，可考查进行初始行为后的用户中，有多少人会进行后续行为，这是衡量产品对用户价值高低的重要指标。如，为评估产品更新效果或渠道推广效果，我们常常需要对同期进入产品或同期使用了产品某个功能的用户的后续行为表现进行评估 [1]。大部分数据分析平台主要包括如图的几个功能(以神策为例) 本文主要介绍留存分析工具的优化方案（只涉及数据存储和查询的方案设计，不涉及平台）。
Hive留存率统计
一个菜鸟的Java学习历程博客
08-30 3262
新增加的用户表insert into ta_index_new_user select channel,toal.client_id,access_time,from_unixtime(unix_timestamp(),’yyyy-MM-dd’) from tm_original_access_log toal where toal.client_id not in (select tinu.c
Hive SQL 多日留存计算
Heng_bigdate_yan的博客
10-24 1810
一、需求 留存、留存率是用于反映网站、互联网应用或网络游戏等运营情况的统计指标，因此计算留存、留存率是数据分析及数据工程师是常见的需求。对于求单日的1日、2日、3日、7日等留存指标，相对较为简单；对于分析一段时间内的留存情况，求一段时间内的各日的1日、2日、3日等留存，较为复杂。 二、问题分析 1.测试数据情况。 测试数据包括三个字段，用户id，用户注册日期，用户登陆日期（活跃日期）。测试数据在天粒度已去重。 2.求解分析 留存：注册用户在N日后的活跃（登录）用户...
hive计算TCP_UDP的各项指标的KPI的脚本
阿啄debugIT
02-06 540
引言 在说hive计算TCP_UDP的各项指标的KPI的脚本之前，引入Shell case in语句。 和其它编程语言类似，Shell 也支持两种分支结构（选择结构），分别是 if else 语句和 case in 语句。 当分支较多，并且判断条件比较简单时，使用 case in 语句就比较方便了。https://www.cnblogs.com/qiangyuzhou/p/10806768.h...
【Hive SQL 每日一题】统计用户留存率
JIE的博客 --- moon_coder
05-19 931
实现用户留存率的需求其实很简单，这里要求在系统上线后，统计每天的用户留存率，我们每次只需要算出“今天”的用户数量与“昨天”的用户数量比例即可。它反映了用户对产品的持续兴趣和满意度，是评估产品成功与否的重要指标之一。用户留存率（User Retention Rate）是一个衡量用户在特定时间段内继续使用某个产品或服务的比例的指标。最终得到的结果是每天的次日留存率趋势，因为我们每次取的数据都是当日与次日的比例。窗口函数来获取上一天的用户登录人数，如果是系统上线第一天，则没有上一天，用。名玩家下载并开始玩游戏。
Hive留存计算
colby_chenlun的博客
09-06 1035
准备表 CREATE EXTERNAL TABLE ods_app_log ( sdk_ver string ,time_zone string ,commit_id string ,commit_time string ,pid string ,app_token string ,app_id string ,device_id...
从用户获取到用户留存，运营必备的数据指标有哪些？
weixin_49403297的博客
05-17 675
提起数据，运营人员往往会面临：我需要了解的数据指标有哪些？哪些是核心指标？该如何进行数据分析？等问题。其实，从用户获取到用户留存的过程中，分阶段地进行数据指标的汇总，系统地建立起对数据的清晰认知对于运营很关键。那么，从用户获取到用户留存，运营必备的数据指标都有哪些呢？
大数据集群实战：Hadoop-HBase-Spark-Hive搭建步骤
7. **Hive安装与配置**: Hive提供了一个SQL-like接口来查询和管理大数据，它建立在Hadoop之上。你将学习如何安装Hive，连接到MySQL作为元数据存储，以及配置Hive服务器。 8. **集群测试与优化**: 最后，你会进行...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值