hive sql归因入口计算

已于 2023-03-13 10:17:51 修改
阅读量231 收藏 2
点赞数
文章标签： sql 数据库 hive
于 2023-03-10 16:16:46 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Loony_zZ/article/details/129436971
版权
本文介绍如何使用Hive SQL对用户浏览数据进行归因分析，将数据匹配到特定入口entrance_A和entrance_B。通过示例数据，展示了具体的计算过程。
摘要由CSDN通过智能技术生成

将同一用户的浏览数据归入已知的入口entrance_A、entrance_B

数据样例

user_id actiontype ts
U_1 entrance_A 1678353307486
U_1 c 1678353307094
U_1 a 1678385031901
U_1 b 1678353307235
U_1 entrance_B 1678353302956
U_1 d 1678353302980
U_1 e 1678385031902
U_1 entrance_B 1678385031398
U_1 c 1678385031398
U_1 b 1678385031234
U_1 entrance_B 1678385031934
U_1 b 1678385031236
U_1 v 1678385031292
U_1 v 1678385031090

结果

u
最低0.47元/天 解锁文章
大数据小菜鸡
关注
数仓归因逻辑实践方案（sql实现）
的专栏
10-09 772
分享一个相对简洁的处理归因的方式： 使用下面逻辑归因的前提是归因事件类型是可枚举的，且是有一定的顺序的（其实归因事件都具备）。 例如直播中的上下麦归因事件中，把同属于一组的上麦下麦的流水日志归到同一条记录中，方便后续对上下麦的各种统计。 从业务上来讲，上麦下麦正常的事件发生顺序只有以下三种： 申请上麦->上麦成功->下麦 上麦成功->下麦 申请上麦->取消申请 然后给不同的事件类型以预期时间序列值，就是下面脚本中的action_seq。 下面的截图展示了如何区分同一个序
数据分析方法论-归因分析
分享数据工作中实际碰到的问题和解决方法
07-06 1655
数据分析方法论-归因分析
归因分析
qq_43577380的博客
07-27 1656
归因模型分析： 营销过程中会把商品最终购买的原因归因于广告的投放，那么归因于哪个广告需要进行用户的消费行为路径进行分析。 具体的分析模型大概有以下几个具体模型： 末次互动模型：将所有的功劳（100%）归因于交易前的最后一次互动。优点：简单，直接，在计算测量过程中不容易产生错误的计算方法，所以也是应用最广泛的一个方法，但是缺点也是不可忽略的，比如用户购买一个商品是从收藏夹进到商品详情页进行购买的，但是可能在收藏夹之前，用户是在首页广告进入到商品详情的，然后进行多次浏览对比然后才加入收藏夹的。那这个归因就是
归因分析(Attribution Analysis)模型解析
qq_41081716的博客
10-20 4623
归因分析(Attribution Analysis)模型解析 - 简书一、什么是归因分析？ 在复杂的数据时代，我们每天都会面临产生产生的大量的数据以及用户复杂的消费行为路径，特别是在互联网广告行业，在广告投放的效果评估上，往往会产生一系列的问题...https://www.jianshu.com/p/a1fa42c5cc42 ...
数仓建模主题--事件归因分析主题
JinVijay的博客
04-06 1068
含义: 在完成了某预定任务目标的人群中,分析他们都是因为什么原因而完成的 归因策略: 首次触点归因:待归因事件中,最早发生的事,被认为是导致业务结果的唯一因素 末次触点归因:待归因事件中,最近发生的事,被任务是导致业务结果的唯一因素 线性归因:待归因事件中,每一个事件都被任务对业务结果产生了影响,影响力平均分摊 时间衰减归因:越近发生的待归因事件,对业务结果的影响力 位置归因:定义一个规则,比如最早,最晚事件占一部分比例,中间事件平摊影响力 中间表设计: 技术手段: 归因权重计算逻辑复杂
基于 Antlr4 的 Hive SQL 解析.zip
04-29
Hive SQL的语法在很大程度上与标准SQL兼容，但为了处理分布式计算和大数据环境，它也引入了一些特有的概念，例如分区、桶、表的外部和内部等。 在这个课程设计中，学生可能需要做以下几件事： 1. **学习Antlr4**：...
SQL、Hive SQL等SQL血缘解析工具
01-14
// 具有子查询的sql String hql = "select id,name from (select id from table_1 where id={p0}) t1 inner join (select name --this is name\n from table_2) t2"; // 获取id字段的血缘 LineageNode idNode = ...
hivesql计算访问者年龄的SQL
03-14
hivesql计算访问者年龄的SQL
Hive SQL 多日留存计算
Heng_bigdate_yan的博客
10-24 1811
一、需求 留存、留存率是用于反映网站、互联网应用或网络游戏等运营情况的统计指标，因此计算留存、留存率是数据分析及数据工程师是常见的需求。对于求单日的1日、2日、3日、7日等留存指标，相对较为简单；对于分析一段时间内的留存情况，求一段时间内的各日的1日、2日、3日等留存，较为复杂。 二、问题分析 1.测试数据情况。 测试数据包括三个字段，用户id，用户注册日期，用户登陆日期（活跃日期）。测试数据在天粒度已去重。 2.求解分析 留存：注册用户在N日后的活跃（登录）用户...
HiveSQL高级进阶技巧，掌握这10个技巧，你的SQL水平将有一个质的提升！
石榴姐yyds
01-30 1240
HiveSQL高级进阶技巧，掌握这10个技巧，你的SQL水平将有一个质的提升！
hive sql 语句正确执行顺序
帅成一匹马
03-14 8252
执行顺序：from ..on .. join .. .. where .. select .. group by .. having .. order by... limit ... map阶段 from 加载，进行表的查找和加载 where过滤 select查询 Reduce阶段 group by :对map端发来的文件进行分组合并 order by : 对结果进行排序 limit 控制结果输出的行数 案例： select dt, user_id, min(age)..
百亿条数据复杂业务场景下通用归因模型设计实现
aijiudu的博客
10-23 2378
1 背景 互联网流量应用的一个重要方面是计算各页面、入口的转化，深度洞察用户行为轨迹，数据驱动精细化运营，对一些大公司来说也是如此。如何建设公司级统一口径转化导流分析数据，满足多个业务对转化数据的需求，为公司各业务部门提供转化分析数据（各入口或者页面带来的商家、活动页、预定、订单），基于此我们设计了转化归因来满足业务需求。 归因又叫挂单：用户打开某一APP，在浏览N个页面之后，遇到有下单意向的...
计算广告笔记-归因分析（Attribution Analysis）
小龙的博客
04-07 5276
归因是计算广告中最复杂的一个问题。难建模，难验证，难应用。但是它可以帮助回答计算广告中的一个最核心的问题：我的广告费用都浪费在哪里了？归因分析需要解决的问题就是如果用户先后访问了几个渠道的广告，最终转化成功。那么广告转化收益的功劳最终要归功于哪个渠道？以下是几种模型（图片来自网络）：...
多渠道归因模型
zouyfpe的专栏
10-05 1679
本文转自：深圳网站分析 原文地址：http://www.szwebanalytics.com/multi-channel-attribution.html 最近在思考软件程序跟踪多个设备访问的问题，众所周知，在Google Analytics中跟踪一个设备是没有问题，而且很完善，但是在多个设备间切换就不行了，因为设备中都有浏览器，网站分析工具会将cookie放到不同设备的浏览器中，所以
拼多多2020届数据分析面试题合集
热门推荐
简说Python的博客
09-17 1万+
来源整理自公众号：胖里的日常第一家公司的2020届数据分析面试题整理就从拼多多开始吧~招聘总共分为学霸批、寻梦批、正式批三批，面试题合集并没有按照批次进行整理，毕竟也没啥规律可循。本人...
Brison归因与代码
lyx的专栏
03-05 6004
不管是做FOF也好，仅仅想单纯归因也好，Brison是一种比较常见，也算是通用的归因方法，其一般用于权益类或者大类资产配置类基金。 其实Brison归因的逻辑很简单，假设有一个基准，基准在各类资产的配置上的权重分别是wbi（weight of benchmark of asset i），这些资产的收益率分别是rbi（return of benchmark of asset...
【数据分析】- 归因分析
liangsena的博客
01-19 1900
归因分析一、定义二、模型2.1 首次互动模型2.2 末次互动模型2.3 线性归因模型2.4 位置归因模型三、适用场景 一、定义 指在日常的社会交往中，人们为了有效地控制和适应环境，往往对发生于周围环境中的各种社会行为有意识或无意识地做出一定的解释，即认知整体在认知过程中，根据他人某种特定的人格特征或某种行为特点推论出其他未知的特点，以寻求各种特点之间的因果关系。简单来说，就是论功行赏。 二、模型 举个简单的例子：当然你点了哪个广告，然后进去商品详情页产生了购买以后，这个功劳就全部归功于这个广告呀！
数据分析（6）归因查找法
u010199413的专栏
02-19 1527
归因查找的作用是帮我们找出一件事件发生的主要原因是什么。 往往我们的业务流程是有很多步的，比如从打开-浏览-下单-付款-付款成功，在这样的情况下，我们往往需要知道用户在完成整个事件前的步骤，对于他最后完成这个事件的影响因素是什么样的。 思考一下：我们的业务中有一些非常明确的业务目标，像购买、留下资料、充值等行为。当我们知道这些行为事件前面的步骤它的贡献价值有多少之后，我们能够做什么呢？ 一、...
hivesql标准差计算方法
最新发布
08-15
在Hive SQL中，标准差（Standard Deviation）是衡量数据集中数值分布离散程度的一种统计量。要计算一组数的标准差，你可以使用内置的数学函数`STDDEV()`或`STDEV_SAMP()`，它们分别返回样本标准差和总体标准差。 如果你有一个名为`data_column`的列，并且想要计算它的样本标准差，语法会是这样的： ```sql SELECT STDDEV(data_column) FROM your_table; ``` 如果想得到总体标准差（所有数据参与计算），并且`data_column`包含所有数据，可以使用`STDEV_SAMP()`替换`STDDEV()`，但注意这通常假设表中的每一行都是独立的抽样，而实际上可能不是这样。 如果`data_column`是个窗口函数的上下文（例如在窗口函数中），你需要使用`STDDEV_SAMP() OVER (PARTITION BY ...)`来指定分组计算。 需要注意的是，Hive不直接支持`VAR_POP()`或`VAR_SAMP()`这些计算方差的方法，但你可以先算出方差再开平方根来得到标准差。例如： ```sql SELECT SQRT(SUM((data_column - AVG(data_column)) * (data_column - AVG(data_column))) / COUNT(*) FROM your_table; ``` 这里假设`AVG(data_column)`是平均值。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值