tensorflow实现P@1和MRR

最新推荐文章于 2024-07-08 21:21:26 发布
最新推荐文章于 2024-07-08 21:21:26 发布
阅读量3.6k 收藏 3
点赞数 4
分类专栏： python 学习笔记 文章标签： tensorflow 函数 P-1 MRR
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hejunqing14/article/details/71497747
版权

最近复现别人的论文，才发现tf竟然就只有常用的一些loss, 并没有其他指标，例如P@1和MRR。在手工计算这些指标的过程中，发现了几个神奇的函数。

任务介绍

输入是各个候选的分值tensor_score，假设有每个样本对应5个候选，那么输入大小就是[batch_size, 5]。target指定了候选中实际匹配一个为1，其余为0，大小为[batch_size,1]
现在我们的目标是：得到5个候选从高到低的排序，并且把最高的取出来与target对比，若其target为1则正确，否则错误，计算P@1。然后取targer中值为1的候选，得到它的排名，计算MRR。

具体的计算公式如下：

P@1=1N
最低0.47元/天 解锁文章
Nicoder
关注
  • 4
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Rm@i,P@i,MAP,MRR
chuan的专栏
07-10 1004
Rm@i Let { Precision@K Set a rank threshold K Compute % relevant in top K Ignores documents ranked lower than K Ex: Prec@3 of 2/3 Prec@4 of 2/4 Prec@5 of 3/5 Mean Average Precision ...
信息检索中 (IR) 的评价指标: P@n, MAP, MRR, DCG, NDCG
月夜长影
03-27 1万+
P@n 前 n 个结果的准确度, P指的是Precision. 如果用yi=0,1y_i=0,1yi​=0,1分别表示第 i 个结果相关、不相关, 则 P@n=1n∑i=1nyi P@n = \frac{1}{n} \sum_{i=1}^ny_i P@n=n1​i=1∑n​yi​ 在评测系统的 P@n 时, 对每个查询的结果计算P@n, 取这些值的平均值作为系统的P@n. 参考: https:/...
信息检索P@10、MAP、NDCG，及同一指标计算的差别
more_ugly_less_bug的博客
01-16 4万+
问题源于我在重现一篇信息检索方面顶会论文实验的时候，始终计算不出与论文中相同的实验结果。论文的实验用到了P@10，MAP,NDCG@10三种指标。我先是用了Galago提供的计算工具，发现除P@10一项指标结果一致外，MAP,NDCG@10两项都有很大的不同。经过观察发现虽然实验结果的数据不同，但是实验结果的趋势是相同的（实验是对几种排名算法进行评比，尽管得到了不同的数据，但是用这些数...
详解python中@的用法
qq_37249443的博客
06-25 425
https://www.cnblogs.com/daniumiqi/p/12162192.html python中@的用法 @是一个装饰器，针对函数，起调用传参的作用。 有修饰和被修饰的区别，‘@function'作为一个装饰器，用来修饰紧跟着的函数（可以是另一个装饰器，也可以是函数定义）。 代码1 1 2 3 4 5 6 7 8 9 deffunA(desA): print("It's fu...
怎样量化评价搜索引擎的结果质量
weixin_30527323的博客
10-10 838
搜索质量评估是搜索技术研究的基础性工作，也是核心工作之一。评价（Metrics）在搜索技术研发中扮演着重要角色，以至于任何一种新方法与他们的评价方式是融为一体的。 搜索引擎结果的好坏与否，体现在业界所称的在相关性（Relevance）上。相关性的定义包括狭义和广义两方面，狭义的解释是：检索结果和用户查询的相关程度。而从广义的层面，相关性可以理解为为用户查询的综合满意度。直观的来看，从用户进...
Prompt工程师必备：复旦重磅 | 最佳RAG实践长什么样的？
最新发布
m0_59163425的博客
07-08 814
总结模块就像是RAG系统的"信息压缩器"。研究比较了Recomp和LongLLMLingua两种总结方法。结果表明，Recomp方法在性能上略胜一筹。然而，研究者也发现，在某些情况下，完全移除总结模块反而能获得更好的性能和更低的延迟。这一发现为Prompt工程师提供了一个重要的设计思路：总结模块并非必不可少，其使用与否应该根据具体应用场景和系统要求来决定。在一些对实时性要求极高的应用中，可以考虑省略总结步骤以提高响应速度。在实际应用中，工程师可以考虑实现自适应总结策略。
Python-TensorFlow实现的多种排序学习算法
08-11
1. 实现的排序学习算法：可能包括PointWise、PairWise和ListWise等不同类型的排序方法。PointWise方法如线性回归，处理每个样本独立；PairWise方法如RankSVM、LambdaMART，比较每对样本的排名；ListWise方法如...
MRR_eccv12.zip_MRR
07-14
总结来说，"MRR_eccv12.zip_MRR"是一个与2012年ECCV会议上发布的非对准人脸识别技术相关的资源包，包含MRR算法的实现代码和相关说明。MRR算法通过重排序技术增强了人脸识别的准确性，对于理解和研究人脸识别，特别是...
MySQL InnoDB MRR优化指南
09-09
MRR的实现过程如下： 1. 当查询执行时，首先在二级索引中查找匹配的键值。 2. 找到的键值会被放入一个缓冲区中。 3. 缓冲区中的键值依据主键进行排序。 4. 接着，系统按照排序后的主键顺序在聚簇索引中顺序读取数据...
matlab仿真图_MRR_微环_
09-30
标题“matlab仿真图_MRR_微环_”和描述中的关键词主要涉及到“微环”（Microring Resonator，MRR）和“matlab仿真”。微环是一种基于光子集成技术的重要组件，广泛应用于光学通信、光信号处理和传感器等领域。MATLAB...
mrr2c：将Metek MRR-2微型雨雷达数据文件转换为HDF
02-14
如果需要这种类型的输出以实现兼容性，请使用mrr2c版本1.0.3。用法mrr2c [--debug] < input > < output> 参数： input ：输入MRR-2 .raw ， .pro或.ave文件。 output ：输出NetCDF（ .nc ）文件。 选项： --...
**（p+1)和*（*p+1）的区别
陈云佳的专栏
03-17 2万+
内容会持续更新，有错误的地方欢迎指正，谢谢! 例1：下面程序的输出结果是： #include&lt;iosteam.h&gt; void main() { int n[][3] = {10,20,30,40,50,60}; int (*p)[3]; p=n; cout&lt;&lt;p[0][0]&lt;&lt;","&lt;&lt;*(p[0]+1)&lt...
准确率，召回率，F1 值、ROC，AUC、mse,mape评价指标
雪伦的专栏
06-17 6万+
在机器学习、数据挖掘领域，工业界往往会根据实际的业务场景拟定相应的业务指标。本文旨在一起学习比较经典的三大类评价指标，其中第一、二类主要用于分类场景、第三类主要用于回归预测场景，基本思路是从概念公式，到优缺点，再到具体应用（分类问题，本文以二分类为例）。 1.准确率P、召回率R、F1 值 定义 准确率（Precision）：P=TP/(TP+FP)。通俗地讲，就是预测正确的正例数据占预测为正例数
信息检索IR评价中常见的评价指标-MAP\NDCG\ERR\P@10等
古月哲亭
04-16 7036
信息检索评价是对信息检索系统性能（主要满足用户信息需求的能力）进行评估的活动。通过评估可以评价不同技术的优劣，不同因素对系统的影响，从而促进本领域研究水平的不断提高。信息检索系统的目标是较少消耗情况下尽快、全面返回准确的结果。 IR的评价指标，通常分为三个方面： （1）效率(Efficiency)—可以采用通常的评价方法：时间开销、空间开销、响应速度。 （2）效果(Effectiveness)：返...
性能评价指标（P AP mAP）
shine的博客
11-29 4200
性能评价指标： 评价模型的好坏的各种不同的指标。常用的性能评价指标有：错误率&amp;精度、准确率&amp;召回率、AP&amp;mAP等。 错误率&amp;精度 针对数据集D和学习器f而言： 1、错误率：分类错误的样本数占总样本的比例 2、精度：分类正确的样本数占总样本的比例 准确率&amp;召回率 信息检索中，我们经常会关心“检索出的信息有多少比例是用户感兴趣的”以及“用户感...
【YOLO学习】召回率（Recall），精确率（Precision），平均正确率（Average_precision(AP) ），交除并（Intersection-over-Union（IoU））
热门推荐
Joe_quan的博客
01-05 10万+
在训练YOLO v2的过程中，系统会显示出一些评价训练效果的指标，包括Recall，IoU等等。为了怕以后忘了，现在把自己的理解记录一下。这一文章首先假设一个测试集，然后围绕这一测试集来介绍这几种指标的计算方式。
图像评价指标
purgle
06-25 2万+
1.图像评价指标　　图像评价指标用来客观评价图像处理中算法的优劣性，一般在对比实验中突出自己提出的算法的亮点。一般来说，每个细分的领域都有相应的指标，如边缘检测，有PFOM（Pratt’s Figure Of Merit）[1][2]（第一个引用是它的来源，第二个引用是使用它的例子）；图像增强，有EEME（Evaluating image Enhancement Measure by Entropy
p *p **p
weixin_41620013的博客
12-12 9万+
#include&lt;iostream&gt; using namespace std; void test01(){ int a=10; int *b=&amp;a; int **c; c=&amp;b; cout&lt;&lt;"b="&lt;&lt;b&lt;&lt;endl; cout&lt;&lt;"*b="&lt;&lt;*b&lt;
pr小技巧、快捷键
qq_40205337的博客
11-14 291
1.视频加了转场卡 渲染：快捷键 i（in） o（out） 最后加上回车
TransC算法中MRR、Hits@N什么意思
06-01
MRR的取值范围是[0,1]，值越接近1表示算法的效果越好。 另外，TransC算法中的Hits@N指的是Top-N准确率，是用来评估实体对齐任务效果的另一种指标。对于每个待匹配的实体对，如果它们正确匹配的概率排名在前N名内，...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值