视频中的自监督学习：Space-Time Cubic Puzzles

最新推荐文章于 2023-06-20 21:58:56 发布
VIP文章 最新推荐文章于 2023-06-20 21:58:56 发布
阅读量526 收藏 1
点赞数 1
分类专栏： 视频分类/动作识别
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42443072/article/details/115464409
版权

AAAI-2019：Space-Time Cubic Puzzles

论文：【Self-Supervised Video Representation Learning with Space-Time Cubic Puzzles】

论文的思路蛮出彩的，作者提出的自监督pretext任务是把视频在时间、空间上做裁剪，把裁剪得到的块进行排列，训练网络来识别排列的类型。

一、Pretext task

1）pretext本来的意思是借口、托辞，我个人理解pretext task有点像多任务学习、迁移学习，通过这个任务来让网络学习到有具体含义的特征，进而解决下游任务的难题。

2）对于视频，文章直观地想提取时空特征，就联想到了排列，让网络去猜裁剪下来的视频是怎么排列的，以此来学习时空特征。

在这里插入图片描述
3）那怎么去裁剪视频？
作者提到了如果视频裁剪成了太多的块，不同排列之间的差异可能太小了ÿ

最低0.47元/天 解锁文章
Republix
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
scaler:使用 BI-CUBIC 卷积插值的缩放器-matlab开发
05-30
缩放器使用 BI-CUBIC 卷积插值，效果完美
论文阅读：Self-supervised video representation learning with space-time cubic puzzles
qq_36627158的博客
05-27 315
论文名称：Self-supervised video representation learning with space-time cubic puzzles（2019 AAAI） 论文作者：Dahun Kim, Donghyeon Cho, In So Kweon 下载地址：https://ojs.aaai.org/index.php/AAAI/article/view/4873 Contributions In this paper, we introduce a new self..
【论文笔记】Spatio-Temporal AutoEncoder for Video Anomaly Detection
weixin_44174163的博客
10-28 1740
Spatio-Temporal AutoEncoder for Video Anomaly Detection摘要1 引言2 我们的方法2.1 3D 卷积2.2 3D 卷积自编码器2.3 权重递减型预测损失2.4 规律性分数3 实验3.1 数据集3.2 异常的可视化3.3 异常事件检测3.4 预测未来帧4 结论 本篇论文收录于ACM MM 2017，论文中我们为城市大脑提供监控交通异常的方法。受动作识别等领域的最新研究成果启发，设计了一种时空自编码进行视频异常检测，同时提出一种权重递减的预测误差计算方法
论文笔记：Residual spatiotemporal autoencoder for unsupervised video anomaly detection
wangpan007的博客
04-21 965
文章目录摘要一、 介绍二、剩余时空自动编码器三、基于剩余时空自编码器(r - state)的正态性建模四、结果和数据（一）、数据集（二）、预处理和训练（三）、结果（四）、参数对结果的影响五、结论 摘要 使用一种正态建模方法来解决数据集中异常行为比较少的问题，其中异常被检测为偏离正常模式，基于这个问题提出了一种残差时空自编码器，用来检测视频中的异常检测，利用重建损失检测不规则帧，其中正常帧以较低的重建成本被很好地重建，反之则被识别为异常帧，通过与现有方法的比较，证明了剩余块（residual blocks）的
#今日论文推荐# ICDE 2022 | 港大等提出：基于时空自监督学习的犯罪预测
w1hsxn的博客
08-25 285
在这项工作中，我们通过提出一种新的时空自监督学习框架 ST-HSL，将超图对比学习引入到犯罪预测中。
论文阅读：CVPR2016 Paper list
热门推荐
一亩半分地
05-12 8万+
CVPR2016 accepted paper list
cubic-bezier:三次贝塞尔曲线编辑器
05-04
三次贝塞尔曲线修改了基于三次曲线编辑器，使其易于定制以嵌入到其他Web应用程序中。示例实现。快速开始HTML < head > < meta charset =" utf-8 " /> < title > cubic-bezier </ title > &...
matlab代码中cubic是什么意思-pisguru:OpenCV+机器学习
05-20
matlab代码中cubic是的英文皮斯古鲁 OpenCV +机器学习 官方openCV + python教程pdf 其他注意事项： 确保级联检测器具有正确的xml文件内容和路径。 openCV中的点以（X，Y）的顺序定义，但矩阵以（nRow，nCO1）的顺序...
matlab机器人代码生成-Constrained-Minimum-Time-Cubic-Splines-for-Trajectory-Pla
06-04
matlab机器人代码 生成概要 一个简单且易于遵循的 matlab 代码，演示了如何生成具有一般边界速度和最大速度约束的优化最小时间三次样条。...虽然在这个项目中没有添加扭矩约束，因为它需要特定使用机器人动力学。
android-cubic-bezier-interpolator:已弃用，支持 https
06-01
android-cubic-bezier-interpolator 一个 Android 库，可帮助您在应用程序中实现贝塞尔动画如何使用 Animation animation = new Animation () { @Override protected void applyTransformation ( float ...
Self-supervised and unsupervised learning for video
Always_ease的博客
08-10 585
ActBERT: Learning Global-Local Video-Text Representations（cvpr2020） 背景： 在教做菜的视频中，视频创作者会描述，“开始切胡萝卜”，往往人物也是在正进行“切胡萝卜”的动作。这种天然的视觉对应关系，是进行视频文字自监督学习的重要要素。其中文字描述可以通过自动语音识别技术（ASR）从视频中或从创作者上传的字幕中提取文字。这样成对的视频文字数据就产生了。 为了解决视觉特征无法做分类预测的问题，VideoBERT 使用了 hierachica.
AAAI-19录用论文清单
TomRen
01-28 1万+
AAAI-19于1月27日在夏威夷召开，今年是33届会议。 会议录用论文清单, workshop16个，tutorials24个。 标题的词云分析： 作者单位词云(按作者人数计算/一篇文章可能有多个作者)： picture from lonelyplanet.com 下面给出接收论文的列表： 第一个数字表示投稿的序号&amp;amp;内容可能有缺失 9: CircConv: A S...
AAAI-19录用论文
VIEO
09-04 1万+
元学习论文总结||小样本学习论文总结 2017-2019年计算机视觉顶会文章收录 AAAI2017-2019 CVPR2017-2019 ECCV2018 ICCV2017-2019 ICLR2017-2019 NIPS2017-2019 https://blog.csdn.net/u014636245/article/details/86661830 9: CircConv: A ...
【AAAI-2019】论文整理（清单）
TiffanyRabbit的博客
03-12 3万+
AAAI-19 Accepted Papers – Main Technical Track 整理自：AAAI官网，分类整理持续更新… 详细文章可从arXiz.org下载 – CircConv: A Structured Convolution with Low Complexity Siyu Liao ()*; Bo Yuan (Rutgers University) – Deep Sing...
【今日CV 视觉论文速览】27 Nov 2018
TomRen
11-27 1545
今日CS.CV计算机视觉论文速览 Tue, 27 Nov 2018 Totally 107 papers Daily Computer Vision Papers [1] Title: GAN Dissection: Visualizing and Understanding Generative Adversarial Networks Authors:David Bau, Jun-Y...
深度学习中有监督，无监督， 自监督学习
最新发布
chumingqian的博客
06-20 1万+
半监督或弱监督混淆：（半监督和弱监督）指的是在数据集中部分一些例子X没有标签，但是数据的人工标签是存在的。
【牛津大学博士论文】自监督学习视频理解
数据派THU
10-12 141
来源：专知 本文为论文介绍，建议阅读5分钟机器只知道某些物体的名称和位置是不够的，许多任务需要对复杂的物理世界有更深入的了解。深度学习的出现为许多基本的计算机视觉任务带来了巨大的进展，如分类、检测和分割，这些任务描述了图像和视频中物体的类别和位置。在监督学习方面也做了很多工作--教机器使用人类注释的标签来解决这些任务。然而，机器只知道某些物体的名称和位置是不够的；许多任务需要对复杂的物理世界有更深...
深度学习中的自监督对比学习+MoCo三部曲+自监督模型评测方法
David's Tweet
01-19 4508
摘要 在过去的很长时间里，计算机视觉领域依靠大规模的有标注数据集取得了很大的成功，特别是卷积神经网络的应用，使得视觉各子领域实现了跨越式发展，学术界和工业界开始投入大量的研究和应用，一度使大家相信，人工智能的大厦即将建成。然而，最近关于自监督学习（Self-supervised Learning，SSL）、Transformer、MLP等在学术界的研究成为热点，特别是Transformer和MLP的进击，大有要将监督学习和卷积结构拍死在沙滩上的节奏，作者相信，计算机视觉（CV）领域正在进入新的变革时代。
视频自监督二. VTDL: Video-based Temporal Discriminative Learning
未到初级图像处理工程师
08-09 1011
视频自监督二. VTDL: 时序Discriminative 延续着之前视频自监督一中Intra-video Mixup 的工作，我们把这种augmentation的思想继续拓展了一下，提出了一个新的VTDL框架。 Pipeline 生成的Triplet可视化如下所示： ...
css animation-timing-function: cubic-bezier(1, 0.6, 0.57, 0.75);
05-15
其中 `cubic-bezier` 是一种贝塞尔曲线的函数，它可以通过四个参数来定义一个时间函数，分别是 `x1`、`y1`、`x2` 和 `y2`。这四个参数的取值范围是 0 到 1。 在这个例子中，时间函数的参数是 `1, 0.6, 0.57, 0.75`...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值