2021年03月_PaperWeekly

转载 ImageNet验证集6%的标签都是错的，MIT：十大常用数据集没那么靠谱

作者｜张倩、小舟来源｜机器之心把老虎标成猴子，把青蛙标成猫，把码头标成纸巾……MIT、Amazon 的一项研究表明，ImageNet 等十个主流机器学习数据集的测试集平均错误率高达 3....

2021-03-31 21:32:25 400

转载巧用词语角色：基于目标自适应图的跨目标立场检测

©PaperWeekly 原创 ·作者｜梁斌、傅勇昊学校｜哈尔滨工业大学（深圳）研究方向｜情感分析、立场识别摘要跨目标立场检测（cross-target stance detectio...

2021-03-31 21:32:25 557

转载谁说GPT只擅长生成？清华研究力证：GPT语言理解能力不输BERT

作者｜张倩、小舟来源｜机器之心一直以来，GPT 模型的语言生成能力有目共睹，但语言理解能力似乎略逊一筹。最近，清华、智源等机构的一项研究打破了这一刻板印象。GPT-3 大型语言模型向我们...

2021-03-30 12:54:55 730

原创 WGAN的成功，可能跟Wasserstein距离没啥关系

©PaperWeekly 原创 ·作者｜苏剑林单位｜追一科技研究方向｜NLP、神经网络WGAN，即 Wasserstein GAN，算是 GAN 史上一个比较重要的理论突破结果，它将 G...

2021-03-30 12:54:55 1611

转载哈佛、MIT学者联手，创下矩阵乘法运算最快纪录

作者｜小舟、维度来源｜机器之心作为一种基本数学运算，矩阵乘法的运算速度一直是一个重要的研究课题。哈佛大学和 MIT 研究者联合进行的一项研究创下了矩阵相乘的最快纪录。矩阵乘法作为一种基本...

2021-03-29 19:13:48 204

原创对抗训练硬核分析：对抗样本与模型参数的关系

©PaperWeekly 原创 ·作者｜孙裕道学校｜北京邮电大学博士生研究方向｜GAN图像生成、情绪对抗样本生成引言对抗训练是防御对抗样本一种有效的方法，但是对于它有效性的边界，一直都是...

2021-03-29 19:13:48 1419 1

转载超越卷积、自注意力机制：强大的神经网络新算子involution

作者｜李铎来源｜机器之心这篇工作主要是由我和 SENet 的作者胡杰一起完成的，也非常感谢 HKUST 的两位导师陈启峰和张潼老师的讨论和建议。本文是对我们CVPR 2021被接收的文章...

2021-03-28 23:01:31 379

转载重磅！2021 高通人工智能应用创新大赛今日开赛

由高通技术公司、高通创投主办，极视角、小米、中科创达、CSDN共同协办，TensorFlow Lite作为开源技术合作伙伴的“2021高通人工智能应用创新大赛”于今日正式开赛。依托于202...

2021-03-27 20:03:49 6988

原创 WWW 2021 | 通过强化学习控制对话式检索的风险

©PaperWeekly 原创 ·作者｜金金单位｜阿里巴巴研究实习生研究方向｜推荐系统本文由犹他大学发表于 WWW 2021。考虑到当前的对话式系统可能由于提出一些不好的澄清式问题，导致...

2021-03-27 20:03:49 939

原创调参，注意神经网络处于哪种相态

©PaperWeekly 原创 ·作者｜张耀宇、许志钦单位｜上海交通大学研究方向｜机器学习的基础研究作者按：神经网络的现象错综复杂，理解其本质的一个基础工作是研究神经网络的训练动力学过程...

2021-03-26 12:36:48 816

转载强化学习之基于伪计数的探索算法

©作者｜王治海学校｜中国科学技术大学硕士生研究方向｜强化学习与机器博弈强化学习基于智能体与环境的交互，以最大化累积奖励为目标，学习状态到动作的映射（即策略）。本文将主要围绕强化学习中的探索...

2021-03-26 12:36:48 1230

转载直播 | CVPR 2021论文解读：引入因果结构的解耦表征学习

「AI Drive」是由 PaperWeekly 和 biendata 共同发起的学术直播间，旨在帮助更多的青年学者宣传其最新科研成果。我们一直认为，单向地输出知识并不是一个最好的方式，而...

2021-03-24 19:52:59 1002

转载 AAAI 2021最佳论文亚军：Attention+积分梯度=归因解释新方法

©PaperWeekly 原创 ·作者｜李泺秋学校｜浙江大学硕士生研究方向｜自然语言处理、知识图谱本文是对 AAAI 2021 最佳论文亚军得主《Self-Attention Attri...

2021-03-23 19:15:06 1628

转载口语语言理解（SLU）最新资源库：综述、数据集、开源论文

作者｜哈工大SCIR 覃立波、谢天宝等指导老师｜哈工大SCIR 车万翔教授简介口语语言理解（Spoken Language Understanding，SLU）作为任务型对话系统的核心组...

2021-03-22 12:51:35 1492

转载直播 | AAAI 2021最佳论文：比Transformer更有效的长时间序列预测

「AI Drive」是由 PaperWeekly 和 biendata 共同发起的学术直播间，旨在帮助更多的青年学者宣传其最新科研成果。我们一直认为，单向地输出知识并不是一个最好的方式，而...

2021-03-22 12:51:35 845 2

原创 Transformer升级之路：Sinusoidal位置编码追根溯源

©PaperWeekly 原创 ·作者｜苏剑林单位｜追一科技研究方向｜NLP、神经网络最近笔者做了一些理解和改进Transformer的尝试，得到了一些似乎还有价值的经验和结论，遂开一个...

2021-03-21 13:47:03 1593 1

转载 LSTM之父重提30年前的「快速权重存储系统」：线性Transformer只是它的一种变体...

作者｜陈萍、维度来源｜机器之心来自瑞士人工智能实验室、亚琛工业大学的研究者建立了线性（核）注意力与快速权重存储系统之间的内在联系，并提出更新规则，在合成检索问题、机器翻译、语言模型等实验...

2021-03-21 13:47:03 249

转载如何使ResNet优于EfficientNet？改进训练方法和扩展策略就可以

作者｜魔王、维度来源｜机器之心架构变化、训练方法和扩展策略是影响模型性能的不可或缺的重要因素，而当前的研究只侧重架构的变化。谷歌大脑和 UC 伯克利的一项最新研究重新审视了 ResNet...

2021-03-20 21:25:52 490

原创 CVPR 2021 | 基于跨任务场景结构知识迁移的单张深度图像超分辨率方法

©PaperWeekly 原创 ·作者｜孙宝利学校｜大连理工大学硕士研究方向｜计算机视觉项目主页：http://faculty.dlut.edu.cn/yexinchen/zh_CN...

2021-03-19 18:39:35 1694 3

转载快手-中科大最新研究：利用对话式推荐解决用户冷启动问题

推荐系统冷启动通常分为三类，即用户冷启动、物品冷启动还有系统冷启动。无论那种冷启动都因为只有较少的数据和特征来训练模型，所有需要不同的技术方案来提升推荐效果。另外冷启动结合产品方案可以加速...

2021-03-18 13:44:32 822

转载以机器、深度学习和生理信号分类为关键词的学术论文整理

©作者｜贾子钰、何远来学校｜北京交通大学研究方向｜机器/深度学习与生理信号分类最近作者以机器/深度学习和生理信号分类为关键词，整理了近 10 年的 500 余篇学术论文，涵盖了 13 种不...

2021-03-18 13:44:32 663

转载做 NLP 算法研究，去大公司还是创业公司？

答案当然不是大公司。虽说计算资源这一个点，现在语言模型越搞越大，创业公司恐怕很难负担得起训练成本。但这么想通常都是错的。有一家 NLP 创业公司不仅解决了这个问题：他们今年初与国内一家大型...

2021-03-18 13:44:32 480

转载商汤2021春季校园招聘正式启动！“春招百晓生”系列空宣强势来袭

3月2日，商汤智能入职在全国正式上线！我的同事“万万”体验了万万没想到的入职之旅戳视频感受一下吧~同时他还带来了一个万万想到的好消息：商汤职播间又开播了——春招特别策划“春招百晓生”系列空...

2021-03-17 12:43:59 227

原创胶囊网络全新升级！引入自注意力机制的Efficient-CapsNet

©PaperWeekly 原创 ·作者｜孙裕道学校｜北京邮电大学博士生研究方向｜GAN图像生成、情绪对抗样本生成论文链接：https://arxiv.org/abs/2101.12491...

2021-03-16 12:48:41 4285 2

转载导师：算法学的这么差，你别毕业了

前几天有位读者朋友向我表达了他最近的困惑：刚毕业进了小公司，现在想跳槽去大厂，但不清楚自己的能力和经验是否能达到大厂的要求。我问了他一些关于现有的工作内容，意外地发现他虽然工作年限不长，但...

2021-03-16 12:48:41 340

原创 T5 PEGASUS：开源一个中文生成式预训练模型

©PaperWeekly 原创 ·作者｜苏剑林单位｜追一科技研究方向｜NLP、神经网络去年在文章那个屠榜的T5模型，现在可以在中文上玩玩了中我们介绍了 Google 的多国语言版 T5 ...

2021-03-15 19:11:26 3397

转载直播 | 北邮博士生纪厚业：异质图神经网络在阿里推荐业务中的探索

「AI Drive」是由 PaperWeekly 和 biendata 共同发起的学术直播间，旨在帮助更多的青年学者宣传其最新科研成果。我们一直认为，单向地输出知识并不是一个最好的方式，而...

2021-03-15 19:11:26 615

转载谷歌自锤Attention：纯注意力并没那么有用，Transformer组件很重要

作者｜魔王来源｜机器之心基于注意力的架构为什么那么有效？近期谷歌等一项研究认为注意力并没有那么有用，它会导致秩崩溃，而网络中的另两个组件则发挥了重要作用：「跳过连接」有效缓解秩崩溃，「多...

2021-03-14 22:07:57 985 2

转载推荐3个C++系统项目！初级开发者必学！

都说C++入门难，今天我们就来聊聊，它到底难在哪？语言本身是一方面，因为语法特性、规则比较多，学起来不是那么轻松。缺乏系统的开发经验是另一方面。很多人都是已经通过看书、自学掌握了一定的语言...

2021-03-13 19:54:16 812

原创 CVPR 2021 | 天津大学提出PISE：形状与纹理解耦的人体图像生成与编辑方法

2021-03-13 19:54:16 3461

原创提升Transformer效率又有新招？基于矩阵分解的线性化Attention方案

2021-03-12 17:55:08 2043

转载《李宏毅机器学习特训营》免费开放！直播教学！

AlphaGo战胜“石神”李世石，人工智能开始闯进大众的视野，机器学习成为同学入门人工智能领域的学习首选。提起机器学习，就不能不说一位人物，他就是台湾大学李宏毅教授。李宏毅老师说：“你可以...

2021-03-11 18:30:04 346

原创如何保护个人信息安全？天津大学提出隐私政策合规性检测工具

论文标题：Have You been Properly Notified? Automatic Compliance Analysis of Privacy Policy Text wit...

2021-03-11 18:30:04 2350 1

转载辰星计划2021 | 旷视春季实习生招募—空中宣讲会第二弹来了！

上一期的空宣会，旷视研究院的Face和Video组为同学们分享了超多干货，会后我们也收到了来自全国各地的简历。本期，我们邀请到了旷视研究院极智感知IS组、3D组、AI计算组，为同学们继续带...

2021-03-10 12:46:47 387

原创使用Memory-driven Transformer生成医疗影像报告

2021-03-10 12:46:47 3334 3

转载我用这个框架拿了Kaggle大赛冠军

2020年的AI算法岗竞争究竟多惨烈？这两年AI大火，还被顺势纳入了新基建的队伍，算法岗的平均薪资水平远超传统开发岗一大截，高薪+前景好，自然吸引越来越多技术人员转去AI工程师方向。再加上...

2021-03-09 12:33:52 378

转载 CVPR 2021接收论文：AdCo基于对抗的对比学习

2021-03-09 12:33:52 735

转载直播 | 浙江大学硕士生任意：非自回归语音合成

「AI Drive」是由 PaperWeekly 和 biendata 共同发起的学术直播间，旨在帮助更多的青年学者宣传其最新科研成果。我们一直认为，单向地输出知识并不是一个最好的方式，而...

2021-03-09 12:33:52 1214

转载波束形成、回声消除、声源定位及端到端等语音信号处理算法

现今信息技术飞速发展，语音技术源源不断地融入到各个领域，语音信号处理是人机接口的关键技术，已广泛应用于直播、在线通话、智能音箱等产品中。（落地应用）随着语音产品广泛落地应用，语音行业飞速发...

2021-03-08 12:27:00 1790

原创从4篇顶会论文看Self-training最新研究进展

2021-03-08 12:27:00 2412 1

空空如也

空空如也