- 博客(1)
- 资源 (25)
- 收藏
- 关注
LX1815-RTL-Driver lenovo 联想蓝牙 5.0 驱动 8761B windows 7/10 linux/ubuntu
联想LX1815 usb蓝牙5.0 驱动 windows 下和linux下都有,可连接蓝牙鼠标、耳机等
2020-11-13
Outrageously Large Neural Networks: The Sparsely-Gated Mixture-of-Experts Layer
Google:One Model To Learn Them All,一个模型什么都能学。
2017-06-23
Outrageously Large Neural Networks: The Sparsely-Gated Mixture-of-Experts Layer
神经网络吸收信息的能力受限于其参数的数量。在这篇论文中,我们提出一种新类型的层——稀疏门控专家混合层(Sparsely-Gated Mixture-of-Experts(MoE)),它能够在仅需增加一点计算的基础上被用于有效提升模型的能力。这种层包含了多达数万个前向的子网络(feed-forward sub-networks,被称为专家(expert)),总共包含了多达数百亿个参数。一个可训练的门网络(gating network)可以确定这些专家的稀疏组合以用于每一个样本。我们将这种 MoE 应用到了语言建模任务上——在这种任务中,模型能力对吸收训练语料库中可用的大量世界知识而言是至关重要的。我们提出了将 MoE 层注入堆叠 LSTM(stacked LSTM)的新型语言模型架构,得到的模型的可用参数数量可比其它模型多几个数量级。在语言建模和机器翻译基准上,我们在更低的成本上实现了可与当前最佳表现媲美或更好的结果,其中包括在 1 Billion Word Language Modeling Benchmark 上测得的 29.9 的困惑度(perplexity),以及在 WMT'14 En to Fr(英法翻译)和 En to De(英德翻译)上分别得到了 40.56 和 26.03 的 BLEU 分数。
2017-06-23
A simple neural network module for relational reasoning -《简单事实关系推理模块》
模块化的、具有关系推理能力的深度神经网络架构 RN介绍,可以“即插即用”,提升其他深度神经网络结构(如 CNN)关系推理的能力。
2017-06-17
nvidia-docker_1.0.1-1_amd64.deb
更方便配置的能利用nvidia GPU的docker.
docker是硬件无关和平台无关的,但是在使用 nvidia GPU的时候,需要依赖nvidia-driver,此时就想到将nvidia driver安装到Container内,但是Container内的nvidia driver版本要和host主机的版本一样,所以这样就不符合docker的平台无关硬件无关的特性了。
所以现在的nvidia-docker的解决方案是在image里不安装nvidia driver,而是在启动container时通过挂载driver文件或者指定特定的硬件的方式来启动container。
2017-03-19
算法导论中文版(第二版)
算法经典书籍。作者: [美] Thomas H.Cormen / Charles E.Leiserson / Ronald L.Rivest / Clifford Stein
2014-05-05
集体智慧编程中文版
机器学习最经典的书,入门,深入可以。本书是WEB架构师、开发师、应用工程师等的绝佳选择。集体智慧编程以机器学习与计算机统计为背景,讲述如何挖掘和分析WEb上的数据和资源,如何分析用户体验,市场营销,个人口味等逐多信息,并得出有用的结论……
2014-04-23
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人