Datawhale《深度学习-NLP》Task10- Attention原理

参考: transformer github实现:GitHub - Kyubyong/transformer: A TensorFlow Implem... transformer pytorch分步实现:The Annotated Transformer 搞懂Transformer结构,看这...

2019-03-21 19:40:58

阅读数 232

评论数 0

Datawhale《深度学习-NLP》Task9- Attention原理

Attention-based Model其实就是一个相似性的度量,当前的输入与目标状态越相似,那么在当前的输入的权重就会越大,说明当前的输出越依赖于当前的输入。严格来说,Attention并算不上是一种新的model,而仅仅是在以往的模型中加入attention的思想,所以Attention-b...

2019-03-19 20:47:27

阅读数 79

评论数 0

Datawhale《深度学习-NLP》Task8- 循环神经网络

参考 一份详细的LSTM和GRU图解:一份详细的LSTM和GRU图解 -ATYUN Tensorflow实战(1): 实现深层循环神经网络:Tensorflow实战(1): 实现深层循环神经网络 - 知乎 lstm:从LSTM到Seq2Seq-大数据算法 RCNN kreas:GitHub ...

2019-03-17 21:56:20

阅读数 84

评论数 0

Datawhale《深度学习-NLP》Task7- 卷积神经网络

参考: 卷积有多少种?一文读懂深度学习中的各种卷积:卷积有多少种?一文读懂深度学习中的各种卷积 - 知乎 源码往期资料中有涉及。 卷积神经网络定义 首先最需要明确的一点就是,卷积神经网络,也就是convolutional neural networks (简称CNN),现在已经被用来应用于...

2019-03-15 18:07:03

阅读数 160

评论数 0

Datawhale《深度学习-NLP》Task6- 简单神经网络

3. 参考 word2vec1:word2vec 中的数学原理详解(一)目录和前言 - peghoty - CSDN博客 word2vec2:word2vec原理推导与代码分析-码农场 word2vec中的数学原理详解(四)基于 Hierarchical Softmax 的模型:word2...

2019-03-13 19:10:34

阅读数 500

评论数 1

Datawhale《深度学习-NLP》Task5- 神经网络基础

基本概念 前馈神经网络,网络层数,输入层,隐藏层,输出层,隐藏单元,激活函数 前馈神经网络(Feedforward Neural Network) 网络结构(一般分两种) 1. Back Propagation Networks - 反向传播网络 2.RBF networks - 径向基...

2019-03-12 08:15:40

阅读数 75

评论数 0

Datawhale《深度学习-NLP》Task4- 传统机器学习

7. 参考 朴素贝叶斯1:sklearn:朴素贝叶斯(naïve beyes) - 专注计算机体系结构 - CSDN博客 LDA数学八卦 lda2:用LDA处理文本(Python) - 专注计算机体系结构 - CSDN博客 合并特征:Python:合并两个numpy矩阵 - 专注计算机体系结构...

2019-03-09 21:18:11

阅读数 112

评论数 0

Datawhale《深度学习-NLP》Task3- 特征选择

5. 参考 文本挖掘预处理之TF-IDF:文本挖掘预处理之TF-IDF - 刘建平Pinard - 博客园 使用不同的方法计算TF-IDF值:使用不同的方法计算TF-IDF值 - 简书 sklearn-点互信息和互信息:sklearn:点互信息和互信息 - 专注计算机体系结构 - CS...

2019-03-07 21:37:35

阅读数 130

评论数 0

Datawhale《深度学习-NLP》Task2- 基本文本处理技能,语言模型,文本矩阵化

4. 参考 结巴分词介绍和使用:GitHub - fxsjy/jieba: 结巴中文分词 基本文本处理 1. 分词 分词的正向最大 如果叫成最长正向分词要更形象一些,是一种分治+贪婪的思想,并不一时处理全部串,而是分别处理预先设立长度的每一段,在每一段中求取最长的并且出现在字典里面的词...

2019-03-05 20:23:26

阅读数 80

评论数 0

Datawhale《深度学习-NLP》Task1- 召回率、准确率、ROC曲线、AUC、PR曲线学习理解

Task1 数据集探索 1. 数据集 数据集:中、英文数据集各一份 中文数据集:THUCNews THUCNews数据子集:https://pan.baidu.com/s/1hugrfRu 密码:qfud 英文数据集:IMDB数据集 Sentiment Analysis 2. IMDB数据...

2019-03-03 20:33:21

阅读数 161

评论数 0

2018年最新桌面CPU性能排行天梯图(含至强处理器)

排名 处理器 图例 分数 1 Intel Xeon Platinum 8173M @ 2.00GHz 28860 2 Intel Xeon Gold 6154 @ 3.00GHz 27789 3 Intel Core i9...

2018-10-18 14:28:56

阅读数 36889

评论数 1

【转载】scikit-learn和tensorflow的区别

https://www.jianshu.com/p/0837b7c6ce10 1、功能不同 Scikit-learn(sklearn)的定位是通用机器学习库,而TensorFlow(tf)的定位主要是深度学习库。一个显而易见的不同:tf并未提供sklearn那种强大的特征工程,如维度压缩、特征...

2018-10-18 14:23:25

阅读数 61

评论数 0

干货 | 深度学习模型超参数搜索实用指南

https://mp.weixin.qq.com/s/wG_N6hKlKXcrXrAhzj3QwQ 乾明 整理编译自 FloydHub Blog 量子位 报道 | 公众号 QbitAI 在文章开始之前,我想问你一个问题:你已经厌倦了小心翼翼地照看你的深度学习模型吗? 如果是的话,那你就来对地...

2018-09-30 23:55:55

阅读数 29

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭