皮皮blog

Talk is cheap, Show me the code!

深度学习:transformer模型

Google于2017年6月发布在arxiv上的一篇文章《Attention is all you need》,提出解决sequence to sequence问题的transformer模型,用全attention的结构代替了lstm,抛弃了之前传统的encoder-decoder模型必须结合c...

2018-12-10 21:59:24

阅读数:644

评论数:0

HTML - 字符实体

HTML 字符实体HTML 中的预留字符必须被替换为字符实体。一些在键盘上找不到的字符也可以使用字符实体来替换。HTML 实体在 HTML 中,某些字符是预留的。在 HTML 中不能使用小于号(),这是因为浏览器会误认为它们是标签。如果希望正确地显示预留字符,我们必须在 HTML 源代码中使用字符...

2017-12-29 17:29:58

阅读数:1507

评论数:0

HTML - 脚本JavaScript

JavaScript 使 HTML 页面具有更强的动态和交互性。JavaScript 最常用于图片操作、表单验证以及内容动态更新。标签描述定义了客户端脚本定义了不支持脚本浏览器输出的文本HTML 标签 标签用于定义客户端脚本,比如 JavaScript。 元素既可包含脚本语句,也可通过 src ...

2017-12-29 17:23:26

阅读数:351

评论数:0

HTML - 颜色

HTML颜色的表示HTML 颜色由红色、绿色、蓝色混合而成。HTML颜色可以通过颜色值或者颜色RGB或者颜色名来引用。颜色值HTML 颜色由一个十六进制符号来定义,这个符号由红色、绿色和蓝色的值组成(RGB)。每种颜色的最小值是0(十六进制:#00)。最大值是255(十六进制:#FF)。十六进制值...

2017-12-29 17:17:39

阅读数:711

评论数:0

HTML - 布局div

大多数网站可以使用 或者 元素来创建多列。CSS 用于对元素进行定位,或者为页面创建背景以及色彩丰富的外观。Note: table标签是不建议作为布局工具使用的 - 表格不是布局工具。table布局参考[使用 元素的网页布局]。div元素布局div 元素是用于分组 HTML 元素的块级元素。...

2017-12-29 17:03:54

阅读数:2103

评论数:0

HTML样式- CSS

CSS简介CSS (Cascading Style Sheets) 用于渲染HTML元素标签的样式。CSS 是在 HTML 4 开始使用的,是为了更好的渲染HTML元素而引入的。CSS 可以通过以下方式添加到HTML中:内联样式- 在HTML元素中使用"style" 属性 内部...

2017-12-29 11:45:04

阅读数:575

评论数:0

HTML - 元素/标签详解

HTML头部元素 元素包含了所有的头部标签元素。在 元素中你可以插入脚本(scripts), 样式文件(CSS),及各种meta信息。可以添加在头部区域的元素标签为: , , , , , , . 标签定义了不同文档的标题。 在 HTML/XHTML 文档中是必须的。定义了浏览器工具栏的标题当网页...

2017-12-29 10:46:44

阅读数:874

评论数:0

HTML - 元素/标签和属性基础

HTML元素简介HTML 文档由 HTML 元素定义。HTML 文档由嵌套的 HTML 元素构成。"HTML 标签" and "HTML 元素" 通常都是描述同样的意思.但是严格来讲, 一个 HTML 元素包含了开始标签与结束标签。开始标签常被称为起始标签(...

2017-12-29 10:45:04

阅读数:792

评论数:0

HTML - 文本及其格式化

HTML 文本格式化HTML 文本格式化标签标签描述定义粗体文本定义着重文字定义斜体字定义小号字定义加重语气定义下标字定义上标字定义插入字定义删除字Note:1. 通常标签 替换加粗标签 来使用, 替换 标签使用。然而,这些标签的含义是不同的: 与 定义粗体或斜体文本。 或者 意味着你要呈现...

2017-12-29 10:07:05

阅读数:2128

评论数:0

Sublime功能拓展及插件

Sublime基础功能及拓展中文支持ubuntu16.04中subline text3的中文输入法支持sudo apt-get update && sudo apt-get upgradegit clone https://github.com/lyfeyaj/sublime-te...

2017-12-21 22:20:36

阅读数:1526

评论数:0

贝叶斯逻辑回归

待写

2017-12-19 21:33:07

阅读数:514

评论数:0

分类的线性模型:概率判别式模型之逻辑回归LR

逻辑回归Logistic Regression逻辑回归是一种线性分类模型,而不是回归模型。也就是说,输入的因变量target y是离散值,如分类类别1,0等等,而不是连续型的数据。判别式训练的⼀种形式:在直接⽅法中,我们最⼤化由条件概率分布p(Ck j x)定义的似然函数。判别式⽅法的⼀个优点是通...

2017-12-18 11:39:27

阅读数:1272

评论数:0

未名

2017-12-18 11:04:11

阅读数:324

评论数:0

深度学习:语言模型的评估标准

http://blog.csdn.net/pipisorry/article/details/78677580 语言模型的评估主要measure the closeness,即生成语言和真实语言的近似度。 Classification accuracy ...

2017-11-30 17:03:38

阅读数:1173

评论数:1

深度学习:长短期记忆模型LSTM的变体和拓展

LSTM模型的拓展[Greff, Klaus, et al. "LSTM: A search space odyssey." TNNLS2016] 探讨了基于Vanilla LSTM (Graves & Schmidhube (2005))之上的8个变体,并比较了它们之...

2017-11-13 18:19:16

阅读数:2736

评论数:0

深度学习:自然语言生成-集束搜索beam search和随机搜索random search

http://blog.csdn.net/pipisorry/article/details/78404964集束搜索BeamSearch在sequence2sequence模型中,beam search的方法只用在测试的情况(decoder解码的时候),因为在训练过程中,每一个decoder的输...

2017-10-31 16:31:47

阅读数:19062

评论数:1

条件随机场CRF - 学习和预测

CRF的学习即CRF的参数估计问题。条件随机场模型实际上是定义在时序数据上的对数线性模型(LR模型同样是),其学习方法包括极大似然估计和正则化的极大似然估计。具体的优化实现算法有改进的迭代尺度法IIS、梯度下降法以及拟牛顿法。改进的迭代尺度法(IIS)         已知训练数据集,由此可知经验...

2017-10-30 21:27:08

阅读数:1547

评论数:0

条件随机场CRF - 表示

CRF简介HMM的局限性         1,该模型定义的是联合概率,必须列举所有观察序列的可能值,而这对多数领域来说是比较困难的。         2,基于观察序列中的每个元素都相互条件独立。即:在任何时刻观察值仅仅与状态序列中的一个状态有关。而大多数现实世界中的真是观察序列是有多个相互作用的特...

2017-10-30 21:25:01

阅读数:1731

评论数:0

马尔可夫随机场 MRF

马尔可夫网马尔科夫网是使用无向图描述的图模型,是刻画X上联合分布的一种方法,表示一个分解方式,也表示一组条件独立关系。马尔科夫随机场( Markov random field , MRF),也被称为马尔科夫网络( Markov network )或者无向图模型( undirected graphi...

2017-10-30 19:45:56

阅读数:15996

评论数:3

深度学习:长短期记忆模型LSTM

lstm可以减少梯度消失:[RNN vs LSTM: Vanishing Gradients]LSTM模型(long-short term memmory)长短期记忆模型(long-short term memory)是一种特殊的RNN模型,是为了解决RNN模型梯度弥散的问题而提出的;在传统的RN...

2017-10-27 10:14:05

阅读数:11452

评论数:0

提示
确定要删除当前文章?
取消 删除