- 博客(18)
- 收藏
- 关注
RSS订阅原创 CS224n Assignment4解读 · 上
NMT中的一个问题problem: 输入的句子长短不一，如果要将所有的长短的输入都提炼为同样长度的向量，是比较难的。solution： 实际工程中较多的会通过堆叠RNN来解决不定长的input sentences的问题CS224n Assignment4: 通过找出最长的句子，再将其他所有的句子都扩充至这一长度来达到input sentences等长的效果。python文档Library Reference标准库参考：标准库中的API在这里有定义和注释Language Referen
2021-03-24 22:00:22
589
原创 CS224n-2019 -《Neural Machine Translate， seq2seq with Attention》
CS224n-2019的第八讲《Neural Machine Translate， seq2seq with Attention》Machine Translate历史Statistics MT这是基于统计的机器翻译，核心思想是最大化一个概率分布，最终拆分成两个部：一是翻译模型，二是语言模型。（这块没有弄懂）其中需要大量的人工操作，非常的复杂。之前的google翻译就是基于SMT的。Neural MT这是一个seq2seq结构，单个神经网络，使用到了两个RNN网络。NMT神经网络结构
2021-03-23 21:57:45
188
原创 RNN 梯度消失梯度爆炸 变体
20210322总结Linux系统上pytorch环境的配置需要GPU的时候，在具备GPU硬件的前提下，首先需要下载GPU相应版本的驱动程序（diver）以及CUDA。CUDA可以理解为GPU相关的API，pytorch能够自动调用这些接口来应用GPU。cat /usr/local/cuda/version.txt可以查看已安装CUDA的版本。安装torch、torchvision、torchaudio库。这一步在pytorch的官网会提供不同版本相应的命令，主页默认为最新的版本，如果需要旧版本，
2021-03-22 20:41:14
235
原创 《Graph Convolutional Network with Sequential Attention for Goal-Oriented Dialogue Systems》总结
20210318总结论文《Graph Convolutional Network with Sequential Attention for Goal-Oriented Dialogue Systems》(应用顺序注意力的图神经网络在任务型对话系统中)单领域的对话系统有三种输入：该领域相关的知识库对话历史，这是一系列的自然语言表达用户最新的回复，这也是自然语言表达，通常叫做Query因为要根据这个条件来生成系统回复本篇文章关注的两个亮点知识库中实体之间的关系，这是一张知识图谱对话自然
2021-03-18 21:40:37
149
原创 《Schema-Guided Multi-Domain Dialogue State Tracking with Graph Attention Neural Networks》总结
每天小结多领域对话系统槽值的稀疏型问题：由于领域增多槽位随之增加，导致槽值之间的组合情况明显增多。直观上来看就是分母变大了，而实际上槽值的组合情况并没有那么多，相当于分母成指数型增长，但分子成线性增长，造成稀疏性问题。如果说不考虑槽位之间的联系，独立预测槽位的值就会导致所有可能的情况（分母）为各个槽值个数相乘的结果。LSTM & GRULSTM长短期循环网络：遗忘门、输入门、输出门GRU：重置门、更新门残差项残差项就是加一个数（比如解决梯度消失的问题可以通过加入一个小的数值来
2021-03-17 20:59:14
409
3
原创 2020.11.23~28周报
机器学习基础分类： 监督 无监督 半监督模型与参数深度学习基础神经元 神经网络损失函数(值越小说明模型拟合效果越好) 梯度下降和反向传播(偏导以及复合函数求导法则)全连接神经网络、卷积神经网络(CNN)、循环神经网络(RNN)、丢弃一本相关书籍链接《Neural Networks and Deep Learning》深度学习框架PyTorchPyTorch中文文档学习–张量tensor及其各种运算文档链接PyTorch文档机器阅读理解的前两章第一章介绍了机器阅读理解，其
2020-11-28 19:00:47
157
1
原创 Windows操作系统装机傻瓜教程
Windows操作系统装机傻瓜教程概览与旧系统说拜拜磁盘分驱规划准备U盘安装介质进入BIOS设置U盘启动Windows安装向导概览开始之前首先捋一下思路。整个系统安装过程分成两个部分：安装前的准备工作首先我们需要为机器上装的旧系统做一些善后，其次要基于机器的硬件以及自己的需求划分磁盘，最后要利用一个U盘准备系统的安装介质。实施安装这一块就是进入机器的BIOS设置U盘优先启动，然后按照Windows的安装向导“下一步”就好了。与旧的系统说拜拜在为机器重装系统之前，我们确
2020-10-14 22:48:04
1073
1
原创 华为笔试0422
华为笔试0422题目思路对于这道题，由于是需要排序数字字符(0~9)，所以立马想到了桶排序。大概的思路如下：遍历字符串中的每一个字符，如果不是数字直接下一个，如果是数字的话，对应的桶内数量加1。遍历桶，从小到大将桶内的数字“倒”出来。代码较易时间复杂度：遍历字符需要O(n)，之后遍历桶最坏情况下是需要O(n)，所以总的时间复杂度为O(n)空间复杂度：最坏情况下...
2020-04-23 18:35:42
175
原创 如何在centos7系统上部署一个http服务器
如何在centos7系统上部署一个http服务器原理httpd服务的安装centos7创建编辑文件原理在本学期学习的网络与分布式计算的课程中，有一次实验内容就是使用JAVA语言手动编写一个http服务器。其本质上就是一个多线程的java程序，监听本地的一个特定的端口，为每一个新建立的连接创建一个新的线程用来专门处理该连接的一些问题。在这些线程中，通过输入输出流来接受来自客户端的请求以及向客户端...
2020-01-20 23:13:57
632
原创 保证XShell退出后程序后台运行
保证XShell退出后程序后台运行前言保证XShell退出后程序后台运行找进程总结前言如今云服务器技术变得越来越成熟，拥有云服务器的用户也越来越多。像我这样的，一个软件工程的学生，居然在大三才开始使用云服务器，说来也挺菜。阿里云对学生确实是很优惠，推荐使用。既然是云服务器，当然就是不在本地，那我们怎么与我们的服务器取得联系并对它进行操作呢，这就是网络的强大之处了。我们可以使用阿里云的控制台，它...
2020-01-07 17:33:02
1393
原创 提取Windows(10)聚焦锁屏背景
提取Windows10聚焦锁屏背景前言正解亮点前言今天在打开电脑之后，发现锁屏的背景还不错，主要是今天天气突然变冷，Windows聚焦貌似察觉到了点儿什么。。。附图：把它截下来之后第一件事儿就是发给女朋友，反应如下：(看多了确实感觉挺。。。。。。)咳咳咳，那么正题是，能不能把Windows聚焦的这些锁屏背景图给扒下来呢？？？正解我们可以通过找到Windows在本地保存这些图片的文件...
2019-10-06 14:12:08
349
原创 WPS的自动备份与恢复
WPS的自动备份与恢复备份中心注意总结我们知道，在制作文档的过程中，因为出现意外事件，很容易丢失，致使前功尽弃，所以自动备份和保存就成了这种意外事件的最后一个救命稻草，WPS为我们提供了这样的功能。备份中心在WPS的应用中我们可以发现备份中心这样一个应用，点击打开之后如图：ok，正常情况下它是智能备份模式，另外WPS还为我们提供了定时备份模式。两者的简单区别如下：智能备份：是当软件崩...
2019-10-05 21:33:20
3733
原创 Spring in Action第四版第二章总结
Spring in Action第四版第二章总结前言自动化装配Bean实现组件扫描前言在本书的第一章中，我对spring架构有了一个大概的了解，包括它的一些特点和一些运作的机制。但是毕竟初学，理解上难免有些片面。所以趁着劲儿头，很快读完了第二章。第二章主要介绍spring依赖注入的实现方法，给它取一个高大上的名字——Bean的装配。在上一章中我就曾对Bean这个东西产生过疑问，What’s ...
2019-09-17 21:19:52
122
原创 Shift键和Enter键
Shift键和Enter键前言Shift键Enter总结前言关于之前那篇回车与换行（即"\r"和"\n"）的博文，女朋友提出一个问题：Shift和Enter键和它们是不是有什么关联呢。说实话我之前没有想过这样的问题，但是联想到Shift+Enter这样的快捷键，我想这两个键或许真的跟回车和换行有什么鲜为人知的联系吗。查资料ing。。。。。。Shift键Shift，在键盘上其实是上档转换键...
2019-09-16 16:42:59
7041
1
原创 解决Windows下Spring in Action书中示例测试代码不成功的问题
解决Windows下Spring in Action书中示例测试代码不成功的问题还有一个问题在学习Spring in Action第二章的时候遇到一个问题，其中的测试代码总是报错：org.junit.ComparisonFailure: expected:<... Band by The Beatles[]> but was:<... Band by The Beatles...
2019-09-15 22:19:58
343
原创 Eclipse中集成Maven
Eclipse中集成MavenWhat's Maven ?在Eclipse中集成Maven我们需要在电脑上下载和安装MavenMaven的文件结构配置Maven的本地资源库Eclipse中集成Maven创建Maven项目What’s Maven ?Maven是基于项目对象模型（POM Project Object Model），可以通过一小段描述信息（配置）来管理项目的构建、报告和文档的软件项...
2019-09-15 16:41:42
161
原创 Sping in Action第四版第一章总结
Sping in Action第四版第一章总结前言简化Java开发POJO依赖注入AOP（面向切面编程）模板Spring容器Spring框架bean有了spring之后我们就可以很简单的编写java类，同时类层上类间关系面向接口实现，重要的是要在配置依赖的文件中将类之间的关系清楚，才能交给容器进行管理。前言个人选择了软件开发方向，其中有一门必修课是企业级应用软件开发。这门课介绍应用spring...
2019-09-15 00:02:51
143
原创 初始Spring Data JPA 开发
Spring Data JPA 开发前言持久化类数据访问层合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入前言两周的软件开发综...
2019-09-11 22:14:30
279
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人