s_tatic_-CSDN博客

原创强化学习7日打卡营学习总结和心得

七天打卡，六次作业，五次直播，完整的参与了百度推出的强化学习7日打卡营。课程收获在科科老师的讲解下，了解到了强化学习的应用，了解到了基于价值的方法（saras，Q-learning）和基于策略的方法（REINFORCE算法）,还有应用在连续动作空间的算法（DDPG）。其中DDPG算法和REINFORCE算法还需要多看看起数学原理。强化学习个人感悟强化学习就像是在不断的与环境进行交互通过奖惩机制然后选取收获最大的动作作为经验，当然面对未知邻域时不可能总凭过去的经验，这就有了在训练.

2020-06-24 11:08:20 539

原创 Emotional Chatting Machine: Emotional Conversation Generation with Internal and External Memory

Emotional Chatting Machine: Emotional Conversation Generation with Internal and External Memory摘要情感的感知和表达是对话系统或者会话代理成功的关键因素。然而，到目前为止这个问题还没有在大规模会话生成中研究。在本文中，我们提出情感聊天机（Emotional Chatting Maching，ECM），它可以根据内容（相关性和语法）和情感（情感一致性）来生成适当的回复。据我们所知，这是第一项在大规模会话生

2020-06-17 19:07:58 667 1

原创顺序匹配网络：基于检索的聊天机器人中多回合响应选择的新架构

3 顺序匹配网络（Sequential Matching Network）3.1 问题形式假定，我们有一个数据集D={(yi,si,ri)}i=1N\mathcal{D}=\left\{\left(y_{i}, s_{i}, r_{i}\right)\right\}_{i=1}^{N}D={(yi,si,ri)}i=1N，其中si=ui,1,…,ui,nis_i={u_i,1,\ldots,u_{i,n_i}}si=ui,1,…,ui,ni表示具有{ui,k}k=1ni\left\{u

2020-06-11 23:20:06 450

原创 scala学习记录二

模式匹配Java：对一个值对象条件判断，返回针对不同的条件进行不同的处理scala:变量 match{ case value1 => 代码1 case value2 => 代码2 case _ => 代码N简单的switch caseobject MatchApp extends App{ val names = Array("Akiho Yoshizawa","YuiHatang","Aoi Sola"); val name = names(Ran

2020-06-01 15:52:46 163

原创 scala学习记录一

val 与 varval :值final 一次定义，不可修改val age:Int = 20;var :变量var name:String = “zhangsan”可修改基本数据类型byte/charshort/int/Long/Float/Doubleval e:Float=1.1fboolean函数/方法的定义def 方法名（参数名：参数类型）: 返回值类型={ // 花括号内的叫做方法体 //方法体内的最后一行为返回值，不需

2020-05-29 22:09:50 107

原创 Introduction to Graph Neural Network翻译-第六章图循环网络

还有一种趋势是在传播步骤中使用来自rnn的门机制，如GRU [Cho et al.， 2014]或LSTM [Hochreiter and Schmidhuber, 1997]，以减少普通GNN模型的限制，提高图上长期信息传播的有效性。6.1 GATED GRAPH NEURAL NETWORKSLi等人[2016]提出在传播步骤中使用门循环单元(GRU)的GGNN。它将递归神经网络展开固定数量的TTT步，并随时间反向传播以计算梯度。具体地说，传播模型的基本递归是:avt=AvT[h1t−1…hN

2020-05-29 12:56:31 757

原创 Introduction to Graph Neural Network翻译-第五章图卷积网络

5. 图卷积网络在本章中，我们将讨论图卷积网络（GCNs），其目的是将卷积推广到图域。由于卷积神经网络（CNNs）在深度学习领域取得了巨大的成功，因此在图上定义卷积运算是非常直观的。在这个方向上的进展通常分为频谱方法和空间方法。由于在每个方向上都有很大的变化，因此本章仅列出几个经典模型。5.1 频谱方法频谱方法使用图的频谱表示形式。在本节中，我们将讨论四种经典模型(Spectral Network、ChebNet、GCN和AGCN)。5.1.1 频谱网络（SPECTRAL NETWORK）B

2020-05-22 11:18:05 794

原创 Introduction to Graph Neural Network翻译-第四章Vanilla Graph Neural Networks

4. Vanilla Graph Neural Networks在本节中，我们将描述Scarselli等人提出的Vanilla GNN[2009]。我们还列出了Vanilla GNN在表示能力和训练效率方面的局限性。在本章之后，我们将讨论Vanilla GNN模型的几种变体。4.1 介绍GNN的概念最早是在Gori等人[2005]，Scarselli等 [2004，2009]提出的。为...

2020-04-30 10:15:33 1041

原创 Introduction to Graph Neural Network翻译-第二章数学与图基础

2. 数学与图基础2.1 线性代数线性代数的语言和概念在计算机科学的许多领域都得到了广泛的应用，机器学习也不例外。对机器学习的良好理解是建立在对线性代数的透彻理解的基础上的。在这一节中，我们将简要回顾线性代数中的一些重要概念和计算，这对于理解本书的其余部分是必要的。在这一节中，我们将回顾线性代数中的一些基本概念和计算，这对于理解本书的其余部分是必要的。2.1.1 基本概念标量：一个数...

2020-04-30 10:13:33 566 6

原创知识图谱笔记

1. 定义知识图谱技术是指在建立知识图谱中使用的技术，是融合认知计算、知识表示与推理、信息检索与抽取、自然语言处理与语义Web、数据挖掘与机器学习等技术的交叉研究。具体地，知识图谱技术包括知识表示、知识图谱构建和知识图谱应用三方面的研究内容知识表示研究客观世界知识的建模，以方便机器识别和理解，既要考虑知识的表示与存储，又要考虑知识的使用和计算。知识图谱构建解决如何建立计算...

2020-04-12 22:07:17 364

原创 web3.js学习记录：查看geth账户信息

html代码如下：<html> <head> <meta charset="utf-8"> <title>Fist App Demo</title> <link rel="stylesheet" type="text/css" href="main.css"> ...

2020-03-22 17:42:29 760

原创以太坊学习记录：私有链，私有链集群，智能合约

启动控制台geth --networkid 15 --datadir privateChain2 --rpc --rpccorsdomain * --allow-insecure-unlock console在geth中查看账户余额web3.fromWei(eth.getBalance(acc1),'ether')转账操作eth.sendTransaction({from:a...

2020-03-22 00:06:16 302

原创解决tf2 : AttributeError: 'Tensor' object has no attribute 'numpy'

问题描述：环境：tf2.0查看代码运行中tensor的值，def create_mask(inputs, targets): input_leave_fun('create_mask',1) # 编码器只有padding_mask print("查看输入") print(type(inputs)) print(inputs.numpy()) # 此...

2020-03-13 00:38:47 7946 2

原创 wsl2+hadoop2.7.7伪分布式配置

Hadoop环境变量配置系统环境：wsl ubuntu18.04jdk 1.8.0_192Hadoop 2.7.71. 修改Hadoop中的Java环境变量共需修改三个文件分别为：文件内容大致为：可手动改为需要的jdk路径2. 节点配置配置namenode节点：配置副本数指定从节点配置secondry node配置临时文件目录这里...

2020-03-10 16:38:39 854

原创 matplotlib使用指南

添加标题-titleimport numpy as npimport matplotlib.pyplot as plt# 显示中文plt.rcParams['font.sans-serif'] = [u'SimHei']plt.rcParams['axes.unicode_minus'] = Falsex=np.arange(0,10)plt.title('这是一个示例标题')p...

2020-03-01 21:19:56 137

原创探索贝叶斯

探索贝叶斯“概率论只不过是把常识用数学公式表达了出来”——拉普拉斯相关概念联合概率联合概率指的是包含多个条件且所有条件同时成立的概率，记作P(X=a,Y=b)P(X=a,Y=b)P(X=a,Y=b)或P(a,b)P(a,b)P(a,b)，有的书上也习惯记作P(ab)。边缘概率边缘概率与联合概率对应，P(X=a)P(X=a)P(X=a)或P(Y=b)P(Y=b)P(Y=b)...

2020-02-23 15:09:37 206

翻译论文翻译：常识性道德决策的计算模型

A Computational Model of Commonsense Moral Decision Making摘要我们介绍了一种通过学习和归纳人类道德判断来构建道德自主车辆的计算模型。我们借鉴了一个认知启发的模型，说明人们和年幼的孩子是如何从稀疏和嘈杂的数据中学习道德理论的，并将不同群体中不同人的观察结果整合在一起。自动驾驶汽车的道德学习问题被描述为学习如何使用效用演算来权衡困境的不同特...

2020-02-22 23:24:47 1211

翻译论文翻译：道德判断模型中的伦理和统计考虑

Ethical and Statistical Considerations in Models of Moral Judgments摘要这项工作扩展了道德决策计算模型的最新进展，通过使用数学和哲学理论来建议对最新技术的适应。它展示了模型假设的重要性，并在建模伦理原则时考虑了正态分布的替代方案。我们展示了如何将伦理理论、功利主义和道义论嵌入到信息先验分布中。我们继续扩大现有技术水平，以考虑超出...

2020-02-21 23:40:56 2964

原创动手学pytorch-打卡3

Generative Adversarial NetworksThroughout most of this book, we have talked about how to make predictions. In some form or another, we used deep neural networks learned mappings from data points to l...

2020-02-20 15:18:04 124

原创论文翻译：Attention is all you need

Attention is all you need摘要主要的序列转换模型基于复杂的递归或卷积神经网络，包括编码器和解码器。性能最好的模型还通过注意力机制连接编码器和解码器。我们提出了一种新的简单的网络体系结构Transformer，它完全基于注意力机制，完全不需要重复和卷积。在两个机器翻译任务上的实验表明，这些模型在质量上更优越，同时更具并行性，需要的训练时间明显减少。我们的模型在2014年W...

2020-02-20 15:10:30 505 1

翻译论文翻译：BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding

BERT: Pre-training of Deep Bidirectional Transformers for Language UnderstandingBERT：用于语言理解的深度双向变换器的预训练摘要我们引入了一个新的语言表示模型BERT，它代表了来自Transformers的双向编码器表示。与最近的语言表示模型不同（Peters等人，2018a; Radford等人，2018），...

2020-02-18 16:52:55 1153

原创 modbus RTU消息帧与TCP消息帧对比

1. RTC消息帧格式2. TCP消息帧格式3. 实例对比读取序号为20，起始地址为0，连续10个的线圈状态。3.1 RTU消息帧查询报文：[14][01][00][00][00][0A][BE][C8]响应报文：<14><01><02><05><00><B7><6F&gt...

2020-02-18 16:40:44 1956 1

原创动手学Pytorch-打卡2

seq2seq中的函数注解载入数据集部分def pad(line, max_len, padding_token): if len(line) > max_len: return line[:max_len] return line + [padding_token] * (max_len - len(line))print(pad(src_vocab[...

2020-02-18 13:26:07 114

原创动手学Pytorch-打卡1

pytorch基本数据类型32位浮点型：torch.FloatTensor。pyorch.Tensor()默认的就是这种类型。64位整型：torch.LongTensor。32位整型：torch.IntTensor。16位整型：torch.ShortTensor。64位浮点型：torch.DoubleTensor。view用法相当于numpy中resize（）的功能，但是用法可...

2020-02-14 12:26:47 106

原创 leetcode之AddTwoNumbers

题设给出两个链表，每个链表皆为逆序的整数，每一个结点代表一位数，例：2 -> 4 -> 3 + 5 -> 6 -> 4此要求是将这两链表相加并输出，格式为7->0->8此前有一错误思路：将两链表中的数据读入到一int变量中，然后将这两个int相加，再将这变量的每一位存到新链表的结点中后发现给出的数据越来越大，超出其容量范围，故此方法不行。通过的思路是：将给出的两链表

2017-02-14 22:04:34 185

原创家庭仿真之任务场景截取改进

#include "class.h"void dealwithtask(string task);int main(){string task1="(:task (open X) (:cond (sort X microwave)))", task2="(:task (takeout X Y) (:cond (sort X cup) (color X red) (sort Y

2016-05-17 23:01:58 218

原创家庭仿真机器人之任务场景截取