自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

自律 · 克制

github.com/guotong1988

原创 seq2seq attention代码实现 / attention_decoder使用

from tensorflow.contrib.legacy_seq2seq.python.ops import seq2seq as seq2seq_lib # padding的是0 self.sequence_len = tf.reduce_s...

2019-01-31 12:05:20

阅读数 407

评论数 0

原创 python numpy 判断两个数组完全相等

import numpy as np a = np.array([1,2,3]) b = np.array([1,2,3]) print((a==b).all()) a = np.array([3,2,1]) b = np.array([1,2,3]) print((a==b).all())

2019-01-25 17:21:29

阅读数 17416

评论数 0

原创 tensorflow 得到RNN的最后一个 非padding 的 hidden state

def collect_final_step_of_lstm(lstm_representation, lengths): # lstm_representation: [batch_size, passsage_length, dim] # lengths: [batch_siz...

2019-01-21 18:06:35

阅读数 246

评论数 1

原创 一个小程序判断tensorflow模型是否restore成功

import tensorflow as tf import os ckpt_dir = "./model/" if os.path.exists(ckpt_dir): epoch = tf.Variable(0, name='epoch&...

2019-01-17 19:42:05

阅读数 301

评论数 0

原创 一些attention的tensorflow实现 和使用方法

https://github.com/allenai/document-qa/blob/master/docqa/nn/attention.py

2019-01-16 16:24:48

阅读数 1553

评论数 0

原创 relative position embedding 相关论文和代码

https://github.com/tensorflow/tensor2tensor/blob/master/tensor2tensor/layers/common_attention.py 论文: Self-Attention with Relative Position Represen...

2019-01-16 12:04:48

阅读数 596

评论数 0

原创 一组向量 和 一组向量 的attention计算,pytorch实现

class GetAttentionHiddens(nn.Module): def __init__(self, input_size, attention_hidden_size, similarity_attention = False): super(GetAtten...

2019-01-16 10:29:58

阅读数 415

评论数 0

原创 一个向量 和 一组向量 的attention计算, pytorch实现

class BilinearSeqAttn(nn.Module): """A bilinear attention layer over a sequence X w.r.t y: * o_i = x_i'Wy for...

2019-01-16 10:07:44

阅读数 370

评论数 0

原创 pointer network 的pytorch实现

class GetSpanStartEnd(nn.Module): # supports MLP attention and GRU for pointer network updating def __init__(self, x_size, h_size, opt, do_in...

2019-01-16 09:58:13

阅读数 580

评论数 0

原创 linear self attention 的pytorch实现 和使用

# For summarizing a set of vectors into a single vector class LinearSelfAttn(nn.Module): """Self attention over a sequence: * ...

2019-01-16 09:46:29

阅读数 1354

评论数 0

原创 深度学习+推荐系统 初步理解

给定user_id和item_id和user对item的score训练, user_id1, item_id1, score1 user_id1, item_id2, score2 user_id2, item_id1, score3 ... 预测给定user_id和item_id时的score...

2019-01-16 09:17:47

阅读数 241

评论数 0

原创 各种attention的论文里的总结

https://arxiv.org/pdf/1711.07341.pdf

2019-01-15 15:54:21

阅读数 485

评论数 0

原创 NER 加词典

2019-01-14 15:54:10

阅读数 351

评论数 0

原创 position embedding 代码

第二种实现

2019-01-14 15:49:49

阅读数 1597

评论数 2

原创 AUC 会随1/0 label数比例而变

import numpy as np from sklearn import metrics y_true = np.array([0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 1]) y_scores = np.array([0.1, 0.1,0.1,0.1,0.1,0.1, 0...

2019-01-11 11:40:53

阅读数 159

评论数 0

原创 numpy,True/False转1/0,bool转int,float转bool,float转int1/0

import numpy as np a = np.array([0.5,0.4,0.6]) print((a>0.5).astype(int))

2019-01-11 11:17:38

阅读数 3340

评论数 4

原创 lucene 7 删除索引 实例

import org.apache.lucene.analysis.standard.StandardAnalyzer; import org.apache.lucene.document.Document; import org.apache.lucene.document.Field; imp...

2019-01-06 09:13:31

阅读数 351

评论数 1

转载 劳逆讲Neural Symbolic Machines的视频,以及他的其他工作

Neural Symbolic Machines: Learning Semantic Parsers on Freebase with Weak Supervision 以及 Memory Augmented Policy Optimization for Program Synthesis w...

2019-01-04 14:36:00

阅读数 300

评论数 0

提示
确定要删除当前文章?
取消 删除