python序列如何使用_python – 我们应该如何使用pad_sequences填充keras中的文本序列？...

我自己使用从网络教程和我自己的直觉中获得的知识,在keras中编写了一个

sequence to sequence学习LSTM.我将示例文本转换为序列,然后使用keras中的pad_sequence函数进行填充.

from keras.preprocessing.text import Tokenizer,base_filter

from keras.preprocessing.sequence import pad_sequences

def shift(seq, n):

n = n % len(seq)

return seq[n:] + seq[:n]

txt="abcdefghijklmn"*100

tk = Tokenizer(nb_words=2000, filters=base_filter(), lower=True, split=" ")

tk.fit_on_texts(txt)

x = tk.texts_to_sequences(txt)

#shifing to left

y = shift(x,1)

#padding sequence

max_len = 100

max_features=len(tk.word_counts)

X = pad_sequences(x, maxlen=max_len)

Y = pad_sequences(y, maxlen=max_len)

仔细检查后,我发现我的填充序列看起来像这样

>>> X[0:6]

array([[0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0