Keras + LSTM/RNN：新预测的“X”维数问题

Question

总结

在模型已经正确生成后，我无法将我的输入数据的正确尺寸提供给预测。

我收到以下错误：

ValueError: Error when checking : expected lstm_13_input to have shape (None, 40, 39) but got array with shape (1, 39, 39)

背景

• 使用 Anaconda 作为我的虚拟环境
• Keras 2.0.6 版
• TensorFlow 版本 1.1.0

我正在创建一个非常接近 this tutorial 的示例。

代码

以下是相关的sn-ps代码：

from keras.models import Sequential
from keras.layers import Dense, Activation, Dropout
from keras.layers import LSTM,TimeDistributed,SimpleRNN
from keras.utils.data_utils import get_file
import numpy as np
from time import sleep
import random
import sys

...

X = np.zeros((len(sentences), maxlen, len(chars)), dtype=np.bool)
y = np.zeros((len(sentences),maxlen, len(chars)), dtype=np.bool) # y is also a sequence , or  a seq of 1 hot vectors
for i, sentence in enumerate(sentences):
    for t, char in enumerate(sentence):
        X[i, t, char_indices[char]] = 1

for i, sentence in enumerate(next_chars):
    for t, char in enumerate(sentence):
        y[i, t, char_indices[char]] = 1

...

model = Sequential()
model.add(LSTM(512, return_sequences=True, input_shape=(maxlen, len(chars))))  # original one
model.add(LSTM(512, return_sequences=True)) #- original
model.add(Dropout(0.2))
model.add(TimeDistributed(Dense(len(chars))))
model.add(Activation('softmax'))
model.compile(loss='categorical_crossentropy', optimizer='rmsprop')

...

history=model.fit(X, y, batch_size=128, nb_epoch=1,verbose=0)

...

seed_string="brutus:\nbeing so moved, he will not spare"
x=np.zeros((1, len(seed_string), len(chars)))
for t, char in enumerate(seed_string):
    x[0, t, char_indices[char]] = 1.
preds = model.predict(x, verbose=0)[0]

错误

在最后一行出现错误，并出现以下错误：

ValueError: Error when checking : expected lstm_13_input to have shape (None, 40, 39) but got array with shape (1, 39, 39)

努力解决

我玩过 seed_string 和由它生成的 x 的维度，但无论我如何尝试调整它们，我总是有某种不匹配由于None 的这个要求（我认为）。需要明确的是，我从种子字符串中添加或删除了字符，因此它是40 字符。但是，当我将它设置为40 时，错误说我实际上有41，而当我将它设置为39 时，它说我有39，如上所示。还有其他事情——我不明白——在这里发生。

我查看了 Reshape's code 和 example of how to use it，但由于 Keras 的 Reshape 是用于模型层，我什至不明白我是怎么做到的可以使用它来重塑预测的输入，而 Numpy 无法重塑创建 None 维度（至少据我所知）。

Answer 1

seed_string 的长度需要与maxlen 匹配。您可以使用pad_sequences 处理字符串比maxlen 更短或更长的情况。在你的情况下，你的字符串太长了。

from keras.preprocessing.sequence import pad_sequences

seed_string = "brutus:\nbeing so moved, he will not spare"

x = np.zeros((1, len(seed_string), len(chars)))

for t, char in enumerate(seed_string):
    x[0, t, char_indices[char]] = 1.

x = pad_sequences(x, maxlen=maxlen)

preds = model.predict(x, verbose=0)[0]