【问题标题】:ValueError: Error when checking input: expected lstm_1_input to have shape (None, 296, 2048) but got array with shape (296, 2048, 1)ValueError:检查输入时出错:预期 lstm_1_input 具有形状 (None, 296, 2048) 但得到的数组具有形状 (296, 2048, 1)
【发布时间】:2017-09-08 13:37:20
【问题描述】:

我正面临标题中的错误。我有数千个视频,每个视频有 37 帧。我已经使用 CNN 模型为每一帧提取了特征并保存了它们。 我有一个堆叠的 LSTM 模型:

batch_size = 8
features_length = 2048
seq_length = 37*batch_size
in_shape = (seq_length, features_length)
lstm_model = Sequential()
lstm_model.add(LSTM(2048, return_sequences=True, input_shape = in_shape, dropout=0.5))
lstm_model.add(Flatten())
lstm_model.add(Dense(512, activation='relu'))
lstm_model.add(Dropout(0.5))
lstm_model.add(Dense(number_of_classes, activation='softmax'))
optimizer = Adam(lr=1e-6)
lstm_model.compile(loss='categorical_crossentropy', optimizer=optimizer, metrics = metrics)
lstm_model.fit_generator(generator = generator, steps_per_epoch = train_steps_per_epoch, epochs = nb_epoch, verbose = 1, callbacks=[checkpointer, tb, early_stopper, csv_logger], validation_data=val_generator, validation_steps = val_steps_per_epoch)

我有一台发电机;数据包括所有培训视频。

def generator(data):

    while 1:
        X, y = [], []
        for _ in range(batch_size):
            sequence = None
            sample = random.choice(data)
            folder_content, folder_name, class_name, video_features_loc = get_video_features(sample)
            for f in folder_content:
                image_feature_location = video_features_loc + f
                feat = get_extracted_feature(image_feature_location)

                X.append(feat)
                y.append(get_one_class_rep(class_name))         
        yield np.array(X), np.array(y)

生成器数据中 X 的形状为 = (296, 2048, 1)

生成器数据中 y 的形状为 = (296, 27)

此代码引发错误。我知道有几个类似的问题。我尝试了那里的建议,但没有运气。例如,建议之一是重塑数组;

X = np.reshape(X, (X.shape[2], X.shape[0], X.shape[1]))

如何将我的输入提供给 LSTM?

提前致谢

【问题讨论】:

  • X = np.reshape(X, (X.shape[2], X.shape[0], X.shape[1]))

标签: machine-learning computer-vision deep-learning keras lstm


【解决方案1】:

错误消息会告诉您所需的一切。

X 的形状应该是(number of samples, 296, 2048) - 看起来你只有一个样本,X 的形状。


但是如果你有 37 帧,你肯定应该改变你的模型来接受:(Batch size, 37, 2048) - 这里,批量大小似乎是 8。

seq_length=37 

【讨论】:

  • 非常感谢您的回答@Daniel。正如你所说,我改变了X形状; (1, 296, 2048) 1 是样本数。但是这次我得到了错误; “ValueError:输入数组的样本数应与目标数组相同。找到 1 个输入样本和 296 个目标样本。”
  • 我知道这个错误是关于 X 和 y 值的大小不同。我已经在 Keras 处理 LSTM 一个月了。每次我尝试在 Keras 中使用 LSTM 时,我都会被这些输入形状困住......
  • 根据你实际拥有的东西来塑造 X:(NumberOfExamples = numberOfVideos, TimeSteps = framesInAVideo, featuresInAFrame or pixelsInAFrame) -- 一旦你理解了你的数据并正确地塑造了它,那么你就创造了input_shape=(TimeSteps,features)
猜你喜欢
  • 2018-01-01
  • 2020-09-01
  • 1970-01-01
  • 1970-01-01
  • 2018-08-03
  • 2022-11-03
  • 2021-02-26
  • 1970-01-01
  • 2019-08-21
相关资源
最近更新 更多