我可以划分我的训练数据并训练每个部分，而不是一次输入我的全部数据吗？

【问题标题】：Can i devide my training data and train every part instead of inputting my whole data at once?我可以划分我的训练数据并训练每个部分，而不是一次输入我的全部数据吗？
【发布时间】：2019-05-15 10:15:34
【问题描述】：

我有一个 8k 的大图像数据集。我想在我的 PC 上训练这些数据，但存在内存问题。所以我想也许我可以将我的数据分成 4 个部分，每个部分包含 2K 图像并训练每个部分一个人在同一个型号上。有可能吗？

【问题讨论】：

标签： deep-learning bigdata training-data

【解决方案1】：

您可以使用 generators 在partitions 中将数据提供给您的模型，而不会填满您的内存。

你应该看看这个tutorial，他们解释了问题并教你如何在Keras中这样做（如果这是你正在使用的框架）

【讨论】：