python - 我的 colab 笔记本崩溃了，我该如何解决？

Question

当我想在 colab 中通过 GPU 运行 beysian 个性化排名时收到此消息，我该如何解决这个问题？

消息是：

GPU 训练要求因子大小为 32 - 1 的倍数。将因子从 100 增加到 127。

标签： pythongoogle-colaboratory

Answer 1

可能是 google colab 内存不足，为什么？因为我们一次加载所有数据。或者一次生成所有数据。示例：具有 12 GB 内存的 google colab。并且它的内存用完了。

所以我的建议是：我们可以分块处理这些数据。如果数据的总大小为 12 GB。比我们可以将它分成 1 Gb 的块（文件）。12 GB 数据 = 12 个 1 Gb 块（文件），所以现在我们只需将 1 GB 文件加载到 ram 中。这不会使我们的笔记本崩溃。