首页 > 解决方案 > Google Cloud AI Platform 训练作业:--stream-logs 无限期停止,没有输出

问题描述

我正在提交一份培训工作

gcloud ai-platform jobs submit training [...] --stream-logs

作业提交成功,但终端没有出现日志。“作业 [...] 成功提交”后没有输出。出现,但命令也不会终止。

当我查看在线控制台时,我看到作业正在运行并生成日志(这些日志没有显示在我运行命令的终端中)。即使作业成功完成,命令仍然不会终止。

如果我先gcloud ai-platform jobs submit training不运行--stream-logs然后运行gcloud ai-platform jobs stream-logs新作业,也会发生同样的情况。

你知道这可能发生的任何原因,和/或我可以解决它的任何方法吗?


编辑:我让命令运行了一段时间,在作业已经完成并成功大约 20 分钟后,突然所有日志都出现并且命令终止。所以它在工作,有点,但它似乎需要很长时间才能同步。

标签: google-cloud-platformgcloudgoogle-cloud-ai

解决方案


推荐阅读