首页 > 解决方案 > 如何防止 Google Cloud Dataproc 集群虚拟机实例自动关闭?

问题描述

在运行 vm instance cluster+ 节点时,即使我在 cluster/dataproc 上使用和运行东西,vm 实例也会在大约 30 分钟左右后自动关闭。我找不到此设置,希望有任何帮助:如何禁用此设置以防止其关闭,甚至如何以防止这种情况发生的方式配置新集群。

谢谢

标签: google-cloud-platformvirtual-machinecluster-computingshutdowngoogle-cloud-dataproc

解决方案


默认 Dataproc 集群没有任何类型的自动关闭功能。

如果您使用的是较旧的 Datalab 初始化操作,您可能会看到 Datalab 自己的非 Dataproc 感知关闭功能,您可以禁用此处建议的方法之一:如何保持 Google Dataproc 主服务器运行?

否则,如果您使用某种模板或复制/粘贴参数来创建 Dataproc 集群,则可能您不小心设置了“计划删除”:https ://cloud.google.com/dataproc/docs/concepts/configuring -集群/计划删除

如果这些设置都不能解释您的情况,您应该从“Cloud Logging”界面访问您的“活动日志”,选择Cloud Dataproc Cluster并打开activity_log日志类型以查看谁在删除您的集群的审核日志。或者,如果集群仍然存在于 Dataproc 中,但底层虚拟机正在关闭,请访问“计算引擎虚拟机”日志类别并查看“活动日志”以查看谁在停止您的虚拟机。有时,在共享项目中,项目管理员可能会运行某种脚本来自动关闭虚拟机以节省成本。


推荐阅读