google-cloud-platform - 如何防止 Google Cloud Dataproc 集群虚拟机实例自动关闭?
问题描述
在运行 vm instance cluster+ 节点时,即使我在 cluster/dataproc 上使用和运行东西,vm 实例也会在大约 30 分钟左右后自动关闭。我找不到此设置,希望有任何帮助:如何禁用此设置以防止其关闭,甚至如何以防止这种情况发生的方式配置新集群。
谢谢
解决方案
默认 Dataproc 集群没有任何类型的自动关闭功能。
如果您使用的是较旧的 Datalab 初始化操作,您可能会看到 Datalab 自己的非 Dataproc 感知关闭功能,您可以禁用此处建议的方法之一:如何保持 Google Dataproc 主服务器运行?
否则,如果您使用某种模板或复制/粘贴参数来创建 Dataproc 集群,则可能您不小心设置了“计划删除”:https ://cloud.google.com/dataproc/docs/concepts/configuring -集群/计划删除
如果这些设置都不能解释您的情况,您应该从“Cloud Logging”界面访问您的“活动日志”,选择Cloud Dataproc Cluster
并打开activity_log
日志类型以查看谁在删除您的集群的审核日志。或者,如果集群仍然存在于 Dataproc 中,但底层虚拟机正在关闭,请访问“计算引擎虚拟机”日志类别并查看“活动日志”以查看谁在停止您的虚拟机。有时,在共享项目中,项目管理员可能会运行某种脚本来自动关闭虚拟机以节省成本。
推荐阅读
- python - 将数据框值连接到每个列表元素
- apache-spark - 将 spark 升级到 2.4.5 时出现 NoSuchMethodError
- python - 在 Python 中从 API 导出 JSON
- asp.net - 如何让 Json.NET 为具有复杂值的属性设置 IsSpecified 属性?
- django - django paginator 不工作,但链接手动工作
- node.js - 尝试获取令牌时出现 Dropbox 400 错误(身份验证)
- android - 无法在 Android 上使用 Cloudfront 签名 Cookie 播放 hls 视频
- python - 如何解决此列表索引问题?
- java - Base64 解码错误 最后一个单元没有足够的有效位
- node.js - NextJS 错误:您的 `getServerSideProps` 函数没有返回对象