docker - 使用 docker 镜像在 Mesos 上运行 Spark

Question

我在使用 docker 在 Mesos 上运行 spark 时遇到问题。

集群详情：

3 个节点 mesos 集群（M1 - Mesos 主节点，M2 和 M3 - Mesos 从节点）

操作系统：CentOS

我可以在没有 Docker 的情况下在 Mesos 上运行 spark 应用程序，但是当我尝试使用 docker（Spark 部署模式 - 集群）时，我注意到以下内容

• 执行器在 2 个 mesos slave（M2 和 M3）上启动
• 司机在M2
• M3 上的执行程序无法与 M2 上的驱动程序容器通信（执行程序正在尝试联系 127.0.0.1 上的驱动程序）
• M2 上的执行程序能够联系同一台机器上的驱动程序，并且应用程序也完成了。

问题

1. 我需要设置网络以使 Docker 工作吗？

2. Mesos 中默认的 docker 网络设置是什么？

标签： dockerapache-sparknetworkingmesos