apache-spark - 如何将集群 Spark 中的所有内核用于一个进程？

Question

如何将集群 Spark 上的所有内核用于一个进程？

我无法配置所有核心以在集群 Spark 中运行我的进程。

标签： apache-spark

Answer 1

除了评论中提到的 - 我建议在执行程序中设置核心数量还考虑分区主题。否则，您可能会使用所有内核，但什么也不做。