apache-spark - 即使作业正在运行，Spark UI SQL 选项卡也不显示 SQL

Question

我正在运行一个 spark 作业以从 oracle 获取数据并将其加载到 mongo DB。在运行作业时，如果我去 spark UI 并打开 SQL 选项卡，它不会显示任何数据。但是，其他选项卡（例如作业、执行程序等）正在显示作业详细信息。谁能建议为什么 SQL 选项卡没有显示任何内容？

我使用 spark 2.2.1 并在 chrome 和 safari 中打开 UI

标签： apache-spark

Answer 1

我得到了这个答案。该选项卡仅在 spark 优化 sql 时显示。