首页 > 解决方案 > 如何像运行 Python 作业一样运行 pyspark shell 代码

问题描述

我对火花很陌生。

我在 pyspark 中创建了 spark 代码,但它是 repl shell,我怎样才能将它作为脚本运行。

我试过python script.py但它失败了,因为它无法访问火花库。

标签: apache-sparkpyspark

解决方案


spark-submit script.py是提交pyspark代码的方式。

在使用它之前,请确保 pyspark 和 spark 在您的环境中正确设置。

如果还没有完成,请点击以下链接


推荐阅读