pyspark - 将 Jar 文件添加到 Jupyter 笔记本 - : java.lang.ClassNotFoundException: com.teradata.jdbc.TeraDriver

Question

我得到了一个使用这个 bash 脚本运行的 pyspark 脚本：

现在我在 jupyter notebook 上运行 pyspark 脚本。我像这样添加了 teradata jar：

但是，当我稍后尝试使用“spark.read.jdbc”运行查询以检索 teradata 数据时，出现此错误：

我可以知道如何解决这个问题吗？

标签： pysparkjarjupyter-notebookteradata

Answer 1

尝试这个。

os.environ['PYSPARK_SUBMIT_ARGS'] = '--jars /jar/path/ pyspark-shell'