scala - 参考上传的JAR库

问题描述

我已将一组支持功能helper.jar计入库并导入 Databricks 集群。jar 安装在集群上，但我无法引用库中的函数。

jar 导入已经过测试，集群重新启动，并且可以在 InelliJ 中引用该 jar，它是作为 Azure Spark/HDInsight 项目开发的。

//next line generates error value helper is not a member of org.apache.spark.sql.SparkSession
import helper 

//nex line generates error: not found: value fn_conversion 
display(df.withColumn("RevenueConstantUSD", fn_conversion($"Revenue"))

我希望该helper功能在库部署后或可能在添加import命令后可见。

编辑：添加了有关 IntelliJ 项目类型的信息

标签： scalaapache-sparkjardatabricks

scala - 参考上传的JAR库

问题描述

解决方案

推荐阅读