scala - spark禁用对引号的支持

Question

val dfInput = spark.read
  .option("delimiter", "\u0001")
  .csv(file)

默认情况下，它正在读取引号（忽略引号之间的分隔符）。我可以添加.option("quote", "\u0000")一个解决方法，但我正在寻找一个更永久的解决方案，因为这是一个 hacky 修复，不阅读任何引号。支持这样的东西吗？

标签： scalaapache-spark

Answer 1

看起来还没有内置任何东西，您可以在此处查看当前功能。