apache-spark - Databricks“使用创建表”选项记录在哪里

Question

我正在使用此处记录的 Databricks“CREATE TABLE USING”功能，使用类似以下内容。

create table value_set.value_set_meta 
using csv 
options ( 
  header = "true", 
  delimiter = ",", 
  inferSchema = "false", 
  path = "/FileStore/tables/prod/global/value_set_meta" 
) 

我想知道是否有一个选项可以从所有列（和/或特定列）中修剪空格。此处允许列出和记录的选项在哪里？

标签： apache-sparkapache-spark-sqldatabricks

Answer 1

我打赌选项是

ignoreLeadingWhiteSpace = "true",
ignoreTrailingWhiteSpace = "true",

因为其他选项看起来与pyspark csv reader中记录的选项非常相似。不确定是否可以从特定列中修剪空格。