java - StringType 问题：线程“main”scala.MatchError 中的异常：org.apache.spark.sql.types.StringType@

Question

@Override
public Option<DataType> getCatalystType(int sqlType, String typeName, int size, MetadataBuilder md) {
    switch (sqlType) {
    case java.sql.Types.JAVA_OBJECT:
        switch (typeName) {
        case "map(varchar(2147483647),varchar(2147483647))":
            return Option.apply(DataTypes.createMapType(new StringType(), new StringType()));               
        }
        break;
    }
    return super.getCatalystType(sqlType, typeName, size, md);      
}

代码用于在返回时支持复杂的数据类型JAVA_OBJECT。同样的代码，我用 Scala 编写的，运行良好。但是当在 Java 中使用上面的代码时，它给出了：

Exception in thread "main" scala.MatchError: org.apache.spark.sql.types.StringType@582b14e2 (of class org.apache.spark.sql.types.StringType).

---

Scala 代码供参考：

override def getCatalystType(sqlType: Int, typeName: String, size: Int, md: MetadataBuilder): Option[DataType] = sqlType match {
    case java.sql.Types.JAVA_OBJECT =>
      typeName match {
        case "map(varchar(2147483647),varchar(2147483647))" => Option(DataTypes.createMapType(StringType, StringType))
        case "BIT" => Option(BooleanType)
        case _ => None
      }
    case _ => None
  }

标签： javascalaapache-spark

Answer 1

改用单例DataTypes.StringType（推荐）：

...
...(DataTypes.createMapType(DataTypes.StringType, DataTypes.StringType))          

---

表示字符串值的数据类型。请使用单例 DataTypes.StringType。