首页 > 解决方案 > Pandas DataFrame 中的 spark.createDataFrame 仅复制标头

问题描述

我对 Spark 很陌生,我正在尝试使用以下方法将 pandas DataFrame 转换为 Spark DataFrame。但是 sparkDF 只有标题列。pandasDF 有 161 条记录,但它们没有被复制,我不明白为什么。

sparkD = spark.createDataFrame(pandasDF)
sparkDF.show()

标签: pandasdataframepyspark

解决方案


推荐阅读