python - 完全显示 DataFrame PySpark

Question

我有一个数据框，我正在使用 PySpark，当我显示数据时，它显示得不是很好，如下图所示：

在此处输入图像描述

我该如何解决？谢谢你。

标签： pythonpyspark

Answer 1

你能做的并不多。问题在于换行。一个常见的解决方法是使用 pandas

df.limit(5).toPandas().head()

如果您使用的是 Jupyter Notebook，您可以在此处阅读更多选择：pyspark show dataframe as table with Horizo​​ntal scroll in ipython notebook