csv - 在 csv 中存储 Pyspark 数据创建问题
问题描述
我正在尝试将我的 pyspark 输出存储到 csv 中，但是当我尝试将其保存在 csv 中时，输出看起来并不相同。我有这种形式的输出：
当我尝试将其转换为 csv 时，由于数据的大小，Concat 任务列无法正确显示。鉴于我的要求，我有必要以 csv 格式存储数据。有没有办法解决这个问题。（PS-我还看到列显示无意义的值，即使 pyspark 输出显示正确的值）
我正在尝试将我的 pyspark 输出存储到 csv 中，但是当我尝试将其保存在 csv 中时，输出看起来并不相同。我有这种形式的输出：
当我尝试将其转换为 csv 时，由于数据的大小，Concat 任务列无法正确显示。鉴于我的要求，我有必要以 csv 格式存储数据。有没有办法解决这个问题。（PS-我还看到列显示无意义的值，即使 pyspark 输出显示正确的值）
标签： csvpysparkexport-to-csv