首页 > 解决方案 > 如何在不使用 Spark 和 Pandas 的情况下在 python 中将 CSV 文件转换为 Parquet csv2parquet

问题描述

我是 python 新手,我目前的要求是,我需要使用 csv2parquet 包将 CSV 文件转换为 parquet 格式。

我提到了https://pypi.org/project/csv2parquet/但没有得到太多澄清。谁能帮我?

提前致谢。

标签: python-3.xcsv

解决方案


解决了一些问题后,我使用此代码将简单的 CSV 文件转换为镶木地板格式,它对我有用。

在您的系统中安装 csv2parquet python 包。

pip install csv2parquet

CSV 文件数据示例

employees_detail.csv

蟒蛇代码:

import csv2parquet
from subprocess import run

command = 'csv2parquet "C:\\Users\\Dhandapani Sudhakar\\Desktop\\employees_detail.csv"'
run(command)

转换后的结果拼花

employees_detail.parquet

或者你可以直接在命令提示符下执行命令

(csvtoparquetenv) A:\POCS\Project_Envs\csvtoparquetenv>csv2parquet "C:\Users\Dhandapani Sudhakar\Desktop\employees_detail.csv"

推荐阅读