python - 转换大型数据集,使其沿不同维度拆分为文件?
问题描述
我有一个大型数据集(~200gb)的数据,其中每个 csv 文件都包含一个时间点的整个区域的数据。转换它以使每个文件包含整个时间段内一个网格点的数据的最快方法是什么?理想情况下,每个文件最终都会作为一维压缩 npz 文件。
解决方案
推荐阅读
- nginx - 如何配置 Nginx 从两个不同的文件夹提供桌面版和移动版
- stata - 创建虚拟变量的问题
- xml - 根据属性名 xmlstarlet 更新标签值
- google-cloud-sql - 谷歌云运行 quarkus 谷歌云 sql
- c# - EmguCV、Xamarin Forms、C#、ALPR(智能手机摄像头的车牌识别)
- automation - 如何在 Linx 上查看源代码管理更改
- excel - 数组输出消失
- android - Flutter IAP 订阅
- azure - 无法访问自行创建的存储帐户
- javascript - 什么是正确的代码放入我的 JavaScript 以使按钮工作?