python - 如何在dask中使用所有cpu?
问题描述
尝试通过 dask 并行处理数据帧。
但它似乎并没有使用 cpu 的所有核心。
如何用完所有核心?
partitions 设置为 50,代码为
dd_df.to_parquet('./test_parquet', compute_kwargs={'scheduler':'processes', 'nums':20})
解决方案
推荐阅读
- javascript - 未捕获的类型错误:$(...).find(...).not(...).size 不是函数
- macos - 用于从登录窗口切换用户的 Apple 脚本
- r - 在 geom_text 中指定标签的位置
- authentication - Strapi / Nuxt - 找不到自定义路线
- bash - 我对 bash (macOS) 中的“sed”语句有疑问
- java - 可滚动微调器不显示来自 json API 的项目
- gradle - 升级 Gradle 后“无法解析所有配置文件”
- sql - 根据日期名称获取整月日期
- javascript - VueJS 和 Firebase 存储:如何等到图像上传完成后再将 URI 提交到数据库?
- r - 将 for 循环转换为 foreach 循环