dask - DASK - MemoryError：无法分配形状和数据类型为 int64 的数组

Question

出现错误...

MemoryError: 无法分配形状 (15145488917,) 和数据类型 int64 的数组

...尝试以下合并时...

master = dd.merge(df1, df2)

之前的代码是...

df1.count().compute()

...带输出...

den    312019
num    312019
dtype: int64

...和...

df2.count().compute()

...带输出...

den    970531
num    970531
dtype: int64

相同的操作在 pandas 中有效，没有问题。

标签： dask