首页 > 解决方案 > 如何读取一个非常大的 json 文件并出现一些错误?

问题描述

我正在尝试将一个大型(~10GB)JSON 文件读入 python。考虑到文件的大小,检查文件很困难,而且从以前读取文件的尝试中可以明显看出 JSON 文件中可能存在一些错误(即我收到错误“额外数据:第 2 行第 1 列(字符 69009)”或“期望用双引号括起来的属性名称:第 1 行第 2 列(字符 1)”,因此在下面添加了第 8 行)。处理如此大的文件会带来一些重大挑战,到目前为止我提出的代码如下所示,我不确定还需要做什么才能读取 JSON 文件。任何帮助将不胜感激 - 谢谢! 链接到代码截图

标签: jsonbigdata

解决方案


推荐阅读