我正在尝试比较两个文件,每一行都是 JSON 格式。我需要比较两个文件之间的每一行,应该返回差异。由于文件太大,我无法读取和比较每一行。请建议我一些优化方法。
最佳答案
两种可能的方式:
- 使用 Josh 发表的评论中提到的技术。
- 使用这里提到的技术: how to compare 2 json in python .
鉴于您有一个大文件,您最好使用第 1 点中描述的 difflib 技术。
根据对我的以下回答的回复进行编辑:
经过一些研究,处理大数据负载的最佳方法似乎是以流方式处理此负载。通过这种方式,我们可以确保快速处理数据,同时牢记内存使用情况和软件的总体性能。
引用this讨论使用 Python 流式传输 JSON 数据对象的链接。同样看看 ijson - 这是 python 中基于迭代器的 JSON 解析/处理库。
希望这可以帮助您确定一个适合您的用例的库
关于python - 比较两个jsons文件和结果json差异,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/17802076/