c – 读取200 MB的json文件需要1.5 GB的内存

发布时间：2020-12-16 07:01:55 所属栏目：百科来源：网络整理

导读：我正在使用C中的json_spirit库来解析一个200 MB的json文件.让我感到惊讶的是,当我在程序中读入内存时,会使用1.5 GB的RAM.在反序列化json时,这是预期的吗？这是我在json文件中加载的方式： std::ifstream istream(path.c_str()); json_spirit::mValue val; j

我正在使用C中的json_spirit库来解析一个200 MB的json文件.让我感到惊讶的是,当我在程序中读入内存时,会使用1.5 GB的RAM.在反序列化json时,这是预期的吗？

这是我在json文件中加载的方式：

std::ifstream istream(path.c_str());
 json_spirit::mValue val;
 json_spirit::read(istream,val);

解决方法

你可以尝试 rapidjson.

它针对内存使用和性能进行了优化.

通过使用insitu-parsing选项(即它更改解析的源字符串),每个JSON值只产生16个字节以将DOM存储在32位体系结构中.字符串值将使用指向修改后的源字符串的指针.

我希望内存使用量会少得多.

另一方面,rapidjson也支持SAX风格的解析.如果应用程序只需要从头到尾遍历JSON文件(例如,做一些统计),那么SAX风格的API将更快且内存消耗很少(程序堆栈最大字符串值长度).

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!