php – 非常大的xml文件到mysql

发布时间：2020-12-13 22:50:06 所属栏目：PHP教程来源：网络整理

导读：我有一个17GB的xml文件.我想将它存储在 MySQL中.我在php中使用xmlparser尝试了它,但它表示超过30秒的最大执行时间并且只插入几行.我甚至尝试使用元素树在python中,但它占用了大量的内存,在2 GB RAM的笔记本电脑中给出了内存错误.请提出一些有效的方法. 解决

我有一个17GB的xml文件.我想将它存储在 MySQL中.我在php中使用xmlparser尝试了它,但它表示超过30秒的最大执行时间并且只插入几行.我甚至尝试使用元素树在python中,但它占用了大量的内存,在2 GB RAM的笔记本电脑中给出了内存错误.请提出一些有效的方法.

解决方法

您需要使用 Python的xml.sax或 lxml.etree的iterparse().

这些是解析xml的“事件驱动”方法.您告诉解析器您要监听哪个“节点”,并在每次找到该节点时触发一个函数.

这将使您的内存使用率保持在较低水平,并避免您遇到的错误.

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!