perl – 使用XML :: TWIG进行大型xml文件解析失败
发布时间:2020-12-16 06:22:40 所属栏目:大数据 来源:网络整理
导读:我正在尝试使用 XML :: Twig解析一个大的xml文件(大约100,000条记录),但perl解析失败并出现错误: perl.exe - Application Error: The instruction at "0x28086920" referenced memory at "0x00000004". The memory could not be "written"... 我读到XML ::
我正在尝试使用
XML :: Twig解析一个大的xml文件(大约100,000条记录),但perl解析失败并出现错误:
perl.exe - Application Error: The instruction at "0x28086920" referenced memory at "0x00000004". The memory could not be "written"... 我读到XML :: Twig解析大型xml文件没有任何问题,但在我的情况下,它失败并出现上述错误. 我的.pl文件有一个forloop代码,可以旋转100,000次,如下所示: foreach my $d1(@detailData) { if ($d1->first_child('a')->getElementsByTagName('b')) { $id= $d1->first_child('a')->first_child('x')->field('b'); } .... ..... ...... } 在forloop里面我有大约20个如果循环如上.它是否导致内存问题? 任何人都可以建议我如何克服这些记忆问题? 解决方法
在谷歌搜索perl“内存无法写入”之后,我猜测问题来自于在内存中一次性加载文件,例如参见
http://www.perlmonks.org/?node_id=457265或(不太可能)混合使用不同编译器编译的模块(例如使用Activestate)使用Cygwin perl打包,见
http://cygwin.com/ml/cygwin/2006-12/msg00798.html).
对于XML :: Twig来处理大文件,您需要告诉它在哪个级别处理文件的各个部分(通常通过定义处理子树的处理程序,然后丢弃它),请参阅模块的文档. (编辑:李大同) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |