php – 大数据集:mysql_unbuffered_query with innodb?
发布时间:2020-12-13 22:43:39 所属栏目:PHP教程 来源:网络整理
导读:基本上我需要对大数据集进行操作,所以我开始认为我可以使用 mysql_unbuffered_query来不将所有结果加载到RAM中. 但我读到,当我获取行时,我无法在同一个表上运行任何其他查询.如果桌子是innodb,我想知道这仍然是真的吗? Innodb在执行mysql_unbuffered_query
基本上我需要对大数据集进行操作,所以我开始认为我可以使用
mysql_unbuffered_query来不将所有结果加载到RAM中.
但我读到,当我获取行时,我无法在同一个表上运行任何其他查询.如果桌子是innodb,我想知道这仍然是真的吗? Innodb在执行mysql_unbuffered_query时是否使用行级锁定? 伪代码是: $q = mysql_unbuffered_query("SELECT * FROM largeTable"); while($r = fetch($q)) { if (some condition) mysql_query("UPDATE largeTable SET field = somevalue WHERE id = someid"); } 解决方法
您无法运行另一个查询的原因是查询的结果未被预取,并且您正在处理游标.您仍然可以打开另一个连接来处理其他查询.
请记住,MySQL中有几个设置,影响执行查询后连接保持打开的时间,如果数据集很大,服务器可以在处理查询之前关闭连接(请参阅wait_timeout和net_write_timeout) ) 好的替代方法是在循环中执行查询,限制行数,并使用WHERE pk>值ORDER BY pk ASC,其中pk是主键,并且值是从上一个查询中检索到的最后一个值(就好像只实现了限制,偏移性能会在大偏移时降低) (编辑:李大同) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |