加入收藏 | 设为首页 | 会员中心 | 我要投稿 李大同 (https://www.lidatong.com.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 站长学院 > PHP教程 > 正文

php – 大数据集:mysql_unbuffered_query with innodb?

发布时间:2020-12-13 22:43:39 所属栏目:PHP教程 来源:网络整理
导读:基本上我需要对大数据集进行操作,所以我开始认为我可以使用 mysql_unbuffered_query来不将所有结果加载到RAM中. 但我读到,当我获取行时,我无法在同一个表上运行任何其他查询.如果桌子是innodb,我想知道这仍然是真的吗? Innodb在执行mysql_unbuffered_query
基本上我需要对大数据集进行操作,所以我开始认为我可以使用 mysql_unbuffered_query来不将所有结果加载到RAM中.

但我读到,当我获取行时,我无法在同一个表上运行任何其他查询.如果桌子是innodb,我想知道这仍然是真的吗?

Innodb在执行mysql_unbuffered_query时是否使用行级锁定?

伪代码是:

$q = mysql_unbuffered_query("SELECT * FROM largeTable");
while($r = fetch($q)) {
 if (some condition)
   mysql_query("UPDATE largeTable SET field = somevalue WHERE id = someid");
}

解决方法

您无法运行另一个查询的原因是查询的结果未被预取,并且您正在处理游标.您仍然可以打开另一个连接来处理其他查询.

请记住,MySQL中有几个设置,影响执行查询后连接保持打开的时间,如果数据集很大,服务器可以在处理查询之前关闭连接(请参阅wait_timeout和net_write_timeout) )

好的替代方法是在循环中执行查询,限制行数,并使用WHERE pk>值ORDER BY pk ASC,其中pk是主键,并且值是从上一个查询中检索到的最后一个值(就好像只实现了限制,偏移性能会在大偏移时降低)

(编辑:李大同)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    推荐文章
      热点阅读