python – 我需要使用django reset_queries()

发布时间：2020-12-20 13:26:30 所属栏目：Python 来源：网络整理

导读：我正在使用 django 1.3,我正在运行Web上下文之外的脚本(从命令行). 我的代码每次都会从数据库中读取10000个条目. 我注意到该过程的内存使用量随着时间的推移而变得越来越大. 我的代码是： def getData(startIndex,chunkSize): dataList =Mydata.objects.filt

我正在使用 django 1.3,我正在运行Web上下文之外的脚本(从命令行).
我的代码每次都会从数据库中读取10000个条目.
我注意到该过程的内存使用量随着时间的推移而变得越来越大.
我的代码是：

def getData(startIndex,chunkSize):
    dataList =Mydata.objects.filter(update_date__isnull = True)[startIndex:startIndex+chunkSize]
    return list(dataList)

if __name__ == '__main__':
   chunkSize = 10000
   startIndex = 0
   dataSize = Mydata.objects.filter(update_date__isnull = True).count()
   while startIndex < dataSize:
       dataList = getData(startIndex,chunkSize)
       startIndex += chunkSize
       do_stuff(dataList)

我的问题是：我需要使用reset_queries()和/或connection.close()
这是内存使用量增加的原因吗？

解决方法

我将从您的查询中使用 only或 defer方法开始.这两个用于仅检索您实际需要的字段,而不是所有字段.您的查询会稍微快一些并且消耗更少的内存,因为不会从数据库中获取所需的字段.

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!