如何将CSV文件迁移到Sqlite3(或MySQL)？ – Python

发布时间：2020-12-12 19:05:41 所属栏目：百科来源：网络整理

导读：我正在使用 Python来逐行保存数据……但这非常慢！ CSV包含7000万行,用我的脚本我可以每秒存储1千行. 这就是我的脚本的样子 reader = csv.reader(open('test_results.csv','r'))for row in reader: TestResult(type=row[0],name=row[1],result=row[2]).save(

我正在使用 Python来逐行保存数据……但这非常慢！

CSV包含7000万行,用我的脚本我可以每秒存储1千行.

这就是我的脚本的样子

reader = csv.reader(open('test_results.csv','r'))
for row in reader:
    TestResult(type=row[0],name=row[1],result=row[2]).save()

我估计,为了进行测试,我可能需要考虑MySQL或PostgreSQL.

任何想法或提示？这是我第一次处理如此庞大的数据量.

（编辑：李大同）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!