加入收藏 | 设为首页 | 会员中心 | 我要投稿 李大同 (https://www.lidatong.com.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 百科 > 正文

Postgresql单表插入百万数据

发布时间:2020-12-13 17:32:45 所属栏目:百科 来源:网络整理
导读:说到插入数据,一开始就想到: insert int A values(*******************) 插入多条数据,最多想到: 1.prepare,然后再bind参数,最后一次性插入多条 2.写成这样: insert into A values(**********),(*************),(*****************) 但是在百万数据面

说到插入数据,一开始就想到:

insert int A values(*******************)

插入多条数据,最多想到:

1.prepare,然后再bind参数,最后一次性插入多条

2.写成这样:

insert into A values(**********),(*************),(*****************)

但是在百万数据面前,都太慢了。

postgresql提供了copy函数,方便批量导入数据。

copy_from的参数说明:copy_from(file, table,sep='t',null='N',size=8192,columns=None)

python写法如下:

#encoding=utf-8
import psycopg2
import StringIO
if __name__=='__main__':
    s = ""
    for i in range(0,1000000):
        s += str(i)+"taaat13434t1t2013-01-11t1t2n"
    conn = psycopg2.connect(host='localhost',user="test",password="********",database="test")
    cur = conn.cursor()
    cur.copy_from(StringIO.StringIO(s),'tb_user',columns=('id','userame','passwd','roleid','lasttime','failnum','info'))
    conn.commit()
    cur.close()
    conn.close()
    print 'done'

(编辑:李大同)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    推荐文章
      热点阅读