首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >如何在mysql中处理超长的SQL INSERT语句

问如何在mysql中处理超长的SQL INSERT语句
EN

Stack Overflow用户
提问于 2015-08-24 18:16:55
回答 2查看 1.2K关注 0票数 0

我使用以下(python)代码生成一个(MySQL) SQL语句(还有更多的列,为了简单起见,我省略了它们):

代码语言:javascript
复制
mylist = [('1', '2', '3'),
          ('4', '5', '6'),
          .
          .
          .
          ('7', '8', '9')]

sql_statement = "insert into mytable (col1, col2, col3) values "

for i in mylist:
    if sql_statement == "insert into mytable (col1, col2, col3) values ":
        # append this for the 1st element
        sql_statement += "(" + i[0] + ", " + i[1] + ", " + i[2] + ")"
    else:
        # append this for everything else
        sql_statement += ", (" + i[0] + ", " + i[1] + ", " + i[2] + ")"

这将产生一个字符串,如下所示:

代码语言:javascript
复制
sql_statement = "insert into mytable (col1, col2, col3) values (1, 2, 3), (4, 5, 6), ... (7, 8, 9)"

然后,我使用sql_statement来执行sql语句。

这种方法的问题是,sql_statement字符串变得很长,而insert并不考虑所有数据。

对此有何建议吗?

更新:准备语句是可行的。这样,(python)代码如下所示:

代码语言:javascript
复制
sql_statement = "insert into mytable (col1, col2, col3) values (%s, %s, %s)"

for i in mylist:
    cursor.execute(sql_statement, i)
EN

回答 2

Stack Overflow用户

回答已采纳

发布于 2015-08-24 18:28:44

您使用的python库是否支持已准备好的参数化查询?我发现,像这样的多值插入和重复执行准备好的语句(至少在.Net中)之间的性能差异在所有情况下都是最小的,但在极端情况下除外。(在这些情况下,两者的组合是最佳的。)

或者,只需跟踪查询长度,在查询变得太大之前执行,然后重新初始化字符串&继续,直到处理完所有行。

票数 1
EN

Stack Overflow用户

发布于 2015-08-24 18:23:37

创建事务并逐个插入。最后把它交出来。因此,只有在一个调用中,所有insert操作提交。

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/32189012

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档