Python MySQLdb - 保持光标打开有什么好处吗？

Question

[Python/MySQLdb] - CentOS - Linux - VPS

我有一个页面可以解析一个大文件，每次运行最多查询 100 次数据。数据库非常大，我正在尝试减少此脚本的执行时间。

我的 SQL 函数在一个类中，目前连接对象是类实例化时创建的类变量。我有各种获取和查询函数，每次调用它们时都会从连接对象创建一个游标。在创建连接对象并重用它时创建游标会更快，还是在每次调用游标时创建游标会更好？

import MySQLdb as mdb
class parse:
    con = mdb.connect( server, username, password, dbname )
    #cur = con.cursor() ## create here?
    def q( self, q ):
        cur = self.con.cursor() ## it's currently here
        cur.execute( q )

也欢迎任何其他关于如何加快脚本速度的建议。对于脚本中的所有查询，插入语句都是相同的。

Answer 1

打开和关闭连接从来都不是免费的，它总是会浪费一些性能。

您不想让连接保持打开状态的原因是，如果两个请求同时进入，第二个请求必须等到第一个请求完成后才能执行任何工作。

解决此问题的一种方法是使用连接池。您创建了一堆打开的连接，然后重用它们。每次您需要执行查询时，您都会检查池外的连接，执行请求，然后将其放回池中。

设置所有这些可能非常繁琐，所以我建议使用SQLAlchemy。内置connection pooling，开销相对较低，支持MySQL。

既然你关心速度，我只会使用 SQLAlchemy 的核心部分，因为 ORM 部分来得有点慢。