美文网首页
python 使用mysql连接池

python 使用mysql连接池

作者: 0384a3dcf39a | 来源:发表于2019-02-18 18:09 被阅读0次

    环境python2.7

    1.DBUtils.PooledDB 介绍

    DBUtils 是一套用于管理数据库连接池的包,为高频度高并发的数据库访问提供更好的性能,可以自动管理连接对象的创建和释放。最常用的两个外部接口是 PersistentDB 和 PooledDB,前者提供了单个线程专用的数据库连接池,后者则是进程内所有线程共享的数据库连接池。

    DBUtils是一套Python数据库连接池包,并允许对非线程安全的数据库接口进行线程安全包装。DBUtils来自Webware for Python。

    DBUtils提供两种外部接口:

    • PersistentDB :提供线程专用的数据库连接,并自动管理连接。
    • PooledDB :提供线程间可共享的数据库连接,并自动管理连接。

    实测证明 PersistentDB 的速度是最高的,但是在某些特殊情况下,数据库的连接过程可能异常缓慢,而此时的PooledDB则可以提供相对来说平均连接时间比较短的管理方式。

    另外,实际使用的数据库驱动也有所依赖,比如SQLite数据库只能使用PersistentDB作连接池。 下载地址:(http://www.webwareforpython.org/downloads/DBUtils/)

    2.安装 DBUtils

    pip install DBUtils
    

    3.使用案例

    import MySQLdb
    from DBUtils.PooledDB import PooledDB
    pool = PooledDB(MySQLdb,5,host='localhost',user='root',passwd='pwd',db='myDB',port=3306) #5为连接池里的最少连接数
    conn = pool.connection()  #以后每次需要数据库连接就是用connection()函数获取连接就好了
    cur=conn.cursor()
    SQL="select * from table1"
    r=cur.execute(SQL)
    r=cur.fetchall()
    cur.close()
    conn.close()
    

    PooledDB的参数:

    1. mincached,最少的空闲连接数,如果空闲连接数小于这个数,pool会创建一个新的连接
    2. maxcached,最大的空闲连接数,如果空闲连接数大于这个数,pool会关闭空闲连接
    3. maxconnections,最大的连接数,
    4. blocking,当连接数达到最大的连接数时,在请求连接的时候,如果这个值是True,请求连接的程序会一直等待,直到当前连接数小于最大连接数,如果这个值是False,会报错,
    5. maxshared 当连接数达到这个数,新请求的连接会分享已经分配出去的连接
      在uwsgi中,每个http请求都会分发给一个进程,连接池中配置的连接数都是一个进程为单位的(即上面的最大连接数,都是在一个进程中的连接数),而如果业务中,一个http请求中需要的sql连接数不是很多的话(其实大多数都只需要创建一个连接),配置的连接数配置都不需要太大。

    连接池对性能的提升表现在:
    1.在程序创建连接的时候,可以从一个空闲的连接中获取,不需要重新初始化连接,提升获取连接的速度
    2.关闭连接的时候,把连接放回连接池,而不是真正的关闭,所以可以减少频繁地打开和关闭连接

    相关文章

      网友评论

          本文标题:python 使用mysql连接池

          本文链接:https://www.haomeiwen.com/subject/emlzeqtx.html