python 数据库连接池_python数据库连接池

2023-11-13

一  DBUtils的认识

首先管理数据库连接池的包是 DBUtils,为高频度并发的数据库访问提供更好的性能,可以自动管理连接对象的创建和释放,最常用的两个外部接口是PersistentDB 和 PooledDB,前者提供了单个线程专用的数据库连接池,后者则是进程内所有线程共享的数据库连接池。

二 DBUtils 简介

DBUtils是一套Python数据库连接池包,并允许对非线程安全的数据库接口进行线程安全包装。DBUtils来自Webware for Python。

DBUtils提供两种外部接口:

PersistentDB :提供线程专用的数据库连接,并自动管理连接。

PooledDB :提供线程间可共享的数据库连接,并自动管理连接。

三 创建数据库连接池

1 import time

2 import pymysql

3 import threading

4 from DBUtils.PooledDB import PooledDB, SharedDBConnection

5 POOL = PooledDB(

6 creator=pymysql, # 使用链接数据库的模块

7 maxconnections=6, # 连接池允许的最大连接数,0和None表示不限制连接数

8 mincached=2, # 初始化时,链接池中至少创建的空闲的链接,0表示不创建

9 maxcached=5, # 链接池中最多闲置的链接,0和None不限制

10 maxshared=3, # 链接池中最多共享的链接数量,0和None表示全部共享。PS: 无用,因为pymysql和MySQLdb等模块的 threadsafety都为1,所有值无论设置为多少,_maxcached永远为0,所以永远是所有链接都共享。

11 blocking=True, # 连接池中如果没有可用连接后,是否阻塞等待。True,等待;False,不等待然后报错

12 maxusage=None, # 一个链接最多被重复使用的次数,None表示无限制

13 setsession=[], # 开始会话前执行的命令列表。如:["set datestyle to ...", "set time zone ..."]

14 ping=0,

15 # ping MySQL服务端,检查是否服务可用。# 如:0 = None = never, 1 = default = whenever it is requested, 2 = when a cursor is created, 4 = when a query is executed, 7 = always

16 host='127.0.0.1',

17 port=3306,

18 user='root',

19 password='123',

20 database='pooldb',

21 charset='utf8'

22 )

四 使用数据库连接池

1 def func():

2 # 检测当前正在运行连接数的是否小于最大链接数,如果不小于则:等待或报raise TooManyConnections异常

3 # 否则

4 # 则优先去初始化时创建的链接中获取链接 SteadyDBConnection。

5 # 然后将SteadyDBConnection对象封装到PooledDedicatedDBConnection中并返回。

6 # 如果最开始创建的链接没有链接,则去创建一个SteadyDBConnection对象,再封装到PooledDedicatedDBConnection中并返回。

7 # 一旦关闭链接后,连接就返回到连接池让后续线程继续使用。

8 conn = POOL.connection()

9

10 cursor = conn.cursor()

11 cursor.execute('select * from tb1')

12 result = cursor.fetchall()

13 conn.close()

五 自制sqlhelper

1 class MySQLhelper(object):

2 def __init__(self, host, port, dbuser, password, database):

3 self.pool = PooledDB(

4 creator=pymysql, # 使用链接数据库的模块

5 maxconnections=6, # 连接池允许的最大连接数,0和None表示不限制连接数

6 mincached=2, # 初始化时,链接池中至少创建的空闲的链接,0表示不创建

7 maxcached=5, # 链接池中最多闲置的链接,0和None不限制

8 maxshared=3,

9 # 链接池中最多共享的链接数量,0和None表示全部共享。PS: 无用,因为pymysql和MySQLdb等模块的 threadsafety都为1,所有值无论设置为多少,_maxcached永远为0,所以永远是所有链接都共享。

10 blocking=True, # 连接池中如果没有可用连接后,是否阻塞等待。True,等待;False,不等待然后报错

11 maxusage=None, # 一个链接最多被重复使用的次数,None表示无限制

12 setsession=[], # 开始会话前执行的命令列表。如:["set datestyle to ...", "set time zone ..."]

13 ping=0,

14 # ping MySQL服务端,检查是否服务可用。# 如:0 = None = never, 1 = default = whenever it is requested, 2 = when a cursor is created, 4 = when a query is executed, 7 = always

15 host=host,

16 port=int(port),

17 user=dbuser,

18 password=password,

19 database=database,

20 charset='utf8'

21 )

22

23 def create_conn_cursor(self):

24 conn = self.pool.connection()

25 cursor = conn.cursor(pymysql.cursors.DictCursor)

26 return conn,cursor

27

28 def fetch_all(self, sql, args):

29 conn,cursor = self.create_conn_cursor()

30 cursor.execute(sql,args)

31 result = cursor.fetchall()

32 cursor.close()

33 conn.close()

34 return result

35

36

37 def insert_one(self,sql,args):

38 conn,cursor = self.create_conn_cursor()

39 res = cursor.execute(sql,args)

40 conn.commit()

41 print(res)

42 conn.close()

43 return res

44

45 def update(self,sql,args):

46 conn,cursor = self.create_conn_cursor()

47 res = cursor.execute(sql,args)

48 conn.commit()

49 print(res)

50 conn.close()

51 return res

52

53

54 sqlhelper = MySQLhelper("127.0.0.1", 3306, "root", "1233121234567", "dragon")

55

56 # sqlhelper.fetch_all("select * from user where id=%s",(1))

57

58 # sqlhelper.insert_one("insert into user VALUES (%s,%s)",("jinwangba",4))

59

60 # sqlhelper.update("update user SET name=%s WHERE id=%s",("yinwangba",1))

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

python 数据库连接池_python数据库连接池 的相关文章

  • 《Android开发——Android Studio的下载、安装与配置》

    Android开发 Android Studio的下载 安装与配置 一 下载 Android Studio最新的版本有一些BUG 不稳定 推荐安装老版本 在正式安装Android Studio之前 需要安装JDK 同学们可以参考下面这个博客
  • 链路追踪jaeger

    这里的链路指的是客户端向服务发起一个请求 该请求所经过的路线 也可以说是该请求经过的流量 例如 客户端发起一个下订单的请求其流量过程 request gt service gt order web gt order srv gt mysql
  • 《面向对象程序设计》教学资源汇总(2023)

    面向对象程序设计 教学资源汇总 2023 一 教学网站 blog csdn net bigleo 二 课堂派加课码 加课码 M274UN QRCode 三 课件下载 课件下载 长期有效 提取密码 tqucqx 四 本课程课件 二套 及实验
  • Sequence Modeling: Recurrent and Recursive Nets(3)

    CONTENTS Leaky Units and Other Strategies for Multiple Time Scales One way to deal with long term dependencies is to des
  • I2C软件模拟中的IO方向设置问题

    例程 STM32F103系列 I2C软件模拟实验 战舰例程 问题 下面两行关于 IO方向 的代码不太明白 之前一直看的例程都是库函数的代码 突然间冒出来两行寄存器的代码一时间手足无措 define SDA IN GPIOB gt CRL 0
  • Linux安装docker,在docker上安装mysql

    一 linux安装docker 1 下载安装包 下载地址 Index of linux centos 7 x86 64 stable Packages 我用的操作系统是centos7 根据自己操作系统找到相应版本下载 2 上传安装包 我用的
  • Docker学习笔记(三)-编写自己的Dockerfile

    Dockerfile是什么 Dockerfile用于快速创建自定义的Docker镜像 在上一篇博客中我们知道常见的三种创建image的手法 一般情况我们可以通过在基础镜像的基础上通过docker commit的方式生成新的image 但是对
  • IDEAweb项目文件夹没有蓝色小点

    问题原因 idea没有识别web文件夹为一个web项目 解决方案 需要手动选中该moudle 主动add web文件夹即可
  • centos7 kvm 设置桥接网卡br0

    centos kvm 设置桥接网卡br0 一 关于kvm的操作 1 查看CPU是否支持VT egrep vmx svm color always proc cpuinfo 2 检查内核模块是否加载 lsmod grep kvm 3 查看Se
  • Java的垃圾回收机制简述

    Java垃圾回收机制简述 一 由谁来做 Java的垃圾回收是由JVM Java虚拟机 来做的 二 什么时候做 1 CPU空闲的时候 自动进行回收 2 在堆内存存储满了之后 自动进行回收 3 程序调用System gc 主动尝试进行回收 三
  • Docker目录迁移

    问题 系统 根目录空间满 导致docker容器停用 df lh 显示已占用100 而 home目录还有1T空间未用 需求 将docker目录移动到 home目录 docker默认位置 var lib docker 查看Docker目录 do
  • STM32------ADC(模/数转换器)

    文章目录 前言 一 ADC定义 二 模拟信号 三 数字信号 四 模数转换的过程 五 特性 六 硬件电路 1 原理图 2 可调电阻用到的引脚 3 不同的引脚支持的ADC是不一样的 4 存储对齐方式 七 思考题 八 源码下载 总结 前言 STM
  • LeetCode题目笔记——1233. 删除子文件夹,写法妙哉妙哉

    文章目录 题目描述 题目难度 中等 方法一 排序 代码 C 代码 Python 方法二 字典树 总结 题目描述 你是一位系统管理员 手里有一份文件夹列表 folder 你的任务是要删除该列表中的所有 子文件夹 并以 任意顺序 返回剩下的文件
  • 记录“conda添加清华镜像源”问题--查看添加删除

    conda查看添加加删除清华镜像源 一 查看镜像源 二 添加新镜像源 三 删除旧镜像源 四 切回默认源 一 查看镜像源 查看conda镜像源的命令有两个 1 conda info 镜像源显示在channel URLs属性中 2 conda
  • 简述gitee使用及创建仓库及远程连接

    第一步 找到gitee网址 进入 Gitee 基于 Git 的代码托管和研发协作平台 第二步 点击右上角注册按钮 第三步 登录 第四步 点击右上角加号图标 下拉菜单的新建仓库 第五步 新建仓库 取一个仓库名 点击创建按钮 第六步 跳转至新建
  • Javascript制作简易计算器并实现其功能

    使用JS的函数功能 制作一个简易的计算器 包括加 减 乘 除的功能 并使用函数传参的方式完成计算器的功能 输入任意操作数 通过四则运算计算出结果 使用函数传参的方式完成计算器的功能 CSS部分
  • 至少有一位重复数字--动态规划

    leetcode 1012 至少有一位重复的数字 题目描述 给定正整数 N 返回小于等于 N 且具有至少 1 位重复数字的正整数的个数 示例1 输入 20 输出 1 解释 具有至少 1 位重复数字的正数 lt 20 只有 11 示例2 输入
  • python大数据分析代码案例

    查询用户余额代码案例 import sys import MySQLdb import pandas as pd optmap dbuser aduser dbpass 123654 dbhost 192 168 10 14 dbport
  • vite打包报错解决

    在tsconfig json中添加skipLibCheck true 已解决问题 请参考配置 compilerOptions target esnext useDefineForClassFields true module esnext

随机推荐