百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

python3.13下使用数据库连接池

ccwgpt 2024-12-05 11:43 53 浏览 0 评论

Python 3.13 Beta 1 来啦!

新特性一览

  1. 交互式解释器升级,源自 PyPy,更智能,更懂你!
  2. 实验性 JIT 编译器,性能提升,代码运行更快!
  3. 激动人心的无 GIL 版本,多线程并发新体验!
  4. 垃圾回收更高效,增量式回收,内存管理更上一层楼!
  5. 新增类型注解,代码更规范,开发更安心!

也就是说从这个版本开始python开始了无GIL的时代,实现了真多线程并发。对于数据库开发的小伙伴来说很遗憾的是Cx_Oracle驱动包不再支持,使用dbutils的PooledDB来创建Oracle连接池不再可行;好消息是可以继续使用oracledb,而这个包更加高级,自带连接池。要适应新技术的发展,要对原来的代码进行改进。

  1. 对于项目数据库连接池的开发,必须使用单例模式。编制一个单例“原类”,继承此类的所有类都是单例。
import threading

class Single:
    '''
    单例模板类,继承该类子类均为单例模式
    '''
        _lock = threading.Lock()                        # python 的单例模式
    
    def __new__(cls, *args, **kw):
        while not hasattr(cls, "_instance"):           # 适应多线程,双循环确认只创建1个实例:
            with cls._lock:
                while not hasattr(cls, "_instance"):
                    cls._instance = super().__new__(cls)
        return cls._instance
  1. 为了使用连接池,还必须保证所有的对象共享一个连接池,编一个基础MyDatabase类。
# import os
import pymysql
# import cx_Oracle as oracle                       #python3.10之后的版本不再支持
import oracledb as oracle                          #python3.10之后推荐使用,已经自带连接池
# oracle.init_oracle_client(lib_dir=r"C:\Program Files (x86)\Oracle\Instant Client\bin")  # 针对oracle11.2的老版本需要采用这种厚模式
import threading
# from DBUtils.PooledDB import PooledDB                   # 使用数据库连接池1.3
from dbutils.pooled_db import PooledDB                    # 使用数据库连接池2.0,3.0以后对数据库参数大小写敏感,比如utf8不能写成UTF8
from abc import ABCMeta, abstractmethod

class MyDataBase(Single):           # 继承一个单例类,就变成单例
    '''
    数据库基类,单例,必须被继承实现具体查寻操作
    '''
    __metaclass__ = ABCMeta
    _pool = None                    				# 连接池
    _pool_lock = threading.Lock()   # 连接池线程锁
    
    @classmethod
    def __init__(cls, db_config):
        '''
        单例模式建立连接池
        '''
        while cls._pool is None:  # 适应多线程,双层循环确认pool对象没有被创建才创建,否则啥也不干
            with cls._pool_lock:                       # 加线程锁
                while cls._pool is None:
                    try:
                        cls.create_Pool(db_config)                                             # 各类以自己的方式创建连接池
                    except Exception as e:
                        MyLogger.error(cls.__name__ + '未能正常创建连接池!请检查网络或服务器配制是否正确!' + str(e), __name__)

		@classmethod
    def getConnect(cls):		# 基类获取链接的方法
        '''
        从连接池拿出一个链接并初始化光标
        :return: 数据库链接和光标
        '''
        if cls._pool:
            conn = cls._pool.connection()
            cursor = conn.cursor()
            return conn, cursor
        return None, None
  1. MySQL依旧使用PooledDB创建连接池,而oracledb自带连接池,并且oracledb获取链接的方式也不一样了。必须在子类各自实现连接池创建和链接获取方式。
class MySql(MyDataBase):  # 继承一个单例类,就变成单例
    """MySQL数据库链接工具类"""

    def __init__(self, databaseName='MySQL'):
        '''
        具体数据库类读取配制信息,并用父类初始化连接池
        '''
        db_config = self.loadDBconfig(databaseName)					# 获取数据库配制信息
        super().__init__(db_config)

		@classmethod
    def create_Pool(cls, db_config):
        cls._pool = PooledDB(
            creator=pymysql,                # 对应的数据库驱动包
            mincached=5,                    # 连接池里面初始的空闲链接
            maxcached=10,                   # 最大的空闲链接数量
            maxshared=10,                   # 最大的允许共享的连接数
            maxusage=None,                  # 单个链接最大可以被复用的次数(默认未0/None, 代表不限制复用)
            maxconnections=None,            # 最大的允许的连接数(默认为0/None,代表多少链接都行)
            blocking=True,                  # 确定超过最大连结束后的行为,true则阻塞等待有空闲链接,默认为报告错误
            **db_config)                    # 数据库链接参数
        
        
class Oracle(MyDataBase):
    os.environ['NLS_LANG'] = 'SIMPLIFIED CHINESE_CHINA.ZHS16GBK'        # 解决cx_Oracle连接Oracle的乱码问题

    def __init__(self, databaseName='Oracle1'):
        '''
        具体数据库类负责读取配制信息,并用父类初始化连接池
        '''
        db_config = self.loadDBconfig(databaseName)
        oracle_path = ConfigUtil.getPath('oracle_dir')
        # oracle.init_oracle_client(lib_dir=r"C:\Program Files (x86)\Oracle\Instant Client\bin")
        oracle.init_oracle_client(lib_dir=oracle_path)
        super().__init__(db_config)

		@classmethod
    def create_Pool(cls, db_config):
        cls._pool = oracle.create_pool(         # 以该类驱动包工具,创建连接池
            min=8,                              # 连接池里面初始的空闲链接
            max=16,                             # 最大的空闲链接数量
            increment=1,                        # 自增数
            **db_config)                        # 数据库链接参数

    def getConnect(cls):                        # 由于oracledb 获取conn的方式不同,子类必须覆盖父类同名函数
        if cls._pool:
            conn = cls._pool.acquire()
            cursor = conn.cursor()
            return conn, cursor
        return None, None

相关推荐

VUE3前端开发入门系列教程二:使用iView框架辅助开发

1、安装iView新框架,支持VUE3npminstallview-ui-plus2、编辑src/main.js,添加以下内容,导入js和css到项目importViewUIPlusfrom...

万能前端框架uni app初探03:底部导航开发

前言本节我们使用uniapp的底部导航功能,点击不同tab会显示不同页面,这个功能在实际项目开发中几乎是必备的。一、基础知识1.tabBar如果应用是一个多tab应用,可以通过tabBar配...

Rust Web 开发框架,前端你可以选择哪个?

Rust构建一切。在如今流行的语言中,Rust可谓是将构建和高效作为自己优美的身姿在大众视野中脱颖而出。它是一门赋予每个人构建可靠且高效软件能力的语言。它有什么特性呢?高性能。Rust速度惊人且内...

连载:前端开发中纠结的Javascript框架(上)

如今,前端开发有着许许多多的框架和库。其中一些好用,一些却不尽人意。通常我们会习惯性运用某一概念,模块或句法。事实上,并没有什么万能工具。这篇文章是关于未来框架的发展趋势——那就是没有框架!我从以下几...

前端开发框架的演进架构:提升用户体验和开发效率

前端开发框架是现代Web应用开发的重要工具,它不仅可以帮助开发者构建复杂的用户界面,还能够提升用户体验和开发效率。随着Web技术的不断发展,前端开发框架也在不断演进,为开发者提供了更丰富、更高效的工具...

Google应用Mesh-TensorFlow框架,让CNN也能处理超高分辨率图像

为了要处理超高分辨率医疗图像数据,Google开发了一种空间数据分区(SpatialPartition)技术,在不牺牲图像分辨率的条件下,分析超高分辨率图像。Google使用Mesh-TensorF...

大模型安全挑战加剧:框架层漏洞成新靶心

近日,360数字安全集团发布了一份关于大模型安全漏洞的报告,揭示了当前大模型及围绕其构建的框架和应用中存在的严重安全问题。报告显示,360近期研究发现了近40个大模型相关的安全漏洞,其中既包括二进制内...

Keras 3.0正式发布:可用于TensorFlow、JAX和PyTorch

机器之心报道编辑:陈萍经过5个月的更新迭代,Keras3.0终于来了。「大新闻:我们刚刚发布了Keras3.0版本!」Keras之父FrancoisChollet在X上激动的...

TensorFlow和Keras入门必读教程(tensorflow与keras版本对应)

导读:本文对TensorFlow的框架和基本示例进行简要介绍。作者:本杰明·普朗什(BenjaminPlanche)艾略特·安德烈斯(EliotAndres)来源:华章科技01TensorFlo...

谷歌官方回应“TensorFlow遭弃”:还在投资开发,将与JAX并肩作战

鱼羊发自凹非寺量子位|公众号QbitAI终于,谷歌出面回应“TensorFlow遭弃”传闻:我们将继续致力于将TensorFlow打造为一流机器学习平台,与JAX并肩推动机器学习研究。这段时...

2025 年的PHP :现代 Web 开发的强大引擎

程序员还在吐槽PHP过时?2025年的PHP8.4直接封神了。看看最近更新的属性钩子、强类型系统,加上Laravel这些框架,老语言早就脱胎换骨。十年前说PHP弱类型容易崩代码的,现在脸疼不?联合类...

前端内卷终结者?htmx如何让开发者告别200行JS只做一个按钮

当你用React写一个点赞按钮需要引入3个状态管理库、编写80行JSX和120行钩子函数时,htmx只需要一行HTML:<buttonhx-post="/like"hx-sw...

NativePHP桌面版V1.0正式发布(元气桌面电脑版下载)

导读:各位小伙伴,使用PHP构建桌面级系统的利器,NativePHP来了。概述NativePHP是一个用于使用PHP构建桌面应用的框架。它允许PHP开发人员使用熟悉的工具和技术创建跨平台的原生应用...

PHP Laravel框架底层机制(php基本框架)

当然可以,Laravel是最受欢迎的PHP框架之一,以优雅的语法和丰富的生态而闻名。尽管开发体验非常“高端”,它的底层其实是由一系列结构清晰、职责分明的组件构成的。下面我从整体架构、核心流程、...

PHP框架之Laravel框架教程:2. 控制器、路由、视图简单介绍

2.控制器、路由、视图简单介绍我们先建立控制器,目录是:app/Http/Controllers,新建控制器Ding.php,代码如下:Ding.php:<?phpnamespaceA...

取消回复欢迎 发表评论: