用GO语言写一个数据库连接池
池(Pool)是指某类资源的容器,它是一种用于提高程序效率和降低系统开销的技术,比如线程池、连接池、内存池、对象池。但它们的核心理念一致: 资源复用 。
本文主要探究数据库连接池的相关问题,并实现一个简单的Go版本连接池Demo,希望能对读者理解池技术有些帮助。
数据库连接池的基本思想就是为数据库连接建立一个缓冲池,预先在缓冲池中放入一定数量的数据库连接,当用户需要访问数据库时,从池中取出一条空闲连接,使用完毕后,将该连接返回到池中,以供其他的请求访问使用。
为什么需要数据库连接池?
首先,需要明确的是, 数据库连接是一种有限的、昂贵的资源 。如果按照单个连接来进行数据库操作,在高并发的情况下会导致数据库连接数耗尽的问题,并且单个连接的频繁创建和关闭,会极大地增加数据库的开销。例如,mysql数据库可通过以下mysql命令查看其设置的最大连接数。
show variables like "%max_connections%";
而数据库连接池负责分配、管理和释放数据库连接,它允许客户端请求复用现有的数据库连接,而不是重新建立一个。
核心概念
1. 连接数
连接池中应该放置多少连接,才能使系统的性能最佳?系统可通过设置最小连接数和最大连接数等参数来调整。
最小连接数
最小连接数是连接池空闲状态下维持的数据库连接数,也是系统启动时连接池所创建的连接数。创建过多,则系统启动就会较慢,且如果应用程序对数据库连接的使用量不大,会造成数据库连接资源的浪费。如果创建过少,则系统启动较快,但后续对请求的响应就会较慢。
最大连接数
最大连接数,是连接池能申请的最大连接数。超过最大连接数的请求,将加入等待队列中,当池中有可用连接时,再处理这些请求。
最小连接数的设置,可根据系统正常访问量的大小来确定一个合适的数值;而最大连接数,则可根据高峰场景下的系统访问量来设置。
2. 空闲时间
当连接请求超过最小连接数时,在超过后的连接请求需要连接池为它们建立新的连接,但是总的连接数不能超过最大连接数限制。对于这些大于最小连接数的数据库连接在使用完后不会被马上释放,它将被放在连接池中等待重复使用或者超过设定的空闲时间后被释放。
Demo实现
定义数据库连接池对象Pool
type Pool struct {
mu sync.Mutex
minConn int // 最小连接数
maxConn int // 最大连接数
numConn int // 池已申请的连接数
conns chan *DBConn //当前池中空闲连接实例
close bool
}
// 初始化池实例
func NewPool (min, max int ) * Pool {
p := &Pool{
minConn: min,
maxConn: max,
numConn: min,
conns: make ( chan *DBConn, max),
close : false ,
}
for i := 0 ; i < min; i++ {
p.conns <- NewDBConn()
}
return p
}
模拟数据库连接对象DBConn
type DBConn struct {
idleTime int // 标记该数据库连接空闲时间
}
// 新建数据库连接
func NewDBConn () * DBConn {
return &DBConn{idleTime: 0 }
}
// 关闭数据库连接
func (d *DBConn) Close () {}
池对象方法定义
// 从池中取出连接
func (p *Pool) Get () * DBConn {
if p. close {
return nil
}
p.mu.Lock()
defer p.mu.Unlock()
if p.numConn >= p.maxConn || len(p.conns) > 0 { // 保证了池申请连接数量不超过最大连接数
d := <-p.conns // 若池中没有可取的连接,则等待其他请求返回连接至池中再取
return d
}
p.numConn++
return NewDBConn() //申请新的连接
}
// 将连接返回池中
func (p *Pool) Put (d *DBConn) {
if p. close {
return
}
p.mu.Lock()
defer p.mu.Unlock()
p.conns <- d
}
// 关闭池
func (p *Pool) Close () {
p.mu.Lock()
defer p.mu.Unlock()
for d := range p.conns {
d.Close()
}
p. close = true
}
(左右滑动查看完整代码图片)
考虑代码篇幅原因,本Demo并没有实现释放空闲超时的数据库连接功能,即没有对p.numConn做--计数和Pool的RemoveConn方法。实际情况中,设计连接池,还有很多因素需要考虑,例如:
超时移除 :当池中空闲的连接数大于最小连接数时,应当对数据库连接进行空闲超时检查,当满足要求时,释放该条连接,并从池中移除。但最终在池中维持的数据库连接条数应该等于最小连接数。 连接可用 :对池中的数据库连接建立保活机制,保证每条连接是可用的。 事务处理 :由于事务的原子性,一组sql语句要么全做,要么全不做。如果简单采用连接复用的策略,就会发生问题,因为没有办法控制属于同一个事务的多个数据库操作方法的动作,可能这些数据库操作是在多个连接上进行的,并且这些连接可能被其他非事务方法复用。为此可以使用每一个事务独占一个连接来实现,虽然这种方法有点浪费连接池资源,但可以大大降低事务管理的复杂性。
国际高端家电品牌卡萨帝520心动日为爱钜献即日起至5月31日,大牌盛宴,为爱升级,惠聚燕赵!甄选单品甄选套餐极致体验!尊享礼遇1。预存惊喜活动前到当地海尔或卡萨帝专柜预存认筹,购机可加赠惊喜礼品!2。单品好礼卡萨帝单品有积
海尔雷神者二代空调闪亮登陆石家庄5月22日,海尔雷神者二代空调新品发布会在碧波荡漾青草翠绿的滹沱河生态岛胜利举办!本次新品发布会摒弃了传统的发布会形式,以运动和健康的主题,在马拉松奔跑中体验运动的畅快和呼吸的健康
买厨电,却买回厨房6月初,武汉武昌区的许女士想买新厨电,把老厨房焕新,可却面临2大难题一是传统厨房线路不兼容新厨电二是安装改造太费事。最终卡萨帝七星级服务承包了从水电路改造到整体厨房橱柜台面打造及换
905智惠厨房,锁定德意集成灶送高端智能锁俗话说一场秋雨一场凉。立秋之后,气温骤降,这个时候大多数小伙伴都开始了贴秋膘。如果说美食是贴秋膘的源泉,那么一个和谐的厨房便是美食的制作之源!现如今,家家户户开始追求智能厨房,可以
这款洗地机卖爆了!省下80打扫时间目前市面上唯一一款擦过无水渍的洗地机也是最轻便的无线洗地机来自厨房的油污汤渍菜渣卫生间的水渍泡沫头发客厅的米饭,汤汁,碎屑宠物的脚印泥土宝宝饭后掉在地上的的辅食饭菜吃水果时,不小心
眼见为实!海尔密闭稳燃舱更稳燃更恒温更安全更节能市场上的热水器品牌众多,但在外观和功能上都大体相似,那用户该如何选购呢?相对于传统上置敞开式热水器,海尔密闭稳燃舱热水器还拥有不漏火能抗风寿命长等优势。口说无凭,眼见为实!5月27
唯前行,致所爱丨2021青岛马拉松,他们是最美的风景MARATHON奔赴山海,越见不凡,今天,2021海尔青岛马拉松落下帷幕,今年青马报名人数达44320,创历史新高。最终,2。5万名幸运者共同迈出奋进的步伐,用双脚丈量这座美丽的海
夏季穿搭基础课不同材质的面料怎么搭配?马上要进入夏季,换季整理衣橱时,你是否发现,材质上乘的基础款比普通的流行款更能经得住时间考验。好的面料不仅可以诠释服装的风格和特性,而且能直接影响穿着效果。夏季穿搭,不妨从面料入手
探宅远隔上百公里的父亲,给孩子近在咫尺的父爱吴先生将成套卡萨帝智慧家电搬进了新家,三百多平的洋房只需一部手机即可掌控,即使远在千里之外,也能细心呵护家人的品质生活。用户吴先生地区深圳住所特征360平3层洋房智慧空间智慧厨房智
红酒礼仪在红酒里探寻生活的格调春色正浓时,选一款适宜可口的美酒,在微醺之时感受此刻春光正好,但在葡萄酒品鉴过程中,要全方面感受三个感官元素观色闻香和品味,就必须涉及到存酒和醒酒文化。存酒保持一瓶红葡萄酒的风味和
春末夏初,最适合看的5部小清新电影SINGINGINTHESUMMERTIME人间五月,草长莺飞,马上要迎来一年中最闪耀的季节夏天!今年入夏,不妨找几部优美的情绪电影,躺在床上静默欣赏,用这种方式迎接即将来临的夏天