[GoLang] 优化连接池: 以 database/sql 为例

2023-01-30 17:05:19 +08:00
 GopherDaily

[GoLang] 优化连接池: 以 database/sql 为例

Link: https://github.com/j2gg0s/j2gg0s/blob/main/20230130_go_%E4%BC%98%E5%8C%96%E8%BF%9E%E6%8E%A5%E6%B1%A0.md

之前就看到有些应用在频繁的创建 /关闭数据库链接, 这样的行为大概率不是正确的.

MySQL 的链接是昂贵, 在上图也可以看到 create 耗时远超 query 和 exec, 所以大多数的实现都会选择通过链接池来复用已创建的链接.

Go 的 database/sql 也不例外, 你可以通过以下几个参数来调整具体的行为:

当发现应用持续的大量创建链接, 我们首先需要判断为什么. 通过 database/sql 自带的统计信息可以直观的发现链接主要是因为 idle 而被关闭的.

翻阅代码, 业务方也没有额外设置 ConnMaxIdleTime. 那么显然是因为 MaxIdleConns 设置的过小而导致链接被新建并使用后, 因为无法被放入连接池而直接关闭, 进而无法被复用.

此时, 我们可以通过调整 MaxIdleConns 提高链接的复用. 当我们把 MaxIdleConns 从默认的 2 调整到 8 之后, 可以发现链接的复用变得非常好.

同时, 可以观察到因为避免大量耗时的链接创建操作, 应用对外的响应时间也有了比较明显的降低.

虽然对于稳定的应用应该是 p99 收益最明显, 但是这个应用存在其他的耗时操作并主导了 p99.

1274 次点击
所在节点    Go 编程语言
3 条回复
ChevalierLxc
2023-01-31 14:35:06 +08:00
棒!
daytonight
2023-02-08 18:50:15 +08:00
这个监控面板是怎么来的呀
echoless
2023-02-28 11:17:59 +08:00
@daytonight #2 看起来是 grafana, golang 有相关的库.

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/911701

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX