lua-resty-*库中使用的连接池是共享的吗？

kunsir · 2012-06-23T02:50:26+00:00

Hello! After about one week's active development, the new development version of ngx_openresty, 1.2.1.1, is now released: http://openres...

lua-resty-*库中使用的连接池是共享的吗？

kunsir

比如我程序里同时用了lua-resty-redis和lua-resty-mysql，使用set_keepalive连接池，那么redis和
mysql是共享同一个cosocket connection pool吗(我知道每个worker一个pool)？还是各自使用各自的连接池？

agentzh

Hello!

2012/6/23 huang kun <ku...@gmail.com>:
> 比如我程序里同时用了lua-resty-redis和lua-resty-mysql，使用set_keepalive连接池，那么redis和
> mysql是共享同一个cosocket connection pool吗(我知道每个worker一个pool)？还是各自使用各自的连接池？

目前 ngx_lua cosocket 连接池的划分是一个“目标”一个池。而所谓“目标”，就是 hostname 与 port
的组合，或者直接是 unix domain socket 的文件路径。

未来将为 cosocket 连接池加上用户自定义“目标”前缀，比如对于不能动态切换当前数据库名的 PostgreSQL
数据库连接，则可以通过把库名作为前缀，进一步对连接池进行拆分。

Regards,
-agentzh

kunsir

多谢解答，了解了。

还有几个问题：
1.如果连接池满了，那么dbConnection:connect或者redis:connect时是会自动新建一个连接吗？还是会抛个啥错误？
2.如果不同代码中set_keepalive(0,poolsize)中poolsize写的都不一样，有的poolsize写50有的
poolsize写100，会有什么问题吗？
3.有什么方法能让我知道目前连接池中有多少个连接这种统计吗？否则如何评估设置poolsize大小呢？

On Jun 23, 10:13 am, agentzh <agen...@gmail.com> wrote:
> Hello!
>
> 2012/6/23 huang kun <kun...@gmail.com>:
>
> > 比如我程序里同时用了lua-resty-redis和lua-resty-mysql，使用set_keepalive连接池，那么redis和
> > mysql是共享同一个cosocket connection pool吗(我知道每个worker一个pool)？还是各自使用各自的连接池？
>
> 目前 ngx_lua cosocket 连接池的划分是一个"目标"一个池。而所谓"目标"，就是 hostname 与 port
> 的组合，或者直接是 unix domain socket 的文件路径。
>
> 未来将为 cosocket 连接池加上用户自定义"目标"前缀，比如对于不能动态切换当前数据库名的 PostgreSQL
> 数据库连接，则可以通过把库名作为前缀，进一步对连接池进行拆分。
>
> Regards,
> -agentzh

agentzh

Hello!

2012/6/23 huang kun <ku...@gmail.com>:
> 还有几个问题：
> 1.如果连接池满了，那么dbConnection:connect或者redis:connect时是会自动新建一个连接吗？还是会抛个啥错误？

引用官方文档中的原文（http://wiki.nginx.org/HttpLuaModule#tcpsock:setkeepalive ）如下：

“When the connection pool is exceeding the size limit, the least
recently used (idle) connection already in the pool will be closed
automatically to make room for the current connection. ”

> 2.如果不同代码中set_keepalive(0,poolsize)中poolsize写的都不一样，有的poolsize写50有的
> poolsize写100，会有什么问题吗？

仍然引用官方文档中的原话来回答你这个问题：

“Note that the size of the connection pool cannot be changed once the
pool is created.”

所以连接池一旦创建好，后续即便指定不同的 size 参数也会被直接忽略。

> 3.有什么方法能让我知道目前连接池中有多少个连接这种统计吗？否则如何评估设置poolsize大小呢？
>

目前 ngx_lua 的 cosocket API 尚未提供连接池的统计功能（目前仅有一个 getreusedtimes 方法，见
http://wiki.nginx.org/HttpLuaModule#tcpsock:getreusedtimes ），但可以摸仿
ngx_drizzle 模块的 drizzle_status 指令实现之：

    http://wiki.nginx.org/HttpDrizzleModule#drizzle_status

当然，在 cosocket API 的上下文中，我倾向于提供 Lua API :)

欢迎贡献补丁 :)

目前可以通过 netstat 等系统命令从 nginx 的外部直接观察到指定后端服务的 ESTABLISHED 状态的 TCP
连接数，来估算连接池的容量是否足够。当然，也可以直接在服务器侧观察之。

Best regards,
-agentzh

kunsir

多谢，文档看的还是不够细。。。

On Jun 23, 1:18 pm, agentzh <agen...@gmail.com> wrote:
> Hello!
>
> 2012/6/23 huang kun <kun...@gmail.com>:
>
> > 还有几个问题：
> > 1.如果连接池满了，那么dbConnection:connect或者redis:connect时是会自动新建一个连接吗？还是会抛个啥错误？
>
> 引用官方文档中的原文（http://wiki.nginx.org/HttpLuaModule#tcpsock:setkeepalive）如下：;
>
> "When the connection pool is exceeding the size limit, the least
> recently used (idle) connection already in the pool will be closed
> automatically to make room for the current connection. "
>
> > 2.如果不同代码中set_keepalive(0,poolsize)中poolsize写的都不一样，有的poolsize写50有的
> > poolsize写100，会有什么问题吗？
>
> 仍然引用官方文档中的原话来回答你这个问题：
>
> "Note that the size of the connection pool cannot be changed once the
> pool is created."
>
> 所以连接池一旦创建好，后续即便指定不同的 size 参数也会被直接忽略。
>
> > 3.有什么方法能让我知道目前连接池中有多少个连接这种统计吗？否则如何评估设置poolsize大小呢？
>
> 目前 ngx_lua 的 cosocket API 尚未提供连接池的统计功能（目前仅有一个 getreusedtimes 方法，见http://wiki.nginx.org/HttpLuaModule#tcpsock:getreusedtimes），但可以摸仿;
> ngx_drizzle 模块的 drizzle_status 指令实现之：
>
>    http://wiki.nginx.org/HttpDrizzleModule#drizzle_status
>
> 当然，在 cosocket API 的上下文中，我倾向于提供 Lua API :)
>
> 欢迎贡献补丁 :)
>
> 目前可以通过 netstat 等系统命令从 nginx 的外部直接观察到指定后端服务的 ESTABLISHED 状态的 TCP
> 连接数，来估算连接池的容量是否足够。当然，也可以直接在服务器侧观察之。
>
> Best regards,
> -agentzh