变量使用问题

wang.fl1429

hi all:

情况这样,项目越做越重, 在一个 request 中, 我有很多个文件要使用 mysql 连接查询

local mysql = require("resty.mysql")

local db = mysql:new()

那么在每个文件中都需要 db:connect(), 开销很大.

请问有好的办法,共用一些变量吗?

方法中传递 db 对象? 感觉很笨, 有好的办法吗?

谢谢.

wang.fl1429

后者说我遇到的这种情况, 如何处理比较好, @春哥

2013/11/14 wxianfeng <wang....@gmail.com>

hi all:

情况这样,项目越做越重, 在一个 request 中, 我有很多个文件要使用 mysql 连接查询

local mysql = require("resty.mysql")

local db = mysql:new()

那么在每个文件中都需要 db:connect(), 开销很大.

请问有好的办法,共用一些变量吗?

方法中传递 db 对象? 感觉很笨, 有好的办法吗?

谢谢.

wang.fl1429

最新测试, 发现同时在两个ｌｕａ文件中 db:connect(cfg) 不成功, 报下面错误:

2013/11/14 19:30:09 [error] 5290#0: *425 lua entry thread aborted: runtime error: attempt to yield across C-call boundary

求解决.

2013/11/14 wxianfeng <wang....@gmail.com>

后者说我遇到的这种情况, 如何处理比较好, @春哥

2013/11/14 wxianfeng <wang....@gmail.com>

hi all:

情况这样,项目越做越重, 在一个 request 中, 我有很多个文件要使用 mysql 连接查询

local mysql = require("resty.mysql")

local db = mysql:new()

那么在每个文件中都需要 db:connect(), 开销很大.

请问有好的办法,共用一些变量吗?

方法中传递 db 对象? 感觉很笨, 有好的办法吗?

谢谢.

rockiee281

不去试试drizzle么 https://github.com/chaoslawful/drizzle-nginx-module

2013-11-14

rockiee

发件人：wxianfeng <wang....@gmail.com>

发送时间：2013-11-14 19:33

主题：[openresty] Re: 变量使用问题

收件人："openresty"<openresty@googlegroups.com>

抄送：

最新测试, 发现同时在两个ｌｕａ文件中 db:connect(cfg) 不成功, 报下面错误:

2013/11/14 19:30:09 [error] 5290#0: *425 lua entry thread aborted: runtime error: attempt to yield across C-call boundary

求解决.

2013/11/14 wxianfeng <wang....@gmail.com>

后者说我遇到的这种情况, 如何处理比较好, @春哥

2013/11/14 wxianfeng <wang....@gmail.com>

hi all:

情况这样,项目越做越重, 在一个 request 中, 我有很多个文件要使用 mysql 连接查询

local mysql = require("resty.mysql")

local db = mysql:new()

那么在每个文件中都需要 db:connect(), 开销很大.

请问有好的办法,共用一些变量吗?

方法中传递 db 对象? 感觉很笨, 有好的办法吗?

谢谢.

smallfish.xy

1. 用resty.mysql的话，关注性能的话，建议开启keepalive，不要close连接
2. 缓存一部分结果
3. 个人喜欢用drizzle模块，配置起来方便

smallfish http://chenxiaoyu.org

2013/11/14 rockiee <rock...@gmail.com>

不去试试drizzle么 https://github.com/chaoslawful/drizzle-nginx-module

2013-11-14

rockiee

发件人：wxianfeng <wang....@gmail.com>

发送时间：2013-11-14 19:33

主题：[openresty] Re: 变量使用问题

收件人："openresty"<openresty@googlegroups.com>

抄送：

最新测试, 发现同时在两个ｌｕａ文件中 db:connect(cfg) 不成功, 报下面错误:

2013/11/14 19:30:09 [error] 5290#0: *425 lua entry thread aborted: runtime error: attempt to yield across C-call boundary

求解决.

2013/11/14 wxianfeng <wang....@gmail.com>

后者说我遇到的这种情况, 如何处理比较好, @春哥

2013/11/14 wxianfeng <wang....@gmail.com>

hi all:

情况这样,项目越做越重, 在一个 request 中, 我有很多个文件要使用 mysql 连接查询

local mysql = require("resty.mysql")

local db = mysql:new()

那么在每个文件中都需要 db:connect(), 开销很大.

请问有好的办法,共用一些变量吗?

方法中传递 db 对象? 感觉很笨, 有好的办法吗?

谢谢.

--

--

agentzh

Hello!

2013/11/14 wxianfeng:
> 情况这样,项目越做越重, 在一个 request 中, 我有很多个文件要使用 mysql 连接查询
>
> local mysql = require("resty.mysql")
> local db = mysql:new()
>
> 那么 在每个文件中 都需要 db:connect(), 开销很大.

如果你没有在同一个请求的处理程序里面使用多个轻量级线程（即通过 ngx.thread.create 创建）同时访问 MySQL，则可以把
resty.mysql 对象 （即 MySQL 连接）缓存在 ngx.ctx 表的某个你自己的字段里面（比如
ngx.ctx.mysql）。这个 ngx.ctx 表是每请求的生命期，见

    https://github.com/chaoslawful/lua-nginx-module#ngxctx

不过，如果你在连续的两次使用 MySQL 连接之间有较长延时的操作（比如不相干的 I/O 或者 ngx.sleep 之类），同时当前的
MySQL 连接并没有处于一个 MySQL 事务的中间，则建议在每次使用完后立即调用 set_keepalive
将当前的连接放进连接池中（这样其他的并发请求可以有机会复用这个连接，从而提高较为昂贵的数据库连接的利用率）。

毕竟 resty.mysql 对象的 connect() 方法总是会先查看连接池中有没有可用的空闲连接。如果有的话，connect()
方法会立即返回，并不会产生 I/O 操作，效率其实还是非常高的。

另外，建议在尝试优化你的 openresty 应用的时候，总是使用 Nginx Systemtap Toolkit
里面的工具分析实际的性能热点，特别是 C 和 Lua 级别的 on-CPU 和 off-CPU 火焰图工具：

    https://github.com/agentzh/nginx-systemtap-toolkit#sample-bt
    https://github.com/agentzh/nginx-systemtap-toolkit#ngx-sample-lua-bt
    https://github.com/agentzh/nginx-systemtap-toolkit#sample-bt-off-cpu

以避免对不是热点的细节进行无谓的优化。

Regards,
-agentzh

agentzh

Hello!

2013/11/14 wxianfeng:
> 最新测试, 发现同时在两个ｌｕａ文件中 db:connect(cfg) 不成功, 报下面错误:
>
> 2013/11/14 19:30:09 [error] 5290#0: *425 lua entry thread aborted: runtime
> error: attempt to yield across C-call boundary
>

这个错误是说你使用的某个 C 函数实现的 Lua 原语（比如 require 和 loadfile 之类）直接触发了 resty.mysql
的 I/O 操作（例如 connect 之类）。你应当避免让 require 和 loadfile 等操作直接触发 mysql 的 I/O
操作（比如把 mysql 相关的操作都放在你自己的 Lua 函数里，而不是放在 Lua 模块文件（.lua 文件）的顶层上）。

Regards,
-agentzh

doujiang24

我在虚拟机上简单测试过，开启长连接，每次连接关闭耗时是微秒级别，具体应该与机器性能有关

如果不是要连接几十，甚至上百个连接的话，这个基本都可以接受

在 2013年11月15日上午3:28，Yichun Zhang (agentzh) <age...@gmail.com>写道：

Hello!

2013/11/14 wxianfeng:

> 最新测试, 发现同时在两个ｌｕａ文件中 db:connect(cfg) 不成功, 报下面错误:
>
> 2013/11/14 19:30:09 [error] 5290#0: *425 lua entry thread aborted: runtime
> error: attempt to yield across C-call boundary
>

这个错误是说你使用的某个 C 函数实现的 Lua 原语（比如 require 和 loadfile 之类）直接触发了 resty.mysql
的 I/O 操作（例如 connect 之类）。你应当避免让 require 和 loadfile 等操作直接触发 mysql 的 I/O
操作（比如把 mysql 相关的操作都放在你自己的 Lua 函数里，而不是放在 Lua 模块文件（.lua 文件）的顶层上）。

Regards,
-agentzh

--

wang.fl1429

解决了, 谢谢春哥.

这个原因导致的: require 的文件里有顶层的 mysql io 操作.

这个帖子给我的信息量很大, 谢谢.

2013/11/15 DeJiang Zhu <douj...@gmail.com>

我在虚拟机上简单测试过，开启长连接，每次连接关闭耗时是微秒级别，具体应该与机器性能有关

如果不是要连接几十，甚至上百个连接的话，这个基本都可以接受

在 2013年11月15日上午3:28，Yichun Zhang (agentzh) <age...@gmail.com>写道：

Hello!

2013/11/14 wxianfeng:

> 最新测试, 发现同时在两个ｌｕａ文件中 db:connect(cfg) 不成功, 报下面错误:
>
> 2013/11/14 19:30:09 [error] 5290#0: *425 lua entry thread aborted: runtime
> error: attempt to yield across C-call boundary
>

这个错误是说你使用的某个 C 函数实现的 Lua 原语（比如 require 和 loadfile 之类）直接触发了 resty.mysql
的 I/O 操作（例如 connect 之类）。你应当避免让 require 和 loadfile 等操作直接触发 mysql 的 I/O
操作（比如把 mysql 相关的操作都放在你自己的 Lua 函数里，而不是放在 Lua 模块文件（.lua 文件）的顶层上）。

Regards,
-agentzh

--

--