请教关于ngx_lua执行lua code（带有网络io）的阻塞一些疑问

wl19871011 · 2013-05-30T11:45:54+00:00

Hello! On Wed, May 29, 2013 at 7:26 PM, clarkxiao82 wrote: > RT，在code cache开启与关闭的情&#x51B5...

请教关于ngx_lua执行lua code（带有网络io）的阻塞一些疑问

wl19871011

hi 如题

我们打算在正式的生产环境中使用Ngx_lua。目前我们的瓶颈就是，使用的脚本语言处理网络io是同步阻塞的。这就导致如果后端服务有问题就会导致我们的脚本进程打满（e.g php-cgi）。从而无法继续对新的请求进行处理。

在使用ngx_lua的时候，我们打算用c写一套网络交互的lua 扩展模块。这样在单个请求来的时候ngx_lua会对每个请求都创建一个coroutine来运行lua code（个人理解，求证ing）。那么如果lua code 代码本身存在阻塞的逻辑(网络io)，会对ngx work process有影响吗？

如果有影响，那么解决的方案是不是有：1 . 调用ngx_lua提供的io库。 2. 在lua代码中自己使用coroutine。以及是什么原因产生的对ngx work process的影响呢？

agentzh

Hello!

2013/5/29 wl1011 wl19871011:
>     在使用ngx_lua的时候，我们打算用c写一套网络交互的lua
> 扩展模块。这样在单个请求来的时候ngx_lua会对每个请求都创建一个coroutine来运行lua code（个人理解，求证ing）。那么如果lua
> code 代码本身存在阻塞的逻辑(网络io)，会对ngx work process有影响吗？

你应当总是使用 ngx_lua 提供的 Lua API 来进行网络操作，特别地，应当使用 cosocket API 或者子请求 API.
可以参考 openresty 中现有的那些网络客户端库的实现，比如 lua-resty-memcached,
lua-resty-redis, lua-resty-dns, 和 lua-resty-mysql:

    http://wiki.nginx.org/HttpLuaModule#Description

使用纯 C 代码通过标准的 Lua C API 来写这里的逻辑并不会带来性能提升，相反很可能会性能下滑。事实上，我正在把 ngx_lua
模块现有的 C 代码迁移到 Lua，而且在被 LuaJIT 的 JIT 编译器编译后，观察到了显著的性能提升：

    https://github.com/agentzh/lua-resty-core

>    如果有影响，那么解决的方案是不是有：1 . 调用ngx_lua提供的io库。 2.
> 在lua代码中自己使用coroutine。以及是什么原因产生的对ngx work process的影响呢？
>

你在你自己的 Lua 代码中使用 coroutine 并不能自动让网络 I/O 变成非阻塞。因为这里你需要和 nginx
的主事件循环一起工作，而 nginx 的主事件循环并没有暴露出 Lua 接口来。

因此，你应当总是使用 ngx_lua 模块封装好的那些 API 来进行 I/O 操作。

Best regards,
-agentzh

wl19871011

好的，谢谢

在 2013年5月30日星期四UTC+8下午12时18分01秒，agentzh写道：

Hello!

2013/5/29 wl1011 wl19871011:
> 在使用ngx_lua的时候，我们打算用c写一套网络交互的lua
> 扩展模块。这样在单个请求来的时候ngx_lua会对每个请求都创建一个coroutine来运行lua code（个人理解，求证ing）。那么如果lua
> code 代码本身存在阻塞的逻辑(网络io)，会对ngx work process有影响吗？

你应当总是使用 ngx_lua 提供的 Lua API 来进行网络操作，特别地，应当使用 cosocket API 或者子请求 API.
可以参考 openresty 中现有的那些网络客户端库的实现，比如 lua-resty-memcached,
lua-resty-redis, lua-resty-dns, 和 lua-resty-mysql:

http://wiki.nginx.org/HttpLuaModule#Description

使用纯 C 代码通过标准的 Lua C API 来写这里的逻辑并不会带来性能提升，相反很可能会性能下滑。事实上，我正在把 ngx_lua
模块现有的 C 代码迁移到 Lua，而且在被 LuaJIT 的 JIT 编译器编译后，观察到了显著的性能提升：

https://github.com/agentzh/lua-resty-core

> 如果有影响，那么解决的方案是不是有：1 . 调用ngx_lua提供的io库。 2.
> 在lua代码中自己使用coroutine。以及是什么原因产生的对ngx work process的影响呢？
>

你在你自己的 Lua 代码中使用 coroutine 并不能自动让网络 I/O 变成非阻塞。因为这里你需要和 nginx
的主事件循环一起工作，而 nginx 的主事件循环并没有暴露出 Lua 接口来。

因此，你应当总是使用 ngx_lua 模块封装好的那些 API 来进行 I/O 操作。

Best regards,
-agentzh