lua-resty-resis的lua tcp socket read timed out問題

pahudnet · 2014-04-15T17:23:08+00:00

Hello! 2014-04-15 3:24 GMT-07:00 Ruoshan Huang: > 动手做了个实验, 如下. 仔细想&#x...

lua-resty-resis的lua tcp socket read timed out問題

pahudnet

我在AWS上面部署OpenResty目前使用版本是 ngx_openresty-1.4.3.3

有大量的API操作全部依賴redis，目前nginx_status數據

Active connections: 608

server accepts handled requests

6084 6084 6727

Reading: 0 Writing: 372 Waiting: 236

netstat -nt的數據我做了一些summary處理：

tcpcnt: 1370

httpcnt: 720

rediscnt: 636

------------------------------

ESTABLISHED: 1115

TIME_WAIT: 4

LAST_ACK: 108

CLOSE_WAIT: 143

------------------------------

然後nginx error.log出現大量這種錯誤

Active connections: 608

server accepts handled requests

6084 6084 6727

Reading: 0 Writing: 372 Waiting: 236

2014/04/15 17:02:49 [error] 1773#0: *3390 lua tcp socket read timed out, client: 10.0.0.57, server: localhost, request: "GET /api/listen?json HTTP/1.1"

以及

2014/04/15 17:03:19 [error] 1918#0: *4825 [lua] listen.lua:47: redis_keepalive(): [ERROR]failed to set redis keepalive: connection in dubious state, client: 10.0.0.57, server: localhost, request: "GET /api/listen/?json HTTP/1.1"

有些甚至hmget()操作出現了timeout
2014/04/15 17:10:04 [error] 1774#0: *8908 [lua] fetch.lua:120: has_latest(): hmget failed: timeout, client: 10.0.0.57, server: localhost

請問在這樣規模的併發下，是否有什麼參數需要調整或是注意的？

目前使用的redis是AWS ElastiCache redis 2.8.6 預設的設置。

謝謝！

doujiang24

这种情况得看 redis 配置，redis 出现响应慢也不奇怪，尤其是 redis 持久化这块，高频修改导致 redis 频繁持久化，造成响应时间抖动比较常见

hmget 相对而言也属于高代价操作，尤其是一次取的 field 很多的时候

2014-04-15 17:23 GMT+08:00 Pahud Hsieh <pah...@gmail.com>:

我在AWS上面部署OpenResty目前使用版本是 ngx_openresty-1.4.3.3

有大量的API操作全部依賴redis，目前nginx_status數據

Active connections: 608
server accepts handled requests
6084 6084 6727
Reading: 0 Writing: 372 Waiting: 236

netstat -nt的數據我做了一些summary處理：

tcpcnt: 1370
httpcnt: 720
rediscnt: 636

------------------------------
ESTABLISHED: 1115
TIME_WAIT: 4
LAST_ACK: 108
CLOSE_WAIT: 143
------------------------------

然後nginx error.log出現大量這種錯誤

Active connections: 608
server accepts handled requests
6084 6084 6727
Reading: 0 Writing: 372 Waiting: 236

2014/04/15 17:02:49 [error] 1773#0: *3390 lua tcp socket read timed out, client: 10.0.0.57, server: localhost, request: "GET /api/listen?json HTTP/1.1"

以及

2014/04/15 17:03:19 [error] 1918#0: *4825 [lua] listen.lua:47: redis_keepalive(): [ERROR]failed to set redis keepalive: connection in dubious state, client: 10.0.0.57, server: localhost, request: "GET /api/listen/?json HTTP/1.1"

有些甚至hmget()操作出現了timeout
2014/04/15 17:10:04 [error] 1774#0: *8908 [lua] fetch.lua:120: has_latest(): hmget failed: timeout, client: 10.0.0.57, server: localhost

請問在這樣規模的併發下，是否有什麼參數需要調整或是注意的？

目前使用的redis是AWS ElastiCache redis 2.8.6 預設的設置。

謝謝！

--

agentzh

Hello!

On Tue, Apr 15, 2014 at 2:23 AM, Pahud Hsieh wrote:
> 我在AWS上面部署OpenResty目前使用版本是 ngx_openresty-1.4.3.3
>

你使用的 OpenResty 版本很老，是五个多月前的版本。建议升级到最新版。

> 然後nginx error.log出現大量這種錯誤
>
[...]
> 2014/04/15 17:02:49 [error] 1773#0: *3390 lua tcp socket read timed out,
> client: 10.0.0.57, server: localhost, request: "GET /api/listen?json
> HTTP/1.1"
[...]
> 2014/04/15 17:03:19 [error] 1918#0: *4825 [lua] listen.lua:47:
> redis_keepalive(): [ERROR]failed to set redis keepalive: connection in
> dubious state, client: 10.0.0.57, server: localhost, request: "GET
> /api/listen/?json HTTP/1.1"
>
> 有些甚至hmget()操作出現了timeout
> 2014/04/15 17:10:04 [error] 1774#0: *8908 [lua] fetch.lua:120: has_latest():
> hmget failed: timeout, client: 10.0.0.57, server: localhost
>
> 請問在這樣規模的併發下，是否有什麼參數需要調整或是注意的？
>

谢对照 lua-resty-redis 文件中的“Check List for Issues”一节进行调整和诊断：

    https://github.com/agentzh/lua-resty-redis#check-list-for-issues

> 目前使用的redis是AWS ElastiCache redis 2.8.6 預設的設置。
>

Redis 的默认配置是比较保守的，应当进行相应的调整（见上面给出的文档链接）。

Regards,
-agentzh

alan666zuo

hi，

抱歉挖坟了。。。

我和你遇到了类似的问题，请问你解决了吗？怎么解决的？

在 2014年4月15日星期二 UTC+8下午5:23:07，Pahud Hsieh写道：

我在AWS上面部署OpenResty目前使用版本是 ngx_openresty-1.4.3.3

有大量的API操作全部依賴redis，目前nginx_status數據

Active connections: 608
server accepts handled requests
6084 6084 6727
Reading: 0 Writing: 372 Waiting: 236

netstat -nt的數據我做了一些summary處理：

tcpcnt: 1370
httpcnt: 720
rediscnt: 636
------------------------------
ESTABLISHED: 1115
TIME_WAIT: 4
LAST_ACK: 108
CLOSE_WAIT: 143
------------------------------

然後nginx error.log出現大量這種錯誤

Active connections: 608
server accepts handled requests
6084 6084 6727
Reading: 0 Writing: 372 Waiting: 236

2014/04/15 17:02:49 [error] 1773#0: *3390 lua tcp socket read timed out, client: 10.0.0.57, server: localhost, request: "GET /api/listen?json HTTP/1.1"

以及

2014/04/15 17:03:19 [error] 1918#0: *4825 [lua] listen.lua:47: redis_keepalive(): [ERROR]failed to set redis keepalive: connection in dubious state, client: 10.0.0.57, server: localhost, request: "GET /api/listen/?json HTTP/1.1"

有些甚至hmget()操作出現了timeout
2014/04/15 17:10:04 [error] 1774#0: *8908 [lua] fetch.lua:120: has_latest(): hmget failed: timeout, client: 10.0.0.57, server: localhost

請問在這樣規模的併發下，是否有什麼參數需要調整或是注意的？

目前使用的redis是AWS ElastiCache redis 2.8.6 預設的設置。

謝謝！