drizzle间歇性504问题

midmiss · 2012-11-08T09:47:29+00:00

Hello! On Tue, Nov 6, 2012 at 7:00 PM, azure wang wrote: > > nginx_lua0.7与0.6相比有哪些变化？ &...

drizzle间歇性504问题

midmiss

大家好，
	drizzle用在生产环境，最近发现每隔几分钟，都会返回大量504错误。大家遇到过类似的问题吗？
	是不是drizzle的连接什么生存期的？求解惑。

	另外，不知道大家再客户端方面是怎么连接drizzle的，我们客户端是php，用curl连接，curl_exec经常出现在php慢日志里。



Salforis

smallfish.xy

建议先瞄一下error.log中内容看是否有帮助。

如果用php的curl访问，建议查看两个opt选项：连接超时和执行超时两个时间。

还有打开mysql的慢查询。
--

smallfish http://chenxiaoyu.org

2012/11/8 Salforis <mid...@gmail.com>

大家好，
drizzle用在生产环境，最近发现每隔几分钟，都会返回大量504错误。大家遇到过类似的问题吗？
是不是drizzle的连接什么生存期的？求解惑。

另外，不知道大家再客户端方面是怎么连接drizzle的，我们客户端是php，用curl连接，curl_exec经常出现在php慢日志里。

Salforis

midmiss

error log一切正常，php curl的超时时间是3s。MySQL的满查询一直开着，也没有异常。

drizzle_connect_timeout 这个值我设置的600ms，curl打出的504日志执行时间也都是600ms。

但是我drizzlehe和MySQL都在一个机柜里，600ms肯定是足够的。

我感觉是drizzle到MySQL的连接会间歇性断开。

在 2012-11-8，上午9:57，smallfish <small...@gmail.com> 写道：

建议先瞄一下error.log中内容看是否有帮助。
如果用php的curl访问，建议查看两个opt选项：连接超时和执行超时两个时间。
还有打开mysql的慢查询。
--
smallfish http://chenxiaoyu.org

2012/11/8 Salforis <mid...@gmail.com>
大家好，
drizzle用在生产环境，最近发现每隔几分钟，都会返回大量504错误。大家遇到过类似的问题吗？
是不是drizzle的连接什么生存期的？求解惑。

另外，不知道大家再客户端方面是怎么连接drizzle的，我们客户端是php，用curl连接，curl_exec经常出现在php慢日志里。

Salforis

agentzh

Hello!

2012/11/7 Salforis:
>         drizzle用在生产环境，最近发现每隔几分钟，都会返回大量504错误。大家遇到过类似的问题吗？
>         是不是drizzle的连接什么生存期的？求解惑。
>

1. 在 Nginx 配置文件中的 error_log 指令里使用 error 或以下的错误级别，不要使用 crit 这样高的级别，否则你看不到错误信息；

2. 根据你的数据库机器的负载情况以及 Nginx 与 MySQL 之间的网络情况，调整你的超时设置（600 ms 是相当之短的设置）。

3. 检查你的数据库机器是否 CPU 使用较高而发生 accept 队列溢出（即 SYN 包被丢弃）。

4. 请确保你使用的 libdrizzle 版本足够高，见这里的要求：

    http://wiki.nginx.org/HttpDrizzleModule#Installation

较老版本的 libdrizzle 存在连接环节的 bug.

5. 请确认你启用了 ngx_drizzle 模块提供的 MySQL 连接池，并进行恰当的配置：

    http://wiki.nginx.org/HttpDrizzleModule#Keepalive_connection_pool

6. 实在不行，可以考虑试用 lua-resty-mysql 库，检查是否问题会消失，以确认是 ngx_drizzle 模块的问题，而非其他：

    https://github.com/agentzh/lua-resty-mysql

Best regards,
-agentzh

midmiss

我们猜测，是在当前连接池中连接用光，又没达到max时，新建到DB的连接超时。
drizzle_keepalive 这个段，只有max参数，有没有一个参数可以控制最小连接数？初始化的时候就开启这些个连接，避免客户端超时。
我观察DB的连接，貌似默认时开启8个?


在 2012-11-8，上午10:38，agentzh <age...@gmail.com> 写道：

> Hello!
> 
> 2012/11/7 Salforis:
>>        drizzle用在生产环境，最近发现每隔几分钟，都会返回大量504错误。大家遇到过类似的问题吗？
>>        是不是drizzle的连接什么生存期的？求解惑。
>> 
> 
> 1. 在 Nginx 配置文件中的 error_log 指令里使用 error 或以下的错误级别，不要使用 crit 这样高的级别，否则你看不到错误信息；
> 
> 2. 根据你的数据库机器的负载情况以及 Nginx 与 MySQL 之间的网络情况，调整你的超时设置（600 ms 是相当之短的设置）。
> 
> 3. 检查你的数据库机器是否 CPU 使用较高而发生 accept 队列溢出（即 SYN 包被丢弃）。
> 
> 4. 请确保你使用的 libdrizzle 版本足够高，见这里的要求：
> 
>    http://wiki.nginx.org/HttpDrizzleModule#Installation
> 
> 较老版本的 libdrizzle 存在连接环节的 bug.
> 
> 5. 请确认你启用了 ngx_drizzle 模块提供的 MySQL 连接池，并进行恰当的配置：
> 
>    http://wiki.nginx.org/HttpDrizzleModule#Keepalive_connection_pool
> 
> 6. 实在不行，可以考虑试用 lua-resty-mysql 库，检查是否问题会消失，以确认是 ngx_drizzle 模块的问题，而非其他：
> 
>    https://github.com/agentzh/lua-resty-mysql
> 
> Best regards,
> -agentzh
> 
>

agentzh

Hello!

2012/11/7 Salforis:
> 我们猜测，是在当前连接池中连接用光，又没达到max时，新建到DB的连接超时。

不要猜测，直接使用相应的系统工具去验证我在上一封邮件中列举的那些可能存在的问题。

在工程上应当直接诊断造成超时的直接原因，而不是去猜想外围间接的原因。

> drizzle_keepalive 这个段，只有max参数，有没有一个参数可以控制最小连接数？初始化的时候就开启这些个连接，避免客户端超时。
> 我观察DB的连接，貌似默认时开启8个?
>

ngx_drizzle 模块的连接池并没有提供预连 DB 的功能，但你可以在 Nginx 中使用 ngx_limit_req 和
ngx_limit_conn 模块进行访问频度和访问并发的限制，可以达到同样的限制效果。

Regards,
-agentzh