drizzle返回值

rockiee281 · 2013-11-06T12:39:53+00:00

Hello! 2013/11/5 Yichun Zhang (agentzh): > 这主要是因为 Nginx upstream 目前不会在 write...

drizzle返回值

rockiee281

Hello，

我们现在在线上使用的是ngx_openresty/1.2.6.6，最近在用drizzle做一些数据的插入操作发现了一些疑惑。数据在插入的时候报错了，因为某个字段超长，“Data too long for column 'data' at row 1 while sending query to drizzle upstream”，但是返回res的status却是200。

那是不是只要连接数据库并操作成功，状态就是200呢？这个status不会反应sql的执行结果么？因为我一开始的预期是drizzle_query只要在执行sql的过程中出现任何错误，都不会返回ngx.HTTP_OK的，求解答

2013-11-06

rockiee281

agentzh

Hello!

2013/11/5 rockiee281:
> 我们现在在线上使用的是ngx_openresty/1.2.6.6，最近在用drizzle做一些数据的插入操作发现了一些疑惑。数据在插入的时候报错了，因为某个字段超长，“Data
> too long for column 'data' at row 1 while sending query to drizzle
> upstream”，但是返回res的status却是200。
> 那是不是只要连接数据库并操作成功，状态就是200呢？

在这种情况下 ngx_drizzle 产生的是 500 的错误码，而不是 200。请看下面这个最小化的完整示例：

    upstream backend {
        drizzle_server 127.0.0.1:3306 protocol=mysql
                       dbname=ngx_test user=ngx_test password=ngx_test;
        #drizzle_keepalive max=10 overflow=ignore mode=single;
    }

    server {
        listen 8080;

       location = /mysql {
           drizzle_pass backend;
           drizzle_query "insert into cats (name) values ('hello world!')";
           rds_json on;
       }
   }

同时我们在 MySQL 一侧事先创建好下面这个 cats 表：

    CREATE TABLE cats (id integer, name varchar(1))

同时在 MySQL 自己的 /etc/my.cnf 配置文件中的 [mysqld] 下面配置好下面这一行：

    sql-mode="STRICT_ALL_TABLES"

然后我们启动 nginx 并访问上面定义的 /mysql 这个接口：

    $ curl -i localhost:8080/mysql
    HTTP/1.1 500 Internal Server Error
    Server: nginx/1.4.3
    Date: Wed, 06 Nov 2013 05:11:29 GMT
    Content-Type: text/html
    Content-Length: 202
    Connection: close

    <html>
    <head><title>500 Internal Server Error</title></head>
    <body bgcolor="white">
    <center><h1>500 Internal Server Error</h1></center>
    <hr><center>nginx/1.4.3 (no pool)</center>
    </body>
    </html>

我们可以看到确实是 500 错误码和 500 错误页。

Nginx 错误日志文件中也出现了和你一样的 mysql 错误消息：

    $ grep error logs/error.log
    2013/11/05 21:11:29 [error] 11281#0: *5 failed to send query: 17
(1406): Data too long for column 'name' at row 1 while sending query
to drizzle upstream, client: 127.0.0.1, server: localhost, request:
"GET /mysql HTTP/1.1", upstream: "drizzle://127.0.0.1:3306", host:
"localhost:8080"

我这里使用的 ngx_drizzle、ngx_rds_json 和 nginx 的版本和最新的 ngx_openresty 主线版 1.4.3.1 完全一致。

另外，值得一提的是，推荐总是使用最新的 ngx_openresty 主线版或者稳定版。

Best regards,
-agentzh

rockiee281

感谢回复，看了你给出的case，我又拿我们的样例做了一次测试。data字段是varchar(2000)，所以我特意构造了一个超长的串： curl -d "src="" http://example.com 类似这种。

测试的结果是：

error_log:2013/11/06 14:20:47 [error] 32168#0: *216470661 failed to send query: 17 (1406): Data too long for column 'data' at row 1 while sending query to drizzle upstream, client: xxx, server: xxx, request: "POST /clientstat/trafficStat HTTP/1.1", subrequest: "/statUserTraffic", upstream: "drizzle://xxxx", host: "xxxx"

access_log:xxx.xxx.xxx.xxx - - [06/Nov/2013:14:20:47 +0800] "POST /clientstat/trafficStat HTTP/1.1" 200 30 0.001 - - "-" "curl/7.19.7 (x86_64-redhat-linux-gnu) libcurl/7.19.7 NSS/3.13.1.0 zlib/1.2.3 libidn/1.18 libssh2/1.2.2" "-"

nginx的host配置为：

location ~ ^/clientstat/trafficStat$ {
                expires -1;
                lua_need_request_body on;
                content_by_lua '
                            local paras = ngx.req.get_post_args()
                            if not paras then
                               return 403;
                            end
                            local res = ngx.location.capture("/statUserTraffic",{args={src="">                            if res.status == ngx.HTTP_OK then
                                ngx.say("true");
                            else
                                ngx.say("false");
                              -- return ngx.HTTP_INTERNAL_SERVER_ERROR;
                            end
            ';
      }

location /statUserTraffic {
         internal;
         default_type 'text/plain';
         set $src $arg_src;
         set_by_lua $decodesrc '
           return ngx.unescape_uri(ngx.var.src);
         ';
         drizzle_query "insert into client_stat_log (status,insertdate,data,type,ip) values(0,now(),'$decodesrc','2','$arg_ip')";
         drizzle_pass mysql_statistic_single;
         rds_json on;
     }

除了一些服务器的地址打码了，别的都是我们实际的配置。当src超长的时候，表现很奇怪，不会报500，也不会返回true。另外，如果把“return ngx.HTTP_INTERNAL_SERVER_ERROR;”替换为“ngx.say("false")”，则会正确的返回false。上面标红的这一句，为什么不能正确的返回500响应呢？

2013-11-06

rockiee281

发件人："Yichun Zhang (agentzh)" <age...@gmail.com>

发送时间：2013-11-06 13:15

主题：Re: [openresty] drizzle返回值

收件人："openresty"<openresty@googlegroups.com>

抄送：

Hello!

2013/11/5 rockiee281:

> 我们现在在线上使用的是ngx_openresty/1.2.6.6，最近在用drizzle做一些数据的插入操作发现了一些疑惑。数据在插入的时候报错了，因为某个字段超长，“Data

> too long for column 'data' at row 1 while sending query to drizzle

> upstream”，但是返回res的status却是200。

> 那是不是只要连接数据库并操作成功，状态就是200呢？

在这种情况下 ngx_drizzle 产生的是 500 的错误码，而不是 200。请看下面这个最小化的完整示例：

upstream backend {

drizzle_server 127.0.0.1:3306 protocol=mysql

dbname=ngx_test user=ngx_test password=ngx_test;

#drizzle_keepalive max=10 overflow=ignore mode=single;

}

server {

listen 8080;

location = /mysql {

drizzle_pass backend;

drizzle_query "insert into cats (name) values ('hello world!')";

rds_json on;

}

同时我们在 MySQL 一侧事先创建好下面这个 cats 表：

CREATE TABLE cats (id integer, name varchar(1))

同时在 MySQL 自己的 /etc/my.cnf 配置文件中的 [mysqld] 下面配置好下面这一行：

sql-mode="STRICT_ALL_TABLES"

然后我们启动 nginx 并访问上面定义的 /mysql 这个接口：

$ curl -i localhost:8080/mysql

HTTP/1.1 500 Internal Server Error

Server: nginx/1.4.3

Date: Wed, 06 Nov 2013 05:11:29 GMT

Content-Type: text/html

Content-Length: 202

Connection: close

<html>

<head><title>500 Internal Server Error</title></head>

<center><h1>500 Internal Server Error</h1></center>

<hr><center>nginx/1.4.3 (no pool)</center>

</body>

</html>

我们可以看到确实是 500 错误码和 500 错误页。

Nginx 错误日志文件中也出现了和你一样的 mysql 错误消息：

$ grep error logs/error.log

2013/11/05 21:11:29 [error] 11281#0: *5 failed to send query: 17

(1406): Data too long for column 'name' at row 1 while sending query

to drizzle upstream, client: 127.0.0.1, server: localhost, request:

"GET /mysql HTTP/1.1", upstream: "drizzle://127.0.0.1:3306", host:

"localhost:8080"

我这里使用的 ngx_drizzle、ngx_rds_json 和 nginx 的版本和最新的 ngx_openresty 主线版 1.4.3.1 完全一致。

另外，值得一提的是，推荐总是使用最新的 ngx_openresty 主线版或者稳定版。

Best regards,

-agentzh

邮件来自列表“openresty”,专用于技术讨论!

订阅: 请发空白邮件到 openresty+subscribe@googlegroups.com

发言: 请发邮件到 openresty@googlegroups.com

退订: 请发邮件至 openresty+unsubscribe@googlegroups.com

归档: http://groups.google.com/group/openresty

官网: http://openresty.org/

仓库: https://github.com/agentzh/ngx_openresty

教程: http://openresty.org/download/agentzh-nginx-tutorials-zhcn.html

agentzh

Hello!

2013/11/5 rockiee281:
>
> 除了一些服务器的地址打码了，别的都是我们实际的配置。当src超长的时候，表现很奇怪，不会报500，也不会返回true。

那是返回什么？空响应？你可以自己添加一些 Lua 调试代码检查一下。另外，仔细不要超出 MySQL 一侧的查询大小的上限。同时注意查看 Nginx 错误日志。

一个建议是从最简单的用例开始测试起，就像我上一封邮件里演示的最小用例那样。这样方便排查问题。

> 另外，如果把“return
> ngx.HTTP_INTERNAL_SERVER_ERROR;”替换为“ngx.say("false")”，则会正确的返回false。上面标红的这一句，为什么不能正确的返回500响应呢？
>

你这里的用法本来就是错误的。如果你想生成自定义响应体的 500 响应，应当这么写：

    ngx.status = 500
    ngx.say("false")
    return ngx.exit(500)

更多细节请参考 ngx_lua 模块的官方文档：https://github.com/chaoslawful/lua-nginx-module#readme

Regards,
-agentzh

rockiee281

了解了，感谢回复。看对lua了解的还是不够：D

2013-11-06

rockiee281

发件人："Yichun Zhang (agentzh)" <age...@gmail.com>

发送时间：2013-11-06 15:15

主题：Re: Re: [openresty] drizzle返回值

收件人："openresty"<openresty@googlegroups.com>

抄送：

Hello!

2013/11/5 rockiee281:

> 除了一些服务器的地址打码了，别的都是我们实际的配置。当src超长的时候，表现很奇怪，不会报500，也不会返回true。

那是返回什么？空响应？你可以自己添加一些 Lua 调试代码检查一下。另外，仔细不要超出 MySQL 一侧的查询大小的上限。同时注意查看 Nginx 错误日志。

一个建议是从最简单的用例开始测试起，就像我上一封邮件里演示的最小用例那样。这样方便排查问题。

> 另外，如果把“return

> ngx.HTTP_INTERNAL_SERVER_ERROR;”替换为“ngx.say("false")”，则会正确的返回false。上面标红的这一句，为什么不能正确的返回500响应呢？

你这里的用法本来就是错误的。如果你想生成自定义响应体的 500 响应，应当这么写：

ngx.status = 500

ngx.say("false")

return ngx.exit(500)

更多细节请参考 ngx_lua 模块的官方文档：https://github.com/chaoslawful/lua-nginx-module#readme

Regards,

-agentzh

邮件来自列表“openresty”,专用于技术讨论!

订阅: 请发空白邮件到 openresty+subscribe@googlegroups.com

发言: 请发邮件到 openresty@googlegroups.com

退订: 请发邮件至 openresty+unsubscribe@googlegroups.com

归档: http://groups.google.com/group/openresty

官网: http://openresty.org/

仓库: https://github.com/agentzh/ngx_openresty

教程: http://openresty.org/download/agentzh-nginx-tutorials-zhcn.html