openresty在不同linux服务器上安装后取数据库table行为不同问题

summer.hot · 2012-10-09T23:42:10+00:00

Hello! 2015-07-07 12:08 GMT+08:00 陈立强: > > 我现在的情况也是这样&#xFF0...

openresty在不同linux服务器上安装后取数据库table行为不同问题

summer.hot

hi，大家好，我安装了openresty，发现在不同平台下，使用resty.mysql lua取出的table格式不一样。。

有一台机器是：fedora 15 ，ngx_openresty-1.2.1.14.tar.gz 使用 yum 安装的 readline-devel pcre-devel openssl-devel

还有一台是：Red Hat Enterprise Linux AS release 4 (Nahant Update 8) ，也是使用ngx_openresty-1.2.1.14.tar.gz，configure openresty的时候缺pcre，我下载了一个pcre-8.30.tar.gz ，指定pcre源码后configure成功。readline-devel和openssl-devel没有特意安装，看安装过程，是找到系统默认安装的了。

安装成功后，运行同样的取数据库程序，scores.lua，都是从数据库取数据，相同的数据库，相同的lua代码，两台机器运行结果不同。

都是用 ngx_openresty-1.2.1.14.tar.gz 这个版本。Red Hat 服务器取出的table，用res[1]['trade_score']取不出来，用res[1][1] ,用索引取得出来。

运行的数据库代码在 http://gitcd.com/viewRepo.htm?repoId=309&absFileName=/lua/scores.lua&cId=b47c48b

agentzh

Hello!

2012/10/9 summer summer:
> Red Hat
> 服务器取出的table，用res[1]['trade_score']取不出来，用res[1][1] ,用索引取得出来。
> 运行的数据库代码在
> http://gitcd.com/viewRepo.htm?repoId=309&absFileName=/lua/scores.lua&cId=b47c48b
>

对应 res[1]['trade_score'] 有值的情形，应当是 resty.mysql 的构造函数中提供的
compact_arrays 选项为假值的时候（默认为假）。而对应 res[1][1] 有值的情形，则是 compact_arrays
选项为真值的时候。

从你提供的 Lua 代码来看，compact_arrays 被置为了真值，所以 res[1][1] 有值应该是期望的。请确认
res[1]['trade_score'] 有值的那台机器上的 Lua 代码里，究竟是如何设置 compact_arrays
选项的。另外，你可以尝试重启 nginx 以确保你最新的 Lua 文件确实被正确加载了。

值得一提的是，你的 Lua 代码中存在 SQL 注入的安全风险。可以这样修复：

    local sql = 'select * from users_scores where user_id=\'' ..
ngx.quote_sql_str(someId) .. '\''

Best regards,
-agentzh

summer.hot

两台机器都是相同的代码，你说的compact_arrays应该怎么设置？不好意思，我是新手。

其他都是相同的，因为只是编译环境不同，刚刚也重启nginx试过了，仍然是一台机器运行好的，一台报错。

On Wednesday, October 10, 2012 7:14:24 AM UTC+8, agentzh wrote:

Hello!
2012/10/9 summer summer:
> Red Hat
> 服务器取出的table，用res[1]['trade_score']取不出来，用res[1][1] ,用索引取得出来。
> 运行的数据库代码在
> http://gitcd.com/viewRepo.htm?repoId=309&absFileName=/lua/scores.lua&cId=b47c48b
>
对应 res[1]['trade_score'] 有值的情形，应当是 resty.mysql 的构造函数中提供的
compact_arrays 选项为假值的时候（默认为假）。而对应 res[1][1] 有值的情形，则是 compact_arrays
选项为真值的时候。
从你提供的 Lua 代码来看，compact_arrays 被置为了真值，所以 res[1][1] 有值应该是期望的。请确认
res[1]['trade_score'] 有值的那台机器上的 Lua 代码里，究竟是如何设置 compact_arrays
选项的。另外，你可以尝试重启 nginx 以确保你最新的 Lua 文件确实被正确加载了。
值得一提的是，你的 Lua 代码中存在 SQL 注入的安全风险。可以这样修复：
local sql = 'select * from users_scores where user_id=\'' ..
ngx.quote_sql_str(someId) .. '\''
Best regards,
-agentzh

summer.hot

刚刚看了lua-resty-mysql的compact_arrays.t的代码，里面设置

ok,err,errno,sqlstate = db:connect{
host = '10.253.8.90',
port = 3306,
database = 'test',
user = 'openResty',
password = '123456',
compact_arrays = true,
max_packet_size = 1024*1024
}

是有compact_arrays的，你的readme里面的事例是没有compact_arrays的设置，这段设置我是从网上搜索别人写的拷贝的。

刚刚测试的结果，fedora15那个机器设置compact_arrays=true是不起作用的，red hat那台设置了就生效了.

On Tuesday, October 9, 2012 11:42:09 PM UTC+8, summer summer wrote:

hi，大家好，我安装了openresty，发现在不同平台下，使用resty.mysql lua取出的table格式不一样。。
有一台机器是：fedora 15 ，ngx_openresty-1.2.1.14.tar.gz 使用 yum 安装的 readline-devel pcre-devel openssl-devel
还有一台是：Red Hat Enterprise Linux AS release 4 (Nahant Update 8) ，也是使用ngx_openresty-1.2.1.14.tar.gz，configure openresty的时候缺pcre，我下载了一个pcre-8.30.tar.gz ，指定pcre源码后configure成功。readline-devel和openssl-devel没有特意安装，看安装过程，是找到系统默认安装的了。
安装成功后，运行同样的取数据库程序，scores.lua，都是从数据库取数据，相同的数据库，相同的lua代码，两台机器运行结果不同。
都是用 ngx_openresty-1.2.1.14.tar.gz 这个版本。Red Hat 服务器取出的table，用res[1]['trade_score']取不出来，用res[1][1] ,用索引取得出来。
运行的数据库代码在 http://gitcd.com/viewRepo.htm?repoId=309&absFileName=/lua/scores.lua&cId=b47c48b

agentzh

Hello!

2012/10/9 summer summer <summ...@gmail.com>:
> 两台机器都是相同的代码，你说的compact_arrays应该怎么设置？不好意思，我是新手。
>

你的代码里面设置了 compact_arrays，你可以直接 grep 你的 Lua 代码，特别地：

    ok,err,errno,sqlstate = db:connect{
        host = '10.253.8.90',
        port = 3306,
        database = 'test',
        user = 'openResty',
        password = '123456',
        compact_arrays = true,
        max_packet_size = 1024*1024
}

关于其含义，请参见 lua-resty-mysql 的文档：

    https://github.com/agentzh/lua-resty-mysql#connect

还有

    https://github.com/agentzh/lua-resty-mysql#set_compact_arrays

> 其他都是相同的，因为只是编译环境不同，刚刚也重启nginx试过了，仍然是一台机器运行好的，一台报错。
>

请确认你的 nginx 使用的确实是同一份代码。你可以尝试修改你的 Lua 代码，然后确认更动是否生效（比如可以开关那个
compact_arrays 选项或者别的）。同时确认你的 nginx 实际使用的 lua-resty-mysql
库的版本完全相同（有可能你的机器上安装有多个版本的 lua-resty-mysql，而你的 nginx 实际使用的是较老的那个）。较老版本的
lua-resty-mysql 库是不支持 compact_arrays 选项而直接忽略之的。

Best regards,
-agentzh

agentzh

Hello!

2012/10/9 summer summer:
> 是有compact_arrays的，你的readme里面的事例是没有compact_arrays的设置，这段设置我是从网上搜索别人写的拷贝的。

compact_arrays 选项在 README 文档中有专门的介绍，虽然没有提供代码示例。我的前一封邮件给出了具体的文档 URL.

> 刚刚测试的结果，fedora15那个机器设置compact_arrays=true是不起作用的，red hat那台设置了就生效了.
>

compact_arrays 选项是 lua-resty-mysql 0.09 新加入的特性。请确认你在你的 RedHat 机器上使用的
lua-resty-mysql 库的版本足够新。可以通过下面的接口得到 lua-resty-mysql 的版本号：

    location /t {
        content_by_lua '
            local mysql = require "resty.mysql"
            ngx.say("version: ", mysql._VERSION or "nil")
        ';
    }

比如，在我这里访问 /t 接口的输出是

    version: 0.10

Best regards,
-agentzh

summer.hot

thanks，确实找到问题了，redhat上用的是1.2.1.14的openresty，而fedora上下载的是1.0.15的。不好意思。。。

两个链接有点接近。copy错链接了，不过也加深理解了上下不兼容原则，哈哈。

On Wednesday, October 10, 2012 11:10:00 AM UTC+8, agentzh wrote:

Hello!
2012/10/9 summer summer <summe...@gmail.com>:
> 两台机器都是相同的代码，你说的compact_arrays应该怎么设置？不好意思，我是新手。
>
你的代码里面设置了 compact_arrays，你可以直接 grep 你的 Lua 代码，特别地：
ok,err,errno,sqlstate = db:connect{
host = '10.253.8.90',
port = 3306,
database = 'test',
user = 'openResty',
password = '123456',
compact_arrays = true,
max_packet_size = 1024*1024
}
关于其含义，请参见 lua-resty-mysql 的文档：
https://github.com/agentzh/lua-resty-mysql#connect
还有
https://github.com/agentzh/lua-resty-mysql#set_compact_arrays
> 其他都是相同的，因为只是编译环境不同，刚刚也重启nginx试过了，仍然是一台机器运行好的，一台报错。
>
请确认你的 nginx 使用的确实是同一份代码。你可以尝试修改你的 Lua 代码，然后确认更动是否生效（比如可以开关那个
compact_arrays 选项或者别的）。同时确认你的 nginx 实际使用的 lua-resty-mysql
库的版本完全相同（有可能你的机器上安装有多个版本的 lua-resty-mysql，而你的 nginx 实际使用的是较老的那个）。较老版本的
lua-resty-mysql 库是不支持 compact_arrays 选项而直接忽略之的。
Best regards,
-agentzh

summer.hot

还有两个小问题请教一下：

lua_package_path "/path/to/lua-resty-mysql/lib/?.lua;;";

lua_package_path在新版本里面是不是必须的？指定去哪里寻找.lua文件，这个地址是要写绝对地址么？

还有数据库连接里面，host目前是只能写IP地址吧？

agentzh

Hello!

2012/10/9 summer summer:
> thanks，确实找到问题了，redhat上用的是1.2.1.14的openresty，而fedora上下载的是1.0.15的。不好意思。。。
>

问题找到就好 :)

另外，可以考虑升级到最新的稳定版 1.2.3.8:

    http://openresty.org/#Download

你使用的 1.2.1.14 是差不多 2 个月以前的老版本了。

Best regards,
-agentzh

agentzh

Hello!

2012/10/9 summer summer <summ...@gmail.com>:
> 还有两个小问题请教一下：
>
> lua_package_path "/path/to/lua-resty-mysql/lib/?.lua;;";
>
> lua_package_path在新版本里面是不是必须的？指定去哪里寻找.lua文件，这个地址是要写绝对地址么？

如果你使用的是 ngx_openresty 的话，这个配置对于定位 lua-resty-mysql 来说不是必需的，因为
ngx_openresty 里包含的 ngx_lua 默认就会搜索 openresty 里包含的 lua-resty-mysql 及其他库。

这个搜索路径中可以使用 $prefix 变量用于指代 nginx 启动时的 server prefix 路径，相关细节见文档中的说明：

    http://wiki.nginx.org/HttpLuaModule#lua_package_path

如果使用相对路径的话，是相对于 nginx 启动时的当前工作目录，而这个是不可靠的。

> 还有数据库连接里面，host目前是只能写IP地址吧？
>

并不是只能写 IP 地址，也可以使用域名（但目前受 Nginx 核心中的 resolver 的限制，暂不支持在 /etc/hosts
中定义的域名）。当然，你需要在 nginx.conf 中配置 resolver 配置指令以显示指定你使用的 DNS
名字服务器，见相关的文档：

    http://wiki.nginx.org/HttpLuaModule#tcpsock:connect

    http://wiki.nginx.org/HttpCoreModule#resolver

Best regards,
-agentzh