请教各位，ngx_lua如何调用外部web service

lweiqiang

是用tcp cosocket写一个lua_resty_webservice呢，

还是用lua ffi调用libcurl? 或者由其他方法？

各位是怎么做的？这方面现在有没有最佳实践？

谢谢啦。

李伟强

smallfish.xy

请参考 lua-resty-http 模块 https://github.com/liseen/lua-resty-http

smallfish http://chenxiaoyu.org

On Fri, Dec 7, 2012 at 10:26 AM, Weiqiang <lwei...@gmail.com> wrote:

是用tcp cosocket写一个lua_resty_webservice呢，
还是用lua ffi调用libcurl? 或者由其他方法？

各位是怎么做的？这方面现在有没有最佳实践？

谢谢啦。

李伟强

agentzh

Hello!

On Thu, Dec 6, 2012 at 6:26 PM, Weiqiang wrote:
> 是用tcp cosocket写一个lua_resty_webservice呢，
> 还是用lua ffi调用libcurl? 或者由其他方法？
>

千万不要使用 libcurl，因为必会阻塞 nginx worker 进程，届时就根本并发不起来了。

> 各位是怎么做的？这方面现在有没有最佳实践？
>

1. 如 smallfish 建议的，使用第三方的 lua-resty-http 库；
2. 使用 ngx.location.capture 配合标准的 ngx_proxy 模块。

目前第 2 种做法的功能更丰富一些，比如拥有 https 的支持。

Best regards,
-agentzh

lweiqiang

Hi, agentzh,

感谢回复。

1. 关于第二种方法，具体是怎么做的，是否有一些例子？

2. 我能否在收到外部请求之后，直接调用ngx.req.set_body_data，把xml填到请求的body里面，然后ngx_proxy把请求转发出去？

谢谢。

李伟强

2012/12/7 agentzh <age...@gmail.com>

Hello!

On Thu, Dec 6, 2012 at 6:26 PM, Weiqiang wrote:
> 是用tcp cosocket写一个lua_resty_webservice呢，
> 还是用lua ffi调用libcurl? 或者由其他方法？
>

千万不要使用 libcurl，因为必会阻塞 nginx worker 进程，届时就根本并发不起来了。

> 各位是怎么做的？这方面现在有没有最佳实践？
>

1. 如 smallfish 建议的，使用第三方的 lua-resty-http 库；
2. 使用 ngx.location.capture 配合标准的 ngx_proxy 模块。

目前第 2 种做法的功能更丰富一些，比如拥有 https 的支持。

Best regards,
-agentzh

smallfish.xy

第二种办法，就是自己配置proxy_pass到外部地址，然后ngx.location.capture调用内部的配置。比如：

location /example {

proxy_pass http://example.com:80;

}

location /t {

content_by_lua '

local res = ngx.location.capture("/example")

ngx.say(say.status)

}

smallfish http://chenxiaoyu.org

2012/12/7 Weiqiang <lwei...@gmail.com>

Hi, agentzh,

感谢回复。

1. 关于第二种方法，具体是怎么做的，是否有一些例子？

2. 我能否在收到外部请求之后，直接调用ngx.req.set_body_data，把xml填到请求的body里面，然后ngx_proxy把请求转发出去？

谢谢。

李伟强

2012/12/7 agentzh <age...@gmail.com>

Hello!

On Thu, Dec 6, 2012 at 6:26 PM, Weiqiang wrote:
> 是用tcp cosocket写一个lua_resty_webservice呢，
> 还是用lua ffi调用libcurl? 或者由其他方法？
>

千万不要使用 libcurl，因为必会阻塞 nginx worker 进程，届时就根本并发不起来了。

> 各位是怎么做的？这方面现在有没有最佳实践？
>

1. 如 smallfish 建议的，使用第三方的 lua-resty-http 库；
2. 使用 ngx.location.capture 配合标准的 ngx_proxy 模块。

目前第 2 种做法的功能更丰富一些，比如拥有 https 的支持。

Best regards,
-agentzh

lweiqiang

关于agentzh和smallfish提到的第二种方法，我的用例是这样的：

server {

listen 8088; #proxy

location /proxy_pass {

proxy_pass http://127.0.0.1:9088;

location / {

content_by_lua {

ngx.req.set_body_data("hello body")

print(ngx.req.get_body_data()) #返回值为"hello body"

ngx.location.capture("/proxy_pass")

}

server {

listen 9088; # backend server

location / {

content_by_lua {

print (ngx.req.get_body_data())

}

换言之，我的需求是要用ngx_lua调用外部请求。并且调用时，需要将请求内容填到http body里。

根据ngx_lua文档描述（http://wiki.nginx.org/HttpLuaModule#ngx.req.set_body_data），在openresty里可以调用set_body_data修改请求内容。

实际测试以上用例时发现，在backend server上get_body_data()函数返回nil。

测试使用的命令行为：

curl http://localhost:8088

测试基于openresty 1.2.3.8版本。

请教各位，我的用法是不是存在问题？

谢谢

李伟强

2012/12/7 smallfish <small...@gmail.com>

第二种办法，就是自己配置proxy_pass到外部地址，然后ngx.location.capture调用内部的配置。比如：

location /example {
proxy_pass http://example.com:80;

}

location /t {
content_by_lua '
local res = ngx.location.capture("/example")
ngx.say(say.status)
';
}
--

smallfish http://chenxiaoyu.org

2012/12/7 Weiqiang <lwei...@gmail.com>
Hi, agentzh,

感谢回复。

1. 关于第二种方法，具体是怎么做的，是否有一些例子？

2. 我能否在收到外部请求之后，直接调用ngx.req.set_body_data，把xml填到请求的body里面，然后ngx_proxy把请求转发出去？

谢谢。

李伟强

2012/12/7 agentzh <age...@gmail.com>

Hello!

On Thu, Dec 6, 2012 at 6:26 PM, Weiqiang wrote:
> 是用tcp cosocket写一个lua_resty_webservice呢，
> 还是用lua ffi调用libcurl? 或者由其他方法？
>

千万不要使用 libcurl，因为必会阻塞 nginx worker 进程，届时就根本并发不起来了。

> 各位是怎么做的？这方面现在有没有最佳实践？
>

1. 如 smallfish 建议的，使用第三方的 lua-resty-http 库；
2. 使用 ngx.location.capture 配合标准的 ngx_proxy 模块。

目前第 2 种做法的功能更丰富一些，比如拥有 https 的支持。

Best regards,
-agentzh

alohadc13

server {

listen 8088; #proxy

location /proxy_pass {

set $body "hello world"; #如果$body 是一个复杂的内容，如post一个文件，可以通过set_by_lua_file $body /your/path/xx.lua $arg1 $arg2 的方法实现.

proxy_set_body $body;

proxy_pass http://127.0.0.1:9088;

location / {

content_by_lua {

--ngx.req.set_body_data("hello body")

--print(ngx.req.get_body_data()) #返回值为"hello body"

ngx.location.capture("/proxy_pass")

}

On Monday, December 10, 2012 5:56:30 PM UTC+8, Weiqiang Li wrote:

关于agentzh和smallfish提到的第二种方法，我的用例是这样的：
server {
listen 8088; #proxy
location /proxy_pass {
proxy_pass http://127.0.0.1:9088;

location / {
content_by_lua {
ngx.req.set_body_data("hello body")
print(ngx.req.get_body_data()) #返回值为"hello body"

ngx.location.capture("/proxy_pass")
}
}
}

server {
listen 9088; # backend server
location / {

content_by_lua {
print (ngx.req.get_body_data())
}
}
}

换言之，我的需求是要用ngx_lua调用外部请求。并且调用时，需要将请求内容填到http body里。

根据ngx_lua文档描述（http://wiki.nginx.org/HttpLuaModule#ngx.req.set_body_data），在openresty里可以调用set_body_data修改请求内容。

实际测试以上用例时发现，在backend server上get_body_data()函数返回nil。

测试使用的命令行为：
curl http://localhost:8088
测试基于openresty 1.2.3.8版本。

请教各位，我的用法是不是存在问题？

谢谢

李伟强

2012/12/7 smallfish <smallf...@gmail.com>

第二种办法，就是自己配置proxy_pass到外部地址，然后ngx.location.capture调用内部的配置。比如：

location /example {
proxy_pass http://example.com:80;

}

location /t {
content_by_lua '
local res = ngx.location.capture("/example")
ngx.say(say.status)
';
}
--

smallfish http://chenxiaoyu.org

2012/12/7 Weiqiang <lwei...@gmail.com>
Hi, agentzh,

感谢回复。

1. 关于第二种方法，具体是怎么做的，是否有一些例子？

2. 我能否在收到外部请求之后，直接调用ngx.req.set_body_data，把xml填到请求的body里面，然后ngx_proxy把请求转发出去？

谢谢。

李伟强

2012/12/7 agentzh <age...@gmail.com>

Hello!

On Thu, Dec 6, 2012 at 6:26 PM, Weiqiang wrote:
> 是用tcp cosocket写一个lua_resty_webservice呢，
> 还是用lua ffi调用libcurl? 或者由其他方法？
>

千万不要使用 libcurl，因为必会阻塞 nginx worker 进程，届时就根本并发不起来了。

> 各位是怎么做的？这方面现在有没有最佳实践？
>

1. 如 smallfish 建议的，使用第三方的 lua-resty-http 库；
2. 使用 ngx.location.capture 配合标准的 ngx_proxy 模块。

目前第 2 种做法的功能更丰富一些，比如拥有 https 的支持。

Best regards,
-agentzh

agentzh

Hello!

2012/12/10 Weiqiang:
> 关于agentzh和smallfish提到的第二种方法，我的用例是这样的：
[...]
> 测试使用的命令行为：
> curl http://localhost:8088
> 测试基于openresty 1.2.3.8版本。
>

你的例子有如下问题：

1. 只有 PUT 或者 POST 方法的子请求才会继承父请求的请求体，而 ngx.location.capture 默认发起的是 GET
子请求。如果你需要指定其他请求方法，需要在调用 ngx.location.capture 时指定 method =
ngx.HTTP_POST 这样的选项。

2. ngx.location.capture 方法支持 body
选项，你其实可以直接通过它来指定子请求的请求体，而不是通过修改父请求的请求体来让子请求继承，这样可以避免不必要的副作用，且效率更高。

3. 你的 9088 端口的 server 中并没有显式地读取请求体就去调用 ngx.req.get_body_data(). 你需要先调用
ngx.req.read_body() 或者配置 lua_need_request_body on 指令。

建议首先仔细阅读 ngx_lua 相关的官方文档：http://wiki.nginx.org/HttpLuaModule 以节约你试错的时间。

Best regards,
-agentzh

lweiqiang

Hi, agentzh，

关于子请求的行为，简单看了一下代码。

在ngx_http_lua_adjust_subrequest函数里看到有一段是这样的（ngx_http_lua_subrequest.c，L570~L591）：

if (body) {

sr->request_body = body;

rc = ngx_http_lua_set_content_length_header(sr,

body->buf ? ngx_buf_size(body->buf) : 0);

if (rc != NGX_OK) {

return NGX_ERROR;

}

} else if (method != NGX_HTTP_PUT && method != NGX_HTTP_POST

&& r->headers_in.content_length_n > 0)

{

rc = ngx_http_lua_set_content_length_header(sr, 0);

if (rc != NGX_OK) {

return NGX_ERROR;

}

#if 1

sr->request_body = NULL;

#endif

}

希望跟您请教，”else"里面的处理是出于怎样的考虑呢？

非常感谢！

李伟强

2012/12/11 Weiqiang <lwei...@gmail.com>

感谢agentzh回复，

其实已经测试过指定ngx.location.capture 的body参数这种方式，lua_need_request_body 也是打开的，抱歉没有说明。之所以这样用，是希望想把自己想到的方法也试试:-)

不过官方文档确实没有找到关于ngx.location.capture会丢弃GET请求的请求体的说明。

为什么要这样设计呢？

谢谢！

李伟强

2012/12/11 agentzh <age...@gmail.com>

ngx.location.capture

agentzh

Hello!

2012/12/10 Weiqiang:
> 关于子请求的行为，简单看了一下代码。
>
> 在ngx_http_lua_adjust_subrequest函数里看到有一段是这样的（ngx_http_lua_subrequest.c，L570~L591）：
>
>     if (body) {
>         sr->request_body = body;
>
>         rc = ngx_http_lua_set_content_length_header(sr,
>                 body->buf ? ngx_buf_size(body->buf) : 0);
>
>         if (rc != NGX_OK) {
>             return NGX_ERROR;
>         }
>
>     } else if (method != NGX_HTTP_PUT && method != NGX_HTTP_POST
>                && r->headers_in.content_length_n > 0)
>     {
>         rc = ngx_http_lua_set_content_length_header(sr, 0);
>         if (rc != NGX_OK) {
>             return NGX_ERROR;
>         }
>
> #if 1
>         sr->request_body = NULL;
> #endif
>     }
>
> 希望跟您请教，”else"里面的处理是出于怎样的考虑呢？
>

因为一般只有 PUT 和 POST 请求才会带有请求体，虽然 RFC 也没禁止 GET 带有请求体。

Regards,
-agentzh

lweiqiang

感谢agentzh回复，

其实已经测试过指定ngx.location.capture 的body参数这种方式，lua_need_request_body 也是打开的，抱歉没有说明。之所以这样用，是希望想把自己想到的方法也试试:-)

不过官方文档确实没有找到关于ngx.location.capture会丢弃GET请求的请求体的说明。

为什么要这样设计呢？

谢谢！

李伟强

2012/12/11 agentzh <age...@gmail.com>

ngx.location.capture

agentzh

Hello!

2012/12/10 Weiqiang:
>
> 不过官方文档确实没有找到关于ngx.location.capture会丢弃GET请求的请求体的说明。
>

官方文档其实也没提及子请求自动继承父请求 body 的行为，所以这是 undocumented feature :)

我刚刚在文档中加了一句：

"When the body option is not specified, the POST and PUT subrequests
will inherit the request bodies of the parent request (if any)."

见 http://wiki.nginx.org/HttpLuaModule#ngx.location.capture

之所以对于 GET 子请求，不会自动继承父请求的 body 是因为会有一种常见的副作用，即当主请求是 POST，而子请求默认是 GET；于是
GET 子请求便会自动继承了父请求的 body，从而造成了意外的带 body 的 GET 子请求。

Regards,
-agentzh

lweiqiang

感谢agentzh如此认真的回复每一封邮件。

每一次讨论都让我自己对openresty和http的认识更进一步:)

谢谢！

李伟强

2012/12/11 agentzh <age...@gmail.com>

Hello!

2012/12/10 Weiqiang:
>
> 不过官方文档确实没有找到关于ngx.location.capture会丢弃GET请求的请求体的说明。
>

官方文档其实也没提及子请求自动继承父请求 body 的行为，所以这是 undocumented feature :)

我刚刚在文档中加了一句：

"When the body option is not specified, the POST and PUT subrequests
will inherit the request bodies of the parent request (if any)."

见 http://wiki.nginx.org/HttpLuaModule#ngx.location.capture

之所以对于 GET 子请求，不会自动继承父请求的 body 是因为会有一种常见的副作用，即当主请求是 POST，而子请求默认是 GET；于是
GET 子请求便会自动继承了父请求的 body，从而造成了意外的带 body 的 GET 子请求。

Regards,
-agentzh

deweyto

好像ngx_pass（proxy_pass）不能传递POST的参数数据。如果我们用ngx.location.capture发出的子请求，调用外部的web service，那POST的数据也会丢失。

代码片段：

ngx.req.read_body()

local res = ngx.location.capture("/abc",{ method = ngx.HTTP_POST, args = {number=1 }})

location = /abc {

proxy_method POST;

proxy_pass http://open.test.com/controller/action;

}

参数number＝1无法通过POST传到http://open.test.com/controller/action

请问有什么办法可以解决这个问题吗？谢谢。

On Tuesday, December 11, 2012 2:11:47 PM UTC+8, agentzh wrote:

Hello!
2012/12/10 Weiqiang:
>
> 不过官方文档确实没有找到关于ngx.location.capture会丢弃GET请求的请求体的说明。
>
官方文档其实也没提及子请求自动继承父请求 body 的行为，所以这是 undocumented feature :)
我刚刚在文档中加了一句：
"When the body option is not specified, the POST and PUT subrequests
will inherit the request bodies of the parent request (if any)."
见 http://wiki.nginx.org/HttpLuaModule#ngx.location.capture
之所以对于 GET 子请求，不会自动继承父请求的 body 是因为会有一种常见的副作用，即当主请求是 POST，而子请求默认是 GET；于是
GET 子请求便会自动继承了父请求的 body，从而造成了意外的带 body 的 GET 子请求。
Regards,
-agentzh

agentzh

Hello!

2012/12/12 dewey:
> 好像ngx_pass（proxy_pass）不能传递POST的参数数据。如果我们用ngx.location.capture发出的子请求，调用外部的web
> service，那POST的数据也会丢失。
>

当然可以传递，只是你的用法是错误的，并没有仔细遵照官方文档中的说明 :)

> 代码片段：
>
> ngx.req.read_body()
> local res = ngx.location.capture("/abc",{ method = ngx.HTTP_POST, args =
> {number=1 }})
>
>     location = /abc {
>    proxy_method POST;
>    proxy_pass http://open.test.com/controller/action;
>     }
>
> 参数number＝1无法通过POST传到http://open.test.com/controller/action
>

ngx.location.capture 的 args 选项的值永远是 URL 参数，而不是 POST 请求体。你的
open.test.com 远端收到的原始 HTTP 请求其实是类似下面这样的：

    POST /controller/action?number=1 HTTP/1.0
    Host: open.test.com
    Connection: close

如果你想传递 urlencoded 类型的 POST 请求体参数，需要改用 ngx.location.capture 方法的 body
选项，同时设置"Content-Type: application/x-www-form-urlencoded" 请求头。

下面是一个完整的示例（已在我本地测试过）：

    location = /t {
        content_by_lua '
            local body = ngx.encode_args({number = 1})
            local res = ngx.location.capture("/abc", {
                method = ngx.HTTP_POST, body = body
            })
        ';
    }

    location = /abc {
        proxy_set_header Content-Type application/x-www-form-urlencoded;
        proxy_pass http://open.test.com/controller/action;
    }

此时你的 open.test.com 就可以收到如你期望的 HTTP 请求了：

    POST /controller/action HTTP/1.0
    Content-Type: application/x-www-form-urlencoded
    Host: open.test.com
    Connection: close
    Content-Length: 8

    number=1

请仔细阅读相关的官方文档，以节约试错的时间：

    http://wiki.nginx.org/HttpLuaModule#ngx.location.capture
    http://wiki.nginx.org/HttpLuaModule#ngx.encode_args

Best regards,
-agentzh

P.S. 上面给出的 HTTP 原始请求都是通过 nc 工具捕捉到的。nc 在调试 ngx_proxy
相关的问题时非常方便。当然，我们也完全可以使用 tcpdump 或者 wireshark 这样的工具直接在 TCP 层面上抓包进行分析 :)

deweyto

谢谢。使用您的方法可以获取到POST请求体的参数。

在传图片的场景下，遇到了新问题。例如请求体中还有文件。如果设置proxy_set_header Content-Type application/x-www-form-urlencoded;，http://open.test.com/controller/action可以获取到参数number，但是获取不到file。如果不设置proxy_set_header Content-Type application/x-www-form-urlencoded;，就连number都获取不到。印象中文档说，子请求的请求头是会继承的？为什么还要设置proxy_set_header Content-Type。

代码片段：

ngx.req.read_body()

local file = ngx.req.get_body_file()

local ContentType = ngx.req.get_headers()["Content-Type"]

ngx.req.set_header("Content-Type",ContentType)

local body = ngx.encode_args({number=1,file="@"..file})

local res = ngx.location.capture("/abc",{ method = ngx.HTTP_POST, body = body})

location = /abc {
proxy_pass http://open.test.com/controller/action;
}

应该是哪里没有设置好呢？我用的curl -vv调试。

2012/12/13 agentzh <age...@gmail.com>

Hello!

2012/12/12 dewey:

> 好像ngx_pass（proxy_pass）不能传递POST的参数数据。如果我们用ngx.location.capture发出的子请求，调用外部的web
> service，那POST的数据也会丢失。
>

当然可以传递，只是你的用法是错误的，并没有仔细遵照官方文档中的说明 :)

> 代码片段：
>
> ngx.req.read_body()
> local res = ngx.location.capture("/abc",{ method = ngx.HTTP_POST, args =
> {number=1 }})
>
> location = /abc {
> proxy_method POST;
> proxy_pass http://open.test.com/controller/action;
> }
>
> 参数number＝1无法通过POST传到http://open.test.com/controller/action
>

ngx.location.capture 的 args 选项的值永远是 URL 参数，而不是 POST 请求体。你的
open.test.com 远端收到的原始 HTTP 请求其实是类似下面这样的：

POST /controller/action?number=1 HTTP/1.0
Host: open.test.com
Connection: close

如果你想传递 urlencoded 类型的 POST 请求体参数，需要改用 ngx.location.capture 方法的 body
选项，同时设置"Content-Type: application/x-www-form-urlencoded" 请求头。

下面是一个完整的示例（已在我本地测试过）：

location = /t {
content_by_lua '
local body = ngx.encode_args({number = 1})

local res = ngx.location.capture("/abc", {

method = ngx.HTTP_POST, body = body
})
';
}

location = /abc {
proxy_set_header Content-Type application/x-www-form-urlencoded;
proxy_pass http://open.test.com/controller/action;
}

此时你的 open.test.com 就可以收到如你期望的 HTTP 请求了：

POST /controller/action HTTP/1.0
Content-Type: application/x-www-form-urlencoded
Host: open.test.com
Connection: close
Content-Length: 8

number=1

请仔细阅读相关的官方文档，以节约试错的时间：

http://wiki.nginx.org/HttpLuaModule#ngx.location.capture
http://wiki.nginx.org/HttpLuaModule#ngx.encode_args

Best regards,
-agentzh

P.S. 上面给出的 HTTP 原始请求都是通过 nc 工具捕捉到的。nc 在调试 ngx_proxy
相关的问题时非常方便。当然，我们也完全可以使用 tcpdump 或者 wireshark 这样的工具直接在 TCP 层面上抓包进行分析 :)

smallfish.xy

Content-type设置为：multipart/form-data。

smallfish http://chenxiaoyu.org

2012/12/14 Dewey Du <dew...@gmail.com>

谢谢。使用您的方法可以获取到POST请求体的参数。

在传图片的场景下，遇到了新问题。例如请求体中还有文件。如果设置proxy_set_header Content-Type application/x-www-form-urlencoded;，http://open.test.com/controller/action可以获取到参数number，但是获取不到file。如果不设置proxy_set_header Content-Type application/x-www-form-urlencoded;，就连number都获取不到。印象中文档说，子请求的请求头是会继承的？为什么还要设置proxy_set_header Content-Type。

代码片段：

ngx.req.read_body()
local file = ngx.req.get_body_file()
local ContentType = ngx.req.get_headers()["Content-Type"]
ngx.req.set_header("Content-Type",ContentType)

local body = ngx.encode_args({number=1,file="@"..file})
local res = ngx.location.capture("/abc",{ method = ngx.HTTP_POST, body = body})

location = /abc {
proxy_pass http://open.test.com/controller/action;
}

应该是哪里没有设置好呢？我用的curl -vv调试。

2012/12/13 agentzh <age...@gmail.com>

Hello!

2012/12/12 dewey:

> 好像ngx_pass（proxy_pass）不能传递POST的参数数据。如果我们用ngx.location.capture发出的子请求，调用外部的web
> service，那POST的数据也会丢失。
>

当然可以传递，只是你的用法是错误的，并没有仔细遵照官方文档中的说明 :)

> 代码片段：
>
> ngx.req.read_body()
> local res = ngx.location.capture("/abc",{ method = ngx.HTTP_POST, args =
> {number=1 }})
>
> location = /abc {
> proxy_method POST;
> proxy_pass http://open.test.com/controller/action;
> }
>
> 参数number＝1无法通过POST传到http://open.test.com/controller/action
>

ngx.location.capture 的 args 选项的值永远是 URL 参数，而不是 POST 请求体。你的
open.test.com 远端收到的原始 HTTP 请求其实是类似下面这样的：

POST /controller/action?number=1 HTTP/1.0
Host: open.test.com
Connection: close

如果你想传递 urlencoded 类型的 POST 请求体参数，需要改用 ngx.location.capture 方法的 body
选项，同时设置"Content-Type: application/x-www-form-urlencoded" 请求头。

下面是一个完整的示例（已在我本地测试过）：

location = /t {
content_by_lua '
local body = ngx.encode_args({number = 1})

local res = ngx.location.capture("/abc", {

method = ngx.HTTP_POST, body = body
})
';
}

location = /abc {
proxy_set_header Content-Type application/x-www-form-urlencoded;
proxy_pass http://open.test.com/controller/action;
}

此时你的 open.test.com 就可以收到如你期望的 HTTP 请求了：

POST /controller/action HTTP/1.0
Content-Type: application/x-www-form-urlencoded
Host: open.test.com
Connection: close
Content-Length: 8

number=1

请仔细阅读相关的官方文档，以节约试错的时间：

http://wiki.nginx.org/HttpLuaModule#ngx.location.capture
http://wiki.nginx.org/HttpLuaModule#ngx.encode_args

Best regards,
-agentzh

P.S. 上面给出的 HTTP 原始请求都是通过 nc 工具捕捉到的。nc 在调试 ngx_proxy
相关的问题时非常方便。当然，我们也完全可以使用 tcpdump 或者 wireshark 这样的工具直接在 TCP 层面上抓包进行分析 :)

deweyto

加了还是不行，number和file都获取不到。

ngx.req.read_body()

local file = ngx.req.get_body_file()

local ContentType = ngx.req.get_headers()["Content-Type"]

ngx.req.set_header("Content-Type",ContentType)

local body = ngx.encode_args({number=1,file="@"..file})

local res = ngx.location.capture("/abc",{ method = ngx.HTTP_POST, body = body})

location = /abc {

proxy_set_header Content-Type multipart/form-data;
proxy_pass http://open.test.com/controller/action;
}

2012/12/14 smallfish <small...@gmail.com>

Content-type设置为：multipart/form-data。
--
smallfish http://chenxiaoyu.org

2012/12/14 Dewey Du <dew...@gmail.com>

谢谢。使用您的方法可以获取到POST请求体的参数。

在传图片的场景下，遇到了新问题。例如请求体中还有文件。如果设置proxy_set_header Content-Type application/x-www-form-urlencoded;，http://open.test.com/controller/action可以获取到参数number，但是获取不到file。如果不设置proxy_set_header Content-Type application/x-www-form-urlencoded;，就连number都获取不到。印象中文档说，子请求的请求头是会继承的？为什么还要设置proxy_set_header Content-Type。

代码片段：

ngx.req.read_body()
local file = ngx.req.get_body_file()
local ContentType = ngx.req.get_headers()["Content-Type"]
ngx.req.set_header("Content-Type",ContentType)

local body = ngx.encode_args({number=1,file="@"..file})
local res = ngx.location.capture("/abc",{ method = ngx.HTTP_POST, body = body})

location = /abc {

proxy_pass http://open.test.com/controller/action;
}

应该是哪里没有设置好呢？我用的curl -vv调试。

2012/12/13 agentzh <age...@gmail.com>

Hello!

2012/12/12 dewey:

> 好像ngx_pass（proxy_pass）不能传递POST的参数数据。如果我们用ngx.location.capture发出的子请求，调用外部的web
> service，那POST的数据也会丢失。
>

当然可以传递，只是你的用法是错误的，并没有仔细遵照官方文档中的说明 :)

> 代码片段：
>
> ngx.req.read_body()
> local res = ngx.location.capture("/abc",{ method = ngx.HTTP_POST, args =
> {number=1 }})
>
> location = /abc {
> proxy_method POST;
> proxy_pass http://open.test.com/controller/action;
> }
>
> 参数number＝1无法通过POST传到http://open.test.com/controller/action
>

ngx.location.capture 的 args 选项的值永远是 URL 参数，而不是 POST 请求体。你的
open.test.com 远端收到的原始 HTTP 请求其实是类似下面这样的：

POST /controller/action?number=1 HTTP/1.0
Host: open.test.com
Connection: close

如果你想传递 urlencoded 类型的 POST 请求体参数，需要改用 ngx.location.capture 方法的 body
选项，同时设置"Content-Type: application/x-www-form-urlencoded" 请求头。

下面是一个完整的示例（已在我本地测试过）：

location = /t {
content_by_lua '
local body = ngx.encode_args({number = 1})

local res = ngx.location.capture("/abc", {

method = ngx.HTTP_POST, body = body
})
';
}

location = /abc {
proxy_set_header Content-Type application/x-www-form-urlencoded;
proxy_pass http://open.test.com/controller/action;
}

此时你的 open.test.com 就可以收到如你期望的 HTTP 请求了：

POST /controller/action HTTP/1.0
Content-Type: application/x-www-form-urlencoded
Host: open.test.com
Connection: close
Content-Length: 8

number=1

请仔细阅读相关的官方文档，以节约试错的时间：

http://wiki.nginx.org/HttpLuaModule#ngx.location.capture
http://wiki.nginx.org/HttpLuaModule#ngx.encode_args

Best regards,
-agentzh

P.S. 上面给出的 HTTP 原始请求都是通过 nc 工具捕捉到的。nc 在调试 ngx_proxy
相关的问题时非常方便。当然，我们也完全可以使用 tcpdump 或者 wireshark 这样的工具直接在 TCP 层面上抓包进行分析 :)

agentzh

Hello!

2012/12/14 Dewey Du:
>
> 代码片段：
>
> ngx.req.read_body()
> local file = ngx.req.get_body_file()
> local ContentType = ngx.req.get_headers()["Content-Type"]
> ngx.req.set_header("Content-Type",ContentType)
> local body = ngx.encode_args({number=1,file="@"..file})

请注意，"@" 字符加文件名的上传记法是 curl 这样的客户端所特有的功能。这里并不支持这种记法。

如果你需要在 POST body 中把文件名展开文件的内容，需要自己在 Lua 中读取该文件的内容并传递给子请求。

Regards,
-agentzh

deweyto

谢谢老师指点。已经成功读取到重构body后的数据。代码如下：

ngx.req.read_body()

local ContentType = ngx.req.get_headers()["Content-Type"]

local CT = ngx.re.match(ContentType,'(.+)boundary=(.+)',"iu")

local boundary = CT[2]

local body_data = ngx.req.get_body_data()

body_data = "--"..boundary.."\r\nContent-Disposition: form-data; name=\"number\"\r\n\r\n1\r\n"..body_data

local res = ngx.location.capture("/reco",{ method = ngx.HTTP_POST, body = body_data})

我把client_body_in_file_only clean关了，用ngx.req.get_body_data()来读取到body内容并进行重构。因为是POST图片（小于100k），所以还想请教下，如果从性能考虑，这种方法是否最优？

谢谢：）

2012/12/15 agentzh <age...@gmail.com>

Hello!

2012/12/14 Dewey Du:

>
> 代码片段：
>
> ngx.req.read_body()
> local file = ngx.req.get_body_file()
> local ContentType = ngx.req.get_headers()["Content-Type"]
> ngx.req.set_header("Content-Type",ContentType)
> local body = ngx.encode_args({number=1,file="@"..file})

请注意，"@" 字符加文件名的上传记法是 curl 这样的客户端所特有的功能。这里并不支持这种记法。

如果你需要在 POST body 中把文件名展开文件的内容，需要自己在 Lua 中读取该文件的内容并传递给子请求。

Regards,
-agentzh