Nginx的Stream方式代理HTTP PUT方法

azure1st · 2012-09-21T15:46:57+00:00

Hello! 2012/9/20 Fei Tao: > > 您好，首先感谢你贡献的openresty！我&#x4EEC...

Nginx的Stream方式代理HTTP PUT方法

azure1st

使用Nginx最为反向代理的时候如果http的body超过缓冲区的大小后会被自动缓存到本地磁盘，当全部body都缓存完毕Nginx在向后端服务发送数据，这样这对http的body有大量数据的情况下性能非常差，在压力很高的情况下服务器的磁盘iops非常高。

Nginx本身不支持流的方式代理（目前我还有发现Nginx的proxy模块支持）。

通过nginx_lua可以灵活的控制socket，所以我使用Nginx_lua实现了一个流的方式代理，既Nginx收到请求的时候，先读取整个header，然后读取body的时候是一边读取一遍转发到后端。所有的数据都不会落地到磁盘上。

我的博客：

http://www.fei1984.com/?p=50

agentzh

Hello!

2012/9/21 Azure <azu...@gmail.com>:
> 使用Nginx最为反向代理的时候如果http的body超过缓冲区的大小后会被自动缓存到本地磁盘，当全部body都缓存完毕Nginx在向后端服务发送数据，这样这对http的body有大量数据的情况下性能非常差，在压力很高的情况下服务器的磁盘iops非常高。
> Nginx本身不支持流的方式代理（目前我还有发现Nginx的proxy模块支持）。

是的，ngx_proxy 总是会全缓冲整个请求（包括请求体）。所有其他的 upstream 模块也是如此，比如 ngx_fastcgi.

> 通过nginx_lua可以灵活的控制socket，所以我使用Nginx_lua实现了一个流的方式代理，既Nginx收到请求的时候，先读取整个header，然后读取body的时候是一边读取一遍转发到后端。所有的数据都不会落地到磁盘上。
>

ngx_lua 的 ngx.req.socket() 当初正是为了这个目的而设计的，嘿嘿 :)

> 我的博客：
> http://www.fei1984.com/?p=50
>

多谢分享！

Best regards,
-agentzh

wangchong1985

赞！！这个解决了一直困扰我的图片上传代理的方案！！！感谢分享！！

在 2012-9-22 上午1:43，"agentzh" <age...@gmail.com>写道：

Hello!

2012/9/21 Azure <azu...@gmail.com>:
> 使用Nginx最为反向代理的时候如果http的body超过缓冲区的大小后会被自动缓存到本地磁盘，当全部body都缓存完毕Nginx在向后端服务发送数据，这样这对http的body有大量数据的情况下性能非常差，在压力很高的情况下服务器的磁盘iops非常高。
> Nginx本身不支持流的方式代理（目前我还有发现Nginx的proxy模块支持）。

是的，ngx_proxy 总是会全缓冲整个请求（包括请求体）。所有其他的 upstream 模块也是如此，比如 ngx_fastcgi.

> 通过nginx_lua可以灵活的控制socket，所以我使用Nginx_lua实现了一个流的方式代理，既Nginx收到请求的时候，先读取整个header，然后读取body的时候是一边读取一遍转发到后端。所有的数据都不会落地到磁盘上。
>

ngx_lua 的 ngx.req.socket() 当初正是为了这个目的而设计的，嘿嘿 :)

> 我的博客：
> http://www.fei1984.com/?p=50
>

多谢分享！

Best regards,
-agentzh