Nginx内存相关问题

tracymacding · 2014-01-27T11:07:24+00:00

Hello! 2014/1/26 付海清: > > 意思是我直接在Lua里面做一个&#x8...

Nginx内存相关问题

tracymacding

Hi，春哥

你好，我们目前线上使用Openresty-1.4.3.6作为反向代理服务器，后端服务器是tomcat，比较弱，现在遇到一个很尴尬的问题，希望能借助您的经验提供点指导。

问题描述：Openresty开启了proxy_buffering，但设置的proxy_buffers比较小（4 * 64KB），客户端通过外网下载大文件的时候经常会出错，定位了下原因在于客户端下载速度和nginx从upstream的传输速度不匹配导致临时文件瞬间被填充满，导致Openresty与后端的tomcat连接一直处于idle状态，一段时间后该连接被断开，客户端下载出错。

试图解决办法：增大proxy_buffers配置，但又产生另外一个问题：如果并发大文件下载很多会耗尽系统内存（测试中发现内存耗尽时网络栈都hang住了），不知道有没有什么更好的办法来解决这个问题？非常感谢~

agentzh

Hello!

2014/1/26 Kai Ding:
> 你好，我们目前线上使用Openresty-1.4.3.6作为反向代理服务器，后端服务器是tomcat，比较弱，现在遇到一个很尴尬的问题，希望能借助您的经验提供点指导。
>
>       问题描述：Openresty开启了proxy_buffering，但设置的proxy_buffers比较小（4 *
> 64KB），客户端通过外网下载大文件的时候经常会出错，

1. 一般地，尽量不要使用 tomcat 这样弱的服务器来服务大文件，即使是放在 nginx 的后面。

2. 发果你一定要使用 tomcat，尽量启用 tomcat 的 NIO 模式。或者在 nginx 一侧全缓冲响应到临时文件了，即把
proxy_max_temp_file_size 指令的值提高到足够大：

 http://nginx.org/en/docs/http/ngx_http_proxy_module.html#proxy_max_temp_file_size

当然，写文件的开销还是比较大的，但这比拖着 tomcat 昂贵的连接不放可能会好一些。

3. 或许你应当确定这里延时的具体位置。如果主要是客户端网络因素，那你只能提高连接在服务器端的超时设置了（当然，也不能无限提高）。但如果是你的软件栈中的某个环节，则你需要进行有针对性的优化。

Regards,
-agentzh