nginx的pid文件被清空

haoyun-kgq · 2015-09-09T16:25:03+00:00

Hello，在 2016年4月1日下午2:25，Lucien Li <liha...@126.com>写道：您好&#x...

nginx的pid文件被清空

haoyun-kgq

大家好！

本次有两个问题：

1、我的openresty-1.4.3.6的nginx.pid文件被清空(就是空的)，系统是centos6.5final，已经出现过一次了，是在查看log时发现的，发现log是空的，因为有log切割代码，log被mv后，当kill -HUP /var/run/nginx.pid时，是失败的，因为pid文件没内容，所以重新打开log文件失败。问题是为什么pid文件是空的，根本没有谁去清理它啊，而且也没有cron任务，比较奇怪？

2、使用proxy模块时，如果客户端连接数超过65536后就会失败，如何给nginx代理服务器绑定ip，用来突破net.ipv4.ip_local_port_range的限制，使得nginx可以向被代理的服务器发起超过65536个连接？

doujiang24

在 2015年9月9日下午4:24，haoyun <haoy...@163.com>写道：

大家好！

2、使用proxy模块时，如果客户端连接数超过65536后就会失败，如何给nginx代理服务器绑定ip，用来突破net.ipv4.ip_local_port_range的限制，使得nginx可以向被代理的服务器发起超过65536个连接？

这个，nginx 与你的后端服务之间，改用长链的方式更为合理吧（我猜你现在用的短链）

--

haoyun-kgq

多谢~

然而我的意思是：想让代理服务器向后端服务器发起更多的请求，超过net.ipv4.ip_local_port_range最大值，所以要绑定向后端连接时使用的ip，多个ip即可实现ip*65535个连接了，不知道在nginx里怎么配置，还是现在的nginx还不支持？至于长连接那是肯定的。

在 2015-09-09 17:18:53，"DeJiang Zhu" <douj...@gmail.com> 写道：

Hi

在 2015年9月9日下午4:24，haoyun <haoy...@163.com>写道：
大家好！
2、使用proxy模块时，如果客户端连接数超过65536后就会失败，如何给nginx代理服务器绑定ip，用来突破net.ipv4.ip_local_port_range的限制，使得nginx可以向被代理的服务器发起超过65536个连接？

这个，nginx 与你的后端服务之间，改用长链的方式更为合理吧（我猜你现在用的短链）

--

--

haoyun-kgq

这个功能我觉得不难实现，就是在向后端发起连接时bind一下ip，可惜，我不会c，没办法了。。。

现在实现这个功能了吗？

在 2015-09-09 17:18:53，"DeJiang Zhu" <douj...@gmail.com> 写道：

Hi

在 2015年9月9日下午4:24，haoyun <haoy...@163.com>写道：
大家好！
2、使用proxy模块时，如果客户端连接数超过65536后就会失败，如何给nginx代理服务器绑定ip，用来突破net.ipv4.ip_local_port_range的限制，使得nginx可以向被代理的服务器发起超过65536个连接？

这个，nginx 与你的后端服务之间，改用长链的方式更为合理吧（我猜你现在用的短链）

--

--

haoyun-kgq

简单的用伪代码表示一下我的思路就是：

ips = get_ips_from_config()

s = socket()

s.bind((ips[random],0))

s.connect(('backend-ip',80))

在 2015-09-09 17:18:53，"DeJiang Zhu" <douj...@gmail.com> 写道：

Hi

在 2015年9月9日下午4:24，haoyun <haoy...@163.com>写道：
大家好！
2、使用proxy模块时，如果客户端连接数超过65536后就会失败，如何给nginx代理服务器绑定ip，用来突破net.ipv4.ip_local_port_range的限制，使得nginx可以向被代理的服务器发起超过65536个连接？

这个，nginx 与你的后端服务之间，改用长链的方式更为合理吧（我猜你现在用的短链）

--

--

agentzh

Hello!

2015-09-09 16:24 GMT+08:00 haoyun:
> 1、我的openresty-1.4.3.6的nginx.pid文件被清空(就是空的)，系统是centos6.5final，已经出现过一次了，是在查看log时发现的，发现log是空的，因为有log切割代码，log被mv后，当kill
> -HUP
> /var/run/nginx.pid时，是失败的，因为pid文件没内容，所以重新打开log文件失败。问题是为什么pid文件是空的，根本没有谁去清理它啊，而且也没有cron任务，比较奇怪？

kill -HUP 操作本身并不会触发 pid 文件被删除。建议检查你系统中使用的自己的 bash 脚本之类的是否有删除文件的操作。监视删除
.pid 文件的事件细节是一个比较直接的办法。

> 2、使用proxy模块时，如果客户端连接数超过65536后就会失败，如何给nginx代理服务器绑定ip，用来突破net.ipv4.ip_local_port_range的限制，使得nginx可以向被代理的服务器发起超过65536个连接？
>

可以参考 proxy_bind 指令：

    http://nginx.org/en/docs/http/ngx_http_proxy_module.html#proxy_bind

Regards,
-agentzh

yuansheng_2f16

>> 2、使用proxy模块时，如果客户端连接数超过65536后就会失败，如何给nginx代理服务器绑定ip，用来突破net.ipv4.ip_local_port_range的限制，使得nginx可以向被代理的服务器发起超过65536个连接？
>>
>
>可以参考 proxy_bind 指令：
>
> http://nginx.org/en/docs/http/ngx_http_proxy_module.html#proxy_bind

@agentzh，这个指令给socket lua添加一下，更帅气。

2015-09-09 23:58 GMT+08:00 Yichun Zhang (agentzh) <age...@gmail.com>:

Hello!

2015-09-09 16:24 GMT+08:00 haoyun:
> 1、我的openresty-1.4.3.6的nginx.pid文件被清空(就是空的)，系统是centos6.5final，已经出现过一次了，是在查看log时发现的，发现log是空的，因为有log切割代码，log被mv后，当kill
> -HUP
> /var/run/nginx.pid时，是失败的，因为pid文件没内容，所以重新打开log文件失败。问题是为什么pid文件是空的，根本没有谁去清理它啊，而且也没有cron任务，比较奇怪？

kill -HUP 操作本身并不会触发 pid 文件被删除。建议检查你系统中使用的自己的 bash 脚本之类的是否有删除文件的操作。监视删除
.pid 文件的事件细节是一个比较直接的办法。

> 2、使用proxy模块时，如果客户端连接数超过65536后就会失败，如何给nginx代理服务器绑定ip，用来突破net.ipv4.ip_local_port_range的限制，使得nginx可以向被代理的服务器发起超过65536个连接？
>

可以参考 proxy_bind 指令：

http://nginx.org/en/docs/http/ngx_http_proxy_module.html#proxy_bind

Regards,
-agentzh

--

Membhis

My github: https://github.com/membphis

Our Book: OpenResty Best Practices

agentzh

Hello!

2015-09-10 11:07 GMT+08:00 YuanSheng Wang:
>>可以参考 proxy_bind 指令：
>>
>>    http://nginx.org/en/docs/http/ngx_http_proxy_module.html#proxy_bind
>
> @agentzh，这个指令给socket lua添加一下，更帅气。
>

嗯嗯，这个一直在我的 TODO 列表里，但一直未得空实现。期待赞助商或者贡献者，呵呵。

Regards,
-agentzh

haoyun-kgq

非常3Q，

1、我的情况不是pid文件被删除，而是pid文件内容被清空

2、可以bind两个ip吗？如果只能bind一个，那还是突破不了65536的限制


在 2015-09-09 23:58:43，"Yichun Zhang (agentzh)" <age...@gmail.com> 写道：
>Hello!
>
>2015-09-09 16:24 GMT+08:00 haoyun:
>> 1、我的openresty-1.4.3.6的nginx.pid文件被清空(就是空的)，系统是centos6.5final，已经出现过一次了，是在查看log时发现的，发现log是空的，因为有log切割代码，log被mv后，当kill
>> -HUP
>> /var/run/nginx.pid时，是失败的，因为pid文件没内容，所以重新打开log文件失败。问题是为什么pid文件是空的，根本没有谁去清理它啊，而且也没有cron任务，比较奇怪？
>
>kill -HUP 操作本身并不会触发 pid 文件被删除。建议检查你系统中使用的自己的 bash 脚本之类的是否有删除文件的操作。监视删除
>.pid 文件的事件细节是一个比较直接的办法。
>
>> 2、使用proxy模块时，如果客户端连接数超过65536后就会失败，如何给nginx代理服务器绑定ip，用来突破net.ipv4.ip_local_port_range的限制，使得nginx可以向被代理的服务器发起超过65536个连接？
>>
>
>可以参考 proxy_bind 指令：
>
>    http://nginx.org/en/docs/http/ngx_http_proxy_module.html#proxy_bind
>
> Regards,
>-agentzh
>
>-- 
>-- 
>邮件来自列表“openresty”,专用于技术讨论!
>订阅: 请发空白邮件到 openresty+subscribe@googlegroups.com
>发言: 请发邮件到 openresty@googlegroups.com
>退订: 请发邮件至 openresty+unsubscribe@googlegroups.com
>归档: http://groups.google.com/group/openresty
>官网: http://openresty.org/
>仓库: https://github.com/agentzh/ngx_openresty
>教程: http://openresty.org/download/agentzh-nginx-tutorials-zhcn.html

agentzh

Hello!

2015-09-11 11:28 GMT+08:00 haoyun:
> 1、我的情况不是pid文件被删除，而是pid文件内容被清空

类似地，你可以在系统级别上监视具体哪个进程对该文件进行清空。

> 2、可以bind两个ip吗？如果只能bind一个，那还是突破不了65536的限制
>

你可以定义多个配置了不同 proxy_bind 的内部 location，然后从主 location 随机发起内部跳转到其中某一个内部 location.

当然，更优雅的一个做法是让 proxy_bind 指令支持 nginx 变量，这样每请求可以动态变化（比如通过 Lua 代码动态设置该 nginx 变量的值）。

Regards,
-agentzh

haoyun-kgq

对的，等待春哥去实现代码喽。pid文件被清空，这个问题怎么排查，也请给个思路吧 ^_^


在 2015-09-11 11:43:20，"Yichun Zhang (agentzh)" <age...@gmail.com> 写道：
>Hello!
>
>2015-09-11 11:28 GMT+08:00 haoyun:
>> 1、我的情况不是pid文件被删除，而是pid文件内容被清空
>
>类似地，你可以在系统级别上监视具体哪个进程对该文件进行清空。
>
>> 2、可以bind两个ip吗？如果只能bind一个，那还是突破不了65536的限制
>>
>
>你可以定义多个配置了不同 proxy_bind 的内部 location，然后从主 location 随机发起内部跳转到其中某一个内部 location.
>
>当然，更优雅的一个做法是让 proxy_bind 指令支持 nginx 变量，这样每请求可以动态变化（比如通过 Lua 代码动态设置该 nginx 变量的值）。
>
>Regards,
>-agentzh
>
>-- 
>-- 
>邮件来自列表“openresty”,专用于技术讨论!
>订阅: 请发空白邮件到 openresty+subscribe@googlegroups.com
>发言: 请发邮件到 openresty@googlegroups.com
>退订: 请发邮件至 openresty+unsubscribe@googlegroups.com
>归档: http://groups.google.com/group/openresty
>官网: http://openresty.org/
>仓库: https://github.com/agentzh/ngx_openresty
>教程: http://openresty.org/download/agentzh-nginx-tutorials-zhcn.html

doujiang24

Hi，

在 2015年9月11日上午11:48，haoyun <haoy...@163.com>写道：

对的，等待春哥去实现代码喽

哈哈，推动公司赞助会更快 :)

pid文件被清空，这个问题怎么排查，也请给个思路吧 ^_^

写个 stap 脚本，监控 file open 和 write 调用，看看是哪个进程在打开，写这个文件

具体可以参考： http://blog.yufeng.info/archives/2581

仅供参考:)


在 2015-09-11 11:43:20，"Yichun Zhang (agentzh)" <age...@gmail.com> 写道：
>Hello!
>
>2015-09-11 11:28 GMT+08:00 haoyun:
>> 1、我的情况不是pid文件被删除，而是pid文件内容被清空
>
>类似地，你可以在系统级别上监视具体哪个进程对该文件进行清空。
>
>> 2、可以bind两个ip吗？如果只能bind一个，那还是突破不了65536的限制
>>
>
>你可以定义多个配置了不同 proxy_bind 的内部 location，然后从主 location 随机发起内部跳转到其中某一个内部 location.
>
>当然，更优雅的一个做法是让 proxy_bind 指令支持 nginx 变量，这样每请求可以动态变化（比如通过 Lua 代码动态设置该 nginx 变量的值）。
>
>Regards,
>-agentzh
>
>-- 
>

haoyun-kgq

多谢了~

在 2015-09-11 15:49:46，"DeJiang Zhu" <douj...@gmail.com> 写道：

Hi，
在 2015年9月11日上午11:48，haoyun <haoy...@163.com>写道：
对的，等待春哥去实现代码喽

哈哈，推动公司赞助会更快 :)

pid文件被清空，这个问题怎么排查，也请给个思路吧 ^_^

写个 stap 脚本，监控 file open 和 write 调用，看看是哪个进程在打开，写这个文件
具体可以参考： http://blog.yufeng.info/archives/2581

仅供参考:)
在 2015-09-11 11:43:20，"Yichun Zhang (agentzh)" <age...@gmail.com> 写道：
>Hello!
>
>2015-09-11 11:28 GMT+08:00 haoyun:
>> 1、我的情况不是pid文件被删除，而是pid文件内容被清空
>
>类似地，你可以在系统级别上监视具体哪个进程对该文件进行清空。
>
>> 2、可以bind两个ip吗？如果只能bind一个，那还是突破不了65536的限制
>>
>
>你可以定义多个配置了不同 proxy_bind 的内部 location，然后从主 location 随机发起内部跳转到其中某一个内部 location.
>
>当然，更优雅的一个做法是让 proxy_bind 指令支持 nginx 变量，这样每请求可以动态变化（比如通过 Lua 代码动态设置该 nginx 变量的值）。
>
>Regards,
>-agentzh
>
>-- 
>
--
--

haoyun-kgq

那该如何配置“从主location随机发起内部跳转”呢？


在 2015-09-11 11:43:20，"Yichun Zhang (agentzh)" <age...@gmail.com> 写道：
>Hello!
>
>2015-09-11 11:28 GMT+08:00 haoyun:
>> 1、我的情况不是pid文件被删除，而是pid文件内容被清空
>
>类似地，你可以在系统级别上监视具体哪个进程对该文件进行清空。
>
>> 2、可以bind两个ip吗？如果只能bind一个，那还是突破不了65536的限制
>>
>
>你可以定义多个配置了不同 proxy_bind 的内部 location，然后从主 location 随机发起内部跳转到其中某一个内部 location.
>
>当然，更优雅的一个做法是让 proxy_bind 指令支持 nginx 变量，这样每请求可以动态变化（比如通过 Lua 代码动态设置该 nginx 变量的值）。
>
>Regards,
>-agentzh
>
>-- 
>-- 
>邮件来自列表“openresty”,专用于技术讨论!
>订阅: 请发空白邮件到 openresty+subscribe@googlegroups.com
>发言: 请发邮件到 openresty@googlegroups.com
>退订: 请发邮件至 openresty+unsubscribe@googlegroups.com
>归档: http://groups.google.com/group/openresty
>官网: http://openresty.org/
>仓库: https://github.com/agentzh/ngx_openresty
>教程: http://openresty.org/download/agentzh-nginx-tutorials-zhcn.html

doujiang24

Hi，

location /bindA {

proxy_bind A;

proxy_pass ...;

}

location /bindB {

proxy_bind B;

proxy_pass ...;

}

location /main {

rewrite_by_lua '

local random_bind = "" -- your random business

return ngx.exec(random_bind)

}

仅供参考，或许你可以多翻阅本讨论组，或者 openresty 官网上的资料

在 2015年9月14日上午10:49，haoyun <haoy...@163.com>写道：

那该如何配置“从主location随机发起内部跳转”呢？


在 2015-09-11 11:43:20，"Yichun Zhang (agentzh)" <age...@gmail.com> 写道：
>Hello!
>
>2015-09-11 11:28 GMT+08:00 haoyun:
>> 1、我的情况不是pid文件被删除，而是pid文件内容被清空
>
>类似地，你可以在系统级别上监视具体哪个进程对该文件进行清空。
>
>> 2、可以bind两个ip吗？如果只能bind一个，那还是突破不了65536的限制
>>
>
>你可以定义多个配置了不同 proxy_bind 的内部 location，然后从主 location 随机发起内部跳转到其中某一个内部 location.
>
>当然，更优雅的一个做法是让 proxy_bind 指令支持 nginx 变量，这样每请求可以动态变化（比如通过 Lua 代码动态设置该 nginx 变量的值）。
>
>Regards,
>-agentzh
>
>-- 
>

doujiang24

哈哈，还有院生和其他小伙伴们写的这个，也是很好的读物 :)

http://moonbingbing.gitbooks.io/openresty-best-practices/content/

在 2015年9月14日下午12:18，DeJiang Zhu <douj...@gmail.com>写道：

Hi，

location /bindA {
proxy_bind A;
proxy_pass ...;
}

location /bindB {
proxy_bind B;
proxy_pass ...;
}

location /main {
rewrite_by_lua '
local random_bind = "" -- your random business
return ngx.exec(random_bind)
';
}

仅供参考，或许你可以多翻阅本讨论组，或者 openresty 官网上的资料
在 2015年9月14日上午10:49，haoyun <haoy...@163.com>写道：
那该如何配置“从主location随机发起内部跳转”呢？
在 2015-09-11 11:43:20，"Yichun Zhang (agentzh)" <age...@gmail.com> 写道：
>Hello!
>
>2015-09-11 11:28 GMT+08:00 haoyun:
>> 1、我的情况不是pid文件被删除，而是pid文件内容被清空
>
>类似地，你可以在系统级别上监视具体哪个进程对该文件进行清空。
>
>> 2、可以bind两个ip吗？如果只能bind一个，那还是突破不了65536的限制
>>
>
>你可以定义多个配置了不同 proxy_bind 的内部 location，然后从主 location 随机发起内部跳转到其中某一个内部 location.
>
>当然，更优雅的一个做法是让 proxy_bind 指令支持 nginx 变量，这样每请求可以动态变化（比如通过 Lua 代码动态设置该 nginx 变量的值）。
>
>Regards,
>-agentzh
>
>-- 
>
--

haoyun-kgq

恩恩，灰常感谢~

找了半天好像nginx不能直接实现，想必得通过lua解决~

在 2015-09-14 12:18:56，"DeJiang Zhu" <douj...@gmail.com> 写道：

Hi，

location /bindA {
proxy_bind A;
proxy_pass ...;
}

location /bindB {
proxy_bind B;
proxy_pass ...;
}

location /main {
rewrite_by_lua '
local random_bind = "" -- your random business
return ngx.exec(random_bind)
';
}

仅供参考，或许你可以多翻阅本讨论组，或者 openresty 官网上的资料
在 2015年9月14日上午10:49，haoyun <haoy...@163.com>写道：
那该如何配置“从主location随机发起内部跳转”呢？
在 2015-09-11 11:43:20，"Yichun Zhang (agentzh)" <age...@gmail.com> 写道：
>Hello!
>
>2015-09-11 11:28 GMT+08:00 haoyun:
>> 1、我的情况不是pid文件被删除，而是pid文件内容被清空
>
>类似地，你可以在系统级别上监视具体哪个进程对该文件进行清空。
>
>> 2、可以bind两个ip吗？如果只能bind一个，那还是突破不了65536的限制
>>
>
>你可以定义多个配置了不同 proxy_bind 的内部 location，然后从主 location 随机发起内部跳转到其中某一个内部 location.
>
>当然，更优雅的一个做法是让 proxy_bind 指令支持 nginx 变量，这样每请求可以动态变化（比如通过 Lua 代码动态设置该 nginx 变量的值）。
>
>Regards,
>-agentzh
>
>-- 
>
--
--

haoyun-kgq

相当不错的文档，点个赞！

在 2015-09-14 12:22:56，"DeJiang Zhu" <douj...@gmail.com> 写道：

哈哈，还有院生和其他小伙伴们写的这个，也是很好的读物 :)

http://moonbingbing.gitbooks.io/openresty-best-practices/content/
在 2015年9月14日下午12:18，DeJiang Zhu <douj...@gmail.com>写道：
Hi，

location /bindA {
proxy_bind A;
proxy_pass ...;
}

location /bindB {
proxy_bind B;
proxy_pass ...;
}

location /main {
rewrite_by_lua '
local random_bind = "" -- your random business
return ngx.exec(random_bind)
';
}

仅供参考，或许你可以多翻阅本讨论组，或者 openresty 官网上的资料
在 2015年9月14日上午10:49，haoyun <haoy...@163.com>写道：
那该如何配置“从主location随机发起内部跳转”呢？
在 2015-09-11 11:43:20，"Yichun Zhang (agentzh)" <age...@gmail.com> 写道：
>Hello!
>
>2015-09-11 11:28 GMT+08:00 haoyun:
>> 1、我的情况不是pid文件被删除，而是pid文件内容被清空
>
>类似地，你可以在系统级别上监视具体哪个进程对该文件进行清空。
>
>> 2、可以bind两个ip吗？如果只能bind一个，那还是突破不了65536的限制
>>
>
>你可以定义多个配置了不同 proxy_bind 的内部 location，然后从主 location 随机发起内部跳转到其中某一个内部 location.
>
>当然，更优雅的一个做法是让 proxy_bind 指令支持 nginx 变量，这样每请求可以动态变化（比如通过 Lua 代码动态设置该 nginx 变量的值）。
>
>Regards,
>-agentzh
>
>-- 
>
--
--