请问用ngx_lua实现根据http请求保存或者读取本地文件，有什么好的方案？

marquis.dy · 2013-06-17T16:14:37+00:00

Hello! 2013/6/13 agentzh: > 在 nginx.conf 里面配置 > > worker_processes 1; > daemon on; > master_p...

请问用ngx_lua实现根据http请求保存或者读取本地文件，有什么好的方案？

marquis.dy

如题，http put就保存数据到本地文件，get就从本地文件读取数据。

由于操作本地文件只能用lua io库，为了消除阻塞影响只能用子请求的方式吗，还是有别的更好的方式。

如果跟wendav模块配合有没有什么好的方案

请大神们指点

kindy61

这个需求是不是直接用webdav就可以搞定？
可以考虑用lua实现acl.

在 2013-6-17 下午4:14，"Napoléon" <marq...@gmail.com>写道：

如题，http put就保存数据到本地文件，get就从本地文件读取数据。

由于操作本地文件只能用lua io库，为了消除阻塞影响只能用子请求的方式吗，还是有别的更好的方式。
如果跟wendav模块配合有没有什么好的方案
请大神们指点

--
#xA0;

marquis.dy

多谢回复，用webdav的话需要考虑阻塞问题吗？

在 2013年6月17日星期一UTC+8下午6时25分55秒，kindy写道：

这个需求是不是直接用webdav就可以搞定？
可以考虑用lua实现acl.

在 2013-6-17 下午4:14，"Napoléon" <marqu...@gmail.com>写道：
如题，http put就保存数据到本地文件，get就从本地文件读取数据。

由于操作本地文件只能用lua io库，为了消除阻塞影响只能用子请求的方式吗，还是有别的更好的方式。
如果跟wendav模块配合有没有什么好的方案
请大神们指点

--
sp;

kindy61

在阻塞问题上，使用lua不会有更多改善的，如果webdav在功能上无法满足需要，可以辅以lua。

在 2013-6-17 下午8:13，"Napoléon" <marq...@gmail.com>写道：

多谢回复，用webdav的话需要考虑阻塞问题吗？

在 2013年6月17日星期一UTC+8下午6时25分55秒，kindy写道：
这个需求是不是直接用webdav就可以搞定？
可以考虑用lua实现acl.

在 2013-6-17 下午4:14，"Napoléon" <marqu...@gmail.com>写道：
如题，http put就保存数据到本地文件，get就从本地文件读取数据。

由于操作本地文件只能用lua io库，为了消除阻塞影响只能用子请求的方式吗，还是有别的更好的方式。
如果跟wendav模块配合有没有什么好的方案
请大神们指点

--
#xA0;

--
#xA0;

marquis.dy

你的意思就是说只用nginx的webdav模块的话是不用考虑阻塞问题的，就不需要使用子请求来处理了？

如果还需要处避免阻塞的话，除了使用子请求还有没有更好的方法？

在 2013年6月17日星期一UTC+8下午8时42分29秒，kindy写道：

在阻塞问题上，使用lua不会有更多改善的，如果webdav在功能上无法满足需要，可以辅以lua。

在 2013-6-17 下午8:13，"Napoléon" <marqu...@gmail.com>写道：
多谢回复，用webdav的话需要考虑阻塞问题吗？

在 2013年6月17日星期一UTC+8下午6时25分55秒，kindy写道：
这个需求是不是直接用webdav就可以搞定？
可以考虑用lua实现acl.

在 2013-6-17 下午4:14，"Napoléon" <marqu...@gmail.com>写道：
如题，http put就保存数据到本地文件，get就从本地文件读取数据。

由于操作本地文件只能用lua io库，为了消除阻塞影响只能用子请求的方式吗，还是有别的更好的方式。
如果跟wendav模块配合有没有什么好的方案
请大神们指点

--
sp;

--
sp;

kindy61

如果请求量不大，无所谓阻塞的。如果性能不够，可以考虑分布式来处理磁盘写。

lweiqiang

这就是存储系统和缓存系统的区别了，

存储系统的目标是提供大容量、高可用的存储。

如果要性能，则需要缓存（CDN），这就是另一套架构了。呵呵

供参考。

WIlliam LI

On Mon, Jun 17, 2013 at 10:22 PM, kindy <kin...@gmail.com> wrote:

如果请求量不大，无所谓阻塞的。如果性能不够，可以考虑分布式来处理磁盘写。

--
sp;

From William LI

marquis.dy

这个需求就是要实现一个存储系统，一次写入的数据有可能会超过20M。

这种情况必须要考虑阻塞的影响。

agentzh

Hello!

2013/6/17 Napoléon:
> 如题，http put就保存数据到本地文件，get就从本地文件读取数据。
>
> 由于操作本地文件只能用lua io库，为了消除阻塞影响只能用子请求的方式吗，还是有别的更好的方式。
> 如果跟wendav模块配合有没有什么好的方案
> 请大神们指点
>

使用子请求不能自动消除阻塞效应，需要配置 nginx 使用 AIO.

类似地，将 nginx 的 AIO 支持暴露到 Lua 语言级别上也是值得一做的工作 :) 虽然在 Linux 上面 AIO
有很多限制，但在 FreeBSD 等系统上还是很有意义的。

Best regards,
-agentzh

bigplum

AIO in nginx only support read operation, without write now. So there are more things to do about lua-API for AIO.

在 2013年6月18日星期二UTC+8上午3时05分02秒，agentzh写道：

使用子请求不能自动消除阻塞效应，需要配置 nginx 使用 AIO.

类似地，将 nginx 的 AIO 支持暴露到 Lua 语言级别上也是值得一做的工作 :) 虽然在 Linux 上面 AIO
有很多限制，但在 FreeBSD 等系统上还是很有意义的。

Best regards,
-agentzh

marquis.dy

hello，大家

根据各位所述，使用nginx涉及到写操作，阻塞是无法避免的。

我如果专门使用一台机器A作为存储服务器，另一台B作为代理服务器，所有的存储请求由B代理到A，这样只会在A上阻塞，这种方案是否可行？

marquis.dy

再跟大神们请教一下。

开启AIO的话，可以保证使用nginx webdav模块至少在读操作时是非阻塞的？

或者换句话说，开启AIO可以保证nginx整体的非阻塞，跟模块无关（我猜测类似apache，只要在编写模块时使用nginx已经封装好的io接口就行）