关于varnish

yuyong09 · 2012-06-29T15:01:34+00:00

2012/6/28 agentzh <age...@gmail.com> 3. 重新实现一个 php 编译器，将 php 代&#x7...

关于varnish

yuyong09

请问varnish的Storage方式中, file方式和malloc的区别是什么呀, 详细点, 网上的都太简略啦

yaoweibin

file方式是事先分配一个大文件，然后mmap到内存里面，varnish缓存的内存分配都是从这块连续内存进行分配。

malloc就是直接从内存获取，用完就释放掉。varnish用的是jemalloc作为底层分配库。

如果内存够大的话，一般还是直接用malloc好了，mmap的内存在linux下面偶尔会自动sync回硬盘，导致IO很高。


On 2012/6/29 15:01, yong yu wrote:

请问varnish的Storage方式中, file方式和malloc的区别是什么呀, 详细点, 网上的都太简略啦 --



--
Thanks
-YWB

fengmo.q

哥这是关于nginx的社区

2012/6/29 yong yu <yuy...@gmail.com>

请问varnish的Storage方式中, file方式和malloc的区别是什么呀, 详细点, 网上的都太简略啦

Jinglong
Software Engineer
Server Platforms Team at Taobao

gwill.buzz

2012/6/29 pengqi <fen...@gmail.com>

哥这是关于nginx的社区

可以延伸一下：

varnish 与 ngx_srcache 的差异？如何选择？应该考虑哪些情景？

2012/6/29 yong yu <yuy...@gmail.com>
请问varnish的Storage方式中, file方式和malloc的区别是什么呀, 详细点, 网上的都太简略啦

--

Jinglong
Software Engineer
Server Platforms Team at Taobao

smallfish.xy

两个不同的东西，一般varnish/squid都是在最前端做缓存，然后到后面的服务器。
--

blog: http://chenxiaoyu.org

On Fri, Jun 29, 2012 at 4:26 PM, G_will <gwil...@gmail.com> wrote:

2012/6/29 pengqi <fen...@gmail.com>
哥这是关于nginx的社区

可以延伸一下：
varnish 与 ngx_srcache 的差异？如何选择？应该考虑哪些情景？

2012/6/29 yong yu <yuy...@gmail.com>
请问varnish的Storage方式中, file方式和malloc的区别是什么呀, 详细点, 网上的都太简略啦

--

Jinglong
Software Engineer
Server Platforms Team at Taobao

lweiqiang

2012/6/29 Weibin Yao <yaow...@gmail.com>

file方式是事先分配一个大文件，然后mmap到内存里面，varnish缓存的内存分配都是从这块连续内存进行分配。

malloc就是直接从内存获取，用完就释放掉。varnish用的是jemalloc作为底层分配库。

如果内存够大的话，一般还是直接用malloc好了，mmap的内存在linux下面偶尔会自动sync回硬盘，导致IO很高。

曾今看过一段内核代码，听起来，你说的这个IO高的情况感觉是较新的Linux内核脏页回收机制造成的。2.6.32内核回收机制比较aggressive。

On 2012/6/29 15:01, yong yu wrote:

请问varnish的Storage方式中, file方式和malloc的区别是什么呀, 详细点, 网上的都太简略啦 --

邮件自: 列表“openresty”,专用于技术讨论!
发言: 请发邮件到 openresty@googlegroups.com
退订: 请发邮件至 openresty+unsubscribe@googlegroups.com
详情: http://groups.google.com/group/openresty
官网: http://openresty.org/
仓库: https://github.com/agentzh/ngx_openresty
建议: 提问的智慧 http://wiki.woodpecker.org.cn/moin/AskForHelp
教程: http://agentzh.org/misc/nginx/agentzh-nginx-tutorials-zhcn.html

--
Thanks
-YWB

yaoweibin

On 2012/6/29 16:38, Weiqiang wrote:

2012/6/29 Weibin Yao <yaow...@gmail.com>

file方式是事先分配一个大文件，然后mmap到内存里面，varnish缓存的内存分配都是从这块连续内存进行分配。

malloc就是直接从内存获取，用完就释放掉。varnish用的是jemalloc作为底层分配库。

如果内存够大的话，一般还是直接用malloc好了，mmap的内存在linux下面偶尔会自动sync回硬盘，导致IO很高。

曾今看过一段内核代码，听起来，你说的这个IO高的情况感觉是较新的Linux内核脏页回收机制造成的。2.6.32内核回收机制比较aggressive。

是的，新内核据说是mmap的内存脏到一定程度，就会自动跟硬盘同步，而不管MAP_SHARED这个参数。

-- 
Thanks
-YWB

yaoweibin

On 2012/6/29 16:26, G_will wrote:

2012/6/29 pengqi <fen...@gmail.com>

哥这是关于nginx的社区

可以延伸一下：

varnish 与 ngx_srcache 的差异？如何选择？应该考虑哪些情景？

简单来讲
1. varnish的内存池是在本地，ngx_srcache是远端的，内存池不是自己维护。
2. varnish是多线程的模型，ngx_srcache是事件驱动的。
3. varnish比较重，是完整的缓存服务器，它具有ESI、gzip、ungzip，grace等多项功能；ngx_srcache是memcached put get方法的推广，轻量级，基本功能都有。

2012/6/29 yong yu <yuy...@gmail.com>

请问varnish的Storage方式中, file方式和malloc的区别是什么呀, 详细点, 网上的都太简略啦 --

--

Jinglong
Software Engineer
Server Platforms Team at Taobao

--

--

-- 
Thanks
-YWB