请教个火焰图没法正常显示的问题

jinwik · 2018-01-16T22:54:45+00:00

编译成功，但是lua_shared_dict 没有在http 与 stream 共享在 2018年1&#...

请教个火焰图没法正常显示的问题

jinwik

Hi，

内核版本 uname -r 3.10.0-693.5.2

kernel-debuginfo-3.10.0-693.5.2.el7.x86_64、kernel-debuginfo-common-x86_64-3.10.0-693.5.2.el7.x86_64都已安装

但是系统调用部分还是没法正确显示，另外即使重新编译内核依然没有显示。火焰图命令：lj-lua-stacks.sxx --skip-badvars --arg nojit=1 -x

另外，从火焰图分析，cpu大部分消耗在ngx.print以及json encode、decode，使用strace查看系统调用在writev次数相当多，还有优化的空间吗？

谢谢。

Attachment: Teampaper Snap_2018-01-16 22-39-34@2x.png
Description: PNG image

huang_hua2012

hello，

json decode可用https://github.com/cloudflare/lua-resty-json 进行优化

Kwanhur Huang

TL;DR

在 2018年1月16日，下午10:54，Tim kiwi <ji...@gmail.com> 写道：

Hi，
内核版本 uname -r 3.10.0-693.5.2
kernel-debuginfo-3.10.0-693.5.2.el7.x86_64、kernel-debuginfo-common-x86_64-3.10.0-693.5.2.el7.x86_64都已安装

但是系统调用部分还是没法正确显示，另外即使重新编译内核依然没有显示。火焰图命令：lj-lua-stacks.sxx --skip-badvars --arg nojit=1 -x

另外，从火焰图分析，cpu大部分消耗在ngx.print以及json encode、decode，使用strace查看系统调用在writev次数相当多，还有优化的空间吗？

谢谢。

--
--

<Teampaper Snap_2018-01-16 22-39-34@2x.png>

jinwik

恩，这个已经在用，encode使用rapidjson，decode使用resty-json，另外设置了content-length，减少了一次writev系统调用，不知道还有什么优化的空间

On Wednesday, January 17, 2018 at 9:08:19 AM UTC+8, Kwanhur Huang wrote:

hello，

json decode可用https://github.com/cloudflare/lua-resty-json 进行优化

Kwanhur Huang
TL;DR

在 2018年1月16日，下午10:54，Tim kiwi <jin...@gmail.com> 写道：

Hi，
内核版本 uname -r 3.10.0-693.5.2
kernel-debuginfo-3.10.0-693.5.2.el7.x86_64、kernel-debuginfo-common-x86_64-3.10.0-693.5.2.el7.x86_64都已安装

但是系统调用部分还是没法正确显示，另外即使重新编译内核依然没有显示。火焰图命令：lj-lua-stacks.sxx --skip-badvars --arg nojit=1 -x

另外，从火焰图分析，cpu大部分消耗在ngx.print以及json encode、decode，使用strace查看系统调用在writev次数相当多，还有优化的空间吗？

谢谢。

--
<Teampaper Snap_2018-01-16 22-39-34@2x.png>

zchao1995

Hi！

不知道你的 Lua 代码里是怎么调用 ngx.print 的，或许可以一次多发送一些数据（需要和内存做一个权衡），以此减少 ngx.print 的调用。

spacewanderlzx

你可能需要一个 sample-bt 的火焰图，显示下 libc 里面的 writev 占用了多少。
之前我也遇到过 CPU 大部分消耗在 json encode/decode 的情况，最终的解决办法是改写部分业务代码，减少反复的 encode/decode。

在 2018年1月16日 下午10:54，Tim kiwi <ji...@gmail.com> 写道：
> Hi，
> 内核版本 uname -r  3.10.0-693.5.2
> kernel-debuginfo-3.10.0-693.5.2.el7.x86_64、kernel-debuginfo-common-x86_64-3.10.0-693.5.2.el7.x86_64都已安装
>
> 但是系统调用部分还是没法正确显示，另外即使重新编译内核依然没有显示。火焰图命令：lj-lua-stacks.sxx --skip-badvars
> --arg nojit=1 -x
>
> 另外，从火焰图分析，cpu大部分消耗在ngx.print以及json
> encode、decode，使用strace查看系统调用在writev次数相当多，还有优化的空间吗？
>
> 谢谢。
>
> --
>

jinwik

看来lj-lua-stacks.sxx没有对内核地址做处理，另外如果不设置content-length,使用ngx.print返回结果，会多一次系统调用：writev(3, [{"0\r\n\r\n", 5}], 1)。

我这个场景收到一个请求后会使用resty-http发出多个http请求，需要对response body(json)做处理，decode貌似没法避免，不清楚能否把lua table直接在ngx c层面处理后直接返回响应？

On Wednesday, January 17, 2018 at 11:06:10 AM UTC+8, Zexuan Luo wrote:

你可能需要一个 sample-bt 的火焰图，显示下 libc 里面的 writev 占用了多少。
之前我也遇到过 CPU 大部分消耗在 json encode/decode 的情况，最终的解决办法是改写部分业务代码，减少反复的 encode/decode。

在 2018年1月16日下午10:54，Tim kiwi <jin...@gmail.com> 写道：
> Hi，
> 内核版本 uname -r 3.10.0-693.5.2
> kernel-debuginfo-3.10.0-693.5.2.el7.x86_64、kernel-debuginfo-common-x86_64-3.10.0-693.5.2.el7.x86_64都已安装
>
> 但是系统调用部分还是没法正确显示，另外即使重新编译内核依然没有显示。火焰图命令：lj-lua-stacks.sxx --skip-badvars
> --arg nojit=1 -x
>
> 另外，从火焰图分析，cpu大部分消耗在ngx.print以及json
> encode、decode，使用strace查看系统调用在writev次数相当多，还有优化的空间吗？
>
> 谢谢。
>
> --
>

spacewanderlzx

> decode貌似没法避免，不清楚能否把lua table直接在ngx c层面处理后直接返回响应？
不明白你这句话是想表达什么意思？你是想把哪里来的 lua table 处理成给谁的响应？ngx.print 会对传进来的 array 类型的
table 做拼接的。

在 2018年1月17日 下午2:13，Tim kiwi <ji...@gmail.com> 写道：
> 看来lj-lua-stacks.sxx没有对内核地址做处理，另外如果不设置content-length,使用ngx.print返回结果，会多一次系统调用：writev(3,
> [{"0\r\n\r\n", 5}], 1)。
> 我这个场景收到一个请求后会使用resty-http发出多个http请求，需要对response
> body(json)做处理，decode貌似没法避免，不清楚能否把lua table直接在ngx c层面处理后直接返回响应？
>
> On Wednesday, January 17, 2018 at 11:06:10 AM UTC+8, Zexuan Luo wrote:
>>
>> 你可能需要一个 sample-bt 的火焰图，显示下 libc 里面的 writev 占用了多少。
>> 之前我也遇到过 CPU 大部分消耗在 json encode/decode 的情况，最终的解决办法是改写部分业务代码，减少反复的
>> encode/decode。
>>
>> 在 2018年1月16日 下午10:54，Tim kiwi <jin...@gmail.com> 写道：
>> > Hi，
>> > 内核版本 uname -r  3.10.0-693.5.2
>> >
>> > kernel-debuginfo-3.10.0-693.5.2.el7.x86_64、kernel-debuginfo-common-x86_64-3.10.0-693.5.2.el7.x86_64都已安装
>> >
>> > 但是系统调用部分还是没法正确显示，另外即使重新编译内核依然没有显示。火焰图命令：lj-lua-stacks.sxx --skip-badvars
>> > --arg nojit=1 -x
>> >
>> > 另外，从火焰图分析，cpu大部分消耗在ngx.print以及json
>> > encode、decode，使用strace查看系统调用在writev次数相当多，还有优化的空间吗？
>> >
>> > 谢谢。
>> >
>> > --
>> > --
>