运行stapxx: lj-gc-objs报错

ywsample · 2014-01-13T13:19:39+00:00

Hello! On Sun, Jan 12, 2014 at 8:06 PM, Monkey Zhang wrote: > 目前尝试了以下两种方法&#x...

运行stapxx: lj-gc-objs报错

ywsample

hi, agenzth

运行stapxx工具中的lj-gc-objs脚本，会出现如下错误：
semantic error: type definition 'GCcdataVar' not found in '/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2': operator '@cast' at stapxx-bDGPETLg/luajit.stp:59:31
        source: @define sizeof_GCcdataVar %( &@cast(0, "GCcdataVar", "/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2")[1] %)
                                              ^

semantic error: type definition 'GCcdataVar' not found in '/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2': operator '@cast' at :273:20
        source:             return @cast(cdatav, "GCcdataVar", "/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2")->len + @cast(cdatav, "GCcdataVar", "/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2")->extra
                                   ^

semantic error: type definition 'MCLink' not found in '/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2': operator '@cast' at <input>:73:20
        source:         mc_size += @cast(mc, "MCLink", "/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2")->size
                                   ^

semantic error: type definition 'MCLink' not found in '/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2': operator '@cast' at :74:14
        source:         mc = @cast(mc, "MCLink", "/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2")->next
                             ^

semantic error: unresolved type : identifier 'cdatav' at stapxx-bDGPETLg/luajit.stp:271:13
        source:             cdatav = cd - @sizeof_GCcdataVar
                            ^

Pass 2: analysis failed. [man error::pass2]
从错误看是luajit的动态链接库找不到相关类型的定义，但从luajit2.0.2源码上看是有的。这是哪里出问题了呢？

openresty 版本1.4.2.9 编译选项中有 --with-luajit

agentzh

Hello!

2014/1/12  ywsample:
> 运行stapxx工具中的lj-gc-objs脚本，会出现如下错误：
> semantic error: type definition 'GCcdataVar' not found in
> '/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2':

看起来像是 LuaJIT 的 .so 文件里缺少调试符号。你可以使用 dwarfdump 这样的工具检查一下
/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2
这个文件里是否有 DWARF 调试符号。

另外，你使用的 systemtap 版本是最新的 2.4 发布吗？

我在我的 Linux x86_64 系统上尝试了一下 ngx_openresty 1.4.2.9，lj-gc-objs 工具是可以正确工作的：

    $ lj-gc-objs.sxx -x 13944 -D MAXACTION=200000
    Start tracing 13944 (/opt/openresty/nginx/sbin/nginx)

    GC total size: 44804 bytes
    GC state: sweep-string

    395 string objects: max=288, avg=25, min=18, sum=10150 (in bytes)
    293 function objects: max=144, avg=32, min=20, sum=9536 (in bytes)
    56 table objects: max=3104, avg=289, min=32, sum=16184 (in bytes)
    5 proto objects: max=200, avg=159, min=126, sum=799 (in bytes)
    4 userdata objects: max=64, avg=46, min=40, sum=184 (in bytes)
    2 upvalue objects: max=24, avg=24, min=24, sum=48 (in bytes)
    1 thread objects: max=424, avg=424, min=424, sum=424 (in bytes)
    global state tmpbuf size: 271 bytes

    My GC walker detected for total 44804 bytes.
    782 microseconds elapsed in the probe handler.

我的 ngx_openresty 的配置是

    $ /opt/openresty/nginx/sbin/nginx -V
    nginx version: ngx_openresty/1.4.2.9
    built by gcc 4.7.2 20120921 (Red Hat 4.7.2-2) (GCC)
    TLS SNI support enabled
    configure arguments: --prefix=/opt/openresty/nginx
--add-module=../ngx_devel_kit-0.2.19
--add-module=../echo-nginx-module-0.48
--add-module=../xss-nginx-module-0.03rc9
--add-module=../ngx_coolkit-0.2rc1
--add-module=../set-misc-nginx-module-0.22
--add-module=../form-input-nginx-module-0.07
--add-module=../encrypted-session-nginx-module-0.03
--add-module=../srcache-nginx-module-0.22
--add-module=../ngx_lua-0.9.0
--add-module=../headers-more-nginx-module-0.22
--add-module=../array-var-nginx-module-0.03rc1
--add-module=../memc-nginx-module-0.13
--add-module=../redis2-nginx-module-0.10
--add-module=../redis-nginx-module-0.3.6
--add-module=../auth-request-nginx-module-0.2
--add-module=../rds-json-nginx-module-0.12rc10
--add-module=../rds-csv-nginx-module-0.05rc2
--with-ld-opt=-Wl,-rpath,/opt/openresty/luajit/lib
--with-http_ssl_module

Regards,
-agentzh

ywsample

systemstap 版本是2.3, 用objdump -W luajit-5.1.so.2.0.2 | grep GCcdataVar 显示没有调试符号。

在另一机器上试了下，发现是可以的，会跟内核有关系吗，现在的内核版本是 centos 5.9 - 2.6.18-348

2014/1/13 Yichun Zhang (agentzh) <age...@gmail.com>

Hello!

2014/1/12 ywsample:

> 运行stapxx工具中的lj-gc-objs脚本，会出现如下错误：
> semantic error: type definition 'GCcdataVar' not found in
> '/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2':

看起来像是 LuaJIT 的 .so 文件里缺少调试符号。你可以使用 dwarfdump 这样的工具检查一下
/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2
这个文件里是否有 DWARF 调试符号。

另外，你使用的 systemtap 版本是最新的 2.4 发布吗？

我在我的 Linux x86_64 系统上尝试了一下 ngx_openresty 1.4.2.9，lj-gc-objs 工具是可以正确工作的：

$ lj-gc-objs.sxx -x 13944 -D MAXACTION=200000
Start tracing 13944 (/opt/openresty/nginx/sbin/nginx)

GC total size: 44804 bytes
GC state: sweep-string

395 string objects: max=288, avg=25, min=18, sum=10150 (in bytes)
293 function objects: max=144, avg=32, min=20, sum=9536 (in bytes)
56 table objects: max=3104, avg=289, min=32, sum=16184 (in bytes)
5 proto objects: max=200, avg=159, min=126, sum=799 (in bytes)
4 userdata objects: max=64, avg=46, min=40, sum=184 (in bytes)
2 upvalue objects: max=24, avg=24, min=24, sum=48 (in bytes)
1 thread objects: max=424, avg=424, min=424, sum=424 (in bytes)
global state tmpbuf size: 271 bytes

My GC walker detected for total 44804 bytes.
782 microseconds elapsed in the probe handler.

我的 ngx_openresty 的配置是

$ /opt/openresty/nginx/sbin/nginx -V
nginx version: ngx_openresty/1.4.2.9
built by gcc 4.7.2 20120921 (Red Hat 4.7.2-2) (GCC)
TLS SNI support enabled
configure arguments: --prefix=/opt/openresty/nginx
--add-module=../ngx_devel_kit-0.2.19
--add-module=../echo-nginx-module-0.48
--add-module=../xss-nginx-module-0.03rc9
--add-module=../ngx_coolkit-0.2rc1
--add-module=../set-misc-nginx-module-0.22
--add-module=../form-input-nginx-module-0.07
--add-module=../encrypted-session-nginx-module-0.03
--add-module=../srcache-nginx-module-0.22
--add-module=../ngx_lua-0.9.0
--add-module=../headers-more-nginx-module-0.22
--add-module=../array-var-nginx-module-0.03rc1
--add-module=../memc-nginx-module-0.13
--add-module=../redis2-nginx-module-0.10
--add-module=../redis-nginx-module-0.3.6
--add-module=../auth-request-nginx-module-0.2
--add-module=../rds-json-nginx-module-0.12rc10
--add-module=../rds-csv-nginx-module-0.05rc2
--with-ld-opt=-Wl,-rpath,/opt/openresty/luajit/lib
--with-http_ssl_module

Regards,
-agentzh

--

ywsample :)

ywsample

补充: objdump -W libluajit-5.1.so.2.0.2 | grep GCcdataVar 。
又或者跟gcc版本有关系？编译openresty的时候加了 --with-debug参数，还需要其它参数吗？

2014/1/13 ywsample <yws...@gmail.com>

systemstap 版本是2.3, 用objdump -W luajit-5.1.so.2.0.2 | grep GCcdataVar 显示没有调试符号。
在另一机器上试了下，发现是可以的，会跟内核有关系吗，现在的内核版本是 centos 5.9 - 2.6.18-348

2014/1/13 Yichun Zhang (agentzh) <age...@gmail.com>

Hello!

2014/1/12 ywsample:

> 运行stapxx工具中的lj-gc-objs脚本，会出现如下错误：
> semantic error: type definition 'GCcdataVar' not found in
> '/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2':

看起来像是 LuaJIT 的 .so 文件里缺少调试符号。你可以使用 dwarfdump 这样的工具检查一下
/usr/home/yaowei2/work/openresty/luajit/lib/libluajit-5.1.so.2.0.2
这个文件里是否有 DWARF 调试符号。

另外，你使用的 systemtap 版本是最新的 2.4 发布吗？

我在我的 Linux x86_64 系统上尝试了一下 ngx_openresty 1.4.2.9，lj-gc-objs 工具是可以正确工作的：

$ lj-gc-objs.sxx -x 13944 -D MAXACTION=200000
Start tracing 13944 (/opt/openresty/nginx/sbin/nginx)

GC total size: 44804 bytes
GC state: sweep-string

395 string objects: max=288, avg=25, min=18, sum=10150 (in bytes)
293 function objects: max=144, avg=32, min=20, sum=9536 (in bytes)
56 table objects: max=3104, avg=289, min=32, sum=16184 (in bytes)
5 proto objects: max=200, avg=159, min=126, sum=799 (in bytes)
4 userdata objects: max=64, avg=46, min=40, sum=184 (in bytes)
2 upvalue objects: max=24, avg=24, min=24, sum=48 (in bytes)
1 thread objects: max=424, avg=424, min=424, sum=424 (in bytes)
global state tmpbuf size: 271 bytes

My GC walker detected for total 44804 bytes.
782 microseconds elapsed in the probe handler.

我的 ngx_openresty 的配置是

$ /opt/openresty/nginx/sbin/nginx -V
nginx version: ngx_openresty/1.4.2.9
built by gcc 4.7.2 20120921 (Red Hat 4.7.2-2) (GCC)
TLS SNI support enabled
configure arguments: --prefix=/opt/openresty/nginx
--add-module=../ngx_devel_kit-0.2.19
--add-module=../echo-nginx-module-0.48
--add-module=../xss-nginx-module-0.03rc9
--add-module=../ngx_coolkit-0.2rc1
--add-module=../set-misc-nginx-module-0.22
--add-module=../form-input-nginx-module-0.07
--add-module=../encrypted-session-nginx-module-0.03
--add-module=../srcache-nginx-module-0.22
--add-module=../ngx_lua-0.9.0
--add-module=../headers-more-nginx-module-0.22
--add-module=../array-var-nginx-module-0.03rc1
--add-module=../memc-nginx-module-0.13
--add-module=../redis2-nginx-module-0.10
--add-module=../redis-nginx-module-0.3.6
--add-module=../auth-request-nginx-module-0.2
--add-module=../rds-json-nginx-module-0.12rc10
--add-module=../rds-csv-nginx-module-0.05rc2
--with-ld-opt=-Wl,-rpath,/opt/openresty/luajit/lib
--with-http_ssl_module

Regards,
-agentzh

--

--
ywsample :)

ywsample :)

agentzh

Hello!

2014/1/13 ywsample:
> systemstap 版本是2.3, 用objdump -W luajit-5.1.so.2.0.2 | grep GCcdataVar
> 显示没有调试符号。

那你的 openresty 在编译时就有问题。我这里使用 ./configure --with-luajit && make && make
install 构造的 openresty 1.4.2.9（注意，我没有使用 --with-debug
选项），运行你的命令检查是没有问题的：

    $ objdump -W /opt/openresty/luajit/lib/libluajit-5.1.so.2.0.2 |
grep GCcdataVar
    <9268c>   DW_AT_name        : (indirect string, offset: 0x9eda): GCcdataVar
    <926c7>   DW_AT_name        : (indirect string, offset: 0x9eda): GCcdataVar
    <dd892>   DW_AT_name        : (indirect string, offset: 0x9eda): GCcdataVar
    <dd8cd>   DW_AT_name        : (indirect string, offset: 0x9eda): GCcdataVar

> 在另一机器上试了下，发现是可以的，会跟内核有关系吗，现在的内核版本是 centos 5.9 - 2.6.18-348
>

这和内核没关系，应当是你的 C 编译器的问题，或者你构造时禁用了 -g 选项，或者构造后打包工具自动对 .so 文件作为 strip
操作（我知道一些 rpm 打包工具链默认会 strip）。

你用 file 命令检查你的 libluajit21.so.2.0.2 文件是什么结果？

建议你在有问题的机器上重新从源码构造和编译 ngx_openresty.

> 又或者跟gcc版本有关系？

你有问题的机器上使用的 gcc 是什么版本？

> 编译openresty的时候加了 --with-debug参数，还需要其它参数吗？

不要在生产环境使用 --with-debug，因为运行时开销很大，启用了调试代码路径和断言等检查。这仅限开发和调试时开启。调试符号默认就是启用的，和
--with-debug 没有关系。

Regards,
-agentzh

ywsample

1、file命令检查显示libluajit-5.1.so.2.0.2 是not stripped的
2、我机器上的gcc版本是 4.1.2
3、构造的时候带了-g选项的

在 2014年1月14日上午11:16，Yichun Zhang (agentzh) <age...@gmail.com>写道：

Hello!

2014/1/13 ywsample:

> systemstap 版本是2.3, 用objdump -W luajit-5.1.so.2.0.2 | grep GCcdataVar
> 显示没有调试符号。

那你的 openresty 在编译时就有问题。我这里使用 ./configure --with-luajit && make && make
install 构造的 openresty 1.4.2.9（注意，我没有使用 --with-debug
选项），运行你的命令检查是没有问题的：

$ objdump -W /opt/openresty/luajit/lib/libluajit-5.1.so.2.0.2 |
grep GCcdataVar
<9268c> DW_AT_name : (indirect string, offset: 0x9eda): GCcdataVar
<926c7> DW_AT_name : (indirect string, offset: 0x9eda): GCcdataVar
<dd892> DW_AT_name : (indirect string, offset: 0x9eda): GCcdataVar
<dd8cd> DW_AT_name : (indirect string, offset: 0x9eda): GCcdataVar

> 在另一机器上试了下，发现是可以的，会跟内核有关系吗，现在的内核版本是 centos 5.9 - 2.6.18-348
>

这和内核没关系，应当是你的 C 编译器的问题，或者你构造时禁用了 -g 选项，或者构造后打包工具自动对 .so 文件作为 strip
操作（我知道一些 rpm 打包工具链默认会 strip）。

你用 file 命令检查你的 libluajit21.so.2.0.2 文件是什么结果？

建议你在有问题的机器上重新从源码构造和编译 ngx_openresty.

> 又或者跟gcc版本有关系？

你有问题的机器上使用的 gcc 是什么版本？

> 编译openresty的时候加了 --with-debug参数，还需要其它参数吗？

不要在生产环境使用 --with-debug，因为运行时开销很大，启用了调试代码路径和断言等检查。这仅限开发和调试时开启。调试符号默认就是启用的，和
--with-debug 没有关系。

Regards,
-agentzh

--

ywsample :)

agentzh

Hello!

2014/1/13 ywsample:
> 1、file命令检查显示libluajit-5.1.so.2.0.2 是not stripped的
> 2、我机器上的gcc版本是 4.1.2
> 3、构造的时候带了-g选项的
>

这可奇了。我猜可能是 gcc 的问题。你测试成功的机器上的 gcc 版本有更新吗？你换用更新的 gcc 编译（比如 gcc 4.4 或者 4.7）会有区别吗？

Best regards,
-agentzh

ywsample

用gcc4.7.3试了下可以了，是gcc的问题。但具体不知道是哪的问题

在 2014年1月15日上午5:49，Yichun Zhang (agentzh) <age...@gmail.com>写道：

Hello!

2014/1/13 ywsample:

> 1、file命令检查显示libluajit-5.1.so.2.0.2 是not stripped的
> 2、我机器上的gcc版本是 4.1.2
> 3、构造的时候带了-g选项的
>

这可奇了。我猜可能是 gcc 的问题。你测试成功的机器上的 gcc 版本有更新吗？你换用更新的 gcc 编译（比如 gcc 4.4 或者 4.7）会有区别吗？

Best regards,

-agentzh

--

ywsample :)