nginx-systemtap-toolkit 安装使用求助

xinqiyang · 2013-11-22T09:59:50+00:00

Hello! On Fri, Nov 22, 2013 at 1:42 AM, jsdoitao wrote: > well done! 非常棒。header_filter，body_filter能够&#x5...

nginx-systemtap-toolkit 安装使用求助

xinqiyang

今天做了下性能测试,想用nginx-systemtap-toolkit生产火焰图.由于是在生产环境下.遇到systemtap的安装问题.

环境信息

Linode 5.6 64bit Vps

uname -rm
3.9.3-x86_64-linode33 x86_64 , 这个是被Linode升级过的内核的了,默认的5.6的内核不是 2.6.18么?

perl -v

This is perl, v5.8.8 built for x86_64-linux-thread-multi

按照这里的安装说明,安装时候无法找到对应内核的 kernel-debuginfo 相关的包.

https://sourceware.org/systemtap/wiki/SystemTapOnCentOS

还有对于

systemtap 的版本现在最新的是2.4 就用2.4比较好么?

https://sourceware.org/systemtap/ftp/releases/

现在大家生产环境下都用哪个系统?那个版本的内核?

有用CentOS的大大们,分享下吧.....

麻烦春哥和各位帮忙看下....

jie123108

我们的使用centos 5.6 x64.

上周使用源代码安装了system tap 2.4 还比较顺利。。

tar -xvf elfutils-0.148.tar.bz2

#systemtap 安装

tar -xvf systemtap-2.4.tar.gz

cd systemtap-2.4

./configure --with-elfutils=../elfutils-0.148 --prefix=/usr/local/systemtap-2.4

make -j 4 && make install

mv /usr/bin/stap{,-1.6}

ln -s /usr/local/systemtap-2.4/bin/stap /usr/bin/stap

就这么几步步安装成功了。

jie123108

发件人： xinqiyang

发送时间： 2013-11-22 09:59

收件人： openresty

主题： [openresty] nginx-systemtap-toolkit 安装使用求助

今天做了下性能测试,想用nginx-systemtap-toolkit生产火焰图.由于是在生产环境下.遇到systemtap的安装问题.

环境信息

Linode 5.6 64bit Vps

uname -rm
3.9.3-x86_64-linode33 x86_64 , 这个是被Linode升级过的内核的了,默认的5.6的内核不是 2.6.18么?

perl -v

This is perl, v5.8.8 built for x86_64-linux-thread-multi

按照这里的安装说明,安装时候无法找到对应内核的 kernel-debuginfo 相关的包.

https://sourceware.org/systemtap/wiki/SystemTapOnCentOS

还有对于

systemtap 的版本现在最新的是2.4 就用2.4比较好么?

https://sourceware.org/systemtap/ftp/releases/

现在大家生产环境下都用哪个系统?那个版本的内核?

有用CentOS的大大们,分享下吧.....

麻烦春哥和各位帮忙看下....

xinqiyang

感谢jie123108我用你的这个方法,安装失败了...

make[1]: Leaving directory `/tmp/systemtap-2.4/build-elfutils/backends'

make -j1 -C build-elfutils install-pkgincludeHEADERS;

make[1]: Entering directory `/tmp/systemtap-2.4/build-elfutils'

make[1]: warning: -jN forced in submake: disabling jobserver mode.

test -z "/tmp/systemtap-2.4/include-elfutils/elfutils" || /bin/mkdir -p "/tmp/systemtap-2.4/include-elfutils/elfutils"

/usr/bin/install -c -m 644 version.h '/tmp/systemtap-2.4/include-elfutils/elfutils'

make[1]: Leaving directory `/tmp/systemtap-2.4/build-elfutils'

touch stamp-elfutils

make all-recursive

make[1]: Entering directory `/tmp/systemtap-2.4'

Making all in .

make[2]: Entering directory `/tmp/systemtap-2.4'

CXX stap-main.o

CXX stap-session.o

CXX stap-parse.o

CXX stap-staptree.o

CXX stap-elaborate.o

CXX stap-translate.o

CXX stap-tapsets.o

g++: Internal error: Killed (program cc1plus)

Please submit a full bug report.

See <URL:http://bugzilla.redhat.com/bugzilla> for instructions.

make[2]: *** [stap-translate.o] Error 1

make[2]: *** Waiting for unfinished jobs....

make[2]: Leaving directory `/tmp/systemtap-2.4'

make[1]: *** [all-recursive] Error 1

make[1]: Leaving directory `/tmp/systemtap-2.4'

make: *** [all] Error 2

mv: cannot stat `/usr/bin/stap': No such file or directory

是缺少那些依赖库么?

2013/11/22 jie123108 <jie1...@gmail.com>

我们的使用centos 5.6 x64.

上周使用源代码安装了system tap 2.4 还比较顺利。。

tar -xvf elfutils-0.148.tar.bz2

#systemtap 安装

tar -xvf systemtap-2.4.tar.gz

cd systemtap-2.4

./configure --with-elfutils=../elfutils-0.148 --prefix=/usr/local/systemtap-2.4

make -j 4 && make install

mv /usr/bin/stap{,-1.6}

ln -s /usr/local/systemtap-2.4/bin/stap /usr/bin/stap

就这么几步步安装成功了。

jie123108

发件人： xinqiyang

发送时间： 2013-11-22 09:59

收件人： openresty

主题： [openresty] nginx-systemtap-toolkit 安装使用求助

今天做了下性能测试,想用nginx-systemtap-toolkit生产火焰图.由于是在生产环境下.遇到systemtap的安装问题.

环境信息

Linode 5.6 64bit Vps

uname -rm
3.9.3-x86_64-linode33 x86_64 , 这个是被Linode升级过的内核的了,默认的5.6的内核不是 2.6.18么?

perl -v

This is perl, v5.8.8 built for x86_64-linux-thread-multi

按照这里的安装说明,安装时候无法找到对应内核的 kernel-debuginfo 相关的包.

https://sourceware.org/systemtap/wiki/SystemTapOnCentOS

还有对于

systemtap 的版本现在最新的是2.4 就用2.4比较好么?

https://sourceware.org/systemtap/ftp/releases/

现在大家生产环境下都用哪个系统?那个版本的内核?

有用CentOS的大大们,分享下吧.....

麻烦春哥和各位帮忙看下....

--

--

xinqiyang

agentzh

Hello!

2013/11/21 xinqiyang:
> uname -rm
> 3.9.3-x86_64-linode33 x86_64  , 这个是被Linode升级过的内核的了,默认的5.6的内核不是 2.6.18么?
>

3.9 的内核好啊，有原生的 uprobes 支持。当然如果是 3.10 的内核就更好了，因为还有 uretprobes 支持。

注意，3.9 和 3.10 的内核都缺少 timer hook API（on-CPU
火焰图工具需要这个），可以通过给内核打上下面这个小补丁把 timer hook API 给加回去：

    http://agentzh.org/misc/kernel/linux-3.10.16-timer_hook_api.patch

> 按照这里的安装说明,安装时候无法找到对应内核的 kernel-debuginfo 相关的包.

你需要有内核的调试信息包。

>
> 还有对于
> systemtap 的版本现在最新的是2.4 就用2.4比较好么?
> https://sourceware.org/systemtap/ftp/releases/
>

是的。推荐用最新的 systemtap 版本。

>
> 现在大家生产环境下都用哪个系统?那个版本的内核?

我们线上都是用非常新的内核 :)

Regards,
-agentzh

agentzh

Hello!

2013/11/21 XinQi Yang:
> g++: Internal error: Killed (program cc1plus)
> Please submit a full bug report.

貌似你的编译操作触发了你的系统里的内存或者 CPU 时间的限制保护了？你试试 make 的时候去掉 -j 4 选项？

Regards,
-agentzh

xinqiyang

感谢春哥回复....

安装成功了

[root@agent sys]# stap --version

Systemtap translator/driver (version 2.4/0.148, non-git sources)

This is free software; see the source for copying conditions.

enabled features: TR1_UNORDERED_MAP NLS LIBXML2

但是执行的时候提示出错了..

[root@agent sys]# stap -e 'probe begin { println("hello world") exit() }'

Checking "/lib/modules/3.9.3-x86_64-linode33/build/.config" failed with error: No such file or directory

2013/11/22 Yichun Zhang (agentzh) <age...@gmail.com>

Hello!

2013/11/21 XinQi Yang:

> g++: Internal error: Killed (program cc1plus)
> Please submit a full bug report.

貌似你的编译操作触发了你的系统里的内存或者 CPU 时间的限制保护了？你试试 make 的时候去掉 -j 4 选项？

Regards,
-agentzh

--

xinqiyang

agentzh

Hello!

2013/11/23 XinQi Yang:
> 但是执行的时候提示出错了..
>
> [root@agent sys]# stap -e 'probe begin { println("hello world") exit() }'
> Checking "/lib/modules/3.9.3-x86_64-linode33/build/.config" failed with
> error: No such file or directory
>

这个文件位于内核的开发包里面。在我的 Fedora 17 系统上对应

    kernel-devel-3.7.9-104.fc17.x86_64

这个包。你需要安装此包。

Regards,
-agentzh

xinqiyang

google了下,找不到下载包的地址,春哥那能提供一个么,不然我就得升级下这台linode到新的内核了.....不过升级到新的之后,还是得找对应的kernel-devel的包安装..也会遇到同样的问题.倒是....

2013/11/24 Yichun Zhang (agentzh) <age...@gmail.com>

Hello!

2013/11/23 XinQi Yang:

> 但是执行的时候提示出错了..
>
> [root@agent sys]# stap -e 'probe begin { println("hello world") exit() }'
> Checking "/lib/modules/3.9.3-x86_64-linode33/build/.config" failed with
> error: No such file or directory
>

这个文件位于内核的开发包里面。在我的 Fedora 17 系统上对应

kernel-devel-3.7.9-104.fc17.x86_64

这个包。你需要安装此包。

Regards,
-agentzh

--

xinqiyang

agentzh

Hello!

2013/11/24 XinQi Yang:
> google了下,找不到下载包的地址,春哥那能提供一个么,不然我就得升级下这台linode到新的内核了.....不过升级到新的之后,还是得找对应的kernel-devel的包安装..也会遇到同样的问题.倒是....
>

我没法提供，因为需要和你当前使用的内核精确匹配的包，否则很可能会有问题。

在我哥们的 linode CentOS 5.5 主机上试了一下，发现只有老版本内核的 kernel-devel 包：

    $ yum info kernel-devel.x86_64
    Loaded plugins: downloadonly, fastestmirror
    Installed Packages
    Name       : kernel-devel
    Arch       : x86_64
    Version    : 2.6.18
    Release    : 348.12.1.el5
    Size       : 16 M
    Repo       : installed
    Summary    : Development package for building kernel modules to
 match the kernel.
    URL        : http://www.kernel.org/
    License    : GPLv2
    Description: This package provides kernel headers and makefiles
sufficient to build modules
           : against the kernel package.

    Available Packages
    Name       : kernel-devel
    Arch       : x86_64
    Version    : 2.6.18
    Release    : 371.1.2.el5
    Size       : 5.9 M
    Repo       : updates
    Summary    : Development package for building kernel modules to
match the kernel.
    URL        : http://www.kernel.org/
    License    : GPLv2
    Description: This package provides kernel headers and makefiles
sufficient to build modules
           : against the kernel package.

或许可以使用一下 linode 技术支持？

另外不知道 linode 是否支持自己从源码编译内核。。。

Regards,
-agentzh

xinqiyang

感谢春哥的即时回复,

我机器上的现在是这个,linode是支持自己编译内核的.

https://www.linode.com/kernels/ 现在支持的最新的3.11.6

目前使用linode或者其他vps部署的用户还是挺多的,而且这些随着时间的不同安装的内核也不同,导致装火焰图工具还是挺麻烦的. 如果有一键安装包就好了,^-^

[root@agent ~]# yum info kernel-devel.x86_64

Loaded plugins: fastestmirror

Loading mirror speeds from cached hostfile

* base: mirror.steadfast.net

* extras: mirror.steadfast.net

* updates: mirror.steadfast.net

Installed Packages

Name : kernel-devel

Arch : x86_64

Version : 2.6.18

Release : 308.13.1.el5

Size : 16 M

Repo : installed

Summary : ?????????????????????

URL : http://www.kernel.org/

License : GPLv2

Description: This package provides kernel headers and makefiles sufficient to build modules

: against the kernel package.

Available Packages

Name : kernel-devel

Arch : x86_64

Version : 2.6.18

Release : 371.1.2.el5

Size : 5.9 M

Repo : updates

Summary : ?????????????????????

URL : http://www.kernel.org/

License : GPLv2

Description: This package provides kernel headers and makefiles sufficient to build modules

: against the kernel package.

2013/11/25 Yichun Zhang (agentzh) <age...@gmail.com>

Hello!

2013/11/24 XinQi Yang:
> google了下,找不到下载包的地址,春哥那能提供一个么,不然我就得升级下这台linode到新的内核了.....不过升级到新的之后,还是得找对应的kernel-devel的包安装..也会遇到同样的问题.倒是....
>

我没法提供，因为需要和你当前使用的内核精确匹配的包，否则很可能会有问题。

在我哥们的 linode CentOS 5.5 主机上试了一下，发现只有老版本内核的 kernel-devel 包：

$ yum info kernel-devel.x86_64
Loaded plugins: downloadonly, fastestmirror
Installed Packages
Name : kernel-devel
Arch : x86_64
Version : 2.6.18
Release : 348.12.1.el5
Size : 16 M
Repo : installed
Summary : Development package for building kernel modules to
match the kernel.
URL : http://www.kernel.org/
License : GPLv2
Description: This package provides kernel headers and makefiles
sufficient to build modules
: against the kernel package.

Available Packages
Name : kernel-devel
Arch : x86_64
Version : 2.6.18
Release : 371.1.2.el5
Size : 5.9 M
Repo : updates
Summary : Development package for building kernel modules to
match the kernel.
URL : http://www.kernel.org/
License : GPLv2
Description: This package provides kernel headers and makefiles
sufficient to build modules
: against the kernel package.

或许可以使用一下 linode 技术支持？

另外不知道 linode 是否支持自己从源码编译内核。。。

Regards,
-agentzh

--

xinqiyang