Linux超强的系统挖掘工具sysdig

最新推荐文章于 2024-08-30 18:25:22 发布
最新推荐文章于 2024-08-30 18:25:22 发布
阅读量4.4k 收藏 7
点赞数 2
分类专栏： sysdig

Linux超强的系统挖掘工具sysdig

2015年12月28日admin发表评论阅读评论

sysdig是sysdig cloud 出品的主要基于Lua语言开发一个超强的工具，就像其在站点首页上所描述的“ Sysdig is open source, system-level exploration: capture system state and activity from a running Linux instance, then save, filter and analyze. Think of it as strace + tcpdump + lsof + awesome sauce. ” ，sysdig相当于strace + tcpdump + lsof + htop + iftop 以及其他工具的合集 ，除此之外其还能对容器如docker、coreOS、LXC进行监控，是不是感觉牛皮吹的很大？到底功能如何，看下面。

注：另外该工具也支持windows平台和mac平台，由于平时工作主要涉及linux平台，有兴趣的可以自行测试。

一、安装

本篇主要介绍在centos下的用法安装和测试，后面也会提到在ubuntu类平台下的安装。其支持在centos6和centos7上安装，安装方法十分简洁：

1、centos下的安装

1.1一键安装

  1. curl -s https://s3.amazonaws.com/download.draios.com/stable/install-sysdig | sudo bash

上面是一个shell 脚本，会识别常用的linux发行版本，并根据对应的版本配置源，最后是安装sysdig包。在redhat/centos上首先会配置的是epel 源 ，配置该源的目的是安装dkms包；然后会配置draios源，通过该源可以安装sysdig包。最后在装sysdig包之前还会先安装kernel-devel包。

1.2、分步安装

由于使用的源都是国外源，会出现安装比较慢的情况，所以使用一键安装失败时，可以使用分解步骤安装。在内网环境下的也可以将依赖包都下下来再安装。

  1. #导入draios源
  2. rpm --import https://s3.amazonaws.com/download.draios.com/DRAIOS-GPG-KEY.public
  3. curl -s -o /etc/yum.repos.d/draios.repo http://download.draios.com/stable/rpm/draios.repo
  4. #导入epel 源
  5. rpm -i http://mirror.us.leaseweb.net/epel/6/x86_64/epel-release-6-8.noarch.rpm
  6. #装包
  7. yum -y install kernel-devel* dkms sysdig

sysdig依赖的两个包，一个是kernel-devel ,一个是dkms包，DKMS全称是Dynamic Kernel Module Support （动态内核模块支持），即在内核版本变动之后可以自动重新生成新驱动模块。想要了解的可以自行GOOGLE 。

2、ubuntu下的安装

  1. curl -s https://s3.amazonaws.com/download.draios.com/DRAIOS-GPG-KEY.public | apt-key add -
  2. curl -s -o /etc/apt/sources.list.d/draios.list http://download.draios.com/stable/deb/draios.list
  3. apt-get update
  4. apt-get -y install linux-headers-$(uname -r)
  5. apt-get -y install sysdig

windows、Mac OS及其他linux发行版的安装，可以参看官方安装文档。

二、常用用法

默认按上面的方法安装好以后，执行sysdig是会出错的。提示如下：

  1. # sysdig
  2. Unable to load the driver
  3. error opening device /dev/sysdig0. Make sure you have root credentials and that the sysdig-probe module is loaded.

所以执行之前还需要使用/usr/bin/sysdig-probe-loader命令装载内核模块，该命令也是一个shell脚本，执行时会从aws s3上下载一个ko模块文件。不过我在linux测试主机上下载多次都未成功。查看该脚本文件后，发现其调用下载的地址是：https://s3.amazonaws.com/download.draios.com/stable/sysdig-probe-binaries/sysdig-probe-0.6.0-x86_64-2.6.32-504.el6.x86_64-e065a96a1a7343d57e26548de23096e3.ko

注：该ko文件的URL不用记，执行该脚本时会有相应的提示“Trying to download precompiled module from” ，而且不同的内核版本下的对应ko文件也是不同的。我这里的内核版本是2.6.32-504.el6 。下载完成后会存放在~/.sysdig 目录。

完成后再执行sysdig-probe-loader命令就可以执行sysdig命令了，而且开机后不会自动加载，所以在不使用的情况下，该包是对主机无影响的。

1、网络

查看占用网络带宽最多的进程：

  1. sysdig -c topprocs_net

显示主机192.168.0.1的网络传输数据：

  1. as binary:
  2. sysdig -s2000 -X -c echo_fds fd.cip=192.168.0.1
  3. as ASCII:
  4. sysdig -s2000 -A -c echo_fds fd.cip=192.168.0.1

这里显示网络传输功能，实际效果和tcpdump抓包是一样的。而且其本身也支持sysdig -w dump.scap抓包保存（可以配置-X或-A使用），抓好包也支持sysdir -r dump.scap读取。

查看连接最多的服务器端口：

  1. in terms of established connections:
  2. sysdig -c fdcount_by fd.sport "evt.type=accept"
  3. in terms of total bytes:
  4. sysdig -c fdbytes_by fd.sport

查看客户端连接最多的ip：

  1. in terms of established connections
  2. sysdig -c fdcount_by fd.cip "evt.type=accept"
  3. in terms of total bytes
  4. sysdig -c fdbytes_by fd.cip

列出所有不是访问apache服务的访问连接：

  1. sysdig -p"%proc.name %fd.name" "evt.type=accept and proc.name!=httpd"

2、硬盘 I/O

查看使用硬盘带宽最多的进程：

  1. sysdig -c topprocs_file

列出使用大量文件描述符的进程

  1. sysdig -c fdcount_by proc.name "fd.type=file"

See the top files in terms of read+write bytes

  1. sysdig -c topfiles_bytes

Print the top files that apache has been reading from or writing to

  1. sysdig -c topfiles_bytes proc.name=httpd

Basic opensnoop: snoop file opens as they occur

  1. sysdig -p "%12user.name %6proc.pid %12proc.name %3fd.num %fd.typechar %fd.name" evt.type=open

See the top directories in terms of R+W disk activity

  1. sysdig -c fdbytes_by fd.directory "fd.type=file"

See the top files in terms of R+W disk activity in the /tmp directory

  1. sysdig -c fdbytes_by fd.filename "fd.directory=/tmp/"

Observe the I/O activity on all the files named 'passwd'

  1. sysdig -A -c echo_fds "fd.filename=passwd"

Display I/O activity by FD type

  1. sysdig -c fdbytes_by fd.type

3、进程和CPU使用率

See the top processes in terms of CPU usage

  1. sysdig -c topprocs_cpu

See the top processes for CPU 0

  1. sysdig -c topprocs_cpu evt.cpu=0

Observe the standard output of a process

  1. sysdig -s4096 -A -c stdout proc.name=cat

 

4、应用

查看机器所有的HTTP请求

  1. sudo sysdig -s 2000 -A -c echo_fds fd.port=80 and evt.buffer contains GET

查看机器所有的SQL select查询

  1. sudo sysdig -s 2000 -A -c echo_fds evt.buffer contains SELECT

See queries made via apache to an external MySQL server happening in real time

  1. sysdig -s 2000 -A -c echo_fds fd.sip=192.168.30.5 and proc.name=apache2 and evt.buffer contains SELECT

5、性能和错误

See the files where most time has been spent

  1. sysdig -c topfiles_time

See the files where apache spent most time

  1. sysdig -c topfiles_time proc.name=httpd

See the top processes in terms of I/O errors

  1. sysdig -c topprocs_errors

See the top files in terms of I/O errors

  1. sysdig -c topfiles_errors

See all the failed disk I/O calls

  1. sysdig fd.type=file and evt.failed=true

See all the failed file opens by httpd

  1. sysdig "proc.name=httpd and evt.type=open and evt.failed=true"

See the system calls where most time has been spent

  1. sysdig -c topscalls_time

See the top system calls returning errors

  1. sysdig -c topscalls "evt.failed=true"

snoop failed file opens as they occur

  1. sysdig -p "%12user.name %6proc.pid %12proc.name %3fd.num %fd.typechar %fd.name" evt.type=open and evt.failed=true

Print the file I/O calls that have a latency greater than 1ms:

  1. sysdig -c fileslower 1

6、安全

Show the directories that the user "root" visits

  1. sysdig -p"%evt.arg.path" "evt.type=chdir and user.name=root"

Observe ssh activity

  1. sysdig -A -c echo_fds fd.name=/dev/pretmx and proc.name=sshd

Show every file open that happens in /etc

  1. sysdig evt.type=open and fd.name contains /etc

Show the ID of all the login shells that have launched the "tar" command

  1. sysdig -r file.scap -c list_login_shells tar

Show all the commands executed by the login shell with the given ID

  1. sysdig -r trace.scap.gz -c spy_users proc.loginshellid=5459

7、容器

查看机器上运行的容器列表及其资源使用情况

  1. sudo csysdig -vcontainers

查看容器上下文的进程列表

  1. sudo csysdig -pc

查看运行在wordpress1容器里CPU的使用率

  1. sudo sysdig -pc -c topprocs_cpu container.name=wordpress1

查看运行在wordpress1容器里网络带宽的使用率

  1. sudo sysdig -pc -c topprocs_net container.name=wordpress1

查看在wordpress1容器里使用网络带宽最多的进程

  1. sudo sysdig -pc -c topprocs_net container.name=wordpress1

查看在wordpress1 容器里占用 I/O 字节最多的文件

  1. sudo sysdig -pc -c topfiles_bytes container.name=wordpress1

查看在wordpress1 容器里网络连接的排名情况

  1. sudo sysdig -pc -c topconns container.name=wordpress1

显示wordpress1容器里所有命令执行的情况

  1. sudo sysdig -pc -c spy_users container.name=wordpress1

功能是不是很强大，不过记起来有点麻烦，可以在使用的时候使用sysdig -l 查看所支持的事件列表，使用sysdig -L 查看事件所支持的过滤列表。具体也可以参看官方guide文档。

三、csysdig交互式处理

感觉上面的方法还是比较麻烦怎么办？可以不可以交互式选择呢？当然没问题，在sysdig包里还提供了一个工具csysdig，该工具执行后，效果和top命令类似 ，见下图：

csysdig

通过F1~F8 及crtl + F 等功能键可以方便的切换视图和filter过滤。该功能可以参看youtube上的官方出的视频 ：https://www.youtube.com/watch?v=UJ4wVrbP-Q8 （需翻墙）

 

yangbosos
关注
专栏目录
Linux系统监控与分析工具Sysdig：安装与使用
白马负金羁
05-19 6945
Sysdig是一个超级有用的系统工具，运行在Linux环境上，比 strace、tcpdump、lsof 加起来还强大。Sysdig可用来捕获系统状态信息，保存数据并进行过滤和分析。本文主要介绍在Linux上安装Sysdig的基本步骤，然后以监控某个特定程序的系统调用（system call）为例来简单演示一下它的使用
Linux系统查看GPU型号的实战教程
热门推荐
weixin_43178406的博客
05-18 4万+
本文主要介绍了Linux系统查看GPU型号的实战教程，希望能对使用Linux系统的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
ububtu18.04 安装sysdig，及其初步使用
qq_40587909的博客
05-11 923
ububtu18.04 安装sysdig，及其初步使用 一、sysdig安装 sysdig是强大的系统监控工具，其在github上开源 这里是Ubuntu18.04的安装 这是GitHub上sysdig的官方介绍文档，里面有安装教程和使用介绍 https://github.com/draios/sysdig/wiki ...
超强的系统挖掘工具sysdig
weixin_34411563的博客
11-15 555
sysdig是sysdig cloud 出品的主要基于Lua语言开发一个超强的工具，就像其在站点首页上所描述的“Sysdig is open source, system-level exploration: capture system state and activity from a running Linux instance, then save, filter ...
运维：系统性能占用检查sysdig命令（Linux系统铁锹）
墨痕诉清风的博客
08-26 1212
采集数据示例：采集数据格式：字段说明：evt.num： 递增的事件号。evt.time： 事件发生的时间。evt.cpu： 事件被捕获时所在的 CPU，也就是系统调用是在哪个 CPU 执行的。proc.name： 生成事件的进程名字。thread.tid： 线程的 id，如果是单线程的程序，这也是进程的 pid。evt.dir： 事件的方向（direction），> 代表进入事件，< 代表退出事件。evt.type： 事件的名称，比如 open、stat等，一般是系统调用。
sysdig安装和使用介绍
aipoqiu2566的博客
10-09 743
安装步骤1)安装资源库rpm --import https://s3.amazonaws.com/download.draios.com/DRAIOS-GPG-KEY.publiccurl -s -o /etc/yum.repos.d/draios.repo http://download.draios.com/stable/rpm/draios.repo 2)安装epel包rpm -...
Sysdig 安装
gam0n的博客
08-29 1034
sysdig在linux（以ubuntu为例）上安装 1.自动安装 以root用户执行： curl -s https://s3.amazonaws.com/download.draios.com/stable/install-sysdig | sudo bash 然后install-sysdig脚本会下载对应的系统版本进行自动安装。 2.手动安装 curl -s https://s...
系统之锹sysdig：Linux服务器监控和排障利器
shen1936的专栏
12-01 594
当你需要追踪某个进程产生和接收的系统调用时，首先浮现在你脑海中的是什么？你可能会想到strace，那么你是对的。你会使用什么样的命令行工具来监控原始网络通信呢？如果你想到了tcpdump，你又作出了一个极佳的选择。而如果你碰到必须追踪打开的文件（在Unix意义上：一切皆文件）的需求，可能你会使用lsof。 strace、tcpdump以及lsof，确实是些伟大的工具，它们应该成为每个系统管理员工
sysdig_系统分析工具 Sysdig 详解
weixin_39530647的博客
12-22 2422
Sysdig 是 Sysdig Cloud 开发的主要基于Lua语言的一个开源系统分析工具。Sysdig 能从运行的系统中，获取系统状态和行为，做过滤分析，功能上超同类开源工具。Sysdig 可以看做是 strace + tcpdump + lsof + htop + iftop 以及其他系统分析工具的合集 。此外 Sysdig 还能对容器(如docker、coreOS、LXC)进行监控。 Sys...
LINUX超强归纳总结秘籍 [华为内部培训文档]
12-11
### Linux超强归纳总结秘籍 —— 华为内部培训文档解析 #### 1. 命令行操作及常用命令使用 ##### 1.1 Shell简介 - **定义**: Shell 是用户与 Linux 操作系统之间的交互接口。 - **类型**: Linux 支持多种 Shell，...
简单实用的docker监控工具-sysdig
Friendsofthewind的博客
11-10 1449
简介 它是系统监控、分析和排障的工具，官方网址https://sysdig.com/ 特性： 三优点一缺点 整合 虽然 linux 有很多系统分析和调优的工具，但是它们一般都负责单个的功能，如果要分析和定位问题，需要熟练掌握需要多种命令。而且这些工具的数据相互独立，无法进行共享。sysdig 一个工具就能实现所有工具的功能，并且提供了统一的使用语法。 强大 监控信息全，包括Linux操作系统和容器。能获取实时的系统数据，也能把信息保存到文件中以供后面分析。捕获的数据包含系统的个个方面： 系统参数：CPU、
mobydig:在Mac上的Docker上运行Sysdig的映像
05-12
莫比迪格 在Mac上的Docker上运行Sysdig的映像（但不仅如此，它应在Linux主机上的docker引擎上运行）＃为什么？ 为什么为Mac的Docker使用特定的映像？ Sysdig提供了一个Docker映像以在Docker上但在Linux主机上运行sysdig / csysdig。 由于Mac的Docker来源尚不可用，因此没有简单的方法来使用上游映像的DKMS构建功能。 最后，由于内核通常是在Mac版Docker上进行升级的，因此我不能只是将映像发布到Docker Hub。 为什么叫这个名字？ 因为要达到我的目标有些困难，是因为Docker for mac将内核命名为linux-4.4.x-moby。 这个名字让我在编译内核库时寻找了一些技巧，所以每次我回到这个项目时，它都会像纪念品一样。 得到它，建立它 # git clone https://github.com/fdeb
linux系统上安装sysdig
chen1995csdn的博客
03-14 1851
sysdig是一个超级系统工具，比 strace、tcpdump、lsof 加起来还强大。可用来捕获系统状态信息，保存数据并进行过滤和分析。 在linux系统上安装sysdig可以一键式安装： curl -s https://s3.amazonaws.com/download.draios.com/stable/install-sysdig| sudo bash 这是一个在线的自动安装工...
linux超级工具,linux运维超级工具--sysdig
weixin_33217004的博客
05-13 1756
sysdig 是一个超级系统工具,它可以用来捕获系统状态信息，在运维工作中sysdig能很方便的排查异常、定位故障，它还能保存数据进行分析，并且提供强大的命令接口。在了解sysdig强大之处之前,首先得安装sysdig，我这里是环境是centos6.7.1.建立gpg信任密钥,配置yum仓库rpm --import https://s3.amazonaws.com/download.draios....
sysdig
weixin_34415923的博客
01-26 278
https://github.com/draios/sysdig/wiki/Sysdig%20Examples#disk sysdig is a great solution now. Some usage cases include (their wiki has some exceptionally interesting examples): For Disk I/O See the t...
linux clock()_Linux 监控和调试利器 Sysdig 入门教程
weixin_39646658的博客
11-21 144
Sysdig 简介Sysdig官网 上对自己的介绍是：Open Source Universal System Visibility With Native Contaier Support.它的定位是系统监控、分析和排障的工具，其实在Linux平台上，已经有很多这方面的工具strace、tcpdump、htop、iftop、lsof、netstat，它们都能用来分析Linux...
【Linux】开源的系统监控和故障排除工具Sysdig：用于系统监控、故障排除和安全审计，从下周、安装、入门到精通的全面教程
最新发布
科技改变人类，技术成就未来
08-30 3493
Sysdig 是一个开源的系统监控和故障排除工具，可以捕获和分析系统调用，帮助你深入了解系统的运行状态。无论是开发人员、运维工程师还是安全专家，Sysdig 都是进行系统监控、故障排除和安全审计的理想工具。本文将详细介绍 Sysdig 的安装、基本使用方法以及一些高级用法，并通过具体示例帮助你快速上手。
sysdig_linux sysdig系统监控神器
weixin_39542111的博客
12-22 214
sysdig介绍：当需要追踪某个进程产生和接收的系统调用时，你可能会想到strace。你会使用什么样的命令行工具来监控原始网络通信呢？如果你想到了tcpdump。而如果你碰到必须追踪打开的文件的需求，可能你会使用lsof。strace、tcpdump和lsof确实是必备的工具，而这也正是你为什么应该使用sysdig的原因。它是一个强大的开源工具，用于系统级别的勘察和排障，它的创建者在介绍它时称之“...
Linux系统漏洞检测工具详解
"Linux系统中的漏洞查找工具有多种，包括主机漏洞扫描器和网络漏洞扫描器，用于检测系统的安全性弱点。这些工具对于系统管理员来说是至关重要的，可以帮助他们及时发现并修复潜在的安全问题，降低被黑客攻击的风险。...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值