linux监控

2020-12-16 11:44:29 编辑 0 阅读量:473

查看服务器cpu、内存、磁盘io、网络状况等等对维护服务器以及寻找服务器异常有重大作用，如下就是一些比较方面的工具：

## 1. dstat
这个命令可以让我们了解系统大致的运行状态。
该命令整合了vmstat，iostat和ifstat三种命令。同时增加了新的特性和功能可以让你能及时看到各种的资源使用情况，从而能够使你对比和整合不同的资源使用情况。通过不同颜色和区块布局的界面帮助你能够更加清晰容易的获取信息。它也支持将信息数据导出到cvs格式文件中，从而用其他应用程序打开，或者导入到数据库中。你可以用该命令来监控cpu，内存和网络状态随着时间的变化。

`$ dstatall="dstat -am --tcp --fs --top-cpu --top-mem --top-io -t"`
效果如下图：
![](https://cblog.xyz/media/2018/05/TIM截图20180522154545.png)
按照从左到右的顺序，解释如下：
```
----total-cpu-usage------ CPU使用信息统计
usr：用户空间的程序所占百分比；
sys：系统空间程序所占百分比；
idel：空闲百分比；
wai：等待磁盘I/O所消耗的百分比；
hiq：硬中断次数；
siq：软中断次数；

-dsk/total--- 磁盘使用信息统计
read：磁盘读带宽
writ：磁盘写带宽

-net/total--- 网络使用信息统计
recv：网络收包带宽
send：网络发包带宽

---paging--内存分页（page）统计：
in： page in（换入）
out：page out（换出）
-- 值较大表明系统正在使用大量的交换空间，通常情况下当系统已经开始用交换空间的时候，就说明你的内存已经不够用了，或者说内存非常分散，理想情况下page in（换入）和page out（换出）的值是0 0。

---system--其他系统信息
int：中断次数 
csw：上下文切换
-- 这一栏中较高的统计值通常表示大量的进程造成拥塞，需要对CPU进行关注。服务器一般情况下都会运行运行一些程序，所以这项总是显示一些数值。

------memory-usage----- 和free的一样意思，略过

----tcp-sockets----显示tcp连接状态，依次是
listen, established, syn, time_wait, close

--filesystem-
files： 打开的文件数
inodes： 打开的inodes数

-most-expensive- 
cpu process： 最占cpu的进程
memory process： 最占内存的进程
i/o process：最占磁盘io的进程
```

如果要详细显示`最耗CPU的进程`和`最耗io的进程`: `--top-cpu-adv`和`--top-io-adv`,
`$ dstat --top-cpu-adv --top-io-adv --top-mem -n -t`
![](https://cblog.xyz/media/2018/05/TIM截图20180522161445.png)

## 2. top
可以着重关注以下几点，具体含义就不解释了
![](https://cblog.xyz/media/2018/05/微信图片_20180517102217_Df4bQx7.jpg)

## 3. nethogs
可以查看当前网速和具体进程、连接的速度
![](https://cblog.xyz/media/2018/05/TIM截图20180522163426.png)

## 4. iotop
查看具体的进程占用磁盘IO
`$ sudo iotop`
模式是展示进程读写磁盘的速度，一些常用选项如下：
- `-a`，展示读写量而不是读写速度
- `-o`，真正显示读写磁盘（非系统缓存）
- `-P`, 只显示进程，而不显示线程

所以常用如下：
`$ sudo iotop -aoP`

## 5. lsof
lsof命令，意为“list open files”, 用于在许多类Unix系统中显示所有打开的文件及打开它们的进程。在linux中，**万物皆文件**，所以这个也可以看到网络连接等信息在大部分Linux发行版和其他类Linux操作系统中系统管理员用它来检查不同的进程打开了哪些文件。另外，lsof要用**管理员权限**运行,否则可能统计不准确（有些统计需要管理员权限才能进行）。
```
# lsof -p process_id    // 进程打开的所有文件
# lsof | less           // 操作系统所有打开的文件
# lsof –u username      // 用户打开的文件
# lsof /etc/passwd      // 文件被哪些进程打开，最好用绝对路径
# lsof –i :80           // 端口被哪些进程使用
# lsof –i TCP:80        // 端口被哪些进程打开为TCP
```
实际上，在`nethogs`中查看出来端口占用的网速，然后可以通过`lsof`定位到进程。

依靠上面四个一般可以满足监控服务器的需求了，
- 首先通过`dstat`了解到服务器的运行状况，cpu、磁盘io、网络io、内存等
- 如果cpu、内存异常，通过`top`进一步跟踪
- 如果网络io异常，通过`nethogs`跟踪
- 如果磁盘io异常，通过`lsof`跟踪

## 6. 其他命令：
- `$ iostat -x 2`: 间隔2s展示一次磁盘io状态

## 7. 一些可能的问题
#### 7.1 cpu的wait过大
查看进程，如果出现`kswapd0`这个进程大量占用cpu，说明是物理内存过少，系统真正使用swap，`kswapd0`正是用于置换内存

---
参考：
- [1][dstat  全能系统信息统计工具](https://www.jianshu.com/p/38cbdf755994)
- [2][linux命令---dstat](https://blog.csdn.net/yue530tomtom/article/details/75443305)
- [3][linux iostat 性能指标说明](https://www.cnblogs.com/ghj1976/p/5691857.html)
- [4][Linux下进程/程序网络带宽占用情况查看工具 -- NetHogs](https://www.cnblogs.com/carbon3/p/5930803.html)
- [5][25个Linux性能监控工具](https://www.cnblogs.com/peter316/p/6287212.html)

linux监控

附件: