sysstat持续记录Linux性能
先记录,故障后才有历史可查
本文适用于 Ubuntu 24.04 LTS、systemd 和发行版 sysstat 12.6.1。它把本机 CPU、内存、磁盘及网卡统计按时间保存,适合排查“昨晚卡顿,现在正常”。安装后只能记录未来的数据,不能补出之前的历史;它也不会自动发送故障告警。
CPU使用率、磁盘和网卡速率通常由相邻采样点的变化计算,内存用量等则反映采样时的状态。一分钟采样可能看不到只有几秒的尖峰。sar 主要保留系统统计,不会凭空告诉你当时是哪一个进程;发现异常时段后,还需结合应用、定时任务和系统日志。
安装并确认采集任务
sudo apt update
sudo apt install sysstat
sar -V
timedatectl
systemctl cat sysstat-collect.timer sysstat-collect.service
systemctl cat sysstat-summary.timer
cat /etc/cron.d/sysstat
记录系统时区,后续与网站日志按同一时区对照。确认当前机器确实安装了上述 timer;本文使用发行版的 systemd 任务,不再另加一条 sa1 定时命令。若这些服务不存在,先核对系统和软件包,不能套用其他发行版的目录。
备份 /etc/default/sysstat 和 /etc/sysstat/sysstat,然后用 sudoedit 编辑。前者将 ENABLED 设为 true;后者先保留已有参数,设置保留 14 天、7 天后压缩,并确认 SADC_OPTIONS 包含磁盘采样。没有其他自定义采样项时可采用以下值:
# /etc/default/sysstat
ENABLED="true"
# /etc/sysstat/sysstat
HISTORY=14
COMPRESSAFTER=7
SADC_OPTIONS="-S DISK"
采集频率改为每分钟一次。运行下面命令打开覆盖配置,仅在编辑区填写所列内容,不直接修改软件包自带的服务文件。
sudo systemctl edit sysstat-collect.timer
[Timer]
OnCalendar=
OnCalendar=*-*-* *:*:00
AccuracySec=1s
sudo systemctl daemon-reload
sudo systemctl enable --now sysstat.service sysstat-collect.timer sysstat-summary.timer
sudo systemctl restart sysstat-collect.timer
systemctl list-timers --all sysstat-collect.timer sysstat-summary.timer
sudo systemctl start sysstat-collect.service
sudo journalctl -u sysstat-collect.service -n 30 --no-pager
确认数据真的连续写入
等过两个采样周期,检查当日文件和报表。列表里有定时任务不等于已经落盘,要看到不断增加的采样时间。首次文件通常是 sa 加当天日期;如果原配置使用完整年月日命名,以实际文件为准。
sudo ls -lh /var/log/sysstat
sar -u
sar -r
sar -d
sar -n DEV
若没有数据,查看采集服务日志、任务下次运行时间及磁盘可写空间。若磁盘报表提示该活动未采集,先确认 SADC_OPTIONS;新启用的采样项不能补进旧文件。不要为消除报错直接删除历史记录。每日汇总任务还负责历史整理,要同时确认它正常执行。
按故障时段读取
下面用 15 日晚 20:00 至 22:00 举例。将文件换成真实故障日期,检查输出首行日期,避免把上个月同名文件当作本次证据。已压缩文件先解压到独立副本再读取,保留原件。
BLY_SA_FILE=/var/log/sysstat/sa15
sar -u -f "$BLY_SA_FILE" -s 20:00:00 -e 22:00:00
sar -r -f "$BLY_SA_FILE" -s 20:00:00 -e 22:00:00
sar -d -f "$BLY_SA_FILE" -s 20:00:00 -e 22:00:00
sar -n DEV -f "$BLY_SA_FILE" -s 20:00:00 -e 22:00:00
| 先看什么 | 如何继续判断 |
|---|---|
| CPU user、system 与 iowait | 结合负载和磁盘等待,不把 iowait 直接当作CPU算力不足。 |
| 内存、换页与应用日志 | 缓存较多并不等于内存耗尽,先找同一时间的回收、换页或进程退出。 |
| 磁盘 await、队列、读写速率 | 综合判断;并行设备的 util 接近100%不直接代表达到性能上限。 |
| 网卡接收、发送速率 | 选真实业务网卡,区分内网、回环和容器桥,不直接当作公网计费流量。 |
停机或采集失败留下的空白是缺失数据,不是资源使用率为零。每周抽查一段历史和 /var/log/sysstat 占用;关键故障发生后及时复制相关数据及日志,避免超过保留期被整理。需要查看当前负载,可结合资源占用检查;历史日志按journalctl使用方法对齐时间。