当前位置：首页 > news >正文

节点内存升高排查

news 来源：原创 2025/4/24 11:35:05

当机器的内存占用突然升高时，通常是由于某些进程异常消耗内存、内存泄漏或资源未释放等问题引起的。排查这类问题需要系统地检查和分析。以下是一些常见的排查步骤和方法：

🔹 1. 使用 `top` 或 `htop` 检查内存使用情况

top 和 htop 是常用的实时监控工具，可以帮助你快速查看系统的内存使用情况，进程占用和其他资源指标。

使用 `top`：

打开终端，输入 top 命令。
按 M 键以按内存占用从高到低排序。
- 观察内存消耗较大的进程。
- 注意 RES（常驻内存大小）和 VIRT（虚拟内存大小）。

使用 `htop`（更友好的界面）：

如果你的系统没有安装 htop，可以通过以下命令安装：

sudo apt install htop # Ubuntu/Debian sudo yum install htop # CentOS/RHEL

然后，运行 htop：

htop

你可以按 F6 排序方式，选择按 MEM 排序来查看内存使用情况。

🔹 2. 使用 `free` 和 `vmstat` 检查内存使用情况

这两个命令可以帮助你快速查看整体的内存使用情况。

`free` 命令：

free -h

查看 used（已用内存）、free（空闲内存）和 buffers/cache（缓存内存）等信息。

`vmstat` 命令：

vmstat 命令能显示内存、交换、进程、IO 和 CPU 等相关统计信息。常用命令如下：

bash

复制编辑

vmstat 1

观察 swap 区域和 si（swap in）和 so（swap out）的数量，查看是否发生了频繁的交换（swap），这可能是内存不足的标志。

🔹 3. 使用 `ps` 查看内存占用较大的进程

ps 命令可以列出所有运行中的进程并显示它们的内存和CPU占用。

列出所有进程按内存占用排序：

bash

复制编辑

ps aux --sort=-%mem | head -n 10

该命令列出了前 10 个内存占用最大的进程。
注意 RSS（常驻内存集）和 VSZ（虚拟内存集）。

🔹 4. 检查交换分区（Swap）

如果内存不足，系统会使用交换分区（Swap）来作为虚拟内存，但是频繁的交换会导致系统性能下降。

查看 swap 使用情况：

bash

复制编辑

swapon -s

如果交换空间使用很高，可能是系统内存不够，导致大量页面交换。

临时禁用 swap：
bash

复制编辑

sudo swapoff -a
启用 swap：
bash

复制编辑

sudo swapon -a

你可以通过增加物理内存或优化应用程序的内存使用来减少 swap。

🔹 5. 查看进程的内存泄漏

如果某个进程的内存使用持续增长，可能是该进程发生了内存泄漏。常见的内存泄漏排查方法包括：

使用 `pmap` 查看进程的内存映射：

pmap 命令可以查看进程的内存分布。对于某个进程，运行：

bash

复制编辑

pmap <pid>

它会显示该进程的内存使用情况。如果发现某些内存段的使用没有释放，可能说明存在内存泄漏。

使用 `valgrind`（特别适用于开发者）：

如果是开发中的应用，使用 valgrind 可以帮助查找内存泄漏：

bash

复制编辑

valgrind --leak-check=full ./your_program

🔹 6. 分析应用程序日志

某些应用程序可能因为内部错误（如死循环、大量请求处理）导致内存占用过高。你可以查看应用的日志文件，查找异常或错误信息。

常见应用日志：

Web 服务器（如 Nginx、Apache）：/var/log/nginx/access.log 或 /var/log/httpd/access_log
数据库日志：/var/log/mysql/error.log 或 /var/log/postgresql/postgresql.log
Java 应用：Java 堆栈日志，或者使用 APM（应用性能管理工具）如 New Relic 或 Prometheus 等。