内存看着还剩一半,进程却被OOM杀了,真相藏在哪。
很多人看内存只盯free -h,看还剩一半就觉得没事,结果进程被dmesg里的Out of memory杀了。用户眼里的空闲和内核眼里的压力不是一回事。我按地址空间、分配回收、OOM和排查这条线,说说内存怎么流动。
先理解虚拟内存。它不是单纯拿磁盘当内存,主要是做隔离和按需分配。每个进程有自己的页表,地址可以重叠,但互不干扰。
地址翻译靠页表项、MMU、缺页异常和TLB。页表项管权限和状态,MMU做翻译,缺页时才把页调进来。TLB是缓存,命中率低了性能就掉,大页能少占页表项,也能减轻TLB压力。
用户空间和内核空间有条边界。32位常见3G/1G划分,64位内核区在高地址。系统调用会跨过这条边界,隔离和性能一直在权衡。
内核空间里分了不少区域。向量表、Fixmap、vmalloc区、线性映射区、pkmap、modules区各管一摊,哪块出问题都可能让系统不稳。
线性映射区像内核的高速公路。虚拟地址和物理地址有固定偏移,内核代码、数据、task_struct、mm_struct常落在这附近。它被占满时,内核整体就容易出大问题。
vmalloc区灵活但贵。它给虚拟连续、物理不连续的分配用,大模块或某些DMA场景会用到。代价是页表遍历多、TLB命中差,能不用就别乱用。
32位还有高端内存和kmap。超过一定物理内存后,需要临时映射才能访问,kmap和kunmap必须成对。忘了配对,高端页可能被长期占着。
ARM32和ARM64布局差别挺实际。ARM64线性映射区和vmalloc区都宽裕些,ARM32内核空间紧,容易在映射资源上打架。选嵌入式和调优时,这不是理论细节。
分配先从伙伴系统说。它按2的幂拆和合并页,缓解外部碎片。小对象频繁分配会浪费,所以又有了slab或slub。
slab给固定大小对象做缓存,分配快。副作用是内部碎片,dentry、buffer_head这类对象异常增长,可能就是泄漏信号。
kmalloc和vmalloc要分场合。kmalloc要物理连续,效率高,适合小块;vmalloc物理不连续,适合大块但不适合高频。判断原则就是:要性能和连续性别选vmalloc。
回收要看匿名页和文件页。匿名页多靠swap,干净文件页能直接放,脏页先回写。free和available差在哪,根子就是页缓存可回收。
内存泄漏分应用和内核。应用里malloc不free、句柄不关,内核里slab对象不释放。排查时看slabtop和/proc/meminfo,盯对象增长比盯总数有用。
碎片是总量够却分不出来。外部碎片是散块拼不成大块,内部碎片是分配块大于需求。嵌入式小内存里频繁不同尺寸分配,很容易把大块分配拖死。
OOM Killer是内核自救。物理内存、可回收缓存和swap都告急时,它按oom_score挑人,不是简单谁最大杀谁。root和核心进程会降分,可以用oom_score_adj保护或优先杀。
监控工具要分层用。free和meminfo看总量和可回收,slabtop看内核对象,/proc/iomem查区域占用,perf mem看页错误和TLB。别拿一个工具解释所有问题。
深入调试可以上ftrace追分配栈,crash看崩溃后的结构,KASAN查越界和释放后使用。性能问题和稳定性问题要分开选工具。
参数调优别照抄。overcommit_memory、swappiness、max_map_count影响不同,只有匹配业务负载的值,没有万能最优值。NUMA场景还要注意本地内存和远程内存的代价。
大页适合数据库、堆这类大块内存,能减少页表项和TLB压力,但不必到处用。容量规划要看内存怎么流动,不是简单看剩余数字。
我见过两类抽象问题。一类是内核对象泄漏拖垮集群,内存持续涨、slab占比异常;另一类是碎片让嵌入式设备反复重启,物理内存有余却分不出连续大块。前者要升级依赖、清理并加对象增长告警,后者要预分配、对齐申请并盯碎片。
最后记一个排查顺序:区域、分配、回收、压力、处置。很多崩溃根因不在业务代码,而在内存布局和分配策略。把这条因果链理顺,比背命令更有用。