TA的每日心情 | 奋斗
2021-4-20 05:43 |
|---|
签到天数: 300 天 [LV.8]合体
|
刚喷了一下阿里云 L. L' A4 }$ k) n6 P; a
- b# R* j$ ]2 q- Z% w/ j
在GPT4的帮助下，迅速找到了问题根源。
6 H P8 |; e7 D9 U/ K
) |$ d# x0 ~& D" ]: m我的问题是：Ubuntu22.04中，kswap进程启动后，机器就卡死了。swap空间一点没占用。可能是什么问题？
H* k: n* U1 U$ g1 d$ G) _
3 b) \0 \! K* P2 V( ^7 kGPT4的回答是： ' D/ M; s9 Z( M$ i# H9 Q1 p
9 E/ ^: F; N# G. G在 Linux 系统中，kswapd 是内核线程，它的主要职责是在系统内存压力大的情况下回收（释放）内存，以便给新的进程提供内存空间。它通过将内存中的数据移到 swap 空间（也就是硬盘）来实现这个功能。如果你看到 kswapd 进程占用了大量的 CPU 时间，并且系统变得非常缓慢，那可能是内存压力过大导致的。
& C8 T5 `1 _& H. P/ s
4 h8 `& z, H8 _' @- H4 b4 L然而，你提到 swap 空间没有被占用，这就比较奇怪了。这可能是由于以下几种情况导致的：
2 Y2 ^; e. S# W3 e" \5 |6 O
( Y* l4 ]* p2 E4 e内存泄漏：有一个或多个进程可能在不断地消耗内存，但没有正确地释放它。你可以使用 top 或 htop 命令来检查哪个进程占用了大量的内存。
0 t" [$ {8 _/ S$ x% [) X4 n! r! d* X7 r
' \0 ~9 ]) ^/ b- ?3 r, ySwap 使用被限制或禁用：在某些情况下，系统可能被配置为尽量不使用 swap 空间。你可以通过 cat /proc/sys/vm/swappiness 命令来查看 swappiness 参数的值。这个值的范围是 0 到 100，数值越大，系统使用 swap 的可能性就越大。如果这个值非常低，你可能需要提高它。& E( W+ m/ X: P7 k o6 k1 V2 {" ?
" L: Y' I- k5 Y$ D+ `/ B7 ]错误的内存管理：在某些罕见的情况下，可能是由于内核的错误或硬件问题导致的内存管理问题。在这种情况下，你可能需要升级内核或检查硬件。
6 V7 Y+ Y% p) w/ T
# z* Q7 V: v7 {/ q4 w为了进一步排查问题，你可能需要更详细地监控系统的内存使用情况，并检查相关的系统日志。你也可以尝试使用一些内存管理和优化工具，如 earlyoom 或 nohang，来自动处理低内存情况。如果问题持续存在，你可能需要寻求专业的技术支持。
2 w# _; ^9 b% D$ s' h! e
5 q0 c3 q) @0 R5 }% y我在Google中，后来找到正确关键字，在stackoverflow也找到正确答案：https://askubuntu.com/questions/ ... taking-a-lot-of-cpu# T9 S; A, t- U2 |0 c6 x
; \1 `+ W0 i. e3 y3 E7 a在阿里云中，swappiness数值是0，也就是，永远不要使用swap分区。所以虽然我设置了swap，但是内存根本不会存到swap里，kswapd进程自己都拿不到内存。把最后一个bit的内存榨干后，系统完全当机。
3 z" o5 \; p8 t( p* H9 R/ k3 }
% `1 g0 a. \) l1 a1 m6 R9 g5 {我修改这个数值为60后，就没有问题了。swap分区开始工作，ssh也可以连上。
7 Y4 e2 ]7 x& Z$ Z% N/ j2 ?" q1 }: R X) E
但是，这个数值在其他Ubuntu系统中都是60，不管是22.04/20.04/18.04，不管是AWS，ServaRICA还是我自己的服务器。阿里云的为什么这么特殊呢？. M% X; p( \" S' ~! u4 S; l
2 g8 ^1 T7 P) O8 S5 _7 t, v" `. |
最后在/etc/sysctl.conf配置文件中，第一行赫然写着 vm.swappiness=0。而在其它系统中，配置文件里都没有这个设定。. q3 N8 _+ C" [, Y+ A5 A- k$ m
* |, X& x% S" N3 l
阿里为啥要改Ubuntu的默认配置？搜索了一下，在Google找到了阿里云的官方指导：https://developer.aliyun.com/article/1151641。页面虽然已经404了，但是Google cache还能看到：在服务器和容器平台建议关闭SWAP，避免内存交换影响服务器性能，甚至引发数据丢失。6 o+ c! Z7 Y/ {) p" J0 y- U9 c
0 Q: B$ w0 z* ~9 e' Y% @但是，我们知道，不管你内存多大，都要开启swap。毕竟谁也不能保证你的内存是足够大的。自己家里机器随便折腾没事，服务器要24x365在线的。阿里云为什么这么反人类呢？我觉得有一个帖子说的对：“借此让用户购买更大的内存！”) I. ^, I6 N1 S" F6 z- t
9 l% x' u4 ~2 l P. D, R. p
喷完了，还要继续搞明白node为啥占这么多内存？我看node的进程数越来越大，貌似在不停的fork。当然也可能是内存泄露，swap分区最终也被占满了。
5 J! Y7 B# ^/ _+ w$ S5 R+ |- k* ?) A7 [! b! h, ^
|
评分
-
查看全部评分
|
雷达卡
楼主
收藏
分享
淘帖
支持
反对
提升卡
置顶卡
沉默卡
喧嚣卡
变色卡
抢沙发
千斤顶
显身卡
发表于 2023-5-17 15:01:56
发表于 2023-5-20 09:26:35
