Linux: ค้นหาว่ากระบวนการใดที่ใช้ RAM ทั้งหมด?

ก่อนถามจริง ๆ ต้องชัดเจน: ใช่ฉันรู้เกี่ยวกับแคชดิสก์และไม่ใช่มันไม่ใช่กรณีของฉัน :) ขออภัยสำหรับคำนำนี้ :)

ฉันใช้ CentOS 5 ทุกแอปพลิเคชันในระบบมีการแลกเปลี่ยนอย่างหนักและระบบช้ามาก เมื่อฉันทำfree -mนี่คือสิ่งที่ฉันได้รับ:

             total       used       free     shared    buffers     cached
Mem:          3952       3929         22          0          1         18
-/+ buffers/cache:       3909         42
Swap:        16383         46      16337

ดังนั้นฉันมีเพียง 42 Mb ใช้จริง! เท่าที่ฉันเข้าใจ-/+ buffers/cacheจริง ๆ แล้วไม่ได้นับแคชดิสก์ดังนั้นฉันมีเพียง 42 Mb เท่านั้นใช่ไหม ฉันคิดว่าฉันอาจผิดฉันจึงพยายามปิดการแคชดิสก์และไม่มีผลใด ๆ - ภาพยังคงเหมือนเดิม

ดังนั้นฉันตัดสินใจว่าใครใช้ RAM ทั้งหมดของฉันและฉันใช้topมัน แต่เห็นได้ชัดว่ามันรายงานว่าไม่มีกระบวนการใดใช้ RAM ของฉัน กระบวนการเดียวที่อยู่บนสุดของฉันคือ MySQL แต่ใช้ 0.1% ของ RAM และ 400Mb ของการแลกเปลี่ยน รูปภาพเดียวกันเมื่อฉันพยายามเรียกใช้บริการหรือแอปพลิเคชันอื่น - ทั้งหมดไปใน swap topแสดงว่า MEM ไม่ได้ใช้ (สูงสุด 0.1% สำหรับกระบวนการใด ๆ )

top - 15:09:00 up  2:09,  2 users,  load average: 0.02, 0.16, 0.11
Tasks: 112 total,   1 running, 111 sleeping,   0 stopped,   0 zombie
Cpu(s):  0.0%us,  0.0%sy,  0.0%ni,100.0%id,  0.0%wa,  0.0%hi,  0.0%si,  0.0%st
Mem:   4046868k total,  4001368k used,    45500k free,      748k buffers
Swap: 16777208k total,    68840k used, 16708368k free,    16632k cached

  PID USER      PR  NI  VIRT  RES  SHR S %CPU %MEM    TIME+  SWAP COMMAND
 3214 ntp       15   0 23412 5044 3916 S  0.0  0.1   0:00.00  17m ntpd
 2319 root       5 -10 12648 4460 3184 S  0.0  0.1   0:00.00 8188 iscsid
 2168 root      RT   0 22120 3692 2848 S  0.0  0.1   0:00.00  17m multipathd
 5113 mysql     18   0  474m 2356  856 S  0.0  0.1   0:00.11 472m mysqld
 4106 root      34  19  251m 1944 1360 S  0.0  0.0   0:00.11 249m yum-updatesd
 4109 root      15   0 90152 1904 1772 S  0.0  0.0   0:00.18  86m sshd
 5175 root      15   0 90156 1896 1772 S  0.0  0.0   0:00.02  86m sshd

เริ่มต้นใหม่ไม่ได้ช่วยและโดยวิธีพวกเขาช้ามากซึ่งปกติฉันจะไม่คาดหวังในเครื่องนี้ (4 คอร์, 4Gb RAM, RAID1)

ดังนั้นด้วย - ฉันค่อนข้างแน่ใจว่านี่ไม่ใช่ดิสก์แคชที่ใช้ RAM เพราะปกติแล้วควรลดขนาดลงและปล่อยให้กระบวนการอื่นใช้ RAM แทนการสลับ

ดังนั้นในที่สุดคำถามคือ - ถ้ามีคนมีความคิดวิธีการหากระบวนการที่ใช้หน่วยความจำอย่างหนักจริง ๆ ?

บน Linux ในtopกระบวนการคุณสามารถกด<ปุ่มเพื่อเลื่อนเรียงลำดับการแสดงผลทางซ้าย โดยค่าเริ่มต้นมันจะถูกจัดเรียงตาม%CPUดังนั้นหากคุณกดปุ่ม 4 ครั้งคุณจะเรียงลำดับตามVIRTขนาดหน่วยความจำเสมือนที่ให้คำตอบของคุณ

อีกวิธีในการทำเช่นนี้คือ:

ps -e -o pid,vsz,comm= | sort -n -k 2

ควรให้ผลลัพธ์ที่เรียงลำดับตามขนาดเสมือนจริงของคุณ

นี่คือรุ่นยาว:

ps --everyone --format=pid,vsz,comm= | sort --numeric-sort --key=2

แสดงหน่วยความจำกระบวนการเป็นเมกะไบต์และเส้นทางกระบวนการ

ps aux  | awk '{print $6/1024 " MB\t\t" $11}'  | sort -n

แค่ข้อความด้านบนเซิร์ฟเวอร์ที่แสดงอาการเดียวกัน แต่ยังคงแสดงหน่วยความจำหมด สิ่งที่พบคือ sysctl.conf จากกล่องที่มี RAM ขนาด 32 GB และตั้งค่าสำหรับ DB ที่มีเพจขนาดใหญ่ที่กำหนดค่าไว้ที่ 12000 กล่องนี้มี RAM เพียง 2 GB เท่านั้นดังนั้นจึงกำหนด RAM ฟรีทั้งหมดให้กับเพจขนาดใหญ่ (เท่านั้น 960 ของพวกเขา) การตั้งค่าหน้าเว็บขนาดใหญ่เป็น 10 เนื่องจากไม่มีผู้ใช้คนใดเลยทำให้หน่วยความจำทั้งหมดเป็นอิสระ

การตรวจสอบอย่างรวดเร็วของ / proc / meminfo เพื่อค้นหาการตั้งค่า HugePages_ อาจเป็นการเริ่มต้นที่ดีในการแก้ไขปัญหาอย่างน้อยหนึ่งหน่วยความจำที่ไม่คาดคิด

ในกรณีของฉันปัญหาคือเซิร์ฟเวอร์เป็นเซิร์ฟเวอร์เสมือนของ VMware ที่vmw_balloonเปิดใช้งานโมดูล:

$ lsmod | grep vmw_balloon
vmw_balloon            20480  0
vmw_vmci               65536  2 vmw_vsock_vmci_transport,vmw_balloon

วิ่ง:

$ vmware-toolbox-cmd stat balloon
5189 MB

ดังนั้นหน่วยความจำประมาณ 5 GB จึงได้รับการเรียกคืนโดยโฮสต์ ดังนั้นแม้จะมี 8 GB ถึง VM ของฉัน "เป็นทางการ" แต่ในทางปฏิบัติมันน้อยกว่ามาก:

$ free
              total        used        free      shared  buff/cache   available
Mem:        8174716     5609592       53200       27480     2511924     2458432
Swap:       8386556        6740     8379816

คุณยังสามารถใช้คำสั่ง ps เพื่อรับข้อมูลเพิ่มเติมเกี่ยวกับกระบวนการ

ps aux | less

ฉันอ้างถึงสิ่งนี้และหน่วยความจำทั้งหมดที่ใช้โดยกระบวนการ Python? - Stack Overflowนั่นคือคำตอบของฉัน ตอนนี้ฉันได้รับเครื่องมือนับเฉพาะ (python)

# Megabyte.
$ ps aux | grep python | awk '{sum=sum+$6}; END {print sum/1024 " MB"}'
87.9492 MB

# Byte.
$ ps aux | grep python | awk '{sum=sum+$6}; END {print sum " KB"}'
90064 KB

แนบรายการกระบวนการของฉัน

$ ps aux  | grep python
root       943  0.0  0.1  53252  9524 ?        Ss   Aug19  52:01 /usr/bin/python /usr/local/bin/beaver -c /etc/beaver/beaver.conf -l /var/log/beaver.log -P /var/run/beaver.pid
root       950  0.6  0.4 299680 34220 ?        Sl   Aug19 568:52 /usr/bin/python /usr/local/bin/beaver -c /etc/beaver/beaver.conf -l /var/log/beaver.log -P /var/run/beaver.pid
root      3803  0.2  0.4 315692 36576 ?        S    12:43   0:54 /usr/bin/python /usr/local/bin/beaver -c /etc/beaver/beaver.conf -l /var/log/beaver.log -P /var/run/beaver.pid
jonny    23325  0.0  0.1  47460  9076 pts/0    S+   17:40   0:00 python
jonny    24651  0.0  0.0  13076   924 pts/4    S+   18:06   0:00 grep python

การอ้างอิง

• ความจำ - Linux: ค้นหาว่ากระบวนการใดที่ใช้ RAM ทั้งหมด? - ผู้ใช้ขั้นสูง
• หน่วยความจำทั้งหมดที่ใช้โดยกระบวนการ Python? - สแต็คล้น
• linux - ความหมายของเอาต์พุต ps aux - ผู้ใช้ขั้นสูง

สร้างสคริปต์ที่show-memory-usage.shมีเนื้อหา:

#!/bin/sh
ps -eo rss,pid,user,command | sort -rn | head -10 | awk '{ hr[1024**2]="GB"; hr[1024]="MB";
 for (x=1024**3; x>=1024; x/=1024) {
 if ($1>=x) { printf ("%-6.2f %s ", $1/x, hr[x]); break }
 } } { printf ("%-6s %-10s ", $2, $3) }
 { for ( x=4 ; x<=NF ; x++ ) { printf ("%s ",$x) } print ("\n") }
 '

สิ่งนี้ยังใช้ ID กระบวนการเรียงลำดับตาม MB ที่ใช้และสรุปคำสั่ง (ที่สร้างกระบวนการ):

ps aux | awk '{print $6/1024 " MB\t\t" $2 "\t" $11}' | sort -n

เซิร์ฟเวอร์ ubuntu ของฉัน DISTRIB RELEASE = 18.04 บน Hyper-V มีหน่วยความจำส่วนใหญ่ที่ใช้ แต่กระบวนการทั้งหมดนั้นใช้ได้ (ยอมรับแล้วฉันได้ลบแพ็คเกจ snapd และแพ็คเกจที่ไม่ต้องใส่ข้อมูล แต่ยังคงใช้หน่วยความจำ 95% อยู่)

คำตอบคือ Hyper-V มีหน่วยความจำแบบไดนามิกดังนั้นจึงใช้หน่วยความจำสำหรับการใช้งานระบบหลักและ ubuntu ตั้งค่าสถานะตามที่ใช้

หวังว่าจะช่วยใครซักคน