لینوکس و عملیات7 دقیقه

چگونه مصرف CPU را بررسی کنیم؟

مصرف CPU را در سطح کل سیستم، هر هسته، Process و Thread بررسی کنید و user، system، iowait و steal را از هم جدا ببینید.

#لینوکس#کارایی#پایش
تیم فنی هاستیفای
01

پاسخ سریع

مصرف CPU را در سطح کل سیستم، هر هسته، Process و Thread بررسی کنید و user، system، iowait و steal را از هم جدا ببینید.

صددرصد شدن یک Core در برنامه تک‌رشته‌ای ممکن است میانگین کل را پایین نشان دهد. در VPS، steal بالا نیز زمان گرفته‌شده توسط Hypervisor یا همسایه‌ها را آشکار می‌کند.

02

اول نشانه را دقیق تعریف کنید

عبارت‌هایی مانند «کند است»، «وصل نمی‌شود» یا «RAM پر است» برای شروع کافی‌اند اما برای حل مشکل نه. زمان شروع، کاربران درگیر، Endpoint یا Process، پیام خطای دقیق و آخرین تغییر موفق را ثبت کنید. یک Timeline کوتاه معمولاً نصف مسیر تشخیص را روشن می‌کند.

همان رفتار را از یک مسیر دوم بازتولید کنید و تفاوت حالت سالم و خراب را بنویسید. اگر مشکل تصادفی است، به‌جای حدس‌زدن نمونه‌برداری دوره‌ای از متریک و Log را فعال کنید تا لحظه بعدی شواهد از بین نرود.

03

علت‌های محتمل را لایه‌بندی کنید

از بیرون به داخل حرکت کنید: DNS و Route، Firewall و Port، Process و Service، منابع سیستم، Dependencyها و در نهایت منطق برنامه. این ترتیب از دست‌کاری برنامه برای مشکلی که در شبکه است جلوگیری می‌کند.

در هر لایه یک آزمون کم‌خطر انتخاب کنید که فرضیه را رد یا تأیید کند. نتیجه «کار نکرد» کافی نیست؛ فرمان، زمان و خروجی را ثبت کنید تا بتوانید مسیر را بازسازی و با همکار دیگری بررسی کنید.

  • mpstat عدم توازن میان Coreها را نشان می‌دهد.
  • pidstat مصرف Process را در طول زمان نشان می‌دهد.
  • system CPU بالا می‌تواند از syscall یا network pressure باشد.
04

جمع‌آوری شواهد

در بازه کندی، utilization هر Core و Process را نمونه‌برداری کنید، سپس با پروفایلر برنامه یا Slow query علت محاسبات را پیدا کنید.

قبل از Restart یا Kill، وضعیت Processها، مصرف منابع، Connectionها و Log همان بازه را ذخیره کنید. ساعت Client و Server را تطبیق دهید؛ اختلاف زمان می‌تواند رویدادهای مرتبط را در چند Log از هم جدا نشان دهد.

Terminal
mpstat -P ALL 1 10pidstat -u 1 10ps aux --sort=-%cpu | headtop -H
05

خروجی ابزارها را چطور بخوانیم؟

به یک عدد منفرد تکیه نکنید. CPU بالا همراه latency بالا معنای متفاوتی از CPU بالا با پاسخ سریع دارد؛ دیسک پر با inode آزاد با دیسکی که inode آن تمام شده یکسان نیست؛ و Connection refused با timeout مسیر عیب‌یابی متفاوتی دارد.

شاخص‌ها را در یک بازه و کنار Traffic، Deploy و Jobهای زمان‌بندی‌شده ببینید. به‌جای میانگین، p95، پیک و روند را بررسی کنید. همبستگی علت را ثابت نمی‌کند، اما فرضیه‌های شما را اولویت‌بندی می‌کند.

06

اصلاح کم‌خطر و مرحله‌ای

پس از یافتن محتمل‌ترین علت، کوچک‌ترین تغییر قابل بازگشت را اعمال کنید و همان معیار اولیه را دوباره بسنجید. اگر چند تنظیم را با هم تغییر دهید، حتی در صورت رفع مشکل نمی‌دانید کدام مورد مؤثر بوده و احتمال رگرسیون بیشتر می‌شود.

برای تغییر حساس، Backup یا Snapshot، نفر دوم و زمان بازگشت تعریف کنید. اگر سرویس چند نمونه دارد، اصلاح را ابتدا روی یک نمونه اجرا و رفتار آن را با گروه کنترل مقایسه کنید.

07

چرا راه‌حل‌های فوری گاهی بدتر می‌کنند؟

کشتن Process پرمصرف بدون فهم نقش آن ممکن است داده یا سرویس را خراب کند و Process manager دوباره همان بار را ایجاد کند.

Restart، پاک‌کردن Cache، افزایش Timeout یا افزودن منابع ممکن است موقتاً نشانه را پنهان کند. اگر مجبور به اقدام اضطراری هستید، پیش از آن شواهد حداقلی بگیرید و پس از پایدارشدن سرویس تحلیل ریشه‌ای را در یک Incident review کامل کنید.

08

بعد از رفع مشکل

سلامت را فقط با ناپدیدشدن خطا تأیید نکنید؛ درخواست واقعی، latency، نرخ خطا و backlog را تا یک بازه کافی پایش کنید. سپس Alertی بسازید که قبل از رسیدن به همان وضعیت هشدار دهد.

علت، اثر، شواهد، اقدام اصلاحی و پیشگیری را کوتاه و بدون سرزنش ثبت کنید. اگر خطا با یک Runbook قابل تشخیص بود، آن را به Monitoring یا Automation تبدیل کنید تا دفعه بعد زمان بازیابی کمتر شود.

09

پرسش‌های مهمی که قبل از اقدام باید جواب دهید

برای اینکه پاسخ «چگونه مصرف CPU را بررسی کنیم؟» فقط در حد اطلاعات عمومی نماند، ابتدا وضعیت فعلی خود را با عدد توصیف کنید: نسخه سیستم‌عامل یا نرم‌افزار، تعداد کاربر هم‌زمان، مصرف معمول و اوج منابع، حجم و رشد داده، محدودیت شبکه و بیشترین قطعی قابل قبول. بدون این اطلاعات ممکن است توصیه‌ای که از نظر فنی درست است، برای محیط شما انتخاب مناسبی نباشد.

دو سؤال بعدی مستقیماً از نکات این موضوع می‌آیند: «mpstat عدم توازن میان Coreها را نشان می‌دهد.» در زیرساخت شما چگونه اندازه‌گیری یا تأیید می‌شود؟ و «pidstat مصرف Process را در طول زمان نشان می‌دهد.» چه اثری روی کاربر، هزینه یا مسیر بازیابی دارد؟ پاسخ را در قالب شواهدی مانند خروجی فرمان، نمودار متریک، نتیجه آزمون یا مستند ارائه‌دهنده ثبت کنید؛ اتکا به حافظه و حدس برای تصمیم عملیاتی کافی نیست.

10

یک برنامه عملی کم‌ریسک

کار را با ثبت وضعیت فعلی و یک معیار موفقیت آغاز کنید. سپس پیشنهاد اصلی این راهنما را در کوچک‌ترین محیط نماینده اجرا کنید: در بازه کندی، utilization هر Core و Process را نمونه‌برداری کنید، سپس با پروفایلر برنامه یا Slow query علت محاسبات را پیدا کنید. نتیجه را در حالت عادی و در یک سناریوی خطا یا فشار کنترل‌شده بسنجید. اگر معیار بهتر نشد، به‌جای افزودن تغییرات بیشتر، فرض اولیه را بازبینی کنید.

پیش از اعمال تغییر در سرویس اصلی، روش بازگشت، مسئول تصمیم و زمان توقف را روشن کنید. این هشدار را نیز به‌عنوان شرط توقف در نظر بگیرید: کشتن Process پرمصرف بدون فهم نقش آن ممکن است داده یا سرویس را خراب کند و Process manager دوباره همان بار را ایجاد کند. پس از اجرا، نتیجه، نسخه‌ها و تنظیمات مؤثر را مستند کنید و یک زمان بازبینی تعیین کنید؛ تغییر بدون پایش ممکن است امروز سالم به نظر برسد اما در پیک بعدی شکست بخورد.

  • mpstat عدم توازن میان Coreها را نشان می‌دهد.
  • pidstat مصرف Process را در طول زمان نشان می‌دهد.
  • system CPU بالا می‌تواند از syscall یا network pressure باشد.
11

چک‌لیست عیب‌یابی

برای حل «چگونه مصرف CPU را بررسی کنیم؟» این ترتیب را حفظ کنید: تعریف نشانه، ثبت Timeline، بررسی لایه‌ها، جمع‌آوری شواهد، یک تغییر قابل بازگشت، اندازه‌گیری دوباره و اقدام پیشگیرانه. این روش شاید از یک Restart تصادفی کندتر به نظر برسد، اما نتیجه قابل اعتماد و تکرارپذیر می‌دهد.

  • mpstat عدم توازن میان Coreها را نشان می‌دهد.
  • pidstat مصرف Process را در طول زمان نشان می‌دهد.
  • system CPU بالا می‌تواند از syscall یا network pressure باشد.

نوشته تیم فنی هاستیفای

راهنماهای کاربردی برای انتخاب، اجرا و نگهداری زیرساخت.