Современные Linux-системы предоставляют мощные инструменты для анализа аппаратного обеспечения, однако мониторинг видеокарты часто вызывает затруднения у пользователей, привыкших к графическим интерфейсам Windows. В отличие от десктопных ОС, где достаточно открыть диспетчер задач, в терминале требуется знание специфических утилит, зависящих от типа установленного видеочипа.
Понимание текущей нагрузки на GPU критически важно для диагностики перегрева, выявления аномального поведения драйверов или проверки стабильности системы при рендеринге и машинном обучении. NVIDIA, AMD и Intel предлагают разные подходы к предоставлению метрик, что требует от администратора гибкости в выборе инструментов.
Мониторинг карт NVIDIA через nvidia-smi
Самым стандартным и надежным способом проверки загрузки графического процессора в системе с картами NVIDIA является утилита nvidia-smi (NVIDIA System Management Interface). Она встроена в драйвер и не требует дополнительной установки, что делает её первым выбором для экстренных проверок.
Для получения полной картины необходимо ввести команду в терминале. По умолчанию утилита выводит статический отчет, который быстро исчезает. Чтобы запустить непрерывный мониторинг с частотой обновления в 2 секунды, используйте специальный флаг -l (от слова 'loop').
nvidia-smi -l 2В выводе вы увидите столбец GPU-Util, который отображает процент использования ядра, а также столбец Memory-Usage, показывающий занятость видеопамяти. Если загрузка ядра близка к 100%, а памяти мало, это классический признак вычислительной задачи, такой как компиляция шейдеров или нейросетевые расчеты.
Визуализация данных с помощью nvtop
Если вам нужен более наглядный и интерактивный интерфейс, похожий на htop, но специально для видеокарт, утилитой nvtop нет равных. Она поддерживает карты NVIDIA, AMD и Intel, предоставляя красивые графики в реальном времени прямо в терминале.
Установка производится через пакетный менеджер дистрибутива. После запуска вы увидите не только текущую загрузку, но и исторический график потребления памяти, температуры и частоты ядра. Это позволяет отследить пиковые нагрузки, которые могли быть пропущены при статическом опросе.
Важно отметить, что nvtop показывает список процессов, потребляющих ресурсы. Это позволяет мгновенно выявить, какое именно приложение «съедает» ресурсы видеокарты, даже если оно работает в фоновом режиме без активного окна.
⚠️ Внимание: Утилита nvtop может не определять некоторые старые карты без обновленных драйверов. Если график пуст, проверьте версию ядра Linux и совместимость с вашим чипсетом в документации производителя.
Инструменты для видеокарт AMD
Для владельцев решений от AMD (Radeon) ситуация немного иная, так как универсальной утилиты, встроенной в драйвер по умолчанию, как у NVIDIA, не всегда хватает для детального анализа. Однако проект radeontop стал стандартом де-факто для мониторинга карт на базе открытого драйвера amdgpu.
Запуск radeontop требует прав суперпользователя. Команда выводит список компонентов GPU (Render, Graphics, Compute) и показывает, какой именно блок наиболее загружен в данный момент.
sudo radeontopИнтересным фактом является то, что современные карты AMD также поддерживают утилиту rocm-smi (ROCm System Management Interface), которая функционально аналогична nvidia-smi и предоставляет детальные метрики для серверных и профессиональных решений.
Мониторинг через системные утилиты (htop и top)
Не стоит забывать и о классических системных утилитах, таких как top или htop. Хотя они показывают общую нагрузку на процессор (CPU), в новых версиях они могут отображать и нагрузку на GPU, если драйвер экспортирует соответствующие данные в /proc или /sys.
В htop для отображения GPU-статистики часто необходимо добавить панель вручную через настройки (F2). Ищите раздел, связанный с GPU Load. Если такой опции нет, значит, драйвер не предоставляет нужные метрики на уровне ядра, и придется использовать специализированные инструменты.
Этот метод удобен, когда нужно быстро оценить общую картину: нагружен ли CPU, нагружен ли GPU и нет ли утечек памяти в системе. Однако для точной диагностики драйверов он менее информативен, чем специализированные утилиты.
Почему в htop нет GPU?
Драйверы GPU должны экспортировать данные в системные файлы (sysfs). Если драйвер устарел или закрытый, htop не увидит нагрузку на видеокарту, показывая только CPU.
Анализ потребления памяти и температур
Нагрузка на видеокарту неразрывно связана с температурой и потреблением памяти. Перегрев может искусственно снизить частоты, что приведет к падению производительности даже при 100% загрузке ядра. Поэтому мониторинг должен быть комплексным.
Возьмите за правило проверять столбец Volatile GPU-Util и Temp одновременно. Если температура превышает 80-85°C, а загрузка падает, система, вероятно, сбросила частоты для защиты чипа.
Для детального анализа температур можно использовать утилиту sensors из пакета lm-sensors. Она выводит температуру всех сенсоров системы, включая GPU, если драйвер поддерживает чтение этих данных.
⚠️ Внимание: Высокая загрузка памяти (VRAM) часто является более критичным фактором, чем загрузка ядра. Переполнение видеопамяти приводит к использованию оперативной памяти (swap), что вызывает резкие фризы в системе.
☑️ Чек-лист диагностики
Таблица сравнения утилит для мониторинга
Чтобы выбрать правильный инструмент, полезно сравнить их возможности и требования. Ниже приведена сводная таблица для основных типов видеокарт.
| Утилита | Поддерживаемые бренды | Тип интерфейса | Требуются права root |
|---|---|---|---|
| nvidia-smi | NVIDIA | Текстовый (CLI) | Нет |
| nvtop | NVIDIA, AMD, Intel | Интерактивный (TUI) | Нет (для списка процессов - да) |
| radeontop | AMD | Текстовый (CLI) | Да |
| rocm-smi | AMD (ROCm) | Текстовый (CLI) | Нет |
Выбор инструмента зависит от вашей задачи. Для быстрой проверки достаточно nvidia-smi или radeontop, а для длительного логирования и анализа паттернов работы лучше использовать nvtop или написать скрипт на основе JSON-вывода утилит.
⚠️ Внимание: Детали работы утилит могут зависеть от версии ядра Linux и драйвера. Всегда сверяйтесь с официальной документацией производителя драйвера, если видите некорректные значения.
Частые вопросы и ответы
Ниже собраны ответы на наиболее распространенные вопросы, возникающие при мониторинге GPU в Linux.
Почему nvidia-smi показывает 0% загрузки, даже если я запустил тяжелую задачу?
Скорее всего, задача выполняется на CPU, а не на GPU, либо драйвер не смог корректно захватить задачу. Проверьте, правильно ли назначены ресурсы в вашей программе (например, в TensorFlow или CUDA).
Как отключить мониторинг в реальном времени в nvidia-smi?
Просто нажмите Ctrl + C в терминале. Это отправит сигнал прерывания и вернет вас в обычный режим командной строки.
Можно ли использовать эти утилиты на сервере без графического интерфейса?
Да, все перечисленные утилиты (nvidia-smi, nvtop, radeontop) работают исключительно в текстовом режиме и идеально подходят для серверов без X11 или Wayland.
Что такое "GPU Memory" и почему она не освобождается после закрытия программы?
Это видеопамять (VRAM). Драйвер может держать её занятой кэшем или процессом, который не завершился корректно. Перезагрузка системы или принудительная остановка процесса через nvidia-smi --gpu-reset (с осторожностью) решает проблему.