gmltj 03-04

렉 타입 서버에 그래픽카드를 넣어서 사용하시는 건가요? 그래픽카드가 원래 패시브 히트싱크만 있어서...... 그래픽 카드의 쿨링 상태가 어떤지 확인을 해야 됩니다.

흑기사단 03-05

안녕하세요.
현재 스크린샷 상황만 보면, 실제 GPU를 점유하는 프로세스가 없는 것이 정상으로 보입니다.
ps 명령 결과에서 보이는 것은 grep 프로세스 자신이므로, 실제로 돌아가는 Python 프로세스(GPU 사용 여부)와는 무관합니다.
보통 아무것도 하지 않을 때 GPU-Util이 0%~10% 미만으로 유지되는 것이 일반적이고. 37%는 꽤 높은 편이며, 74℃도 ‘아이들(idle) 상태’라고 보기에는 다소 높은 온도입니다(단, 서버용 패시브 쿨링 GPU라면 어느 정도 가능성은 있습니다).
덧글 용량 제한으로, 이어서 달겠습니다

흑기사단 03-05

ps aux | grep -i nvidia 등을 통해 NVIDIA 관련 프로세스가 있는지 확인
데스크톱 환경(예: GNOME, KDE)이 동작 중이라면, GPU가 렌더링 용도로 어느 정도 점유하고 있을 수 있음
sudo fuser -v /dev/nvidia* 또는 lsof /dev/nvidia*로 /dev/nvidia 디바이스를 사용하는 프로세스가 있는지 확인
 --
nvidia-smi에 ‘No running processes found’라고 표시되더라도, X 서버나 일부 시스템 데몬처럼 nvidia-smi에서 잘 표시되지 않는 프로세스가 GPU를 사용하는 경우가 있습니다.
예) GUI 환경(데스크톱), VNC/리모트 데스크톱, 또는 CUDA 이외의 라이브러리로 GPU를 사용하는 프로세스

흑기사단 03-05

nvidia-smi -q -d CLOCK 또는 nvidia-smi -q 명령으로 현재 클럭 상태(P-state)와 전력 사용량(Power Draw)을 확인
sudo nvidia-smi -pm 1 (Persistence Mode on) 혹은 반대로 -pm 0으로 바꿔가며, GPU가 정상적으로 클럭 다운(idle 시 클럭 낮춤)을 하는지 실험
GPU가 강제로 ‘Maximum Performance’ 모드로 고정되지 않았는지, Xorg 설정이나 NVIDIA 드라이버 설정(nvidia-settings) 등을 점검

 --

이래도 아무것도 안 나온다면, 쿨링 시스템을 점검해보시는 것을 권고드립니다.

제온프로 03-05

GPU가 돌고 있는 것 같은데요.

누군가 또는 어떤 프로그램이 사용하고 있다고 보여집니다.