리소스 현황

클러스터의 GPU · 메모리 사용 현황과 GPU를 쓰고 있는 작업, 그룹별 자원 사용량을 한 화면에서 확인합니다.

QUANTUM C&S

클러스터의 GPU · 메모리 사용 현황과 GPU를 쓰고 있는 작업, 그룹별 자원 사용량을 한 화면에서 확인합니다.

메뉴 리소스 현황(/resources)에서 엽니다. 화면은 30초마다 자동으로 갱신되며, 오른쪽 위 새로고침으로 바로 갱신할 수 있습니다.

화면 구성

리소스 현황

카드	설명
전체 GPU	전체 GPU 수와 사용 중 · 가용 개수입니다. MIG로 나눈 GPU가 있으면 제목이 GPU / MIG 인스턴스로 바뀌고 MIG 인스턴스도 한 개로 셉니다.
메모리 사용률	클러스터 전체 메모리 사용률
GPU 노드	GPU가 있는 노드 수와 정상 노드 수
평균 GPU 사용률	전체 GPU의 평균 연산 사용률

GPU는 연산 사용률이 0보다 크거나, 작업이 배정되어 있거나, GPU 메모리를 1,024 MiB 넘게 쓰고 있으면 사용 중으로 셉니다.

참고 MIG(Multi-Instance GPU)는 GPU 한 장을 여러 개의 독립된 작은 GPU로 나누어 쓰는 기능입니다. MIG로 나뉜 GPU는 목록에서 MIG <프로필>로 표시됩니다.

열	설명
팀	작업이 속한 그룹(프로젝트)
사용자	작업을 실행한 사용자(알 수 있는 경우)
작업명	작업 이름과 그 아래 네임스페이스. 한 GPU를 여러 작업이 나눠 쓰면 공유 xN 배지가 붙습니다.
노드	작업이 실행 중인 노드
GPU	GPU 번호 또는 MIG 프로필
사용률	GPU 연산 사용률
메모리	사용 중인 GPU 메모리 / 전체 GPU 메모리

노드마다 이름, GPU 모델과 개수, 노드 상태 배지가 표시되고, 아래 표에 GPU별 정보가 나옵니다.

상태	설명
사용 중	작업이 GPU를 쓰고 있습니다.
유휴	비어 있어 새 작업에 배정할 수 있습니다.
VM Passthrough	가상 머신에 직접 할당된 GPU입니다. 온도 · 사용률 · 메모리는 표시되지 않습니다.

내 프로젝트의 쿼터 대비 사용량은 팀 프로젝트 페이지의 사용량 · 쿼터에서 확인하세요.

상황	의미와 조치
"Prometheus가 설정되지 않았습니다"	모니터링 수집기가 연결되지 않아 사용량을 가져올 수 없습니다. 운영 관리자에게 문의하세요.
"GPU 노드가 없습니다"	이 클러스터에 GPU 노드가 없습니다. GPU를 요청한 작업은 대기 상태로 남습니다.
"실행 중인 작업이 없습니다"	지금 GPU를 쓰는 작업이 없습니다.
노트북 · 학습이 계속 대기중	유휴 GPU가 없거나 프로젝트 GPU 쿼터를 다 썼을 수 있습니다. 이 화면에서 가용 GPU를 확인하세요.