다크 모드
작업 확인하기
내가 제출한 작업이 잘 돌아가고 있는지, 클러스터 자원은 여유가 있는지 확인할 수 있습니다. 이 페이지에서는 작업 현황과 리소스 사용 상태를 파악하는 데 필요한 화면을 안내합니다.
이 화면은 작업 스케줄러가 연동된 환경에서만 표시됩니다.
추천 위젯 구성
아래 위젯을 켜두면 작업과 리소스를 한눈에 파악할 수 있습니다.
| 위젯 | 무엇을 알 수 있나요 | 필수 여부 |
|---|---|---|
| 작업 현황 요약 | 전체 노드와 작업 상태를 숫자로 빠르게 확인 | 필수 |
| 클러스터 노드 현황 | 노드가 지금 어떤 상태인지 색상으로 한눈에 | 필수 |
| 작업 모니터 | 실행 중인 작업 목록과 GPU 배정 현황을 상세하게 | 필수 |
| 내 리소스 현황 | 내가 지금 쓰고 있는 자원만 모아서 확인 | 추천 |
| 리소스 메트릭 | 할당받은 양 대비 실제로 얼마나 쓰고 있는지 | 추천 |
| 사용자별 사용률 | 다른 사용자와 비교해서 내 사용량 위치 확인 | 선택 |
| 클러스터 리소스 총괄 | CPU, 메모리, GPU, 전력, 온도를 한 화면에 | 선택 |
| 작업 이력 | 과거에 완료되거나 실패한 작업 기록 | 선택 |
화면 해설
1. 작업 현황 요약
클러스터 전체의 상태를 숫자로 요약해서 보여줍니다.
화면에 보이는 것:
- 노드 상태 — 할당된 노드, 유휴 노드, 다운된 노드 수
- 작업 현황 — 현재 실행 중인 작업 수, 대기 중인 작업 수
- CPU 코어 사용률 — 전체 코어 중 현재 사용 중인 비율
이 숫자가 알려주는 것:
| 이런 상태면 | 의미 | 해야 할 일 |
|---|---|---|
| 유휴 노드가 많음 | 클러스터에 여유가 있습니다 | 작업을 제출하기 좋은 타이밍입니다 |
| 유휴 노드가 0 | 모든 노드가 사용 중입니다 | 작업을 제출하면 대기열에 들어갑니다 |
| 대기 작업이 많음 | 자원이 부족한 상황입니다 | 작업 시작까지 시간이 걸릴 수 있습니다 |
| 다운 노드가 있음 | 일부 노드가 꺼져 있거나 점검 중 | 관리자에게 확인 요청 |
2. 클러스터 노드 현황
노드 한 대 한 대의 상태를 색상 그리드로 보여줍니다. 전체 클러스터가 지금 어떤 상태인지 시각적으로 빠르게 파악할 수 있습니다.
색상이 알려주는 것:
| 색상 | 상태 | 의미 |
|---|---|---|
| 녹색 | 유휴 | 작업 없이 대기 중인 노드 |
| 파란색 | 할당됨 | 작업이 실행 중인 노드 |
| 빨간색 | 다운 | 꺼져 있거나 응답이 없는 노드 |
녹색이 많으면 클러스터에 여유가 있다는 뜻입니다. 파란색이 대부분이면 자원이 바쁜 상태이므로, 작업 제출 후 대기 시간이 길어질 수 있습니다.
3. 작업 모니터
실행 중인 작업을 상세하게 확인할 수 있는 화면입니다. 5개 탭으로 구성되어 있으며, 탭을 전환하면서 다양한 관점으로 작업 상태를 살펴볼 수 있습니다.
5개 탭 활용법:
| 탭 이름 | 무엇을 볼 수 있나요 | 이럴 때 사용하세요 |
|---|---|---|
| 노드맵 | 노드별로 어떤 작업이 배정되었는지 시각적으로 | 내 작업이 어떤 노드에서 돌고 있는지 확인할 때 |
| 작업목록 | 실행 중인 작업의 이름, 사용자, 시작 시간, GPU 할당 | 전체 작업 현황을 목록으로 확인할 때 |
| 사용자 | 사용자별로 작업이 몇 개 돌고 있는지 | 누가 자원을 많이 사용 중인지 궁금할 때 |
| 이력 | 최근 완료/실패/취소된 작업 기록 | 끝난 작업의 결과를 확인할 때 |
| 통계 | 기간별 작업 수, 성공률, 평균 대기 시간 | 클러스터 사용 추세를 파악할 때 |
GPU 할당 현황: 작업목록 탭에서 각 작업이 GPU를 몇 장 사용하고 있는지 확인할 수 있습니다. GPU를 많이 쓰는 작업이 있으면, 그만큼 다른 작업의 대기 시간이 길어질 수 있습니다.
4. 내 리소스 현황
현재 내 계정으로 실행 중인 작업과, 내가 할당받은 자원을 모아서 보여줍니다. 다른 사용자의 작업은 보이지 않고, 오직 내 작업만 표시됩니다.
화면에 보이는 것:
- 내가 실행 중인 작업 수
- 내가 사용 중인 CPU, 메모리, GPU 양
- 대기 중인 내 작업 수
이렇게 활용하세요:
- "내 작업이 잘 돌고 있나?" 확인할 때 가장 먼저 볼 화면입니다
- 대기 중인 작업이 있다면, 앞에 몇 개의 작업이 있는지도 함께 표시됩니다
5. 리소스 메트릭
CPU, 메모리, GPU의 할당량과 실제 사용량을 비교해서 보여줍니다.
이 숫자가 알려주는 것:
| 이런 상태면 | 의미 | 해야 할 일 |
|---|---|---|
| 할당량 대비 사용량이 낮음 | 받아둔 자원을 다 활용하지 못하고 있음 | 작업 설정을 확인하거나, 불필요한 할당을 줄여주세요 |
| 할당량과 사용량이 비슷함 | 자원을 효율적으로 사용하고 있습니다 | 잘 하고 계십니다 |
| 사용량이 할당량에 거의 도달 | 자원 한계에 가까움 | 추가 자원이 필요하면 관리자에게 요청하세요 |
6. 사용자별 사용률
사용자별로 자원을 얼마나 쓰고 있는지 비교할 수 있습니다. 내 사용량이 다른 사용자와 비교해서 어느 정도인지 확인하고 싶을 때 유용합니다.
7. 클러스터 리소스 총괄
CPU, 메모리, GPU, 전력, 온도를 한 화면에 종합해서 보여줍니다. 클러스터 전체의 건강 상태를 한번에 확인하고 싶을 때 사용합니다.
특히 주의할 항목:
- 온도가 높다면 — 서버실 냉방이나 장비 상태를 관리자에게 확인 요청
- 전력이 급격히 올랐다면 — GPU를 많이 사용하는 작업이 집중되고 있을 수 있음
8. 작업 이력
과거에 완료되거나 실패, 취소된 작업의 기록을 보여줍니다.
이렇게 활용하세요:
- 내 작업이 정상 종료되었는지 확인
- 실패한 작업이 있다면, 실패 사유를 확인해서 재제출 시 참고
- 기간별로 검색해서 이번 달 사용 이력을 조회
이런 상황에서 확인하세요
| 상황 | 어디를 보면 되나요 | 확인 포인트 |
|---|---|---|
| "내 작업이 안 돌아가" | 내 리소스 현황 | 작업 상태가 "실행 중"인지 "대기 중"인지 확인 |
| "대기 중인 작업이 왜 안 시작돼?" | 작업 현황 요약, 클러스터 노드 현황 | 유휴 노드가 있는지, 앞에 대기 작업이 얼마나 있는지 확인 |
| "GPU를 얼마나 쓰고 있는지 알고 싶어" | 리소스 메트릭, 작업 모니터 | 할당량 대비 실제 사용량 비교, 작업별 GPU 배정 확인 |
| "이번 달 사용량 확인하고 싶어" | 작업 이력, 사용자별 사용률 | 기간 필터로 이번 달 작업 기록과 누적 사용량 조회 |
더 자세히 보고 싶다면
| 궁금한 내용 | 이 페이지를 보세요 |
|---|---|
| 서버 상태를 하나씩 확인하고 싶다면 | 서버 상태 한눈에 보기 |
| GPU 온도나 사용률을 자세히 보고 싶다면 | GPU 모니터링하기 |
| 우리 팀 전체 할당량이 궁금하다면 | 팀 리소스 관리하기 |
| 저장 공간이 부족한 것 같다면 | 저장 공간 확인하기 |
