장애 대응할 때

알림을 수신하거나 서버 장애를 인지했을 때, PRISM에서 원인을 파악하고 대응하는 흐름을 안내합니다.

1단계: 알림 확인 — 어떤 서버에서 어떤 문제인가?

알림이 발생하면 가장 먼저 어떤 서버에서 어떤 문제가 발생했는지 확인합니다.

1. 알림 목록 진입
2. 심각도 확인 — Critical(즉시 대응), Warning(주의), Info(참고)
3. 알림 내용에서 서버명, 메트릭, 임계치 초과 값 확인
4. 해당 서버 클릭하여 상세 페이지로 이동

상세 방법: 알림·공지·이슈

2단계: 서버 위치 파악 — 어디에 있는 서버인가?

3D 서버실 뷰에서 문제 서버의 물리적 위치를 즉시 확인합니다.

1. 3D 서버실 진입
2. 빨간색/주황색으로 표시된 서버 확인
3. 해당 서버 클릭 → 랙 위치, 서버 정보 확인
4. 현장 출동이 필요한 경우 정확한 위치 전달

상세 방법: 3D 서버실

3단계: 원인 분석 — 무엇이 문제인가?

서버 상세 페이지에서 리소스 추이를 분석합니다.

• CPU 사용률 — 특정 시점에 급증했는지 확인
• 메모리 — 메모리 누수 패턴 확인
• 디스크 — 용량 부족 여부 확인
• GPU 온도/사용률 — 과열 여부 확인
• 네트워크 — 트래픽 이상 여부 확인

상세 방법: 서버 상세 보기

4단계: 즉시 대응 — 원격으로 조치

서버실에 직접 가지 않고 BMC 원격 제어로 즉시 대응합니다.

상황	조치
서버 응답 없음	BMC 원격 전원 재시작
GPU 과열	GPU 팬 속도 수동 조절
서비스 중단	서버 전원 off → on

상세 방법: 서버 카드 — BMC 원격 부팅, GPU 팬 제어

온프레미스 차이

온프레미스 환경에서는 관리자 권한으로 BMC 원격 제어가 가능합니다. SaaS 환경에서는 관리자가 BMC 정보를 먼저 등록해야 합니다.

5단계: 기록 — 장애 이력 남기기

장애 내용과 조치 사항을 이슈 트래커에 기록합니다.

1. 이슈 트래커 진입
2. 새 이슈 등록 — 제목, 대상 서버, 설명 입력
3. 상태 관리 — 진행중 → 해결됨

상세 방법: 이슈 트래커

장애 유형별 대응 요약

장애 유형	확인 위치	대응 방법
서버 다운	알림 + 3D 서버실	BMC 원격 전원 재시작
GPU 과열	GPU 위젯 + 알림	GPU 팬 속도 수동 조절
디스크 부족	디스크 포화 예측 위젯	불필요 파일 정리 또는 증설
CPU 폭주	서버 상세 + 사용률 추이	프로세스 확인 및 조치
네트워크 이상	네트워크 위젯	네트워크 장비 점검
에이전트 수집 중단	Exporter 현황	에이전트 재시작