문서 목차
SAMANDA Ops
SAMANDA 가 플랫폼을 감시·진단·조치하는 과정을 한눈에 보고, 자연어로 운영 작업을 지시하는 운영자용 관제 화면입니다.
QUANTUM C&S
SAMANDA 가 플랫폼을 감시 · 진단 · 조치하는 과정을 한눈에 보고, 자연어로 운영 작업을 지시하는 운영자용 관제 화면입니다.
AI 에이전트 SAMANDA 는 클러스터 · 서비스 · 학습 작업을 계속 지켜보다가 사고(인시던트)를 발견하면 스스로 진단하고, 안전한 조치는 자동으로, 위험한 조치는 운영자 승인을 받아 실행합니다.
이런 일을 할 수 있어요
- 지난 24시간 운영 상황을 SAMANDA 가 요약한 운영 브리핑 읽기
- 열린 인시던트를 위쪽 띠에서 넘겨 보며 SAMANDA 진단 요청, 오류 아님 표시, 수동 종료
- SAMANDA 가 제안한 조치를 검토하고 승인 후 조치 / 거절 / 5분 뒤
- 자율 운영률 · 신뢰성(SLO) · API 지연과 오류율 · 24시간 변경 · 응답 품질 · 후속 조치를 오른쪽 카드로 확인
- "클러스터 상태 어때?" 같은 질문을 입력하거나 질문 카드를 눌러 SAMANDA 와 대화
- SAMANDA 의 자율 진단 흐름과 조치 기록을 화면 아래 로그로 실시간 확인
- SAMANDA 활동 일지 에서 SAMANDA 가 언제 · 누가 · 무엇을 · 왜 했는지 검색
화면에 들어가기
왼쪽 메뉴에서 SAMANDA Ops 를 누릅니다. 이 화면은 관제에 집중하도록 어두운 전체 화면으로 열리고, 일반 화면의 위쪽 머리글과 오른쪽 SAMANDA 채팅 패널은 나타나지 않습니다.
화면 구성
1. 인사말과 운영 브리핑(위쪽)
- "OOO님, 좋은 아침이에요" 같은 인사말 아래에 24시간 운영 브리핑 이 나옵니다. 지난 24시간 사고 건수, 눈여겨볼 경보, SAMANDA 가 한 작업을 몇 문장으로 정리합니다. 처음 열 때는 "24시간 운영 브리핑을 생성하고 있어요…" 가 잠시 보입니다.
- 오른쪽 위 아이콘으로 활동 일지 를 열고, 새 세션 으로 대화를 비우고 새로 시작합니다.
2. 인시던트 띠
열린 인시던트가 있으면 화면 맨 위에 한 줄씩 나타나고 자동으로 넘어갑니다(마우스를 올리면 멈춥니다). 좌우 화살표(이전 인시던트 / 다음 인시던트)로 넘길 수 있습니다.
| 버튼 | 하는 일 |
|---|---|
| SAMANDA 진단 | 이 인시던트를 SAMANDA 에게 진단하게 합니다. 결과는 채팅으로 옵니다. |
| 오류 아님 | 오탐(false positive)으로 표시합니다. 사유를 고릅니다 — 일시적 테스트 / 알려진 false positive / 일시 spike — 자동 회복됨 / 시스템 외부 요인 / 확인 후 정상 판정 |
| × (오른쪽 끝) | 이 인시던트를 수동으로 종료합니다. |
과거에 비슷한 사례가 있으면 "과거 비슷한 사례 N건" 이 함께 보입니다.
3. 질문 카드와 입력창(가운데)
대화가 비어 있으면 "어떤 운영 작업이 필요하신가요?" 아래에 질문 카드 6개가 나옵니다. 누르면 미리 준비된 질문이 바로 전송됩니다.
| 카드 | 보내는 질문 |
|---|---|
| 클러스터 상태 | 노드 / GPU / Pod 요약 |
| 학습 작업 | 진행 중이거나 최근 24시간 안에 끝난 학습 작업 정리 |
| 추론 서비스 | 실행 중인 추론 서비스의 상태 · 지연(p95) · 복제본 수 |
| 자동화플로우 | 오늘 자동화플로우 실행 결과 요약 |
| GPU 사용률 | 사용률이 높은 노드 · 사용자 |
| 알람 정리 | 지난 1시간 알람과 인시던트 |
입력창(SAMANDA 에게 질문… (@ 지식기반))에서는 다음을 할 수 있습니다.
@를 입력해 지식기반을 골라 그 문서를 근거로 묻기- + 로 이미지 · PDF 를 첨부하거나 끌어다 놓기 · 붙여넣기(첨부 문서는 지식기반에 추가할 수도 있습니다)
- 마이크 버튼으로 음성 입력(한 번 누르면 한 번 듣기, 두 번 누르면 연속 대화 모드). Chrome · Edge 를 권장합니다.
- 모델 버튼(예: SAMANDA-V3)으로 이 화면에서 쓸 모델 고르기
- 답변 중에는 중지 로 멈추기
SAMANDA 는 답을 만들며 도구(로그 분석 · 지표 확인 · Pod 점검 등)를 씁니다. 답변 아래 도구 사용 이력 (N) 을 펼치면 어떤 도구를 썼는지 보입니다. 답변마다 좋아요 / 괜찮아요 / 별로에요 로 평가할 수 있고, 이 평가는 오른쪽 응답 품질 카드에 반영됩니다.
4. 자율 진단 · 활동 로그(아래)
| 로그 | 내용 |
|---|---|
| SAMANDA 자율 진단 | SAMANDA 가 주기적으로 살핀 결과(예: "API 12/12 정상"). 휴지통 아이콘은 화면의 로그만 지웁니다(기록은 남습니다). |
| SAMANDA 활동 로그 | 사고가 났을 때 SAMANDA 가 한 조치. "자동", "OOO 승인", "실패", "거절됨" 으로 표시됩니다. |
로그 숨기기 로 접고, 화면 고정 으로 채팅이 길어져도 로그가 제자리에 있게 합니다. 가장자리를 끌어 크기를 바꿀 수 있습니다.
5. 오른쪽 상태 카드
카드를 누르면 SAMANDA 가 그 지표의 근거를 채팅으로 설명합니다. 오른쪽 가장자리 화살표로 패널을 접고 펼칩니다.
| 카드 | 의미 |
|---|---|
| SAMANDA 자율 운영률 | 30일 동안 해결된 사고 중 SAMANDA 가 처리한 비율(자동 조치 + 사람 1클릭 승인). 자동 N · 승인 N · 처리 N 과 진단 자동화 건수가 함께 보입니다. |
| 신뢰성 (SLO 30일) | 서비스 / 백오피스 / 시스템 탭별 30일 가동률과 목표, 남은 에러 예산, 에러 예산 소진 속도(5분 · 1시간 · 6시간), 장애 복구 시간(MTTR), 노드 준비 상태 |
| API P95 / 에러율 | 느린 쪽 5% 응답 시간과 오류율, 가장 느린 서비스 |
| 24시간 변경 | 최근 24시간 배포 · 인시던트 수와 타임라인. 의심 변경이 있으면 원인 분석을 요청할 수 있습니다. |
| 응답 품질 (7일) | 사람 평가와 AI 자동 평가(정확성 · 유용성 · 안전성 · 형식 · 한국어) 점수 |
| 후속 조치 | 장애 회고에서 나온 할 일. 목록 으로 전체를 엽니다. |
| 사만다 요청 / 최근 대화 | 진행 중인 자동 분석과 최근 대화. 대화를 눌러 다시 불러오거나 지웁니다. |
SAMANDA 의 조치 등급
SAMANDA 가 할 수 있는 조치는 위험도에 따라 네 등급으로 나뉩니다. 어떤 조치가 어느 등급인지는 운영 관리자가 플랫폼 설정의 Agentic AI → 자동조치 카탈로그 에서 정합니다.
| 등급 | 뜻 | 예 |
|---|---|---|
| T0 자동 | 정보 수집만, 부작용 없음 | Pod 로그 수집 |
| T1 자동 | 검증된 안전 회복 | Pod 재시작 |
| T2 승인 | 운영자 승인 후 실행 | 이전 버전으로 복구, 복제본 조정 |
| T3 금지 | 자동 실행 금지(사람만) | — |
따라 하기: SAMANDA 가 제안한 조치 승인하기
1단계: 승인 창 확인
T2 조치가 필요하면 SAMANDA 조치 승인이 필요합니다 창이 뜹니다.
2단계: 계획 검토
인시던트, 원인 / 영향, SAMANDA 조치 계획(도구 · 인자 · 예상 결과)을 읽으세요. 제안이 여러 개면 이전 / 다음 으로 다른 조치 방안 을 봅니다.
3단계: 결정 근거 확인
결정 근거 (최근 30일) 에서 같은 조치를 과거에 몇 번 시도해 몇 번 성공했는지 확인하세요. 처음 실행되는 조치는 "처음 실행되는 조치" 로 표시됩니다.
4단계: 결정
결정하세요.
- 승인 후 조치 — 바로 실행합니다. 실행 후 90초 안에 인시던트가 자동으로 닫히면 성공으로 판정합니다.
- 거절 — 실행하지 않습니다.
- 5분 뒤 — 잠시 미룹니다.
- 조치 없이 인시던트 종료 (1시간 다시 안 띄움) — 사고를 해결됨으로 닫고 대기 중인 조치를 거절합니다.
5단계: 진행 확인
실행 중에는 진행 단계(승인 → 실행 → 결과 → 인시던트 해소 확인 → 워크로드 검증)가 보입니다. 백그라운드로 진행 (닫기) 를 눌러 창을 닫아도 계속 진행됩니다.
6단계: 후속 대화
조치 후에도 사고가 남으면 SAMANDA 에게 다른 방법 물어보기 로 이어서 대화하세요.
따라 하기: 후속 조치 정리하기
인시던트가 끝나면 SAMANDA 가 장애 회고를 쓰고 후속 조치(탐지 · 완화 · 예방 · 자동화)를 만듭니다.
1단계: 목록 열기
오른쪽 후속 조치 카드의 목록 을 누르세요(장애 회고 후속 조치 창).
2단계: 처리 방법 고르기
항목마다 원인 사고 · 담당 · 마감이 보입니다. 처리 방법을 고르세요.
- 진행 (사만다와) — SAMANDA 와 대화로 함께 처리합니다.
- 완료 (수동) — 처리 내용(커밋 · 변경 요약 등)을 짧게 적고 닫습니다. 적은 내용은 장애 사례 지식에 쌓여 비슷한 사고 때 다시 쓰입니다.
- 보류
3단계: 일괄 정리
일괄 정리 로 기한 지난 항목이나 30일 넘은 항목을 한꺼번에 보류로 바꿀 수 있습니다.
SAMANDA 활동 일지
화면 위 활동 일지 아이콘을 누르면 SAMANDA 활동 일지(언제 · 누가 · 무엇을 · 왜)가 열립니다. 관제실로 를 누르면 돌아갑니다.
- 위쪽 지표: 지난 7일 총 액션, 자동 vs 승인, 성공률, 평균 소요, 승인 대기, 활발한 도구 Top
- 필터: 기간(일 수), 누가(SAMANDA 자동 / 사용자 승인 / 사용자 수동), 결과, incident(있음 / 없음), 통합 검색(도구명 · 설명 · 인시던트 제목 · 근거 · 메모)
- 줄을 누르면 언제(제안 · 실행 시각), 무엇을(도구와 실행 인자 상세), 왜 (근거)(임계값 · 정책 · 사용자 사유), 결과 가 펼쳐집니다.
- 아래에서 페이지당 건수와 페이지를 고릅니다.
권한
- SAMANDA Ops 는 IGA 에서 운영 페르소나 실행 권한(
agent:personaExecute)과, 인시던트 · 이벤트 · 조치 · SLA 같은 운영 조회 권한 중 하나 이상을 받은 사람에게만 메뉴가 보입니다. - 권한이 없는데 주소로 들어오면 "SAMANDA Ops 를 쓸 수 없습니다" 와 함께 무엇이 없는지 알려 줍니다. 이 경우 화면은 운영 데이터를 전혀 조회하지 않습니다. 필요하면 보안관리자에게 운영 역할을 요청하세요.
- 운영 조회 권한 중 일부만 있으면, 권한이 없는 카드 · 로그는 불러오지 않습니다.
- 운영자가 SAMANDA 에게 시킨 조회 · 조치는 요청한 사람의 권한 으로 실행되며, 권한 밖의 일은 거부됩니다.
알아두면 좋은 점
- 장애 실험(일부러 장애를 넣어 서비스가 버티는지 확인)도 SAMANDA Ops 에게 자연어로 시킬 수 있습니다. 결과는 플랫폼 설정의 장애 실험 에서 봅니다(사이트에서 기능이 켜져 있을 때).
- SAMANDA 가 감시하는 범위(관제 네임스페이스), 사용하는 모델, 자동조치 카탈로그, 장애 사례 지식은 플랫폼 설정의 Agentic AI 에서 관리합니다.
- 음성 응답(TTS)을 켜 두면 마이크로 질문했을 때 답을 소리로 들려줍니다. 설정은 그 브라우저에만 저장됩니다.