핵심 요약
여기어때 SRE팀은 Alert Adviser를 도입해 Grafana 알림을 AI가 분석하도록 구성하고, 문제 원인과 영향 범위를 신속히 파악하는 자동화 시스템을 구축했다.
구현 방법
- Slack Socket Mode로 Grafana 알림을 실시간 수신하고 분석 채널에 복제
- MCP 화이트리스트로 27종 도구만 조회 가능하게 하고, 읽기 전용으로 운영
- Go 백엔드와 React 대시보드로 단일 EC2에서 운영
- 12종 알림 대상과 4개의 버튼으로 상세 분석, 더 파보기, 쉬운설명, 도움말 구성
- 노이즈 필터링과 오판 방지를 위한 근거 등급/출처 표기, 변경성 명령 제거, 추론 규칙 추가 도입
주요 결과
- 20건 분석에서 일치 14건, 부분 일치 4건, 불일치 2건으로 정확도 확인
- 근거·출처 표시와 Unknown 처리로 신뢰성 확보
- 변경성 노출 최소화 및 미확인 영역 표시로 안전한 자동화 운영
