Moait
홈인기 피드모든 블로그모든 태그
홈인기 피드모든 블로그모든 태그
Firehose부터 OpenSearch까지: AWS 서비스를 활용한 로그 분리 전략 섬네일

Firehose부터 OpenSearch까지: AWS 서비스를 활용한 로그 분리 전략

펫프렌즈 favicon펫프렌즈·Cloud·
AWSLambdaOpenSearchFluent BitKinesis Firehose
2025년 04월 17일8

AI 요약

이 글은 AI가 요약했어요. 정확한 내용은 꼭 원문을 확인해 주세요!

핵심 요약

펫프렌즈가 AWS OpenSearch를 활용해 2주 보관 정책 아래 특정 로그를 분리 저장하는 로그 관리 전략을 구현했습니다.

구현 방법

  • MDC와 헤더 기반 isSeparation 로깅으로 분리 대상 로그를 MDC에 표시
  • Logback 구성: 기본 로그와 separation 로그를 분리 출력, separation 로거를 별도 Appender로 라우팅
  • Fluent Bit→Firehose→Lambda 데이터 파이프라인으로 separation 로그 전달
  • Terraform으로 Firehose/Lambda 연결 및 IAM 권한 설정

주요 결과

  • 2주 보관 정책 준수와 필요한 로그를 별도 인덱스로 관리
  • 운영 관점에서 분리 로그의 저장 및 조회 용이성 향상

연관 피드

%가 높을수록 이 글과 비슷할 가능성이 높아요!
AWS OpenSearch 기반 EFK Stack 구축기 섬네일
71%

AWS OpenSearch 기반 EFK Stack 구축기

올리브영 favicon올리브영·2024년 04월 02일
AWS re:Invent 2023 참관기 섬네일
68%

AWS re:Invent 2023 참관기

드라마앤컴퍼니(리멤버) favicon드라마앤컴퍼니(리멤버)·2025년 01월 13일
로그 인리치먼트(Log Enrichment) 섬네일
67%

로그 인리치먼트(Log Enrichment)

모두싸인 favicon모두싸인·2025년 03월 06일