핵심 요약
쏘카의 FMS 주행이벤트 파이프라인을 Kafka 기반의 이벤트 주도 구성으로 전환하고 NoSQL 도입과 TTL 인덱스로 시계열 데이터를 관리해 파이프라인의 정합성과 확장성을 크게 개선했다.
구현 방법
- Kafka를 중심으로 한 이벤트 기반 파이프라인 도입
- NoSQL 도입 및 비동기 처리로 처리량 확장성 확보
- Check-In/Check-Out 도입으로 차량별 순서 보장 및 Deadlock 방지
- TTL 인덱스 활용으로 시계열 데이터 보관 관리
주요 결과
- 데이터 순서 보장으로 정합성 확보
- 실시간 이벤트 기반 처리로 자원 효율화 및 응답성 향상
- 분산 파이프라인의 확장성 및 장애 회복력 강화
- TTL 인덱스로 시계열 데이터 관리 용이
