핵심 요약
AWS가 패션 이커머스 부정 반품 차단을 위해 Nova 2 Lite를 미세 조정하고 Custom Guardrail을 구축해 부정 의도 탐지 정확도를 크게 향상시켰습니다.
구현 방법
- Nova 2 Lite를 Bedrock의 supervised fine-tuning으로 도메인 특화 모델로 변환
- Custom Guardrail 인퍼런스 파이프라인 구성: 부정 요청 차단 후 정상 요청만 AI 에이전트 전달
- 데이터셋: 837개 한국어 샘플, 3단계 확장 및 8개 Unsafe 카테고리 포함
주요 결과
- 전체 정확도 89.3%, Unsafe 탐지 94.6%, Safe 85.1%
- Base 대비 Unsafe 탐지 21.6pp 개선
- Wardrobing Strategy, Tag Manipulation, False Defect Claim, Policy Abuse, Fraud Bypass, Wardrobing, False Damage Claim 등 7개 카테고리에서 100% 탐지
- On-Demand 배포로 비용 효율성과 응답 속도 최적화
