핵심 요약
무신사는 Human-in-the-loop를 위한 VLMOps 어드민 도입으로, 프롬프트 관리에서 자동 추론-검증-재학습의 Flywheel을 구현해 속도와 품질을 함께 올렸습니다.
구현 방법
- 웹 UI에서 모델/프롬프트를 관리하고 내부·외부 API를 연동
- 오토필(auto-fill)로 초안 라벨 자동 생성
- Spread/Grid 뷰로 검증 작업을 빠르게 수행
- 골든셋 관리 및 자동 평가로 재현성 확보
- 검증-검수-재학습의 순환 자동화
주요 결과
- 모델 평가 속도 약 54% 단축
- 데이터 송수신 및 툴 세팅의 번거로움 감소로 업무 효율 증가
- 검증 프로세스 자동화로 재학습 루프 안정화
