핵심 요약
AWS의 Vision LLM과 Amazon OpenSearch Service를 활용해 경농 파밍노트의 농약 라벨 이미지를 자동 인식하고, OCR 오타 보정-후보군 계층 검색-LLM 재랭킹으로 최종 순위를 도출하는 이미지 인식 시스템을 구축했습니다.
구현 방법
- Stage 1: Vision LLM으로 라벨에서 제품명/등록번호/제조사 추출하고 TypoCorrector로 OCR 오타 보정
- Stage 2: OpenSearch Service에서 정확 일치부터 부분 매칭까지의 계층적 후보군 검색
- Stage 3: LLM Reranker로 원본 이미지 재검토 및 최종 순위 결정
주요 결과
- 평균 응답 속도 약 5초 내외 달성
- 후보군 30개를 선별 후 Reranker로 최종 후보를 재평가
- Blue-Green 배포로 인덱스 스위칭을 원자적으로 수행해 서비스 중 다운타임 없이 운영
