핵심 요약
Microsoft Developer가 .NET용 데이터 인제스팅 빌딩 블록의 프리뷰를 발표했다. 문서를 일관 포맷으로 표현하고, 로컬/클라우드 소스 데이터를 수집하며, AI 기반 요약·임베딩으로 파이프라인을 강화한다. 또한 토큰/섹션/시맨틱 분할과 IngestionPipeline으로 엔드-투-엔드 구성이 가능하다.
주요 특징
- 다양한 파일 형식을 일관 포맷으로 표현
- 로컬/클라우드 소스 읽기용 내장 리더
- 요약/감정 분석/키워드/임베딩 자동 강화
- 토큰/섹션/시맨틱 분할 및 컨텍스트 윈도우 최적화
- 벡터 저장소 저장 및 임베딩 지원, 파이프라인 구성
적용 고려사항
- .NET 프로젝트에서의 사용 및 OpenAI API 키 필요
- 다양한 벡터 저장소와 연동 가능(Qdrant, SQL Server, CosmosDB 등)
- 토큰화 및 컨텍스트 윈도우 관리에 따른 성능 튜닝 권장
