LLM 없이 콘텐츠 모델에 문서를 대조해 점수 매기기
Scoring Documents Against a Content Model Without an LLM
TL;DR AI
1분핵심 요약
Google Docs를 Contentful로 가져오는 파이프라인이 탭과 제목을 기준으로 문서를 스코프로 분할합니다.
각 스코프는 토큰화된 용어에 대한 Jaccard 유사도로 모든 CMS 콘텐츠 타입과 비교됩니다.
상위 후보만 LLM에 전달해 토큰 사용을 줄이고 매핑 품질을 높입니다.
시스템은 각 스코프의 매칭 결과, 상위 후보, 검토 플래그도 함께 저장합니다.