효율적인 PRP 재랭커로서의 능동적 학습자

연구진은 pairwise ranking prompting을 노이즈가 있는 쌍대 판단을 활용하는 active learning 문제로 재정의했다.

제한된 LLM 호출 예산에서 reranking 품질을 높이는 active ranker를 제안했다.

랜덤 방향 oracle은 쌍당 1회 호출만으로도 시스템적인 위치 편향을 줄인다.

이 방법은 호출당 top-K 순위 품질을 개선하며, 제약된 환경에서 더 높은 NDCG@10을 보였다.