개인화 평가를 위한 선호도 인식 루브릭 학습
Preference-Aware Rubric Learning for Personalized Evaluation
TL;DR AI
1분핵심 요약
연구진은 대형 언어 모델의 개인화 평가를 위한 프레임워크 PARL을 제안했다.
PARL은 일반적인 벤치마크가 아니라 사용자의 실제 히스토리에서 평가 루브릭을 직접 학습한다.
또한 자기 검증 단계와 판별적 강화학습 목적함수를 더해 개인화된 텍스트 생성을 평가한다.
연구진은 이 방식이 사용자별 선호를 더 잘 반영하고, 사용자와 과제를 넘어 일반화된다고 보고했다.