단일 심판을 넘어: 생성형 UI 평가를 위한 소셜 페르소나 패널 시뮬레이션
Beyond a Single Judge: Simulating Social Persona Panels for Generative UI Evaluation
TL;DR AI
1분핵심 요약
연구진은 생성형 UI를 평가하기 위해, 단일 LLM 판정보다 다양한 사용자 집단을 더 잘 반영하는 페르소나 기반 패널 방법 ESPP를 제안했다.
ESPP는 각 가상 페르소나가 UI 스크린샷을 평가하고, 제한된 신뢰 범위의 의견 교환을 거쳐 최종 판단을 내리도록 설계됐다.
실험에서 ESPP는 인간 평가와의 일치도가 더 높았고, 프롬프트 앙상블 기반 기준선보다도 우수했다.
이 방법은 서로 다른 사용자 집단 간의 평가 차이를 드러내, 기존의 동질적인 평가가 놓치던 불일치를 보여준다.