UniSteer: 활성화 공간에서의 텍스트 유도 플로우 매칭을 통한 다목적 LLM 제어
UniSteer: Text-Guided Flow Matching in Activation Space for Versatile LLM Steering
TL;DR AI
1분핵심 요약
연구진은 LLM 활성값 위에 보편적 조건부 속도장을 학습하는 텍스트 기반 flow-matching 방식인 UniSteer를 소개했다.
이 방법은 활성 흐름을 역변환하고 다시 주입해, 자연어 조건으로 모델 출력을 activation space에서 제어한다.
UniSteer는 여러 제약이 있는 프롬프트를 처리할 수 있고, 재구성 에너지가 가장 낮은 라벨을 선택해 분류도 수행한다.
하나의 공유 메커니즘으로 행동 제어를 제공해, 태스크별 개입 모듈 없이도 활용할 수 있다는 점이 핵심이다.
