VaaWIT: 다국어 웹 이미지 번역을 위한 시각 인식형 대형 언어 모델 적응
VaaWIT: Visual-Aware Adaptation of Large Language Models for Multilingual Web Image Translation
TL;DR AI
1분핵심 요약
연구진은 웹 이미지 안의 다국어 텍스트를 번역하기 위한 엔드투엔드 프레임워크 VaaWIT를 제안했다.
이 방법은 듀얼 스트림 어텐션과 비주얼-어웨어 어댑터를 결합해 세밀한 시각 정보와 언어 추론을 더 잘 통합한다.
VaaWIT는 3개의 공개 벤치마크에서 8개 과제에 대해 강력한 성능을 보였다.
이번 연구는 이미지 속 텍스트 번역의 핵심 공백을 메우며, 웹 콘텐츠의 접근성과 다국어 검색 개선에 도움이 될 수 있다.
같은 주제
