모폴러블 객체 사전 기반 카메라 공간의 카테고리 수준 3D 대응관계
Category-Level 3D Correspondence in Camera Space via Morphable Object Priors
TL;DR AI
2분핵심 요약
연구진은 50개 가정용 객체 범주, 17.8만 장의 이미지, CAD 모델 기반 3D 키포인트 주석을 담은 새로운 벤치마크 HouseCorr3D를 공개했다.
이 데이터셋은 가림 여부와 대칭성 라벨까지 포함해, 범주 수준 3D 대응 학습을 더 정밀하게 평가할 수 있게 한다.
또한 Morpheus는 정규 형태, 변형, 자세를 분리해 공유 가능한 변형형(shape) prior를 학습하는 모델이다.
이를 통해 단일 이미지에서도 카메라 공간에서 의미적으로 일관된 3D 대응이 자연스럽게 형성되며, HouseCorr3D에서 최고 성능을 달성했다.
이 기술은 로보틱스와 AR/VR에서 객체 간 부품 대응과 이해를 개선하는 데 유용하다.