HiERO-StepG @ Ego4D Step Grounding Challenge: 계층적 활동 이해가 제로샷 스텝 그라운딩을 가능하게 한다

연구진은 약지도 계층적 행동 표현을 바탕으로 한 Ego4D 스텝 그라운딩용 제로샷 기법 HiERO-StepG를 제안했다.

이 시스템은 클러스터링으로 절차 단계를 찾고, 제약 조건과 후처리로 시간 예측을 더 정교하게 다듬는다.

리더보드에서 IoU 0.3 기준 R@1 56.27%를 기록했으며, 제출 시점에는 2위를 차지했다.

이 결과는 절차별 라벨 없이도 절차 영상의 단계 그라운딩이 가능해, 주석 비용을 줄일 수 있음을 보여준다.