ETH Zurich, MMDG-Bench 공개 — 7,402개 모델로 평가한 멀티모달 도메인 일반화, 실제 개선은 미미

ETH Zurich 팀이 멀티모달 도메인 일반화(MMDG) 분야의 첫 통합 벤치마크 MMDG-Bench를 공개했습니다. 6개 데이터셋, 3개 태스크(행동 인식, 기계 고장 진단, 감정 분석), 9개 방법을 표준화된 환경에서 비교한 결과, 최신 MMDG 전용 방법들은 ERM baseline 대비 미미한 개선만 보였고, 어떤 방법도 모든 데이터셋·모달리티 조합에서 일관되게 우세하지 않았습니다. 특히 corruption과 missing-modality 시나리오에서 모든 방법이 성능이 크게 떨어졌으며, 일부 방법은 모델 신뢰도까지 저하시켰습니다. 95개 cross-domain 태스크에서 총 7,402개 신경망을 학습한 대규모 실험으로, MMDG가 여전히 해결되지 않은 문제임을 보여줍니다.

• #multimodal
• #domain-generalization
• #benchmark
• #eth-zurich