SAM 3D Animal: 단일 이미지로 여러 동물 3D 재구성 — SMAL+ 기반 프롬프트 가능 프레임워크, 3개 벤치마크 SOTA

SAM 3D Animal은 단일 이미지에서 여러 동물의 3D 형태를 동시에 재구성하는 최초의 프롬프트 기반 프레임워크입니다. SMAL+ 파라메트릭 모델 위에 구축되어 키포인트나 마스크 형태의 프롬프트를 받아 복잡한 장면에서도 개별 동물을 구분합니다. 훈련을 위해 5,000장 이상의 이미지로 구성된 Herd3D 데이터셋을 새로 구축했으며, Animal3D, APTv2, Animal Kingdom 데이터셋에서 기존 모델 기반 및 비모델 기반 방법을 모두 능가하는 성능을 보였습니다. 다만 SMAL+ 모델의 표현력에 의존하므로 매우 이색적인 종이나 극단적인 포즈에서는 한계가 있을 수 있습니다.

• #3d-reconstruction
• #animal-modeling
• #smal
• #multi-instance
• #promptable