← Back to feed
Papers·1주 전

지리공간 파운데이션 모델, 152편 논문 감사 결과 46건의 10점 이상 평가 불일치 — 표준 평가 부재가 문제

지리공간 파운데이션 모델, 152편 논문 감사 결과 46건의 10점 이상 평가 불일치 — 표준 평가 부재가 문제

지리공간 파운데이션 모델(GFM) 문헌을 152편 감사한 결과, 같은 모델·벤치마크·프로토콜에서 10점 이상 차이나는 평가가 46건 발견됐습니다. 사전학습 데이터 설정이 다른 논문과 중복되지 않는 경우가 94/126편, 모델 가중치를 공개하지 않은 논문이 39%에 달해 비교·순위 평가가 사실상 불가능한 상황입니다. 저자들은 명명된 라이선스 가중치 공개, 공유 평가 도구, 분산 보고 등 6가지 구체적 기준을 제안하며, 이 문제가 개별 연구실의 잘못이 아니라 조정 실패(coordination failure)라고 지적합니다.

  • #geospatial
  • #foundation-models
  • #benchmark
  • #reproducibility
Isaac Corley

Comments

— 첫 댓글을 남겨보세요 —