Gary Marcus "인간은 그 연구처럼 안 한다" — LLM 벤치마크 과대해석 경고

Gary Marcus 가 Cyrus Radfar 에게 "대부분의 인간은 그 연구처럼 행동하지 않는다; 실제 결과를 읽어라"고 받아쳤네요. LLM 이 인간을 넘었다는 일부 벤치마크 결과를 두고, 실험 조건이 비현실적이라는 지적. Marcus 의 전형적인 '벤치마크 회의론' 신호로, 논문 디테일을 직접 확인하라는 조언입니다.

• #gary-marcus
• #llm
• #benchmark
• #ai-skepticism

Gary Marcus@GaryMarcus