Papers·5일 전
Crafter: 다중 에이전트로 과학 그림 생성 및 SVG 편집 — PaperBanana-Bench 대비 12% 향상
Hong Kong Polytechnic University 팀이 과학 논문용 figure 생성을 위한 다중 에이전트 시스템 Crafter와 SVG 편집기 CraftEditor를 공개했습니다. 기존 단일 에이전트 방식 대비 PaperBanana-Bench와 CraftBench에서 각각 12%, 18% 향상된 성능을 보였으며, raster 출력을 편집 가능한 SVG로 변환하는 기능도 제공합니다. 단, 8x A100 환경 기준이며 코드와 벤치마크는 공개되었습니다.
과학 figure 생성을 위한 다중 에이전트 시스템 Crafter와 SVG 편집기 CraftEditor, 그리고 벤치마크 CraftBench를 소개합니다.
핵심 결론
- 성능 — PaperBanana-Bench에서 기존 단일 에이전트 대비 12% 향상, CraftBench에서 18% 향상.
- 태스크 — 과학 figure 생성 및 raster-to-SVG 변환.
방법
- 다중 에이전트 — Crafter는 여러 에이전트가 협력하여 figure를 생성하며, figure 유형과 입력 조건에 관계없이 동일한 아키텍처로 동작합니다.
- SVG 변환 — CraftEditor는 동일한 패턴으로 raster 출력을 편집 가능한 SVG로 변환합니다.
- 벤치마크 — CraftBench는 3가지 figure 유형과 4가지 입력 조건을 포함하며, 인간 평가 주석이 포함되어 있습니다.
한계·조건
- 환경 — 8x A100 GPU 기준으로 벤치마크 수행.
- 코드 — GitHub에 코드와 벤치마크 공개 완료.
- 범위 — 3가지 figure 유형(bar chart, line chart, scatter plot)에 한정.
편집자 한 줄
다중 에이전트 접근이 figure 생성에서도 효과적임을 보여주는 사례입니다. SVG 변환 기능은 실제 연구자에게 유용할 만합니다.
- #multi-agent
- #figure-generation
- #svg
- #scientific-papers
- #benchmark
Haozhe Zhao