본문으로 건너뛰기
ReviewRamble

주간 브리프

AI 리뷰를 받은편지함으로.

  • 도구, 모델, MCP 서버, 저장소의 새 리뷰(결론부터)
  • 변경이 있을 때 다시 확인한 가격과 평점
  • 새로 발행된 분석 글

모델, 에이전트, MCP 서버, 그리고 정말 시간을 들일 만한 도구.

일주일에 한 통입니다. 각 브리프의 링크로 구독을 해지할 수 있습니다. 이메일 사용 방식

AI 뉴스와 연구

연구 ·

VibePrevisBench, Blender에서 움직이는 3D 장면을 만드는 코딩 에이전트 평가

Kling AI와 협력 대학의 프리프린트 VibePrevisBench는 코딩 에이전트에게 대본, 사진, 참조 영상을 AI 영상 생성기를 이끄는 Blender 애니메이션 장면으로 바꾸게 합니다. 242개 과제와 11개 에이전트 중 GPT-6 Astra가 77.7로 최고점을 받아 GPT-6.1 Sol 76.1, Gemini 4 Argon 75.0, Opus 5.5 74.1을 앞섰습니다. 에이전트들은 렌더링을 확인했지만 오류를 고치지 못했습니다.

AI 영상 생성기는 그럴듯하게 보이게 만드는 데는 능하지만 정확한 지시를 따르는 데는 약합니다. 차가 어디서 꺾는지, 카메라가 얼마나 높이 있는지, 문이 언제 열리는지 같은 것들입니다. 한 가지 해법은 먼저 배치, 움직임, 카메라를 정한 회색의 간단한 3D 애니메이션, 즉 프록시를 주고 모델이 그 위에 사실적인 세부를 그리게 하는 것입니다. Kling AI가 Tianjin University 등과 함께 낸 프리프린트 VibePrevisBench는 코딩 에이전트가 Blender에서 이런 프록시를 얼마나 잘 만드는지 시험합니다.

242개 과제는 각각 에이전트에게 대본, 사진 묶음, 이어 갈 장면의 첫 프레임, 참조 영상 중 하나를 지시로 줍니다. 에이전트는 Blender 코드를 써서 4D 장면, 즉 시간에 따라 변하는 3D 장면을 만들고 렌더링합니다. 채점은 두 부분입니다. 규칙 기반 검사는 코드를 다시 실행하고 내보낸 장면을 9개 차원에서 숨겨진 정답 사실과 비교합니다. 이어서 시각언어 모델이 통과한 사실이 영상에서 실제로 보이는지 판단합니다.

11개 에이전트 중 GPT-6 Astra가 77.7로 1위였고, GPT-6.1 Sol 76.1, Gemini 4 Argon 75.0, Claude Opus 5.5 74.1이 뒤를 이었습니다. 최하위는 61.1의 Muse Spark 1.3이었습니다. 붐비는 거리 장면은 모든 에이전트에게 가장 어려운 영역이었고, 이야기 전달은 가장 약한 시각 차원이었습니다. 저자들의 세 가지 발견은 이렇습니다. 공간과 카메라 움직임에 대한 시각적 이해가 에이전트 간 차이를 가르고, 모두 기본적인 카메라 작업과 연출은 해내지만 어려운 요청에서는 실패하며, 에이전트는 자신의 렌더링을 보면서도 잘못된 점을 거의 고치지 않는다는 것입니다.

비용 차이는 큽니다. Astra는 과제당 평균 32.59달러로, Opus 5.5의 7.82달러, GPT-6.1 Sol의 6.71달러, Gemini 4 Argon의 4.45달러를 크게 웃돌았습니다. 턴이 많을수록 점수는 낮은 경향이었습니다. MCP for Blender 등으로 에이전트를 통해 Blender를 다룬다면, 렌더링 결과를 지시와 항목별로 대조해 확인하게 하는 것이 실용적인 조언입니다.

주의할 점: 결과에 이해관계가 있는 영상 기업의 프리프린트이고, 시각 심판도 나름의 맹점을 가진 모델입니다. 프록시의 오류가 최종 영상으로 이어지는 예가 두 가지 제시됐지만, 그런 일이 얼마나 자주 일어나는지는 측정하지 않았습니다.

결론: Astra의 우위는 작고 비쌉니다. 과제당 약 32.59달러로 Opus 5.5의 7.82달러, GPT-6.1 Sol의 6.71달러보다 훨씬 비쌉니다. MCP for Blender 같은 도구로 Blender 작업을 한다면, 에이전트가 보기만 하고 고치지 않는다는 점이 더 쓸모 있는 경고입니다.

관련 리뷰:GPT-6 AstraClaude Opus 5.5MCP for Blender

출처: arXiv (Hugging Face Daily Papers)

다른 기사