Matrix-Game 4.0의 개요
Matrix-Game 4.0은 플레이 가능한 게임 월드를 위한 Skywork AI의 오픈 가중치 모델로, 2026년 10월 15일 추론 코드, 브라우저 데모, 게임 소스 코드, 가중치와 함께 공개되었습니다. 게임 전체를 상상하려 했던 이전 월드 모델과 달리, 게임플레이는 일반 게임 엔진에 맡깁니다. 엔진이 물리, 조작, 규칙을 처리하고 단순한 로우폴리 화면을 그리면, 인과적 비디오 모델이 그 화면을 몇 프레임씩 세밀한 프레임으로 다시 그립니다. Skywork는 이를 스트리밍 뉴럴 렌더링이라고 부릅니다.
장면마다 약 50억(5 billion) 파라미터의 체크포인트가 따로 있으며, Wan2.2-Fun-5B-Control에서 파인튜닝되었습니다. Wan2.2-Fun-5B-Control은 Alibaba의 Wan2.2 5B 비디오 모델을 기반으로 합니다. 제공되는 장면은 세 가지입니다. 3인칭 슈팅 게임인 Medieval Castle과 Ancient Egypt, 그리고 레이싱 게임인 City Racing입니다. 출력 해상도는 864 x 480 픽셀입니다.
가중치, sink 이미지, 게임 에셋은 Apache-2.0입니다. Wan과 umT5 부분은 각자의 Apache-2.0 조건을 따르며, 빠른 TAEHV 코덱은 MIT입니다. 학습 코드와 학습 데이터는 공개되지 않았습니다.
Matrix-Game 4.0, 쓸 만한 가치가 있습니까?
Matrix-Game 4.0은 비디오 월드 모델을 꿈처럼 느껴지게 만들던 문제, 즉 아무것도 제자리에 머물지 않는 문제를 해결합니다. 3월에 나온 Skywork 자체의 Matrix-Game 3.0을 포함한 이전 시스템들은 모든 프레임을 직전 프레임에서 예측했습니다. 그래서 몸을 돌리면 벽이 녹아내리거나 복도 구조가 바뀔 수 있었습니다. 4.0 버전은 월드를 실제 게임 엔진 안에 둡니다. 충돌, 점수, 물리는 일반 코드이고, 5B 모델은 엔진이 그린 것을 다시 그리기만 합니다. 지나온 문이 여전히 그 자리에 있는 것은 엔진이 그렇다고 정하기 때문입니다.
클립이 아니라 게임이 되게 하는 것은 속도입니다. Skywork의 GitHub 페이지에 따르면 864 x 480에서 RTX 5080으로 최대 초당 67프레임, RTX 5070 Ti로 58프레임이 나옵니다. 프롬프트를 고정하고 선택 사항인 SageAttention 백엔드를 쓴 상태에서, 비디오 입출력 없이 안정 상태로 측정한 값입니다. 모두 소비자용 카드이며, A100과 RTX 5090용 최적화 경로도 있습니다. 모델 카드는 더 신중합니다. 프레임 속도도, 소비자용 메모리에 들어간다는 것도 약속하지 않고 VRAM 수치도 공개하지 않으므로, GitHub의 수치는 개발사가 제시한 최선의 경우입니다.
주의할 점: 이것은 세 장면용 렌더러이지 게임 생성기가 아닙니다. 각 체크포인트는 자기 로우폴리 장면과 카메라 프로필에서만 작동하며, 사용자의 Unity 프로젝트에 연결할 수 없습니다. Skywork는 새로운 지오메트리, 빠른 카메라 움직임, 가림, 긴 세션에서 외형이 흐트러지고 지오메트리 오류가 생긴다고 밝힙니다. 또한 뉴럴 이미지는 게임플레이에 다시 반영되지 않으므로, 화면에 보이는 것과 실제로 부딪히는 것이 잠시 어긋날 수 있습니다. 학습 코드가 없으므로 새 게임에 맞추려면 파이프라인을 직접 다시 만들어야 합니다.
라이선스는 이 분야에서 가장 깔끔합니다. 가중치와 에셋에 적용된 Apache-2.0은 매출 상한이나 지역 제외 없이 상업적 사용을 허용하며, 이는 Tencent의 HY-World 2.0보다 넓습니다. 채택은 아직 적습니다. Hugging Face에서 좋아요 59개, 지난 한 달 다운로드 984회, GitHub 스타 2.8k개입니다.
결론: 이것은 바로 출시에 쓸 도구라기보다 지켜볼 아키텍처입니다. 게임을 만든다면, 일반 엔진 위의 뉴럴 렌더링이 이미 중급 카드에서 플레이 가능한 속도로 돌아간다는 점이 교훈입니다. 누군가 학습 레시피를 공개하는 날, 이것은 어떤 게임에나 쓸 수 있는 스타일 필터가 됩니다.
제 역할을 하는 곳
중견 게임 스튜디오의 그래픽 엔지니어
스타일화된 레벨에서 뉴럴 렌더링이 수작업 아트를 대체할 수 있는지 판단
RTX 5080에서 Medieval Castle 장면을 실행하고 로우폴리 엔진 프레임과 다시 그린 출력을 지연 시간과 흐트러짐 기준으로 비교합니다. 코드와 에셋이 Apache-2.0이므로 맞춤 라이선스에 대한 법률 검토 없이 프로토타입을 사내 도구에 넣을 수 있습니다.
월드 모델을 연구하는 박사 과정 학생
상태를 일관되게 유지하는 실시간 기준 모델 재현
기술 보고서(arXiv 2610.27999)와 공개된 세 체크포인트가 고정된 기준을 제공합니다. Wan2.2 기반 5B 모델, quality 프리셋에서 디노이징 2단계와 realtime 프리셋에서 1단계, 그리고 잠재 프레임 21개 분량의 어텐션 캐시입니다.
에이전시의 크리에이티브 테크놀로지스트
고객에게 브라우저에서 플레이 가능한 인터랙티브 데모 보여 주기
공개된 브라우저 데모가 City Racing 장면을 스트리밍합니다. 고객이 운전하고 충돌은 엔진이 처리하므로, 순수 비디오 모델이라면 깨졌을 방식으로 데모가 깨지지 않습니다.
도입 전 확인할 점
- 설정
- SkyworkAI/Matrix-Game을 클론하고 Matrix-Game-4 폴더의 v4 README를 따른 뒤, --repo-id Skywork/Matrix-Game-4.0으로 manifest 다운로더를 실행합니다. 다운로더가 각 파일의 SHA256을 확인하고 세 장면을 resources/models 아래에 놓습니다. 가중치는 그대로 쓸 수 있는 Diffusers 파이프라인이 아닙니다.
- 연동
- 세 장면용 게임 엔진이 함께 제공되며, 온라인 브라우저 데모와 A100, RTX 5090, RTX 5080, RTX 5070 Ti용 최적화 추론 경로(FP8 선형 레이어, 퓨즈드 커널, CUDA 그래프, 선택 사항인 SageAttention)가 있습니다.
- 데이터와 개인정보
- 전부 사용자의 GPU에서 실행됩니다. 가중치, sink 이미지, 게임 에셋은 Apache-2.0, TAEHV 코덱은 MIT입니다. 레이싱 오디오에는 CC0와 CC BY 3.0 자료가 포함되어 있어 크레딧 파일을 유지해야 합니다.
- 대규모 사용 시 비용
- API나 호스팅 서비스가 없으며, 비용은 플레이어 세션당 GPU 한 장입니다. Skywork가 공개한 가장 빠른 수치는 RTX 5080 기준입니다.
- 제한
- 각 체크포인트는 자기 장면과 카메라 프로필에 묶여 있음, 864x480 출력, 새로운 지오메트리, 빠른 카메라 움직임, 가림, 긴 세션에서 흐트러짐, 뉴럴 출력은 충돌에 영향을 주지 않음, 학습 코드와 데이터 없음.
좋은 점
- 게임 로직이 실제 엔진에 남아 있어 월드가 멋대로 바뀌지 않음
- 864x480에서 RTX 5080으로 최대 67 fps(개발사 수치, 안정 상태)
- Apache-2.0 가중치와 에셋, 상업적 사용 허용
- 추론 코드, 브라우저 데모, 게임 소스 모두 공개
아쉬운 점
- 함께 제공되는 세 장면과 카메라 프로필에서만 작동
- 학습 코드와 데이터가 없어 새 게임에는 자체 파이프라인 필요
- 빠른 움직임, 가림, 긴 세션에서 흐트러짐과 지오메트리 오류
- 공개된 VRAM 요구 사항 없음, 모델 카드는 프레임 속도를 약속하지 않음
추천 대상
소비자용 GPU에서 작동하고 관대한 라이선스를 가진 실시간 뉴럴 렌더링 예제를 원하는 게임 및 그래픽 연구자.
Matrix-Game 4.0 대안
Matrix-Game 4.0: 자주 묻는 질문
- Matrix-Game 4.0, 쓸 만한 가치가 있습니까?
- Matrix-Game 4.0은 게임처럼 플레이되는 첫 오픈 월드 모델입니다. 게임 자체가 되려는 시도를 멈추고 그래픽 카드의 화가가 되었기 때문입니다. 평점은 5점 만점에 3.9점입니다.
- Matrix-Game 4.0의 가격은 얼마입니까?
- 무료: 가중치, 게임 에셋, 추론 코드 모두 Apache-2.0. GPU 비용만 부담합니다.
- Matrix-Game 4.0의 단점은 무엇입니까?
- 함께 제공되는 세 장면과 카메라 프로필에서만 작동; 학습 코드와 데이터가 없어 새 게임에는 자체 파이프라인 필요; 빠른 움직임, 가림, 긴 세션에서 흐트러짐과 지오메트리 오류; 공개된 VRAM 요구 사항 없음, 모델 카드는 프레임 속도를 약속하지 않음.
- Matrix-Game 4.0에 적합한 사람은 누구입니까?
- 소비자용 GPU에서 작동하고 관대한 라이선스를 가진 실시간 뉴럴 렌더링 예제를 원하는 게임 및 그래픽 연구자.
- 팀이나 프로덕션 환경에서 Matrix-Game 4.0의 비용은 얼마입니까?
- API나 호스팅 서비스가 없으며, 비용은 플레이어 세션당 GPU 한 장입니다. Skywork가 공개한 가장 빠른 수치는 RTX 5080 기준입니다.
- Matrix-Game 4.0에 회사 데이터를 맡겨도 안전합니까?
- 전부 사용자의 GPU에서 실행됩니다. 가중치, sink 이미지, 게임 에셋은 Apache-2.0, TAEHV 코덱은 MIT입니다. 레이싱 오디오에는 CC0와 CC BY 3.0 자료가 포함되어 있어 크레딧 파일을 유지해야 합니다.
- Matrix-Game 4.0의 가장 좋은 대안은 무엇입니까?
- 저희가 리뷰한 것 중 가장 가까운 대안은 HY-World 2.0, LTX-2.5 및 Kling 4.0입니다.
답변 확인일: 2026년 11월 5일.