Matrix-Game是什么?
Matrix-Game 是昆侖萬維開源的交互式世界基礎模型,具備生成完整、可交互游戲世界的能力,能精準響應人類操作指令,保持空間結構與物理規律一致性。該模型擁有 170 億參數規模,并基于自主構建的 Matrix-Game-MC 數據集進行訓練,涵蓋 2700 小時無標簽視頻與 1000 小時高質量帶操作標注數據。
Matrix-Game支持高保真畫面與復雜交互,性能在同類開源模型中領先,適用于游戲、具身智能訓練及虛擬內容創作等場景。
Matrix-Game 的亮點特性
- 高保真視覺表現:Matrix-Game生成的視頻畫面清晰、結構穩定,視覺質量優于現有開源世界模型,如 Oasis 與 MineWorld。
- 完整交互能力:Matrix-Game支持鍵盤、鼠標等人類控制指令,實現精細的移動、攻擊、跳躍和視角控制,交互自然流暢。
- 物理與空間一致性強:Matrix-Game具備物理規則理解能力,能還原遮擋、透視等真實世界現象,場景幾何結構連貫可信。
- 多場景泛化能力:除 Minecraft 場景外,還能擴展至城市、古建等多種復雜環境,適應不同類型的游戲與虛擬世界。
- 長視頻生成穩定:Matrix-Game支持多步連續生成,保持時序一致性,適合制作完整交互式劇情或連續游戲片段。
- 大規模訓練數據支撐:基于自主構建的 Matrix-Game-MC 數據集,融合 MineDojo 視頻與 Unreal 模擬數據,涵蓋超 3700 小時高質量交互樣本。
Matrix-Game 的應用場景
- 游戲開發:可用于自動生成高質量的游戲場景與互動內容,降低開發成本,加快原型設計和關卡構建效率。
- 具身智能訓練:為機器人或虛擬智能體提供真實、可控的交互環境,助力動作學習、任務規劃與決策測試。
- 影視與動畫內容創作:通過交互式世界生成技術,快速構建動態背景、場景動畫或視覺特效,用于電影、劇集或短視頻制作。
- 元宇宙與XR場景構建:支持3D沉浸式環境生成,可作為元宇宙平臺中虛擬世界的基礎建模工具,實現用戶可操控的虛擬體驗。
Matrix-Game的開源信息
- 項目主頁:https://matrix-game-homepage.github.io
- Github倉庫:https://github.com/SkyworkAI/Matrix-Game
- HuggingFace模型:https://huggingface.co/Skywork/Matrix-Game
- 技術報告:https://github.com/SkyworkAI/Matrix-Game/blob/main/assets/report.pdf
?版權聲明:如無特殊說明,本站所有內容均為AIHub.cn原創發布和所有。任何個人或組織,在未征得本站同意時,禁止復制、盜用、采集、發布本站內容到任何網站、書籍等各類媒體平臺。否則,我站將依法保留追究相關法律責任的權利。

