Skywork AI publie Matrix-Game 3.0

Skywork AI lance Matrix-Game 3.0, un modèle open source qui génère des jeux vidéo interactifs en temps réel à 40 FPS à partir d'une image et d'un texte.

Skywork AI lance Matrix-Game 3.0, un modèle capable de générer en temps réel des environnements vidéo interactifs à partir d'une image et d'un prompt texte. Le résultat est contrôlable via des actions clavier/souris, à la manière d'un jeu vidéo généré à la volée. La version 5B paramètres tourne à 720p et 40 FPS, avec une cohérence mémorielle maintenue sur des séquences d'une minute entière, y compris lors de changements de point de vue. Une version 28B MoE est également disponible pour des rendus plus qualitatifs. Le modèle a été entraîné sur un mélange de scènes Unreal Engine, de captures de jeux AAA et de données réelles. Le code, les poids et le rapport technique sont accessibles librement sur GitHub et Hugging Face.