Oubliez le DLSS 5, Roblox Reality veut jouer à une toute autre échelle

Roblox a partagé un aperçu technique d’un projet interne appelé Roblox Reality. Encore très expérimental, il s’agit des bases d’un « changement fondamental dans la manière dont les mondes immersifs multijoueurs seront créés et vécus », à en croire la société. Le résultat peut rappeler le DLSS 5, mais la comparaison s’arrête rapidement dès que l’on entre dans les détails.

Au regard de la précédente image, ce mème Minecraft n'a plus l'air si délirant.

Une ébauche pour l'instant

Roblox Reality repose sur une architecture hybride qui mêle les capacités du Roblox Game Engine, du Roblox Cloud et du Super Upsampler, le Video World Model de Roblox. Les deux premières composantes se passent d’explications, mais sans doute pas la troisième. Contrairement à un moteur traditionnel où tout est défini explicitement (physique, règles, état du monde), un Video World Model repose sur un réseau d’IA qui tente de simuler un univers. Pour reprendre l’analogie du rêve présente dans le communiqué, un jeu vidéo actuel est une sorte de machine à engrenages parfaitement déterministe, tandis qu’un Video World Model s’apparenterait à un rêve interactif généré en temps réel.

En l’état, la mise en œuvre est toutefois loin d’être viable. Le communiqué souligne qu’en raison de limitations techniques spécifiques, ces mondes ne peuvent pas encore délivrer « une expérience multijoueur vaste et persistante ». Ces limitations incluent notamment des difficultés liées à l’application de règles strictes et à la persistance de l’état, en raison d’un manque de mémoire à long terme et de logique stable, ou encore au contrôle des entrées utilisateur. En outre, le processus reste coûteux en ressources. Roblox vise une sortie en 2K à 60 Hz en temps réel, mais précise que cette ambition relève pour l’instant d’un « défi en cours de développement ». Une version preview est attendue plus tard cette année ou au début de la suivante.

Pour entrer un peu plus dans les rouages, Roblox Reality vise donc à combiner un moteur de jeu basé dans le cloud, chargé de gérer une simulation structurée, avec des Video World Models fonctionnant en périphérie pour le suréchantillonnage visuel. L’état central du monde serait stocké sur les serveurs afin d’assurer la cohérence entre les clients, ainsi que la continuité dans le temps, les sessions et les jours. Ce mariage des trois composantes précitées doit « permettre aux créateurs de toutes tailles de concevoir et maintenir des mondes interactifs mêlant une fidélité visuelle et des animations sans précédent, tout en conservant les structures et la persistance traditionnelles, sans augmenter les coûts de développement ».

Concrètement, pour le rendu, des systèmes de niveau de détail (LOD) et de composition basés dans le cloud généreraient des assets haute fidélité, distribués via un réseau de diffusion de contenu (CDN). Le modèle vidéo de Roblox (Super Upsampler) utiliserait les images rendues et les données contextuelles du modèle pour produire des visuels stochastiques — comprenez, des images générées avec une part d’aléatoire contrôlé. Il fonctionnerait en périphérie pour chaque joueur grâce à une infrastructure GPU cloud-edge. Le client Roblox rendrait ensuite ce flux vidéo. À terme, Roblox envisage également la superposition d’un avatar upscalé rendu localement, « afin de maintenir une latence très faible pour les actions au premier plan ».

Roblox présente son projet à travers des vidéos issues de différents jeux, dont Grow a Garden et Summon Heroes (confessons notre méconnaissance de ce catalogue). Sur les mosaïques, la vidéo en haut à gauche correspond au contenu Roblox enregistré avec le moteur de rendu actuel. Celle en haut à droite représente les données 3D utilisées pour guider la génération vidéo. La vidéo en bas à gauche montre le modèle actuel de Roblox en laboratoire — il ne fonctionne pas en temps réel. Enfin, la vidéo en bas à droite est carrément la vision finale, celle fantasmée.