L’amélioration donne à GRAND THEFT AUTO un aspect photoréaliste

L’original Super Mario Bros. était autrefois le summum de la technologie des jeux vidéo. À peine 35 ans plus tard, nous avons des graphismes dans le jeu qui semblent presque réels. Presque. Malgré des sauts monumentaux dans le rendu et l’esthétique, même les meilleurs jeux ne peuvent pas vraiment passer pour des images réelles. Mais cela pourrait ne plus être vrai pour longtemps. Une entreprise a créé un amplificateur de photoréalisme qui utilise l’apprentissage automatique pour créer des jeux comme Grand Theft Audio V ressemblent à des images réelles filmées dans les rues de la ville.

Ce processus n’est peut-être pas seulement l’avenir des jeux vidéo ; cela pourrait aussi être l’avenir du cinéma.

Laboratoires Intel a partagé un didacticiel vidéo (que nous avons découvert pour la première fois sur Gizmodo) montrant comment fonctionne son nouveau programme d’amélioration du photoréalisme. À l’aide de techniques d’apprentissage automatique, il modifie les images de jeux vidéo pour les rendre réalistes. Le processus réel est, comme vous pouvez l’imaginer, beaucoup plus complexe que de simplement exécuter des images rendues via un programme d’amélioration de photos. Laboratoires Intel explique :

« Les images sont améliorées par un réseau convolutif qui exploite les représentations intermédiaires produites par les pipelines de rendu conventionnels. Le réseau est formé via un nouvel objectif accusatoire, qui fournit une supervision forte à plusieurs niveaux de perception. Nous analysons les distributions de disposition des scènes dans les ensembles de données couramment utilisés et constatons qu’elles diffèrent de manière importante. Nous émettons l’hypothèse que c’est l’une des causes de forts artefacts qui peuvent être observés dans les résultats de nombreuses méthodes antérieures. Pour résoudre ce problème, nous proposons une nouvelle stratégie d’échantillonnage des patchs d’images pendant l’entraînement. Nous introduisons également plusieurs améliorations architecturales dans les modules de réseau profond utilisés pour l’amélioration du photoréalisme. Nous confirmons les avantages de nos contributions dans des expériences contrôlées et signalons des gains substantiels en stabilité et en réalisme par rapport aux récentes méthodes de traduction d’image à image et à une variété d’autres références.

Un écran partagé de Grand Theft Audio, avec des séquences de jeu réelles sur la droite et une image réaliste améliorée sur la gauche, les deux montrant une rue de la ville avec des montagnes au loinLaboratoires Intel

Si vous comprenez parfaitement tout cela, vous pourriez être qualifié pour travailler pour Laboratoires Intel. (Vous voudrez au moins lire leur document d’accompagnement et visiter le site officiel du programme.) Mais le concept général est facile à comprendre. De même qu’il pourrait être utilisé pour différents jeux. Pour ça GTAV exemple, la société a utilisé des images d’une ville allemande de Cityscapes Dataset comme base. Ils ont aidé le programme à transformer les graphiques rendus en quelque chose qui semble réel. Les résultats sont frappants. Grand Theft Auto V passe de l’apparence d’un jeu moderne à l’impression de voir par les yeux d’une personne réelle (portant des lunettes de soleil) conduire une voiture dans le monde réel.

D’autres jeux vidéo auraient besoin d’un ensemble différent de vraies photos. Mais cette méthode serait toujours beaucoup plus rapide et plus rentable que d’autres programmes. Et c’est pourquoi cela a le potentiel de changer un jour la façon dont les films et les émissions de télévision sont filmés.

Un écran partagé de Grand Theft Audio V, avec des séquences de jeu réelles sur la gauche et une image réaliste améliorée sur la droite, les deux montrant une rue de la ville avec des montagnes au loinLaboratoires Intel

Au lieu de filmer d’énormes séquences d’action coûteuses, vous pouvez d’abord les rendre comme un jeu vidéo. Ensuite, exécutez les images via ce programme d’amélioration du photoréalisme. Vous n’aurez jamais à vous soucier d’avoir une bonne prise de vue ou d’obtenir la permission de fermer les rues de la ville. Plus important encore, vous n’auriez pas à mettre la vie des artistes en danger. Tout en fournissant une séquence qui semble réelle. Et cela pourrait donner aux films à petit budget d’énormes séquences qu’ils ne pourraient pas se permettre autrement.

Peut-être que cet amplificateur d’image d’apprentissage automatique ne révolutionnera pas les jeux vidéo demain. Ou remplacez immédiatement les CGI, les écrans verts et les humains. Mais cet avenir n’est peut-être pas si loin. Il n’y a pas si longtemps que Super Mario Bros. était aussi bon que possible.

Laisser un commentaire