Intel utilise l’apprentissage automatique pour rendre GTA V incroyablement réaliste

L’un des aspects les plus impressionnants de Grand Theft Auto V est à quel point San Andreas du jeu se rapproche de la vie réelle de Los Angeles et du sud de la Californie, mais un nouveau projet d’apprentissage automatique d’Intel Labs appelé «Enhancing Photorealism Enhancement» pourrait amener ce réalisme dans une direction étonnamment photoréaliste (via Gizmodo).

Faire passer le jeu à travers les processus créés par les chercheurs Stephan R. Richter, Hassan Abu Alhaija et Vladlen Kolten produit un résultat surprenant: un aspect visuel qui présente des similitudes indéniables avec les types de photos que vous pourriez prendre à travers la vitre avant maculée de votre voiture. Vous devez le voir en mouvement pour vraiment l’apprécier, mais la combinaison d’un éclairage légèrement délavé, d’une chaussée plus lisse et de voitures raisonnablement réfléchissantes vend simplement le fait que vous regardez la vraie rue depuis un vrai tableau de bord, même si c’est tout virtuel.

Les chercheurs d’Intel suggèrent qu’une partie de ce photoréalisme provient des ensembles de données qu’ils alimentaient leur réseau neuronal. Le groupe offre une explication plus approfondie et approfondie de la façon dont l’amélioration de l’image fonctionne réellement dans leur document (PDF), mais si je comprends bien, le jeu de données Cityscapes qui a été utilisé – construit en grande partie à partir de photographies de rues allemandes – a rempli de nombreux le détail. Il est plus sombre et sous un angle différent, mais il capture presque ce que j’imagine qu’une version plus fluide et plus interactive du défilement dans Street View de Google Maps pourrait être. Il ne se comporte pas tout à fait comme s’il était réel, mais il a l’air d’être construit à partir de choses réelles.

Les chercheurs affirment que leurs améliorations vont au-delà de ce que sont capables d’autres processus de conversion photoréalistes en intégrant également des informations géométriques provenant de GTA V lui-même. Ces «tampons G», comme les appellent les chercheurs, peuvent inclure des données comme la distance entre les objets du jeu et la caméra, et la qualité des textures, comme la brillance des voitures.

Bien que vous ne puissiez pas voir une mise à jour officielle du photoréalisme déployée sur GTA V demain, vous avez peut-être déjà joué à un jeu ou regardé une vidéo qui a bénéficié d’un autre type d’apprentissage automatique: l’upscaling de l’IA. Le processus d’utilisation de l’intelligence de l’apprentissage automatique pour faire exploser les graphiques à des résolutions plus élevées n’apparaît pas partout, mais a été présenté dans Shield TV de Nvidia et dans plusieurs projets de mod différents axés sur la mise à niveau des graphiques d’anciens jeux. Dans ces cas, un réseau de neurones fait des prédictions pour remplir les pixels manquants de détails d’un jeu, d’un film ou d’une émission de télévision à résolution inférieure pour atteindre ces résolutions plus élevées.

Le photoréalisme ne devrait probablement pas être le seul objectif graphique des jeux vidéo (à part l’artistique, cela semble un peu effrayant), mais ce projet Intel Labs montre qu’il y a probablement autant de place pour se développer du côté logiciel des choses qu’il y en a dans la puissance GPU brute des nouvelles consoles et PC de jeu.

Laisser un commentaire