NeRF : une technologie pour créer une scène 3D à partir de photos ?

Connaissez-vous NeRF ? Il s’agit d’un autre type d’IA est en pleine évolution, permettant de créer une scène en 3D à partir de quelques photos prises avec un smartphone. En français, NeRF signifie « champs de rayonnement neuronaux ». Concrètement, il s'agit d'un réseau neuronal capable de générer une scène en trois dimensions à partir de photos en deux dimensions. Si vous connaissez Immersive View de Google, alors vous connaissez la technologie NeRF, car c’est grâce à elle que le service du GAFAM de vue 3D très détaillée de plusieurs grandes villes a été créé. Et pas besoin de matériel de pointe pour l’utiliser. Aujourd’hui, il faut simplement prendre quelques photos avec son smartphone ou un drone sous différents angles, ou bien tourner une courte vidéo. Ensuite, le système NeRF génère la scène en 3D. On peut ensuite déplacer la caméra dans la scène comme dans un jeu vidéo, insérer des objets en 3D dans une autre scène changer l'arrière-plan. En somme, NeRF connaît une évolution de plus en plus rapide comme la mise au point de l’outil Instant NeRF de NVIDIA, capable de créer une scène en quelques millisecondes en Full HD. Des chercheurs de chez Google ont d’ailleurs publié Zip-NeRF, un service similaire mais encore plus rapide. Les utilisations possibles de cette technologie sont également très nombreuses, comme à l'université de Californie où un réseau NeRF et un modèle de langage ont été combinés pour créer LeRF, un système visant à identifier des objets dans une scène. Ses créateurs imaginent désormais pouvoir combiner leur invention avec ChatGPT pour repousser les limites du chatbot d’OpenAI. De son côté, une équipe de japonais travaille sur le rendu d'une scène en temps réel avec le moteur de jeu Unreal Engine pour incruster du décor toujours plus réel dans les jeux. À Singapour, une autre a également réussi à créer une IA baptisée HOSNeRF, capable de transformer une vidéo afin qu’on puisse la regarder sous n'importe quel angle, plutôt que d'être limité à des scènes statiques. Bref, l'engouement pour l’intelligence artificielle ne cesse de croître et le grand public va probablement croiser cette technologie de plus en plus souvent, comme au cinéma, en photographie et ainsi que dans les média classiques. Learn more about your ad choices. Visit megaphone.fm/adchoices