Dans le cadre de la conférence GTC 2021, the 16 avril, Nvidia présente ses travaux de recherche sur la génération de modèles 3D à partir d’images 2D. Le projet s’appelle GANverse3D et dépend, as indicated by his name, d’un Generated Anti-Network (GAN), une machine technologie d’apprentissage qui se distingue par sa capacité àcréer” ”
Le plus célèbre d’entre eux est StyleGAN, qui vous permet de créer des images photoréalistes de personnes fictives Publié par Nvidia en décembre 2018, et a ensuite présenté GauGAN, qui vous permet de créer des panneaux à partir de croquis approximatifs, ou GameGAN, qui recrée une partie de Pac-Man par simple mimétisme visuel.
GANverse3D en diffère par le fait qu’il génère des modèles 3D à partir d’une seule image, tâche particulièrement complexe car l’image 2D ne montre pas tous les angles de l’objet, et donc le GAN doit le créer pour compléter le modèle. La difficulté du problème signifiait que seuls trois types de «things» ont été évoqués dans la recherche: les oiseaux, les chevaux et les voitures.Créer un modèle 3D de K2000
Le seul cas d’utilisation que Nvidia considère comme suffisamment solide pour le moment est celui des voitures, car elles ont une légère texture (par rapport à la fourrure de chat, for example) et ne se déforment pas en se déplaçant (contrairement à un arthropode).

Pour mettre en avant le nouveau GAN, la société a pris l’exemple du légendaire KITT, Pontiac Firebird avec sa propre conscience au cœur de la série télévisée K2000 (Knight Rider dans la version originale) Le modèle utilisé a été formé sur 55000 images de voitures (affichant angles de vision multiples)
Il est capable de distinguer différents éléments du véhicule, tels que les phares, les vitres ou les roues une fois la formation terminée, une image KITT suffit pour construire un modèle 3D Une fois les textures créées par les outils GAN, Omniverse et PhysX sont utilisées pour s’améliorer sa qualité et lui donner une vue plus réaliste, puis placez-le au cours de la conduite avec d’autres voitures pour produire une vidéo Au cours d’une formation GAN de plusieurs jours dans le centre de données, il ne faut que 65 ms pour déduire de l’image sur le GPU V100, selon Sanja Fiedler, directrice du Nvidia Research Lab à Toronto.

Utile pour créer des illustrations marketing
Comme le montre la vidéo et l’illustration de cet article, le résultat n’est pas d’une qualité visuelle exceptionnelle, mais il est toujours supérieur à ce qu’un réseau de type graphique inversé formé sur Pascal3D peut faire, après Nvidia et Richard Keres, qui dirige Omniverse chez Nvidia, «Lors de la création d’images promotionnelles, la voiture emblématique demande beaucoup d’efforts et d’attention, mais les éléments contextuels en arrière-plan n’ont pas besoin de beaucoup de détails», he explains.
GANverse3D est un moyen de créer rapidement des éléments d’arrière-plan gratuitement Il peut également s’appliquer à toute autre illustration nécessitant des voitures, comme les visions d’artistes pour des projets de développement urbain. Et comme GANverse3D fonctionne avec Omniverse, les modèles que vous générez peuvent être rapidement importés dans les outils de conception habituels des concepteurs.
Il est également possible d’utiliser StyleGAN pour créer des images réalistes de voitures qui n’existent pas déjà, et donc non soumises aux droits de propriété intellectuelle, puis d’utiliser GANverse3D pour en créer des modèles 3D non soumis au droit d’auteur Comme toutes les œuvres de Nvidia Research, le code GANverse3D sera publié au public Cela se fera dans un mois / p>

En utilisant GANverse3D, Nvidia a pu créer un modèle 3D d’une voiture à partir d’une seule image 2D.

Cinq ans après le lancement d’Oculus Rift, où est la réalité virtuelle? Où est-ce qu’elle va?

Nvidia, AI et rendu 3D

News – THAT – En utilisant GANverse3D, Nvidia a pu créer un modèle 3D d’une voiture à partir d’une seule image 2D

Source: https://www.usine-digitale.fr/article/avec-ganverse3d-nvidia-arrive-a-generer-un-modele-3d-d-une-voiture-a-partir-d-une-seule-image-2d.N1082999

Building on its expertise in the areas of digital, technologies and processes , CSS Engineering you in your most ambitious transformation projects and helps you bring out new ideas, new offers, new modes of collaboration, new ways of producing and selling.

CSS Engineering is involved in projects each customer as if it were his own. We believe a consulting company should be more than an advisor. We put ourselves in the place of our customers, to align we incentives to their goals, and collaborate to unlock the full potential their business. This establishes deep relationships and enjoyable.

Our services:

  1. Create professional websites
  2. Hosting high performance and unlimited
  3. Sale and video surveillance cameras installation
  4. Sale and Installation of security system and alarm
  5. E-Marketing

All our achievements here https://www.css-engineering.com/en/works/