VFX-Workshop, 233 rue de la Croix-Nivert, 75015 Paris

Admission sur entretien, hors Parcoursup

contact@vfx-workshop.com

06 61 16 19 98

une passion pour la technique et les effets spéciaux

Images d’IA ? Du travail à venir pour les techniciens !

Ces derniers mois, les performances des logiciels utilisant l’intelligence artificielle pour créer des images ont progressé à pas de géant. Dall-e, Stable diffusion ou encore Midjourney sont les outils les plus populaires.

Par cette chronique nous ne souhaitons pas alimenter les polémiques mais réfléchir à ce que nous allons avoir à fabriquer avec la 3D, nous infographistes-techniciens-créatifs ?

Attention, nous dirigeons volontairement le regard vers certains types de visuels !

Créer des images

Pour obtenir quelque chose de ces IA, on fait appel a son imagination et on verbalise nos idées. On saisit une description sous forme de texte.

Quand on demande un rendu réaliste, ces logiciels ont la capacité à générer des images très riches, très fortes en ambiance. Les gammes de couleurs et les effets de lumière sont tout de suite très élaborés.

Les résultats sont 2D comme une sorte de peinture digitale. En regardant de plus près il y a encore de nombreuses aberrations. Ils peuvent aider à explorer rapidement un grand nombre de pistes, ce qui se fait déjà en studio.

Il y a encore du travail pour les transformer en Matte-Paintings !

L’importance de la vision artistique

Créer des personnages est une des capacités du “text-to-image”. Décrivez, générez… Explorez ! Mais comment cela fonctionne-t-il ?

Les algorithmes d’IA ne savent pas ce que sont un chat ou une grenouille… Ils “apprennent” en analysant des millions d’images de référence qui existent sur internet. Grâce à la description de chacune de celles-ci, ils identifient des formes, des motifs, des palettes de couleurs, des matières, des contrastes. Ils classent toutes ces caractéristiques en grandes bases de données multi-dimensionnelles.

Quand on demande un chat, l’algorithme se “rappelle” des différentes représentations de chat qu’il a mémorisé. Il crée une trame en puisant et en complétant des pixels issus de sa mémoire. On obtient donc un nouveau chat, plus ou moins réussi.

Une grenouille en costume du 19eme siècle ? Une référence à vos jouets préférés ? Vous serez sans doute étonnés par ce que ces logiciels peuvent générer !

Est-ce du character-design ? Sans-doute pas si on se contente d’une seule requête, mais si en voyant les résultats nous travaillons notre description pour l’améliorer, alors oui ! La vision de l’artiste a toute son importance !

Nous, infographistes 3D, on doit penser Modélisation, Grooming, Look-dev…

La question de la production

Quand on commence à isoler des composants, une robe ou des chaussures, on peut se rendre compte de la richesse des caractéristiques que ces algorithmes développent ! Ils “connaissent” les formes, les genres, les matériaux, certains détails.

En voyant ces résultats, on ne peut s’empêcher de réfléchir à la manière de les recréer en 3D.

Comment modéliser chaque élément sur Maya ou Blender, les patrons des vêtements sur Marvelous Designer, créer les textures sur Substance Painter, réaliser le grooming sur X-Gen ?

De la gestion des détails

Puisqu’on parle de matériaux, on peut aller encore plus loin dans les détails. Avec quelques mots bien choisis, on peut demander à l’IA de générer des motifs, d’organiser des objets entre eux, de jouer avec les textures…

Savez vous les intégrer dans un jeu vidéo ? Savez-vous les créer grâce aux systèmes procéduraux de Substance Designer ?

Véhicule original ?

L’IA, c’est une sorte de moteur de recherche qui vous montre des résultats reconstruits de manière itérative. Elle a dans ses données des millions d’images “nuages” de véhicules, de concept-cars et de prototypes !

Vous voulez créer la puissante voiture du méchant ? Jouez sur votre description, sur vos références, et vous trouverez des pistes pour les customiser à souhait ! Créer des véhicules avec l’IA peut nous permettre de nous affranchir de la représentation d’un véhicule de marque. Dans le résultat on croit le reconnaitre, mais non, celui-ci est nouveau.

Vous voulez un engin spatial ? Les algorithmes de l’IA iront puiser dans toutes ces références de la conquête de l’espace et sans doute aussi des films de science fiction…

La moto du futur ? Je vous laisse explorer !

Plus tard, si vous les voulez en 3D, j’espère que vous maitrisez le Hard-Modeling ou encore la modélisation procédurale !

Pour créer de nouvelles scènes ?

Faites référence au 7eme art, aux règles de composition d’image ! Encore une fois, ces logiciels n’y connaissent rien ! C’est nous qui lui demandons les choses !

Que voit-on dans ces derniers résultats ? Une ambiance, une émotion, un cadrage, une expression. Vous êtes réalisateur ? Cela vous inspire ?

Il vous faut maintenant “fabriquer” ce plan, cette séquence ! Comme l’IA décortiquez ces images en composants… Actrice, décors, lumière, cadrage, action… Vous êtes limités par les techniques de production physiques ? Alors les effets spéciaux numériques ont un grand rôle à jouer !

Et pour les trucs compliqués ?

Soyons bref, l’IA permet de manipuler des idées très complexes !

Vous avez intérêt à maîtriser Houdini ou avoir une bonne pratique des geometry-nodes dans Blender !

Regardons devant nous

Depuis toujours, les studios recherchent des personnes capables de fabriquer les choses. Matte-Painting, Modélisation, Grooming, Lookdev, shading, texturing, simulation, FX…

L’IA est là ! Elle génère une folie de détails !

Pour les fabriquer en 3D, il y aura intérêt a bien maitriser les outils, les techniques, et surtout, les combiner entre eux !

Remerciements

Les images utilisées pour illustrer cette chronique ont été générés par des passionnés, des professionnels de l’image… Nous les avons trouvées sur certains forums ou des groupes spécialisés sur internet.

Nous remercions ici les personnes qui les ont générées et en particulier :

Nous les remercions aussi pour leur relecture.

Comments are closed.