Colorisation d'un dessin au trait avec une IA

Bonjour !

Je vous ai déjà présenté PromeAI  et son module Creative Fusion dans ce fil : PromeAI-creative-fusion
Pour rappel, Creative Fusion permet d'appliquer à une image de départ un style d'image, un mode de rendu et un prompt...

Je vous avais alors montré qu'en réduisant la force d'application du style au plus bas on obtenait un résultat proche des images de départ.

Cette méthode ouvre la porte à de nombreuses possibilités comme, dans l'exemple précédent, la création d'images (de BD) complètes et stylées à partir de personnages 3D sommairement mis en scène sans forcément avoir besoin d'un décor 3D.

Une autre possibilité, permise par cette méthode, est la colorisation très rapide d'images au trait complexes.

Pour les besoins de cet exemple, j'ai commencé par générer, avec MidJourney v6, cette image au trait :


Je l'importe dans PromeAI-creative-fusion et je génère une nouvelle image, sans prompt, en choisissant un style et une force de style minimale :


Dans un logiciel de retouches de photos quelconque (ici GIMP), je superpose cette image à l'image de départ en noir et blanc, en lui ajoutant un canal alpha et en modifiant son mode d'affichage :


En choisissant un autre style on obtient d'autres résultats :



Ces résultats sont obtenus une manipulation minimale, à la fois dans PromeAI-creative-fusion et dans Gimp.
On peut même, si le résultat nous convient, utiliser directement l'image de PromeAI sans la superposer à l'image au trait.

Les possibilités de paramétrages, dans PromeAI et dans Gimp (ou autre) sont très nombreuses (sans même parler de l'utilisation des prompts).
En prenant le temps d'essayer et de trouver les paramètres qui nous conviennent des deux cotés, on peut obtenir une méthode de colorisation fulgurante de nos cases de BD (en tout cas, pour le plus gros du travail avant finalisation !)

Intéressant
c'est un peu la méthode que j'utilise en partant d'un rendu Poser Daz
et en la passant dans divers filtre sur Photoshop
avec masque de fusion
et en gardant l'image de départ pour la luminosité à la fin
Faut absolument que je teste ça

Je serais curieux de voir un résultat de mise en couleur via IA, mais sur un dessin au trait non générée par IA, c'est possible ?

Sur ton dessin de départ, l'IA à pas mal merdouiller sur certains traits, du coup la mise en couleur est un peu aléatoire, les ombres et la lumière ne sont pas vraiment raccord...
Par contre, sur un dessin en ligne claire, ça devrait être intéressant, mais est-ce que l'IA peut contrôler la source de lumière et les ombres ?  

Ceci dit, je réagis en tant que novice au niveau IA et j'avoue être un peu perdu, tout ça va trop vite pour ma petite caboche...     

Metal-Hurlant a écrit:Je serais curieux de voir un résultat de mise en couleur via IA, mais sur un dessin au trait non générée par IA, c'est possible ?

C'est un peu le but ! Je peux tester sur un de tes dessins au trait si tu le poses ici...

.

Si tu veux, tu peux faire un essai sur ce dessin si ça te convient ?  

J'ai supprimé les aplats d'ombres au niveau des gris et les trames pour ne garder que la ligne claire...

Metal-Hurlant a écrit:Si tu veux, tu peux faire un essai sur ce dessin si ça te convient ?

Quelques variations:

Si tu as besoin de plus d'infos, dis-le moi...

Merci d'avoir pris un peu de ton temps sur les essais ! ^^

Surprenant et déroutant à la fois, malgré le manque de suivi de la couleur sur les habits et les cheveux, j'aime bien les essais 1, 4, 6, 12, 14, 19, 30, 31 et 37...

Ceci dit, on va utiliser la mise en couleur traditionnelle pour notre collaboration sur la BD, il y a encore trop d'aléatoire avec l'IA