Pinokio - un programme pour les controler toutes (les IA)

ça fait un moment que je vous prépare le sujet, je n'ai pas eut encore le temps de finir ^^'

Pinokio - un programme pour les controler toutes (les IA)


Vous ne voulez pas dépendre une IA en ligne et préférez travailler en local ? Mais vous trouvez que c'est compliqué d'installer ce type de programme ?

Pinokio est fait pour vous !

La seule condition est de posséder une bonne configuration pour faire tourner ces IA génératrices car elles sont très gourmandes en ressources. Et aussi avoir la place sur le disque dur  

Pinokio vous propose d'installer de très nombreuses IA génératrices sur votre ordinateur, le choix est très vaste. Il se charge d'installer tout ce qu'il faut, vous n'avez pas à vous creuser la tête pour l'installation. De plus régulièrement ils rajoutent des IA dans le programme d'installation. De quoi faire le bonheur de tout le monde.

La page d'accueil du site de Pinokio liste toutes les IA qu'il est possible d'installer grâce à ce logiciel.

Il y a des IA génératrices d'images, des IA génératrices de musiques, des IA pour discuter, des IA pour générer de la 3D, des IA pour modifier des images existantes, etc.

Je vais vous expliquer en détail les IA les plus intéressantes (selon moi). J'évoquerais les autres également, libre à chacun d'installer ce qu'il veut ou ne veut pas.

Tout d'abord l'installation de pinokio est très simple. Cependant si vous désirez mettre la bibliothèques d'IA sur un disque précis, une fois l'installation de Pinokio terminée, il faut aller dans "sitting" et changer le chemin du dossier source (Home). Je vous conseille de l'installer sur un gros disque où vous avez la place, ça monte très vite, un peu à a manière de Daz Studio (pour ceux qui connaissent ^^ ). Si vous voulez le laisser sur le disque principal laissez tel quel.

Pour ceux qui ont une petite configuration, la plupart des IA présentées sont en général en ligne.

LES MODIFICATEURS DE VISAGES

Les IA intéressantes :

Reproduire un visage sur une image

Pour l'exemple, j'utiliserai ce visage de base sous différentes expressions, cadrages et lumières (réalisé sous daz studio)

visage de référence:

Pour l'image cible (l'image qui va être modifiée), j'utilise une vraie photo trouvée gratuitement ici :
https://www.pexels.com/fr-fr/photo/femme-porter-manteau-762020/

Photo cible:

J'utiliserais également une image générée par IA

image IA cible:

Et un de mes dessins

Dessin cible:

Pour chaque programme j'utiliserais le visage source collé sur l'image cible. Voyons à présent la liste des IA qui proposent cette fonction.



FaceFusion 2.3 :
permet de réaliser des deepfake. Il gère les images et les vidéos - Le rendu sera le même que l'image ou la vidéo de départ. Je trouve les images de mauvaise qualité, même si on utilise de grandes images (peut-être parce que c'est juste une démo ?) - on n'utilise pas de prompt, uniquement des images ou vidéos. Il est possible d'utiliser directement sa webcam pour changer de visage en direct.

Pour le tester en ligne - tuto 1 - tuto 2

exemples:

Pour les exemples de vidéos il y en a pas mal sur youtube.

PhotoMaker :
De très jolies images à partir d'un visage. 10 styles sont proposés. Les images sont de bonne qualité.
! ne pas oublier de mettre "img" dans le prompt. Images en 1024x1024
Pour tester en ligne (limite d’essais)

Mon prompt de base

Code:

a woman, realistic photo, she walks in the street, she is dressed in a modern way, hyperrealistic photo, details, American frame img

exemples:

IP-Adapter-FaceID Plus :
Il y a 2 style : Photorealistic et Stylized.
- En mode Photorealistic, le visage obtenu sera dans le même sens et même cadrage que le visage de base. Il réutilisera la même coiffure également (problème avec mon visage de base daz studio qui était chauve ^^' ). La taille de l'image finale sera de la même taille que l'image de base.  Plus fidèle pour réaliser des photos.
- En mode Stylized le personnage pourra avoir une autre pose et un autre cadrage, et la coiffure sera moins identique à cette d'origine.

Pour les deux models les images seront de 512x512. Le rendu est très rapide si on compare avec d'autres générateurs. A tendance a reprendre le même style que l'image source.

à tester en ligne

exemples:

à suivre

LES GENERATEURS D'IMAGES

à suivre

LES GENERATEURS DE TEXTES


à suivre 3

LES GENERATEURS DE MUSIQUES


à suivre 4

LES GENERATEURS DE VOIX


à suivre 5

LES GENERATEURS DE VIDEOS


à suivre 6

LES GENERATEURS DIVERS


à suivre 7

Ceux que je n'ai pas retenus (liste)


- instant ID (image via photo) (trop long)
- AudioSep (separation musique voix) (pas très convainquant)
- OpenVoice (en anglais uniquement)
en ligne : https://huggingface.co/spaces/myshell-ai/OpenVoice
- dreamtalk (pas très efficace, bugs d'images et de son personnels)
- SDXL turbo (bon qu'avec les photos de base, pas de prompt negatif)
- Stable Video Diffusion (je comprends pas ce qu'il faut faire)
- bark voice clone (voix avec un accent anglais même si la voix est française)
- Diffusers SDXL Turbo (images trop basse qualité, pas possible random)
- Realtime stablediffusion (ne se lance pas)
- STYLEALIGNED (imagestoimage & text - beaucoup troooooooop long)

Excellente série de tutos ! Merci !
Jusqu'à présent j'ai surtout utilisé des générateurs en ligne pour des raisons de simplicité et de performance (et de temps)
Peut-être que ces tutos réussiront à provoquer le déclic qui me manque ?

Merci c est tout plein ce que que je cherche je teste ce Week end !!!