À l'aide de pinceaux IA, je crée des images colorées !

Maintenant, lorsque vous dessinez avec l’IA, vous n’avez plus besoin d’un croquis complet.

Chaque fois que vous effectuez un trait, l'IA vous remettra une "nouvelle mission" en temps réel

Elle complétera automatiquement les détails, les couleurs et la toile vierge.

Vous pouvez également contrôler le contenu et le style des images générées via des mots d'invite.

Par exemple, si vous ajoutez la phrase "Un homme portant un long manteau est debout sur la plage", l'IA ajuste immédiatement le sens de la peinture :

Le brouillon final est le suivant, et l'effet est très sympa.

Pas étonnant que les internautes aient dit qu'ils ne retrouvaient plus leur mâchoire tombée sous le choc.

Il s'agit du dernier projet populaire de peinture en temps réel d'IA, avec 18 000 visites sur Reddit.

Certaines personnes ont également déclaré que cette fois-ci, cela semble indiquer que l'IA pourrait aider les artistes humains à créer dans une plus grande mesure qu'à remplacer les humains.

Un seul script

L'effet ci-dessus est obtenu par un script Python.

En créant un canevas et un cadre de génération d'image, puis en envoyant le croquis après chaque trait à l'interface API d'Automatic 1111, vous pouvez dessiner en fonction des capacités de Stable Diffusion et ControlNet.

Parmi eux, Automatic 1111 est un framework hors ligne portable et déployable basé sur Stable Diffusion. Il encapsule l'interface utilisateur et certaines fonctions et peut utiliser Stable Diffusion via une interface visuelle.

De plus, l'effet de raffinement du mode gribouillage de ControlNet est également utilisé pour générer des images.

L'auteur rappelle que si vous souhaitez que ce script s'exécute normalement, vous devez vous assurer que vous pouvez appeler l'API du webui Automatic 1111, et que l'extension ControlNet a été installée et activée.

Vous pouvez obtenir différents modèles d'invite, de graine et ControlNet en modifiant le fichier payload.json.

En termes de vitesse de génération en temps réel, l'auteur a déclaré que la démo qu'il voit maintenant est le résultat d'une accélération 4 fois supérieure. La situation spécifique peut dépendre du niveau de votre carte graphique.

Tant d'internautes ont réagi après avoir regardé :

En temps réel ? Ma carte graphique dit que tu rêves.

1080 va encore me faire pleurer...

J'ai aussi calculé les effets possibles de chaque modèle de carte graphique :

La dernière fois que j'ai utilisé Automatic1111, J'ai utilisé 3080. Obtenez 12 itérations par seconde pour les images d'aperçu, donc de nombreuses itérations peuvent ne pas être nécessaires.

Donc, si vous utilisez 3080, vous pouvez obtenir un aperçu de l'image toutes les 1 à 2 secondes (3060 peut durer 3 à 4 secondes) ; si vous utilisez 4080 ou 4090, vous pouvez obtenir un aperçu en moins d'une seconde ;

Bien qu'il y ait encore des restrictions sur le matériel... mais cela n'affecte toujours pas tout le monde imagination.

Certaines personnes disent que c'est peut-être ainsi que de nombreux artistes créeront à l'avenir.

Certaines personnes disent que le futur est déjà là.

Qu'en pensez-vous ?

Adresse GitHub : https://www.php.cn/link/5c53292c032b6cb8510041c54274e65f

Lien de référence :

🎜🎜 #[1]https://twitter.com/thekitze/status/1648627002822254593?s=20

[2]https://www.reddit.com/r/StableDiffusion/comments/12pcbne/i_mad_a_python_script_the_lets_you_scribble_with/#🎜 🎜#

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!