Kemas kini besar untuk ControlNet: Lukisan P yang tepat boleh dibuat dengan hanya bergantung pada kata-kata segera, mengekalkan gaya lukisan tidak berubah. Netizen: Kesannya setanding dengan model besar yang disesuaikan

Pemalam Resapan Stabil, "Induk kawalan perincian lukisan AI" ControlNet mengalu-alukan kemas kini utama:

Hanya gunakan gesaan teks untuk mengekalkan ciri utama imej dalam Di bawah premis , anda boleh mengubah suai butiran imej sewenang-wenangnya.

Sebagai contoh, berikan kecantikan perubahan gaya daripada rambut kepada pakaian dan ekspresi untuk menjadi lebih mesra:

Atau biarkan model bertukar dari gadis manis di sebelah kepada wanita dingin , arah badan dan kepala adalah , Latar belakang ditukar:

- Tidak kira bagaimana butiran diubah suai, "jiwa" gambar asal masih ada.

Selain gaya ini, ia juga boleh mengendalikan jenis anime dengan betul:

Blogger reka bentuk AI dari Twitter @sundyme berkata:

Kesannya lebih baik daripada yang dibayangkan!

Hanya satu gambar rujukan diperlukan untuk melengkapkan transformasi di atas, dan beberapa gambar hampir boleh mencapai kesan model besar tersuai.

Ahem, kawan-kawan dalam bulatan lukisan AI, bergembiralah, ada sesuatu yang menyeronokkan lagi.

(ps. Tiga rendering pertama adalah dari blogger @Olivio Sarikas, yang kedua dari blogger Twitter @sundyme)

Baharu di ControlNet: Terpelihara Imej asal fungsi retouching

Kemas kini di atas sebenarnya merujuk kepada prapemproses yang dipanggil "rujukan sahaja".

Ia tidak memerlukan sebarang model kawalan dan boleh terus menggunakan imej rujukan untuk membimbing penyebaran.

Penulis mengatakan bahawa fungsi ini sebenarnya serupa dengan fungsi "inpaint", tetapi ia tidak akan menyebabkan imej runtuh.

(Inpaint ialah fungsi lukis semula separa dalam UI web Stable Diffusion, yang boleh melukis semula kawasan yang tidak memuaskan yang telah ditutup secara manual.)

Sesetengah pemain berpengalaman mungkin mengetahui helah , iaitu menggunakan inpaint untuk meresap imej.

Sebagai contoh, anda mempunyai imej 512x512 anjing, dan kemudian ingin menjana imej 512x512 lagi menggunakan anjing yang sama.

Pada masa ini, anda boleh menyambungkan imej anjing 512x512 dan imej kosong 512x512 ke dalam imej 1024x512, kemudian gunakan fungsi inpaint untuk menutup bahagian kosong 512x512 dan meresapkan anjing dengan rupa yang serupa .

Dalam proses ini, kerana imej disambung secara ringkas dan kasar, dan herotan berlaku, kesannya secara amnya tidak memuaskan.

Dengan "rujukan sahaja" ia berbeza:

Ia boleh memautkan terus lapisan perhatian SD (iaitu "Resapan Stabil") kepada mana-mana imej bebas, jadi bahawa SD boleh terus membaca imej ini sebagai rujukan.

Dalam erti kata lain, jika anda ingin membuat pengubahsuaian sambil mengekalkan gaya imej asal, anda boleh menggunakan perkataan gesaan untuk beroperasi terus pada imej asal.

Seperti yang ditunjukkan dalam gambar contoh rasmi, tukar anak anjing berdiri kepada aksi berlari:

Anda hanya perlu menukar anda Naik taraf ControlNet kepada versi 1.1.153 atau ke atas, kemudian pilih "rujukan sahaja" sebagai prapemproses, muat naik gambar anjing itu, masukkan perkataan gesaan "anjing berlari di padang rumput, kualiti terbaik... ", dan SD akan menjadi Saya hanya akan menggunakan gambar anda sebagai rujukan untuk membuat perubahan.

Netizen: Ciri terbaik ControlNet setakat ini

Sebaik sahaja fungsi "rujukan sahaja" keluar, ramai netizen mula mengalaminya.

Sesetengah orang memanggil ciri ini sebagai ciri terbaik ControlNet setakat ini:

Muat naik gambar anime dengan pose watak, kemudian tulis gesaan yang nampaknya tidak berkaitan langsung dengan gambar asal. Tiba-tiba, kesan yang anda mahukan keluar dari imej asal. Ia benar-benar kuat, bahkan hingga mengubah peraturan permainan.

Juga dikenali sebagai:

Sudah tiba masanya untuk mengambil semua gambar tidak berguna yang dibuang sebelum ini dan memulihkannya.

Sudah tentu ada yang berpendapat ia tidak begitu sempurna (contohnya, anting-anting si cantik itu salah dalam rendering pertama. pada mulanya, dan dua gambar Rambut di dalam juga hilang) , tetapi netizen masih mengatakan bahawa "tujuan akhirnya tepat."

Berikut ialah kesan daripada percubaan tiga blogger Twitter, terutamanya dalam gaya anime Mari kita nikmatinya bersama-sama:

△Daripada @新宫ラリのAIイラストニュ

△

Dari @br_d, gambar asal ada di sebelah kiri

△

dari @br_d, yang sebelumnya adalah gambar asal

△

Dari @uoyuki667, gambar asal ada di sebelah kiri

Adakah ia menyentuh hati anda?

Atas ialah kandungan terperinci Kemas kini besar untuk ControlNet: Lukisan P yang tepat boleh dibuat dengan hanya bergantung pada kata-kata segera, mengekalkan gaya lukisan tidak berubah. Netizen: Kesannya setanding dengan model besar yang disesuaikan. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!