Versi landasan bagi Sora dikeluarkan: kesetiaan tinggi, konsistensi super, Gen-3 Alpha mengejutkan netizen

Walaupun video yang dihasilkan hanya kira-kira 10 saat, ia nampaknya setanding dengan semua model penjanaan video sedia ada dari segi kejelasan, perincian, konsistensi watak, dll.

Sebentar tadi, Runway penjanaan video AI melancarkan model asas generasi video baharu Gen-3 Alpha. Model ini boleh mencipta video yang sangat terperinci dengan perubahan adegan yang kompleks, pelbagai gaya filem dan arahan seni yang terperinci.

Runway berkata Gen-3 Alpha adalah yang pertama dalam siri model akan datang. Model siri dilatih mengenai infrastruktur baharu yang dibina untuk latihan pelbagai mod berskala besar.

Gen-3 Alpha menawarkan peningkatan ketara dalam kesetiaan, konsistensi dan pergerakan berbanding Gen-2, dan mengambil langkah penting ke arah membina model dunia sejagat.

Dalam blog, Runway menekankan bahawa semua video Demo dijana menggunakan Gen-3 Alpha tanpa sebarang pengubahsuaian.

Ramai netizen berkata bahawa Runway benar-benar mengejutkan kami lagi: Runway kembali!

Pytorch ketua Soumith Chintala percaya bahawa beberapa kualiti binaan mencapai tahap Sora.

Seterusnya, mari kita hayati kesan yang dihasilkan oleh video Runway.

Prompt: Pantulan halus seorang wanita di tingkap kereta api yang bergerak dengan kelajuan tinggi di bandar Jepun (Prompt: Pantulan halus seorang wanita di tingkap kereta api yang bergerak dengan kelajuan tinggi di bandar Jepun.) Petua: Seorang angkasawan berlari menyusuri lorong di Rio de Janeiro. (Prompt: Seorang angkasawan berlari melalui lorong di Rio de Janeiro.)

Seperti yang anda boleh lihat daripada demo, video 10 saat yang dijana oleh Runway sangat baik dalam kejelasan, perincian, konsistensi watak dan kesetiaan. . Biar orang bertanya: Bilakah ia boleh digunakan?

Kawalan masa berbutir halus

Gen-3 Alpha dilatih untuk sari kata yang sangat deskriptif, intensif masa, membolehkan peralihan adegan imaginatif.

Petua: Gambar jarak dekat seekor semut yang merangkak keluar dari sarangnya. Kamera mengezum keluar untuk mendedahkan kejiranan di belakang bukit. (Anjuran: Tangkapan jarak dekat ekstrem seekor semut yang muncul dari sarangnya. Kamera berundur ke belakang mendedahkan kawasan kejiranan di seberang bukit.) Prompt: Sebuah dron FPV terbang di atas sebuah istana di atas tebing. (Prompt: Dron FPV menembak melalui istana di tebing.)

Jana watak manusia yang lebih realistik

Gen-3 Alpha cemerlang dalam mencipta watak manusia yang ekspresif dengan pelbagai pergerakan, gerak isyarat dan emosi.

Petua: Ini adalah potret sudut lebar sinematik seorang lelaki yang wajahnya disinari cahaya. (Prompt: Potret lebar sinematik lelaki dengan wajahnya diterangi oleh cahaya TV.) Prompt: Seorang lelaki botak sedih pertengahan umur tiba-tiba menjadi gembira kerana mahkota rambut kerinting dan sepasang cermin mata hitam tiba-tiba jatuh pada Di atas kepalanya. (Prompt: Seorang lelaki botak sedih pertengahan umur menjadi gembira apabila rambut palsu rambut kerinting dan cermin mata hitam jatuh tiba-tiba di atas kepalanya.) pasukan jurutera dan artis bekerjasama untuk membolehkan Gen-3 Alpha memahami dan mentafsir pelbagai gaya seni dan istilah sinematik. Petua: Pada waktu malam, di luar tingkap, seekor makhluk aneh yang besar sedang berjalan di bandar usang itu, dan lampu jalan bercahaya malap. (Anjuran: Lihat keluar tingkap makhluk aneh gergasi berjalan di bandar kumuh pada waktu malam, satu lampu jalan yang malap menerangi kawasan itu.)

Ajuan: Penggambaran selang masa, berjalan melalui koridor dengan lampu berkelip-kelip, kain perak terbang di seluruh lorong. (Anjuran: Tangkapan Hiperlapse melalui koridor dengan lampu berkelip. Kain perak terbang di seluruh koridor.)

Penyesuaian industriRunway berkata penyesuaian model siri Gen-3 yang digayakan boleh mencapai lebih banyak model siri Gen-3 rupa. Kawalan dan watak yang lebih konsisten, dioptimumkan untuk keperluan artistik dan naratif tertentu, dsb. Petua: Tangkapan atas bahu seorang wanita berlari dan memerhati roket dari jauh. (Anjuran: Di atas bahu seorang wanita berlari dan memerhati roket di kejauhan.)

Prompt: Gambar profil seorang wanita, dengan bunga api mekar di kejauhan di belakangnya. (Prompt: Tangkapan profil sisi seorang wanita dengan bunga api yang meletup di kejauhan di luarnya.)

Dalam beberapa bulan lalu sejak pengeluaran Sora, semakin banyak model generasi video telah muncul, seperti Kuaishou Keling yang dikeluarkan baru-baru ini , Luma, dan Gen-3 hari ini. Tetapi malangnya, kami tidak dapat mengalami banyak produk secara langsung.

Saya percaya bahawa seperti model teks besar, akan ada lebih banyak model penjanaan video, dan kami akan dapat mencuba produk ini secara bebas.
Pautan blog: https://runwayml.com/blog/introducing-gen-3-alpha/

Atas ialah kandungan terperinci Versi landasan bagi Sora dikeluarkan: kesetiaan tinggi, konsistensi super, Gen-3 Alpha mengejutkan netizen. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!