Biarkan Lu Xun bertutur lidah dan Hepburn bermain hip-hop Satu lagi model video menjadi viral dan diasaskan oleh seorang doktor Cina dari Stanford.

Ahli pasukan semuanya dari Universiti Stanford, dan CTO juga peminat tegar Taylor Swift.

Medan video AI menjadi gila.

Karnival yang dicetuskan oleh Luma belum berakhir, ada lagi pencabar dalam bulatan video AI -

Proteus yang dihasilkan oleh pasukan Universiti Stanford.

Menurut laporan, Proteus ialah model asas kependaman rendah yang boleh menjana watak yang sangat realistik dan ekspresif.

Sebagai contoh, biarlah protagonis dalam lukisan terkenal dunia - Mona Lisa atau gadis dengan anting-anting mutiara - ketawa tidak terkawal, dengan ekspresi wajah yang semula jadi dan licin: Biar Audrey Hepburn berubah daripada wanita yang dulu Imej, bermain hip-hop dan rap:

Juga biarkan Profesor Snape dari "Harry Potter" menyanyikan "Despacito":

Proteus baru sahaja dikeluarkan, dan ramai orang besar menghantar surat "scongrattory" " ":

Saintis AI Jia Yangqing memuji bahawa kualiti avatar kecerdasan buatan masa nyata adalah sangat baik.

Saintis NVIDIA Jim Fan berkata bahawa projek ini mengagumkan.

Pelabur awal Brian Zhan menulis bahawa masalah terbesar dengan alatan video AI sedia ada, seperti Runway dan Pika, ialah mereka boleh menghasilkan halusinasi, terutamanya apabila menjana video yang mengandungi manusia. Apparate Labs membawa penjanaan video AI ke peringkat seterusnya dengan menyelesaikan masalah seperti koheren temporal dan ketekalan objek.

Mengarut! Lu Xun bercakap tentang pemutar lidah

Proteus ialah generasi baharu model asas untuk penjanaan ekspresi manusia masa nyata.

Anda mesti tahu bahawa model generasi yang paling maju dan berkuasa pada masa ini tidak dapat merealisasikan sepenuhnya penjanaan ekspresi manusia masa nyata.

Model sedia ada lambat dan gagal memberikan kawalan intuitif ke atas ekspresi muka dan pergerakan badan yang kompleks bagi watak yang dijana, dan mereka masih kurang realisme dan ekspresif.

Proteus menggunakan model penyebaran terpendam seni bina transformer yang inovatif memastikan kecekapan masa nyata yang tinggi Dengan pengoptimuman berterusan seni bina dan algoritma, Proteus boleh mencapai 100 bingkai sesaat di atas (100+ FPS).

Dalam erti kata lain, dengan hanya sekeping gambar yang ringkas, Proteus bukan sahaja mampu meniru ketawa manusia, merapu, menyanyi, berkelip mata, tersenyum dan bercakap, tetapi juga boleh melakukan ekspresi dan aksi yang lebih jelas.

Sebagai contoh, Lu Xun yang sentiasa serius bercakap tentang penyimpangan lidah:

atau meminta Madame Curie menyanyikan lagu "Le Festin" a capella: Atau mengadakan mesyuarat meja bulat saintis

Menurut pasukan R&D Proteus, mereka berharap Proteus boleh menjadi avatar visual yang boleh dikawal suara, menyediakan antara muka interaktif intuitif untuk entiti dialog kecerdasan buatan, dan serasi dengan lancar dengan banyak model bahasa besar pelbagai mod, menyediakan pelbagai Menyediakan perkhidmatan tersuai untuk senario aplikasi yang berbeza.. pembantu dan mengajar kelas fizik secara peribadi Remaja tidak perlu risau lagi kerana tidak dapat belajar sains dengan baik "

Sesetengah netizen berkata, saya sangat menyukainya, tahun ini pastinya tahun video AI. . .

Menurut laman web rasmi, ini telah dibangunkan oleh Apparate Labs di Stanford University. .

Ketua Pegawai Eksekutif dan pengasas bersama Dr. William Shen belajar di Jabatan Sains Komputer di Universiti Stanford, diselia bersama oleh profesor terkenal Silvio Savarese dan Leonidas J. Guibas.

Penyelidikan beliau merangkumi pelbagai bidang kecerdasan buatan, termasuk penglihatan komputer, robotik, grafik, model generatif dan kecerdasan yang terkandung. Kertas kerja beliau telah memenangi banyak anugerah, seperti memenangi Anugerah Kertas Terbaik di IEEE-CVPR dan menjadi finalis untuk Anugerah Kertas Pelajar Terbaik di RSS.

Sebelum ini, beliau juga menerima ijazah sarjana muda dalam bidang sains komputer dari Universiti Stanford dengan GPA cemerlang 4.0.

Ketua Pegawai Teknologi dan Pengasas Bersama Connor Lin juga merupakan pelajar cemerlang.

Dia belajar di Carnegie Mellon University untuk ijazah sarjana dan sarjananya, belajar di bawah Profesor Keenan Crane. Pada tahun 2020, beliau akan pergi ke Universiti Stanford untuk melanjutkan pengajian PhD dalam sains komputer. Beliau kini merupakan pelajar kedoktoran tahun empat, diselia bersama oleh profesor Leonidas Guibas dan Gordon Wetzstein.

Penyelidikan Connor Lin memfokuskan pada pengetahuan sedia ada 3D dan perwakilan saraf untuk pembinaan semula, penjanaan dan penyuntingan 3D Beliau disokong oleh Biasiswa Siswazah David Cheriton Stanford.

Semasa pengajian PhD, beliau telah menjalani latihan di Google Research, NVIDIA Research dan Adobe Research. Sebelum ini, beliau bekerja sebagai jurutera perisian di Google, bertanggungjawab untuk pembangunan mod potret untuk telefon Pixel.

Selain itu, lelaki ini mempunyai minat yang luas, suka melancong dan bersukan, memasak, badminton, berenang, permainan papan dan muzik Dia juga peminat tegar Taylor Swift

Suka. Connor Lin, ketua Saintis Linqi (Alex) Zhou juga merupakan pelajar kedoktoran di Universiti Stanford, diselia oleh Profesor Stefano Ermon.

Sebelum ini, Linqi Zhou menerima ijazah sarjana muda dalam sains komputer dan matematik gunaan daripada UCLA, diselia oleh Profesor Song-Chun Zhu dan Ying-Nian Wu.

Beliau terutamanya menjalankan penyelidikan dalam bidang penglihatan komputer dan pembelajaran mesin, dan komited untuk membina model yang boleh memahami dunia dengan cara yang tersusun dan berkemungkinan.

Pautan rujukan:

https://apparate.ai/stream.html

Atas ialah kandungan terperinci Biarkan Lu Xun bertutur lidah dan Hepburn bermain hip-hop Satu lagi model video menjadi viral dan diasaskan oleh seorang doktor Cina dari Stanford.. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!