Sortie de la version runway de Sora : haute fidélité, super cohérence, les internautes Gen-3 Alpha ont choqué

Bien que la vidéo générée ne dure qu'environ 10 secondes, elle semble être comparable à tous les modèles de génération vidéo existants en termes de clarté, de détails, de cohérence des caractères, etc.

Tout à l'heure, la startup de génération vidéo AI Runway a lancé un nouveau modèle de base de génération vidéo Gen-3 Alpha. Le modèle peut créer des vidéos très détaillées avec des changements de scène complexes, plusieurs styles cinématographiques et une direction artistique détaillée.

Runway indique que le Gen-3 Alpha est le premier d'une série de modèles à venir. Les modèles de série sont formés sur une nouvelle infrastructure conçue pour une formation multimodale à grande échelle.

Gen-3 Alpha offre des améliorations significatives en termes de fidélité, de cohérence et de mouvement par rapport à Gen-2, et franchit une étape importante vers la construction d'un modèle mondial universel.

Dans le blog, Runway a souligné que toutes les vidéos de la démo ont été générées à l'aide de Gen-3 Alpha sans aucune modification.

De nombreux internautes ont dit que Runway nous avait encore une fois vraiment choqués : Runway est de retour !

Soumith Chintala, responsable de Pytorch, estime qu'une partie de la qualité de construction atteint le niveau de Sora.

Ensuite, apprécions l'effet généré par la vidéo Runway.

Invite : Reflets subtils d'une femme sur la vitre d'un train circulant à hyper-vitesse dans une ville japonaise. (Invite : Reflets subtils d'une femme sur la vitre d'un train circulant à hyper-vitesse dans une ville japonaise.) Conseils : Un astronaute court dans une ruelle à Rio de Janeiro. (Invite : un astronaute courant dans une ruelle à Rio de Janeiro.)

Comme vous pouvez le voir sur la démo, la vidéo de 10 secondes générée par Runway est excellente en termes de clarté, de détails, de cohérence des personnages et de fidélité. Très bien réalisée . Laissez les gens se demander : quand peut-il être utilisé ?

Contrôle de synchronisation précis

Gen-3 Alpha est formé pour des sous-titres hautement descriptifs et chronophages, permettant des transitions de scène imaginatives.

Conseils : Gros plan d'une fourmi qui sort de son nid. La caméra effectue un zoom arrière pour révéler le quartier derrière la colline. (Invite : Un plan très rapproché d'une fourmi sortant de son nid. La caméra recule, révélant un quartier au-delà de la colline.) Invite : Un drone FPV survole un château sur une falaise. (Invite : un drone FPV a traversé un château sur une falaise.)

Générez des personnages humains plus réalistes

Gen-3 Alpha excelle dans la création de personnages humains expressifs avec une variété de mouvements, de gestes et d'émotions.

Conseils : Il s'agit d'un portrait cinématographique grand angle d'un homme dont le visage est éclairé par la lumière. (Invite : un grand portrait cinématographique d'un homme dont le visage est éclairé par la lueur d'un téléviseur.) Invite : un homme chauve, triste, d'âge moyen, devient soudainement heureux parce qu'une couronne de cheveux bouclés et une paire de lunettes de soleil tombent soudainement sur Sur sa tête. (Invite : Un homme chauve, triste et d'âge moyen devient heureux lorsqu'une perruque de cheveux bouclés et des lunettes de soleil lui tombent soudainement sur la tête.)

Création artistique

Gen-3 Alpha est formé par des chercheurs scientifiques, un groupe interdisciplinaire Une équipe d'ingénieurs et d'artistes a travaillé ensemble pour permettre à Gen-3 Alpha de comprendre et d'interpréter une variété de styles artistiques et de terminologie cinématographique.

Conseils : La nuit, devant la fenêtre, une énorme créature étrange se promène dans la ville délabrée, et un lampadaire est faiblement éclairé. (Invite : regardez par la fenêtre une étrange créature géante marchant dans une ville délabrée la nuit, un seul réverbère éclairant faiblement la zone.)Invite : prise de vue en accéléré, traversant le couloir avec des lumières vacillantes, un tissu argenté volant dans tout le couloir. (Invite : prise de vue en hyperlapse à travers un couloir avec des lumières clignotantes. Un tissu argenté vole dans tout le couloir.)

Personnalisation de l'industrie

Runway a déclaré que la personnalisation des modèles de la série Gen-3 peut obtenir un look plus stylisé. look. Contrôle et personnages plus cohérents, optimisés pour des exigences artistiques et narratives spécifiques, etc.

Conseil : Prise de vue par-dessus l'épaule d'une femme qui court et regarde une fusée au loin. (Invite : photo par-dessus l'épaule d'une femme qui court et regarde une fusée au loin.) Invite : une photo de profil d'une femme, avec des feux d'artifice qui fleurissent au loin derrière elle. (Invite : une photo de profil d'une femme avec des feux d'artifice explosant au loin au-delà d'elle.) Au cours des derniers mois depuis la sortie de Sora, de plus en plus de modèles de génération vidéo sont apparus, comme le Kuaishou Keling récemment sorti. , Luma et la Gen-3 d'aujourd'hui. Mais malheureusement, nous ne pouvons pas expérimenter directement de nombreux produits.

Je crois que comme les grands modèles de texte, il y aura de plus en plus de modèles de génération vidéo, et nous pourrons essayer librement ces produits.

^{Lien du blog : https://runwayml.com/blog/introducing-gen-3-alpha/}

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!