Benutzen Sie KI, um sich in die Animation hineinzuversetzen, die in drei Tagen mehr als 1,5 Millionen Aufrufe erhielt. Professioneller Animator: Ich hatte Angst.

Nehmen Sie einfach ein Video auf und die KI fügt Sie perfekt in die Animation ein!

Ob Linien, Farben oder Licht- und Schattendarstellung, es entspricht genau dem realistischen Stil in amerikanischen Comics. Auch die Animation ist zart und flüssig und die Bildrate ist offensichtlich nicht niedrig:

Die Produktion eines solchen Films umfasst 120 VFX-Aufnahmen (Wie viel Aufwand muss man in die Animation visueller Effekte investieren)?

Nur 3 Personen reichen aus und es ist kein Kostüm- oder Requisitenteam erforderlich.

Im Gegensatz dazu erforderten viele zuvor gedrehte Blockbuster-Animationsspezialeffekte oft einen hohen Aufwand, und gut gemachte Teams zählten sogar Hunderte von Leuten.

Nachdem dieser Anime auf YouTube veröffentlicht wurde, erhielt er in drei Tagen mehr als 1,5 Millionen Aufrufe und mehr als 110.000 Likes.

Es gibt schon Maler, die nach der Lektüre Angst haben:

Ich habe mein Leben der Malerei gewidmet... Diese werden jedoch in ein paar Jahren ersetzt.

Einige Internetnutzer hatten das Gefühl, dass ihr „Kindheitstraum wahr geworden“ sei:

Als ich jung war, dachte ich immer, dass Animationen auf echten Videos basieren. Jetzt, wo ich das sehe, finde ich es super cool.

Also, wie entsteht so ein Anime?

Wie verwende ich KI, um eine Animation zu erstellen?

Der Prozess ist in drei Teile gegliedert.

Der erste Teil besteht darin, KI zu verwenden, um Anime-Charaktere zu erstellen und die Beziehung zwischen ihr und den Schauspielern herzustellen. Der zweite Teil besteht darin, Animationsszenen zu erstellen und anzupassen.

Werfen wir einen Blick auf den ersten Teil der Verwendung von KI zum Neuzeichnen von Charakteranimationen. Dieser Teil wurde mit Stable Diffusion abgeschlossen und zur Feinabstimmung wurde das von Google eingeführte DreamBooth-Diffusionsmodell verwendet.

Nehmen Sie diesen Charakter im Anime als Beispiel. Die obere linke Ecke ist der Schauspieler-Prototyp und die untere rechte Ecke ist der von der KI erstellte Anime-Charakter:

Dies kann nicht durch direktes Einfügen des Videorahmens erreicht werden Rahmen in stabile Diffusion. Der Effekt kommt zum Vorschein.

Um sicherzustellen, dass der Animationsstil des Charakters die gewünschte Wirkung erzielt, haben die Autoren eine große Anzahl von Charakter-Screenshots aus dem klassischen Anime „Vampire Hunter D“ aus verschiedenen Blickwinkeln gesammelt und der KI zugeführt:

Gleichzeitig muss die KI verschiedene detaillierte Merkmale realer Menschen vom Gesicht bis zum Körper lernen und sich daran erinnern.

Daher ist es notwendig, vorab eine große Anzahl von Fotos der Schauspieler unter unterschiedlichen Lichtverhältnissen, mehreren Blickwinkeln und verschiedenen Aktionen aufzunehmen:

Auf diese Weise sieht die KI die Schauspieler im Video , es kann schnell „Vampire Hunter“ D“ verwenden, ist die Grundlage des Malstils und zeichnet Charaktere im Anime-Stil, die wie Schauspieler aussehen.

Bei einigen Gesichtsvergrößerungsaufnahmen, die schwer zu kontrollieren sind, wird ControlNet auch zur weiteren Steuerung der erzeugten Effekte verwendet.

Allerdings gibt es immer noch ein Problem mit Animationen, die direkt von KI generiert werden.

Auch wenn der Unterschied zwischen den Frames nicht groß ist, ist die Verbindung nicht vollständig stimmig. Einige „immer wieder springende“ Haarspitzen und Licht- und Schattendetails führen dazu, dass das Bild verrückt flimmert:

Die Autoren dachten daran, DEFlicker zu verwenden Um Flimmern zu vermeiden, löst das Plug-in dieses Problem und senkt die Bildrate leicht, um ein flüssiges Bild zu gewährleisten.

Der zweite Teil besteht darin, die Szene zu generieren. In diesem Teil verwendeten die Autoren direkt die Unreal Engine und einige der mitgelieferten 3D-Modelle, um den Animationshintergrund zu erstellen.

Dieser rotierende Hintergrund sieht zum Beispiel sehr cool aus:

Der Hintergrund wird durch Kombinieren einer großen Anzahl von Szenenfotos und schnelles Scrollen erstellt:

Der letzte Teil ist das Polieren nach der Synthese.

Dieser Teil wurde vom Team selbst erstellt. Einerseits haben sie dem Video einige 3D-Modelle (z. B. flackernde Kerzen) hinzugefügt, um das Eintauchen in die Charaktere zu erhöhen:

Andererseits haben sie hinzugefügt viele Retro-Visuals Die Spezialeffekte lassen die Animation viel anspruchsvoller aussehen:

Schließlich gibt es noch diese Animation, die mit Hilfe von KI erstellt wurde.

Erstellte das Parodie-Spezialeffektvideo von Boston Dynamics.

Das Team hinter dieser Animationskreation, Corridor Crew, stammt aus einem amerikanischen Produktionsstudio namens Corridor Digital.

Corridor Digital wurde 2009 gegründet. Im Laufe der Jahre hat das Unternehmen viele beliebte Kurzvideos mit Schwerpunkt auf Spezialeffekten erstellt.

Der bekanntere ist der „Atlas‘ Counterattack“ aus dem Jahr 2019 (New Robot Can Now Fight Back!), der den Boston Dynamics-Roboter gefälscht hat.

Im Video wurde Atlas wiederholt von Menschen gemobbt und misshandelt, konnte es schließlich nicht mehr ertragen und startete einen Angriff auf Menschen:

△Quelle: „Bosstown Dynamics“ (Dog Head)

Dieses Video galt einst als echtes Leck im Filmmaterial von Boston Dynamics, bis Corridor Digital dies dementierte.

Anschließend widerlegte Boston Dynamics die Gerüchte auch offiziell und sagte, es handele sich lediglich um ein von Corridor Digital produziertes CGI.

Das Corridor Crew-Team von Corridor Digital Studio ist für die Erstellung von „Enthüllungsprogrammen“ verantwortlich, die speziell die Spezialeffekte und produktionstechnischen Prozesse hinter verschiedenen Blockbustern erklären. Die Teammitglieder werden einige Fernsehserien und Filme zeigen und das Bildmaterial diskutieren und aufschlüsseln Effektaufnahmen.

Sie haben auch viele Spezialeffektkünstler und Schauspieler als Gäste in die Show eingeladen, um ihre Reaktionen auf verschiedene Spezialeffekte zu beobachten.

In Bezug auf die vom Team produzierte KI-Animation machten sich einige Internetnutzer lustig:

Wie wäre es, wenn Sie das nächste Mal Animatoren einladen würden? Schauen Sie sich ihre Reaktionen auf diesen KI-Anime an.

Was halten Sie also von dem Animationseffekt der KI? ​

Referenzlink:

[1]​​https://www.php.cn/link/f3957fa3bea9138b3f54f0e18975a30c​​

[2]​​https://www.php.cn/link/ 532435c44bec236b471a47a88d63513d​​

[3]https://twitter.com/bilawalsidhu/status/1631043203515449344​

Das obige ist der detaillierte Inhalt vonBenutzen Sie KI, um sich in die Animation hineinzuversetzen, die in drei Tagen mehr als 1,5 Millionen Aufrufe erhielt. Professioneller Animator: Ich hatte Angst.. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!