搜索
首页科技周边人工智能用AI把自己画进动漫里,3天揽获150万+播放量,职业动画师:有被吓到

只需随手录制一段视频,AI就能把你完美放进动漫中!

图片

无论是线条、色彩还是光影呈现,都与美漫中的写实风格如出一辙,动画也是细腻流畅,帧数显然不低:

制作这样一部包含120个VFX(视觉效果)镜头的动漫,需要投入多少精力?

仅仅3个人就行,也无需服化和道具小组。

相比之下,此前拍摄的不少大片动画特效往往需要投入大量精力,制作精良的团队甚至达到上百人。

这部动漫被放到油管上后,三天就揽获了150w+播放量,11万+点赞。

图片

已经有画师看完感到害怕了:

我毕生致力于绘画……然而这些几年后就会被取代。

图片

还有网友感到“儿时梦想成真”:

当年我还小的时候,一直以为动画就是基于真实视频做出来的。现在看到这个,觉得超酷。

图片

那么,这样一部动漫究竟是如何制作出来的?

如何用AI制作一部动漫?

过程一共分为三个部分。

第一部分是用AI创建并生成动漫人物,建立它与演员之间的关联;第二部分是创作动漫场景;第三部分是合成并调整最终动漫效果。

先来看看第一部分的用AI改画人物动漫。这部分是用Stable Diffusion完成的,同时采用了谷歌推出的DreamBooth扩散模型进行微调。

以动漫中的这名角色为例,左上角是演员原型,右下角是AI创作出来的动漫角色:

图片

这可不是直接把视频一帧帧放进Stable Diffusion中就能做出来的效果。

为了确保人物的动漫画风达到他们想要的效果,作者们收集了经典动漫《吸血鬼猎人D》中的大量人物截图,各种角度都有,将它们喂给AI:

图片

与此同时,还需让AI学会并记住真人从面部到身体上的各种细节特征。

因此,要提前给演员拍摄不同光照、多个角度、各类动作下的大量照片:

图片

这样一来,就能让AI在看见视频中的演员时,迅速以《吸血鬼猎人D》为作画风格基础,画出演员长相的动漫风格人物来。

至于在某些不容易掌控的人脸放大镜头中,还采用了ControlNet进一步控制生成的效果。

图片

不过,直接用AI生成的动漫,还存在一个问题。

即使帧与帧之间的差异不大,衔接起来并不完全连贯,一些“反复横跳”的发梢和光影细节会导致画面疯狂闪烁:

图片

作者们想到用DEFlicker去闪烁插件解决这件事,同时稍微调低一点帧率,保证画面的流畅感。

第二部分就是生成场景了,这部分作者们直接用了虚幻引擎和里面自带的一些3D模型,来制作动漫背景。

例如这段看起来非常炫酷的旋转背景:

图片

背后就是将大量场景照片合成起来,快速滚动做成的:

图片

最后一部分就是合成之后的润色了。

这部分倒是团队自己完成的,他们在视频中一方面加入了部分3D模型(如一晃而过的蜡烛)来增加人物的沉浸感:

图片

另一方面添加了大量复古的视觉特效,使得动画看起来又精良了不少:

图片

最终就有了这部AI协助创作的动漫。

曾创作波士顿动力恶搞特效视频

这部动漫创作背后的团队Corridor Crew,来自一家叫做Corridor Digital的美国制作工作室。

Corridor Digital成立于2009年,这些年来创作了不少特效为主的流行短视频。

比较为人所熟知的是2019年恶搞波士顿动力机器人的那个“Atlas的反击”(New Robot Can Now Fight Back!)。

视频中Atlas被人们反复霸凌虐待,最终忍无可忍,对人类发起攻击:

图片

△来源“Bosstown Dynamics”(狗头)

这段视频一度被人们认为是从波士顿动力流出的真实录像,直到Corridor Digital出面否认。

随后,波士顿动力也官方辟谣称这只是Corridor Digital制作的一段CGI。

Corridor Digital工作室旗下的Corridor Crew团队,则负责做专门解读各种大片特效和背后制作技术流程的“揭秘节目”,团队成员会筛选一些电视剧和电影,并讨论和分解其中的视觉特效镜头。

他们也曾经邀请过不少特效师和演员来节目中做客,观察他们对各种特效的反应。

对于团队制作的这档AI动漫,有网友调侃:

不如下次就邀请动画师们如何?看看他们对于这部AI动漫的反应。

图片

那么,你觉得AI做出来的这部动漫效果怎么样?​

参考链接:

[1]​​https://www.php.cn/link/f3957fa3bea9138b3f54f0e18975a30c​

[2]​​https://www.php.cn/link/532435c44bec236b471a47a88d63513d​

[3]https://twitter.com/bilawalsidhu/status/1631043203515449344​

以上是用AI把自己画进动漫里,3天揽获150万+播放量,职业动画师:有被吓到的详细内容。更多信息请关注PHP中文网其他相关文章!

声明
本文转载于:51CTO.COM。如有侵权,请联系admin@php.cn删除
Agent SDK vs Crewai vs Langchain:哪个何时使用?Agent SDK vs Crewai vs Langchain:哪个何时使用?Apr 24, 2025 am 10:39 AM

本文比较了建立AI代理的三个流行框架:OpenAI的Agent SDK,Langchain和Crewai。 每个都为自动化任务和增强决策提供了独特的优势。 这篇文章指导您选择最佳帧

使用Pydantic构建结构化研究自动化系统使用Pydantic构建结构化研究自动化系统Apr 24, 2025 am 10:32 AM

在学术研究的动态领域,有效的信息收集,综合和演示至关重要。 文献综述的手动过程是耗时的,阻碍了更深入的分析。 多代理研究助理系统BUI

10 GPT-4O图像生成会提示今天尝试!10 GPT-4O图像生成会提示今天尝试!Apr 24, 2025 am 10:26 AM

AI世界中发生了绝对野生的事情。 Openai的本地形象生成现在很疯狂。我们正在谈论令人jaw目结舌的视觉效果,可怕的细节和抛光的输出

用帆板编码的氛围指南用帆板编码的氛围指南Apr 24, 2025 am 10:25 AM

毫不费力地将您的编码愿景带入Codeium's Windsurf,这是您的AI驱动的编码伴侣。 Windsurf简化了整个软件开发生命周期,从编码和调试到优化,将过程转换为INTU

使用RMGB v2.0探索图像背景删除使用RMGB v2.0探索图像背景删除Apr 24, 2025 am 10:20 AM

Braiai的RMGB v2.0:强大的开源背景拆卸模型 图像分割模型正在彻底改变各个领域,而背景删除是进步的关键领域。 Braiai的RMGB v2.0是最先进的开源M

评估大语模型中的毒性评估大语模型中的毒性Apr 24, 2025 am 10:14 AM

本文探讨了大语言模型(LLM)中的毒性至关重要问题以及用于评估和减轻它的方法。 LLM,为从聊天机器人到内容生成的各种应用程序提供动力,需要强大的评估指标,机智

Rag Reranker的综合指南Rag Reranker的综合指南Apr 24, 2025 am 10:10 AM

检索增强发电(RAG)系统正在改变信息访问,但其有效性取决于检索到的数据的质量。 这是重读者变得至关重要的地方 - 充当搜索结果的质量过滤器,以确保仅确保

如何使用Gemma 3&Docling构建多模式抹布?如何使用Gemma 3&Docling构建多模式抹布?Apr 24, 2025 am 10:04 AM

该教程通过在Google Colab中构建精致的多式联运检索一代(RAG)管道来指导您。 我们将使用Gemma 3(用于语言和视觉),文档(文档转换),Langchain等尖端工具

See all articles

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

Video Face Swap

Video Face Swap

使用我们完全免费的人工智能换脸工具轻松在任何视频中换脸!

热工具

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

SublimeText3 英文版

SublimeText3 英文版

推荐:为Win版本,支持代码提示!

SublimeText3 Linux新版

SublimeText3 Linux新版

SublimeText3 Linux最新版

WebStorm Mac版

WebStorm Mac版

好用的JavaScript开发工具

mPDF

mPDF

mPDF是一个PHP库,可以从UTF-8编码的HTML生成PDF文件。原作者Ian Back编写mPDF以从他的网站上“即时”输出PDF文件,并处理不同的语言。与原始脚本如HTML2FPDF相比,它的速度较慢,并且在使用Unicode字体时生成的文件较大,但支持CSS样式等,并进行了大量增强。支持几乎所有语言,包括RTL(阿拉伯语和希伯来语)和CJK(中日韩)。支持嵌套的块级元素(如P、DIV),