只需随手录制一段视频,AI就能把你完美放进动漫中!
无论是线条、色彩还是光影呈现,都与美漫中的写实风格如出一辙,动画也是细腻流畅,帧数显然不低:
制作这样一部包含120个VFX(视觉效果)镜头的动漫,需要投入多少精力?
仅仅3个人就行,也无需服化和道具小组。
相比之下,此前拍摄的不少大片动画特效往往需要投入大量精力,制作精良的团队甚至达到上百人。
这部动漫被放到油管上后,三天就揽获了150w+播放量,11万+点赞。
已经有画师看完感到害怕了:
我毕生致力于绘画……然而这些几年后就会被取代。
还有网友感到“儿时梦想成真”:
当年我还小的时候,一直以为动画就是基于真实视频做出来的。现在看到这个,觉得超酷。
那么,这样一部动漫究竟是如何制作出来的?
如何用AI制作一部动漫?
过程一共分为三个部分。
第一部分是用AI创建并生成动漫人物,建立它与演员之间的关联;第二部分是创作动漫场景;第三部分是合成并调整最终动漫效果。
先来看看第一部分的用AI改画人物动漫。这部分是用Stable Diffusion完成的,同时采用了谷歌推出的DreamBooth扩散模型进行微调。
以动漫中的这名角色为例,左上角是演员原型,右下角是AI创作出来的动漫角色:
这可不是直接把视频一帧帧放进Stable Diffusion中就能做出来的效果。
为了确保人物的动漫画风达到他们想要的效果,作者们收集了经典动漫《吸血鬼猎人D》中的大量人物截图,各种角度都有,将它们喂给AI:
与此同时,还需让AI学会并记住真人从面部到身体上的各种细节特征。
因此,要提前给演员拍摄不同光照、多个角度、各类动作下的大量照片:
这样一来,就能让AI在看见视频中的演员时,迅速以《吸血鬼猎人D》为作画风格基础,画出演员长相的动漫风格人物来。
至于在某些不容易掌控的人脸放大镜头中,还采用了ControlNet进一步控制生成的效果。
不过,直接用AI生成的动漫,还存在一个问题。
即使帧与帧之间的差异不大,衔接起来并不完全连贯,一些“反复横跳”的发梢和光影细节会导致画面疯狂闪烁:
作者们想到用DEFlicker去闪烁插件解决这件事,同时稍微调低一点帧率,保证画面的流畅感。
第二部分就是生成场景了,这部分作者们直接用了虚幻引擎和里面自带的一些3D模型,来制作动漫背景。
例如这段看起来非常炫酷的旋转背景:
背后就是将大量场景照片合成起来,快速滚动做成的:
最后一部分就是合成之后的润色了。
这部分倒是团队自己完成的,他们在视频中一方面加入了部分3D模型(如一晃而过的蜡烛)来增加人物的沉浸感:
另一方面添加了大量复古的视觉特效,使得动画看起来又精良了不少:
最终就有了这部AI协助创作的动漫。
曾创作波士顿动力恶搞特效视频
这部动漫创作背后的团队Corridor Crew,来自一家叫做Corridor Digital的美国制作工作室。
Corridor Digital成立于2009年,这些年来创作了不少特效为主的流行短视频。
比较为人所熟知的是2019年恶搞波士顿动力机器人的那个“Atlas的反击”(New Robot Can Now Fight Back!)。
视频中Atlas被人们反复霸凌虐待,最终忍无可忍,对人类发起攻击:
△来源“Bosstown Dynamics”(狗头)
这段视频一度被人们认为是从波士顿动力流出的真实录像,直到Corridor Digital出面否认。
随后,波士顿动力也官方辟谣称这只是Corridor Digital制作的一段CGI。
Corridor Digital工作室旗下的Corridor Crew团队,则负责做专门解读各种大片特效和背后制作技术流程的“揭秘节目”,团队成员会筛选一些电视剧和电影,并讨论和分解其中的视觉特效镜头。
他们也曾经邀请过不少特效师和演员来节目中做客,观察他们对各种特效的反应。
对于团队制作的这档AI动漫,有网友调侃:
不如下次就邀请动画师们如何?看看他们对于这部AI动漫的反应。
那么,你觉得AI做出来的这部动漫效果怎么样?
参考链接:
[1]https://www.php.cn/link/f3957fa3bea9138b3f54f0e18975a30c
[2]https://www.php.cn/link/532435c44bec236b471a47a88d63513d
[3]https://twitter.com/bilawalsidhu/status/1631043203515449344
以上是用AI把自己画进动漫里,3天揽获150万+播放量,职业动画师:有被吓到的详细内容。更多信息请关注PHP中文网其他相关文章!

本文比较了建立AI代理的三个流行框架:OpenAI的Agent SDK,Langchain和Crewai。 每个都为自动化任务和增强决策提供了独特的优势。 这篇文章指导您选择最佳帧

在学术研究的动态领域,有效的信息收集,综合和演示至关重要。 文献综述的手动过程是耗时的,阻碍了更深入的分析。 多代理研究助理系统BUI

AI世界中发生了绝对野生的事情。 Openai的本地形象生成现在很疯狂。我们正在谈论令人jaw目结舌的视觉效果,可怕的细节和抛光的输出

毫不费力地将您的编码愿景带入Codeium's Windsurf,这是您的AI驱动的编码伴侣。 Windsurf简化了整个软件开发生命周期,从编码和调试到优化,将过程转换为INTU

Braiai的RMGB v2.0:强大的开源背景拆卸模型 图像分割模型正在彻底改变各个领域,而背景删除是进步的关键领域。 Braiai的RMGB v2.0是最先进的开源M

本文探讨了大语言模型(LLM)中的毒性至关重要问题以及用于评估和减轻它的方法。 LLM,为从聊天机器人到内容生成的各种应用程序提供动力,需要强大的评估指标,机智

检索增强发电(RAG)系统正在改变信息访问,但其有效性取决于检索到的数据的质量。 这是重读者变得至关重要的地方 - 充当搜索结果的质量过滤器,以确保仅确保

该教程通过在Google Colab中构建精致的多式联运检索一代(RAG)管道来指导您。 我们将使用Gemma 3(用于语言和视觉),文档(文档转换),Langchain等尖端工具


热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

Video Face Swap
使用我们完全免费的人工智能换脸工具轻松在任何视频中换脸!

热门文章

热工具

SublimeText3汉化版
中文版,非常好用

SublimeText3 英文版
推荐:为Win版本,支持代码提示!

SublimeText3 Linux新版
SublimeText3 Linux最新版

WebStorm Mac版
好用的JavaScript开发工具

mPDF
mPDF是一个PHP库,可以从UTF-8编码的HTML生成PDF文件。原作者Ian Back编写mPDF以从他的网站上“即时”输出PDF文件,并处理不同的语言。与原始脚本如HTML2FPDF相比,它的速度较慢,并且在使用Unicode字体时生成的文件较大,但支持CSS样式等,并进行了大量增强。支持几乎所有语言,包括RTL(阿拉伯语和希伯来语)和CJK(中日韩)。支持嵌套的块级元素(如P、DIV),