一年前,AI模型ChatGPT的问世在社会各界激起了广泛的讨论和关注。时光荏苒,转眼间AI行业已经发生了翻天覆地的变化。最近,来自四川的博主“AI疯人院”在网络上发布了一部利用AI技术生成的《西游记》动画短片,其震撼的视觉效果令众多网友惊叹不已,纷纷感慨科技发展的迅猛。扬子晚报/紫牛新闻记者采访到了这位博主冯先生,从事15年美术工作的冯先生表示,这段视频如果人工制作至少需要半年,而自己在AI的帮助下用时一周就完成了,目前随着文生视频模型Sora的问世,很多现在遥不可及的事情在未来都可以实现了。
AI包揽大部分流程,就连分镜规划也靠ChatGPT
这段3分56秒的动画短片以《西游记》原著第一集为蓝本,通过AI技术将石猴降生到拜师学艺的故事生动地呈现在观众面前。
视频中整个天庭识别度极高,宫殿群依山而建,错落有致,屋顶覆盖着金色的琉璃瓦,阳光下闪闪发光,让人一眼就能感受到那种神秘而庄严的氛围。花果山则充满了宁静与和谐。郁郁葱葱的树木、飞流直下的瀑布、古朴典雅的石桥,共同勾勒出一个如诗如画的世外桃源。视频还展示了孙悟空驾舟渡海、来到城镇、前往灵台方寸山等场景,引发网友啧啧称奇,“这个视频真的太震撼了!AI还原的《西游记》简直绝了!只看开篇就已经被惊艳到了!”“场面确实震撼,希望UP主可以继续沿着剧情更新,赞。”
除了《西游记》外,冯先生还用AI生成了丝绸之路、龙生九子、克鲁苏神话等视频动画,目前他在抖音上有超过十万粉丝,收获了超过百万点赞。在评论区,网友们惊叹之余,也有人询问这是如何做出来的。冯先生告诉记者,用AI生成视频需要四步:构思、用文字生成静态图片、让图片动起来、整理剪辑。
“第一步肯定是构思,以《西游记》第一集为例,从混沌初开到石猴出世再到拜师学艺,首先就要确定一共需要多少个画面、多少个分镜。”构思这一块看似需要“脑洞”,实际不然,冯先生表示,自己会使用ChatGPT分析原著文字,让AI帮自己规划一些分镜方案,然后自己再从中找到合适的。有了分镜规划后,用AI绘画软件把想要的画面画出来,然后再用“图片生成视频”软件让这些画面动起来。这两个过程中,一般会产生大量的废稿,“目前AI很难完全理解我的意思,无论是图片还是动画片段,随机性都比较大,每次我都会用AI生成很多,在这些素材里面找到合适的再进行下一步。”
“剩下的就是把素材放到一起剪辑了,台词我会自己想好,然后使用AI配音。有些特殊角色我会自己配, 用变声器变声,在剪辑的时候还可以再用声音特效打磨一下。”再加上转场、背景音,一部由AI生成的动画视频就诞生了。
有网友想看打斗场面,但目前AI生成视频还有许多限制
“在两年前我就使用过谷歌发布了一款AI绘图模型,那时候AI绘图极其抽象,生成的画面支离破碎。比方说画一个人,AI能画出五官,但是五官会非常扭曲,那时候大家都在批评,说这个软件只能画恐怖图片。但是在去年底的时候,这个模型更新到第四版,进步就很大了,当时我还受邀参加了内测。”冯先生介绍,如今这个AI绘图模型已经进步到可以画卡通、素描、水彩等多种风格,并且在细节处理上也更进一步,“例如衣服上的绣花,甚至镶金丝线都能画出来。”
“AI绘画问世以来引发过很多次争议,插画师们认为AI用自己的作品进行训练,现在倒过头来抢自己的饭碗。”冯先生坦言,AI技术的迭代确实影响了一部分人的利益,“但这是没办法的事情,就像潘多拉魔盒一样,一旦被打开,再要关上就不可能了,再去抵触它已经没有任何意义。”
“就拿这次我发布的《西游记》动画短片来说,我一共用AI生产了三千多张图片,最后选择了约一百张,放在以前的话,哪怕是资深画师要画出这些画肯定需要半年,至于要让画‘动’起来那更是天方夜谭了。”
在后台,有不少网友留言想看《西游记》中的打斗场景,“目前AI生成视频还有许多限制,以目前的技术还做不到。”冯先生表示,许多之前做不到的事情,现在AI能够做到了;现在做不到的事情,说不定未来哪一天也能做到,“等到AI足够强大的时候,我肯定会满足网友们的要求的,希望这一天早日到来。”
延伸阅读: Sora或颠覆AI视频领域
记者注意到,近日Open AI发布了视频生成模型Sora,介绍称Sora能够严格根据用户输入的提示词、文本指令或静态图像,生成长达1分钟的视频,保持较高的视觉质量,其中包含精细复杂的场景、生动的角色表情以及复杂的镜头运动。同时也接受现有视频扩展或填补缺失的帧。
目前Sora官网上已经有几十个演示样本,不仅能准确呈现细节,还能理解物体在物理世界中的存在,并生成具有丰富情感的角色。
业内不少人士都十分看好Sora,360集团创始人周鸿祎表示,Sora的诞生意味着AGI(通用人工智能)实现将从10年缩短至一两年,“一旦人工智能接上摄像头,把网上的视频都看一遍,它对世界的理解将远远超过文字学习……它展现的不仅仅是视频制作能力,它展现的是大模型对真实世界有了理解和模拟后,会带来新的成功和突破。”
工信部信息通信经济专家委员会委员、数字经济专家刘兴亮称,这标志着AI技术在内容创作领域的一个新纪元,“Sora能帮助创作者们以更低的成本和更快的速度将创意变为现实,而且为观众带来了更丰富和多样化的视觉体验。技术创新的这一巨大飞跃,预示着AI在未来人类生活的各个方面都将发挥更加重要的作用。”
冯先生也非常看好Sora,他表示,“虽说我还没有使用过这套程序,但从官方说法和官方发布的视频来看,由这套模型生成视频里的各个元素协同度很高,并且在分镜、运动拍摄、远近角切换等领域也远比现在的模型优秀。也就是说,现在遇到的困难,未来可能就不再是困难了。”
据扬子晚报