Seedance2.0出现之前,人类是如何制作AI 短片的?

先说个冷知识,AI 生成视频技术,
在国内火起来刚到一年,变化真是天翻地覆啊。。。


这篇文章本来是打算年前发的,

继续教大家首尾宗,多参宗的 AI 短片制作技巧,

结果 tmd 半路杀出个 Seedance2.0。。。属于是激光剑劈原始人了。

图片

那没辙了,谨以此文,纪念曾经的拉片经历。

另外Tapnow 也即将接入 Seedance2.0 模型了,感觉不管模型怎么变,赚钱的还得是卖 token 啊。。。

图片

年前我做了一个 AI 贺岁短片,也是参赛作品,

是Tapnow 和阿里云一起举办了一个春节主题 AI 短片挑战赛,

我看完规则以后,果断去参加了。

 该图片疑似AI生成图片

(因为会发放启动积分嘿嘿嘿)

图片

规则也是超级简单,使用 Wan 2.6 系列模型,

作品时长在 45~90 秒即可。

图片


这里也附上 TapTV 的链接:

https://app.tapnow.top/home/taptv/9/4620c8de-555b-4b0d-8f31-0e236d466cae


好,现在开始技术分享,先上画布。

图片

画布链接:https://app.tapnow.top/tapflow/view/58385685

第一阶段

1️⃣最初短片的构思,确定核心主题(马年贺岁)、时长(90秒)、基调(先搞笑后温情)。

我一般就是和 AI 进行对话,可以用 Tapnow 右侧边栏的智能体进行对话,BrianStrom脑暴。

最后也可以让他帮忙设计剧本,从梗概到分场大纲,再到详细的台词本。

图片


2️⃣然后是整部短片美术设定,角色长什么样(夸张搞笑,精致,日漫二次元等),短片风格是怎么样的(皮克斯材质 ,卡通,写实等)

这部分我倒是一开始就想好了,做成《熊出没》风格,夸张搞笑但又偏写实。

图片


以上两部分可以说是短片的地基,决定了受众,节奏甚至会影响后期的配音

3️⃣分镜设计(个人感觉最重要)


这一步是将剧本转化为可视化的镜头语言,每一幕的画面描述,还需要明确运镜转场这些细节。

这是我第一幕和第二幕的分镜脚本:

图片
图片

接下是第二阶段:中期制作!

分镜脚本定下来以后,要做的就是根据脚本生成图片,接着图生视频。

这是最费人力和时间的阶段,是将设想变为资产的过程。

4️⃣第一个就是人物设计版,用 Nanobanana Pro 没啥难度。

图片

5️⃣第二个是生成分镜图片,我自己一般是生成首帧(视频刚开始的第一张图)。

这一步差不多能占整个工程的 60% 时间,没啥技巧,就慢慢跑,选择最合适的那张图。。

图片

6️⃣动画制作

用 Wan2.6 进行图生视频,Wan2.6 对文字意图的理解很先进,

而且比 Veo3.1 便宜,也没啥技巧,意不要让两个视频之间的割裂感太强。

图片

第三阶段:后期合成

这是这一步让片子从“能看”变成好看和好听。

7️⃣配音与音效

  • 配音:根据台词本录制。
  • 音效:破门声,寒风呼啸声等。目前 wan2.6 生成的音效不是非常好,AI 生成音效有点大材小用,这边建议直接用剪映的音效库,快速便捷。

8️⃣背景音乐

BGM 是肯定得有的,我也是用AI 生成,Tapnow 有提供 elevenlabs 的AI音乐,但我感觉Suno 和 Minimax 的效果更好,可以试试。

图片

9️⃣剪辑与合成

剪辑这步占了全工程的 30% 工作量,没啥好说的,每个人的审美不同,可能是最需要积累的地方了。

(这步也是受到 Seedance2.0 影响最大的。)

以上九步完成以后,就是你开头所见的那个短片《神"马"东西》了~

图片

这里再分享一下原视频链接~

https://app.tapnow.top/home/taptv/9/4620c8de-555b-4b0d-8f31-0e236d466cae

最终也是混了个入围奖

图片


整个教程的前 8 步,是比较通用的技巧,就算用 Seedance2.0 也差不多。

曾经我还大言不惭地说,

AI 无法取代剪辑,现在被啪啪打脸。

我把一个分镜图片发给 Seedance2.0,

直接生成剪辑好的视频了。因为这玩意,当天晚上失眠到凌晨四点。。

图片

这模型一出,

又是多少个传统岗位,ComfyUI 工作流被杀死?

时代车辙旁上扬起的一粒沙,

对普通人来说,

都是举世之重。

图片

那你该怎么做呢?

是等风来?还是迎风去?

晓风乾丨 大四 Base北京 AI产品在职

想缩小科技带来的信息差 分享很酷的AI玩法。

希望得到您的点赞转发爱心三连支持,