最近很火的AI动画视频制作,从脚本到合成一文讲透

大象眸眸看科技 2024-08-31 20:20:47
本文背景

最近,我看到"GAIVB世界生成式AI视频挑战赛"已经进行到第19期了。这次比赛要求参赛作品时长增加到45秒,还得用多个镜头。正好我也想尝试用AI做动画,就借着大赛的《送别》主题,花了两天时间摸索,最后用了6小时做出了一个小动画短片。

如果你也想试试AI视频制作,我的经验可能会对你有帮助。下面我就来分享一下整个制作过程,你也可以跟着做一个属于自己的AI动画视频。

制作流程包括:写脚本、做分镜、生成图片、制作视频、配音,最后合成。

用到的工具有:

Kimi(写脚本)

Midjourney(生成图片)

即梦Dreamina(制作视频)

Hedra(配音)

剪映(合成)

好了,让我们一步步来看怎么做:

写故事脚本

首先打开Kimi聊天框,简单说说你的想法。

你可以直接描述需求,也可以用更专业的提示词。

角色:创意短篇故事大师##简介语言:中文描述:你是一位擅长创作引人入胜短篇故事的作家。你的故事充满悬疑元素,情节巧妙,常以出人意料的转折和令人深思的开放式结局结尾。你能灵活调整创作方向,满足不同的需求。##步骤1. 确定故事核心:   · 选择一个吸引人的主题,如谜团、背叛或身份错位。   · 构思一个包含关键转折的故事框架,确保情节起伏有致。2. 塑造生动角色:   · 为主角和重要配角设计独特性格和动机。   · 通过角色间的互动推动故事发展。3. 营造悬疑氛围:   · 巧妙利用场景和情节设置制造紧张感。   · 在故事中埋下伏笔,如隐藏线索、神秘事件或意外危机。4. 设计故事结构:   · 创作一个首尾呼应的框架,使开头和结尾在某种程度上相连。   · 安排至少一个重大转折点,引导故事走向高潮。5. 构思开放结局:   · 设计一个既揭示部分真相又留有悬念的结局,激发读者想象。   · 运用象征性元素贯穿始终,增强故事连贯性。6. 形成故事闭环:   · 在结尾处回顾开头的场景或物件,使故事形成完整循环。   · 通过这种闭环结构,让开放式结局仍给人完整感。

比如,你可以让AI扮演一个专业小说作家,按照你喜欢的风格来写故事。

角色:人物特征描述专家##简介语言:中文描述:你是一位擅长捕捉人物特征的专家。你能够用简洁有力的关键词概括人物的核心特征,包括外貌、服饰和性格等方面。##任务根据给定的小说角色或图片,提供10个简单但精准的关键词来描述主要人物。这些关键词应涵盖以下方面:1. 性别2. 大致年龄3. 种族或肤色4. 衣着风格5. 发型特点6. 面部表情7. 体型特征8. 姿态或举止9. 情绪或精神状态10. 显著的个人特征或配饰##输出格式请将10个关键词用逗号分隔,按照上述顺序排列。例如:女性, 中年, 亚裔, 职业装, 短发, 严肃, 瘦高, 挺拔, 自信, 黑框眼镜##注意事项- 保持描述的客观性和中立性- 使用简单、易懂的词汇- 避免使用带有偏见或歧视的语言- 如果某些信息不明确,可以用更加通用的描述替代

确定分镜

有了故事脚本后,就把它拆解成不同的镜头。

你可以让AI帮你描述每个镜头的构图、角度、主体和镜头运动等细节。

生成图片

首先得确定动画的整体风格。这次我在知识库里选了一颗风格种子

种子库恰好就是我想要的“手绘动画”风格,直接在 Midjourney 试试。

第一个镜头是穿正装的女孩抬头看高楼大厦(画幅用标准的横屏 16:9,加上风格种子)

可能是提示词不够简单,风格不太稳,不过左下那张还不错,对左下的图做个 variation(变换)。

变换时发现有女孩的侧面和背面,于是有了灵感,可以生成两张图分别作为首尾帧。分别选两个角度中的一张进行 Upscale(升级)。

这样第一个镜头需要的首尾帧参考图就都准备好啦!咱们先把这两张图下载打包,进入下一个“视频生成”环节~

即梦AI视频生成工具使用指南

进入即梦AI网址:https://jimeng.jianying.com/ai-tool/home· 选择「视频生成」模块中的「图片生视频」· 开启「使用尾帧」选项

设置参数· 上传首尾帧图片· 描述过渡过程(例如:"女孩旋转在高楼大厦间")· 调整运镜控制、运动速度和视频时长· 建议:中幅度向右摇镜,时长3秒

生成视频· 多次尝试,选择最流畅、变形最少的版本· 注意:转为GIF可能导致画面略有卡顿

特别技巧:草原日落镜头制作· 使用风格种子和16:9画幅

· 升级(upscale)图像后进行扩图(Pan)

· 分别向左、向右各生成一张图· 适用于"向左平移"的运镜效果

其他镜头:可仅用首帧单图实现简单动画效果

配音

用Hedra来生成配音。把旁白文字输入,选择合适的音色,就能得到音频文件。

剪辑合成

最后,用剪映把所有视频片段、音乐、配音和字幕放在一起,调整一下,就大功告成了!

总结

虽然听起来步骤不少,但其实每一步都不难。即使你不是专业人士,只要有想法,借助这些AI工具,也能把脑海中的故事变成生动的视频。当然,文中提到的工具都有替代品,你可以根据自己的喜好选择。

重要的是要勇于尝试,相信自己也能创作出精彩的AI动画视频!

我是大象,目前在做AI写作,副业从事新媒体运营,并拥有自己的工作室。借助AI技术趋势,我们可以做自媒体任何行业的赋能

我通过发布多篇实用干货视频教学,我每天深入研究AI的应用,大部分文案和视频都由AI协助完成,使我的工作效率大幅提升,节省了近一半的人力成本。AI的趋势远不止于此,其潜力巨大。

0 阅读:0