一、古画动态化核心工具
1. CrazyTalk 8(CT8)
- 核心功能:通过声音同步驱动古画人物的口型、表情和肢体动作,支持 3D 头部创建和骨骼绑定。例如,导入《韩熙载夜宴图》后,可让人物随音乐节奏举杯、交谈。
- 优势:操作门槛低,内置丰富预设动作库(如舞蹈、手势),支持导出高清视频。
- 适用场景:短视频平台(如抖音)的古画人物唱歌、对话类内容创作。
- 参考案例:抖音热门 “李清照唱歌” 视频多基于此软件制作。
2. Yanderify
- 核心功能:基于 Python 开发,通过视频素材驱动静态图片生成动态表情,尤其擅长制作 “开口唱歌” 效果。例如,将《捣练图》中的人物与真人演唱视频结合,实现 lip-sync 同步。
- 优势:支持 N 卡 GPU 加速,生成速度快;可自定义背景、添加特效。
- 适用场景:B 站、微博等平台的创意视频,或学术研究中的古画互动展示。
- 参考案例:网络流行的 “古画人物唱《Unravel》” 即用此工具制作。
3. Adobe After Effects + Volume n’ Tricks 2 脚本
- 核心功能:专业级动画合成软件,配合脚本可制作伪三维立体效果。例如,为《千里江山图》添加云雾飘动、山水层叠的动态景深。
- 优势:支持复杂特效(如粒子、流体),可导入 AI 生成的音乐作为音轨。
- 适用场景:博物馆数字展览、影视古装剧背景动画。
- 参考案例:故宫《古画会唱歌》音乐专辑中的动画片段多采用类似技术。
二、AI 音乐生成与配音工具
1. Suno AI
- 核心功能:输入文本即可生成广播级音乐,支持中文古风、戏曲等风格。例如,输入 “古琴、流水、慢板” 可自动创作《高山流水》风格的背景音乐。
- 优势:与 Midjourney、Runway 等工具联动,实现 “文本→音乐→动画” 全流程自动化。
- 适用场景:为古画动态视频快速匹配原创配乐。
- 参考案例:用户用 “中国传统民乐” 提示生成《水调歌头》改编曲。
2. 音疯 AI
- 核心功能:一键生成歌曲,支持上传参考音乐(如《青花瓷》)生成相似风格作品。例如,导入《兰亭序》歌词可自动匹配古典旋律。
- 优势:提供多会员套餐,适合个人创作者及企业批量生成。
- 适用场景:短视频平台的背景音乐制作、古画主题专辑创作。
3. 来画 AI 配音
- 核心功能:文字转语音,支持 “古风女声”“戏曲老生” 等特色音色。例如,为《虢国夫人游春图》添加画外音解说。
- 优势:与来画动画平台无缝衔接,可直接为动态古画添加配音。
- 适用场景:教育类视频、文物讲解短片。
三、综合创作平台
1. Kaiber
- 核心功能:AI 动画生成工具,支持将静态图片转化为风格化动画(如水墨风、剪纸风)。例如,将《富春山居图》转化为动态卷轴动画。
- 优势:内置 AnimatedDiff、ControlNet 等开源模型,可自定义动画时长和风格。
- 适用场景:艺术展览、品牌宣传的创意动画。
2. Snowpixel
- 核心功能:文本生成图像、音频、动画的一体化工具。例如,输入 “敦煌飞天、琵琶声” 可自动生成动态壁画视频。
- 优势:支持训练自定义模型,适合专业团队打造 IP 化古画内容。
- 适用场景:游戏开发、虚拟博物馆互动展示。
四、简易工具与平台
1. 晴拍(电脑版)
- 核心功能:通过雷电模拟器在电脑运行,上传古画即可生成 “跳舞、唱歌” 视频。例如,《簪花仕女图》中的人物可随流行音乐起舞。
- 优势:操作极简,内置海量古风素材库。
- 适用场景:快速制作抖音、快手类短视频。
2. Plotaverse(网页版)
- 核心功能:一键生成动态照片,支持添加粒子特效(如花瓣飘落、水波涟漪)。例如,为《捣练图》添加衣物飘动效果。
- 优势:无需安装,浏览器直接使用。
- 适用场景:社交媒体分享、PPT 动态素材制作。
五、操作流程建议
- 素材准备:
- 古画:优先选择高分辨率扫描件(如故宫官网开放的《清明上河图》)。
- 音频:使用 Suno AI 生成原创音乐,或从 QQ 音乐 “古画主题专辑” 中选取。
- 动态化处理:
- 新手:CrazyTalk 8 或 Yanderify 快速实现人物口型同步。
- 进阶:AE + Volume n’ Tricks 2 制作多层动态景深。
- 后期合成:
- 剪辑:剪映专业版(电脑版)添加字幕、转场。
- 特效:Kaiber 或 Snowpixel 渲染风格化动画。
六、注意事项
- 版权:商用需确认古画版权(如故宫文物已开放非商用授权),音乐建议使用 AI 生成或正版库素材。
- 硬件:CrazyTalk 8、Yanderify 对显卡要求较高,建议使用 NVIDIA GTX 1660 及以上。
- 学习资源:B 站搜索 “古画动画教程”,或参考故宫与腾讯合作的《古画会唱歌》制作文档。
以上工具覆盖从入门到专业的全流程需求,可根据创作目标灵活组合使用。