这一类AI小视频最重要的是能够制作好第一帧的分镜画面,在保留参考源的精细3D质感的同时体现五视图或者三视图的画风特征,仿MMD的优势在于不需要制作太多分镜就能很流畅地播放,在第一帧动起来之后不需要添加过多中间帧,反而会干扰前后风格的一致性
以我之前制作的《君のココロをハッキング》为参考的话,其实大部分的精力用在了首帧画面的制作,这里提供一下首帧使用的参考提示词,想要制作同类视频可以按需求替换主视图和主视图角色的描述:
基于 [参考图1] ,保留 [参考图1] 的画面构图背景、背景出现的元素和画面构图。把 [参考图1] 图中的白色双马尾少女完全替换为 [参考图2] 人设图中的角色诺亚,诺亚为丸子头双马尾异色瞳,身着非常甜美的洛丽塔裙。保持 [参考图2] 和 [参考图1] 原人物完全相同的动作、表情和拍摄视角:竖幅9:16动画电影分镜,正面平视胸像近景,主体角色居中面对镜头,身体保持端正,双肩自然展开,双臂屈肘向上抬起,前臂从画面左右下方斜向面部延伸,双手分别停留在脸颊两侧偏下的位置。双手略微靠近镜头,产生轻微的近大远小透视,如同左右对称的视觉括号,将注意力集中到面部。角色头部位于画面上半部中央,双眼接近上三分线,头部、肩部与双手形成稳定而紧凑的三角形构图。角色直视镜头,眉眼轻微收紧,嘴角克制地微微上扬,呈现自信、俏皮、略带得意的温和笑容,传达直接而亲切的肯定与鼓励。整体构图高度对称,画面干净,背景极度简化并柔和虚化,柔和正面光均匀照亮面部,无强烈阴影,视觉焦点集中,具有轻松、可爱、积极的互动感。只替换人物主体,不改变背景、构图等,注意替换后人物的画风、线条、身材比例和头部大小严格参考 [参考图2] ,人物的样貌、脸型、眼睛瞳色和服饰细节严格参考 [参考图2]人设图。替换的角色线条干净,用色减少杂色

在制作好首帧画面之后,其实输入updream或者其他sd2.0、H3相关的平台的提示词就可以很简单了,这里也提供一下基础的提示词:
基于 视频 1 生成新视频,以 图片2 中的原创角色诺亚为新生成视频的主要角色,图片2 中的角色诺亚为丸子头双马尾异色瞳,身着非常甜美的洛丽塔裙子。以 视频 1 为新生成视频的参考,0-15s:把 视频 1 中的原白色双马尾角色完全替换为 图片2 人设图中的角色诺亚,视频0s首帧画面严格参考 图片1 。只替换角色,让 图片2 严格遵照 视频 1 原有角色的舞蹈动作、动作帧率、卡点节奏、镜头运镜、画面构图,完美模仿 视频 1 里原角色的所有舞蹈动作、表情和嘴型变化,动作精准同步,表情生动自然。注意替换后人物的画风、线条、身材比例和头部大小严格参考 图片2 和分镜 图片1 ,人物的样貌、脸型、瞳色和服饰细节严格参考 图片2 人设图和分镜 图片1 ,注意替换后角色所在位置在全视频严格保持 视频 1 相同不变。无变形、无穿模、无崩坏,流畅不卡顿
如果超过了15s的上限的话怎么维持画风的一致性呢,我这里还是参考过往大佬们的经验,截取前一段成品的最后一帧作为下一段视频的首帧:

嗯其实这些工作流想必社区的大佬们已经非常熟悉了,所以这里我也只是献丑提供一个面向初学者的基本生视频的思路,如果大家有更加优质的思路的话希望能交流一下!谢谢!
written by@倾玥与川崎咲