Prompt基础公式 = 要创建的主要表现物 + 场景空间 + 运动 / 变化
要创建的主要表现物:主要表现物是视频的核心信息,可以是人物、动物、其它物体亦或是不存在的想象之物。
场景空间:场景空间描述的是视频表现物的周围环境信息,可以是精确的标志性空间,如图书馆、咖啡厅,也可以是幻想性的虚构场景。
运动/变化:运动和变化是对于主要表现物在视频中的状态描述,例如物体的静止、运动;环境空间的转化等等。
例如:
一只小狗在公园中奔跑
山谷中的一条小溪静静流淌
Prompt 精确公式= 要创建的主要表现物 + 场景空间 + 运动 / 变化 + 镜头运动 + 美感氛围
镜头运动:镜头运动可以限定视频画面的呈现方式,可以使用常见的镜头运动方式,例如 推、拉、摇、移、升、降等镜头运动方式,对画面呈现效果进行限定。
美感氛围感:可以对画面呈现的视觉风格、画面氛围感进行限定,可以得到更加符合预期的表现效果。
例如:
一对情侣坐在公园的长椅上交流,镜头维持固定拍摄情侣,画面色调偏暖,氛围温馨
一只小羊在一片草地里低头吃草,镜头缓缓推进小羊,画面色调自然写实
图生视频Prompt基础公式=首帧中的主要表现物 + 运动 / 变化
首帧中的主要表现物:即画面中的物品,包括主要信息和环境信息,能够精确识别图像中的人物、物品等画面信息,并根据Prompt需求进行视频生成。
运动 / 变化:运动和变化是对于主要表现物在视频中的状态描述,例如物体的静止、运动,环境空间的转化等等。
在基础公式上补充镜头信息和氛围感信息可以更加精确控制视频,生成动态更强或风格化更明显的视频。图生视频Prompt精确公式=首帧中的主要表现物 + 运动 / 变化 +镜头运动 + 美感氛围变化
镜头运动:图生视频同样可以精确控制镜头运动,将画面中的信息作为参考物写作Prompt可以获得更加精确的结果。
美感氛围变化:尽管首帧已经确定了视频开头的画面氛围色调,但图生视频依旧能够对画面的美感氛围进行调整以产出更加符合预期的视频内容。
为镜头运动增加更精确的时序: 可以获得更加精确,更大镜头动态的视频。
例如 “镜头旋转下降” 可以优化为 : “镜头先缓缓下降,之后在下降的过程中向右环绕。”
为镜头运动带来的画面变化增加更细致的描述: 可以获得更精确,更具美感的镜头运动画面。
例如 “镜头从下往上拍摄长颈鹿” 可以优化为: “镜头由长颈鹿的脚部特写开始,缓缓上升,拍摄到长颈鹿的身体,最后停留在长颈鹿的面部,近景展示长颈鹿的面部表情。”
将镜头运动的时长合理控制在5秒之内:避免过度复杂的镜头导致生成失败。