AI到底是怎么生产视频的,其中的原理是什么
许多视频生成模型会根据文字、图片等条件,从随机噪声中逐步生成连续的动态画面,再由系统编码、封装成 MP4 等视频文件。
生成时要兼顾内容和前后变化,核心难点之一,是让人物和物体保持一致,让动作、位置变化和镜头运动连贯自然。
早期我们在生产视频时,常用“首尾帧”的能力:先生成两张符合预期的图片,作为起始和结束画面,再让 AI 生成一段连接两张图的 5 秒或 15 秒视频。
自sd2.0之后出来“全能参考”这类功能,就可以同时提供多种素材:图片交代人物和产品,视频参考动作和运镜,音频参考声音或节奏,再用文字说明每份素材参考什么。
除了起点和终点,也能更完整地表达视频应该怎样呈现。
从使用体验上说,AI 现在更像一个能看懂参考、理解创作意图的编导。
