Sora2 AI
工作流

文生视频还是图生视频?按素材一次选对输入模式

发布于 2026年10月24日 更新于 2026年10月24日 9 分钟阅读

文生视频与图生视频怎么选:按有无定稿静帧、是否要锁脸与包装,对照仅文本、首帧、首尾帧与多模态参考,少走重抽弯路。看完对照表再选模式,成片更接近初稿设想。

文生视频还是图生视频?按素材一次选对输入模式

文生视频还是图生视频? 先看手里有没有「已经认可的静帧」。没有 → 用仅文本(文生视频)快速试构图;有 → 用首帧(图生视频)把外形锁住再补运动。需要起止画面或跨镜头身份时,再升到首尾帧或多模态参考。选错模式,比选错模型名更浪费重抽次数。

文生视频与图生视频输入模式对照:仅文本、首帧、首尾帧、多模态参考

一张表选模式

你的起点优先模式提示词写什么典型翻车
只有文字想法仅文本(t2v / 文生视频)主体、动作、场景、一种运镜、时长堆风格词却没写动作
已有定稿产品/人物图首帧(i2v / 图生视频)怎么动、镜头怎么走又把外貌重写一遍,和静帧冲突
已知开场与收束画面首帧 + 尾帧中间过渡与节奏首尾画幅差太大、运动幅度拉满
要跨镜头同一角色/包装多模态参考(r2v)参考清楚 + 一次只改一类变量参考杂乱、多人挤前景

口诀:开盲盒用文生;必须像某一版用图生或参考。

文生视频:适合什么、怎么写

适合:叙事钩子、氛围镜头、还没有定妆的概念片、分镜草稿。

写法按五段排:主体 → 动作 → 场景 → 运镜 → 时长用途。第一版只定一种主运镜,时长与参数档对齐,细节见 运镜与时长。

图生视频:适合什么、怎么写

适合:电商开品、角色定妆后动起来、客户已确认的包装静帧、海报动效。

提示词少写「红色陶瓷壶长什么样」,多写「缓慢旋转、蒸汽上升、轻推镜头」。参考图要主体清晰、背景别抢戏;身份细节见 参考帧一致性。

首尾帧与多模态:别和首帧混用错

  • 首尾帧:时间轴两端钉死,适合已知转场。尾帧比例不一致时,多数管线以首帧为准裁切。
  • 多模态参考:锁的是「是谁 / 什么风格」,不是单一时间起点。上传多张时第一句点名主参考,避免模型猜错。
  • 不要在同一任务里又塞互相打架的首帧设定又塞一整包无关参考——先定一种输入契约。

实操顺序(少重抽)

  1. 判断:有无定稿静帧?要不要跨镜头一致?
  2. 选定模式后再写提示词(模式决定你删哪些描述)。
  3. 短时长先跑通,再加运镜或分辨率。
  4. 人物/产品镜头优先「静帧 → 图生」,少用纯文生连抽赌脸。
  5. 对外投放前过 商用自查。

按有无定稿静帧选择文生或图生视频的决策示意

小结

文生视频负责「从无到有」,图生视频负责「从有到动」;首尾帧与多模态参考解决转场与身份。先选输入模式,再按任务选模型族见 Seedance、Wan、Kling 怎么选,重抽会少很多。

常见问题

文生视频和图生视频的核心差别是什么?

文生视频(仅文本 / t2v)从提示词发明整段画面;图生视频(首帧 / i2v)在已定静帧上补运动。前者探索快,后者外形更可控。

什么时候必须上首帧,而不是纯文生?

跨镜头要同一张脸、同一包装、同一 Logo 位置,或客户已签过静帧时,优先首帧。纯文生更适合概念片与分镜草稿。

首帧和「首帧+尾帧」怎么选?

只要「从这张图出发演下去」→ 首帧;已知起点与终点画面(白天到黄昏、开盖到合盖)→ 首尾帧。画幅通常跟随首帧。

多模态参考(r2v)和首帧是一回事吗?

不是。首帧锁的是时间轴起点画面;多模态参考用多张图/素材稳住身份或风格,适合跨镜头一致性,参数以当前模型能力为准。

图生视频的提示词还要写外貌吗?

少写。图已经告诉模型「长什么样」;提示词应写动作、运镜、光线变化与时长用途,避免和静帧打架。

单段时长多长最稳?

先用短档跑通主体不变形,再加长。多数场景 4–8 秒比一次拉满更稳;长叙事用多段拼接,而不是一条提示词赌一分钟。

分享

分享到微博