🎬 VIDU 视频生成模型

VIDU 是一个强大的视频生成模型,支持多图参考视频生成和首尾图片控制的视频生成功能,特别适合创意视频制作和故事叙述。

模型特性

🌟 核心优势

  • 多图参考:可以使用多张参考图片来指导视频生成
  • 首尾控制:通过指定开始和结束图片来控制视频的变化过程
  • 创意灵活:适合制作具有故事性和创意性的视频内容
  • BGM支持:支持自动添加背景音乐

📋 详细模型案例

1. VIDU Q1 多图参考视频

APP st-ai/vidu/q1/reference-to-video

功能说明:使用多张参考图片生成相关的视频内容,模型会根据图片的内容和风格生成连贯的视频。

{
  "app_name": "st-ai/vidu/q1/reference-to-video",
  "input_params": {
    "prompt": "A young woman and a monkey inside a colorful house",
    "reference_image_urls": [
      "https://v3.fal.media/files/panda/HDpZj0eLjWwCpjA5__0l1_0e6cd0b9eb7a4a968c0019a4eee15e46.png",
      "https://v3.fal.media/files/zebra/153izt1cBlMU-TwD0_B7Q_ea34618f5d974653a16a755aa61e488a.png",
      "https://v3.fal.media/files/koala/RCSZ7VEEKGFDfMoGHCwzo_f626718793e94769b1ad36d5891864a4.png"
    ],
    "aspect_ratio": "16:9",
    "movement_amplitude": "auto",
    "bgm": true
  }
}

2. VIDU 首尾图片生视频

APP st-ai/vidu/start-end-to-video

功能说明:通过指定开始和结束图片,生成从起始状态平滑过渡到结束状态的视频。

{
  "app_name": "st-ai/vidu/start-end-to-video",
  "input_params": {
    "prompt": "Transform the car frame into a complete vehicle.",
    "start_image_url": "https://storage.googleapis.com/falserverless/web-examples/vidu/2-carchasis.png",
    "end_image_url": "https://storage.googleapis.com/falserverless/web-examples/vidu/2-carbody.png",
    "movement_amplitude": "auto"
  }
}

3. 自定义创意视频示例

{
  "app_name": "st-ai/vidu/q1/reference-to-video",
  "input_params": {
    "prompt": "A magical transformation scene in an enchanted forest",
    "reference_image_urls": [
      "https://example.com/forest1.jpg",
      "https://example.com/magic2.jpg",
      "https://example.com/transformation3.jpg"
    ],
    "aspect_ratio": "9:16",
    "movement_amplitude": "medium",
    "bgm": false
  }
}

📝 VIDU 参数说明

参数名 类型 必填 描述 可选值
prompt string 视频描述提示词 任意文本
reference_image_urls array 参考图片URL数组(多图参考模式) 1-5张图片URL
start_image_url string 开始图片URL(首尾控制模式) 有效的图片URL
end_image_url string 结束图片URL(首尾控制模式) 有效的图片URL
aspect_ratio string 视频宽高比 16:9, 9:16, 1:1, 4:3
movement_amplitude string 运动幅度 auto, low, medium, high
bgm boolean 是否添加背景音乐 true, false

💰 VIDU模型价格表

模型 功能 基础价格 VIP1价格 非VIP价格
st-ai/vidu/image-to-video 普通图生视频 60积分 90积分 120积分
st-ai/vidu/start-end-to-video 首尾图片控制视频 60积分 90积分 120积分
st-ai/vidu/reference-to-video 多图参考视频 120积分 170积分 220积分
st-ai/vidu/q1/start-end-to-video Q1首尾控制视频 120积分 170积分 220积分
st-ai/vidu/q1/reference-to-video Q1多图参考视频 120积分 170积分 220积分

🎯 使用场景对比

模式 适用场景 优势 最佳实践
多图参考 故事叙述、风格统一的视频 保持多个元素的一致性 选择风格相近的参考图片
首尾控制 变化过程、转换效果 精确控制变化过程 确保首尾图片有明确的对比
💡 使用技巧
  • 图片质量:使用高质量、清晰的参考图片能获得更好的视频效果
  • 风格一致:多图参考时,选择风格、色调相近的图片
  • 运动幅度:根据内容选择合适的运动幅度,静态场景用 low,动态场景用 high
  • 提示词优化:描述应该连接参考图片的内容,形成完整的故事
  • 宽高比选择:根据最终用途选择合适的宽高比

🎨 创意应用示例

1. 产品展示视频

使用首尾控制模式,展示产品从包装到使用的完整过程。

2. 故事短片

使用多图参考模式,将多个场景图片连接成连贯的故事视频。

3. 艺术创作

结合不同艺术风格的图片,创造独特的视觉效果。

4. 教育内容

展示概念变化、过程演示等教育性内容。

⚠️ 注意事项
  • 参考图片的分辨率建议保持一致,避免质量差异过大
  • 首尾控制模式中,两张图片的构图相似度会影响过渡效果
  • BGM功能可能会增加处理时间,根据需要选择开启
  • 运动幅度设置为 auto 时,模型会自动分析内容选择合适的幅度