主页 > 新闻 > 全球热点 > 正文

AI生成视频怎么制作 RunwayML文本生成视频完整流程解析

发布时间：

使用RunwayML的文本生成视频功能（如Gen-2或Gen-3 Alpha模型），可通过以下完整流程实现从文本描述到视频输出的创作，适用于短视频、创意动画等场景：

一、准备工作

1. 访问平台与注册

  • 网页端直接使用：访问RunwayML官网（runwayml.com），注册并登录账户（支持免费试用，部分高级功能需订阅）。
  • 插件集成（可选）：若需在Adobe Photoshop中使用，可安装RunwayML插件（需Photoshop CC 2019+，参考官方安装指南配置调试模式）。

2. 了解模型版本

  • Gen-2：支持文本生成视频（3-5秒短视频）、图像生成视频、视频风格迁移，免费用户可试用基础功能。

  • Gen-3 Alpha：2024年6月发布的进阶模型，生成速度更快（5秒视频45秒完成）、支持10秒视频和细粒度控制（如动态运镜、情绪刻画），需申请访问或订阅高级账户。

  • ExpandVideo功能：Gen-3 Alpha Turbo用户专属，可通过文本提示扩展视频画面、添加动态运镜（如快速变焦、拉远镜头），实现电影级效果。

二、文本生成视频核心步骤（以Gen-2为例）

Step 1：选择「文本生成视频」功能

  • 登录后进入RunwayML工作台，点击左侧导航栏的 「Gen-2」 或 「Text to Video」 选项（不同界面版本可能名称略有差异）。
  • 若使用Gen-3，需在模型选择中切换至 「Gen-3 Alpha」（需权限）。

Step 2：输入文本提示词（Prompt）

  • 提示词格式：需用英文描述视频内容，包含场景、主体、动作、风格、镜头等细节，示例：
    • 基础版：A cat walking in the rain, realistic, 4K（雨中行走的猫，写实风格，4K分辨率）
    • 进阶版：A astronaut floating in space, stars in background, cinematic lighting, slow-motion（宇航员在太空漂浮，背景有星星，电影级灯光，慢动作）
  • 技巧：
    • 指定风格：如 anime style（动漫）、watercolor（水彩）、3D render（3D渲染）。
    • 控制运动：添加 smooth movement（平滑运动）、zoom out（镜头拉远）等关键词。

Step 3：调整参数与生成设置

  • 视频时长：Gen-2默认生成3-5秒视频，Gen-3支持5秒或10秒选项。
  • 分辨率：可选720p或1080p（免费用户可能限制为720p）。
  • 风格迁移（可选）：若需特定艺术风格，可上传参考图（如梵高画作），启用「Style Transfer」功能。
  • 点击「Generate」按钮，等待模型生成（Gen-2约1-2分钟，Gen-3速度更快，5秒视频约45秒）。

Step 4：预览、编辑与导出

  • 预览视频：生成完成后，在预览窗口查看效果，支持播放、暂停和逐帧检查。

  • 二次编辑：

    • 使用 「Inpainting」 功能修复局部瑕疵（如删除多余物体）。
    • 通过 「Motion Brush」 调整动态效果（如让特定区域运动更快）。
    • Gen-3用户可叠加 ExpandVideo 功能：输入文本提示扩展画面（如 add mountains on the left），或调整运镜路径。

  • 导出视频：点击「Export」，选择格式（MP4）和质量，下载到本地（部分浏览器需右键视频选择「另存为」）。

三、高级功能：Gen-3 Alpha与ExpandVideo

1. Gen-3 Alpha的细粒度控制

  • 情绪与细节刻画：支持生成复杂场景和人物表情，如提示词 A sad man becomes happy when a wig falls on his head（秃头男子戴上假发后由悲转喜），可精准呈现情绪变化。
  • 电影级运镜：通过「Director Mode」调整镜头角度（如俯拍、追踪镜头）和运动速度，模拟专业摄影效果。

2. ExpandVideo扩展画面与动态效果

  • 使用方法：

    1. 上传已有视频或生成新视频后，点击「Expand Video」功能。

    2. 输入文本提示扩展画面（如 extend the background to show a forest），或指定运镜效果（如 crash zoom into the character's face）。

    3. 多次应用可实现连续变焦、环绕镜头等复杂动态序列。

四、提示词（Prompt）优化技巧

  • 结构清晰：按「主体+动作+场景+风格+技术参数」组织，例如：
    A girl riding a bicycle through a cherry blossom forest, spring season, soft lighting, Studio Ghibli style, 1080p, 24fps
  • 避免歧义：明确数量、颜色、视角（如 two red apples on a wooden table, top-down view）。
  • 参考案例：

    • 生成动画：A 3D animated short of a robot dancing, Pixar style, vibrant colors

    • 生成广告片：A product commercial for a smartphone, close-up of the screen, futuristic UI, slow pan

五、注意事项

  1. 免费试用限制：普通用户每月有免费生成额度（如Gen-2约50秒/月），超额需订阅付费套餐（基础版约 $15/月）。

  2. 内容合规：禁止生成暴力、色情、版权侵权内容，系统会自动过滤违规提示词。

  3. 效果局限性：复杂逻辑（如多人物对话）、长视频（超过10秒）生成效果可能不佳，建议分段制作后用剪辑工具拼接。

  4. 浏览器兼容性：推荐使用Chrome或Edge浏览器，避免因兼容性问题导致生成失败。

六、完整工作流总结

  1. 构思与写提示词：明确视频主题、风格和动态效果，用英文详细描述。
  2. 生成初稿：通过Gen-2/Gen-3生成基础视频，检查主体和场景是否符合预期。
  3. 优化与扩展：使用Inpainting修复瑕疵，用ExpandVideo添加运镜或扩展画面。
  4. 导出与后期：下载视频后，用剪映、Premiere等工具添加背景音乐、字幕或转场效果。

通过以上流程，即使无专业视频制作经验，也能借助RunwayML快速生成高质量AI视频，适用于自媒体、广告创意、动画短片等场景。

阅读全文
▋最新热点