实验简介:
AI视频生成是AIGC领域的前沿技术,通过可灵、即梦、Vidu 等国产视频生成大模型,可以根据文本描述生成视频内容。本实验调用真实的语言模型和图像模型,体验“提示词 → 分镜 → 关键帧 → 动态画面”这条视频生成流程的前半段。
操作说明: 改写提示词后点击“生成视频”,观察AI如何拆分镜头、生成关键帧,再导出动态分镜视频。
浏览器里无法直接运行视频大模型,这里用真实的 AI 走一遍视频生成的前半段:先让语言模型把提示词拆成 4 个镜头,再用图像模型逐个生成关键帧,最后按镜头的运镜方式(推、拉、移)做成动态分镜并可导出为视频文件。每次会生成 4 张图片。
开发: 字节跳动
特点:
应用: 短视频创作、营销素材
开发: 生数科技、清华大学
特点:
应用: 动画短片、影视预览
开发: MiniMax
特点:
应用: 创意短片、社交媒体
开发: 快手
特点:
应用: 短视频创作、营销素材
保证前后帧的连续性,避免物体突然消失或变形
符合真实世界的物理规律(重力、碰撞、光影)
视频生成需要巨大算力,1分钟视频可能需要数小时
目前多为720p-1080p,4K/8K视频生成仍有困难