产品动态
在 OpenAI 关闭 Sora 应用 之际，ByteDance 于 3 月 26 日确认，其新一代音视频模型 Dreamina Seedance 2.0 正在视频编辑平台 CapCut 中 rollout。
ByteDance 表示，该模型允许创作者通过提示词、图像或参考视频来起草、编辑和同步视频和音频内容。
rollout 计划
此次 rollout 将分阶段进行，首批覆盖的市场包括：
- 巴西
- 印度尼西亚
- 马来西亚
- 墨西哥
- 菲律宾
- 泰国
- 越南
更多市场将随时间推移逐步添加。
版权争议与限制
此次 CapCut 中的 rollout 消息，此前有报道称该模型的 全球 rollout 将暂停，因为它正在努力解决知识产权问题，这些问题曾引发 好莱坞的批评，被指 涉嫌版权侵权。这可能解释了该模型目前在 CapCut 中可用的市场数量有限。
在中国，该模型可供 ByteDance 的剪映应用用户使用。
功能特点
视频生成能力
根据 ByteDance 的 公告，视频生成模型无需参考图像即可工作，即使创作者只用几个词描述他们想象中的场景。CapCut 还擅长渲染逼真的纹理、动作和光照，涵盖各种视觉视角和角度，公司指出这可用于编辑、增强或修正创作者自己的素材。
另一个使用场景是允许创作者在拍摄真实视频之前，基于早期概念或草图测试潜在想法。
此外，Dreamina Seedance 2.0 可用于各种内容，包括：
- 烹饪食谱
- 健身教程
- 商业或产品概述
- 动作或运动密集型内容视频（AI 视频模型历来在这方面面临挑战）
技术规格
- 视频长度：最长 15 秒片段
- 宽高比：支持 6 种宽高比
- 部署位置：将在 CapCut 的不同区域 rollout，包括 AI Video 等编辑功能和 Video Studio 等生成工具
安全措施
鉴于其创建逼真内容的能力，ByteDance 表示已添加安全限制：
- 人脸保护：模型无法从包含真实人脸的图像或视频生成内容
- 知识产权保护：CapCut 将阻止未经授权生成知识产权内容
- 隐形水印：模型生成的内容将包含隐形水印，有助于在内容离开平台共享时识别
如果限制正常工作，该模型现在应该可以在美国使用。可能仍在进行更多调整。
ByteDance 表示，随着模型的 rollout，它将与专家和创意社区合作，迭代和改进模型的能力。
行业背景
视频生成 AI 市场竞争激烈：
- OpenAI：刚刚关闭 Sora 应用
- Google：推出多种视频生成工具
- Runway：持续迭代 Gen 系列模型
- Stability AI：开源视频生成方案
ByteDance 通过 CapCut 的庞大用户基础，可能在这一领域获得显著优势。