字节跳动全新AI视频生成模型Dreamina Seedance 2.0登陆CapCut

OpenAI可能会随着Sora应用程序的关闭而缩减其在视频生成市场的努力,但字节跳动周四证实,其新的音频和视频模型Dreamina Seedance 2.0现已在其编辑平台CapCut中推出。
字节跳动表示,该模型允许创作者通过使用提示、图像或参考视频来起草、编辑和同步视频和音频内容。
该计划将从巴西、印度尼西亚、马来西亚、墨西哥、菲律宾、泰国和越南的CapCut用户开始分阶段推出,随着时间的推移,还会增加更多市场。
在CapCut推出这一消息之前,最近有报道称该模型的全球推广将暂停,同时该模型致力于解决知识产权问题,这些问题招致了好莱坞因涉嫌侵犯版权而提出的批评。这可能解释了目前CapCut中提供该模型的市场数量有限的原因。
在中国,该模型可供字节跳动剑影应用程序的用户使用。

字节跳动在其声明中表示,视频生成模型无需参考图像即可工作,即使创作者仅使用几句话来描述他们心中的场景。 CapCut还擅长在一系列视觉视角和角度上渲染逼真的纹理、运动和灯光,该公司指出,这些可用于编辑、增强或纠正创作者自己的镜头。
另一个用例是允许创作者在拍摄真实视频之前据早期概念或草图测试潜在的想法。
此外,Dreamina Seedance 2.0可用于广泛的内容,包括烹饪食谱、健身教程、业务或产品概述,以及包含动作或以动作为中心的内容的视频,该公司解释说,AI视频模型历来都面临着挑战。
发布时,该模型支持六种宽高比、最长15秒的剪辑。

在CapCut中,该模型将在不同领域推出,包括AI Video等编辑功能和Video Studio等生成工具。它还将登陆字节跳动的人工智能生成平台Dreina及其营销平台Pippit。
鉴于其创建真实内容的能力,字节跳动表示,它增加了安全限制,因此该模型将无法据包含真实面孔的图像或视频制作视频。 CapCut还将阻止未经授权生成知识产权的使用。 (但是,如果这些限制能够正常发挥作用,该模型现在就可以在美国使用。很可能仍在进行更多调整。)
字节跳动补充道,Dreamina Seedance 2.0制作的内容还将包含隐形水印,这将有助于在平台外共享时识别使用该模型制作的内容。如果该模型允许版权内容通过,这可能有助于处理权利持有者提出的删除请求等问题。
字节跳动表示,随着模型的推出,它将与专家和创意社区合作,迭代和改进模型的功能。