国外一家公司开发了一款利用AI直接将长视频剪辑为短视频的工具,可以智能识别视频内容中的精彩部分进行剪辑,且能保持视频内容的连贯性。
使用方法:该产品可以利用 AI 直接将视频内容剪辑为短视频,使用 Dumme 非常简单。首先,用户粘贴视频的链接,然后单击“生成”,AI 将输出一些短视频,展示所摄取内容的亮点。处理时间和生成的剪辑数量将取决于原始视频的长度,一个小时长的视频播客可能需要大约 20 分钟的时间来处理。完成后,创作者可以下载默认小于 60 秒的视频剪辑,并将它们上传到任何支持短格式内容的平台。
技术原理:Dumme 将通过元数据从源视频中尽可能多地学习。然后它会转录视频并尝试理解所说内容的语义,同时还会查看帧以尝试解码说话者的情绪。这些发现相互关联并传递给语言模型,该模型试图确定视频的哪些部分值得剪辑。然后将其移交给另一个模型,该模型跟踪活跃的扬声器并处理裁剪。使用现有的人工智能模型,如 GPT-4、 的微调版本和它内部构建的其他模型——比如在视频帧中跟踪活动扬声器的模型。它的一个模型也在一堆 上进行了训练,以了解什么是吸引观众的良好开场白。而且,虽然还没有上线,但该团队还在试验一种开源模型,来自 的 ,以便更好地理解视频的上下文。
不足之处:由于 Dumme 依赖于处理口语的 AI,因此该技术不适用于长时间的游戏视频或其他人们不说话的内容。
收费情况:目前,正在考虑的定价涉及企业为每分钟处理的视频支付 0.40 美元的费用,而较小的创作者可能会选择每月订阅 10 小时的内容。(这些数字可能会改变。)在测试期间,该产品一直可以免费使用。
参考链接:
© 版权声明
文章版权归作者所有,未经允许请勿转载。
相关文章
暂无评论...