发布时间:2024-04-01 10:16:11 浏览量:143次
今年无疑是生成式AI最火爆的一年,文字对话有ChatGPT、Gemini等,图片生成有midjourney、DALL-E等,在这之后不少厂商将目光投入到了生成式AI的最后一个关卡——视频生成。如今看来,这一领域也出现了突破,那就是这款名为VideoPoet的大语言模型。
据了解,这款名为VideoPoet的大语言模型之所以被认为是从0生成视频的革命性视频生成工具,主要就在于它不仅可以以文生视频、以图像生成视频,还能根据需要进行风格迁移也就是将一种风格的视频转换到另外一种风格,根据文本指令的提示进行交互式视频编辑,可能会给视频剪辑工作带来非常大的变革。
不仅如此,VideoPoet还能生成音频,并能通过调节视频的最后一秒预测并生成之后的一秒,并且能够通过重复这一过程来生成任意时长的视频,至于扩展视频就更不在话下,而这在视频修复、视频视频扩展方面有着非常重要的意义。
更令人眼前一亮的是,为了展示 VideoPoet 的功能,谷歌还制作了一部由 VideoPoet 生成的多个短片组成的小短片。剧本由接入了Gemini的Bard编写,整体式一个关于关于一只旅行浣熊的短篇故事,并附有逐个场景的分解和附带的提示列表。然后,谷歌为每个提示生成视频剪辑,并将所有生成的剪辑拼接在一起以生成下面的最终视频。
VideoPoet生成视频的部分截图
相关研究团队将VideoPoet与其他视频生成模型进行了对比,用各种参数来评估VideoPoet在文本生成视频方面的表现,受访者认为VideoPoet中约24-35%的示例比竞争模型更好,而竞争模型的这一比例为8-11%。由于VideoPoet生成视频的动作更有趣,评分者对VideoPoet提供示例41-54%表示了喜欢,而其他模型的这一比例则只有11-21%。
不难看出,VideoPoet不仅性能不错,还在视频制作、剪辑、修复等多个方面具有非常实际的作用,或许会成为补全生成式AI的最后一环。
不过如果以后在视频平台上看到的都是AI生成的视频,恐怕还是有点惊悚。
热门资讯
想将照片变成漫画效果?这篇文章分享了4个方法,包括Photoshop、聪明灵犀、VanceAI Toongineer、醒图,简单操作就能实现,快来尝试一下吧!
2. 华为手机神奇“AI修图”功能,一键消除衣服!原图变身大V领深V!
最近华为手机Pura70推出的“AI修图”功能引发热议,通过简单操作可以让照片中的人物换装。想了解更多这款神奇功能的使用方法吗?点击查看!
近年来,人工智能逐渐走入公众视野,其中的AI图像生成技术尤为引人注目。只需在特定软件中输入关键词描述语以及上传参考图就能智能高效生成符合要求的...
4. AI视频制作神器Viggle:让静态人物动起来,创意无限!
Viggle AI是一款免费制作视频的AI工具,能让静态人物图片动起来,快来了解Viggle AI的功能和优势吧!
5. Logo Diffusion——基于sd绘画模型的AI LOGO 生成器
这下LOGO设计彻底不用求人了。接下来详细演示一遍操作流程首先进入Logo D... 想学习更多AI技能,比如说关于怎么样利用AI来提高生产效率、还能做什么AI...
6. AI显卡绘画排行榜:4090无悬念,最具性价比出人意料
在AI绘图领域,Stable Diffusion的显卡绘图性能备受关注。本文整理了Stable Diffusion显卡的硬件要求和性能表现,以及2023年3月显卡AI绘图效率排行榜和性价比排行榜。欢迎查看最新的AI显卡算力排行榜。
7. 零基础10分钟生成漫画,教大家如何用AI生成自己的漫画
接下来,我将亲自引导你,使用AI工具,创作一本既有趣又能带来盈利的漫画。我们将一起探索如何利用这个工具,发挥你的创意,制作出令人惊叹的漫画作品。让...
以下是一些免费的AI视频制作网站或工具,帮助您制作各种类型的视频。 1. Lumen5:Lumen5是一个基于AI的视频制作工具,可将文本转换为视频。 用户可以使...
就能快速生成一幅极具艺术效果的作品,让现实中不懂绘画的人也能参与其中创作!真的超赞哒~趣趣分享几款超厉害的AI绘画软件,提供详细操作!有需要的快来...
10. 10个建筑AI工具,从设计到施工全覆盖!肯定有你从来没听过的
讲述了建筑业比较著名的AI公司小库科技做出的探索,在这儿就不多说了。今天,我们试着在规划设计、建筑方案设计、住宅设计、管道设计、出渲染图、3D扫...
最新文章