预见·科技 国产视频生成模型加速迭代 可一键创

时间: 2024-10-02浏览:

  9月19日,在杭州云栖大会上,通义万相宣布全面升级,并发布全新视频生成模型。据了解,迭代后,该大模型可一键生成影视级高清视频,并已开放免费体验。

  据介绍,通义万相首批上线了文生视频、图生视频功能:在文生视频功能中,用户输入任意文字提示词,即可生成一段高清视频,支持中英文多语言输入,并可以通过灵感扩写功能智能丰富视频内容表现力,支持16:9、9:16等多种比例生成;在图生视频功能中,支持用户将任意图片转化为动态视频,按照上传的图像比例或预设比例进行生成,同时可以通过提示词来控制视频运动。

  记者首先向该大模型输入“千里江山图古画,木舟在江上穿梭,江两岸高山连绵”的文案,要求制作一段视频。大概10分钟左右,大模型完成了视频制作。

  随后,记者又上传了一张“飞碟从街道上空飞过”的图片,要求大模型将该图片生成为视频。很快,通义万相就根据相关图片生成了一段视频。

  视频中,大模型为飞碟配上了非常赛博的背景音,而且由近及远,给人一种真实的感觉。

  记者体验发现,大模型生成的视频最长5秒左右,每秒30帧,分辨率为720P,还能生成与画面匹配的音效。

  和过去AI根据文本描述进行要素的堆砌不同,AI生成视频大模型发展到现在已经越来越呈现出具有合理运动和模拟物理世界特性的视频。

  事实上,在Sora横空出世,很多国内厂商都把AI生成视频作为追逐的焦点。不久前,快手上线了自研的视频生成大模型“可灵”,智谱AI也紧随其后推出AI生成视频模型智谱清言。此外,百度、腾讯、字节都在积极布局,争做“中国版Sora”。

  要成为“中国版Sora”,关键是解决画面表现力和大幅度运动等视频生成技术难题。通义万相相关负责人透露,视频生成大模型技术的提升,主要在于针对运动生成和物理模拟等难点优化算法,实现大幅度主体运动和运镜控制,并有效模拟真实世界物理特性。同时,设计了高压缩比、高质量视频VAE框架,有效降低视频信息冗余,并保持高质量视频重构能力。

  虽然和能生成60秒视频的Sora相比,国产视频生成大模型所制作的视频在时长上仍然有提升空间,不过在电商、广告、影视等领域,现阶段的时长已基本满足使用。业内人士表示,视频生成大模型免费开放给用户使用,能够为创作者提供更多灵感来源,生成的影视级高清视频,已在一定程度上可应用于影视创作、动画设计、广告设计等领域。

  特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

  大离谱!美国街头惊现“半个头”男子!头骨却在大街淡定闲逛!网友议论疯了…

  上半年,韩国5100万人创造9000亿GDP,浙江6627万人GDP有多少?

  小米米家首款!米家空调自然风Pro上出风1.5匹开售:自研算法 3499元

  读速7250MB/s!三星990 EVO Plus SSD开售:499元起 最高2TB

  索尼推出采用开放式设计的LinkBuds Open与LinkBuds Fit扬声器产品

  AMD 更新 24.9.1 驱动:集成 AFMF 2 技术,优化《冰汽时代 2》等

  《编码物候》展览开幕 北京时代美术馆以科学艺术解读数字与生物交织的宇宙节律

猜你喜欢

Copyright © 2023-2030 三明市梅列区才聘网络服务有限公司 版权所有

闽ICP备07035126号-9

联系邮箱: