中国首个长时长视频大模型Vidu发布,生数科技携手清华大学共同打造未来互联网基础设施

2024-04-27 热点资讯 关注公众号
生数科技联合清华大学发布中国首个长时长、高一致性、高动态性视频大模型—Vidu。该模型采用团队原创的 Diffusion 与 Transformer 融合的架构 U-ViT,可一键生成长达 16 秒、分辨率高达 1080P 的高清视频。

随着数字技术的发展和短视频平台的崛起,视频成为互联网的重要组成部分。然而,视频制作过程中面临的挑战包括长时长、高一致性、高动态性的要求,以及生成高清视频的需求。因此,我们要发布中国首个长时长、高一致性、高动态性视频大模型——Vidu。
Vidu模型采用了团队原创的Diffusion与Transformer融合的架构U-ViT。diffusion模型负责信息在不同时间点上的传播,而Transformer则通过将先前的信息片段编码成新的模式,从而实现长期的复制和再创造。这种设计使得Vidu能够在处理长时间、多变的任务时表现出色,保证了视频的稳定性和一致性。
同时,Vidu还具有强大的动态性能。它可以根据当前场景和目标媒体的变化进行调整,自动地适应各种视频的需求。这一特性对于新闻视频、体育赛事直播、电影预告片等多媒体至关重要,能够帮助用户获得更丰富、更生动的体验。
在生成高清视频方面,Vidu也表现出了优秀的性能。Vidu采用先进的图像渲染技术,可以在保持画质的同时提高帧率,确保视频的流畅度和舒适度。此外,Vidu还支持多种视频格式的转换,包括H.264、MP4、WebM等,满足用户的多样化需求。
总结来说,Vidu模型是中国首例结合了Diffusion与Transformer技术的大规模视频生成工具。它的长时长、高一致性、高动态性的特点使其在视频的生成上具有广泛的应用前景。在未来,我们将继续优化Vidu模型,提升其在更多领域的应用效果,让更多的用户受益于我们的创新成果。

上一篇:带50余名员工集体跳槽干倒老东家,三人被刑拘
下一篇:头晕?乏力?找不到病因?可能是“A型胃炎”在捣乱
更多更酷的内容分享
猜你感兴趣
中国首个Sora级模型Vidu发布,16秒最长视频最高1080P

中国首个Sora级模型Vidu发布,16秒最长视频最高1080P

生数科技在中关村论坛发布中国首个长时长、高一致性、高动态性视频大模型——Vidu,这是国内首个Sora级别的视频大模型。Vidu模型融合Diffusion和Transformer技术,具有丰富的想象力和多镜头生成等特性,预计会在未来加速迭代提升。该模型的开发过程得益于团队在贝叶斯机器学习和多模态大模型上的长期积累,以及开源了全球首个基于U-ViT融合架构的多模态扩散模型UniDiffuser,实现了大规模可扩展性验证。

热点资讯 04.27
率先发布的首个国产自研视频大模型,中关村声音引领行业革新

率先发布的首个国产自研视频大模型,中关村声音引领行业革新

清华大学教授朱军发布中国首个长时长、高一致性、高动态性视频大模型Vidu,实现了多个显著提高的视频制作效果,包括生成细节复杂的场景、真实世界的虚构画面、复杂的动态镜头、中国元素的融入等。该技术路线与Sora高度一致,由生数科技与清华大学联合推出,并已在年内取得了突破。

热点资讯 04.27
中国版Sora」发布全新Vidu功能: 32秒时长延展与音视频合成功能首次上线!

中国版Sora」发布全新Vidu功能: 32秒时长延展与音视频合成功能首次上线!

供多维视图。朱军教授在现场展示了Vidu4D的技术细节,并详细介绍了其在创建真实三维场景中的优势。此外,他强调了Vidu未来在更多领域的应用潜力,例如虚拟现实、游戏开发等。 综上所述,经过三次重大技术迭代,生数科技与清华大学共同发布的中国首个长时长、高一致性、高动态性视频大模型Vidu即将实现国内视频模型更大的技术跨越。这项重大进展在钛媒体AGI独家报道下,引发了业界广泛关注。

热点资讯 06.09
百度研究院副院长与微软高管联手打造移动端大模型基础设施项目

百度研究院副院长与微软高管联手打造移动端大模型基础设施项目

前百度研究院副院长李平的新创业公司VecML已顺利完成产品探索和初步研发,曾任微软首席科学家,现为中国科学院院士。创始人李平博士曾任斯坦福大学计算机系、统计系终身教授,曾领导百度认知计算实验室落地多个成果,包括超大规模深度学习GPU平台等。

热点资讯 09.24
刀郎方回应云朵威胁:否认携家人威胁解约

刀郎方回应云朵威胁:否认携家人威胁解约

云朵走红,却被网传她与师傅刀郎师徒发生冲突,还被其弟弟打腰部。刀郎经纪公司否认云朵威胁解约,并发布辟谣声明,云朵否认接受刀郎徒弟身份。网民对云朵的回应分歧很大,她在过去两个月经历人生最低谷。近期,刀郎演唱会再次重启,云朵缺席引发争议,曾三次发声以平息争议。如今,面临舆论压力,云朵两次发声试图挽回自己的形象。

热点资讯 11.22
第十一批在韩中国人民志愿军烈士遗骸11月28日回国,迎接新成员:再迎43位英雄回家

第十一批在韩中国人民志愿军烈士遗骸11月28日回国,迎接新成员:再迎43位英雄回家

中韩签署了第十一批在韩中国人民志愿军烈士遗骸交接协议,韩方将于今年11月28日向中方移交43位烈士遗骸及相关遗物。此次交接在中韩双方遵循人道主义原则和国际法的基础上进行。

热点资讯 11.22
女生在风筝比赛中遭风筝线割喉,但主办方已签订《免责协议》,依法尽责

女生在风筝比赛中遭风筝线割喉,但主办方已签订《免责协议》,依法尽责

小姜参加南京江北新区盘城街道举办的“骑遇盘城”单车露营大会暨乡村自行车个人计时赛,不幸被风筝线割喉。此前两根风筝线也被发现并清除。主办单位认为选手签署了《免责协议》,但由于双方存在过错,主办方应承担责任。

热点资讯 11.22
外交部回应:针对涉港法案事件,中方将持续依法治港,打击一切形式的外部干预与颠覆活动。

外交部回应:针对涉港法案事件,中方将持续依法治港,打击一切形式的外部干预与颠覆活动。

中国政府对于美国国务院关于对实施《香港国安法》的香港官员实施签证限制的声明表示强烈不满。同时,中国政府也明确表明,中国中央政府坚定支持香港特区维护国家安全、依法惩治各类危害国家安全的活动,并坚决反对任何形式干涉香港事务。对于美国试图插手香港事务的行为,中国政府将采取一切必要措施予以反制。

热点资讯 11.22
普京详解未携带核弹头导弹:测试凸显实力,外交部回应

普京详解未携带核弹头导弹:测试凸显实力,外交部回应

俄总统普京对北约联军对乌克兰军工企业联合打击,测试新型导弹并呼吁对话缓和紧张局势。中国主张通过谈判解决问题,支持尽快达成停火协议。

热点资讯 11.22
1个月内,中菲双方10位领导人均未获与东盟各国直接会面的机会

1个月内,中菲双方10位领导人均未获与东盟各国直接会面的机会

中国与东南亚国家在几个月内频繁接触,高层官员见面次数最多,其中菲律宾只露过一面;在推进亚太经合组织峰会等方面取得进展,南海问题有望达成共识。

热点资讯 11.22
普京提议的俄乌边界新概念可能改变欧洲的命运:一场新的输家争夺战即将上演?

普京提议的俄乌边界新概念可能改变欧洲的命运:一场新的输家争夺战即将上演?

乌克兰危机进入尾声阶段,普京提出了俄乌边界的新概念想法,要用新领土为和谈基础,欧洲成为了真正的输家,那么泽连斯基是否会接受和谈计划呢? - 美西方国家面临巨大经济负担,乌克兰危机中欧洲成为最大输家。 - 乌克兰战场上局势紧张,俄军加大在哈尔科夫和扎波罗热方向的部队规模,准备全歼乌军主力。 - 泽伦斯基表示乌克兰考虑明年以外交手段结束冲突,暗示俄乌冲突已进入尾声阶段。 - 德国总理朔尔茨与俄总统普京举行了一次通话,双方主要就乌克兰危机和中东局势进行了交谈。

热点资讯 11.22
中国专属飞机跨越半球降落非洲西北角,传达出尊重与理解的信号

中国专属飞机跨越半球降落非洲西北角,传达出尊重与理解的信号

中方将采取措施进一步吸引摩洛哥投资,以避免受到当前中欧关税争端的影响。由于摩洛哥地处欧洲和阿拉伯世界之间,加强与中国的关系有助于规避关税压力,并进一步扩大对外投资机会。此外,摩洛哥在能源、交通等领域的潜力也会吸引更多的中企投资。未来双方应继续推动更加开放、务实的合作关系。

热点资讯 11.22
普京陷入严峻困境,能否挽回战局的关键时刻?

普京陷入严峻困境,能否挽回战局的关键时刻?

俄罗斯银行行长表示,如果没有新的外部冲击,预计明年将降息。然而,这一决定与俄罗斯央行近期的多次大幅度上调基准利率有关,这是因为俄军认为当前的利率过高,必须下降。这是由于他们预期俄乌冲突会迅速结束,并且认为俄罗斯将在接下来的一年内开始宽松货币政策。此外,俄国内对这场战争长期乐观的预期也可能影响了央行的决策。经济过热可能导致高通胀,根据俄罗斯统计局的数据,近几个月的消费物价指数(CPI)一直在持续上升,超过年初预期的水平。俄罗斯为了应对这个问题,实施了大量的征募合同兵计划,并提供了高额的奖励给牺牲者及其家庭。同时,俄罗斯也面临着产能不足的问题,特别是与战事相关的设备制造业。因此,短期内可能会看到资金外流的现象,但预计在接下来的一段时间内,这种现象会被纠正。

热点资讯 11.22
一夜之间暴露,网络售假活动被警方严厉打击

一夜之间暴露,网络售假活动被警方严厉打击

上海警方披露,侦破一起涉及互联网企业破坏计算机信息系统案件,捣毁制作、售卖游戏外挂的黑灰产业链。

热点资讯 11.22