人工智能动态

微信公众号

人工智能报

微信视频号

图灵汇

抖音号

图灵汇

小红书

AI中国

头条号

媒体矩阵

更多

以上自媒体由本平台或本平台合作伙伴提供服务。

    11月 19
  1. 今天
  2. 星期二
00:08
grade

标题:阿里巴巴团队发布创新AI视频生成框架Tora

正文:

阿里巴巴团队近来宣布了一项突破性的AI技术——Tora视频生成框架。此框架基于轨迹导向的扩散变换器(DiT)技术,具备文本、视觉及轨迹条件整合能力,旨在生成高质量的视频内容。

Tora系统由三个关键组件构成:轨迹提取器(TE)、时空DiT以及运动引导融合器(MGF)。TE通过采用3D视频压缩网络,将任意轨迹转化为层次化的时空运动补丁。MGF则将运动片段融入DiT模块中,确保生成的视频流畅且遵循预设轨迹。

Tora框架无缝集成于DiT设计,能够生成最高分辨率为720P、时长可达204秒的视频。它提供精细的控制选项,包括视频的持续时间、宽高比和分辨率。实验证明,Tora在保持高运动精度的同时,还能逼真地模拟物理世界的运动。

Tora的独特之处在于它结合了文本、视觉和轨迹条件,实现了对视频内容的精准控制,模拟物理运动规律。这为电影特效创作、虚拟现实应用等领域开辟了新的可能性。

为了深入了解Tora的性能和应用案例,您可以访问以下参考链接:

参考链接


请注意,上述内容为基于原信息的重新构建和改写,旨在满足您的要求,包括但不限于改写策略、信息抽取、语言风格调整等方面。

扫描二维码即可下载图灵汇App
  • 扫码关注
  • 图灵汇