Sora复刻版出现了——
Mora，还是多智能体那种。
△Mora：模拟数字世界
Sora有的能力它基本都有，比如文本转视频、扩展视频、视频编辑、视频拼接、模拟数字世界等等。
还支持生成1024*576分辨率的12秒视频。
这项研究来自理海大学微软研究院的华人团队。他们运用多个视觉agent，在多个任务中表现接近Sora。
既如此，且来看Mora究竟实力如何。
Mora复刻Sora
先来看效果。
首先是文本到视频的生成。
In the middle of a vast desert, a golden desert city appears on the horizon, its architecture a blend of ancient Egyptian and futuristic elements.The city is surrounded by a radiant energy barrier, while in the air, seve(在广袤的沙漠中，一座金色的沙漠城市出现在地平线上，其建筑融合了古埃及和未来元素。)
效果还不错，有点三体内味了。
再来看，基于文本提示的图像到视频生成。
不妨就拿Sora视频比较一下。
除此之外，还支持视频编辑，比如修改一下视频里的车、给车铺上一条彩虹之路。
这个效果嘛，就还有进步空间~
不过跟Sora同款的视频拼接，是可以Hold住的。
多智能体框架
研究团队提出了一个多智能体框架Mora。
他们认为解决不同视频生成任务，需要不同专业能力agent协作。为此，Mora框架中有5个基本角色组成：
Prompt选择和生成agent、文本到图像生成agent、图像到图像生成agent、图像到视频生成agent、视频到视频agent。
每个agent负责特定的输入和输出，通过设置agent的角色和操作技能，团队定义了各种任务基本工作流程。
根据任务不同，采用特定的agent组合。
目前他们主要设计了六个工作流：
文本到视频生成；文本条件图像到视频生成；扩展生成的视频；视频到视频编辑；连接视频以及模拟数字世界。
最终，在各个任务中，Mora的表现都接近Sora。
团队认为，Mora作为开源多agent框架，具有一定的灵活性和效率，还能无缝集成各种模型。
但与此同时，也有一定的进步空间。比如高质量视频数据集的需求、指令遵循能力的提升、人类视觉偏好对齐等。
理海微软团队
此次研究来自理海大学孙力超团队，此外还有微软研究院研究员参与。
前段时间，同样也是这个团队用37页论文逆向工程解剖Sora。
他们对模型背景、相关技术、应用、现存挑战以及文本到视频AI模型未来发展方向进行了全面分析。
感兴趣的朋友可戳下方链接：https://arxiv.org/abs/2403.13248https://github.com/lichao-sun/Mora
人工智能产业链联盟欢迎各方人士加入！点击下方对应链接了解详情！↓↓↓一、人工智能产业链联盟志愿者&合伙人招募！
二、人工智能产业链联盟“智芯畅行”芯片项目组创始团队招募！
三、人工智能产业链联盟全线产品，期待全球制造商&合作伙伴加入！
四、“人工智能产业链联盟投融圈”正式启动！仅限靠谱投资人&投融资机构加入！
— 完 —
人工智能产业链联盟高端社区
相关阅读
【碳中和】珍藏版！22个国内外“碳中和”相关报告合集！
【工业机器人】全球工业机器人详细产业链梳理！
【智能制造】智能制造50大产业链全景图
【智能工厂】智能工厂如何快速落地
【工业技术】航空制造推动新概念机器人发展（上）
【工业技术】航空制造推动新概念机器人发展（下）
【新基建+人工智能生态】全网最火“新基建”生态图谱—人工智能篇（含40个细分领域厂商）
【AI】一文读懂人脸识别技术
【AI】解析 | 人工智能发展及技术架构
【报告】中国人工智能厂商全景报告（附PDF下载）
【AI】（收藏）从 A-Z 全面盘点人工智能专业术语梳理！
【AI】计算机视觉入门大全：基础概念、运行原理、应用案例详解
【AI】一文读懂机器学习、数据科学、人工智能、深度学习和统计学之间的区别
【智能仓储】一文带你彻底搞懂智能仓储！
【深度学习】12张高清思维导图，总结深度学习
【神经网络】给初学者们讲解人工神经网络（ANN）
人工智能的基础--知识分类
【AI产业链】120图勾勒全球AI产业完整图谱!
【AI】一文读懂人工智能产业链
【AI】中国人脸识别产业链全景图！
【AI】史上最全的人工智能（AI）产业链地图！
【芯片】国产芯片大全：70个细分领域代表企业
人工智能产业链深度透析—基础层
人工智能产业链深度透析-技术层
人工智能全产业链深度透析--（综合）
人工智能产业链深度透析—产业应用医疗篇
朱松纯 | 人工智能的现状、任务、构架与统一（上）
朱松纯 | 人工智能的现状、任务、构架与统一（中）
朱松纯 | 人工智能的现状、任务、构架与统一（下）
【AI】美国国家人工智能研发战略规划2019
【智慧农业】2018中国农牧家禽行业智慧养殖白皮书
【智慧农业】2019年智慧农业市场调研及前景研究报告（附PDF下载）
【智能家居】我国智能锁产业现状及未来发展趋势分析
【知识图谱】详解知识图谱关键技术与应用、AI图谱技术在知乎的应用实践、如何构建多快好省的“知识图谱即服务”
荐：
【中国风动漫】《姜子牙》刷屏背后，藏着中国动画100年内幕
【中国风动漫】除了《哪吒》，这些良心国产动画也应该被更多人知道！
【中国风动漫】《雾山五行》大火，却很少人知道它的前身《岁城璃心》一个拿着十米大刀的男主夭折！
声明
免责声明：部分文章和信息来源于互联网，不代表本订阅号赞同其观点和对其真实性负责。如转载内容涉及版权等问题，请立即与小编联系（微信号：913572853），我们将迅速采取适当的措施。本订阅号原创内容，转载需授权，并注明作者和出处。如需投稿请与小助理联系（微信号：AI480908961）
编辑：Zero