LeCun痛批Sora后,放出视觉世界模型论文,揭晓AI学习物理世界的秘诀。

2024-03-05 热点资讯 关注公众号
    《LeCun 对抗 Sora,揭秘世界模型在视觉表征学习中的革命性突破》
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    近日,AI 领域爆发出一场革新性的对话,焦点围绕着 OpenAI 的最新成果——Sora 以及它所采用的自回归生成式路线。然而,在众人为 Sora 的惊艳表现欢呼雀跃之际,人工智能领域的泰斗级人物 Yann LeCun 却对其提出了质疑。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    LeCun 教授对自回归生成模型表示不满,认为以 GPT 系列为代表的此类模型在理解世界方面过于肤浅,远不及真正意义上的“世界模型”。他指出,仅依据提示生成逼真视频并不等同于模型理解了物理世界的内在运作机制,其生成过程与基于世界模型的因果预测有着本质区别。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    为了进一步阐述自己的观点,LeCun 近期发布了一篇新论文《在视觉表征学习中学习和利用世界模型》,该研究详细探讨了如何构建并运用世界模型来提升视觉任务的表现。这项研究的核心在于,通过调整世界模型的容量,可以直接影响所学表征的抽象程度,并使之更加灵活适应不同任务需求。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    论文介绍了名为图像联合嵌入预测架构(I-JEPA)的世界模型实例,这是由 Meta 推出的首个基于 LeCun 世界模型概念的 AI 模型。相较于传统的重建像素的生成式架构,如变分自编码器、掩码自编码器和去噪自编码器,I-JEPA 在产生高质量视觉输入表达方面展现出显著优势。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    通过对世界模型的学习和微调,不仅可以实现从图像色彩抖动到复杂变换等多种任务的处理,而且能够在保持预训练每一部分的同时,以极低的成本完成下游任务的迁移学习。实验证明,当世界模型的能力足够强大时,它可以在潜在空间中有效应用变换,进而创造出更具竞争力的表征学习框架。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    总结来说,LeCun 教授的新论文揭示了世界模型在视觉表征学习方面的关键作用,通过调控世界模型的等变性和容量属性,不仅能够挑战当前主流的自回归生成范式,更为重要的是,这一方法为未来构建更深入理解现实世界的智能系统提供了新的可能和方向。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​

上一篇:刷屏的二本学生故事,有了第二季
下一篇:“楚狂老人”陈子展二三事
更多更酷的内容分享
猜你感兴趣
Sora解密:运用大语言模型洞悉视频,揭示物理世界的涌现现象。

Sora解密:运用大语言模型洞悉视频,揭示物理世界的涌现现象。

OpenAI推出视频生成模型Sora,能根据文本指令或静态图像生成长达1分钟的包含精细场景、生动表情和复杂镜头运动的视频。其技术思路基于大语言模型,将视觉数据转化为统一表示,利用块作为处理和理解原始数据的基本单元。Sora的设计灵感来自于大语言模型的核心功能,通过代码将多种文本形式进行统一。

热点资讯 02.18
智能代理:如何通过最新 Meta 研究理解现实世界的物理定律

智能代理:如何通过最新 Meta 研究理解现实世界的物理定律

Meta发布的新研究OpenEQA基准,通过衡量AI Agent对物理空间的理解能力,帮助开发更有效的AI Agent和应用。然而,LLMs在处理3D物理空间方面还有待提高,可利用视觉等感知模式来理解外部世界并有效沟通。这是一个长期愿景,也是实现人工通用智能的关键步骤。

热点资讯 04.21
哲学家深度解读Sora,杨立昆赞同分享,AI视频距离世界模拟还有多远?

哲学家深度解读Sora,杨立昆赞同分享,AI视频距离世界模拟还有多远?

Meta首席科学家杨立昆点赞分享了一篇万字博文,探讨视频生成器是否是世界模拟器。文章以Sora为例,认为它可能不是人们想象中的“世界模拟器”,但从更宽泛的定义上来看,可以被视为有限的“世界模型”。该文引发了关于"Sora是否理解物理世界"的讨论。作者拉斐尔·米利埃尔是澳大利亚悉尼麦考瑞大学的哲学讲师,从事AI、认知科学和心智哲学等方面的学术研究。

热点资讯 03.11
通用世界模型发布,无需额外学习也能进行跨领域的即时视频制作与调控

通用世界模型发布,无需额外学习也能进行跨领域的即时视频制作与调控

Pandora 可以通过实时掌控视觉空间并进行交互式控制,打破语言世界的LLM障碍,迈向通用世界模型。通过结合预训练的 LLM 和视频模型,Pandora 开创了新方法,可用于各个领域的广泛输出,从而构建更强的通用世界模型。

热点资讯 05.26
2024年全球各国新能源汽车渗透率分析:日美印度落后,我国提升至2.9%

2024年全球各国新能源汽车渗透率分析:日美印度落后,我国提升至2.9%

当前全球汽车市场呈现稳定增长态势,其中新能源汽车尤其引人关注。中国在2024年新能源汽车市场的表现异常抢眼,占全球市场份额近六成。欧洲和北美市场也在加大投入推广新能源汽车,但总体来看,中国仍占据主导地位。各国对新能源汽车的推动政策不断优化,有望进一步提高新能源汽车的普及率。

热点资讯 11.10
小鹏P7+引领行业革新:仅需4小时即达成31528台预定目标

小鹏P7+引领行业革新:仅需4小时即达成31528台预定目标

截至11月7日24点,小鹏P7+收获31528台大定订单。小鹏P7+有多成功呢?这个数据超过了小鹏过往所有的纪录,而之前被认为“爆款”的MONA M03,达到3万大定用了48小时。未来周末,随着到店看车、试驾的潜客增加,P7+的订单还有望迎来第二波增长高峰。虽然最终P7+给出的上市价格还未公布,但其成功已无需过多解读,因为其背后是对科技的追求和对品质的坚持。小鹏汽车通过全新SoC解析技术,提升了0.6km的续航里程,使得P7+具备极高的能耗表现。它的成功证明,即使面对激烈的市场竞争和价格战,也能保持产品的核心竞争力。

热点资讯 11.10
特朗普政府推动,中国汽车降价潮或将持续

特朗普政府推动,中国汽车降价潮或将持续

11月7日,特朗普总统赢得选举,他的上台对全球产业格局产生巨大影响,电动车是否受到欢迎备受关注。特斯拉CEO马斯克的胜利不仅推动了股价猛涨,也为特斯拉带来了新的发展机遇。然而,电动车在美国的发展仍面临诸多困难,如政策阻力、规模效应及海外市场不确定性等。特斯拉能否在未来成功,还需进一步观察。

热点资讯 11.10
第三季度加仓首选:险资抢滩那些热门股票

第三季度加仓首选:险资抢滩那些热门股票

今年来,保险资金举牌次数创五年新高,累计达12次,涉及700多家上市公司,总投资规模超过1.6万亿。同时,险资加大对私募股权投资基金的投资布局,包括中国人寿、新华保险、陕煤业、伊利股份等。这一现象反映出保险资金对长期资本市场的信心,并带来了投资收益的增长。未来,监管部门将继续推动保险业的高质量发展,包括扩大保险资金长期投资改革试点等。

热点资讯 11.10
红杉中国:郭山汕创立新投资机构,成功引领拼多多与极兔快递等领域重大项目

红杉中国:郭山汕创立新投资机构,成功引领拼多多与极兔快递等领域重大项目

郭山汕自2024年10月创办熵管理投资机构,涉足公开市场股权投资、基金投资和慈善活动,其中投资拼多多、中通快递、极兔速递、满帮集团、BOSS直聘、得物、货拉拉、达达-京东到家等公司。投资界曾报道,红杉中国合伙人郭山汕在2016年末参与拼多多投资时完成尽调,并由麦肯锡出身的他确认数据真实性,下注拼多多。

热点资讯 11.10
巨额投资下,泡泡玛特再次海外布局:泰国寻求疗伤之旅?

巨额投资下,泡泡玛特再次海外布局:泰国寻求疗伤之旅?

11月2日,泡泡玛特在菲律宾的首个快闪店开业,实现了在东南亚六国的线下门店全面覆盖。 2021年以来,泡泡玛特在新加坡开出东南亚首店,之后一直保持稳步增长。数据显示,2023年全年,海外市场营收同比增长134.9%。这意味着它已经成为推动海外业务的关键力量。 泡泡玛特重视线下实体店,与当地艺术家合作,打造有文化感的品牌,并且强调品牌文化对用户吸引力的重要性。

热点资讯 11.10
提升待遇:国企将有哪些人面临薪资上涨?

提升待遇:国企将有哪些人面临薪资上涨?

段推出了量化的股权激励制度,涵盖了科研、技术、财务等多个领域,大大提升了员工的工作积极性和效率。 总结起来,国企改革深化行动中,市场化经营机制的构建和完善以及收入分配机制的改革都是重中之重。其中,市场化经营机制的改革推动了国有企业的发展活力和效率的提升,促进了业务质量的提高;而收入分配机制的改革则为科技创新和人才发展提供了强大的动力,也使得国企成为推进原始创新制度安排的重要力量。同时,国有企业也在努力将激励资源向科创、技术人才和技术一线倾斜,发挥出优秀的“头雁效应”,实现了人力资源的优化配置。

热点资讯 11.10
发掘今日最热门基金投资‘终极答案’

发掘今日最热门基金投资‘终极答案’

投资者最大愿望之一是赚得更多、波动更少。在金融学上,夏普比率衡量投资承受的风险产生的超额回报。全球最赚钱的对冲基金达里欧创立的桥水基金取代了肯·格尔和他的城堡基金成为新一届"对冲基金之王"。2022年美国市场遭受股债双杀,导致许多顶级对冲基金巨额亏损,而Citadel却在这场动荡中取得了巨大的利润。

热点资讯 11.10
华尔街紧急预警:美联储可能改变大局!

华尔街紧急预警:美联储可能改变大局!

美国总统选举结果将影响美联储的决策,但目前主流预测显示美国今年还将经历两次降息。

热点资讯 11.10
主播技巧并非关键: 西街观察直播带货的优质策略

主播技巧并非关键: 西街观察直播带货的优质策略

力可以掩盖商品本质,甚至会成为饭圈乱象的关键因素。艺人、企业家等其他角色也可以尝试直播带货,但必须保持专业性和专注度。虽然主播光环可能吸引眼球,但其内容的真实性应该被认真对待。此外,商业模式也值得深入讨论,包括主播流量价值、商品价格透明度等。总之,直播带货仍需成熟运作来保证商品和服务的质量,避免出现负面影响。

热点资讯 11.10