LeCun痛批Sora后,放出视觉世界模型论文,揭晓AI学习物理世界的秘诀。

2024-03-05 热点资讯 关注公众号
    《LeCun 对抗 Sora,揭秘世界模型在视觉表征学习中的革命性突破》
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    近日,AI 领域爆发出一场革新性的对话,焦点围绕着 OpenAI 的最新成果——Sora 以及它所采用的自回归生成式路线。然而,在众人为 Sora 的惊艳表现欢呼雀跃之际,人工智能领域的泰斗级人物 Yann LeCun 却对其提出了质疑。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    LeCun 教授对自回归生成模型表示不满,认为以 GPT 系列为代表的此类模型在理解世界方面过于肤浅,远不及真正意义上的“世界模型”。他指出,仅依据提示生成逼真视频并不等同于模型理解了物理世界的内在运作机制,其生成过程与基于世界模型的因果预测有着本质区别。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    为了进一步阐述自己的观点,LeCun 近期发布了一篇新论文《在视觉表征学习中学习和利用世界模型》,该研究详细探讨了如何构建并运用世界模型来提升视觉任务的表现。这项研究的核心在于,通过调整世界模型的容量,可以直接影响所学表征的抽象程度,并使之更加灵活适应不同任务需求。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    论文介绍了名为图像联合嵌入预测架构(I-JEPA)的世界模型实例,这是由 Meta 推出的首个基于 LeCun 世界模型概念的 AI 模型。相较于传统的重建像素的生成式架构,如变分自编码器、掩码自编码器和去噪自编码器,I-JEPA 在产生高质量视觉输入表达方面展现出显著优势。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    通过对世界模型的学习和微调,不仅可以实现从图像色彩抖动到复杂变换等多种任务的处理,而且能够在保持预训练每一部分的同时,以极低的成本完成下游任务的迁移学习。实验证明,当世界模型的能力足够强大时,它可以在潜在空间中有效应用变换,进而创造出更具竞争力的表征学习框架。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​    总结来说,LeCun 教授的新论文揭示了世界模型在视觉表征学习方面的关键作用,通过调控世界模型的等变性和容量属性,不仅能够挑战当前主流的自回归生成范式,更为重要的是,这一方法为未来构建更深入理解现实世界的智能系统提供了新的可能和方向。
怒斥Sora之后,LeCun放出「视觉世界模型」论文,揭示AI学习物理世界的关键​

上一篇:刷屏的二本学生故事,有了第二季
下一篇:“楚狂老人”陈子展二三事
更多更酷的内容分享
猜你感兴趣
Sora解密:运用大语言模型洞悉视频,揭示物理世界的涌现现象。

Sora解密:运用大语言模型洞悉视频,揭示物理世界的涌现现象。

OpenAI推出视频生成模型Sora,能根据文本指令或静态图像生成长达1分钟的包含精细场景、生动表情和复杂镜头运动的视频。其技术思路基于大语言模型,将视觉数据转化为统一表示,利用块作为处理和理解原始数据的基本单元。Sora的设计灵感来自于大语言模型的核心功能,通过代码将多种文本形式进行统一。

热点资讯 02.18
智能代理:如何通过最新 Meta 研究理解现实世界的物理定律

智能代理:如何通过最新 Meta 研究理解现实世界的物理定律

Meta发布的新研究OpenEQA基准,通过衡量AI Agent对物理空间的理解能力,帮助开发更有效的AI Agent和应用。然而,LLMs在处理3D物理空间方面还有待提高,可利用视觉等感知模式来理解外部世界并有效沟通。这是一个长期愿景,也是实现人工通用智能的关键步骤。

热点资讯 04.21
哲学家深度解读Sora,杨立昆赞同分享,AI视频距离世界模拟还有多远?

哲学家深度解读Sora,杨立昆赞同分享,AI视频距离世界模拟还有多远?

Meta首席科学家杨立昆点赞分享了一篇万字博文,探讨视频生成器是否是世界模拟器。文章以Sora为例,认为它可能不是人们想象中的“世界模拟器”,但从更宽泛的定义上来看,可以被视为有限的“世界模型”。该文引发了关于"Sora是否理解物理世界"的讨论。作者拉斐尔·米利埃尔是澳大利亚悉尼麦考瑞大学的哲学讲师,从事AI、认知科学和心智哲学等方面的学术研究。

热点资讯 03.11
通用世界模型发布,无需额外学习也能进行跨领域的即时视频制作与调控

通用世界模型发布,无需额外学习也能进行跨领域的即时视频制作与调控

Pandora 可以通过实时掌控视觉空间并进行交互式控制,打破语言世界的LLM障碍,迈向通用世界模型。通过结合预训练的 LLM 和视频模型,Pandora 开创了新方法,可用于各个领域的广泛输出,从而构建更强的通用世界模型。

热点资讯 05.26
娃哈哈直播间销售额腰斩,胖东来从未售出农夫山泉绿瓶水!

搅动纯净水市场的成功秘诀:娃哈哈直播间成交锐减,胖东来却是营销新秀!

娃哈哈直播间销售额腰斩,胖东来从未售出农夫山泉绿瓶水! 搅动纯净水市场的成功秘诀:娃哈哈直播间成交锐减,胖东来却是营销新秀!

11月19日,农夫山泉创始人钟睒睒宣布推出绿瓶纯净水,引发行业震动;同时,他提醒消费者要适度饮水,不宜长期饮用纯净水。

热点资讯 11.22
中小银行纷纷跟进大行降息,为何如此迫切?

2字头存款依旧存在,各大银行纷纷调整利率,原因是什么?

中小银行纷纷跟进大行降息,为何如此迫切? 2字头存款依旧存在,各大银行纷纷调整利率,原因是什么?

来,已有数十家中小银行跟进国有大行降息步伐。需要注意的是,部分中小银行的中长期限存款利率仍在2字头,相比国有大行、股份行依然具备吸引力。实际上,部分中小银行的实际执行利率远低于其挂牌利率。建议投资者更加理性地看待各类存款产品的收益率,结合自身的风险承受能力做出选择。

热点资讯 11.22
湖南重启寻找神秘金矿之旅:谁能成为最大赢家?

湖南重启寻找神秘金矿之旅:谁能成为最大赢家?

湖南新发现一处黄金矿田,储量超过千吨,价值达6000亿元。受此消息影响,湖南黄金股价连涨两天,市值突破200亿元,达到221.2亿元。

热点资讯 11.22
钟睒睒:站在马云与俞敏洪的对面 - 增加价值与影响力的关键人物

钟睒睒:站在马云与俞敏洪的对面 - 增加价值与影响力的关键人物

到过这个平台。我对这些企业可能并不了解,但他们就敢拿我作为人肉目标,出售我的隐私信息,我觉得这是一种恶俗的行为,而且我也不愿意。我希望大家能尊重我的人格,而不是仅仅用一个简单的原因就对我进行攻击。

热点资讯 11.22
阿里五年翻番:从挣扎到复兴,这一年中的故事与挑战

阿里五年翻番:从挣扎到复兴,这一年中的故事与挑战

外部供应商的角色成为主导,涵盖国内外产业链。 1. 吴泳铭宣布成立阿里电商事业群。 2. 新电商事业群将整合淘宝天猫集团、国际数字商业集团以及1688、闲鱼等电商业务。 3. 吴泳铭将关注AI业务方面,持续加大投入。 4. 阿里巴巴将打造"1+6+N"的电商业务格局。 吴泳铭重返阿里权力中心。

热点资讯 11.22
沈向洋院士:探索AI的无限可能与挑战

沈向洋院士:探索AI的无限可能与挑战

沈向洋在2024IDEA大会上分享了他的人工智能“三件套”思考。他认为,在技术发展的大爆发期,深化对技术的理解非常重要,特别是对于技术和市场需求的适应性。他还提及了深度学习和大规模数据集的重要性,以及Yolov5和OpenAI GPT等模型的出现和发展,表明AI的进步已经进入新的阶段。沈向洋还提到了GPT-3的成功和其所带来的挑战,例如如何获得更高质量的数据以支持AI的应用。最后,沈向洋表达了对大数据时代下AI应用的期待,并提出需要通过合成数据来解决当前技术发展的瓶颈。

热点资讯 11.22
15年后的谷歌:其“闭嘴文化”的实践与启示

15年后的谷歌:其“闭嘴文化”的实践与启示

谷歌内部形成“默认删除”文化,公司企图避免因信息披露问题引发的反垄断诉讼。谷歌曾将其视为保密的个人邮件归档至“非正式记录”模式,这导致员工对谷歌的评价产生了误解。在反垄断审判过程中,谷歌表现出隐藏真实情况的态度。该公司不断强化匿名沟通,以此作为对抗外部风险的“堡垒”。

热点资讯 11.22
阿里电商组织调整的后续及一些其他细节

阿里电商组织调整的后续及一些其他细节

阿里巴巴电商业务组织调整,CEO蒋凡回归,整合国内外电商业务,同时进行人事调整。 淘天用户平台和阿里妈妈事业部总裁吴嘉将调任阿里云,原国际板块AI业务负责人张凯夫接替其位置。 淘宝天猫和1688今年都有出海动作,淘宝海外团队负责13个国家和地区的华人市场,但业绩未达激进目标。 考虑到业务融合的需求,蒋凡回归电商业务,对国内电商业务进行了重新整合,与其他高管分工更加明确。 根据企业内部信息,此次阿里电商业务的组织调整和人员调整,可能标志着公司战略转型的重要一步。

热点资讯 11.22
手握电话,不需有线连接:手机厂商打破网络限制,开启无网通话新时代

手握电话,不需有线连接:手机厂商打破网络限制,开启无网通话新时代

手机厂商推出无网通信技术提升差异化竞争力。这类技术可在关键时刻提供安全保障,尤其在荒漠戈壁、地震、洪水等灾害区域以及未覆盖的地区使用。运营商已积极行动,推出各类服务增强通信安全性,但该技术仍有局限性。未来,业内将研究并推进“星地融合”技术实现全天时、全天域通信。面对日益增加的安全气囊,手机用户们的隐私保护越来越重要。

热点资讯 11.22
央八剧《熬通宵也要追》再掀悬疑风暴!于和伟领航大制作,期待你的精彩观看

央八剧《熬通宵也要追》再掀悬疑风暴!于和伟领航大制作,期待你的精彩观看

标题:《我是刑警》将在黄金档播出!中国版“金盾传奇”即将开篇。 根据腾讯混元大模型生成的内容,电视剧《我是刑警》将于11月27日在中国中央电视台八套黄金档播出,同时同步在桃厂同步网络平台上线。该剧以小人物的成长为主线,讲述了秦川、武英德、曹忠恕等三代刑警的故事,旨在展现刑警的职业精神和背后的付出。导演通过全方位的视角展示了刑警们的日常生活,让人看到了他们对于正义的坚守和对罪犯的制裁。《我是刑警》是一部值得一看的国产剧,有望成为今年的热门之一。

热点资讯 11.22