范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文

LeCun预言AGI大模型和强化学习都是斜道!世界模型才是新路

  阿尔法公社
  重度帮助创业者的天使投资基金
  阿尔法公社说:图灵奖获得者Yann LeCun最近接受了《MIT科技评论》的采访,谈到了他对下一代AI新的想法。他认为AGI(通用人工智能)是人类与未来科技互动的不可或缺部分,而「世界模型」是AGI核心。什么是「世界模型」,它的重要性是什么?欢迎参考Yann LeCun的最新观点。
  AI界当代最著名巨擘之一、Meta的AI实验室灵魂人物Yann LeCun,长期致力于让机器对世界的运转理念有基础了解,也就是让AI获得常识。
  LeCun过去的做法,是用视频选段训练神经网络,让AI逐个像素地预测日常活动视频下一帧将会出现啥。不出人意料地,他自己承认这途径撞上了铁板。
  在数月到一年半之间的思考后,LeCun对下一代AI有了新的想法。
  AI新路径
  在《MIT科技评论》的采访中,LeCun勾勒出他的新研究路径,称如此会给机器赋予探索世界的常识基础。
  对LeCun而言,这就是打造AGI(通用人工智能)的第一步。
  能像人一样思考的机器,在AI业界诞生时就是指导性愿景,同时也是争议最大的理念之一。
  不过LeCun的新路径或许还很不完备,引来的疑问可能比获得的答案还要多。最大的疑问在于,LeCun自己承认了他还不知道如何造出自己所描述的那种AI。
  此路径的核心是个能以与之前不同方法审视、学习真实世界的神经网络。LeCun终于放弃了让AI逐个像素猜下一帧视频,只让新的神经网络学会完成任务必备的关键知识。
  然后LeCun打算将这个神经网络与另一个被称为「配置器」的神经网络配对。「配置器」专管决定哪些细节是主神经网络必须学会的、并照此来自动调节主系统。
  对LeCun来说,AGI是人类与未来科技互动的不可或缺部分。当然此展望和他押注全副身家搞元宇宙的东家Meta公司不谋而合。
  LeCun说,在10-15年间,取代现在智能手机地位的将是AR眼镜。AR眼镜上就必备能辅助人类日常活动的虚拟智能助手。如果这些助手要起最大作用,那必然或多或少要跟得上人脑智能才行。
  「世界模型」是AGI核心
  LeCun最近热衷的「世界模型」,按他说就是大多数动物大脑的基础运转模式:为真实世界跑个模拟。
  动物从婴儿期开始就用预估-试错方法来发育智能。幼孩们通过观察真实世界的运动与挫折,在生命的前几个月就发育出了智能的基础。
  观察一个小球掉个几百次,普通婴儿就算没上过基础物理课、学过牛顿三定律,也对重力的存在与运作有基础认知。
  所以这种直觉性/默会性推理,被常人称作「常识」。人类就是通过常识来认知真实世界的大多数可能未来与不可能幻想,来预见自己的行为后果并据此做出决策。
  如此的人智既不需要像素级精确细节,也不需要完备的物理学参数库。就算有人没有视力、或者是个文盲,一样可以正常发挥智能。
  但教机器学会常识就很难。当下的神经网络要被展示数千次示例后,才能开始模糊发现内含规律模式。
  LeCun表示,智能的基础是预测即刻未来的常识能力。不过在放弃让AI逐像素预测后,LeCun表示要换个思路。
  LeCun打了个比方:想象下你捏根钢笔悬空放手,常识告诉你这根钢笔必然会坠落,但掉落的精确位置则不在人智预测范围内。
  按过去的AI开发模式,AI要跑复杂的物理学模型,来预测钢笔是否会坠落、同时求得坠落的精确位置。
  现在LeCun努力让AI只预测出钢笔会坠落的常识结论,至于精确位置不在求解范围内。
  LeCun说这就是「世界模型」的基本模式。
  LeCun表示他已经造出了可以完成基础客体识别的「世界模型」早期版本,现在在致力于训练它学会上述常识性预测。
  不过「配置器」在此中的功用,LeCun说自己还没搞明白。
  LeCun想象中的「配置器」AI,是整个AGI系统的控制元件。它将要决定「世界模型」在任何时刻需要做出何等常识性预测、并调适「世界模型」为此该处理的细节数据。
  LeCun现在坚信「配置器」必不可少,但不知道怎么训练一个神经网络来做到这效果。「我们需要摸索出可行的技术清单来,而这个清单现在还不存在。」
  在LeCun的愿景中,「配置器」和「世界模型」是未来AGI基础认知架构的两大核心部分,在此之上才能发展出感知世界的认知模型、驱使AI调整行为的激励模型等等。
  LeCun称,如此神经网络就能做到每部分都在成功模拟人脑。比如「配置器」和「世界模型」起了前额叶的作用,激励模型是AI的杏仁体,等等。
  认知架构、不同层面细节的预测模型,这些都是多年来业界中既有的一派观点。不过当深度学习成为AI业界主流后,很多此类老点子就显得过时。
  现在LeCun重拾传统智慧:「AI研究界把这些东西忘掉好多了。」
  大模型和强化学习都是死路
  之所以重走旧路,是因为LeCun坚信现在的业界主流路径已经走进死胡同。
  关于如何做出AGI来,现在AI业界有两种主流观点。
  一是很多研究者坚信到搞出乌龙的路径:就像OpenAI家的GPT系列和DALL-E系列那样,模型越大越好,大到超过临界点,AI就觉醒人智了。
  二是强化学习:不断地试错,并按试错结果奖惩AI。这是DeepMind家做各种棋牌AI、游戏AI的路数。这种路径的信徒认为,只要奖励激励设定对头,强化学习终将造出真正AGI。
  Lecun表示在座的两种人都是垃圾:
  「无限扩张现有大语言模型的量级,最后就能做出人类水平的AI?这种荒唐论调,我一秒钟都没信过。这些模型就只能单纯捯饬各种文本与图像数据,完全没有真实世界的直接体验。」
  「强化学习要用巨量数据才能训练模型执行最简单任务,我不认为这种办法有机会做出AGI来。」
  业内人对LeCun的观点有支持也有反对。如果LeCun的愿景实现,AI将会成为不亚于互联网的下一代基础高性能技术。但他的声张并不包括自家模型的性能、激励机制、控制机制等等。
  不过这些缺陷都是小事,因为不管褒贬,业内人士一致认为要面临这些短板还是久远以后的事。因为即使LeCun也没法在当下马上做出AGI来。
  Lecun自己也表示承认此形势,他称自己只希望为新的理论路径播种、让后来者于此基础上建构出成果。
  「达到此目标,需要太多人付出太多努力。我现在提出这些,只是因为我认为这条路才是最终的正路。」
  就算做不到这点,LeCun也希望说服同行不要单单死盯着大模型和强化学习,最好打开思路。「我讨厌看到大家浪费时间。」
  业界反应:褒贬皆有
  另外一名AI界泰斗、与LeCun交情好的Yoshua Bengio表示乐见老友圆梦。
  「Yann说这些已经说了有日子了,不过看到他整全性地把各种言说归纳到一处,我还是蛮高兴的。然而这些只是研究方向申请而非结果呈报,大家通常只在私底下分享这些,公开聊的风险挺大。」
  DeepMind里牵头开发游戏AI AlphaZero的David Silver不赞成LeCun对自己项目的批评,不过欢迎他实现愿景。「LeCun描述的世界模型的确是个令人兴奋的新点子。」
  加州圣菲研究所的Melanie Mitchell则赞成LeCun:「业界真的不常在深度学习社群里看到这种观点。但大语言模型真的既缺记忆,又没有能担纲的内在世界模型骨干。」
  谷歌大脑的Natasha Jaques不同意:「大家已经看到大语言模型极具效率,也混杂了相当多人类知识。没语言模型,我怎么升级LeCun提出的这个世界模型?就算人类学习,途径也不止亲身经历,还包括口口相传。」
  参考资料:
  https://www.technologyreview.com/2022/06/24/1054817/yann-lecun-bold-new-vision-future-ai-deep-learning-meta/
  本文转载自新智元,内容根据《MIT科技评论》对Yann LeCun的采访编译整理。
  关于阿尔法公社
  阿尔法公社(Alpha Startup Fund)是中国领先的早期投资基金,由曾带领公司在纳斯达克上市的许四清和前创新工场联合管理合伙人蒋亚萌在2015年共同创立。
  阿尔法公社基金的三大特点是系统化投资、社交化创业者社区运营和重度产业资源加速成长。专注在半导体、企业服务软件、人工智能应用、物联网技术、金融科技等科技创新领域进行早期投资。目前已经在天使轮投资了包括白山云科技、领创集团(Advance Intelligence Group)、Zenlayer、帷幄科技、所思科技等为数众多的优秀项目。
  阿尔法公社获得36氪"2017年度最受创业者欢迎天使投资机构Top20"、"2019年中国企业服务领域最受LP欢迎早期投资机构"、"2019年中国企业服务领域最具发现力投资机构TOP10"以及"2020中国最受创业者欢迎早期投资机构TOP50"、"2021年度中国最受LP认可早期投资机构TOP30"、"2021年中国最受创业者欢迎早期机构TOP50"、"2021年中国跨境出海领域投资机构TOP10"等奖项;获得钛媒体"2020 EDGE TOP50投资机构";还获得母基金研究中心"2018年中国早期基金最佳回报TOP30"、"2019中国早期基金最佳回报TOP30",以及母基金周刊"2020中国投资机构软实力GP100科技力Top10"等奖项。
  创始合伙人许四清获得2020年"福布斯中国创投人100"、投中"2019年中国最佳早期投资人TOP50",以及36氪"2018年中国企业服务领域投资人TOP10"、"2019企业服务领域投资人TOP20"等奖项。创始合伙人蒋亚萌获得2019及2021年"福布斯中国创投人100"、36氪"2019年中国中生代投资人TOP50"大奖。

斗鱼荣耀杯开赛,共有十支KPL队伍参与,AG以全新阵容出战eStarPro和TTG战队会师秋季赛总决赛,将在本周六争夺总冠军。而由于本届挑战者杯的门槛定在了季后赛六强,所以KPL大部分队伍都收获了长达三个月的假期。虽然只有明年春季赛可以参游戏体验差,后期优化不佳,导致LOLM玩家大批弃坑最近LOLM的热度出现了明显的下跌,和之前刚上线时候的轰轰烈烈形成了明显的对比。事实证明,情怀只能卖一阵儿,游戏还得看品质。如今大批LOLM玩家陆续出走,只能证明,这款游戏确实和玩八十发抽到4把SSR?幻塔良心卡池设计获玩家好评幻塔公测已经过去好几天了,但是游戏的热度却在持续走高,这除了游戏本身质量过硬以外,也离不开游戏项目组的良心运营。尤其是对于游戏的抽卡设计,很多玩家都给出了好评,甚至还有玩家晒出了八2021年度射击游戏盘点,今天你射爆了么上周的模拟游戏盘点不知道戳中了多少玩家的心房,令其在充满创意的游戏世界爆肝数十个小时呢?这次的2021年度盘点本着放松身心的原则推荐6类FPS游戏,让玩家可以沉浸在简单的快乐当中。DNF2022强化增幅改版强化增幅此次终于迎来改版,可算是全民皆大欢喜!强化装备12以下不会失败,保留原有等级。这是什么概念?全民增幅13武器降临,就好像现在的强化10不会失败一样。增幅装备10不会掉,保留2021年爆款剧本杀盘点,哪些剧本叫好又叫座?剧本杀市场日益蓬勃,每年有成千上万部新作品面世。不过大浪淘沙,最终能被市场认可,被玩家记住的,实属凤毛麟角。转眼间,2021年也迎来尾声,今年各位都玩了多少剧本杀,又对哪些剧本最印原神2。4版本原石汇总,月卡玩家极限1。4万原石,甘雨小保底有了派蒙又开始了新一轮原石计算,抽甘雨的小伙伴准备好了么?冻梨没耐心的可以直接翻到底部看结果(分0氪月卡纪行)。先来简单过一遍2。4版本涉及原石产出的大体内容璃月港一年一度的海灯节开启孩子哭闹打骂没用!该这样帮助他世上只有妈妈好,有妈的孩子像个宝。有妈的孩子是幸福的,有孩子的妈却是是奔溃的。孩子是上天赐予(zhemo)我们的天使,我们是多么爱他们,所以当孩子各种坏情绪上身的时候,我们真的不该女孩起名,自成一派,干霄凌云的女宝宝名字大全如果说,父母对于女孩儿的期许不奢望其能够多大富大贵,只求女孩儿能够平平安安健健康康的成长的话,父母在为孩子取名时,可选择将能够表现女孩的特征融入进名字中,如清纯优雅等,赋予女孩清丽家庭教育最可怕的是一群不读书的父母在拼命育儿一个爱读书的父母,才是孩子最大的贵人。他读过的书,不仅滋养了自己,还影响孩子一生的三观。乐爸作者做80分妈妈01hr有一对不读书的父母是孩子的悲哀我们身边经常有这样一类家长打麻将成OnePlus10Pro将成为首批搭载骁龙8Gen1芯片组的手机之一根据最新报道,一加10Pro将成为首批配备这款新旗舰芯片组的智能手机之一。有了这个消息,这家中国公司已经加入了小米和摩托罗拉的名单。据悉,这两家公司率先推出搭载骁龙8Gen1SoC
餐桌上常见的4类食物,常吃或可带来肾脏健康危害,速来了解民以食为天,长期的不良饮食,会对身体健康,特别是某些重要脏器,带来不小的健康危害。特别是对于中老年朋友,随着年龄的不断增长,身体的各项机能也会逐渐下降,身体健康出现问题的风险也会越小县城的中国公司,却成功拿下世界第一,独占全球33的市场近年来,随着互联网的普及化,诞生了各种新功能的软件,其中就有一项火爆的行业短视频。短视频行业以YouTube抖音和快手等短视频软件为领军先锋。在短视频行业火热进行的同时,对智能手机这就是中国网络的力量,1条视频改变1个人的命运?老外连连感慨图为互联网经济随着互联网经济的崛起,中国也直接成为这一领域的行业第一,并且让外国人产生了深刻印象,如今就连老外也开始感慨中国网络太强大了,1条视频就能够改变1个人的命运?真的是这样中国股市股价到达低位,散户死拿不放,你猜庄家会怎么洗?庄家是股票市场上一个特殊的群体,他们拥有着雄厚的资金实力灵通的消息来源还有专业的操盘团队,在股票市场上盈利的可能性和幅度都是普通散户无法比拟的。因此,大多数庄家介入的股票,都会有比柬埔寨希望中国恢复直航航班据柬媒消息,3月4日上午,柬埔寨副总理兼外交与国际合作部长巴速坤在外交部会见中国国务委员兼外交部长王毅特别代表杨燕怡。根据外交与国际合作部消息,在会谈中,柬埔寨外长与中方代表杨燕怡吃素可以降肌酐吗?不主张完全吃素,因为我们说肌酐是人体肌肉代谢的废物,肌肉是靠一些营养物质来补充的。你如果吃得太素的话,慢慢你的体力跟不上,活动量也会减少,你的肌肉就慢慢就萎缩了。那么你的肌酐好像是水果也分阴阳(二)在我的水果也分阴阳(一)中我们说到水果也分阴阳,下面我们具体看看几种常见的水果。苹果是中性食物,适合任何体质的人食用。具有润肺健胃生津止渴消食止泻,顺气醒酒的功效。适合消化不良,气经络养生科普究竟是哪个地方堵塞,可引发多种疾病呢?究竟是哪个地方堵塞,可引发130多种疾病呢?它就是肩颈这个地方,为什么肩颈堵塞,可引发130多种疾病呢?简而言之人体的衰老从肩颈开始的,肩颈是毒素最容易堆积的地方。人体中除了肩颈能镍市场出大事了!妖镍暴涨翻倍刷新历史新高!传中国镍王遭瑞士嘉能可极端逼空金融界3月8日消息镍市场出大事了,多空之战成为关注焦点。史无前例的逼空今日早间开盘,沪镍开盘即封涨停,涨幅15。00,现报228810元吨。与此同时,LME镍价日内涨幅扩大至近20张帅海外首冠有多难?连裁判都帮助乌克兰选手,张帅用手怒指一人2022年WTA250里昂公开赛女单决赛,中国选手张帅在逆境下两度追平,最终以366364战胜乌克兰选手雅斯特雷姆斯卡夺得冠军,这不仅是张帅职业生涯的第三冠,也是她的海外赛首冠,那曲协换届竞争进入白热化,据说公式相声博士夫妇也想争一争曲协换届的消息已经在网上传开,网友们也都在讨论曲协主席的下一任人选,竞争可以说是十分激烈,都说出了自己的想法,并且有网友爆料,就连前段时间的公式相声博士夫妻也现身了,似乎也想争一争