里奇·萨顿(Rich Sutton)的最后一篇文章:从数据

日期:2025-07-29 浏览:

Leifeng.com新闻AI和人们两次都处于历史转折点。随着对人类数据的可移动知识迅速解决了其限制,规模方法的最后一点变得模糊。当今的大型语言模型可以通过编程写诗歌,但他们仍然无法独立发现新知识。显然,真正的情报要求出现新的培训范式。最紧迫的问题是人自己。自古以来,智者一直在试图了解人类思想的运作方式。如果最终探讨了这一原则,不仅有AI的希望,而且在搜索1000年之前也担心。转折点应该如何看待他们的智慧水平超过人类的智能水平?最重要的问题,您看起来如何?在2025年的Waic 2025年,Rich Sutton教授,现代股票学习的创始人,艾伯塔大学的教授,发表了题为“数据时代的开幕词萨顿教授指出,在经验时代。萨顿教授此前曾告诉媒体:“世界从不告诉您您应该做什么。但是,萨顿教授还指出,现有的深入计划算法仍然是继续学习和元学习的能力,因此不足以最大程度地提高经验数据和互补学习的可能性。在讲话期间,萨顿教授还建议对AI进行四个现实的预测。”关于AI将如何发展的世界尚无共识,“我们需要创造真正的智力”,“随着时间的流逝,社会的力量和社会的力量,人类智能的水平迅速提高”。资源流向最明智的生物。 看法。人类专家,包括专家的专家,整个过程围绕着人类的普通词汇旋转。它产生了新知识。代理商与世界之间的第一人称互动。在阶段阶段,您必须首先训练代理商并使用视频解释为什么这很重要。您可以看到一个婴儿在玩玩具。与玩具互动,然后收到评论,并认为这是一只好小猫,然后转到下一个玩具。在此过程中,生成的数据不是静态数据收集,而是非常动态且高度个性化的数据。通过这种互动,他决定何时完成任务以及何时探索下次。因此,人类儿童的行为表现出好奇心和欲望,并且更现实和多样化。如您所见,经验数据非常密集。数据进入了眼睛,耳朵和四肢的极高速度。因此,我们必须很快做出决定,并且延误并不是一个很大的好处。所有决定都围绕进球,平衡蝙蝠击球,足球运动员控制终点线的球,动物为生存而战。这也是一个高带宽活动,实时获得的信息用于确定下一个动作和预测会发生什么。这是生活的本质。正是这种数据可用性使Alphago获得了创意步骤37。这是人类永远不会思考的步骤,因此会导致思维方式的变化。这也是一种数据库方法,在该方法中已经在诸如国际象棋(例如Alpha Zero)等领域已经测试过奖章。让我们在幻灯片上使用另一页来谈论我们的想法。想象一下,那个特工获得构成其经验的世界(感知和互动)的数据交换信号。应该注意的是,这种类型的数据与经典的自动学习(例如受监视的学习)有很大不同。监视学习显示IID(独立和同性恋分布)的样本,可以按任何顺序破坏并随机显示。特工在这里观察到的是行动。他所学的是“在这种情况下预测标签”,并且对手机制生成要使用的数据类型。这些经典数据是DESC将其作为“在这种情况下,我们预测(动作)”。然后,当代理人工作时,他实际上是在执行预测行动。因此,代理商看到的不是我们通常理解的数据或经验的类型。人类采取行动并观察结果。关键是代理商没有看到“如何表现”的例子。只需查看其他操作的结果即可。因此,这种学习经验与受监控的学习不同。在人类数据时代,数据背后的本质与受监控的学习分开。在人类数据时代,数据背后的本质与受监控的学习(部门)分开。一个更详细的观察结果是,以这种经验的思想方式,代理商了解了自己的经历,我认为这是对人类的。我们认为的一切都必须将我们的经验变成可以很好地验证的事实。您认为加拿大是北方和遥远的,这是关于您旅行的信念。我想你坐在t中他的礼堂和听你的演讲。这是您的经验,是关于您的感觉或空间的椅子。所有这些都必须转化为您的经验,以便您可以在无人干预的情况下自动学习和调整。继续以这种心态的体力实力,当代理说它是聪明的时,智力的程度取决于其预测和控制激发信号的能力(尤其是奖励信号)。从这个角度来看,经验是AI智力的核心和基础。这是一个深刻的视野,它是通过增强学习的基础形成的。这对所有人都是显而易见的。学习来自强大的经验和经验是心理活动的基础。但是有时很难看到什么是显而易见的,人们需要一种新的观点才能看到它。最近,我对计算机科学之父艾伦·图灵(Alan Turing)感到惊讶。他在1947年说(甚至没有AI一词那个时候):“我们想要的是一台可以从经验中学到的机器。”我认为这是一个非常深刻的观点。特别是今天,我们达到了人类数据的局限性,并尝试从经验中学习。当这对现代AI特别重要时。因此,这导致了最近的发展历史。从左到右,我们看到多年来我们对强化学习非常关注。我不得不提到阿塔里的作品。阿塔里(Atari)的作品首先引起了人们对加强学习的极大兴趣,而阿尔法戈(Alphago)加深了兴趣,当阿尔法泽罗(Alphazero)成为世界冠军时,他将他达到了最大的观点。从本质上讲,每个人都说:“看,现在有一个大型语言模型。”它是GPT-3和所有其他模型,例如Chatgpt和现代模型。这在世界上引起了巨大而真正的创造力。这些系统的功能已被证明。非常强大,非常重要,非常有用。但是,我们现在达到人类数据的限制,我们现在正在求助。利用Useai控制计算机(例如编程参与者)等系统(例如AutoGPT和系统),人们越来越感兴趣。这可能是我们获得人类以外的情报来解决超出人类建筑能力的超级挑战的方式。因此,让我总结我对未来AI的看法。首先,超级代理商的出现和人类超级聪明的增长将发生,并为世界带来巨大的好处。可能需要数十年的时间,几十年,也许只有一两个,然后将持续数十年。这不是冲刺,如果是一场比赛,那是马拉松比赛。为了充分享受情报的好处,ED可以从经验中学习。当今的大型语言模型已经很棒,非常重要且有价值,作为世界所有知识的可自定义界面,但实际上,没有办法获得强大的通用智能。我们进入了一个新时代,即“经验时代”。在这个tIME,他学习了Zaje,可以用作一种致力于学习经验的技术。但是,需要更好地进行学习算法,以实现学习经验或增强学习的所有潜力。我们现有的深度计划算法仍然没有能力继续学习和元学习。由于必须解决的基本问题,这些问题可能会重新出现。但是我认为这个过程最终得到了解决,实际上,这一过程正在发生,这是我们讨论的核心。然后,欢迎进入“经验时代”。现在,我想从政治角度谈论人工智能,这是繁荣的来源。我希望讨论这个问题。与社会相关的问题是否具有独特的或多个目标?在改进的沟通或强化学习中,每个代理都有自己的作用,因此没有固有的理由,每个代理都有自己的目标和不同代理的目标必须相同。如果他观察自然,每只动物都会有自己的痛苦和幸福,并且有差异符合一般需求,也许是繁殖,护理后代,食物和避难所。但是,它们没有与动物的食物相同的角色。同样适用于人。你的家人与我的不同。我们当然有一些共同点,但是我们都有不同的目标。这些目标之间可能存在对称性,因为我们都关心食物和我们的家人,但我们的目标还不相同。经济学家交流,我们的经济不依赖具有共同目标的人,因为当具有不同目标和技能的人共同交流时,经济更加活跃。我们经常说,人们为一个共同的目标而努力。但是,即使不存在这样的目标,人们仍然可以共同努力并和平生活。尽管我们想要的是非常不同的事实,但合作仍然有利为每个人。为此,我想介绍一些术语。我想谈谈“权力下放”。对于社会而言,权力下放意味着有很多代理,每个人都有自己的目标。我认为这是我们经济的基础。它基于许多具有自己目标的代理商。 “合作”是这些代理之间与不同目标的相互作用之间的相互作用,并通过多种相互作用共同受益。我想指出的是,这种特殊的人类超级大国是合作。人类的合作水平比任何其他物种都高得多,这种合作是由人类的独特发明促进的:语言和迪内罗。人类最大的成功是我们的基础,市场,政府和人文科学的合作。人类最大的失败是战争的合作失败。正如我所定义的那样,分散合作是“共同社会目标”的替代方案,并且更优雅可持续发展。这可能是一种以强大,有效和灵活的方式组织高级社会的方式。人类比其他任何动物都更好地合作,但我们仍然必须小心。我们仍然面临战争和饥饿,面临着由于合作失败而引起的所有其他问题。然后,我们努力实现合作。但是,合作并不总是可行的,至少需要两个值得信赖的代理商。而且总是有一个优势,不合作,始终对世界构成威胁,例如武器和独裁者制造商。因此,机构对于惩罚非政治的必要条件是支持合作的。这些系统有时是集中的,甚至希腊也使用某种集中式系统来实施政策并促进合作。密集的当局可以促进短期合作,但存在很长的风险。当集中式系统占主导地位或效率低下时,它们就会成为障碍。所以我认为这两个意见(我反对的控制和分散合作。这两者之间的张力与在此范围内找到正确的位置是我们时代的一个核心政治问题。如今,有许多要求对AI进行集中管理的呼吁。有呼吁控制访问权限,暂停或停止对AI进行研究的呼吁,限制AI可用的计算机功率的调用,并且有许多电话可以保证AI的“安全性”。我想考虑这些呼叫的相似性,并从两个点控制人类。今天,我们可以看到越来越多的此类呼叫。您可以控制语音,控制媒体,控制贸易,人们可以在哪里工作,可以在不同地方工作,管理资金,控制人和金钱的基本生活材料的人。对经济制裁也有需求,这意味着越来越多的关税。这些要求对AI和人类的集中控制的呼吁令人惊讶地作为一场辩论,并且基本上几乎总是基于FEar。他们谈到“其他人”:AI不像人类,其他国家也不喜欢我们。我们成为恶魔,他确认其他国家和其他国家不可靠。我可以从西方的角度和美国的角度讲话。他们妖魔化了中国,并坚持要您不信任和需要害怕。我认为中国人也偏见了一些国家,例如美国,尤其是在军队中。这些陈述和恐惧的存在是正常的,但是您应该知道它们来自哪里。 IA也适用于人类的繁荣。人类的繁荣来自分散的合作,人类也不适合合作。合作并非总是可能的,而是我们世界上所有美好事物的来源。由于合作,我们在所有技术,所有安全和经济中享受的所有产品和服务。因此,我们必须寻求合作并找到使它制度化的方法。另一方面,如果我们睁大眼睛生活公开,我认为很容易看到谁声称不信任。谁说您不需要与其他人一起工作?谁想要集中管理?您必须抵制这些电话。这是一个有效的观点,可以检查所有有关与人工智能互动的呼吁。什么是人?我们应该如何看到AI在太空中的观点,因为它正在迅速发展并在不久的将来得到增强?是好人还是邪恶?我们是否应该担心AI接收我们的工作并使我们过时?还是我们与人工智能和人类通过技术共存?这三个情况可能会发生。我应该告诉AI“你好,外星人入侵者”或“人类的孩子”?我们是否后悔AI的迅速增长或庆祝其成就?我认为我们所有人都需要自己决定如何看待AI。我不是在这里告诉您如何思考,我认为我们今天不应该赶快决定对AI的态度。如何显示AI的增加太重要了,无法盲目回应。我们需要考虑一下并选择一个品种y观点。当今新闻的观点充满了对AI的恐惧:AI会导致生存风险,您可能会失去巨魔,而我们需要的是一个平衡的思维过程。您必须考虑这个问题的另一面,因此我主要可以考虑一些缓解烦恼并意识到AI的方法。我认为AI不是外星技术。实际上,它是人类最古老的活动之一。数千年来,哲学家和智者一直试图理解他们的思想,但对自己的机制着迷。我们的思想如何工作?我如何使其正常工作?这是一个永恒的问题,也是一个很好的搜索。我喜欢艾伦·凯(Alan Kay)的著名谚语:“智力是宇宙中最有力的力量形式。”现在,我们了解可用于人类利益的这种强大力量。简而言之,我相信理解情报和理解情报本身的努力是圣杯。它们是如此多的DI的目标和目标科学和人文科学学科。因为WEIT使我们能够理解自己的思想。在这一点上,这是一个观点。让我们尝试实现现实,因为约翰·米尔斯海默(John Millsheimer)用国际地缘政治术语来说,但这一次是AI的现实主义。预测会发生什么。有时,问“会发生什么”特别有用,因为您不知道自己想要或不想要什么。简而言之,让我们在AI上列出四个现实的预测。第1条:关于AI如何发展,全世界尚未达成共识。有很多观点,许多强大的国家和帝国,但实际上我们不能将其意志强加于所有其他国家。这意味着理事会,世界议会或联合国将就AI做出决定,并且无法在全球实施。但是,即使没有共识,AI技术仍在不断发展。第2条:有一天,研究人员完全了解智力并创建相关技术。我不知道能理解是否很好您自己,但请记住我们必须做出预测的前提,而不必担心我们想要什么。因此,我认为理解情报是一个重要的问题,仅仅因为它具有巨大的价值,因此不可避免地会实施它。唯一的问题是时间。这10年,即接下来的10年,或者将在接下来的十年结束时发生。第3条:此过程并没有停止在人类智能的当前水平上。我们欢迎以超级智能领导的人,或者通过技术改善。无论如何,它的智力水平将很快超过当前的人类水平。第4条:随着这个社会的时间,力量和资源,朝着最聪明的众生流动。该流程可能是一步一步的,但趋势是。因此,我们必须考虑一下它的携带以及如何看到AI的框架或参数。正如该图像所暗示的那样,向AI迈进的人类过程是不可避免的,我们甚至可以成为真正的超级智能机器。这是一个有效的观点,但它仍然非常专注于人类。我想回去一点,但是您能以人类对现在正在发生的事情为中心的视角吗?您看到什么只是在观察宇宙,就好像您不在世界外调查吗?当我这样做时,我在宇宙中有四个好时光的想法。总的来说,我们目前处于第三和第四次之间的过渡期。第一个是大爆炸之后的时代。在第二个时代,这些粒子在重力的作用下崩溃并聚集,即恒星的时代。在恒星中,所有元素都比氢和氦气在高温和恒星芯形状的压力上重。星星爆炸,这些元素被扔进星际空间。我们进入地球的年龄,因为它们最终形成了绕雌拉斯的行星。行星生命形式变得越来越复杂,从无性繁殖到有性繁殖,再到器官没有神经系统,动物和人类,文化,语言,农业以及书面文本的出现。生活是一个有吸引力的名称,但是生物系统拥有,因此我相信最精确的名称是基因程序的“复制器时代”系统,它们在执行该程序时会创建自己的新副本。因此,生活可以复制自己,但是当我们这样做时,我们真的不了解开始。我们可以生孩子,我们可以复制我们的生活,但是我们真的了解孩子的身体和思想如何工作。我还不了解。在第三时代,事物的自我复制在地球表面上占据了关键位置和重要地位。 Now we are transformed and I think we are entering a fourth age.有些角色可以称其为“机器时代”,但我认为应该称为“设计时代”。与以前不同的原因是,我们世界上最重要的一切都是基于程序(DNA)而没有u的遗传复制遵循其原则。但是在设计时代,有人设计和创建的技术,对象,工具和创作。他们不喜欢复制品。您可以运行一个DNA程序来制作新副本,但是您无法轻松编辑和修改。当我们这次进入时,设计的内容变得越来越重要。您可以看到道路,城市,建筑物,各种物体并环顾四周。例如,除了此房间的其余部分外,所有其他设备均已设计。设计的内容开始在我们的生活中处于非常重要的地位。现在,我想解决术语问题。我已经说过“生命的年龄”和“时间的时间”,大约70次,但是相信这些术语会误导我们的机器越来越像生活。因此,我认为它们实际上是生物机器,结构机器,设计机器等。真正的区别是什么?不同之处在于它是在不了解生物系统如何工作的情况下创建的。他们复制工程计划(脱氧核糖核酸)。技术产品首先是在设计师思想的想象中创建的,然后在世界上存在。设计和机制很容易改进。因此,从术语的角度来看,“复制”和“设计”之间的区别是合适的。这是思考第三和第四宇宙的伟大时代的绝佳方式。我们还设计了许多非人类复制器。不仅人类,而且许多其他动物在他们的脑海中怀孕后也会做事并创造它们。他们制作洞和瓦恩。黑猩猩来自分支的横向分支来捕获白蚁,甚至乌鸦也是如此。用叶条进食。当然,人类走得更远,人类创造了石轴并发明了农业。电流,有一台计算机和一个航天器工厂。此外,还有一些软件和工具来创建其他工具。在谈论编译器时,它不像是自制工具,它是建造房屋或DE的工具签署工具以制造其他工具和事物。那么我们可以回答原始问题吗?我们在宇宙中的作用是什么?我们都有我们感到特别的观点。人类很特别,但人类只有某种方式才是特殊的。我是我们要问的复制者,将设计推到更高层次上,我们是否将设计提高到了极限?如果您已经将设计带到了最后一个,那是什么意思?我认为这意味着设计可以自己设计的东西。这是我们所在的阶段,这就是我们正在做的事情。我们正在尝试做AI。您正在尝试设计自己可以设计的东西。因此,最终的观点是人类是催化剂,助产士和先驱者,并且在宇宙的第四个时代,即设计时代履行了他们的任务。这是一个重要而重要的作用。我所有这一切的最后摘要是在过去的十年中,人类数据时代(人类数据的时代)非常柔软。 leifeng.com文章(公共帐户:leifeng.com)

0
首页
电话
短信
联系