智能体自主演化学习-丁效

智能体自主演化学习丁效哈工大社会计算与信息检索研究中心2024年6月15日YSSNLP2024YSSNLP2024YSSNLP2024YSSNLP2024YSSNLP2024YSSNLP2024智能体智能体的概念来源于哲学，其根源可以追溯到亚里士多德和休谟等思想家：智能体是拥有欲望、信念、意图和采取行动的能力的实体（Zeltaet al., 1995）这个想法迁移到计算机科学，旨在使计算机能够理解用户的兴趣，并自主地代表用户执行操作。随着AI的发展，“智能体”这个词在AI研究中找到了它的位置，用来描述展示智能行为并具有自主性、反应性、主动性和社交能力的实体。(Agha et al., 1986)“如果他们找到一只能够回答所有问题的鹦鹉，我会毫不犹豫地宣称它是一个聪明的生物。”--德尼·狄德罗[Zeltaet al., 1995] The Stanford Encyclopedia of Philosophy.[Agha et al., 1986] Actors: a Model of Concurrent Computation in Distributed SystemsYSSNLP2024YSSNLP2024YSSNLP2024YSSNLP2024YSSNLP2024YSSNLP2024智能体以往的智能体研究专注于设计算法或者是训练策略来增强模型运算等方面的能力，例如AlphaGo下围棋等。忽视了开发模型内在的一些能力，例如知识记忆，高效交互等实际上，增强模型的内在能力是智能体进一步发展的关键因素，该领域需要一个强大的基础模型，该模型具有知识记忆，高效交互各种关键属性，作为智能体系统的起点。[Sutton et al., 2018] Reinforcement learning: AnintroductionYSSNLP2024YSSNLP2024YSSNLP2024YSSNLP2024YSSNLP2024YSSNLP2024大语言模型作为智能体（LLMs-as-Agent）大语言模型的出现为智能体的发展带来了新的希望，让大家开始憧憬通用的人工智能。LLMs 在知识获取、指令理解、泛化、规划和推理方面展示了强大的能力，同时展示了与人类有效的自然语言交互。使它们非常适合构建智能体[Xi et al., 2023] The Rise and Potenti