具身AI,是指有身体并支持物理交互的智能体。之前在物理模拟和现实世界中,科学家已经证明了可用人类数据让具身AI学习新技能。但过去的智能体通常需要在监督下从大量第一人称的人类演示中学习,这类获取既昂贵又费时。相比之下,人类本身则可以通过模仿示范者,在几秒内以互动方式学会新技能,即使初生婴儿也有这种能力。因此,科学界一直在寻求一种AI智能体,能从效率和隐私与人类相仿的其他个体那里进行社会化学习。
“深度思维”团队此次利用深度强化学习训练了一个智能体,这个智能体能在名为GoalCycle3D的物理模拟任务空间里,几分钟就发现并模仿专家的行为,同时记住所学知识。训练后,他们发现这个智能体可在各种有挑战性的导航问题中从普通人类和AI专家那里快速学习,虽然它们以前从来没见过人类。
比如,这个智能体可在包含大量障碍的复杂地形中穿梭。该方法的一个关键是一种新形式的自动化课程,该课程结合了示范者的阶段性遮蔽以及任务难度的逐步升级。而这个智能体的个体神经元在其中能同时编码物理信息和社会信息。
新研究结果为AI领域和文化演化心理学之间的密切互动奠定了基础。团队认为,AI从业者可从人类社会学习中汲取灵感,构建出适应“人类伙伴”这一角色的具身智能体,并保护好隐私。此外,能通过社会学习的AI智能体,或为研究人类文化发展提供新的建模工具。
【总编辑圈点】
模仿,是婴儿都具有的能力。他们能模仿大人的表情、语音语调、行走方式,在这一点上,需要被投喂大量训练数据的人工智能确实“相形见绌”。“深度思维”团队一直致力于人工智能的研究,他们开发出了多模态、多任务的智能体。如今,“深度思维”的智能体可以迅速识别和模仿人类专家行为,还能够编码物理信息和社会信息。这一研究再次提示我们,未来是人机共存的社会,人类和机器的交互,将改变机器学习,也改变人类自身。