通过人类婴儿的行为改善机器学习的技术
人类从生命的最初几年开始,就具有持续学习的先天能力,通过观察周围的事物或与之互动的人来构建世界的心理模型。认知心理学研究表明,人类广泛使用这种先前获得的知识,尤其是在遇到新情况或做出决策时。
虽然最近人工智能(AI)领域取得了很大的进展,但大多数虚拟代理仍然需要数百小时的训练才能在多个任务中达到人类级别的性能,人类可以在几个小时甚至更短的时间内学会完成这些任务。最近的研究强调了人类获得知识能力的两个关键因素——直觉物理学和直觉心理学。
这些直观的模型在人类发展的早期就已经被观察到,可能是未来学习的核心推动者。基于这一想法,韩国先进科学技术研究所(KAIST)的研究人员最近开发了一种内在奖励归一化方法,该方法允许AI代理选择最能改善其直观模型的行为。在他们提前发表在arXiv上的论文中,研究人员提出了一种图形物理网络,它与深度强化学习相结合,并受到人类婴儿学习行为的启发。
研究人员在他们的论文中解释说:“想象一个人类婴儿在一个房间里,玩具周围有一段可接近的距离。”“他们不断地抓住、投掷物体并对其采取行动;有时他们会观察自己行为的后果,但有时他们会失去兴趣,转向另一个对象。”作为科学家,儿童的观点表明,人类婴儿天生就有动机进行自己的实验,发现更多的信息,最终学会区分不同的物体,创造更丰富的内部表征。"
心理学研究表明,在生命的最初几年,人类不断尝试周围的环境,这使他们能够对世界形成重要的认识。此外,当儿童观察到的结果没有达到他们以前的预期(称为预期的侵犯行为)时,通常会鼓励他们进一步尝试,以更好地了解自己的情况。
KAIST的研究团队试图使用强化学习方法在AI代理中重现这些行为。在他们的研究中,他们首先引入了一种图形物理网络,可以提取物体之间的物理关系,并预测它们在三维环境中的后续行为。随后,他们将网络与深度强化学习模型相结合,引入了内在奖励标准化技术,并鼓励人工智能代理探索和识别将不断改进其直观模型的行为。
研究人员使用3D物理引擎证明,他们的图形物理网络可以有效地推断不同物体的位置和速度。他们还发现,他们的方法允许深度强化学习网络不断改进其直观模型,并鼓励其仅基于内在动机与对象进行交互。
在一系列评估中,该团队研究人员设计的新技术取得了非凡的准确性,AI代理执行了大量不同的探索动作。未来,它可以为机器学习工具的发展提供信息,可以更快、更有效地从过去的经验中学习。
研究人员在他们的论文中解释说:“我们在各种场景中用固定和非固定问题测试了我们的网络,在这些场景中,球形物体具有不同的质量和半径。”“我们希望这些预先训练好的直观模型能够作为其他目标导向任务的先验知识,例如ATARI游戏或视频预测。”
免责声明:本文由用户上传,与本网站立场无关。财经信息仅供读者参考,并不构成投资建议。投资者据此操作,风险自担。 如有侵权请联系删除!
-
最近收到一位患者的留言,说自己这几天总感觉肛门有下坠胀感,特别难受,上网一查,好多信息都指向癌症,这可...浏览全文>>
-
腹痛、腹泻总反复!可能是小肠、大肠在抗议。基于症状特征区分小肠疾病与大肠疾病的具体差异分析:一、核心症状...浏览全文>>
-
近日,中国中医药信息学会肛肠分会·肿瘤分会·治未病分会·河北名医学会肛肠分会·盆底与便秘分会·河北省中...浏览全文>>
-
安徽蚌埠的长安启源E07作为一款备受关注的新能源车型,其价格和配置一直是消费者热议的话题。如果你正考虑入手...浏览全文>>
-
近年来,随着新能源汽车市场的快速发展,插电式混合动力车型逐渐成为消费者关注的焦点。生活家PHEV作为一款备...浏览全文>>
-
在2025款生活家PHEV车型正式上市之前,提前了解相关费用明细对于购车者来说至关重要。这款插电式混合动力车型...浏览全文>>
-
大众途昂作为一款中大型SUV,凭借其宽敞的空间和强劲的动力配置,在市场上一直拥有不错的口碑。对于计划购买20...浏览全文>>
-
阜阳地区的长安启源Q05 2025款车型凭借其时尚的外观设计和丰富的配置,吸引了众多消费者的关注。这款车型作为...浏览全文>>
-
阜阳揽巡作为一款备受关注的中型SUV,凭借其豪华的配置和超值的价格吸引了众多消费者的目光。这款车不仅在外观...浏览全文>>
-
淮南长安启源A07自上市以来便凭借其卓越的性能和亲民的价格赢得了众多消费者的青睐。作为2025款的新车型,它在...浏览全文>>