【标题】Intelligent problem-solving as integrated hierarchical reinforcement learning

【作者团队】Manfred Eppe, Christian Gumbsch, Matthias Kerzel, Phuong D. H. Nguyen, Martin V. Butz, Stefan Wermter

【发表日期】2022.8.18

【论文链接】https://arxiv.org/pdf/2208.08731.pdf

【推荐理由】根据认知心理学和相关学科，生物主体复杂问题解决行为的发展依赖于分层认知机制。分层强化学习作为很有前途的计算方法，最终可能在人工智能体和机器人中产生类似的问题解决行为。目前，许多人类和非人类动物的问题解决能力明显优于人工系统。本文提出了整合受生物学启发的分层机制的步骤，以实现AI高级问题的解决技能。其首先回顾认知心理学的文献，以强调成分抽象和预测处理的重要性。然后，将获得的见解与当代分层强化学习方法联系起来。研究结果表明，所有已识别的认知机制都已在孤立的计算架构中单独实现，这引发了为什么不存在将它们集成在一起的单一统一架构的问题。最后通过提供关于开发这种统一架构的计算挑战的综合视角来解决此问题。作者希望该结果能够指导开发更复杂的受认知启发的分层机器学习架构。