分享

除了下棋打游戏,DeepMind开始研究如何让AI像人类大脑一样“预判未来”

 好大水 2017-10-04

 

根据 DeepMind 的最新研究显示,我们人类之所以对未来有较好的掌握,是因为我们的大脑可以对事物的发展做出有效的总结并做出预测。

  

 

但对于时下大热的 AI 技术来说,虽然每天都有突飞猛进地进展,但计算机仍然很难对未来做出有效的计划,因为即使是很小的计划步骤都会导致之后复杂而巨大的计算量。例如《星际争霸》这款游戏,AI 下了很大的功夫才勉强掌握,相比之下,人类在这方面却表现得十分驾轻就熟,可以迅速根据现实状况随机应变。

 

最近,来自 Google AI 部门的研究团队在《自然·神经系统科学》(Nature Neuroscience) 上发表了一篇文章,揭示了 AI 强化学习 (reinforcement learning,机器学习的一个分支,AI 通过尝试和改正错误来完成任务,当它正确时会获得一定奖励) 和大脑海马体工作方式的一致关系,了解为什么人类会有预测未来的优势。

 

虽然海马体通常被认为是人类处理当下情况的组织,但 DeepMind 提出,它实际上也有对未来的预测的功能。通过 DeepMind 官方博客,我们了解了他们最新工作的内容(详见 https:///blog/


我们认为,海马体可以处理现在每种情况,或者是状态,通过这种状态来预测未来的状态。举个例子,当你离开工作岗位 (你现在的状态),你的海马体会预测你马上要处于在路上的状态,从学校接孩子放学,或者是直接回到家中。根据预期的后续状态来描绘每个当下状态,海马体可以传达一个未来事件的紧凑总结。我们发现,这种预测的具体形式可以通过某种奖励方式让大脑快速适应各种环境,而且不用运行高消耗的未来模拟机制。

 

虽然我们现在还不清楚这种机制在人脑中具体是怎么实现的,也不知道为什么仅凭这一机制就让人们如此擅于规划。但是 DeepMind 计划尝试通过数学方法在 AI 上实现这种机制,每个未来的状态都可以被分配给一定的奖励,以便计算出一个最佳的决策内部神经网络,从而验证这种理论是否可以帮助 AI 做出有效的计划。如果它真的有用,机器们或许只用很少的计算资源就可以“想得更远”。

 

-End-


编辑:陈臻   校审:郝锕铀

参考:

https://www./the-download/609039/deepminds-new-way-to-think-about-the-brain-could-improve-how-ai-makes-plans/

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多