机器人唤醒系统对意识的控制 及其在机器人智能系统中的作用【20字】

仿人机器人的唤醒和意识克里斯蒂安·德迈纽斯1[0000−0002−1478−6329]，特隆德A. Tjøstheim1和BirgerJohansson1[0000−0002−9834−4279]瑞典隆德大学认知科学系christian. lucs.lu.sewww.lucs.lu.se抽象。 我们描述了如何控制意识水平的唤醒系统可以在机器人中实现。不同的意识水平对应于不同的意识状态，我们认为，模仿其生物对应物的人工唤醒系统在控制类脑认知结构的认知过程中具有有用的功能。意识水平取决于唤醒，而唤醒又受到新奇或充满情感的刺激以及生物钟的控制。在认知任务中，唤醒也会被调节，以控制决策过程的随机性，并在探索和利用之间进行选择。关键词：唤醒·蓝斑·探索-利用·增益控制。1介绍为什么意识的研究与机器人学有关？在我们看来，有一些反映人类意识水平的过程可以在机器人的控制中发挥重要作用。这些过程通常与不同的意识状态有关。然而，我们对这些过程的兴趣主要不在于它们与不同的意识状态相关，而在于它们本身作为控制机制是有用的。我们相信，这为研究人工智能系统中的意识提供了坚实的基础，因为不同的机制是由它们的功能作用而不是意识或意识体验的主观概念所驱动的。本文介绍了一个类人机器人的唤醒系统的概述这种唤醒机制大致上是以其生物学对应物为模型的，它决定了意识的水平，并控制着支持许多认知操作的神经系统中的处理唤醒系统决定了信息在记忆中如何处理，思想如何集中或允许漫游，并在探索和利用之间建立平衡。唤醒水平可以被认为是控制自然或人工认知系统中处理的几个元参数之一[8]。机器人控制体系结构的一个中心组成部分是一个生物动机的记忆系统。我们在其他地方已经论证过，有意识的机器人需要维持一个内部世界来支持各种认知功能。这2C. Escherius等人内部世界是基于情景、语义和工作记忆结构的组合[3]。该模型的基础是一个具有闭锁动力学的自联想网络我们实现的系统支持A-not-B测试，延迟匹配样本，情景回忆和替代试错等任务[3]。在记忆系统中，记忆对应于网络的吸引子状态，感知和回忆是寻找与输入最一致的吸引子状态的过程。锁存动力学使吸引子半稳定。这导致存储器状态以情节的方式从吸引子跳到吸引子，除非状态被显式地锁定在当前吸引子中。作为一个结果，学习过的情节后来可以回忆起作为情节记忆过渡。此外，记忆系统支持语义转换，其中刺激与其他类似刺激相关联[13]。存储器系统的一个关键参数是它的增益，它控制系统是否停留在吸引子中或被允许转换到其他存储器状态。在非常高的增益下，存储器系统将被锁定在吸引子中。在较低的增益下，它将开始通过学习的情节序列进行过渡。如果增益降低得更多，状态转换的随机性将由于噪声而增加，噪声可以从旧片段的组合中产生新的转换这些机制支持从集中回忆到完全随机状态转换的记忆路径。本文的一个中心主张是，增益控制是唤醒系统的一个基本功能，它与不同层次的意识密切相关。在大脑中，意识水平是由上升网状激活系统控制的。它由许多核团组成，可以控制整个大脑的处理，包括清醒和睡眠。在这里，我们将重点放在蓝斑（LC），这是控制觉醒的主要核团，通过其去甲肾上腺素能投射到大脑的皮层，皮层下，小脑和脑干回路。高LC活性与高度注意力相关。在睡眠期间，LC几乎完全关闭。我们之前已经开发了一个计算模型，能够解释LC如何该模型构成了本文所述系统的基础。LC激活也受到下丘脑中跟踪24小时昼夜循环的昼夜节律振荡器的影响[11]。这使得LC在白天比在晚上更容易受到刺激。有人认为，去甲肾上腺素水平通过控制决策过程的随机性，在皮层处理中起到增益调节的作用[1，7，9]。这可以被看作是在探索和利用之间的选择，其中较低的唤醒导致更随机的选择，或者探索，而较高水平的唤醒导致对学习信息的利用。增益调节的概念与Hebb的最佳唤醒水平的想法[12]和相关的Yerkes-Dodsons定律[22]有关。LC还控制肌肉张力。因此，在精神上增加注意力或更努力地在身体上使用更多的力量之间存在联系。这是否是一个好的策略取决于问题。仿人机器人的唤醒和意识3简单的问题得益于更高的专注度，而更难的问题则需要大脑评估不同的选择。这是平行的物理障碍，其中简单的情况下，可以受益于增加的力量，而更困难的情况下，需要积极解决问题。有趣的是，LC还影响瞳孔的大小，这使得瞳孔扩张成为去甲肾上腺素能活性增加的有用指标[4]。2的认识不同的意识水平在认知过程中都扮演着不同的角色，从高度集中到困倦和睡眠。这是一个连续的尺度，但我们在这里关注一些质量不同的意识水平。所有这些状态在机器人的控制中具有有用的功能。在最高水平的唤醒，注意力和记忆系统是一个集中在一个单一的刺激或记忆状态。在手动操作过程中，这是相关的唤醒水平，因为它允许视觉系统锁定刺激，而不会被不相关的刺激分散注意力[18]。虽然高度专注听起来像是一种理想状态，但情况并非总是如此。问题是它锁定了当前的内存状态，如果它不是正确的，就很难离开它。这可以从舌尖现象（tip-of-the-tonguephenomenon）中看出来，即使我们知道一个单词，我们也无法回忆起它，更强烈地思考这个单词无助于回忆，我们最好放弃。一旦允许思想漫游，正确的单词很可能会被召回。这表明，唤醒水平必须降低，新的记忆才能被激活。有趣的是，研究表明，当人们放弃一项任务时，觉醒会以这种方式降低，这可以在他们的瞳孔中看到[23]。计划和解决问题为了找到情节序列的新颖组合，在解决问题时是必要的，需要唤醒保持在高水平，但不能太高。集中精力探索备选方案与分散注意力的走神相结合，以产生新的备选方案。当机器人在一项任务中无法前进时，唤醒就会降低，以允许新的解决方案出现。这些解决方案要么在环境中进行测试，要么在内存中进行评估。该过程类似于模拟退火，其中在人工神经网络中引入噪声以允许其记忆状态跳转到新的解决方案[15]。一旦找到新的解决方案，唤醒再次增加，以允许执行相应的行为。这种唤醒的增加是由增加情绪并因此也增加LC活动的评估机制引起的。计划在许多方面与解决问题类似，但不需要与直接的问题有关。当计划时，系统可以被看作是将记忆中的行为和片段串在一起来组成4C. Escherius等人一条从当前情境到某个期望目标状态的合理路径。因此，探索是有目标的，比下面描述的走神、白日梦状态然而，根据系统的总体唤醒水平，计划可能会退化为白日梦，或者在两者之间摇摆不定。在规划过程中，记忆系统会产生一种前向扫描，这种前向扫描在动物的替代试验和错误中可以看到[19]。这可以被看作是一个动作序列的内部模拟，以后可能会在现实世界中使用。白日梦在白日梦或走神的时候，觉醒比计划要低。机器人的记忆转换反映了默认网络主导工作记忆访问的状态[17]。如果系统在认知上处于空闲状态，则进入这种状态，并且可以被视为通过记忆探索新途径的一种方式，不一定与特定目标相关联像计划一样，它有很强的情节成分，并允许内部排练与共同情况有关的替代行为序列。这种类型的机制以前曾被用于DYNA架构中的强化学习，其中行为是从记忆中以及在环境中排练的[21]。困倦困倦与极低水平的唤醒有关在增益控制方面，它允许存储器状态自由漂移，没有任何目标方向或焦点。这是一个过渡状态，可以链接到睡眠-觉醒周期，在过渡阶段的睡眠。然而，它也可以用来模拟寻求新奇的倾向或改变任务，如果当前的任务没有产生足够的奖励。如果与奖励水平或实现目标的感知进展水平如果机器人受到的刺激不足，也可能会产生睡意。也就是说，其感知系统的激活低于某个阈值。例如，机器人可能被呈现静态或空白场景，或者可能需要机器人在太长的时间段内不移动。在人类和动物中，缺乏来自本体感受器的刺激和来自与长时间坐着或躺着相关的外周系统的其他信号往往会引起困倦和嗜睡[10]。困倦最终可能会进入睡眠状态，但由于它也会激发行动，它也会导致机器人做一些新奇的事情来增加唤醒。唤醒的方向取决于环境因素，例如环境中可以刺激行动的物体的可用性。我们之前已经对新颖或情感刺激如何通过激活模拟LC来增加唤醒进行了建模[14]，从而导致与机器人意识增强相关的状态。睡眠在最低水平的觉醒，我们发现睡眠。机器人的类睡眠状态最明显的用途然而，睡眠不是仿人机器人的唤醒和意识5相当于被关闭。如果发生意外情况，睡眠中的机器人可以迅速唤醒并进入主动注意状态。这意味着基本的感觉处理也必须在睡眠期间发生，但可能以较低的分辨率或较低的速率来节省能量。与大脑一样，睡眠周期也是由时钟控制的，它决定了什么时候睡觉是合适的，并允许机器人在被意外唤醒后迅速重新入睡。一般来说，睡眠期间对环境的监测取决于对环境的被动注意。这种注意力是由形成环境模型的环境过程控制的，该环境模型可以检测到意外的干扰[2]。对于机器人，我们将其实现为用于其每个感知模态的自适应背景混合模型，该感知模态学习背景输入的正常变化[20]。类似的方法用于视觉、听觉和触觉输入。3讨论拥有一个在唤醒状态之间动态转换的系统，类似于在动物中发现的系统，可以研究在生物系统中研究可能很难或耗时的意识方面它也可能允许洞察意识现象本身，通过唤醒间接访问它，而不是试图直接解决它因此，意识这个臭名昭著更接近日常关注的问题，也许是人工系统的要求，以节省和优化能源使用时，不连接到一个连续的能源供应。我们认为，一般的唤醒水平建模，特别是LC去甲肾上腺素能系统提供了一个生物学上合理的方式来管理能量消耗，以及一个非常有趣的途径，研究动态认知行为与高水平的实验控制。此外，具有生物学上合理的唤醒系统的机器人可能允许洞察与去甲肾上腺素能系统相关的人类适应不良状况。这包括抑郁症和焦虑症，注意力缺陷障碍，精神分裂症和嗜睡症。总之，我们已经概述了一个生物激励的唤醒系统的人形机器人的功能。这个中央系统控制着记忆系统如何从一个状态过渡到下一个状态，以回忆情景记忆或根据早期经验产生新的状态和过渡唤醒水平与意识水平密切相关，并作为思维的速度控制引用1. Aston-Jones，G.，科恩，J.D.：蓝斑-去甲肾上腺素功能的整合理论：适应性增益和最佳表现。Annu.纽罗希牧师。28，4036C. Escherius等人2. Eschenius，C.：注意力、习惯化和条件作用：一个计算模型。认知科学季刊1（2），1713. Bal kenius，C.，Tjøstheim，T.A.，Johansson，B.， Güardenfors，P.： 从思考到幻想：有意识机器人的记忆系统。Frontiers in Robotics and AI机器人与人工智能前沿5，29（2018）4. 布拉德利，M.M.，米科利湖，Escrig，文学硕士，Lang，P.J.：瞳孔作为情绪唤醒和自主激活的量度Psychophysiology45（4），6025. 布朗河，澳-地McNeill，D.：“舌尖”现象。Journal of Verbal Learning andVerbal Behavior5（4），3256. Chossat，P.，Krupa，M.，Lavigne，F.：具有突触抑制的神经网络中的闭锁动力学。arXiv预印本arXiv：1611.03645（2016）7. 唐 纳 ， T.H. ， Nieuwenhuis ， S. ： 全 脑 增 益 调 节 ： 富 人 更 富 。 NatureNeuroscience16（8），9898. Doya，K.：元学习和神经调节。神经网络15（4），495-506（2002）9. Eldar，E.，科恩，J.D.，Niv，Y.：神经增益对注意力和学习的影响。Nature Neuroscience16（8），114610. Fureix，C.，Meagher，R.K.：不活动（以其各种形式）可以揭示非人类动物的情感状态审查.应用动物行为科学171，8 - 24（2015）11. Gonz'alez， M.M.，阿斯顿-Jones，G.：电刺激对觉醒的调节：非放射性蓝斑系统和光暴露的作用。Sleep29（10），1327-1336（2006）12. Hebb，D. O.：行为的组织。纽约州威利市（1949）13. Herrmann，M.，Ruppin，E.，Usher，M.：动态激活的神经元模型记忆。Biological cybernetics68（5），45514. Johansson，B.，Eschenius，C.：瞳孔扩张的计算模型。连接科学pp. 115. Kirkpatrick，S.，Gelatt，C.D.，Vecchi，M.P.：模拟退火优化。science220（4598），67116. 勒纳岛，Bentin，S.，Shriki，O.：语义启动中的自动和受控过程：一个具有闭锁动力学的吸引子神经网络模型。在：Proceedings的认知科学社会。第32卷，第111217. Mason，M.F.，诺顿，MI，Van Horn，J.D.，Wegner，D. M.，格拉夫顿，ST，Maccourt，C.N.：流浪的心灵：默认网络和刺激独立的思想。Science315（5810），39318. Oliva ， M.： 通 过 情 绪 大 脑 的 眼 睛 注 意 和 学 习 。 隆 德 大 学 认 知 研 究（2018）19. Redish，A.D.：替代试验和错误。自然评论。Neuroscience17（3），147（2016）20. Stauffer，C.，格里姆森，W.E.L.：用于实时跟踪的自适应背景混合模型。在：cvpr.第2246页。IEEE（1999年）21. Sutton，R.S.：Dyna是一个用于学习、规划和反应的集成架构。ACMSIGART Bulletin2（4），16022. Yerkes，R.M.，Dodson，J.D.：刺激强度与习惯形成速度的关系。Journalof Comparative Neurology and Psychology18（5），45923. Zekveld，A.，克莱默，S.：广泛听力条件下的认知处理负荷：瞳孔测量的见解心理生理学51（3），277