多模态规划使更广的人类和产品行为成为或许

规划多模态交互组合的一种简略办法，经过人类在物理世界交互过程中所做经历的过程：人类怎么感知、了解、决议和举动。这些过程是一切多模态体会的核心构建块。咱们或许不会在每个体会中运用一切模态，但它们之间是存在堆叠和相互作用的。并且，它们也或许会构成呼应循环。

感知：

感知不只仅是咱们怎么感知物理信息，还在于咱们感知后怎么安排和解释它。感知的一个比方是听觉：它在人声的规模内特别衰减，这并不奇怪。咱们耳朵的面貌（鼓膜、中耳的锤骨、砧骨和镫骨）经过物理优化，能够传输这些声响频率。

就像文本易读性的规范被明确界说一样，其他类型的物理信息的交互规范也将开端变得愈加明确。例如语音技能的呈现就引入了新的指标，语音交互中的话数和置信度（正确辨认单词的或许性）。触觉交互能够经过压力或力、振荡速度和强度来丈量。新模态的交互也需求界说可用性指标。用于衡量图标可用性的测验，也能够被用于触觉振荡，这些指标能够衡量一个人对振荡形式的回忆才干或区别两种不同形式的才干。

产品团队需求了解人体丈量学，例如人类的视界、听觉的规模以及咱们的触觉可检测到的力的巨细。

了解和决议计划：

认知描绘了人类怎么了解和获得常识的过程。一个比方是，咱们阅读才干的速度和准确性在道路标志的规划中起着决议性的作用。在高速公路上，由于咱们超越标志的速度太快，咱们阅读标志的才干会迅速下降，因而有必要限制单词的数量。咱们辨认出口和关闭的才干也受到影响。为了习气这种情况，或许需求在出口前整整半英里处放置出口标志，以便咱们有时刻处理信息、做出决议和执行信息。这些呼应时刻不只仅是杰出的规划实践，他们也是一种法律规定。

执行认知是其间的一部分，这便是咱们怎么运用了解来操控咱们的行为。心思学中有许多不同的决议计划模型，或许没有一个是正确的。举个轻松的比方，当涉及到甜点时，有很多种决议。你能够决议吃巧克力布丁而不是柠檬蛋糕，这便是是偏好。你乃至能够决议你底子不应该吃蛋糕，这便是按捺。您能够当即决议需求蛋糕，然后开端烘烤蛋糕，这需求程序才干。还有不同级别的决议计划，例如买蛋糕与开面包店，别离需求不同程度的信息、分析和举动流程。

举动：

咱们的主要举动是身体运动和言语。身体运动包含基本技能，如在扫描图像时抓取物体和移动眼睛，以及更复杂的活动，如滑翔伞、切菜或弹电吉他。举动不只包含活动本身，还包含咱们怎么获得这些身体技能。跟着时刻的推移重复一项体育活动能够进步咱们执行它的才干。重复也能够使它成为咱们行为中更持久和主动的一部分：像咬指甲这样根深柢固的习气，或许像网球挥杆这样的专业技能。这与增强、辅佐和主动化技能特别相关，了解来龙去脉对人类安全至关重要。一个比方是咱们主动移动眼睛以聚焦它们的办法，这种反射称为焦点调理。因为咱们无法操控这种反射，所以它会搅扰 VR 和 AR 头饰的运用，导致头晕和恶心，也便是VR领域常说的「晕厥」。

人类很简单一起处理多项任务，比方能够一起观看多个电视节目；关键是平衡参加度与认知极限。

注意力与焦点

交通事故逝世人数的上升被广泛归因于分神驾驭——比方在开车时运用智能手机。虽然在驾驭中运用智能导航从底子上改变了驾驭体会，但运用其他智能功用也使开车行为愈加风险。有必要优先考虑并提前防备这些风险，人的焦点才干有必要放在第一位。增加新的交互操作或改变用户习气的交互都或许会导致用户错误操作或彻底分神。参加度并不总是越高越好。

焦点在交互规划中越来越突出。它是以可控但舒适的办法确认优先级、安排和分配注意力的才干。削减分神是其间的一部分，但支持咱们的注意力自然运作办法是另一部分。注意力规划还需求考虑活动的持续时刻、疲惫和其他要素。

心流（Flow）是心思学家 Mihaly Csikszentmihalyi 首次描绘的一种心思状况。作家 Dana Chisnell 将其描绘为“专心状况”，是一种放松又专心的状况。外面的世界不复存在，时刻也消失了。认识得到进步，感官充满活力，进步生产力和创造力。在身体活动中（几乎是一切活动中）心流是理想的体现状况。感知、认知和举动融组成无缝、轻松的多模态体会。

这些心流状况是在咱们开发“调整认识以操控感觉和思想的办法”时呈现的。心流关于完结许多不同类型的日常活动是必要的。幻想一下向狗扔球。你很简单做到。现在试着幻想一下用数学办法核算距离、力和轨道，一起考虑球和你自己的手臂的分量。一切这些复杂的核算都已经在抛掷动作中了。你本来就知道，你会下认识地去做。咱们需求处于心流状况才干成功完结多种活动。心流从无认识的感知、认知和行为中产生操控。与直觉相反的是，当咱们不彻底的对咱们正在做某些工作产生认识时，咱们其实能够做得更好。