智能产品设计教学课件5.pptx

第5章界面与交互

孙凌云2020.06.01

目录|CONTENT

1智能产品中的界面

2视觉通道

3语音交互

4眼动输入

5手势与体态输入

6脑机接口

信息、媒介和交互

智能终端生物识别

大量的智能手机都搭载了人脸解锁、指纹解锁等生物识别技术。生物识别是指通过识别人、动物等生命体自身的生理特征来区分生物体个体的计算机技术；例如利用光学、声学、生物等不同类型传感器，识别人体固有的生理特性(如指纹、虹膜等)和行为特征(如声音、步态等)来进行个人身份的鉴定。

3

信息、媒介和交互

①RECEIVE③PERFORM

②PROCESS

Interpret/Analyze

Decide

Human

Systemcomponent

PROCESS

PERFORMRECEIVE

Thisisacontinuousloop.

Interactionsoccurwithmanysystemcomponentsatonce.

Italltakesplaceinthecontextofanenvironment.

人与机器之间进行信息的传递，必须采用某种交互行

为、依托某种媒体形式、基于某种媒介进行。这就是人机交互(Human-ComputerInteraction或

Human-MachineInteraction,HCI)的关注内容。

与人机界面相关的另外一个重要概念是人-机-环系统

(Man-Machine-EnvironmentSystem),这一概

念提供了对信息、媒介和交互的新的思考视角。在人-机-环系统中，人与机器、机器与环境、人与环境都存在界面，各种信息通过不同的媒介发生交换，从而实

现交互过程。

Environment-

SensingDisplay

ItHumanMachine

ControllingControls

g

n

n

o

i

i

Process

nforma

信息、媒介和交互

Machine

operations

userIntenace

Task

5

人机界面的发展

计算机发展初期

在计算机发展初期，人机交互

完全依赖于机械的人工作业，用户如果要想要操作机器，必须被迫去适应计算机。

命令行界面

命令行界面(CommandLine

Interface,简称CLI)的出现改

变了最初的人机交互模式。命令

行界面要求用户和机器通过类似对话的方式交换信息，比如经典的DOS系统就依赖于命令行界面。

新型计算机——XeroxAlto

Alto的操作系统与命令行界面大

相径庭，它抛弃了纯文字的信息展示，并把大量信息以图像化的展示。人机交互自此开始迈入了图形用户界面(GraphicUser

Interface,简称GUI)的时代。

近年来，手机、平板电脑等移动设备与智能可穿戴设备被迅速普及，它们与计算机一样

扮演了信息世界终端的功能。人机交互不再只是发生在电脑桌前，而是能随时随地的发生。这个时候，图形用户界面、键鼠、触控等传统人机交互手段已经不足以应对日益复杂的智能产品，人机交互需具备更多样的信息交换形式。

人机界面的发展

7

自然交互的实现需要五要素的支撑：用户、行为、目标、场

景、媒介。在用户、场景、媒介都确定的交互情境下，行为和目标的理解，即：用户意图理解，就是自然交互的关键。而根据不同通道信号进行有效融合并计算，是用户意图理解的关键。近年，自然交互技术创新层出不穷，如支持自然动

作感知、语音对话交互、穿戴式终端。

自然人机交互

8

多个通道信息在时序特征上结合特别紧密，存在着时

序上强耦合的关系。例如声音和唇部动作，肢体动作和面部表情等等。这些情况下，不同通道之间信息在时序上具有较强的相关性，可以采用采取特征层融合思路进行多模态融合处理，获得比单一模态语义分析的更好的表达效果。

单通道加工会首先对各通道信息进行单独加工，并

形成各自通道的认知特征。在这种模式下，每一个通道表示的语义信息相对独立，通道之间的语义往往没有约束关系