情感交互将成为移动交互的趋势
随着情感计算(affective computing)等技术的不断发展,情感交互成为高级信息时代人机交互的主要发展趋势。(如图所示)情感交互就是使人机交互可以像人与人交互一样自然、亲切、生动和富有情感。 人与人进行交流时,是通过人脸表情、语音情感、带有感情的肢体动作、文本情感信息等来感知对方的感情。因此情感交互可以从人脸表情交互、语音情感交互、肢体行为情感交互、生理信号情感识别、文本信息情感交互等方面进行探索。另外人与人的交流可以通过表情、语音、眼神、手势等方式进行,而机器没有人脸和躯体,那么仿生代理(lifelike agent)将是实现情感交互的重要媒介。 1人脸表情交互人脸表情交互是情感交互的一个重要方向,交互模型为:识别人脸表情既而感知人的情感和意图,再生成与之对应的表情与人进行交互。现在对于识别人脸表情既而感知人的情感和意图的技术探究愈发活跃,目前已经有诸多的人脸表情数据库及表情特征提取技术供设计参照。人脸表情的自然生成也在向着智能化的方向发展,将通过社交环境、上下文语境的来智能生成。 表情数据库 表情特征提取 现阶段人脸表情交互在移动应用产品设计中应用举例:
2)Avatar
2语音情感交互语音中的情感信息可以影响人们的交流状态。所谓“听话听音”,说话人利用不同情感表达某语句时,听者可能会有不同的反应。语音情感交互就是通过语音情感识别技术对人类的情感进行获取、识别和响应,可以使用户在自然和谐的交互模式下高效地完成任务。 1) 信息查询类产品通过语音输入来查询信息的产品如交通票务查询、话费查询等,是语音情感交互应用的重要领域。比如根据用户查询时的情感状态来决策用户服务的优先级做出合适的反应。比如,在票务查询产品中,如果用户的语气非常着急,那么可以适当的提前为其服务。 2) 辅助教学类产品一些朗读类或者表达技巧类的学习产品中可以应用语音情感交互。比如教幼儿说话类的产品可以教儿童如何讲话,甚至可以教他们如何把话讲的自然而富有感情。 3) 电子商务产品利用语音情感交互可以让购物网站摒弃繁琐的用户问卷调查,利用用户语音输入时的情感因素的提示自动调整流量,甚至可以根据用户对不同产品的喜好程度来调整商品的进货比例。 4) 社交、娱乐目前大部分社交产品和娱乐游戏中的人机对话界面采用文本指令输入的方式,这种方式所能传递的信息非常有限,而且操作费时费力。部分产品加入了语音输入功能,但也是淡出的录音传话,无法判断社交对象的情感。如果在这些产品的设计中应用语音情感交互就能构筑更加拟人化的风格和更加逼真的场景,给用户更全面的感官享受。 5) 虚拟人物对话虚拟人物对话如siri等产品已经开始尝试,但尚未加入情感因素。由于大多数情况下是口语化的交流,因此虚拟的人物对话应该根据用户的情感状态来调整产品本身的语音输出,以适应对话环境。 根据分析通话人之间语音交流的情感信息,来智能将电话簿中的人进行情感化分类:哪些是亲密好友、哪些是较为疏远的关系。结合通话频率可以分析出哪些亲密的好友应该联络了,可以发出提醒,提醒用户注重对好友的联络。 3 肢体行为情感交互姿势运动不仅可以由物理上的时间、空间、加速度等描述,还可以由属于心理学范畴的维度描述。比如从手势的挠头、擦眼、捏鼻子、触唇、托下巴等,能够预测情感状态包括思考、回忆、疲劳、满意等。 4生理信号情感识别生理变化由人的自主神经系统和内分泌系统支配,很少受人的主观控制,因而应用生理信号的情感识别更具客观性。生理信号感知情感一般通过皮肤电反应、肌电反应、呼吸信号、心电信号等,需要借助物理设备。虽然生理信号可以客观地反映人的情感状态,但是仅对不同唤醒度的情感具有较好的识别效果,若要进行多种情感的分类,则需要将生理信号同表情、语音等其他通道进行融合,实现多模情感识别。 Heart Fitness利用iPhone背后的补光灯感应皮下毛细血管的跳动来测心率,同时也能感知用户此时的情绪,非常有意思。 5文本信息中的情感随着互联网的飞速发展,文本信息已经成为人们最常用的交互方法之一。自然语言是人特有的交流手段,其中包含了大量的情感信息。研究文本中蕴含的情感信息已成为人机交互领域的研究热点。 1) 电子商务产品 这一专利功能可以用来过滤和控制所有基于文本的 iPhone 通信,比如发出或接收的短信、彩信、电子邮件和即时通讯等。它可以用来防止垃圾广告,或者屏蔽那些你讨厌的词汇。也可以为未成年人创造相应的网络环境,比如父母可以选择相应的年龄模式,一屏蔽不同等级的词汇。 6情感仿生代理在情感交互中,用户可以使用自然的交互方式,如语音、表情、眼神、手势等与机器进行交互。然而,机器没有人脸和躯体,无法用上述方式交流。目前的解决办法是通过仿生代理实现人机的情感交互。仿生代理是完全由计算生成的图形,用来模拟现实世界中真实的人或其他有生命物体的行为和动作。仿生代理具有人脸和躯体,并能通过多种交流方式与人进行信息传递。在基于仿生代理的人机交互中,仿生代理被赋予情感能力。仿生代理能够通过各种传感器获取由人的情感所引起的生理及行为特征信号,从而感知、识别和理解人类情感,针对人类的情感做出智能、灵敏、友好的反应。 是一款社交应用,有一个非常独特的全3D仿生代理”小双”,帮助用户实时沟通、传情达意!“小双”在苹果appstore中是这样被描述的: |
|