恒挚分享 | 利用多模态的方法测量不同拟人程度的服务机器人对用户情感体验的影响

文摘   2024-10-17 10:08   北京  



01

研究背景




服务机器人是为人类或设备执行有用任务的机器人。当与服务机器人互动时,它的外观会给用户留下第一印象(K.Li et al.,2020)[1]。不难想象下面的场景:当你在商场里选择服务机器人时,一个具有特征外观(如面部宽高比)的机器人会吸引你的注意力,让你感到兴趣和兴奋,产生获取进一步信息的欲望(Song and Luximon,2021)[2]。一般来说,服务机器人的外观可以分为四类:拟人化、动物化、漫画化和功能性,根据 Fong、Nourbakhsh 和 Dautenhahn 对社交机器人的分类(2003) [3],拟人化机器人通过人类内部归因来解释机器人外观和行为设计的合理性,使其符合人类的期望并促进人机交互(Chiang,Trimi和Lo,2022) [4]。以前的研究提供了证据,证明产品的拟人化外观会引起积极的情绪并增加其对客户的吸引力(Cao et al., 2022)[5]。然而,关于机器人拟人化外观的效果存在相互矛盾的观点,一项关于拟人化设计特征对人类相关结果影响的荟萃分析显示,机器人的拟人化外观对感知产生了积极影响(Roesler、Manzey 和 Onnasch,2021) [6]。相反,以恐怖谷现象为代表的研究表明非常高水平的拟人化外观会引起用户的恐惧、不信任和其他怪异的感觉。并且情绪反应很复杂,至少由三个方面组成:自我报告、表达行为和生理反应(Gross and Levenson,1993) [7].机器人拟人化外观对情感的影响尚未通过心理生理学测量进行足够的研究。因此研究服务机器人的拟人化程度对于用户情感体验的影响是有意义的。



02

研究方法







1、实验设计

采用被试内实验设计,服务机器人的外观拟人化具有三个级别:高 (AH)、中等 (AM) 和低 (AL) 水平。为了测试这些机器人对被试情绪是否具有显着的影响。

除此之外,选择了四个因变量作为多模态测量指标:主观情绪体验、眼动追踪、生理活动和对机器人接受度的态度。




2、招募被试

通过社交媒体招募了52名不同专业的本科生,所有参与者都获得了20元人民币的回报。没有人参加过同样的研究,也没有人使用过实验中使用的服务机器人,并且他们在实验前不服用兴奋剂(例如咖啡或茶中的咖啡因)和镇静剂(例如酒精或安眠药)。这些标准通过主观报告对所有学生进行了确认,但两名严重近视的参与者被排除在外,因为他们的眼动仪数据无法校准。

最后,共有50名学生(29 名男性和 21 名女性)完成了实验(年龄范围 = 19-29,平均年龄 = 23.75,SD = 4.14)。他们都在实验前签署了知情同意书。该研究获得伦理委员会的批准。




3、实验流程

为了评估被试最初的情绪,参与者首先被要求完成PANAS量表,接下来由主试人员为其佩戴眼动仪和生理记录仪。

在正式试验阶段将21个机器人图像以随机顺序逐一呈现在显示屏中央,每张图像显示15秒,当所有图像都呈现完毕后,移除电极并摘下眼动仪。然后,参与者填写了一份问卷,包括 SAM 量表和态度量表。

最后,他们得到了感谢,并在采访时问及他们对三类机器人的感受,整个流程如下。



03

实验结果







1、主观情绪体验及态度

1

AM机器人比AL和AH机器人引起更显著的快感和唤醒度。

2

被试对于AM的接受度显著高于AL和AH。




2、眼动结果

单因素方差分析结果显示,在三种条件(AL、AM、AH)下,被试的瞳孔直径、注视次数、扫视次数以及扫视速度均存在显著差异。具体而言,与AL和AH条件相比,AM水平的拟人化机器人导致被试的瞳孔直径更大,注视次数更多,扫视次数也更频繁,且扫视速度也更快。

此外,热点图和注视轨迹图为探索参与者的注视和扫视状况提供了视觉证据。如下图所示,参与者的视觉注意力分布分别用红色和绿色来表示。热点图显示,面部特征对参与者更具吸引力,其次是身体。除此之外,视觉注意的顺序通过注视轨迹图上圆圈上的数字标记。注视轨迹图表明,被试首先注意到的是面部特征,随后是身体和其他部位。




3、生理结果

EMG信号方差分析表明,被试在三种条件下的肌电水平差异显著。具体来说,AM机器人比AL和AH机器人引起更显着的RMS和MPF。

EDA信号方差分析表明,拟人化对SCL有显著影响,AM机器人比AH和AL机器人诱 发更大的SCL。

HRV信号方差分析结果显示,拟人化对平均HR有显著影响。配对比较结果显示,AM机器人引起的平均心率(MeanHR)大于AH和AL。



04

讨论




本研究的目的是了解服务机器人的拟人化外观如何影响用户的情感体验和态度。我们采用多模态测量方法分析主观情绪体验(愉悦、唤醒)、眼球运动、生理唤醒(fEMG、EDA和HRV)和态度,为人机交互中的情感反应提供了整体洞察。

本研究也存在一些局限和不足,为了缩小研究范围,我们选择了服务机器人,并按不同程度的拟人化对它们进行聚分类。值得注意的是,根据ISO 8373:2012给出的定义,服务机器人还可以细分为个人服务机器人和专业服务机器人,他们分别用于不同的工作场景并具有不同功能。因此,未来的研究应该根据使用属性(个人或专业)对拟人化服务机器人进行分类。

此外,实验的参与者是年轻的大学生,这在一定程度上限制了研究结果的普适性。实际上,中老年群体在情绪体验方面同样值得关注,尤其是老年人群体,他们可能因行动不便和认知能力下降而更加依赖服务机器人来辅助日常生活。因此,将老年人纳入研究范围,探讨他们与服务机器人互动时的情感体验和态度变化,将是一个重要的研究方向。



05

结论




本研究的主要目的是探讨服务机器人拟人化外观对用户主观情绪体验、态度、眼球运动和生理唤醒的影响。

首先,研究结果证实了多模态测量指数可用于测量机器人拟人化外观的情绪影响,这些指标包括:主观情绪体验(愉悦和唤醒)、眼动(情况)数据和生理活动指标。

其次,研究证明:随着机器人拟人化视觉特征的增加,情感体验和态度发生了非线性变化。具体而言,AM机器人比AH和AL机器人给被试带来了更积极的情感体验。(第三,AM机器人比AH和AL机器人显著促进了更积极的主观情感体验和态度。)

最后,眼球运动和生理唤醒的测量结果进一步证实了具有中等拟人化外观的机器人的积极效果。


文献引用


1.Zhang, Y., Cao, Y., Proctor, R. W., & Liu, Y. (2023). Emotional experiences of service robots’ anthropomorphic appearance: a multimodal measurement method. Ergonomics, 66(12), 2039–2057. https://doi.org/10.1080/00140139.2023.2182751

 

2.Li, K., J. Zhang, L. Wang, M. Zhang, J. Li, and S. Bao. 2020. “A Review of the Key Technologies for sEMG-Based Human-Robot Interaction Systems.” Biomedical Signal Processing and Control 62 (9): 1–17. doi:10.1016/j.bspc.2020.102074

 

3.Song, Y., and Y. Luximon. 2021. “The Face of Trust: The Effect of Robot Face Ratio on Consumer Preference.” Computers in Human Behavior 116 (3): 1–9. doi:10.1016/j.chb.2020.106620.

 

4.Chiang, A.H., S. Trimi, and Y.J. Lo. 2022. “Emotion and Service Quality of Anthropomorphic Robots.” Technological Forecasting and Social Change 177 (2): 1–11. doi:10.1016/j.techfore.2022.121550.

 

5.Cao, Y., R.W. Proctor, Y. Ding, V.G. Duffy, Y. Zhang, and X. Zhang. 2022. “Is an Anthropomorphic App Icon More Attractive than a Non-Anthropomorphic One? A Case Study Using Multimodal Measurement.” International Journal of Mobile Communication 20 (4): 419–439. 10035579.

 

6.Roesler, E., D. Manzey, and L. Onnasch. 2021. “A Meta-Analysis on the Effectiveness of Anthropomorphism in Human-Robot Interaction.” Science Robotics 6 (58): 1–10. doi:10.1126/scirobotics.abj5425.

 

7.Gross, J.J., and R.W. Levenson. 1993. “Emotional Suppression: Physiology, Self-Report, and Expressive Behavior.” Journal of Personality and Social Psychology 64 (6): 970–986. doi:10.1037/0022-3514.64.6.970.


公司简介

北京恒挚科技有限公司,由中科(广东)科学集团投资,依托于广东人因技术研究院与武汉人因工程技术研究院,是一家新型的以心理人因、驾驶人因、生物力学、用户体验、虚拟现实等方向为基础,集生产、研发、销售、技术服务于一体的高新科技型企业,已入选国家高新技术企业、科技型中小企业、北京市“创新型”中小企业、中关村高新技术企业名单。
恒挚科技长期服务于科研院所,为中国科研事业尽一份力为己任,与中国心理学会、中国建筑学会、中国人类工效学学会、中国技术经济学会、中国管理工程学会、中国汽车工程学会等多个学会保持良好合作关系!目前为中国技术经济学会工程建设管理专业委员会副秘书长单位、中国人类工效学学会人机交互专业委员会副秘书长单位!
恒挚科技自主研发驾驶人因系统、虚拟现实图形化编辑软件、光环境心理评估系统、心理与人因实验教学系统、人体压力测试系统、虚拟现实交互系统、多模态数据采集软件等,同时作为波兰Cortivision近红外、俄罗斯Mitsar脑电和德国Eyelogic眼动仪中国区总代理,意大利BTS表面肌电等生物力学与步态分析科研产品总代理,加拿大AdHawk Mindlink高采样眼镜式眼动仪、德国QuaeroSys触觉刺激系统、荷兰Noldus行为科学、瑞典Tobii眼动仪、荷兰MindMedia生理与生物反馈、美国Biopac生理、美国ETT嗅觉/味觉刺激仪等产品代理。已服务单位包括清华大学、北京大学、北京师范大学、东北师范大学、燕山大学、西安建筑科技大学、西北农林科技大学、深圳技术大学、西安科技大学、上海交通大学、新疆师范大学、启元实验室、中国电子科技集团27所、中国电子科技集团28所、华为技术、墨迹天气、网易、航天二院等上千家高校、科研院所及企事业单位,在人才培养、产研合作、成果转化等方面持续进行深入合作。

关注我们:


恒挚科技EVERLOYAL
人因工程,赋能新时代。
 最新文章