申请号：CN202410223747.7

申请人：华南理工大学 | 人工智能与数字经济广东省实验室(广州)

专利权人：华南理工大学 | 人工智能与数字经济广东省实验室(广州)

申请日：2024-02-29

授权日：2024-06-21

专利类型：发明

法律状态：授权

发明人：张通 | 吴梦琪 | 王锦炫 | 陈俊龙

摘要：本发明涉及情感识别技术领域，具体提供了一种基于头部可穿戴设备感知的情感识别方法、介质及设备；其中，方法包括佩戴者情感识别方法，步骤为：采集佩戴者的多模态情感数据；采用局部融合情感识别网络进行处理：左眼输入和右眼输入进行深度卷积；左下脸部输入和右下脸部输入分别通过嵌入层将提取到的动作单元嵌入，然后与面部行为编码一起输入到空域图卷积中；采用多层感知机中进行空间映射，计算空间注意力和通道注意力后进行特征图融合得到情感特征；将情感特征进行融合，通过分类得到复合情感识别结果。该方法在局部多视角脸部数据中采用面部动作单元信息辅助情感感知，提升情感信息从佩戴者身体外观中投射的鲁棒性，提升情感判别精度。

摘要附图：