(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210451888.5 (22)申请日 2022.04.27 (71)申请人 上海迎智正能文化发展 有限公司 地址 200124 上海市浦东 新区海阳路681 弄 9号203室 (72)发明人 王妍　宋成锐　郭嘉文　 (74)专利代理 机构 上海申浩 律师事务所 31280 专利代理师 王巍 (51)Int.Cl. A61B 5/16(2006.01) A61B 5/00(2006.01) G01J 5/00(2022.01) G06V 10/74(2022.01) G06V 10/82(2022.01) G06V 40/16(2022.01) (54)发明名称 基于红外技术的情绪实时观测装置及其运 行方法 (57)摘要 本发明提供一种基于红外技术的情绪实时 观测装置， 所述装置包括人体级红外传感器(1)、 可见光传感器(2)、 数据预处理模块(3)、 AI算法 模块(4)、 人脸识别算法模块(5)、 温度测定算法 模块(6)和情绪匹配算 法模块(7)。 运用本发明装 置， 在对来访者心理咨询的全过程中， 能实时观 测与采集情绪， 实时记录来访者的情绪波动信 息， 精准掌握咨询全过程。 对心理咨询过程中来 访者的情绪状态实施有效的过程监测， 改进了 现 有技术的缺陷， 使用AI算法获取人脸， 免去了人 工定位测温的环节。 本发明有较大的实用价值， 有利于早期干预心理因素导致的情绪问题， 造福 人类健康。 权利要求书2页 说明书3页 附图1页 CN 115024726 A 2022.09.09 CN 115024726 A 1.一种基于红外技术的情绪实时观测装置， 其特征在于， 所述装置包括人体级红外传 感器(1)、 可见光传感器(2)、 数据预处理模块(3)、 AI算法模块(4)、 人脸识别算法模块(5)、 温度测定算法模块(6)和情绪匹配算法模块(7)。 2.根据权利要求1所述的一种基于红外技术的情绪实时观测装置， 其特征在于， 所述人 体级红外传感器(1)， 达到 ±0.3℃以内的测试精度， ≥384*288的红外像素分辨率； 所述可 见光传感器(2)， 采集间隔自定义时长为1 ‑2分钟分别采集红外图像数据； 所述红外图像数 据包括人脸温度数据和环境温度数据； 所述可见光图像数据包括人脸数据和距离坐标参照 点数据。 3.根据权利要求1所述的一种基于红外技术的情绪实时观测装置， 其特征在于， 所述数 据预处理模块(3)， 用于将红外传感器(1)、 可见光传感器(2)模块采集到的红外图像数据和 可见光图像数据进行角度校正、 坐标融合， 平滑两种图像中的环境干扰因素， 改善图像效 果； 所述AI算法模块(4)， 包括基于CNN模型的人脸识别 算法模块(5)、 和基于DDPG模型的温 度测定算法模块(6)、 基于RN N模型的情绪匹配算法模块(7)。 4.根据权利要求3所述的一种基于红外技术的情绪实时观测装置， 其特征在于， 所述基 于CNN模型的人脸识别算法模块(5)用于在图像中定位人脸特定部位， 包括额头、 双眼、 双 颊、 鼻尖和下巴， 取 出对应的人脸部位红外图像传递给温度测定算法模块(6)。 5.根据权利要求1所述的一种基于红外技术的情绪实时观测装置， 其特征在于， 所述基 于DDPG模型的温度测 定算法模块(6)分别从已定位人脸特定部位的红外图像中， 获取人体 额头、 双眼、 双 颊、 鼻尖、 和下巴各人脸区域 温度值， 根据换算系数、 测温距离， 完成人脸各区 域最终温度测定， 并输出至基于RN N模型的情绪匹配算法模块(7)。 6.根据权利要求3所述的一种基于红外技术的情绪实时观测装置， 其特征在于， 所述基 于RNN模型的情绪匹配算法模块(7)用于从温度算法模块中获取人脸各区域温度值， 根据 环 境参数对红外数据的衰减影响， 进行综合计算， 并将温度矩阵对应归类到的情绪分类中， 输 出至计算机(10)软件中。 7.一种基于红外技 术的情绪实时观测方法， 其特 征在于， 该 方法包括下列步骤： (1)通过人体级红外传感器(1)达到 ±0.3℃以内的测试精度， ≥384*288以上的红外像 素分辨率； 可见光传感器(2)间隔自定义时长， 最短为每1 ‑2分钟定点采集， 分别采集采访人 员(9)红外图像数据， 包括人脸数据和环境温度数据， 可见光图像数据， 包括人脸数据和人 脸距离红外传感器数据； (2)通过数据预处理模块(3)， 将所述红外传感器(1)和可见光传感器(2)模块采集到的 红外图像数据和可见光图像数据进行角度校正、 坐标融合， 平滑两种图像中的环境干扰因 素； (3)运用AI 算法模块(4)， 进行采集； 包括基于CNN模型的人脸识别算法模块(5)、 基于DDPG模型的温度测定算法模块(6)以 及基于RN N模型的情绪匹配算法模块(7)进行采集， 输出至计算机10软件中， 得到结果。 8.根据权利要求7所述的一种基于红外技术的情绪实时观测方法， 其特征在于， 所述人 脸识别算法模块(5)用于在图像中定位人脸特定部位， 取出对应的人脸部位红外图像传递 给温度测定算法模块， 将人脸数据输入人脸图像功 能区分割算法、 人脸距离估计算法和自 适应环境补偿模型， 同步完成人脸识别、 人脸距离估计值和环境补偿参数的生成。权　利　要　求　书 1/2 页 2 CN 115024726 A 29.根据权利要求7所述的一种基于红外技术的情绪实时观测方法， 其特征在于， 所述人 脸图像功能区分割算法， 由所述人脸图像功 能区分割算法定位人脸的额头区域、 眼睛区域 及脸颊区域。 10.根据权利要求7所述的一种基于红外技术的情绪实时观测方法， 其特征在于， 在采 集过程中， 遇到某区域成像过小导致数据不完整或数据无效， 则 反馈至计算机(10)软件控 制系统中进行 再次图像采集， 直到采集成功。权　利　要　求　书 2/2 页 3 CN 115024726 A 3