(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202111637282.2 (22)申请日 2021.12.2 9 (71)申请人 阅脸人工智能科技有限责任公司 地址 362000 福建省泉州市丰泽区华大街 道体育街华创园B6 02-B609室 (72)发明人 林栋梁　 (74)专利代理 机构 厦门原创专利事务所(普通 合伙) 35101 专利代理师 黄巧香 (51)Int.Cl. G06V 40/16(2022.01) G06K 9/62(2022.01) G06V 10/764(2022.01) G06V 10/50(2022.01) (54)发明名称 一种基于云端人机交互技术的人脸情绪管 理方法 (57)摘要 本发明公开了一种基于云端人机交互技术 的人脸情绪管理方法， 所述方法包括： S1： 获取第 一交互信息； S2： 基于第一交互信息向终端设备 发送权限信息获取请求； S3： 录制第一视频流等； 本发明的优点在于通过微信服务器建立情绪识 别方法， 采用人脸面部表情分析技术对用户的面 部表情进行识别； 通过在设备终端以及情绪标 签、 语音标签， 采集用户的表情数据构建了用户 面部表情识别数据集； 在保证准确率的同时降低 对用户交互体验的不利的影 响； 经过本发明建立 的方法， 用户可以随时随地监测情绪变化情况， 方便用户及时调整自身情绪， 同时依托历史数据 建立情绪信息数据追溯机制， 通过用户表情， 进 行在线实时检测、 分析其情绪变化， 为用户心理 健康提供辅助依据。 权利要求书2页 说明书6页 附图10页 CN 114612957 A 2022.06.10 CN 114612957 A 1.一种基于云端人机交 互技术的人脸情绪管理方法， 其特 征在于， S1： 用户通过终端设备 连入微信服 务器获取第一交 互信息； S2： 基于第一交互信息向终端设备发送权限信息获取请求； 若允许则进入S3； 否则返回 S1； S3： 基于终端设备向用户发送至少一个第二交互信息， 基于第二交互信息录制第一视 频流， 视频流传输至云端服务器并通过第二交互信息为视频流建立情绪标签； 带情绪标签 的视频流进行分类建立训练集， 利用训练集建立用户个人机器学习模型； S4： 基于设备终端发送情绪检测 请求， 若允许则开始录制第二视频流； 基于第二视频流 导入个人机器学习模型生成第三交 互信息； S5： 基于设备终端发送第三交互信息获取请求， 若允许发送第三交互信息并将结果保 存至云端服务器， 同时发送第四交互信息； 第三交互信息绑定用户ID； 用户通过设备终端 可 随时查阅历史第三交 互信息。 2.根据权利要求1所述的一种基于云端人机交互技术的人脸情绪管理方法， 其特征在 于， 所述第一交 互信息包括 微信公众号交 互信息、 微信小程序交 互信息。 3.根据权利要求1所述的一种基于云端人机交互技术的人脸情绪管理方法， 其特征在 于， 所述权限信息获取请求包括微信手机号信息获取请求、 公开信息授权获取请求、 设备 终端摄像头授权使用请求。 4.根据权利要求1所述的一种基于云端人机交互技术的人脸情绪管理方法， 其特征在 于， 所述第二交 互信息包括图案信息、 声 音信息； 每 个图案信息、 声 音信息附有情绪标签。 5.根据权利要求1所述的一种基于云端人机交互技术的人脸情绪管理方法， 其特征在 于， 所述S3具体的： S31： 用户通过设备终端确定是否 接收第二交 互信息， 若允许则生成3s倒计时； S32： 3s倒 计时结束后 基于设备终端显示至少一个第二交互信息， 同时基于设备终端录 制10s的第一视频流上传至云端服 务器； S33： 利用视频分割技术分割第一视频流生成至少一个子视频流， 并基于第二交互信息 为子视频流建立情绪标签， 并通过情绪标签为子 视频流进行分类建立训练集； S34： 基于训练集建立用户个人机器学习模型。 6.根据权利要求5所述的一种基于云端人机交互技术的人脸情绪管理方法， 其特征在 于， 所述S34具体的： S341： 将子视频流按帧分割成若干个第一帧图像， 并基于情绪标签对每帧图像进行分 类； S342： 利用灰度处理、 尺寸归一化处理对若干个第一帧图像进行预处理， 并通过旋转、 裁切、 翻面进行 数据增强处 理获得数据集， 将数据集按照3:7划分为训练集和 测试集； S343： 提取帧图像中人脸表情的HOG特征并输入SVM分类器进行训 练获得机器学习模权　利　要　求　书 1/2 页 2 CN 114612957 A 2型。 7.根据权利要求1所述的一种基于云端人机交互技术的人脸情绪管理方法， 其特征在 于， 所述S4具体的： S41： 用户允许情绪检测 请求， 基于设备终端开始录制10s的第二视频流； 将第二视频流 分割成若干个第二帧图像； S42： 利用灰度处 理、 尺寸归一 化处理对若干个第二帧图像进行 预处理； S43： 预处 理后的图像提取HO G特征； S44： 导入训练好的个人机器学习模型， 输出第三交 互信息。 8.根据权利要求7所述的一种基于云端人机交互技术的人脸情绪管理方法， 其特征在 于： 所述第三交 互信息包括分类概 率及结果报告。 9.根据权利要求1所述的一种基于云端人机交互技术的人脸情绪管理方法， 其特征在 于， 所述S5具体的： S51： 用户基于设备终端发送第三交 互信息获取请求； S52： 反馈第三交互信息及第四交互信息； 所述第四交互信息包括： 分享激励请求、 分享 助力请求； S53： 若用户接受第四交 互信息， 则云端基于第四交 互信息反馈 激励结果及助力结果。 10.根据权利要求1或4或5或6所述的一种基于云端人机交互技术的人脸情绪管理方 法， 其特征在于： 所述情绪标签包括： 平淡标签、 生气标签、 讨厌标签、 恐惧标签、 开心标签、 悲伤标签、 惊 讶标签。权　利　要　求　书 2/2 页 3 CN 114612957 A 3