(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210685531.3 (22)申请日 2022.06.16 (71)申请人 江西交通职业 技术学院 地址 330013 江西省南昌市双港东大街64 4 支路359号江西交通职业 技术学院 (72)发明人 张铮　 (74)专利代理 机构 北京专赢专利代理有限公司 11797 专利代理师 刘备 (51)Int.Cl. H04N 7/18(2006.01) G06Q 10/06(2012.01) G06T 17/00(2006.01) (54)发明名称 一种基于多传感器的危险行为识别方法及 系统 (57)摘要 本发明涉及安全监管技术领域， 具体公开了 一种基于多传感器的危险行为识别方法及系统， 所述方法包括接收用户输入的含有范围信息的 监控请求， 根据所述监控请求确定监控区域； 对 所述监控区域进行内容识别， 根据内容识别结果 确定各监测节 点的监测频率； 将所述监测频率向 各监测节点发送， 基于各监测节点获取监测信 息； 根据所述监测信息确定监测点位的显示亮 度， 根据含有显示亮度的监测点位生成可视化区 域模型。 本发明根据用户请求确定监控区域， 根 据预设的监测节点在监控区域内获取监测 信息， 对所述监测信息进行识别， 确定一些问题区域， 对所述问题区域进行实时的可视化显示， 极大地 降低了工作人员的工作难度， 变相提高了监管水 平， 便于推广使用。 权利要求书3页 说明书9页 附图4页 CN 115086616 A 2022.09.20 CN 115086616 A 1.一种基于多传感器的危险行为识别方法， 其特 征在于， 所述方法包括： 接收用户输入的含有范围信息的监控请求， 根据所述 监控请求确定监控区域； 对所述监控区域进行内容识别， 根据内容识别结果确定各监测节点的监测频率； 将所述监测频率向各监测节点发送， 基于各监测节点获取监测信息； 根据所述监测信 息确定监测点位的显示亮度， 根据含有显示亮度的监测点位生成可视 化区域模型。 2.根据权利要求1所述的基于多传感器的危险行为识别方法， 其特征在于， 所述接收用 户输入的含有范围信息的监控请求， 根据所述 监控请求确定监控区域的步骤 包括： 建立与建筑数据库的连接通道， 读取校园的建筑数据， 根据所述建筑数据生成校园模 型； 所述校园模型与校园之间存在确定的比例尺； 基于所述校园模型生成信 息接收端口， 基于所述信 息接收端口接收用户输入的点位信 息； 根据所述点位信息确定范围信息， 根据所述范围信息在所述校园模型中确定监控区 域。 3.根据权利要求2所述的基于多传感器的危险行为识别方法， 其特征在于， 所述建立与 建筑数据库的连接通道， 读取校园的建筑数据， 根据所述建筑数据生成校园模型 的步骤包 括： 建立与建筑数据库的连接通道， 读取校园的BIM模型， 对所述BIM模型进行简化， 得到三 维场景； 读取校园的工程图纸， 根据所述工程图纸得到 至少一个俯视角度的二维场景； 根据所述 二维场景插 入所述三维场景， 得到校园模型； 根据预设的数据采集高度， 生成并显示参考航线； 显示参考航线， 并接收用户的选取信 息， 确定采集路径； 在所述采集路径下基于一个垂直和四个倾斜的五个不同视角同步采集图像信 息， 根据 所述图像信息 定时更新校园模型。 4.根据权利要求1所述的基于多传感器的危险行为识别方法， 其特征在于， 所述对所述 监控区域进行内容识别， 根据内容识别结果确定各监测节点的监测频率的步骤 包括： 获取所述监控区域内的建筑信息， 根据 所述建筑信息确定通行区域； 其中， 所述建筑信 息包括建筑位置和建筑朝向； 根据预设的热源监测仪获取所述通行区域的含有时间信 息的热源信 息， 根据所述热源 信息确定通行区域中的运动轨 迹； 所述运动轨迹含有起止时间； 根据所述运动轨迹计算所述通行区域的曝光率， 根据所述曝光率确定各监测节点的监 测频率； 其中， 所述 监测频率与所述曝光 率呈正比。 5.根据权利要求1所述的基于多传感器的危险行为识别方法， 其特征在于， 所述将所述 监测频率向各监测节点发送， 基于各监测节点获取监测信息的步骤 包括： 将所述监测频率向各监测节点发送， 接收各监测节点根据监测频率获取的监测信息， 向监测信息中插 入监测节点的编号信息； 其中， 所述 监测信息包括音频信息和图像信息； 将所述音频信息 输入训练好的风险分析模型， 得到含有时间信息的风险率； 将所述风险率与预设的风险阈值进行比对， 当所述风险率达到所述风险阈值时， 标记权　利　要　求　书 1/3 页 2 CN 115086616 A 2相应的时间信息； 统计标记的时间信息， 查询该时间信息对应的图像信息， 作为 监测信息 。 6.根据权利要求3所述的基于多传感器的危险行为识别方法， 其特征在于， 所述根据 所 述监测信息确定监测点位的显示亮度， 根据含有显示亮度的监测点位生成可视化区域模型 的步骤包括： 对所述监测信息进行轮廓识别， 根据所述轮廓识别结果确定运动轮廓； 根据预设的时间 间隔提取含有运动轮廓的监测信息， 计算各运动轮廓的偏移像素； 将所述偏移像素和所述 时间间隔输入训练好的运动分析模型， 得到各运动轮廓的运动 参数组； 根据所述运动参数组确定相应监测点位的显示亮度， 根据含有显示亮度的监测点位生 成可视化区域模型。 7.根据权利要求6所述的基于多传感器的危险行为识别方法， 其特征在于， 所述根据 所 述运动参数组确定相应监测点位的显示亮度， 根据含有显示亮度的监测点位生成可视化区 域模型的步骤 包括： 将所述运动参数组输入训练好的稳定性分析模型， 得到各运动轮廓的稳定值； 统计各运动轮廓的稳定值， 计算监测信息的稳定值， 根据所述监测信息的稳定值确定 显示亮度； 在所述校园模型中定位获取该监测信息的监测点位， 将所述显示亮度插入该监测点 位， 得到可视化区域模型； 其中， 所述显示亮度含有色值控制参数。 8.一种基于多传感器的危险行为识别系统， 其特 征在于， 所述系统包括： 监控区域确定模块， 用于接收用户输入的含有范围信息的监控请求， 根据所述监控请 求确定监控区域； 监测频率确定模块， 用于对所述监控区域进行内容识别， 根据内容识别结果确定各监 测节点的监测频率； 监测信息获取模块， 用于将所述监测频率向各监测节点发送， 基于各监测节点获取监 测信息； 可视化显示模块， 用于根据所述监测信息确定监测点位的显示亮度， 根据含有显示亮 度的监测点 位生成可视化区域模型。 9.根据权利要求8所述的基于多传感器的危险行为识别系统， 其特征在于， 所述监测频 率确定模块包括： 通行区域确定单元， 用于获取所述监控区域内的建筑信息， 根据所述建筑信息确定通 行区域； 其中， 所述建筑信息包括建筑位置和建筑朝向； 运动轨迹确定单元， 用于根据 预设的热源监测仪获取所述通行区域的含有时间信 息的 热源信息， 根据所述热源信息确定通行区域中的运动轨 迹； 所述运动轨迹含有起止时间； 处理执行单元， 用于根据所述运动轨迹计算所述通行区域的曝光率， 根据所述曝光率 确定各监测节点的监测频率； 其中， 所述 监测频率与所述曝光 率呈正比。 10.根据权利要求8所述的基于多传感器的危险行为识别系统， 其特征在于， 所述监测 信息获取模块包括： 数据交互单元， 用于将所述监测频率向各监测节点发送， 接收各监测节点根据监测频权　利　要　求　书 2/3 页 3 CN 115086616 A 3