(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210731365.6 (22)申请日 2022.06.24 (71)申请人 中国民用航空总局第二研究所 地址 610000 四川省成 都市武侯区二环路 南二段17号 (72)发明人 郑怀宇　耿龙　党婉丽　王朝　 曹立波　杜雨弦　张涛　丛婉　 游奕　 (74)专利代理 机构 北京超凡宏宇专利代理事务 所(特殊普通 合伙) 11463 专利代理师 刘凤 (51)Int.Cl. G06V 20/52(2022.01) G06V 40/10(2022.01) G06V 10/82(2022.01)G07C 1/20(2006.01) (54)发明名称 一种飞机外部绕机检查的监控 方法、 装置及 存储介质 (57)摘要 本申请提供了一种飞机外部绕机检查的监 控方法、 装置及存储介质， 包括： 获取目标 飞机在 进入停机位之后的监控视频； 基于监控视频， 检 测针对目标飞机进行外部绕机检查的检测路线 中起始检查节点位置区域内是否出现待识别人 员， 若出现， 则判断待识别人员是否为检查人员； 若是， 对检查人员进行位置跟踪， 确定出检查人 员的运动轨迹； 从运动轨迹中识别出多个检查节 点， 以及检查人员到达每个检查节 点对应的到达 时间； 基于运动轨迹中各个检查节 点对应的到达 时间， 确定检查人员针对目标 飞机进行的外部绕 机检查是否满足预设检查规范。 自动判断检查人 员在飞行准备阶段是否按照检查要求规范对飞 机进行外部绕机检查， 提高了外部绕机检查项目 的监察效率。 权利要求书2页 说明书12页 附图5页 CN 115116002 A 2022.09.27 CN 115116002 A 1.一种飞机 外部绕机检查的监控方法， 其特 征在于， 所述 监控方法包括： 获取目标飞机在进入停机位之后的监控视频； 基于所述监控视频， 检测针对所述目标飞机进行外部 绕机检查的检测路线中起始检查 节点位置区域内是否出现待识别人员， 若出现， 则判断所述待识别人员是否为检查人员； 若是， 对所述检查人员进行位置跟踪， 确定出 所述检查人员的运动轨 迹； 从所述运动轨迹 中识别出多个检查节点， 以及所述检查人员到达每个检查节点对应的 到达时间； 基于所述运动轨迹 中各个检查节点对应的到达时间， 确定所述检查人员针对所述目标 飞机进行的外 部绕机检查是否满足预设检查 规范。 2.根据权利要求1所述的监控方法， 其特征在于， 所述检测针对所述目标飞机进行外部 绕机检查的检测路线中起始检查节点 位置区域内是否出现待识别人员， 包括： 将所述监控视频中起始检查节点位置相对应的视频图像输入至预先训练好的定位识 别模型中的金字塔网络层， 从所述视频图像中提取多尺度特征， 并对多尺度特征进 行融合， 输出融合特 征信息； 将所述融合特征信 息输入至所述定位识别模型中的全卷积网络层， 对所述融合特征信 息进行语义分割处 理， 输出所述起始检查节点 位置区域内是否出现待识别人员。 3.根据权利要求1所述的监控方法， 其特征在于， 所述判断所述待识别人员是否为检查 人员， 包括： 从所述监控视频中提取 所述待识别人员的人物图像； 将所述人物图像输入至预先训练好的神经网络模型的中的特征提取层， 对所述人物图 像进行特征提取， 输出 人物属性特 征信息； 将所述人物属性特征信 息输入至所述神经网络模型中的分类预测层， 对所述人物属性 特征信息进行分类预测， 输出 所述待识别人员是否为检查人员。 4.根据权利要求1所述的监控方法， 其特征在于， 所述监控视频包括多个子监控视频， 每个子监控视频为所述检测路线中每个摄像头拍摄的视频； 所述对所述检查人员进行位置 跟踪， 确定出 所述检查人员的运动轨 迹， 包括： 基于每个子监控视频对所述检查人员进行位置跟踪， 得到所述检查人员的多个子轨 迹； 基于所述检查人员在各个子监控视频中目标帧对应的实际位置信 息和预测位置信 息， 对多个子 轨迹进行拼接， 确定出 所述检查人员的运动轨 迹。 5.根据权利要求4所述的监控方法， 其特征在于， 根据以下方式确定所述检查人员在所 述目标帧中对应的预测位置信息： 基于所述目标帧之前的预设数量帧中所述检查人员的实际位置信 息， 预测出所述目标 帧中所述检查人员的预测位置信息 。 6.根据权利要求4所述的监控方法， 其特征在于， 所述基于所述检查人员在各个子监控 视频中目标帧对应的实际位置信息和预测位置信息， 对多个子轨迹进行拼接， 确定出所述 检查人员的运动轨 迹， 包括： 针对于任意两个所述子监控视频， 确定第 一子监控视频中目标帧相对应的预测位置信 息和第二子监控视频中目标帧相对应的实际位置信息之间的位置坐标相似度；权　利　要　求　书 1/2 页 2 CN 115116002 A 2判断所述 位置坐标相似度是否大于预设相似度阈值； 将大于所述预设相似度阈值的任意两个所述子监控视频对应的子轨迹进行第一次匹 配， 得到第一轨 迹匹配结果； 对第一次匹配后未匹配成功的任意两个所述子监控视频对应的子轨迹进行第二次匹 配， 得到第二轨 迹匹配结果； 基于所述第一轨迹匹配结果和所述第二轨迹匹配结果， 对多个子轨迹进行拼接， 确定 出所述检查人员的运动轨 迹。 7.根据权利要求1所述的监控方法， 其特征在于， 所述基于所述运动轨迹 中各个检查节 点对应的到达时间， 确定所述检查人员针对所述目标飞机进 行的外部绕机检查是否满足预 设检查规范， 包括： 根据所述运动轨迹 中各个检查节点对应的到达时间， 确定出所述运动轨迹 中各个检查 节点的第一检查 顺序； 判断所述第一检查 顺序与所述设检查 规范中的第二检查 顺序是否一 致； 若是， 则确定所述检查人员针对所述目标飞机的进行的外部 绕机检查满足预设检查规 范； 若否， 则确定所述检查人员针对所述目标飞机的进行的外部 绕机检查不满足预设检查 规范。 8.一种飞机 外部绕机检查的监控 装置， 其特 征在于， 所述 监控装置包括： 获取模块， 用于获取目标飞机在进入停机位之后的监控视频； 判断模块， 用于基于所述监控视频， 检测针对所述目标飞机进行外部绕机检查的检测 路线中起始检查节点位置区域内是否出现待识别人员， 若出现， 则判断所述待识别人员是 否为检查人员； 运动轨迹确定模块， 用于若是， 对所述检查人员进行位置跟踪， 确定出所述检查人员的 运动轨迹； 识别模块， 用于从所述运动轨迹中识别出多个检查节点， 以及所述检查人员到达每个 检查节点对应的到 达时间； 确定模块， 用于基于所述运动轨迹中各个检查节点对应的到达时间， 确定所述检查人 员针对所述目标飞机的外 部绕机检查是否满足预设检查 规范。 9.一种电子设备， 其特征在于， 包括： 处理器、 存储器和总线， 所述存储器存储有所述处 理器可执行 的机器可读指令， 当电子设备运行时， 所述处理器与所述存储器之间通过所述 总线进行通信， 所述机器可读指 令被所述处理器运行时执行如权利要求 1至7任一所述的飞 机外部绕机检查的监控方法的步骤。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质上存储有计算机 程序， 所述计算机程序被处理器运行时执行如权利要求 1至7任一所述的飞机外部绕机检查 的监控方法的步骤。权　利　要　求　书 2/2 页 3 CN 115116002 A 3