(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210677227.4 (22)申请日 2022.06.15 (71)申请人 北斗星通智联科技有限责任公司 地址 401120 重庆市渝北区玉峰山 镇桐桂 大道3号 (72)发明人 钟继豪　汪骏　申茂阳　罗辉　 鹿宗亮　刘磊　 (74)专利代理 机构 北京超凡宏宇专利代理事务 所(特殊普通 合伙) 11463 专利代理师 舒淼 (51)Int.Cl. H04N 7/18(2006.01) H04N 21/2343(2011.01) H04N 21/4402(2011.01) H04N 21/6437(2011.01) (54)发明名称 一种辅助驾驶智能终端设备的实时视频推 流方法及装置 (57)摘要 本申请涉及辅助驾驶技术领域， 尤其涉及一 种辅助驾驶智能终端设备的实时视频推流方法 及装置， 通过获取两路摄像头的原始摄像头数 据； 将获取的所述原始 摄像头数据编码为H2 64码 流， 并进行缓存； 基于RTP 扩展协议将缓存的所述 H264码流发送 至云端； 其中， 所述RTP 扩展协议包 括所述辅助驾驶智能终端设备的唯一标识号 以 及视频通道 号， 所述视频通道 号包括两路摄像头 的通道号， 从而满足能够同时推送ADAS车道 摄像 头和DMS摄像头数据， 实现多路推流， 并且采用 MediaCodec硬编码两路摄像头 的YUV数据， 降低 CPU性能消耗， 能够极大提高编码效率， 从而提高 了实时视频监控的流畅性。 权利要求书2页 说明书8页 附图2页 CN 115086612 A 2022.09.20 CN 115086612 A 1.一种辅助驾驶智能终端设备的实时视频推流方法， 其特征在于， 所述方法包括以下 步骤： 获取两路摄像头的原始摄像头数据； 其中， 所述两路摄像头为DMS摄像头和ADAS摄像 头， 所述DMS摄 像头用于采集驾驶员行为数据， 所述ADAS摄 像头用于采集车辆道路数据； 将获取的所述原 始摄像头数据编码为H264码流， 并进行缓存； 基于RTP扩展协议将缓存的所述H264码流发送至云端； 其中， 所述RTP扩展协议包括所 述辅助驾驶智能终端设备的唯一标识号以及视频通道号， 所述视频通道号包括DMS摄像头 通道号和ADAS摄 像头通道号。 2.根据权利要求1所述一种辅助驾驶智能终端设备的实时视频推流方法， 其特征在于， 所述将获取的所述原 始摄像头数据编码为H264码流， 包括以下步骤： 基于Andro id平台的MediaCodec将获取的所述原 始摄像头数据硬编码为H264码流。 3.根据权利要求1所述一种辅助驾驶智能终端设备的实时视频推流方法， 其特征在于， 通过以下 方式将所述H264码流进行缓存， 包括以下步骤： 基于所述H264码流的判定规则判定缓存中的关键帧； 其中， 若缓存中第五个字节 buffer[4]和0x1f按位与运 算得到的值 为5， 判定该帧是关键帧； 在所述关键帧的前面添加S PS帧和PPS帧。 4.根据权利要求2所述一种辅助驾驶智能终端设备的实时视频推流方法， 其特征在于， 所述获取的两路摄 像头的原 始摄像头数据的格式为YUV420P。 5.根据权利要求3所述一种辅助驾驶智能终端设备的实时视频推流方法， 其特征在于， 所述基于RTP扩展协议将缓存的所述H264码流发送至云端， 包括以下步骤： 将所述H264码流封装为 一个message数据体； 判定所述message数据体是否超过设定字节； 若超过设定字节， 将所述message数据体 分包为若干个packet数据体； 基于生产 者消费者模型将所述packet数据体进行序列化， 并将序列化的packet数据体 发送至云端； 其中， 所述message数据体和所述packet数据体均包括所述辅助驾驶智能终端 设备的唯一标识号以及视频通道号， 所述视频通道号包括DMS摄像头通道号和ADAS摄像头 通道号。 6.根据权利要求5所述一种辅助驾驶智能终端设备的实时视频推流方法， 其特征在于， 通过以下 方式将序列化的packet数据体发送至云端， 包括以下步骤： 基于Socket将序列化的packet数据体发送至云端。 7.根据权利要求5所述一种辅助驾驶智能终端设备的实时视频推流方法， 其特征在于， 所述判定所述mes sage数据体是否超过设定 字节， 还包括以下步骤： 若未超过设定字节， 将所述message数据体基于生产 者消费者模型将所述message数据 体进行序列化， 并将序列化的mes sage数据体发送至云端。 8.一种辅助驾驶智能终端设备的实时视频推流装置， 其特 征在于， 包括： 获取模块， 用于获取两路摄像头的原始摄像头数据； 其中， 所述两路摄像头为DMS摄像 头和ADAS摄像头， 所述D MS摄像头用于采集驾驶员行为数据， 所述ADAS摄像头用于采集车辆 道路数据； 编码模块， 用于将获取的所述原 始摄像头数据编码为H264码流， 并进行缓存；权　利　要　求　书 1/2 页 2 CN 115086612 A 2发送模块， 用于基于RTP扩展协议将缓存的所述H264码流发送至云端； 其中， 所述RTP扩 展协议包括所述辅助驾驶智能终端设备的唯一标识 号以及视频通道号， 所述视频通道号包 括DMS摄像头通道号和ADAS摄 像头通道号。 9.一种电子设备， 其特征在于， 包括： 处理器、 存储器和总线， 所述存储器存储有所述处 理器可执行 的机器可读指令， 当电子设备运行时， 所述处理器与所述存储器之间通过总线 通信， 所述机器可读指令被所述处理器执行时执行如权利要求1至7任一所述的辅助驾驶智 能终端设备的实时视频推流方法的步骤。 10.一种计算机可读存储介质， 其特征在于， 该计算机可读存储介质上存储有计算机程 序， 该计算机程序被处理器运行时执行如权利要求1至7任一所述的辅助驾驶智能终端设备 的实时视频推流方法的步骤。权　利　要　求　书 2/2 页 3 CN 115086612 A 3