(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210658904.8 (22)申请日 2022.06.09 (71)申请人 浙江大华 技术股份有限公司 地址 310051 浙江省杭州市滨江区滨安路 1187号 (72)发明人 刘阳　钱李勇　朱书军　杨勇　 (74)专利代理 机构 深圳市威世博知识产权代理 事务所(普通 合伙) 44280 专利代理师 何倚雯 (51)Int.Cl. H04N 7/18(2006.01) H04N 5/262(2006.01) G06T 17/00(2006.01) (54)发明名称 全景视频显示方法及相关装置、 电子 设备和 存储介质 (57)摘要 本申请公开了一种全景视频显示方法及相 关装置、 电子设备和存储介质， 其中， 全 景视频显 示方法包括： 响应于用户对全景视频窗口中当前 全景视频的视野调整指令， 获取当前全景视频的 视野调整参数； 其中， 当前全景视频上叠加有对 象标签， 当前全景视频基于全景模型构建得到； 基于视野调整参数和全景模型， 得到新的全景模 型； 基于新的全 景模型和全景视频码流中的视频 信息， 得到新的全景视频， 并基于新的全景模型 和全景视频码流中的标签信息， 得到新的对象标 签和新的对象标签的标签坐标； 基于新的对象标 签的标签坐标， 将新的对象标签叠加于全景视频 窗口中新的全景视频。 上述方案， 能够在用户调 整全景视频视野时及时更新全景视频及标签 。 权利要求书2页 说明书13页 附图8页 CN 115278157 A 2022.11.01 CN 115278157 A 1.一种全景视频显示方法， 其特 征在于， 包括： 响应于用户对全景视频窗口中当前全景视频的视野调 整指令， 获取所述当前全景视频 的视野调整参数； 其中， 所述当前全景视频上叠加有对象标签， 所述当前全景视频基于全景 模型构建得到； 基于所述视野调整参数和所述全景模型， 得到新的全景模型； 基于所述新的全景模型和全景视频码流中的视频信息， 得到新的全景视频， 并基于所 述新的全景模型和所述全景视频码流中的标签信息， 得到新的对象标签和所述新的对象标 签的标签坐标； 基于所述新的对象标签的标签坐标， 将所述新的对象标签叠加于所述全景视频窗口中 所述新的全景视频。 2.根据权利要求1所述的方法， 其特征在于， 所述视野调整指令包括拖拽指令， 所述视 野调整参数包括二维视野下的第一移动尺度， 所述第一移动尺度基于开始执行时的拖拽起 点和所述拖拽指令执行结束时的拖拽终点获得， 所述基于所述视野调整参数和所述全景模 型， 得到新的全景模型， 包括： 基于所述第一移动尺度和所述全景视频窗口 的尺寸信息， 获取视野相对移动值； 基于所述视野相对移动值和所述全景模型， 得到所述 新的全景模型。 3.根据权利要求2所述的方法， 其特征在于， 所述全景模型为三维球状模型， 所述基于 所述视野相对移动值和所述全景模型， 得到所述 新的全景模型， 包括： 基于所述视野相对移动 值和所述三维球状模型的半径， 得到三维视野下的第 二移动尺 度； 基于所述第二移动尺度， 获得模型转换矩阵； 基于所述模型转换矩阵对所述全景模型进行转换， 得到所述 新的全景模型。 4.根据权利要求1所述的方法， 其特征在于， 所述视野调整指令包括缩放指令， 所述视 野调整参数包括视野缩放比例， 所述基于所述视野调整参数和所述全景模型， 得到新的全 景模型， 包括： 基于所述视野 缩放比例， 获取模型缩放矩阵； 基于所述模型缩放矩阵对所述全景模型进行缩放， 得到所述 新的全景模型。 5.根据权利要求1所述的方法， 其特征在于， 所述基于所述新的全景模型和全景视频码 流中的视频信息， 得到新的全景视频， 包括： 对所述全景视频码流中的视频信息进行解码， 得到全景平面 坐标系下的视频画面； 基于所述新的全景模型， 对所述全景平面坐标系下的视频画面中的像素点进行坐标映 射， 得到所述 新的全景视频。 6.根据权利要求1所述的方法， 其特征在于， 所述基于所述新的全景模型和所述全景视 频码流中的标签信息， 得到新的对象标签和所述 新的对象标签的标签坐标， 包括： 对所述全景视频码流中的标签信 息进行解码， 得到全景平面坐标系下预设标签的第 一 坐标； 基于所述新的全景模型对所述第 一坐标进行投影， 得到所述预设标签在所述新的全景 模型中的第二 坐标； 基于所述第二坐标和所述全景视频窗口， 选择所述预设标签作为所述新的对象标签，权　利　要　求　书 1/2 页 2 CN 115278157 A 2并基于选择的预设标签的第二 坐标， 得到所述 新的对象标签的标签坐标。 7.根据权利要求6所述的方法， 其特征在于， 所述基于所述第 二坐标和所述全景视频窗 口， 选择所述预设标签作为所述 新的对象标签， 包括： 获取所述新的全景模型在所述全景视频窗口 的显示范围； 筛选所述第二 坐标位于所述显示范围的预设标签， 作为所述 新的对象标签。 8.一种全景视频显示装置， 其特 征在于， 包括： 视野调整模块， 用于响应于用户对全景视频窗口中当前全景视频的视野调整指令， 获 取所述当前全景视频的视野调整参数； 其中， 所述当前全景视频上叠加有对象标签， 所述当 前全景视频基于全景模型构建得到； 模型更新模块， 用于基于所述视野调整参数和所述全景模型， 得到新的全景模型； 视频构建模块， 用于基于所述新的全景模型和全景视频码流中的视频信息， 得到新的 全景视频， 并基于所述新的全景模型和所述全景视频码流中的标签信息， 得到新的对 象标 签和所述 新的对象标签的标签坐标； 标签叠加模块， 用于基于所述新的对象标签的标签坐标， 将所述新的对象标签叠加于 所述全景视频窗口中所述 新的全景视频。 9.一种电子设备， 其特征在于， 包括处理器、 人机交互电路和存储器， 所述人机交互电 路和所述存储器分别耦接至所述处理器， 所述处理器用于执行所述存储器存储的程序指 令， 以实现权利要求1 ‑7任一项所述的全景视频显示方法。 10.一种计算机可读存储介质， 其特征在于， 存储有能够被处理器运行的程序指令， 所 述程序指令用于实现权利要求1 ‑7任一项所述的全景视频显示方法。权　利　要　求　书 2/2 页 3 CN 115278157 A 3