(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210812645.X (22)申请日 2022.07.11 (71)申请人 杭州当虹科技股份有限公司 地址 310000 浙江省杭州市西湖区西斗门 路3号天堂软件园E幢16层A座 (72)发明人 万耀辉　杨阳　裘昊　费潇　丁赫　 (74)专利代理 机构 浙江杭知桥 律师事务所 33256 专利代理师 夏彩云 (51)Int.Cl. G06T 19/00(2011.01) G06T 17/00(2006.01) G06V 40/10(2022.01) (54)发明名称 基于增强现实的手势 识别方法 (57)摘要 本发明涉及增强现实技术， 公开了基于增强 现实的手势识别方法， 其方法包括， 现实场景环 境层的建立， 通过对现实的图像进行扫描， 从而 获取显示场景环境层； 物体模型的建立， 通过对 图像的现实场景进行识别， 从而建立现实场景的 物体模型； 虚拟环境反射层的形成， 通过对物体 模型进行处理， 并将处理后的物体模 型投入至虚 拟环境中， 从而形成虚拟环境反射层； 统一场景 的形成， 通过显示环境层和虚拟环 境反射层进行 合成， 从而形成统一场景。 通过本发明增强现实 提供现实物体到到虚拟空间的一种方法， 扩展了 增强现实的交互方式， 用户可以依据本发明提取 自己需要的现实物体到虚拟空间之中， 使之现实 物体也可以与虚拟空间的虚拟物体进行交 互。 权利要求书1页 说明书3页 附图4页 CN 115239919 A 2022.10.25 CN 115239919 A 1.基于增强现实的手势 识别方法， 其方法包括： 现实场景环境层的建立， 通过对现实的图像进行扫描， 从而获取显示场景环境层； 物体模型的建立， 通过对图像的现实场景进行识别， 从而建立现实场景的物体模型； 虚拟环境反射层的形成， 通过对物体模型进行处理， 并将处理后的物体模型投入至虚 拟环境中， 从而形成虚拟环境反射层； 统一场景的形成， 通过显示环境层和虚拟环境反射层进行合成， 从而形成统一场景。 2.根据权利要求1所述的基于增强现实的手势识别方法， 其特征在于， 还包括物体模型 的转换， 对于建立后的物体模型进行转换； 物体模型 的转换通过手势识别算法对物体模型 进行调整和修改。 3.根据权利要求1所述的基于增强现实的手势识别方法， 其特征在于， 物体模型包括粗 糙物体模型和完整性物体模型。 4.根据权利要求3所述的基于增强现实的手势识别方法， 其特征在于， 完整性物体模型 的建立包括： 现实场景中物体的抓取； 完整性物体模型的形成， 通过手势识别算法形成完整 性物体模块。 5.根据权利要求2所述的基于增强现实的手势识别方法， 其特征在于， 手势识别算法包 括： 步骤1： 手势的捕捉； 步骤2： 通过捕捉的手势进行物体的抓取， 并对抓取的物体进行识别； 步骤3： 物体的摆放， 对于抓取的物体依据物体的特 征进行摆放； 步骤4： 物体的三维建模， 对于捕捉到特定的手势特 征值的物体进行三维建模； 步骤5： 模型的判断， 对于三维建模的物体进行判断， 当其符合物体的特征则进行物体 的三维模型进行调整， 否则重新摆放物体。 6.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质上存储有计算机 程序， 所述计算机程序被处理器执行时实现如权利要求 1至5任一项 所述的基于增强现实的 手势识别方法的 的步骤。 7.一种基于增强现实的虚实互反射设备， 其特征在于， 包括： 存储器， 用于存储计算机 程序； 处理器， 用于执行所述计算机程序时实现如权利要求1至5任一项所述的基于增强现 实的手势 识别方法的 的步骤。权　利　要　求　书 1/1 页 2 CN 115239919 A 2基于增强现实的手势识别方 法 技术领域 [0001]本发明涉及增强现实技 术， 尤其涉及了基于增强现实的手势 识别方法。 背景技术 [0002]虚实融合是增强现实(AR)领域的最终目的， 即将真实场景与虚拟场景无违和的叠 加。 [0003]目前市面上的虚拟演播厅或者AR应用等节目中， 大多场景侧重于对虚实物体明暗 和阴影效果的处理， 而现实物体进入虚拟空间之中， 与 虚拟物体的交互基本 没有。 如申请号 CN 201911395929.8， 其公开了一种基于增强现实的虚实互反射方法、 装置、 介质及设备。 发明内容 [0004]本发明针对现有技术现实物体进入虚拟空间之中不能很好地进行交互问题， 提供 了基于增强现实的手势 识别方法。 [0005]为了解决上述 技术问题， 本发明通过 下述技术方案得以解决： [0006]基于增强现实的手势 识别方法， 其方法包括： [0007]现实场景环境层的建立， 通过对现实的图像进行扫描， 从而获取显示场景环境层； [0008]物体模型的建立， 通过对图像的现实场景进行识别， 从而建立现实场景的物体模 型； [0009]虚拟环境反射层的形成， 通过对物体模型进行处理， 并将处理后的物体模型投入 至虚拟环境中， 从而形成虚拟环境反射层； [0010]统一场景的形成， 通过显示环境层和虚拟环境反射层进行合成， 从而形成统一场 景。 [0011]作为优选， 还包括物体模型的转换， 对于建立后的物体模型进行转换； 物体模型的 转换通过手势 识别算法对物体模型进行调整和修改。 [0012]作为优选， 物体模型包括 粗糙物体模型和完整性物体模型。 [0013]作为优选， 完整性物体模型的建立包括： 现实场景中物体的抓取； 完整性物体模型 的形成， 通过手势 识别算法形成完整性物体模块。 [0014]作为优选， 手势 识别算法包括： [0015]步骤1： 手势的捕捉； [0016]步骤2： 通过捕捉的手势进行物体的抓取， 并对抓取的物体进行识别； [0017]步骤3： 物体的摆放， 对于抓取的物体依据物体的特 征进行摆放； [0018]步骤4： 物体的三维建模， 对于捕捉到特定的手势特 征值的物体进行三维建模； [0019]步骤5： 模型的判断， 对于三维建模的物体进行判断， 当其符合物体 的特征则进行 物体的三维模型进行调整， 否则重新摆放物体。 [0020]为了解决上述技术问题， 本发明还提供了一种计算机可读存储介质， 其所述计算 机可读存储介质上存储有计算机程序， 所述计算机程序被处理器执行时实现基于增强现实说　明　书 1/3 页 3 CN 115239919 A 3