(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211023295.5 (22)申请日 2022.08.25 (71)申请人 吉林大学 地址 130012 吉林省长 春市前进大街269 9 号 (72)发明人 姚志林　李树秋　屈鑫　 (74)专利代理 机构 北京圣州专利代理事务所 (普通合伙) 11818 专利代理师 李春 (51)Int.Cl. H04N 13/207(2018.01) H04N 5/225(2006.01) H04N 13/332(2018.01) H04M 1/02(2006.01) G03B 35/08(2021.01)G02B 27/01(2006.01) (54)发明名称 支持立体虚拟现实与增强现实的手机镜头 及显示方法 (57)摘要 本发明公开了一种支持立体虚拟现实与增 强现实的手机镜头及显示方法。 手机镜头包括两 颗镜头及相应的镜头模块， 各镜头间隔人类两眼 瞳孔距离安装在手机背部表面， 离手机主板最近 的镜头模块直接连接在手机主板上， 其他镜头模 块通过扁平的排线电缆连接到手机主板； 手机主 板CPU接收各镜头采集的视频或图像， 将其按左 右双眼并列的方式呈现在手机屏幕 上， 可结合与 手机匹配的头戴VR镜头观看； 也可以将手机镜头 获取的视频合成立体视频， 叠加构架的虚拟景物 得到混合现实视频。 本发明利用手机实现立体虚 拟现实与增强现实， 具有成本低廉、 携带方便、 影 像质量高等特点。 权利要求书1页 说明书3页 附图1页 CN 115174886 A 2022.10.11 CN 115174886 A 1.一种支持立体虚拟现实与增强现实的手机镜头， 其特征在于， 包括两颗镜头及相应 的镜头模块， 各镜头间隔人类两眼瞳孔距离安装在手机表面， 各镜头的拍摄分辨率不低于 宽1920， 高108 0像素； 离手机主板最近的镜头模块直接连接在手机主板上， 其他镜头模块通 过扁平的排线电缆连接到手机主板； 手机主板CPU接收各镜头采集的视频或图像， 按左右双 眼并列的方式呈现在手机屏幕上， 可 结合与手机匹配的头戴VR镜 头观看。 2.根据权利要求1所述的一种支持立体虚拟现实与增强现实的手机镜头， 其特征在于： 各镜头模块通过扁平的排线电缆或直接连接 到手机主板 。 3.根据权利要求1所述的一种支持立体虚拟现实与增强现实的手机镜头， 其特征在于： 各镜头的拍摄分辨 率均为宽 3840， 高216 0像素。 4.根据权利要求1所述的一种支持立体虚拟现实与增强现实的手机镜头， 其特征在于： 各镜头均为广角或超广角镜 头。 5.一种基于 权利要求1所述手机 镜头的采集的立体视频显示方法， 包括以下步骤： 步骤1： 申请手机相机的使用权限， 通过枚举的方式获得 所述镜头的ID； 步骤2： 设置手机相机的工作 方式： 根据手机相机的工作 方式分别设置两颗镜头为左眼 镜头及右眼镜 头； 步骤3： 采用轮询的方式依次获得左眼镜头及右眼镜头采集的图像/视频， 作为左眼图 像/视频和右眼 图像/视频； 步骤4： 合成立体图像/视频： 水平拼接左眼图像/视频和右眼图像/视频， 生成立体图 像/视频， 存储到文件系统中； 步骤5： 根据镜头的焦距及传感器参数得到拍摄设备标定的水平视场角HFov以及垂直 视场角VFov参数， H Fov＝2atan(0.5(传感器宽度)/焦距)， VFov ＝2atan(0.5(传感器高度)/ 焦距)； 步骤6： 创建一个用于VR显示的网格， 设定媒体参数为左右立体， 垂直角度参数为设备 标定的VFov， 水平角度参数为设备 标定的HFov； 步骤7： 从文件系统中读取立体图像/视频； 将图像转换为适合头戴VR镜头观看的形式， 并将左右双眼的图像/ 视频并排显示在手机屏幕上。 6.一种基于 权利要求1所述手机 镜头的采集的混合现实视频显示方法， 包括以下步骤： 步骤1： 申请手机相机的使用权限， 通过枚举的方式获得 所述镜头的ID； 步骤2： 设置手机相机的工作 方式： 根据手机相机的工作 方式分别设置两颗镜头为左眼 镜头及右眼镜 头； 步骤3： 采用轮询的方式依次获得左眼镜头及右眼镜头采集的图像/视频， 作为左眼图 像/视频和右眼 图像/视频； 步骤4： 建立一个现实世界相机， 将左眼图像/视频和右眼图像/视频渲染到全屏幕大小 的四边形 上， 作为其他增强现实物体的背景； 步骤5： 创建一个AR相机， 作 为现实世界相机的子相机， 渲染场景中的虚拟物体， 得到合 成图像/视频； 其渲染深度设置为大于现实世界相 机的值， 根据镜头的可视角度， 处理合成 图像/视频畸变， 得到适 合VR眼镜观看的混合现实图像。权　利　要　求　书 1/1 页 2 CN 115174886 A 2支持立体虚拟现实与增强现实的手机 镜头及显示方 法 技术领域 [0001]本发明涉及 一种手机镜头及显示方法， 特别是涉及一种支持立体虚拟现实与增强 现实的手机 镜头及显示方法， 属于电子产品技 术领域。 背景技术 [0002]目前手机已经具有了较强的计算能力， 利用手机观看虚拟现实的影像也有了一些 实际的应用。 谷歌眼镜及HOLOLENS等产品在增强现实方面进行了一些探索及 尝试， 但成本 高昂， 不利于普及应用。 发明内容 [0003]本发明要解决的技术问题是提出一种支持立体虚拟现实与增强现实的手机镜头 及显示方法。 [0004]为解决上述 技术问题， 本发明采用的技 术方案是： [0005]一种支持立体虚拟现实与增强现实的手机镜头， 包括两颗及相应的镜头模块， 各 镜头间隔人类两眼瞳孔距离安装在手机背部表面， 各镜头的拍摄分辨率不低于宽1920， 高 1080像素； 离手机主板最近的镜头模块直接连接在手机主板上， 其他镜头模块通过扁平的 排线电缆连接到手机主板； 手机主板CPU接收各镜头采集的图像/视频， 将其按左右双眼并 列的方式呈现在手机屏幕上， 可 结合与手机匹配的头戴VR镜 头观看。 [0006]进一步， 各镜头模块通过扁平的排线电缆连接 到手机主板 。 [0007]进一步， 各镜头的拍摄分辨 率均为宽 3840， 高216 0像素。 [0008]进一步， 各镜头均为广角或超广角镜 头。 [0009]本发明采用的技 术方案二是： [0010]一种基于技 术方案一所述手机 镜头的立体视频显示方法， 包括以下步骤： [0011]步骤1： 申请手机相机的使用权限， 通过枚举的方式获得 所述镜头的ID； [0012]步骤2： 设置手机相机的工作方式： 根据手机相机的工作方式分别设置两颗镜头为 左眼镜头及右眼镜 头； [0013]步骤3： 采用轮询的方式依次获得左眼镜头及右眼镜头采集的图像/视频， 作为左 眼图像/视频和右眼 图像/视频； [0014]步骤4： 合成立体图像/视频： 水平拼接左眼图像/视频和右眼图像/视频， 生成立体 图像/视频， 存储到到文件系统中； [0015]步骤5： 根据镜头的焦距及传感器参数得到显示设备标定的水平视场角HFov以及 垂直视场角VFov参数， HFov＝2atan(0.5(传感器宽度)/焦 距)， VFov＝2atan(0.5(传感器高 度)/焦距)； [0016]步骤6： 创建一个用于VR显示的网格， 设定媒体参数为左右立体， 垂直角度参数为 设备标定的VFov， 水平角度参数为设备 标定的HFov； [0017]步骤7： 从文件系统中读取立体图像/视频； 将图像转换为适合头戴VR镜头观看 的说　明　书 1/3 页 3 CN 115174886 A 3