(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210960542.8 (22)申请日 2022.08.09 (71)申请人 西安电子科技大 学 地址 710071 陕西省西安市太白南路2号 (72)发明人 李隐峰　李泽昊　郑春红　郝钰鑫　 李瑞瑞　陈文举　张杨帆　郑文盼　 张守涵　田鑫雨　李胜男　张一飞　 (74)专利代理 机构 西安智大知识产权代理事务 所 61215 专利代理师 季海菊 (51)Int.Cl. G06F 16/953(2019.01) G06K 17/00(2006.01) G06V 30/42(2022.01) G06V 30/416(2022.01)G06V 40/16(2022.01) G06F 21/62(2013.01) G06Q 50/20(2012.01) G06Q 40/00(2012.01) (54)发明名称 一种基于OCR的证件失物招领系统及招领方 法 (57)摘要 一种基于OCR的证件失物招领系统及招领方 法， 其招领系统包括登录模块、 发布模块、 检索模 块和个人中心模块； 用户通过登录模块登录系统 后， 使用发布模块发布上传证件失物信息， 系统 通过OCR文本识别技术实现自动提取证件号和姓 名等关键信息， 根据文本识别的关键信息结果自 动化填写失物表单， 减少上传者的工作量； 能够 对证件上的证件照片和证件号等敏感信息进行 打码处理， 保护失主的隐私； 与特定单位人员数 据库对接， 能够自动对单位内失主发送微信/短 信失物通知， 使失物招领方案具有即时性。 用户 通过检索模块查看失物招领相关信息， 通过个人 中心模块进行信息的设置及管 理； 系统会给上传 失物的用户充值少量手机话费进行激励， 并通过 失主为系统打赏的方式回收运行经费， 形成良性 循环； 本发明具有操作方便、 可持续、 安全性好、 效率高的优点。 权利要求书3页 说明书6页 附图6页 CN 115292578 A 2022.11.04 CN 115292578 A 1.一种基于OCR的证件失物招领系统， 包括登录模块、 发布模块、 检索模块和个人中心 模块， 其特 征在于： 登录模块： 用户在网页端使用统一身份认证进行登录或者在微信小程序端使用微信账 户； 对于微信小程序用户， 系统将在用户第一次授权注册之后获取包括用户手机号、 微信头 像、 微信昵称字段； 发布模块： 提供用户在登录系统后发布失物招领信息， 上传图片， 填写内容、 位置和联 系方式后进行发布； 对已经发布的失物招领信息， 发布人能够随时修改或者删除； 对用户上传的证件失物图片， 系 统能够根据证件类型， 自动调用OCR识别接口、 二维码 识别接口或人脸识别接口， 提取图片上的文字信息并且自动完成表单的填写； 对识别图片中的敏感信息进行打码处 理， 避免出现信息安全问题； 对用户发布的证件失物招领信息， 系统使用证件号在单位人员数据库中进行查询匹 配， 如果在数据库查询 到该失主的手机号和微信号， 就通过发送手机短信和 微信消息的方 式通知失主来认领失物； 设置奖励打赏机制， 接受失主的打赏并将其用于对上传者奖励； 检索模块： 提供用户浏览已经发布在系统内的所有的信息， 包括分类检索及关键词检 索， 用户能够通过输入关键词来搜索失物招领信息； 个人中心模块： 提供用户在个人中心查看或修改个人信 息， 查看管理已发布的信 息， 管 理员用户也可以通过 该模块进入后台管理页面进行 管理。 2.根据权利要求1所述基于OCR的证件失物招领系统的失物招领方法， 其特征在于： 具 体包括以下步骤： 步骤1： 失物招领系统获取 上传图片与图像预处 理； 步骤2： 对步骤1预处 理后的图片进行多种方式识别失主信息； 步骤3： 提取步骤2的文本识别结果中的关键信息， 进行项目匹配与图片打码； 步骤4： 失物招领系统对经步骤2的识别成功的结果自动补全表单并给失主发送短信/ 微信通知； 步骤5： 失物招领系统具有奖励与打赏机制， 可对上传失物信息的用户奖励， 并通过失 主为失物招领系统打赏的方式回收运行 经费。 3.根据权利要求2所述的基于OCR的证件失物招领方法， 其特征在于： 所述步骤1具体方 法为： 1)当用户使用失物招领系统发布信 息并上传失物图片的时候， 图片文件经由网页端或 小程序端上传到服务器图片存储目录下， 并根据时间戳进行命名， 失物招领系统自动启动 预处理部分代码对该图像文件进行处 理； 2)当用户上传的证件图片存在包括卡面倾斜、 卡面磨损、 印刷错位、 背景文本干扰、 卡 面信息不全、 拍摄模糊的问题， 对系统无法提取有效信息的， 提示需要用户自己进 行信息输 入； 对属于背景文本干扰或是卡面倾斜的图片， 直接进行OCR文本识别的准确率很低， 先进 行图片预处 理， 提高文本识别的准确率。 4.根据权利 要求3所述的基于OCR的证件失物招领方法， 其特征在于： 步骤1第2)步所述 图片预处理为： 失物招领系统从图片 中证件的边缘位置对卡片进行裁剪， 去除无用的背景权　利　要　求　书 1/3 页 2 CN 115292578 A 2部分， 只留下证件卡 面部分。 5.根据权利要求2所述的基于OCR的证件失物招领方法， 其特征在于： 所述步骤2的具体 方法为： 通过OCR文本识别证件图片上的信息， 失物招领系统根据步骤1预处理后的图片， 调用 后端已封装好的OCR文本识别接口进行文本识别， 对上传图片进行包括降噪、 字符区域检 测、 字符切割 、 字符识别的操作； OCR文本识别模型分为检测与识别两个阶段， 分别对检测阶段与识别阶段所需要的模 型进行训练， 将训练完成的检测模型与识别模型进行封装， 仅对外暴露OCR识别接口； 通过 传入图片位置参数， 调用OCR识别接口对图片进 行OCR处理， 进 行文本检测和文本识别工作， 并返回识别出的文本信息以及该信息所在的相对位置和方向， 帮助系统准确匹配到证件版 面项目及帮助系统进行之后的打码处 理； 二维码识别功能： 如果证件图片没有证件号信 息， 而是有与失主相关的二维码， 那么失 物招领系统自动调用二维码识别程序对图片二维码进行信息提取； 人脸识别功能： 当OCR文本识别无法提取证件失物有效信息， 则通过人脸识别功能对证 件失物上的人像进行识别， 并在人脸识别数据库中匹配失主信息 。 6.根据权利要求2所述的基于OCR的证件失物招领方法， 其特征在于： 所述步骤3具体方 法为： 根据证件本身的特征， 根据项目位置设置模板， 来提取步骤2的文本识别结果中的关键 信息， 并根据识别出 的文本的位置信息来判定该文本与模板上的哪个项目相匹配， 对于匹 配后的结果， 失物招领系统使用正则规则提取关键 字来进行二次检查， 保证匹配的准确性； 同时， 当用户上传的证件图片被系统识别后， 失物招领系统在发布的时候会对图片进 行处理， 根据版面项目匹配的结果对证件上 的人像和证件号等敏感信息打码， 并使用处理 过的图片来 替换掉原图片进行显示。 7.根据权利要求2所述的基于OCR的证件失物招领方法， 其特征在于： 所述步骤4具体方 法为： 1)对经步骤2的识别后成功识别的结果， 系统将会根据失物类型设定物品类型， 并根据 已成功识别到的内容进行补全， 并对其中的敏感信息屏蔽一部分进行脱敏处理； 系统会在 自动补全完成后提示用户已完成识别， 请检查输入信息是否正确； 用户把失物和识别结果 进行对比， 查看是否会因为图片不清晰等原因造成识别错 误； 2)当用户完成发布信息流程后， 系统会根据之前OCR文本识别中获取到的姓名与证件 号在数据库中进行匹配， 找出失主的可用联系信息并通知用户： 2.1)系统调用的统一短信通信接口来去通知用户， 该接口链接到的数据库可以查询到 所覆盖用户的手机号和邮箱， 失物招领系统可以借由该接口发送短信和邮件； 2.2)对于微信通知， 系统调用单位企业微信通知接口， 该接口可以通知到单位内企业 微信用户， 用户能够收到该微信通知提 示或者手动在微信号的消息服 务功能中查看通知； 3)当用户发布的内容成功匹配到失主并调用短信和微信通知接口成功后， 该发布内容 会转为“已短信/微信通知用户 ”状态， 该状态在网页端和微信小程序端的查看发布内容界 面显示； 4)失主通过在 收到短信和微信通知中点击链接， 选择确认失物来通知发布人， 给予发权　利　要　求　书 2/3 页 3 CN 115292578 A 3