standard download
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211418015.0 (22)申请日 2022.11.14 (71)申请人 杭州拓数派科技发展 有限公司 地址 311200 浙江省杭州市萧 山区经济技 术开发区建设三路733号信息港五期 一号楼205-18 (72)发明人 王淏舟 杨峻峰 冯雷  (74)专利代理 机构 杭州华进联浙知识产权代理 有限公司 3 3250 专利代理师 安威威 (51)Int.Cl. G06F 9/50(2006.01) G06F 9/54(2006.01) (54)发明名称 一种元数据访问方法、 装置和存 储介质 (57)摘要 本申请涉及一种元数据访问方法、 装置和存 储介质, 该方法包括: 将目标元数据的缓存数据 加载至第一内存中; 所述目标元数据为元数据服 务中数据更新频次低于第一预设值且数据访问 频次高于第二预设值的元数据; 响应于主节点的 元数据访问请求, 将所述第一内存中的所述目标 元数据的缓存数据加载至所述主节点对应的从 节点的第二内存中; 所述 从节点读取所述第二内 存, 以访问所述目标元数据。 通过本申请减小了 元数据服务的访问压力, 解决了现有技术中存在 的所有节点均需访问元数据服务导致元数据服 务负载高的问题。 权利要求书2页 说明书9页 附图4页 CN 115470008 A 2022.12.13 CN 115470008 A 1.一种元 数据访问方法, 其特 征在于, 所述方法包括: 将目标元数据的缓存数据加载至第 一内存中; 所述目标元数据为元数据服务中数据 更 新频次低于第一预设值且数据访问频次高于第二预设值的元 数据; 响应于主节点的元数据访问请求, 将所述第 一内存中的所述目标元数据的缓存数据加 载至所述主节点对应的从节点的第二内存中; 所述从节点读取所述第二内存, 以访问所述 目标元数据。 2.根据权利要求1所述的元数据访问方法, 其特征在于, 所述将目标元数据的缓存数据 加载至第一内存中之前包括: 获取所述元数据服务中的目标 元数据; 根据获取到的所述目标 元数据, 生成所述目标 元数据的缓存数据。 3.根据权利要求2所述的元数据访问方法, 其特征在于, 所述根据获取到的所述目标元 数据, 生成所述目标 元数据的缓存数据包括: 根据所述目标 元数据的数据类型对所述目标 元数据进行分类, 获取类型信息; 对所述目标 元数据进行 特征提取; 对提取到的特 征和分类后的目标 元数据进行编码, 得到编码数据; 根据所述编码数据和所述类型信息, 生成所述缓存数据。 4.根据权利要求2所述的元数据访问方法, 其特征在于, 所述根据获取到的所述目标元 数据, 生成所述目标 元数据的缓存数据包括: 获取所述目标 元数据的版本信息, 根据所述版本信息生成所述缓存数据。 5.根据权利要求1所述的元 数据访问方法, 其特 征在于, 所述方法还 包括: 响应于元数据服务发送的数据更新指令, 获取所述从节点的任务的执行状态; 所述数 据更新指令用于指示更新所述第一内存中存 储的所述目标 元数据的缓存数据; 根据所述执行状态, 从所述第 一内存中选择与 所述执行状态对应的所述目标元数据的 缓存数据加载至所述从节点的所述第二内存中。 6.根据权利要求5所述的元数据访 问方法, 其特征在于, 所述根据所述执行状态, 从所 述第一内存中选择与所述执行状态对应的所述目标元数据的缓存数据加载至所述从节点 的所述第二内存中包括: 当所述执行状态为所述从节点执行任务 时, 从所述第 一内存中选择更新前的所述目标 元数据的缓存数据加载至所述从节点的所述第二内存中; 当所述执行状态为所述从节点空闲时, 从所述第 一内存中选择更新后的所述目标元数 据的缓存数据加载至所述从节点的所述第二内存中。 7.根据权利要求1所述的元 数据访问方法, 其特 征在于, 所述方法还 包括: 响应于从节点的接入请求, 将所述第一内存的地址连接 到待接入的从节点中。 8.根据权利要求1至权利要求7中任一项所述的元数据访 问方法, 其特征在于, 所述从 节点为无状态计算节点。 9.一种元 数据访问装置, 其特 征在于, 所述装置包括: 第一加载模块, 用于将目标元数据的缓存数据加载至第一内存中; 所述目标元数据为 元数据服务中数据更新频次低于第一预设值且数据访问频次高于第二预设值的元 数据; 访问模块, 用于响应于主节点的元数据访 问请求, 将所述第一内存中的所述目标元数权 利 要 求 书 1/2 页 2 CN 115470008 A 2据的缓存数据加载至所述主节点对应的从节点的第二内存中; 所述从节点读取所述第二内 存, 以访问所述目标 元数据。 10.一种计算机可读存储介质, 其上存储有计算机程序, 其特征在于, 所述计算机程序 被处理器执行时实现权利要求1至 权利要求8中任一项所述的元 数据访问方法的步骤。权 利 要 求 书 2/2 页 3 CN 115470008 A 3

PDF文档 专利 一种元数据访问方法、装置和存储介质

文档预览
中文文档 16 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共16页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 一种元数据访问方法、装置和存储介质 第 1 页 专利 一种元数据访问方法、装置和存储介质 第 2 页 专利 一种元数据访问方法、装置和存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-24 01:00:25上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。