(19)国家知识产权局 (12)发明 专利 (10)授权公告 号 (45)授权公告日 (21)申请 号 202210958348.6 (22)申请日 2022.08.11 (65)同一申请的已公布的文献号 申请公布号 CN 115037442 A (43)申请公布日 2022.09.09 (73)专利权人 平安银行股份有限公司 地址 518000 广东省深圳市罗湖区深南 东 路5047号 (72)发明人 周辉　 (74)专利代理 机构 北京超凡宏宇专利代理事务 所(特殊普通 合伙) 11463 专利代理师 余菲 (51)Int.Cl. H04L 9/00(2022.01) H04L 9/40(2022.01)(56)对比文件 CN 113810168 A,2021.12.17 CN 114584278 A,202 2.06.03 审查员 蒋联娇 (54)发明名称 一种模型效果检测方法、 装置、 存储介质及 设备 (57)摘要 本申请实施例提供一种模型效果检测方法、 装置、 存储介质及设备， 该方法借助半同态加密 算法， 生成公私钥对的数据源 方将公钥以及利用 公钥对标注值 队列进行加密而得到的第二密文 发送给模型方， 而模型方利用公钥对 预测值队列 进行加密得到第一密文， 并对第一密文和第二密 文进行同态减运算以得到第三密文， 这样， 数据 源方基于私钥对第三密文进行解密后， 解密结果 表征标注 值队列和标注值队列之间的匹配程度， 因而， 数据源 方可以根据解密结果确定出模型方 的模型效果。 如此， 实现在不泄露双方数据的情 况下， 确定出模型方建立的模型的效果。 权利要求书2页 说明书8页 附图3页 CN 115037442 B 2022.11.29 CN 115037442 B 1.一种模型效果检测方法， 其特 征在于， 应用于数据源方， 包括： 基于半同态加密算法生成公钥及私钥， 并将所述公钥发送给模型方， 以使所述模型方 利用所述 公钥对预测值队列进 行加密以得到第一密文， 所述预测值队列是由所述模型方针 对一组测试 数据计算得到的模型 预测结果组成的队列； 利用所述公钥对标注值队列进行加密以得到第 二密文， 并将所述第 二密文发送给所述 模型方， 以使 所述模型方对所述第一密文和所述第二密 文进行同态减运算， 得到第三密 文； 所述第三密文是基于将同态减运 算的结果进行乱序处 理而得到的； 获取所述模型方发送的第三密文， 并利用所述私钥对所述第三密文进行解密， 根据解 密结果确定所述模型 方的模型效果； 其中， 所述标注值队列是所述数据源方针对所述测试数据计算得到的模型预测结果组 成的队列； 所述根据解密结果确定所述模型方的模 型效果包括： 根据解密得到的明文中0的 占比率， 确定所述模型 方的模型效果和所述数据源方的模型效果之间的匹配度； 或者， 所述标注值队列是所述测试数据对应的真实结果组成的队列； 所述根据解密结 果确定所述模型方的模型效果包括： 根据解密得到的明文中0的占比率， 确定所述模型方的 模型预测结果的准确率。 2.根据权利要求1所述的方法， 其特征在于， 若所述标注值队列 是所述测试数据对应的 真实结果组成的队列， 所述方法还 包括： 根据所述测试数据对应的真实结果与所述数据源方针对所述测试数据计算得到的模 型预测结果之间的匹配度， 确定所述数据源方的模型 预测结果的准确率； 根据所述模型方的模型预测结果的准确率和所述数据源方的模型预测结果的准确率 之间的大小关系， 比较所述模型 方的模型效果和所述数据源方的模型效果。 3.根据权利要求1所述的方法， 其特征在于， 所述模型方对所述第 一密文和所述第 二密 文进行同态减运算的过程中， 随机地采取第一密文减去第二密文， 或第二密文减去第一密 文的形式， 其中， 采取第一密文减去第二密文的形式的概 率为二分之一。 4.一种模型效果检测装置， 其特 征在于， 包括： 生成模块， 用于基于半同态加密算法生成公钥及私钥， 并将所述公钥发送给模型方， 以 使所述模型方利用所述公钥对预测值队列进 行加密以得到第一密 文， 所述预测值队列是由 所述模型 方针对一组测试 数据计算得到的模型 预测结果组成的队列； 加密模块， 用于利用所述公钥对标注值队列进行加密以得到第二密文， 并将所述第二 密文发送给所述模型方， 以使所述模型方对所述第一密文和所述第二密文进行同态减运 算， 得到第三密文； 所述第三密文是基于将同态减运 算的结果进行乱序处 理而得到的； 解密模块， 用于获取所述模型方发送的第三密文， 并利用所述私钥对所述第三密文进 行解密， 根据解密结果确定所述模型 方的模型效果； 其中， 所述标注值队列是数据源方针对所述测试数据计算得到的模型预测结果组成的 队列； 所述解密模块具体用于： 根据解密得到的明文中0的占比率， 确定所述模型方的模型 效果和所述数据源方的模型效果之间的匹配度； 或者， 所述标注值队列是所述测试数据对应的真实结果组成的队列； 所述解密模块具 体用于： 根据解密得到的明文中0的占比率， 确定所述模型 方的模型 预测结果的准确率。 5.一种计算机可读存储介质， 其特征在于， 其上存储有计算机程序， 所述计算机程序被权　利　要　求　书 1/2 页 2 CN 115037442 B 2处理器执行时实现如权利要求1至 3任一项所述的方法。 6.一种计算机设备， 其特征在于， 包括处理器、 存储器及存储在存储器上并可在处理器 上运行的计算机程序， 其中， 所述处理器执行所述计算机程序时实现如权利要求1至3任一 项所述的方法。权　利　要　求　书 2/2 页 3 CN 115037442 B 3