(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211175546.1 (22)申请日 2022.09.26 (71)申请人 多点生活 （成都） 科技有限公司 地址 610000 四川省成 都市四川成 都高新 区天府大道中段666号希顿国际广场B 座10楼 (72)发明人 邓泽露　程希来　徐克勤　郑博嘉　 (74)专利代理 机构 北京唯智勤实知识产权代理 事务所(普通 合伙) 11557 专利代理师 孙姣 (51)Int.Cl. G06V 20/50(2022.01) G06V 10/74(2022.01) G06V 10/82(2022.01) (54)发明名称 物品摆放设备控制方法、 装置、 设备、 介质和 程序产品 (57)摘要 本公开的实施例公开了物品摆放设备控制 方法、 装置、 设备、 介质和程序产品。 该方法的一 具体实施方式包括： 将物品陈列图像输入至通用 目标检测模型， 得到图像坐标信息集合； 确定物 品图像集合； 将每个物品图像输入至第一物品识 别模型； 将每个物品图像输入至第二物品识别模 型； 对于每个第一物品识别信息， 响应于确定概 率值大于第一预设阈值， 将包括的物品编号确定 为物品识别结果； 响应于确定概率值小于等于第 一预设阈值： 选择目标第二物品识别信息； 响应 于包括的相似度大于第二预设阈值， 将包括的物 品编号确定为物品识别结果； 响应于确定相似度 小于等于第二预设阈值， 控制物品摆放设备执行 物品上新操作。 该实施方式提高了物品识别和物 品摆放的准确率。 权利要求书3页 说明书15页 附图3页 CN 115497033 A 2022.12.20 CN 115497033 A 1.一种物品摆放设备控制方法， 包括： 获取物品陈列图像， 其中， 所述物品陈列图像中显示了各个物品； 将所述物品陈列图像输入至预先训练 的通用目标检测模型， 得到对应所述各个物品的 各个图像坐标信息作为图像坐标信息集 合； 根据所述图像坐标信息集 合， 确定物品图像集 合； 将所述物品图像集合中的每个物品图像输入至预先训练 的第一物品识别模型， 得到第 一物品识别信息集合， 其中， 所述第一物品识别信息集合中的第一物品识别信息对应所述 物品图像集合中的物品图像， 所述第一物品识别信息集合中的第一物品识别信息包括物品 编号和对应所述物品编号的概 率值； 将所述物品图像集合中的每个物品图像输入至预先训练 的第二物品识别模型， 得到第 二物品识别信息集合， 其中， 所述第二物品识别信息集合中的第二物品识别信息对应所述 物品图像集合中的物品图像， 所述第二物品识别信息集合中的第二物品识别信息包括物品 编号和对应至少一个目标物品图像的相似度， 所述至少一个目标物品图像对应所述物品编 号； 对于所述第 一物品识别信 息集合中的每个第 一物品识别信 息， 响应于确定所述第 一物 品识别信息包括的概率值大于第一预设阈值， 将所述第一物品识别信息包括的物品编号确 定为物品识别结果； 对于所述第 一物品识别信 息集合中的每个第 一物品识别信 息， 响应于确定所述第 一物 品识别信息包括的概 率值小于等于所述第一预设阈值， 执 行以下步骤： 将所述第一物品识别 信息对应的物品图像确定为目标物品图像； 从所述第二物品识别信息集合中选择对应所述目标物品图像的第二物品识别信息作 为目标第二物品识别 信息； 响应于确定所述目标第 二物品识别信 息包括的相似度大于第 二预设阈值， 将所述目标 第二物品识别 信息包括的物品编号确定为物品识别结果； 响应于确定所述目标第 二物品识别信 息包括的相似度小于等于所述第 二预设阈值， 控 制相关联的物品摆放设备执行对应目标物品的物品上新操作， 其中， 所述 目标物品为所述 目标第二物品识别 信息包括的物品编号所对应的物品。 2.根据权利要求1所述的方法， 其中， 所述图像坐标信息集合中的图像坐标信息包括： 图像中心坐标、 图像长度和图像宽度； 以及 所述根据所述图像坐标信息集 合， 确定物品图像集 合， 包括： 对于所述图像坐标信息集 合中的每 个图像坐标信息， 执 行以下步骤： 根据所述图像坐标信息包括的图像中心坐标， 确定所述图像坐标信息对应的图像位 置； 根据所述图像坐标信 息包括的图像长度和图像宽度， 确定所述图像坐标信 息对应的图 像尺寸； 根据所述图像位置和所述图像尺寸， 确定所述图像坐标信息对应的物品图像。 3.根据权利要求1所述的方法， 其中， 所述响应于确定所述目标第 二物品识别信 息包括 的相似度小于等于所述第二预设阈值， 控制相关联的物品摆放设备执行对应目标物品的物 品上新操作， 包括：权　利　要　求　书 1/3 页 2 CN 115497033 A 2获取对应所述目标物品的第一物品信息； 基于所述第一物品信息， 生成物品条 形码信息； 根据所述目标物品的物品编号， 确定所述目标物品的库存数量； 根据所述物品条形码信 息和所述库存数量， 控制所述物品摆放设备执行对应所述目标 物品的物品上新操作。 4.根据权利要求3所述的方法， 其中， 在所述控制所述物品摆放设备执行对应所述目标 物品的物品上新操作之前， 所述方法还 包括： 对于所述物品上新操作对应的每 个目标物品， 执 行以下步骤： 对所述目标物品的物品条 形码进行扫描处 理， 得到物品条 形码信息； 对摆放所述目标物品的货架上对应所述目标物品的货架条形码进行扫描处理， 得到货 架条形码信息； 响应于确定所述物品条形码信 息与所述货架条形码信 息匹配， 控制声音播放设备播放 物品摆放完成提 示信息。 5.根据权利要求1所述的方法， 其中， 在所述响应于确定所述第 一物品识别信 息包括的 概率值大于第一预设阈值， 将所述第一物品识别信息包括的物品编号确定为物品识别结果 之后， 所述方法还 包括： 将所述第一物品识别 信息包括的物品编号确定为第一物品编号； 根据所述第一物品编号， 确定所述第一物品编号对应的第一物品库存数量； 响应于确定所述第 一物品库存数量大于第 三预设阈值， 控制相关联的声音播放设备播 放第一库存提 示信息； 响应于确定所述第 一物品库存数量小于等于所述第 三预设阈值， 控制所述声音播放设 备播放第二库存提 示信息。 6.根据权利要求1所述的方法， 其中， 在所述响应于确定所述目标第 二物品识别信 息包 括的相似度大于第二预设阈值， 将所述目标第二物品识别信息包括的物品编号确定为物品 识别结果之后， 所述方法还 包括： 将所述目标第二物品识别 信息包括的物品编号确定为第二物品编号； 根据所述第二物品编号， 确定所述第二物品编号对应的第二物品库存数量； 响应于确定所述第 二物品库存数量大于第四预设阈值， 控制相关联的声音播放设备播 放第三库存提 示信息； 响应于确定所述物品库存数量小于等于所述第四预设阈值， 控制所述声音播放设备播 放第四库存提 示信息。 7.一种物品摆放设备控制装置， 包括： 获取单元， 被配置成获取物品陈列图像， 其中， 所述物品陈列图像中显示了各个物品； 第一输入单元， 被配置成将所述物品陈列图像输入至预先训练的通用目标检测模型， 得到对应所述各个物品的各个图像坐标信息作为图像坐标信息集 合； 第一确定单 元， 被配置成根据所述图像坐标信息集 合， 确定物品图像集 合； 第二输入单元， 被配置成将所述物品图像集合中的每个物品图像输入至预先训练的第 一物品识别模型， 得到第一物品识别信息集合， 其中， 所述第一物品识别信息集合中的第一 物品识别信息对应所述物品图像集合中的物品图像， 所述第一物品识别信息集合中的第一权　利　要　求　书 2/3 页 3 CN 115497033 A 3