(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210489140.4 (22)申请日 2022.05.06 (71)申请人 广州珐玛珈智能设备股份有限公司 地址 511356 广东省广州市广州经济技 术 开发区永和经济区黄旗 山路16号 (72)发明人 姜德伟　黎业演　郭景贵　崔涯　 郑盛学　 (74)专利代理 机构 广东广盈专利商标事务所 (普通合伙) 44339 专利代理师 李俊 (51)Int.Cl. G06V 20/40(2022.01) G06V 10/74(2022.01) G06V 10/764(2022.01) G06K 9/62(2022.01) (54)发明名称 一种基于视觉识别的药粒装瓶缺陷检测识 别方法及装置 (57)摘要 本发明公开了一种基于视觉识别的药粒装 瓶缺陷检测识别方法及装置， 其中， 所述方法包 括： 在药粒掉落到预设区域时， 启动预设的多个 视频数据采集设备对药粒经过所述预设区域时 进行视频数据采集处理， 获得多个药粒视频数 据； 进行分帧处理， 获得多个药粒视频数据的视 频帧数据； 对多个药粒视频数据的视频帧数据中 的每一帧进行药粒图像提取处理， 获得每一帧的 药粒图像数据； 对每一帧的药粒图像数据进行姿 态识别处理， 获得每一帧的药粒图像数据的姿态 数据； 对每一帧的药粒图像数据按照对应的姿态 数据进行缺陷检测识别处理， 获得缺陷检测识别 结果。 在本发明实施例中， 可以快速的识别到掉 落的药品是否存在缺陷， 并且将识别的错误率控 制在可接受的范围内。 权利要求书2页 说明书9页 附图2页 CN 114821435 A 2022.07.29 CN 114821435 A 1.一种基于 视觉识别的药 粒装瓶缺陷检测识别方法， 其特 征在于， 所述方法包括： 在药粒掉落到预设区域 时， 启动预设的多个视频数据采集设备对所述药粒经过所述预 设区域时进行视频 数据采集处 理， 获得多个药 粒视频数据； 对所述多个药 粒视频数据进行分帧处 理， 获得所述多个药 粒视频数据的视频帧数据； 对所述多个药粒视频数据的视频帧数据中的每一帧进行药粒图像提取处理， 获得每一 帧的药粒图像数据； 对每一帧的药粒图像数据进行姿态识别处理， 获得每一帧的药粒图像数据的姿态数 据； 对每一帧的药粒图像数据按照对应的姿态数据进行缺陷检测识别处理， 获得缺陷检测 识别结果。 2.根据权利要求1所述的药粒装瓶缺陷检测 识别方法， 其特征在于， 所述多个视频数据 采集设备至少包括两个视频数据采集设备， 其中两个视频数据采集设备设置在同一高度， 并且相对设置， 两个视频 数据采集设备的连线穿过 所述药粒掉落路径。 3.根据权利要求1所述的药粒装瓶缺陷检测 识别方法， 其特征在于， 所述在药粒掉落到 预设区域时， 启动预设的多个视频数据采集设备对所述药粒经过所述预设区域时进行视频 数据采集处 理， 包括： 在所述药 粒脱离掉 落口时， 记录所述药 粒脱离掉 落口的脱离时间； 基于所述脱离时间利用自由落体算法获得 所述药粒到达所述预设区域的到 达时间； 基于所述到达时间启 动预设的多个视频数据采集设备对所述药粒经过所述预设区域 时进行视频 数据采集处 理。 4.根据权利要求3所述的药粒装瓶缺陷检测 识别方法， 其特征在于， 所述在所述药粒脱 离掉落口时还包括对所述药粒施加一个旋转力， 使所述药粒在掉落是不断旋转改变掉落姿 态。 5.根据权利要求1所述的药粒装瓶缺陷检测 识别方法， 其特征在于， 所述对所述多个药 粒视频数据进行分帧处 理， 获得所述多个药 粒视频数据的视频帧数据， 包括： 对所述多个药粒视频数据按照所述多个视频数据采集设备在视频数据采集时的帧频 率进行分帧处 理， 获得多个药 粒视频数据的视频帧数据。 6.根据权利要求1所述的药粒装瓶缺陷检测 识别方法， 其特征在于， 所述对所述多个药 粒视频数据的视频帧数据中的每一帧进行药粒图像提取处理， 获得每一帧的药粒图像数 据， 包括： 依次利用Sobel边缘检测算法、 拉普拉斯边缘检测算法和Canny边缘检测算法对所述多 个药粒视频数据的视频帧数据中的每一帧进 行像素轮廓提取处理， 依次获得第一药粒轮廓 信息、 第二药 粒轮廓信息及第三药 粒轮廓信息； 基于预设加权 融合比例 将所述第 一药粒轮廓信 息、 所述第 二药粒轮廓信 息及所述第 三 药粒轮廓信息进行融合处 理， 获得融合药 粒轮廓信息； 基于所述融合药粒轮廓信息对所述多个药粒视频数据的视频帧数据中的每一帧进行 药粒图像提取处 理， 获得每一帧的药 粒图像数据。 7.根据权利要求1所述的药粒装瓶缺陷检测 识别方法， 其特征在于， 所述对每一帧的药 粒图像数据进行姿态 识别处理， 获得每一帧的药 粒图像数据的姿态数据， 包括：权　利　要　求　书 1/2 页 2 CN 114821435 A 2对所述每一帧的药粒图像数据的当前姿态信息与姿态数据库中的姿态数据进行相似 度计算， 并基于相似度计算结果选取姿态相似度最高的作为所述每一帧的药粒图像数据的 姿态数据。 8.根据权利要求1所述的药粒装瓶缺陷检测 识别方法， 其特征在于， 所述对每一帧的药 粒图像数据按照对应的姿态数据进行缺陷检测识别处 理， 获得缺陷检测识别结果， 包括： 利用贝叶斯决策模型对每一帧的药粒图像数据按照对应的姿态数据进行缺陷检测识 别处理， 获得缺陷检测识别结果。 9.根据权利要求8所述的药粒装瓶缺陷检测 识别方法， 其特征在于， 所述利用贝叶斯决 策模型对每一帧的药 粒图像数据按照对应的姿态数据进行缺陷检测识别处 理， 包括： 对每一帧的药 粒图像数按照像素值进行 药粒像素矩阵构建处 理， 获得药粒像素矩阵； 基于所述药粒像素矩阵与每一帧的药粒图像数据按照对应的姿态数据的留存药粒像 素矩阵进行矩阵元 素匹配， 形成决策匹配分数矩阵； 基于所述决策匹配分数矩阵利用所述贝叶斯决策模型进行缺陷检测决策处理， 形成缺 陷检测决策 结果； 基于所述 缺陷检测决策 结果进行缺陷检测识别处 理。 10.一种基于 视觉识别的药 粒装瓶缺陷检测识别装置， 其特 征在于， 所述装置包括： 视频采集模块： 用于在药粒掉落到预设区域时， 启动预设的多个视频数据采集设备对 所述药粒经过所述预设区域时进行视频 数据采集处 理， 获得多个药 粒视频数据； 分帧处理模块： 用于对所述多个药粒视频数据进行分帧处理， 获得所述多个药粒视频 数据的视频帧数据； 图像提取模块： 用于对所述多个药粒视频数据的视频帧数据中的每一帧进行药粒图像 提取处理， 获得每一帧的药 粒图像数据； 姿态识别模块： 用于对每一帧的药粒图像数据进行姿态识别处理， 获得每一帧的药粒 图像数据的姿态数据； 缺陷检测模块： 用于对每一帧的药粒图像数据按照对应的姿态数据进行缺陷检测识别 处理， 获得缺陷检测识别结果。权　利　要　求　书 2/2 页 3 CN 114821435 A 3