CN118172866A - 一种针剂型药品存取方法及装置 - Google Patents

Abstract

本发明公开一种针剂型药品存取方法及装置，所述方法包括：采集时，根据连续采集的多种针剂型的药品瓶身多角度图像，生成多种药品瓶身模板；存药时，将不同规格的针剂型药品瓶身与对应的托盘进行绑定；出药前，从托盘取出待分拣针剂，并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药；采集时跟出药前，摄像机的拍摄环境与摄像参数保持一致。采用本发明，通过图像识别技术和智能匹配，提高针剂型药品在自动发药过程中的识别准确性和分发效率，同时实现对整个取放药流程的有效监控和异常处理。

Description

一种针剂型药品存取方法及装置

技术领域

本发明涉及药品识别领域，尤其涉及一种针剂型药品存取方法及装置。

背景技术

目前，现有的自动发药机在处理针剂型药品尤其是没有纸质标签的针剂时，普遍存在识别精度不高、效率较低以及故障率较高等问题，原因是瓶身喷字的针剂在灯光照射时，玻璃瓶身容易产生炫光，导致不易识别。传统的解决方案通常依赖于机械结构的精确设计和控制，如采用特定的码盘定位或条形码扫描等技术进行药品识别，但此类方法容易受到光线、灰尘等因素影响，且无法有效处理无明显物理标识的针剂药品。

发明内容

本发明实施例提供一种针剂型药品存取方法及装置，通过图像识别技术和智能匹配，提高针剂型药品在自动发药过程中的识别准确性和分发效率，同时实现对整个取放药流程的有效监控和异常处理。

为实现上述目的，本申请实施例的第一方面提供了一种针剂型药品存取方法，包括：

采集时，根据连续采集的多种针剂型的药品瓶身多角度图像，生成多种药品瓶身模板；

存药时，将不同规格的针剂型药品瓶身与对应的托盘进行绑定；

出药前，从托盘取出待分拣针剂，并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药；采集时跟出药前，摄像机的拍摄环境与摄像参数保持一致。

在第一方面的一种可能的实现方式中，所述若匹配到的特征点数量大于预设阈值，则出药流程正确之后，还包括：

若匹配到的特征点数量小于或等于预设阈值，将药品放到回收托盘等待人工处理并增加对应药品瓶身模板的匹配失败次数；若匹配失败次数大于预设失败阈值，对对应药品瓶身模板进行更新。

在第一方面的一种可能的实现方式中，所述根据连续采集的多种针剂型的药品瓶身多角度图像，生成多种药品瓶身模板，具体包括：

对连续采集的多种针剂型的药品瓶身多角度图像依次使用3D成像算法，得到多种全景图像作为多种药品瓶身模板。

在第一方面的一种可能的实现方式中，所述将不同规格的针剂型药品瓶身与对应的托盘进行绑定，具体包括：

人工将针剂型药品放置在对应托盘中并通过后台软件中记录。

在第一方面的一种可能的实现方式中，所述将不同规格的针剂型药品瓶身与对应的托盘进行绑定之后，还包括：

发起药品盘点，将各个托盘中针剂型药品逐个进行识别，发现无法匹配的针剂型药品，取出到回收窗口并提醒补药人员。

在第一方面的一种可能的实现方式中，所述并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药，具体包括：

从多角度对待分拣针剂型的药品瓶身进行连续拍照，将所得的每一张药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若其中一张药品瓶身图像与对应的药品瓶身模板特征点的匹配数量大于预设第一出药阈值，则匹配成功并确认进行出药。

在第一方面的一种可能的实现方式中，所述并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药，具体包括：

从多角度对待分拣针剂型的药品瓶身进行连续拍照，将所得的每一张药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若全部药品瓶身图像与对应的药品瓶身模板特征点的累计匹配数量大于预设第二出药阈值，则匹配成功并确认进行出药。

在第一方面的一种可能的实现方式中，所述特征点匹配包括：

针剂型药品的文字特征点匹配、商标特征点匹配和图案特征点匹配。

在第一方面的一种可能的实现方式中，所述摄像机的拍摄环境与摄像参数包括：

摄像机的数目、摄像机位置、环境补光条件和摄像头参数。

本申请实施例的第二方面提供了一种针剂型药品存取装置，包括：

采集模块，用于根据连续采集的多种针剂型的药品瓶身多角度图像，生成多种药品瓶身模板；

存药模块，用于将不同规格的针剂型药品瓶身与对应的托盘进行绑定；

出药模块，用于从托盘取出待分拣针剂，并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药；在调用采集模块跟出药模块时，摄像机的拍摄环境与摄像参数保持一致。

相比于现有技术，本发明实施例提供的一种针剂型药品存取方法及装置，通过引入3D全景图像算法、图像识别技术，显著提升了针剂型药品在自动发药过程中的识别准确性和整体工作效率，降低了由于识别误差引起的医疗差错风险。同时，通过实时监控及异常报警机制，能够及时发现并处理机械臂运行故障，保证了药品自动取放的成功率，从而极大地改善了用户体验，增强了自动发药***的稳定性和可靠性，为医疗机构带来了经济效益和社会效益的双重提升。

附图说明

图1是本发明一实施例提供一种针剂型药品存取方法的流程示意图；

图2是本发明一实施例提供一种药品瓶身模板的示意图图；

图3是本发明一实施例提供一种针剂型药品瓶身与托盘进行绑定的示意图；

图4是本发明一实施例提供一种进行特征点匹配时的示意图

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参见图1，本发明一实施例提供一种针剂型药品存取方法，包括：

S10、采集时，根据连续采集的多种针剂型的药品瓶身多角度图像，生成多种药品瓶身模板；

S11、存药时，将不同规格的针剂型药品瓶身与对应的托盘进行绑定；

S12、出药前，从托盘取出待分拣针剂，并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药；采集时跟出药前，摄像机的拍摄环境与摄像参数保持一致。

S10是模板采集的过程，可以通过机械臂将要采集的针剂药品抓取到识别摄像头前固定位置，可以利用高分辨率视觉摄像头连续采集针剂型药品360度的图像，生成瓶身的360度全景照片作为基础模板，并将这些模板数据存储在***数据库中备用，采集模板时拍照的位置和光线、摄像头等拍照条件和识别时的条件一致，以保障药品瓶身模板的准确性。药品瓶身模板信息保存如图2所示。参见图3，S11中对针剂类型和托盘进行关系绑定，这样便于人工将针剂放置在托盘中后可以主动发起药品盘点，即逐个将托盘中针剂进行识别，后续若发现无法匹配的针剂，可以及时取出到回收窗口并记录提醒补药人员，重新补药以保证出药的正确性。S12是最终出药前的判断过程，实际应用中，可以机械手从托盘中逐个取出待取针剂，其中一侧摄像头可以配备LED补光功能，确保在不同光照条件下都能获取清晰图像。

本实施例通过应用先进的图像识别技术和智能算法，以提高针剂型药品在自动发药过程中的识别准确性和分发效率，同时实现对整个取放药流程的有效监控和异常处理，减少因识别错误或机械臂故障导致的药品多发、少发甚至漏发的问题。

需要注意的是，发药机是封闭遮光的环境，发药时要确保发药机柜门关闭，摄像机识别药品时只有固定位置的LED灯光进行照明。因此需要保证录入模板时的光照环境和识别时的环境一致。

相比于现有技术，本发明实施例提供的一种针剂型药品存取方法，通过引入3D全景图像算法、图像识别技术，显著提升了针剂型药品在自动发药过程中的识别准确性和整体工作效率，降低了由于识别误差引起的医疗差错风险。同时，通过实时监控及异常报警机制，能够及时发现并处理机械臂运行故障，保证了药品自动取放的成功率，从而极大地改善了用户体验，增强了自动发药***的稳定性和可靠性，为医疗机构带来了经济效益和社会效益的双重提升。

示例性地，所述若匹配到的特征点数量大于预设阈值，则出药流程正确之后，还包括：

若匹配到的特征点数量小于或等于预设阈值，将药品放到回收托盘等待人工处理并增加对应药品瓶身模板的匹配失败次数；若匹配失败次数大于预设失败阈值，对对应药品瓶身模板进行更新。

本实施例主要涉及面向异常时的处理手段：遇到特征点匹配不足的情况，会将药品放到回收托盘，等待人工处理。并对匹配失败的模板进行记录，当某个模板匹配失败次数过多时，提醒维护人员更新该模板图片。

示例性地，所述根据连续采集的多种针剂型的药品瓶身多角度图像，生成多种药品瓶身模板，具体包括：

对连续采集的多种针剂型的药品瓶身多角度图像依次使用3D成像算法，得到多种全景图像作为多种药品瓶身模板。

本实施例中使用3D成像算法包括但不限于如OpenCV、archerfmy。

示例性地，所述将不同规格的针剂型药品瓶身与对应的托盘进行绑定，具体包括：

人工将针剂型药品放置在对应托盘中并通过后台软件中记录。

本实施例中，药品和托盘存在绑定关系，人工补药时人工核对药品保存在特定的托盘中，后台软件也会记录托盘中摆放的是什么药品，后台软件控制机械臂取出特定托盘的药品，保证机械手取出的药品是经过人工核对摆放的药品。

示例性地，所述将不同规格的针剂型药品瓶身与对应的托盘进行绑定之后，还包括：

发起药品盘点，将各个托盘中针剂型药品逐个进行识别，发现无法匹配的针剂型药品，取出到回收窗口并提醒补药人员。

本实施例可以在人工补药后选择性地进行，后台软件控制机械手将人工添加的药品逐个扫描确认，避免人工摆放错误。

出药时，机械手从托盘中逐个取出待取针剂，机械手捏住针剂安瓿并缓慢旋转瓶身，通过双摄像头从全方位角度捕捉待分拣针剂的物象信息，其中一侧摄像头配备LED补光功能，确保在不同光照条件下都能获取清晰图像。在旋转过程中连续拍照，***将待取药品的照片与预先存储的基础模板照片进行图像识别比对。设计并实施局部特征点识别模板策略，即将一张完整的药品图片分割为多个关键特征区域，识别过程中，当匹配到至少2个以上特征点(此时出药阈值设置为2)时，即判定为匹配正确。

需要说明的是，设置为单照片识别时，旋转过程连续拍照对每一张照片进行比对，满足条件(拍照识别中的图片与模板图片中特征值的匹配数量大于等于阈值)即为识别成功，停止拍照。也可设置为全照片识别，将所有匹配的特征点相加，得到总特征点匹配数是否达到总匹配数阈值，判断是否识别成功。总匹配数阈值应该小于模板图片的特征点数。

示例性地，设置为单照片识别时，所述并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药，具体包括：

从多角度对待分拣针剂型的药品瓶身进行连续拍照，将所得的每一张药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若其中一张药品瓶身图像与对应的药品瓶身模板特征点的匹配数量大于预设第一出药阈值，则匹配成功并确认进行出药。

示例性地，设置为全照片识别时，所述并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药，具体包括：

从多角度对待分拣针剂型的药品瓶身进行连续拍照，将所得的每一张药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若全部药品瓶身图像与对应的药品瓶身模板特征点的累计匹配数量大于预设第二出药阈值，则匹配成功并确认进行出药。

示例性地，所述特征点匹配包括：

针剂型药品的文字特征点匹配、商标特征点匹配和图案特征点匹配。

各个特征点的特征值匹配阈值可根据实际应用场景手动调整优化，以达到更高的识别精准度。使用控制变量法测试多个厂家的多种规格针剂识别成功率，得到一类针剂识别成功率和识别速度都达到预期效果的匹配阈值。

示例性地，所述摄像机的拍摄环境与摄像参数包括：

摄像机的数目、摄像机位置、环境补光条件和摄像头参数。

相比于现有技术，本发明实施例提供的一种针剂型药品存取方法，通过引入3D全景图像算法、图像识别技术，显著提升了针剂型药品在自动发药过程中的识别准确性和整体工作效率，降低了由于识别误差引起的医疗差错风险。同时，通过实时监控及异常报警机制，能够及时发现并处理机械臂运行故障，保证了药品自动取放的成功率，从而极大地改善了用户体验，增强了自动发药***的稳定性和可靠性，为医疗机构带来了经济效益和社会效益的双重提升。

本申请一实施例的提供一种针剂型药品存取装置，包括：采集模块、存药模块和出药模块。

采集模块，用于根据连续采集的多种针剂型的药品瓶身多角度图像，生成多种药品瓶身模板；

存药模块，用于将不同规格的针剂型药品瓶身与对应的托盘进行绑定；

出药模块，用于从托盘取出待分拣针剂，并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药；在调用采集模块跟出药模块时，摄像机的拍摄环境与摄像参数保持一致。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的***的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赞述。

相比于现有技术，本发明实施例提供的一种针剂型药品存取装置，通过引入3D全景图像算法、图像识别技术，显著提升了针剂型药品在自动发药过程中的识别准确性和整体工作效率，降低了由于识别误差引起的医疗差错风险。同时，通过实时监控及异常报警机制，能够及时发现并处理机械臂运行故障，保证了药品自动取放的成功率，从而极大地改善了用户体验，增强了自动发药***的稳定性和可靠性，为医疗机构带来了经济效益和社会效益的双重提升。

本申请一实施例提供一种计算机可读存储介质，其存储有计算机程序，所述计算机程序被处理器执行时实现如上述针剂型药品存取方法。

所述计算机设备可以是智能手机、平板电脑、桌上型计算机和云端服务器等计算设备。该计算机设备可包括但不仅限于处理器、存储器。本领域技术人员可以理解，图仅仅是计算机设备的举例，并不构成对计算机设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如还可以包括输入输出设备、网络接入设备等。

所称处理器可以是中央处理单元(Central Processing Unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

所述存储器在一些实施例中可以是所述计算机设备的内部存储单元，例如计算机设备的硬盘或内存。所述存储器在另一些实施例中也可以是所述计算机设备的外部存储设备，例如所述计算机设备上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，所述存储器还可以既包括所述计算机设备的内部存储单元也包括外部存储设备。所述存储器用于存储操作***、应用程序、引导装载程序(BootLoader)、数据以及其他程序等，例如所述计算机程序的程序代码等。所述存储器还可以用于暂时地存储已经输出或者将要输出的数据。

本申请实施例提供了一种计算机程序产品，当计算机程序产品在计算机设备上运行时，使得计算机设备执行时实现上述各个方法实施例中的步骤。

在本申请所提供的几个实施例中，可以理解的是，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意的是，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。

所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。

Claims (10)

1.一种针剂型药品存取方法，其特征在于，包括：

采集时，根据连续采集的多种针剂型的药品瓶身多角度图像，生成多种药品瓶身模板；

存药时，将不同规格的针剂型药品瓶身与对应的托盘进行绑定；

出药前，从托盘取出待分拣针剂，并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药；采集时跟出药前，摄像机的拍摄环境与摄像参数保持一致。

2.如权利要求1所述针剂型药品存取方法，其特征在于，所述若匹配到的特征点数量大于预设阈值，则出药流程正确之后，还包括：

若匹配到的特征点数量小于或等于预设阈值，将药品放到回收托盘等待人工处理并增加对应药品瓶身模板的匹配失败次数；若匹配失败次数大于预设失败阈值，对对应药品瓶身模板进行更新。

3.如权利要求1所述针剂型药品存取方法，其特征在于，所述根据连续采集的多种针剂型的药品瓶身多角度图像，生成多种药品瓶身模板，具体包括：

对连续采集的多种针剂型的药品瓶身多角度图像依次使用3D成像算法，得到多种全景图像作为多种药品瓶身模板。

4.如权利要求1所述针剂型药品存取方法，其特征在于，所述将不同规格的针剂型药品瓶身与对应的托盘进行绑定，具体包括：

人工将针剂型药品放置在对应托盘中并通过后台软件中记录。

5.如权利要求4所述针剂型药品存取方法，其特征在于，所述将不同规格的针剂型药品瓶身与对应的托盘进行绑定之后，还包括：

发起药品盘点，将各个托盘中针剂型药品逐个进行识别，发现无法匹配的针剂型药品，取出到回收窗口并提醒补药人员。

6.如权利要求1所述针剂型药品存取方法，其特征在于，所述并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药，具体包括：

从多角度对待分拣针剂型的药品瓶身进行连续拍照，将所得的每一张药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若其中一张药品瓶身图像与对应的药品瓶身模板特征点的匹配数量大于预设第一出药阈值，则匹配成功并确认进行出药。

7.如权利要求1所述针剂型药品存取方法，其特征在于，所述并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药，具体包括：

从多角度对待分拣针剂型的药品瓶身进行连续拍照，将所得的每一张药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若全部药品瓶身图像与对应的药品瓶身模板特征点的累计匹配数量大于预设第二出药阈值，则匹配成功并确认进行出药。

8.如权利要求1所述针剂型药品存取方法，其特征在于，所述特征点匹配包括：

针剂型药品的文字特征点匹配、商标特征点匹配和图案特征点匹配。

9.如权利要求1所述针剂型药品存取方法，其特征在于，所述摄像机的拍摄环境与摄像参数包括：

摄像机的数目、摄像机位置、环境补光条件和摄像头参数。

10.一种针剂型药品存取装置，其特征在于，包括：

采集模块，用于根据连续采集的多种针剂型的药品瓶身多角度图像，生成多种药品瓶身模板；

存药模块，用于将不同规格的针剂型药品瓶身与对应的托盘进行绑定；

出药模块，用于从托盘取出待分拣针剂，并将捕捉得到的所述待分拣针剂的药品瓶身图像与对应的药品瓶身模板进行特征点匹配；若匹配到的特征点数量大于预设出药阈值，则确认进行出药；在调用采集模块跟出药模块时，摄像机的拍摄环境与摄像参数保持一致。