CN106214262B - 手术机器人***及其自适应控制方法 - Google Patents

手术机器人***及其自适应控制方法 Download PDF

Info

Publication number
CN106214262B
CN106214262B CN201610566337.8A CN201610566337A CN106214262B CN 106214262 B CN106214262 B CN 106214262B CN 201610566337 A CN201610566337 A CN 201610566337A CN 106214262 B CN106214262 B CN 106214262B
Authority
CN
China
Prior art keywords
tool
endoscope
control object
ratio factor
moving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610566337.8A
Other languages
English (en)
Other versions
CN106214262A (zh
Inventor
崔胜旭
闵东明
李珉奎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Eaton Corp
Original Assignee
Eaton Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Eaton Corp filed Critical Eaton Corp
Publication of CN106214262A publication Critical patent/CN106214262A/zh
Application granted granted Critical
Publication of CN106214262B publication Critical patent/CN106214262B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/313Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for introducing through surgical openings, e.g. laparoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B34/37Master-slave robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/70Manipulators specially adapted for use in surgery
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/0046Surgical instruments, devices or methods, e.g. tourniquets with a releasable handle; with handle and operating part separable
    • A61B2017/00464Surgical instruments, devices or methods, e.g. tourniquets with a releasable handle; with handle and operating part separable for use with different instruments
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • A61B2034/256User interfaces for surgical systems having a database of accessory information, e.g. including context sensitive help or scientific articles

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Robotics (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Human Computer Interaction (AREA)
  • Endoscopes (AREA)
  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)

Abstract

公开了手术机器人***及其自适应控制方法,主界面包括于安装有内窥镜及手术工具中一个以上控制对象的手术机器人***中,用于控制控制对象位置,包括:操作部,接收移动操作控制对象的用户命令;存储部,存储由内窥镜提供的图像信息中一个以上基准图像和对应于基准图像的移动比例因子;比例因子运算部,判断通过内窥镜提供的当前图像信息与基准图像相比是被放大还是缩小,以与放大或缩小程度成比例的方式调节移动比例因子,并进行再设定;操作信号生成部,将利用操作部的用户命令转换为对应于再设定的移动比例因子,并生成对控制对象的操作信号。能够缩短手术时间及减轻施术者的疲劳感,并根据显示的图像信息直观地确认手术工具移动距离。

Description

手术机器人***及其自适应控制方法
本申请是申请号为201110423299.8、申请日为2011年12月16日、发明名称为“手术机器人***及其自适应控制方法”的中国发明专利申请的分案申请。
技术领域
本发明涉及一种手术机器人***及其自适应控制方法。
背景技术
医学上的手术是指使用医疗器械对皮肤、粘膜或其它组织进行切开、切割或进行操作而治愈病的行为。特别是,切开手术部位皮肤而对其内部器官等进行治疗、整形或切除的剖腹手术等,由于出血、副作用、患者痛苦、疤痕等问题,最近使用机器人(robot)的手术备受欢迎。
手术机器人***一般包括主机器人和从机器人,主机器人和从机器人可以是各自独立实现,也可以是一体实现。
当施术者操作主机器人上所具有的操纵器(例如手柄)时,与从机器人的机器臂结合或由机器臂把持的手术工具(即手术器械:instrument)***作,从而进行手术。
为了进行根据施术者操作操纵器的手术,手术机器人***在多种动作模式下执行指定的动作。对作为多种动作模式中的部分动作模式的主机器人重定位模式、腹腔镜位置控制模式、保持模式说明如下。
主机器人重定位模式为,按下所具有的主机器人重定位按钮时的手术机器人***的动作模式,即使施术者移动操纵器,根据操纵器操作的操作命令也不会传递到从机器人的动作模式。用于进入主机器人重定位模式的主机器人重定位按钮可以通过下面说明的离合按钮来实现。
腹腔镜位置控制模式是当施术者移动操纵器时腹腔镜取代安装在从机器人上的手术工具而***作的动作模式。施术者按住主机器人上预先具备的摄像机按钮(例如踏板)的情况下移动操纵器,从而能够在腹腔镜位置控制模式下以移动腹腔镜等方式操作腹腔镜。
保持模式是维持当前动作状态的动作模式,是使主机器人和从机器人都在当前状态停止的动作模式。通过施术者按下预先设定的按钮或面部从控制台(console)离开等动作,手术机器人***可以进入保持模式。
下面,参照相关附图简单说明现有技术涉及的手术机器人***的主机器人重定位模式及腹腔镜位置控制模式的动作。
图1是表示现有技术涉及的手术机器人***整体结构的俯视图,图2是表示现有技术涉及的手术机器人***主界面的概念图,图3a及图3b是表示现有技术中的手术机器人***所具有的手术器械的移动控制过程的概念图。
参照图1及图2,手术机器人***包括:从机器人2,对躺在手术台上的患者直接实施手术;主机器人1,施术者用于远程操控从机器人2。当主机器人1和从机器人2一体构成时,主界面4可对应于一体型手术机器人的界面部分。
从机器人2包括机器臂3及腹腔镜5。主机器人1的主界面4包括显示器6、手柄10、主机器人重定位按钮及摄像机按钮。主机器人重定位按钮及摄像机按钮可以分别由离合按钮14或踏板30等形式实现。
主机器人1和从机器人2可以通过有线网络或无线网络相连接并将操作信号等传送给对方。如果,需要在相同及/或相近时间传送通过主界面4上所具有的两个手柄10的两个操作信号及/或用于调节腹腔镜5位置的操作信号时,各操作信号可以彼此独立地传送给从机器人2。
从机器人2的机器臂3可具有多自由度地驱动。机器臂3例如可以包括:手术工具,***在患者的手术部位;偏转驱动部,根据手术位置以使手术工具向偏转(yaw)方向旋转;俯仰驱动部,向与偏转驱动部的旋转驱动正交的俯仰(pitch)方向旋转手术工具;移送驱动部,向长度方向移动手术工具;旋转驱动部,用于旋转手术工具;手术工具驱动部,设在手术工具的末端,用于切开或切割手术病灶。
主界面4上所具有的两个手柄10形成为,能够由施术者分别攥在双手上进行操作,根据施术者操作手柄10的操作信号传送到从机器人2,从而控制机器臂3。
通过腹腔镜5输入的图像以画面图像显示在主界面4的显示器6上。而且,在显示器6上还可以增加显示例如患者的心电图曲线等。
在主界面4上具有的主机器人重定位按钮是,施术者进行手术过程中,将用于进行手术的作业区域(例如,为了操作手术工具而通过腹腔镜5拍摄的区域)从第一位置移动到不同位置的第二位置后,为了操作主界面4的手柄10而再调节行动区域(例如,当前作业区域的中心位置恢复调整到手柄10的基本位置)时,能够利用的控制按钮。
施术者输入主机器人重定位按钮的状态(例如,踩踏踏板30的状态)下即使向任一方向操作手柄10,该操作引起的手术工具操作命令或腹腔镜5操作命令也不会提供给从机器人2,因此施术者能够为了便于进行手术动作将手柄10恢复到原来状态。
即,当施术者将作业区域从第一位置移动到第二位置时,首先要进行用于移动腹腔镜5的摄像机按钮输入(即,进入腹腔镜位置控制模式),并通过操作手柄10将腹腔镜5移动至所需位置之后,为了防止腹腔镜5在为移动腹腔镜5而向任一方向操作的手柄10恢复至原来位置时移动,在按住主机器人重定位按钮的状态(主机器人重定位模式)下对手柄10进行操作而恢复至原来位置后,结束主机器人重定位按钮的按住状态,从而能够再调节行动区域,以便在变更的作业区域内进行用于操作手术工具的手柄10的操作。
但是,腹腔镜5在腹腔镜位置控制模式下通过操作手柄10向相应方向移动的程度,限定于预先设定的作业区域310的尺寸,所以,如图3a所示的将作业区域310从(a)区域移动至(b)区域时,给施术者带来很大不便。
即,要将(a)区域的作业区域310移动至(b)区域时,如图3b所示,施术者只能将作业区域310以(a)、(p1)、(p2)、(p3)及(b)的顺序依次移动,在各移动步骤中,施术者需要反复进行操作摄像机按钮而移动腹腔镜5、操作手柄10使腹腔镜5移动、为了将手柄10恢复到原来位置而操作主机器人重定位按钮及结束操作的过程,当移动作业区域10的路径改变时,摄像机按钮及主机器人重定位按钮的操作次数还可能更多。在此,图3b的c-a、c-b等表示随着操作手柄10腹腔镜5的移动位置。
而且,在现有技术涉及的手术机器人***中,手术工具的移动方式的问题点是,与通过腹腔镜5输入的图像信息倍率无关地保持不变。
其理由是,用于定义手术工具移动间距的移动比例因子(MSF,Motion ScaleFactor)固定在一定值以能够在预先设定的作业区域310内进行最佳移动,而完全未考虑通过腹腔镜5输入的图像信息包括哪些部分及哪些区域。
而且,以作业区域为单位的腹腔镜5移动机制最终导致手术时间延长,还存在对在高度紧张状态下进行手术的医生带来严重疲劳感的问题。
所述背景技术是发明人为了导出本发明而所掌握或在导出本发明的过程中所学到的技术信息,不一定是本发明申请前被一般公众公开的公知技术。
发明内容
本发明目的在于提供一种手术机器人***及其自适应控制方法,能够根据由腹腔镜拍摄的图像信息是关于哪个区域及哪个范围的被摄体来自适应地改变手术工具的移动比例因子。
本发明目的在于提供一种手术机器人***及其自适应控制方法,能够缩短手术时间及减轻手术进行过程中施术者的疲劳感,并根据显示的图像信息能够直观地辨认手术工具的移动距离。
本发明目的在于提供一种手术机器人***及其自适应控制方法,能够最大限度地提高腹腔镜及/或手术工具的操作便利性。
本发明目的在于提供一种手术机器人***及其自适应控制方法,改善为了操作腹腔镜而利用的摄像机按钮,并增加了单独的位置控制/速度控制按钮,从而能够实施新的动作。
根据本发明的一实施方式,提供一种主界面,包括于安装有手术用内窥镜及手术工具中的一个以上控制对象的手术机器人***中,并用于控制所述控制对象的位置,该主界面包括:操作部,接收用于对控制对象进行移动操作的用户命令;存储部,用于存储由手术用内窥镜提供的图像信息中的一个以上的基准图像和对应于基准图像的移动比例因子(Motion Scale Factor);比例因子运算部,判断当前通过手术用内窥镜提供的当前图像信息与基准图像相比是被放大还是缩小,并且以与其放大或缩小程度成线性或非线性比例的方式调节移动比例因子,并进行再设定;操作信号生成部,将利用操作部的用户命令转换为对应于再设定的移动比例因子,从而生成对于控制对象的操作信号。
比例因子运算部为了判断当前图像信息与基准图像相比是被放大还是缩小,可以根据预先设定的图像解析技术检测当前图像信息在基准图像中的一致区域,并设定区域。
比例因子运算部可以利用被设定区域的横向尺寸、竖向尺寸、对角线长度及宽度中一个以上的换算信息和在基准图像中对应于换算信息的信息之间的比例关系来调节移动比例因子。
根据用户命令的控制对象的移动距离,可通过移动比例因子进行调节。
手术用内窥镜可以是腹腔镜、胸腔镜、关节镜、鼻镜、膀胱镜、直肠镜、十二指肠镜、纵隔镜、心脏镜中的一个以上。
根据本发明的一实施方式,提供一种主界面,包括于安装有手术用内窥镜及手术工具中一个以上的控制对象的手术机器人***中,并用于控制所述控制对象的位置,该主界面包括:操作部,接收用于对控制对象进行移动操作的用户命令;存储部,用于存储一个以上的基于手术用内窥镜的拍摄条件的移动比例因子;比例因子运算部,接收有关手术用内窥镜拍摄条件的信息,在存储部检索相应的移动比例因子,并设定为适用的移动比例因子;操作信号生成部,将利用操作部的用户命令转换为对应于所设定的移动比例因子,从而生成对于控制对象的操作信号。
拍摄条件可以是手术用内窥镜的图像拍摄变焦倍率、拍摄位置、距手术部位表面的距离及被拍摄的手术部位的实际尺寸中的一个以上。
图像拍摄变焦倍率为高倍率时的移动比例因子,可以比图像拍摄变焦倍率为低倍率时的移动比例因子,具有相对小的值。
手术用内窥镜***人体内部相对深时的移动比例因子,可以比手术用内窥镜相对***浅时的移动比例因子,具有小的值。
从用于检测距手术部位表面的距离的传感器接收检测值,距手术部位表面的距离越近,移动比例因子可以设定成越小的值。
被拍摄的手术部位的实际尺寸越小,移动比例因子可以设定成越小的值。
根据用户命令的手术工具的移动距离,可通过移动比例因子进行调节。
当用户命令属于用于移动操作手术用内窥镜的命令时,手术用内窥镜的移动距离可通过移动比例因子进行调节。
根据拍摄条件的变化,可实时运算移动比例因子并存储在存储部。
当为了控制对象的移动操作,操作部以相对大的操作量***作时,与操作部以相对少的操作量操作时相比,比例因子运算部可以设定更大的移动比例因子。
当手术用内窥镜为获得三维图像的装置时,有关拍摄条件的信息可以是通过解析由手术用内窥镜拍摄的图像信息而计算出的深度(depth)信息。
手术用内窥镜可以是腹腔镜、胸腔镜、关节镜、鼻镜、膀胱镜、直肠镜、十二指肠镜、纵隔镜、心脏镜中的一个以上。
根据本发明的另一实施方式,提供一种控制对象的自适应控制方法,是在主界面上执行的手术用内窥镜及手术工具中一个以上的控制对象的自适应控制方法,包括如下步骤:存储由手术用内窥镜提供的图像信息中一个以上的基准图像和与基准图像相应的移动比例因子(Motion Scale Factor)的步骤;判断由当前手术用内窥镜提供的当前图像信息与基准图像相比是被放大还是缩小的步骤;以与判断的放大或缩小程度成线性或非线性比例的方式调节移动比例因子并进行再设定的步骤;将为了对控制对象进行移动操作而输入的用户命令转换成对应于再设定的移动比例因子,并生成对于控制对象的操作信号的步骤。
在判断步骤中,为了判断当前图像信息与基准图像相比是被放大还是缩小,可以根据预先设定的图像解析技术检测当前图像信息在基准图像中的一致区域,从而设定区域。
在调节并进行再设定的步骤中,可以利用被设定区域的横向尺寸、竖向尺寸、对角线长度及宽度中一个以上的换算信息和在基准图像中对应于换算信息的信息之间的比例关系来调节移动比例因子。
根据用户命令的控制对象的移动距离,可以通过移动比例因子进行调节。
手术用内窥镜可以是腹腔镜、胸腔镜、关节镜、鼻镜、膀胱镜、直肠镜、十二指肠镜、纵隔镜、心脏镜中的一个以上。
根据本发明的另一实施方式,提供一种手术工具的自适应控制方法,是在主界面上执行的手术用内窥镜及手术工具中一个以上的控制对象的自适应控制方法,包括如下步骤:存储基于手术用内窥镜拍摄条件的一个以上移动比例因子的步骤;接收有关手术用内窥镜拍摄条件的信息,在存储部检索相应的移动比例因子,并设定为适用的移动比例因子的步骤;将为了对控制对象进行移动操作而输入的用户命令转换为对应于再设定的移动比例因子,并生成对于控制对象的操作信号的步骤。
拍摄条件可以是手术用内窥镜的图像拍摄变焦倍率、拍摄位置、距手术部位表面的距离及被拍摄手术部位的实际尺寸中的一个以上。
图像拍摄变焦倍率为高倍率时的移动比例因子,可以比图像拍摄变焦倍率为低倍率时的移动比例因子,具有相对小的值。
手术用内窥镜***人体内部相对深时的移动比例因子,可以比手术用内窥镜相对***浅时的移动比例因子,具有小的值。
还包括接收由传感器检测的距手术部位表面的距离的信息的步骤,距手术部位表面的距离越近,移动比例因子可以设定为越小的值。
被拍摄的手术部位的实际尺寸越小,移动比例因子可以设定为越小的值。
根据用户命令的控制对象的移动距离,可以通过移动比例因子进行调节。
根据拍摄条件的变化,可实时运算移动比例因子并存储在存储部。
在设定步骤中,当用于移动操作控制对象的用户命令为有关操作部相对大的操作量时,与操作部以相对少的操作量***作时相比,可以设定更大的移动比例因子。
手术用内窥镜为获得三维图像的装置时,有关拍摄条件的信息可以是通过解析由手术用内窥镜拍摄的图像信息而计算出的深度(depth)信息。
手术用内窥镜可以是腹腔镜、胸腔镜、关节镜、鼻镜、膀胱镜、直肠镜、十二指肠镜、纵隔镜、心脏镜中的一个以上。
根据本发明的另一实施方式,提供一种主界面,包括于安装有手术用内窥镜及手术工具中一个以上的控制对象的手术机器人***中,并用于控制控制对象的位置,该主界面包括:操作部,接收用于移动操作控制对象的用户命令;操作信号生成部,根据工具/视觉选择(Instrument/Vision Selection)输入单元的选择信息,与操作部的操作量相对应地生成用于控制相应控制对象的位置的操作信号。
操作信号生成部判断是否选择了位置控制模式,而且只有在被选择的情况下才能生成用于控制所述位置的操作信号。
根据工具/视觉选择输入单元的选择信息,控制对象可以指定为手术用内窥镜及手术工具中的一个以上。
工具/视觉选择输入单元为了指定控制对象,可以由一个以上的按钮构成。
当根据工具/视觉选择输入单元的选择信息,控制对象被指定为手术用内窥镜及手术工具时,操作信号生成部可以生成操作信号,该操作信号使手术用内窥镜及手术工具在保持并排状态下向与操作部的操作方向相应的方向移动。
当根据工具/视觉选择输入单元的选择信息,控制对象被指定为手术用内窥镜及手术工具时,处于夹住手术部位中任一部位的状态的手术工具、末端未被手术用内窥镜拍摄的手术工具、夹钳(jaw)处于闭合状态的手术工具、被施术者指定为保持固定状态的手术工具、以及在多个操作部各自具有的固定状态保持按钮中按下任一固定状态按钮时与该操作部相对应地设定的手术工具中的一个以上,可以与操作部的操作无关地不进行移动而保持其位置。
被控制成对应于操作部操作量的控制对象的位置移动量,可以通过移动比例因子(Motion Scale Factor)而决定。
还包括:存储部,存储由手术用内窥镜提供的图像信息中一个以上的基准图像和与基准图像相应的移动比例因子;比例因子运算部,判断当前由手术用内窥镜提供的当前图像信息与基准图像相比是被放大还是缩小,并且以与其放大或缩小程度成线性或非线性比例的方式调节移动比例因子,从而进行再设定;操作信号生成部可以将操作部的操作量转换而使其对应于再设定的移动比例因子,并生成操作信号。
比例因子运算部为了判断当前图像信息与基准图像相比是被放大还是缩小,可以根据预先设定的图像解析技术检测当前图像信息在基准图像中的一致区域,并设定区域。
比例因子运算部可以利用被设定区域的横向尺寸、竖向尺寸、对角线长度及宽度中一个以上的换算信息和在基准图像中对应于换算信息的信息之间的比例关系来调节移动比例因子。
还包括:存储部,存储基于手术用内窥镜拍摄条件的一个以上移动比例因子;比例因子运算部,接收有关手术用内窥镜拍摄条件的信息,并在存储部检索相应的移动比例因子,并设定为适用的移动比例因子;操作信号生成部可以将操作部的操作量转换成使其对应于设定的移动比例因子,并生成操作信号。
拍摄条件可以是手术用内窥镜的图像拍摄变焦倍率、拍摄位置、距手术部位表面的距离及被拍摄手术部位的实际尺寸中的一个以上。
图像拍摄变焦倍率为高倍率时的移动比例因子,可以比图像拍摄变焦倍率为低倍率时的移动比例因子,具有相对小的值。
手术用内窥镜***人体内部相对深时的移动比例因子,可以比手术用内窥镜相对***浅时的移动比例因子,具有小的值。
从用于检测距手术部位表面的距离的传感器接收检测值,距手术部位表面的距离越近,移动比例因子可以设定成越小的值。
被拍摄的手术部位的实际尺寸越小,移动比例因子可以设定成越小的值。
根据拍摄条件的变化,实时运算移动比例因子可并存储在存储部。
当用于移动操作手术工具的操作部以相对大的操作量***作时,与操作部以相对少的操作量操作时相比,比例因子运算部能够设定更大的移动比例因子。
手术用内窥镜为获得三维图像的装置时,有关拍摄条件的信息可以是通过解析被手术用内窥镜拍摄的图像信息而计算出的深度(depth)信息。
手术用内窥镜可以是腹腔镜、胸腔镜、关节镜、鼻镜、膀胱镜、直肠镜、十二指肠镜、纵隔镜、心脏镜中的一个以上。
根据本发明的另一实施方式,提供一种有关控制对象的位置控制方法,是对在主界面上执行的手术用内窥镜及手术工具中一个以上控制对象的位置控制方法,包括如下步骤:利用操作部接收用于移动操作控制对象的用户命令的步骤;根据工具/视觉选择(Instrument/Vision Selection)输入单元的选择信息,与操作部的操作量相应地生成用于控制相应控制对象位置的操作信号的步骤。
根据工具/视觉选择输入单元的选择信息,控制对象可以指定为手术用内窥镜及手术工具中的一个以上。
当根据工具/视觉选择输入单元的选择信息,控制对象被指定为手术用内窥镜及手术工具时,在生成步骤中生成操作信号,该操作信号可以使手术用内窥镜及手术工具在保持并排状态下向与操作部的操作方向相应的方向移动。
当根据工具/视觉选择输入单元的选择信息,控制对象被指定为手术用内窥镜及手术工具时,处于夹住手术部位中任一部位的状态的手术工具、其末端未被手术用内窥镜拍摄的手术工具、夹钳(jaw)处于闭合状态的手术工具、由施术者指定成保持固定状态的手术工具、以及在多个操作部中各自具有的固定状态保持按钮中按下任一固定状态按钮时与该操作部相应设定的手术工具中的一个以上,可与操作部的操作无关地不进行移动而保持其位置。
被控制成对应于操作部操作量的控制对象的位置移动量,可以通过移动比例因子(Motion Scale Factor)而决定。
提供一种控制对象的位置控制方法,其特征在于,生成步骤包括:判断由当前手术用内窥镜提供的当前图像信息与通过手术用内窥镜提供的图像信息中的任一基准图像相比是被放大还是缩小的步骤;被放大或缩小时,以与其放大或缩小程度成线性或非线性比例的方式调节移动比例因子,并进行再设定的步骤;生成与转换的操作量相应的操作信号的步骤,该转换的操作量符合再设定的移动比例因子。
在判断是被放大还是缩小的步骤中,可以根据预先设定的图像解析技术检测当前图像信息在基准图像中的一致区域,从而设定区域。
在生成步骤中,可以包括:接收有关手术用内窥镜拍摄条件的信息的步骤;从预先存储在存储部中的基于拍摄条件的一个以上的移动比例因子中抽取对应于接收的信息的移动比例因子的步骤;将操作部的操作量转换而使其对应于抽取的移动比例因子,从而生成操作信号的步骤。
拍摄条件可以是手术用内窥镜的图像拍摄变焦倍率、拍摄位置、距手术部位表面的距离及由手术用内窥镜拍摄的手术部位实际尺寸中的一个以上。
图像拍摄变焦倍率为高倍率时的移动比例因子,可以比图像拍摄变焦倍率为低倍率时的移动比例因子,具有相对小的值。
手术用内窥镜***人体内部相对深时的移动比例因子,可以比手术用内窥镜相对***浅时的移动比例因子,具有小的值。
还包括从用于检测距手术部位表面的距离的传感器接收检测值的步骤,距手术部位表面的距离越近,移动比例因子可以设定成越小的值。
被拍摄的手术部位的实际尺寸越小,移动比例因子可以设定成越小的值。
根据拍摄条件的变化,可实时运算移动比例因子并存储在存储部。
当为了控制控制对象的位置,操作部以相对大的操作量操作时,与操作部以相对少的操作量操作时相比,可以设定更大的移动比例因子。
手术用内窥镜为获得三维图像的装置时,有关拍摄条件的信息可以是通过解析被手术用内窥镜拍摄的图像信息而计算出的深度(depth)信息。
根据本发明的另一实施方式,提供一种主界面,包括于安装有手术用内窥镜及手术工具中一个以上的控制对象的手术机器人***中,并用于控制控制对象的移动速度,该主界面包括:操作部,接收用于移动操作控制对象的用户命令;操作信号生成部,根据工具/视觉选择(Instrument/Vision Selection)输入单元的选择信息,与操作部的操作量相对应地生成用于控制相应控制对象的移动速度的操作信号。
操作信号生成部判断是否选择了速度控制模式,而且只有在被选择的情况下才能生成用于控制所述移动速度的操作信号。
操作部的操作量越大,控制对象的移动速度可以被设定成越大的值。
根据工具/视觉选择输入单元的选择信息,控制对象可以指定为手术用内窥镜及手术工具中的一个以上。
工具/视觉选择输入单元为了指定控制对象,可以由一个以上的按钮构成。
当根据工具/视觉选择输入单元的选择信息,控制对象被指定为手术用内窥镜及手术工具时,操作信号生成部可以生成操作信号,该操作信号可以使手术用内窥镜及手术工具在保持并排状态下向与操作部的操作方向相应的方向移动。
当根据工具/视觉选择输入单元的选择信息,控制对象被指定为手术用内窥镜及手术工具时,处于夹住手术部位中任一部位的手术工具、末端未被手术用内窥镜拍摄的手术工具、夹钳(jaw)处于闭合状态的手术工具、由施术者指定成保持固定状态的手术工具、以及在多个操作部中各自具有的固定状态保持按钮中按下任一固定状态按钮时与该操作部相应设定的手术工具中的一个以上,可以与操作部的操作无关地不进行移动而保持其位置。
被控制成对应于操作部操作量的控制对象的移动速度,可以通过移动比例因子(Motion Scale Factor)而决定。
还包括:存储部,存储由手术用内窥镜提供的图像信息中一个以上的基准图像和与基准图像相对应的移动比例因子;比例因子运算部,判断当前由手术用内窥镜提供的当前图像信息与基准图像相比是被放大还是缩小,并且以与其放大或缩小程度成线性或非线性比例的方式调节移动比例因子,从而进行再设定;操作信号生成部可以将操作部的操作量转换而使其对应于再设定的移动比例因子,并生成操作信号。
比例因子运算部为了判断当前图像信息与基准图像相比是被放大还是缩小,可以根据预先设定的图像解析技术检测当前图像信息在基准图像中的一致区域,从而设定区域。
比例因子运算部可以利用被设定的区域的横向尺寸、竖向尺寸、对角线长度及宽度中一个以上的换算信息和在基准图像中对应于换算信息的信息之间的比例关系来调节移动比例因子。
还包括:存储部,存储根据手术用内窥镜拍摄条件的一个以上的移动比例因子;比例因子运算部,接收有关手术用内窥镜拍摄条件的信息,并在存储部检索相应的移动比例因子,从而设定为适用的移动比例因子;操作信号生成部可以将操作部的操作量转换而对应于设定的移动比例因子,并生成操作信号。
拍摄条件可以是手术用内窥镜的图像拍摄变焦倍率、拍摄位置、距手术部位表面的距离及被拍摄手术部位的实际尺寸中的一个以上。
图像拍摄变焦倍率为高倍率时的移动比例因子,可以比图像拍摄变焦倍率为低倍率时的移动比例因子,具有相对小的值。
手术用内窥镜***人体内部相对深时的移动比例因子,可以比手术用内窥镜相对***浅时的移动比例因子,具有小的值。
从用于检测与手术部位表面之间距离的传感器接收检测值,距手术部位表面的距离越近,移动比例因子设定成越小的值。
被拍摄的手术部位的实际尺寸越小,移动比例因子可以设定成越小的值。
根据拍摄条件的变化,可实时运算移动比例因子并存储在存储部。
当用于移动操作手术工具的操作部以相对大的操作量***作时,与操作部以相对少的操作量操作时相比,比例因子运算部能够设定更大的移动比例因子。
手术用内窥镜为获得三维图像的装置时,有关拍摄条件的信息可以是通过解析被手术用内窥镜拍摄的图像信息而计算出的深度(depth)信息。
手术用内窥镜可以是腹腔镜、胸腔镜、关节镜、鼻镜、膀胱镜、直肠镜、十二指肠镜、纵隔镜、心脏镜中的一个以上。
根据本发明的另一实施方式,提供一种控制对象的移动速度控制方法,在安装有手术用内窥镜及手术工具中一个以上控制对象的手术机器人***中执行,包括如下步骤:利用操作部接收用于移动操作控制对象的用户命令的步骤;根据工具/视觉选择(Instrument/Vision Selection)输入单元的选择信息,与操作部的操作量相对应地生成用于控制相应控制对象的移动速度的操作信号。
在生成步骤中,操作部的操作量越大,控制对象的移动速度可以被指定为越大的值。
根据工具/视觉选择输入单元的选择信息,控制对象可以指定为手术用内窥镜及手术工具中的一个以上。
当根据工具/视觉选择输入单元的选择信息,控制对象被指定为手术用内窥镜及手术工具时,在生成步骤中可以生成操作信号,该操作信号使手术用内窥镜及手术工具在保持并排状态下向与操作部的操作方向相应的方向移动。
当根据工具/视觉选择输入单元的选择信息,控制对象被指定为手术用内窥镜及手术工具时,处于夹住手术部位中任一部位的状态的手术工具、末端未被手术用内窥镜拍摄的手术工具、夹钳(jaw)处于闭合状态的手术工具、由施术者指定成保持固定状态的手术工具、以及在多个操作部中各自具有的固定状态保持按钮中按下任一固定状态按钮时与该操作部相应设定的手术工具中的一个以上,可以与操作部的操作无关地不进行移动而保持其位置。
被控制成对应于操作部操作量的控制对象的移动速度,可以通过移动比例因子(Motion Scale Factor)而决定。
提供一种控制对象的位置控制方法,其特征在于,生成步骤包括:判断由当前手术用内窥镜提供的当前图像信息与通过手术用内窥镜提供的图像信息中任一基准图像相比是被放大还是缩小的步骤;被放大或缩小时,以与其放大或缩小程度成线性或非线性比例的方式调节移动比例因子,从而进行再设定的步骤;生成与转换的操作量相应的操作信号的步骤,该转换的操作量符合再设定的移动比例因子。
在判断是被放大还是缩小的步骤中,可以根据预先设定的图像解析技术检测当前图像信息在基准图像中的一致区域,从而设定区域。
生成步骤可以包括:接收有关手术用内窥镜拍摄条件的信息的步骤;从预先存储在存储部中的基于拍摄条件的一个以上的移动比例因子中抽取对应于所接收的信息的移动比例因子的步骤;将操作部的操作量转换而使其对应于抽取的移动比例因子,从而生成操作信号的步骤。
拍摄条件可以是手术用内窥镜的图像拍摄变焦倍率、拍摄位置、距手术部位表面的距离及由手术用内窥镜拍摄的手术部位实际尺寸中的一个以上。
图像拍摄变焦倍率为高倍率时的移动比例因子,可以比图像拍摄变焦倍率为低倍率时的移动比例因子,具有相对小的值。
手术用内窥镜***人体内部相对深时的移动比例因子,可以比手术用内窥镜相对***浅时的移动比例因子,具有更小的值。
还包括从用于检测距手术部位表面的距离的传感器接收检测值的步骤,距手术部位表面的距离越近,移动比例因子可以设定成越小的值。
被拍摄的手术部位的实际尺寸越小,移动比例因子可以设定成越小的值。
根据拍摄条件的变化,可实时运算移动比例因子并存储在存储部。
当为了控制对象的位置控制,操作部以相对大的操作量操作时,与操作部以相对少的操作量操作时相比,可以设定更大的移动比例因子。
手术用内窥镜为获得三维图像的装置时,有关拍摄条件的信息可以是通过解析被手术用内窥镜拍摄的图像信息而计算出的深度(depth)信息。
除上述之外,其它实施方式、特征、优点可以通过下面的附图、权利要求范围及发明的详细说明会更加明确。
根据本发明的实施例,可以根据通过腹腔镜拍摄的图像信息为有关哪个区域及哪个范围内的被摄体,自适应地改变手术工具的移动比例因子。
而且,能够缩短手术时间及减轻手术进行过程中施术者的疲劳感,并根据显示的图像信息能够直观地认识手术工具的移动距离。
而且,能够最大化腹腔镜及/或手术工具的操作便利性。
而且,改善用于操作腹腔镜的摄像机按钮,并增加了单独的位置控制/速度控制按钮,从而能够实施新的动作。
附图说明
图1是表示现有技术涉及的手术机器人***的整体结构的俯视图。
图2是表示现有技术涉及的手术机器人***的主界面的概念图。
图3a及图3b是表示现有技术涉及的手术机器人***所具有的器械的移动控制过程的概念图。
图4a是概略表示本发明的一实施例涉及的手术机器人***结构的模块图。
图4b及图4c是表示本发明的一实施例涉及的适用固定(fixed)移动比例因子(Motion Scale Factor)的概念的示意图。
图4d及图4e是表示本发明的一实施例涉及的适用自适应(adaptive)移动比例因子概念的示意图。
图5a及图5b是表示本发明的一实施例涉及的移动比例因子的自适应调节概念的示意图。
图6是表示本发明的一实施例涉及的移动比例因子的自适应调节方法的顺序图。
图7是表示本发明的一实施例涉及的手术机器人***的位置控制模式决定方法的顺序图。
图8是表示本发明的另一实施例涉及的手术机器人***的速度控制模式决定方法的顺序图。
具体实施方式
本发明可以进行各种改进并且可具有多种实施例,将对具体的实施例进行详细说明并在附图中示出。然而,具体实施例并不意在限制本发明,应该理解,本发明包括属于本发明的思想及技术范围的所有改进、等同物和替换物。当判断出与本发明相关的公知技术的详细描述使本发明的主旨模糊时,将省略该详细描述。
可以使用诸如“第一”、“第二”等术语来描述各种构成要素,但是所述构成要素不受所述术语限制。所述术语仅用于将一个构成要素与另一构成要素区分开来。
在本申请中使用的术语仅用于描述具体的实施例,并不意在限制本发明。单数表示包括复数表示,只要可以清晰地区别理解。在本申请中诸如“包括”或“具有”的术语意在表示存在说明书中记载的特征、序号、步骤、操作、构成要素、组件或其组合,并且因此,应该理解,不排除存在或增加一个或多个不同的特征、编号、步骤、操作、构成要素、组件或其组合的可能性。
下面,参照附图详细说明本发明的实施例,在参照附图的说明中,相同或相应的构成要素赋予了相同的附图标记,并省略对其的重复说明。
图4a是概略表示本发明的一实施例涉及的手术机器人***结构的模块图,图4b及图4c是表示本发明的一实施例涉及的适用了固定(fixed)移动比例因子(Motion ScaleFactor)概念的示意图,图4d及图4e是表示本发明的一实施例涉及的适用了自适应(adaptive)移动比例因子概念的示意图,图5a及图5b是表示本发明的一实施例涉及的移动比例因子的自适应调节概念的示意图。
参照图4a,手术机器人***可以包括主机器人1和从机器人2,主机器人1和从机器人2可以单独实施或一体实施。
主机器人1包括图像输入部410、画面显示部420、臂操作部430、操作信号生成部450、比例因子运算部440及控制部460。虽然未图示,主机器人1还可以具有存储部。从机器人2包括机器臂3及腹腔镜5。
图像输入部410通过有线或无线通讯网接收通过在从机器人2的腹腔镜5上具有的摄像机输入的图像。
画面显示部420以视觉信息形式输出与通过图像输入部410接收的图像相应的画面图像。画面显示部420可以以显示器6等形式实现,用于将接收的图像通过画面显示部420以画面图像输出的图像处理程序可以由控制部460或图像处理部(未图示)执行。
臂操作部430是施术者能够操作从机器人2的机器臂3及/或腹腔镜5的位置及功能的单元。臂操作部430如图2所示的可以以手柄形状形成,但并不限定于该形状,可以以实现相同目的的多种形状变形实施。而且,例如也可以部分以手柄形状形成,而其它部分以离合按钮等不同形状形成。例如,施术者攥住臂操作部430的状态下向任一方向操作臂操作部430时,能够使手术工具向该方向移动。臂操作部430例如也可以在三维空间进行倾斜操作,根据臂操作部430的实施方式其操作方式可以有多种。即,在本说明书中,为了移动操作手术工具及/或腹腔镜5等,以一端部被固定而通过将另一端部向任一方向弯曲而输入操作命令的结构的臂操作部430为例进行了说明,但用于接收施术者操作命令的臂操作部430可以具有多种结构,并根据采用的结构输入操作命令的方式也可以有多种。
如上所述,在主机器人1的主界面4上可以具有一个以上的功能按钮,各功能按钮可以以具有物理实体的机构形式按钮/开关实现,或者通过画面显示部420显示并通过施术者触摸而动作的软件形式的按钮/开关实现。
主界面4上具有的功能按钮可以包括例如主机器人重定位按钮、工具/视觉选择按钮及位置控制/速度控制模式按钮中的一个以上。
主机器人重定位(Master Reposition:MR)按钮是,为了使施术者基于利用主机器人1操作的操作命令不传递给从机器人2而使手术机器人***在主机器人重定位模式下动作的按钮。施术者可以利用主机器人重定位按钮将臂操作部430恢复到原来位置,从而能够重新设定下面说明的在位置控制/速度控制模式下用于控制位置/速度的开始点。
工具/视觉选择(Instrument/Vision Selection:IVS)按钮是,施术者执行利用主机器人1的臂操作部430等的操作时,根据操作结果,操作腹腔镜5及手术工具中一个以上的按钮。其为改进并扩展了使用在现有技术中的手术机器人***上的摄像机按钮的用途及功能,施术者能够利用工具/视觉选择按钮指定根据臂操作部430的操作而移动手术工具的工具控制模式、根据臂操作部430的操作而移动腹腔镜5的视觉控制模式、及根据臂操作部430的操作而移动手术工具和腹腔镜5的综合控制模式中的一个以上动作模式。
如上所述,为了能够利用IVS按钮选择多个动作模式中的任一动作模式,例如IVS按钮可以由视觉控制按钮和综合控制按钮的两个按钮构成。此时,没有按任一按钮的状态下,可以在工具控制模式下驱动,仅按视觉控制按钮的状态下,可以在视觉控制模式下驱动,仅按综合控制按钮的状态下,可以在综合控制模式下驱动。此时,两个按钮都被按住的状态下,可以在如上所述的保持模式下驱动。
当然,IVS按钮也可以由一个按钮实现。例如IVS按钮可以通过旋转操作来实现在多种动作模式中选择任一动作模式。作为其它例,IVS按钮也可以形成为能够按下的结构,在该按钮未被按住的状态下,可以在工具控制模式下驱动,保持按住的状态下,可以在视觉控制模式下驱动,双击时也可以开始综合控制模式,再按一次时结束综合控制模式。
根据施术者的IVS按钮的操作状态,即,动作模式的有关信息可以通过画面显示部420显示。
这样,用于指定手术机器人***动作模式的按钮的实现形式及按钮操作形式可以由多种,该概念对于下面说明的位置控制/速度控制模式按钮也可以同样适用。
位置控制/速度控制模式(Position/Velocity Mode:PVM)按钮是施术者用于指定利用主机器人1的臂操作部430等的操作是在位置控制模式下动作还是在速度控制模式下动作的按钮。在此,位置控制模式是根据操作臂操作部430等来移动手术工具或腹腔镜位置(例如,手术工具等的操作)的动作模式,速度控制模式是根据操作臂操作部430等来变更手术工具或腹腔镜移动的速度(还可以包括方向)的动作模式。
通过选择PVM按钮,手术机器人***在位置控制模式或速度控制模式下动作,以在各动作模式下操作的对象为中心进行整理,如下表1。
表1
控制对象
位置控制模式
(PVM按钮:选择位置控制)
速度控制模式
-手术工具的位置控制模式
-IVS按钮:选择工具控制
-手术工具的移动速度控制模式
-IVS按钮:选择工具控制
控制腹腔镜
-腹腔镜的位置控制模式
-IVS按钮:选择视觉控制
-腹腔镜的移动速度控制模式
-IVS按钮:选择视觉控制
综合控制
-手术工具及腹腔镜的位置控制模式
-IVS按钮:选择综合控制
-手术工具及腹腔镜的移动速度控制模式
--IVS按钮:选择综合控制
下面继续参照图4a至图5b先说明手术机器人***及移动比例因子的自适应调节概念,之后再参照图7及图8分别详细说明位置控制模式和速度控制模式。
施术者为了移动机器臂3及/或腹腔镜5的位置或者进行手术操作而操作操作部430时,操作信号生成部450生成与手术机器人***的动作模式及臂操作部430的操作状态相应的操作信号并传送给从机器人2。此时,操作信号生成部450可通过控制部460的控制而生成与施术者选择的动作模式(例如,位置控制模式、速度控制模式等)相应的操作信号。如上所述,生成的操作信号可以通过有线或无线通讯网传送、接收。
而且,如下面所述,当比例因子运算部440更新设定移动比例因子时,操作信号生成部450可以生成与此相应的操作信号并传送给从机器人2。
比例因子运算部440识别由腹腔镜5拍摄的图像为多大尺寸及/或有关哪个区域的被摄体,并调节移动比例因子(MSF:Motion Scale Factor),以使腹腔镜5或/及手术工具***作成与施术者的臂操作部430操作量相对应。例如,手术工具的移动与臂操作部430之间的操作关系可以定义为“手术工具的移动量=k×MSF×臂操作部的操作量”。在此,k是比例常数。这种操作关系也可以适用在臂操作部430的操作量和腹腔镜5的移动量上。
通过比例因子运算部440调节的MSF,施术者可以从固定值中选择任一值指定,也可以根据手术状况自适应地调节适用。
如图4b及4c所示,在预先设定并固定的模式(即,普通模式、精细模式、超精细模式)中选择一个时,可以根据被选择模式,适用预先指定的MSF。例如,在普通模式下,作为主机器人和从机器人比率的MSF被指定为1:1时,利用臂操作部430移动操作1时,从机器人(即,手术工具或/及腹腔镜)也被移动操作同样大小的1。参照图示例时,在精细模式下,主机器人移动3时,从机器人被移动操作1,在超精细模式下,主机器人移动5时,从机器人被移动操作1。
MSF采用固定值的方式中,如上所述,也可以按各模式预先设定MSF,但是施术者也可以从显示在画面显示部420的多个选择值(例如,1:1、3:1、5:1、7:1、10:1等)中选择任一值指定为MSF。
这样,MSF不必根据主机器人或从机器人的状况(例如,臂操作部的操作量、腹腔镜的***程度、距患部的距离等)而变化,而是固定适用(参照图4c)。
而且,如上所述,MSF可以根据手术状况(例如,主机器人及/或从机器人的当前状况等)自适应地调节而适用(adaptive MSF:自适应MSF)。
作为MSF自适应地调节而适用的情况,可以根据通过画面显示部420输出的图像特性(例如,在画面上看到的图像实际尺寸)自适应地调节。例如,使腹腔镜5远离患部(即,手术部位)位置或将倍率缩小(zoom out)时,在画面显示部420上显示相对不够精细但较宽区域的图像,此时MSF可自适应地调节为具有相对大的值。相反,使腹腔镜5接近患部(即,手术部位)位置或将倍率放大(zoom in)时,在画面显示部420上显示相对精细但较窄区域的图像,此时MSF可自适应地调节为具有相对小的值。
至于其它情况,如图4d所示,作为根据从机器人所处状况决定MSF的方法也可适用SASC(Slave-dependent Adaptive Scaling Control:基于从机器人的自适应比例控制)方式,此时MSF可以用从机器人状态的函数表示。例如,可以适用如下各种方法,通过图像解析掌握画面是被放大还是缩小并根据它变更MSF,或通过腹腔镜5***程度来变更MSF,或在腹腔镜5末端设置距离检测传感器来测定与患部之间的距离(depth)并根据它变更MSF,或在三维腹腔镜5的情况下通过图像处理来测定距患部的距离(depth)并根据它变更MSF,或根据通过画面显示部420显示的区域的实际大小来变更MSF(参照图5a及5b)等。下面参照图5a及图5b详细说明每种情况。
如上所述,MSF不必根据主机器人或从机器人的状况(例如,臂操作部的操作量、腹腔镜的***程度、与患部之间的距离等)而固定,可以自适应地调节。
同样地,如图4e所示,作为根据主机器人所处状况决定MSF的方法也可适用MASC(Master-dependent Adaptive Scaling Control:基于主机器人的自适应比例控制)方式,此时MSF可以用主机器人状态的函数表示。
例如,臂操作部430从移动开始位置稍微移动时,MSF具有相对小的值(即,从机器人精密地缓慢移动),但远离移动开始位置的移动时,能够将MSF调节为相对大(即,使从机器人快速大距离移动)。此时,按上述主机器人重定位按钮时,则能够再设定移动开始位置,而且从再设定的移动开始位置操作时,如上所述,MSF可以根据移动量被调节。
此时,MSF可以以线性变化,也可以以非线性变化。而且,MSF可以使用实时计算的值,也可以使用预先存储的值。
下面,参照图5a及5b简单说明通过比例因子运算部440自适应地调节移动比例因子的方式。图5a及图5b的附图标记510表示通过当前腹腔镜5拍摄的当前拍摄区域,附图标记520表示能够通过腹腔镜5拍摄的基准拍摄区域。通过腹腔镜5拍摄的拍摄区域的实际尺寸可以根据腹腔镜5与患部的远近程度、放大/缩小程度等因素具有多种,也可以通过倍率调节等方式,使当前拍摄区域与基准拍摄区域一致。
如果,腹腔镜5的拍摄倍率设定为高倍率或腹腔镜5靠近手术部位时,如图5a的510及图5b所示,由腹腔镜5拍摄的当前拍摄区域510,比该腹腔镜5在预先设定位置及倍率下拍摄手术部位的基准拍摄区域520小。
但是如果,腹腔镜5的拍摄倍率设定为低倍率或腹腔镜5远离手术部位时,由腹腔镜5拍摄的当前拍摄区域510有可能一致或大于基准拍摄区域520。
如图5a及图5b所示,当前拍摄区域510比基准拍摄区域520小时,施术者一般在较窄区域进行精密手术,所以需要精密地调节根据臂操作部430操作的手术工具的移动比例。相反,当前拍摄区域510一致或大于基准拍摄区域520时,施术者一般整体观察手术部位或需要将手术作业区域移动到其它部位,所以需要较大调节根据臂操作部430操作的手术工具的移动比例,施术者才能直观地操作手术工具。
这样,根据腹腔镜5拍摄的被摄体尺寸及通过画面显示部420显示的与其相应的图像信息内容,自适应地调节移动比例因子(MSF)的方法有多种。
举例说明自适应地调节移动比例因子的方法中的几种方法如下。当然,自适应地调节移动比例因子的方法并不限定于下面举例说明的事项,而且应该指出,本发明的保护范围也并不限定于以下说明的例子。
作为一例,比例因子运算部440,如图5a及图5b所示,可以利用存储在存储部的基准图像,以与基准拍摄区域520的尺寸和当前拍摄区域510的尺寸之差成比例的方式调节移动比例因子。
即,如图5a所示,假设通过基准拍摄区域520拍摄而显示在显示装置上的图像信息是有关实际尺寸长度为12cm的患部的信息时,可以将此时的窗口大小定义为1,而移动比例因子也定义为1。在这种情况下,施术者向任一方向操作臂操作部430时,手术工具从基准拍摄区域520的中心点向臂操作部430***作的方向移动。
但是,如图5a及图5b所示,由于腹腔镜5靠近手术部位或通过放大(zoom-in)操作而拍摄相当于基准拍摄区域520的部分区域的当前拍摄区域510的实际尺寸长度为4cm的患部时,可以将此时的窗口大小解析成0.33(即,4cm/12cm),而降低移动比例因子(例如,0.33)进行重新调节。此时,在画面显示部420的显示区域上整体显示(即,在整体手术部位中部分被放大而清晰地显示)当前拍摄区域510,但移动比例因子降低,从而能够进行更加精密地控制。
此时,当前拍摄区域510与基准拍摄区域520相比具有多大尺寸,可以利用图像解析技术(例如,在两张图像中检测相同区域而进行区域设定的图像解析技术)进行识别,例如将在基准拍摄区域520拍摄的图像信息作为基准图像存储在存储部,之后根据倍率调节及/或沿腹腔镜5长度方向(轴的轴向)移动时的当前拍摄区域510的图像信息在基准图像中属于哪个区域及多大尺寸。
在上述例中,假设以竖向长度作为调节移动比例因子的基准的情况进行了说明,但移动比例因子的调节基准可以有例如对角线长度、横向长度、宽度等多种。
作为另一例,比例因子运算部440可以利用腹腔镜5的图像拍摄倍率、位置移动、距手术部位表面的距离等来调节移动比例因子。
即,为了拍摄较窄范围而将腹腔镜5的图像拍摄倍率设定为高倍率时,比例因子运算部440降低移动比例因子,从而能够对手术工具进行精密操作,而为了拍摄较宽范围而将腹腔镜的图像拍摄倍率设定为低倍率时,可以通过提高移动比例因子的方式来调节移动比例因子。可在腹腔镜5上设定的各倍率值所对应的移动比例因子,可以经试验统计预先算出而预先存储在存储部。
而且,比例因子运算部440也可以根据腹腔镜5从基准位置(例如,***到手术患者腹部的初始位置)向长度方向(例如,***或引出人体)相对移动的程度来调节比例因子。有关腹腔镜5位置的信息可以直接由主机器人1算出或从从机器人2处接收,基准位置例如可以指定为腹腔镜5***体内之后臂操作部430最初***作的位置或由施术者任一指定。
如果腹腔镜5进一步***人体内部(即,接近手术部位侧)时,可以降低移动比例因子,以便能够进行手术工具的精密操作,如果腹腔镜5向人体外部引出方向移动(即,远离手术部位)了时,可以提高移动比例因子。与腹腔镜5从基准位置向长度方向移动距离对应的移动比例因子,可以经试验统计预先算出而预先存储在存储部。
而且,比例因子运算部440也可以利用腹腔镜5上具有的距离检测传感器提供的至手术部位表面的距离值来调节移动比例因子。如果腹腔镜5距手术部位表面的距离较近时,可以降低移动比例因子,以便能够进行手术工具的精密操作,如果腹腔镜5距手术部位表面的距离较远时,可以提高移动比例因子。与腹腔镜5与手术部位表面之间距离对应的移动比例因子,可以经试验统计预先算出而预先存储在存储部。
而且,通过画面显示部420显示的图像为由三维图像获取装置的腹腔镜5提供的图像时,可以通过图像处理计算深度(depth),并且也可以利用该值运算移动比例因子。
再次参照图4a,控制部460控制各构成要素的动作以便能够执行上述功能。控制部460还能够执行将通过图像输入部410输入的图像转换成通过画面显示部420显示的画面图像的功能。而且,控制部460还能够执行如下处理,当施术者进行主机器人重定位按钮输入时,在不移动腹腔镜5及手术工具的位置的情况下,进行手柄10的复位操作。
下面,参照相关附图说明移动比例因子(MSF)的自适应调节方法的一实施例,之后参照相关附图分别说明位置控制模式及速度控制模式。
说明过程中即使不单独进行说明,上述说明的有关移动比例因子的概念均适用。
对此进行简单说明,在固定式MSF位置控制模式下,当主机器人(例如,臂操作部等)移动1cm时从机器人也移动1cm(例如,普通模式),或当主机器人移动3cm时从机器人可以移动1cm(例如,精细模式)。
与此相比,在自适应MSF位置控制模式下,根据当前所看到画面的放大、缩小程度、内窥镜的***程度、内窥镜末端与患部之间的距离、或者主机器人从开始点移动的程度等,MSF线性或非线性地变化,由此决定从机器人的移动。
同样地,在固定式MSF速度控制模式下,可以与主机器人或从机器人状况无关地进行控制,即,当主机器人从开始点移动1cm时从机器人移动1cm/sec,当主机器人从开始点移动5cm时从机器人移动5cm/sec。
与此相比,在自适应MSF速度控制模式下,即使主机器人从开始点同样地移动1cm,当画面被放大的状况、内窥镜***较深时或与患部之间的距离较近时等情况,从机器人可以移动0.5cm/sec,当画面被缩小的状况、内窥镜***较浅时或与患部之间的距离较远时等情况,从机器人可以移动1.5cm/sec。即,根据主机器人或从机器人状况,MSF线性或非线性地变化,最终,根据主机器人移动而速度变化的变化量,可以根据MSF自适应地变化。
图6是表示本发明的一实施例涉及的移动比例因子的自适应调节方法的顺序图。
参照图6,在步骤610中,主机器人1将通过腹腔镜5拍摄并提供的图像信息作为用于自适应地调节移动比例因子的基准图像而存储。
在步骤620中,主机器人1判断是否输入了基准图像再设定请求。
如果输入了基准图像再设定请求时,进行步骤630,从而再设定有关手术部位的基准图像。
根据步骤620的判断未输入基准图像再设定请求或根据步骤630再设定了基准图像时,进行步骤640。
在步骤640中,主机器人1判断是否通过施术者操作臂操作部430而输入了对于腹腔镜5拍摄的拍摄区域的缩小请求。拍摄区域的缩小请求用于例如腹腔镜5接近患部或通过放大处理等指示拍摄更窄区域,从而通过画面显示部420显示更加清晰但较窄区域的图像(即,放大图像)。
如果未输入拍摄区域缩小请求了时,进行步骤660。
但是,如果输入了拍摄区域缩小请求时,主机器人1进行步骤650,从而再设定移动比例因子。
即,通过腹腔镜5拍摄的图像是放大整个手术部位中的特定区域的图像,所以为了进行手术工具的精密操作,移动比例因子变小。此时,主机器人1可以利用图像解析技术(例如,在两张图像中检测相同区域而进行区域设定的图像解析技术)识别,根据拍摄区域缩小请求的腹腔镜5当前拍摄区域510的图像信息属于步骤610或步骤630中设定的基准图像内的哪个区域及多大尺寸,从而判断将移动比例因子调整为哪种级别。
在步骤660中,主机器人1判断是否通过施术者操作臂操作部430而输入了对于腹腔镜5拍摄图像的拍摄区域的放大请求。拍摄区域的放大请求用于例如腹腔镜5远离患部或通过缩小处理等指示拍摄更宽区域,从而通过画面显示部420显示并不清晰但较宽区域的图像(即,缩小图像)。
如果未输入拍摄区域放大请求了时,再次进行步骤620。
但是,如果根据步骤660的判断输入了拍摄区域放大请求时,进行步骤670,主机器人1以设定的基准图像为基准,再设定对于拍摄区域被放大的当前拍摄区域510的移动比例因子。
目前为止参照图6说明了利用基准图像的移动比例因子的自适应调节方法,但为了自适应地调节移动比例因子,当然可以单独或增加利用如上所述腹腔镜5的图像拍摄倍率、位置移动、距手术部位表面的距离等。
图7是表示本发明的一实施例涉及的手术机器人***的位置控制模式决定方法的顺序图。
如上所述,施术者可以利用主机器人1具有的位置控制/速度控制模式(PVM),指定手术机器人***在位置控制模式下驱动或在速度控制模式下驱动。而且,施术者可以利用工具/视觉选择(IVS)按钮,决定通过操作臂操作部430而操作的对象为手术工具或腹腔镜,还是手术工具和腹腔镜。
而且,如上所述,PVM按钮和IVS按钮可以由其功能分别被指定的多个按钮构成,或者也可以是能够以多种操作方式选择驱动模式的一个按钮。当然,除此之外PVM按钮和IVS按钮的实现方式有多种。
本实施例涉及的手术机器人***的位置控制模式可以包括,用于控制手术工具位置的手术工具位置控制模式、用于控制腹腔镜5位置的腹腔镜位置控制模式及用于综合控制手术工具和腹腔镜位置的综合位置控制模式。下面,参照图7说明手术机器人***的位置控制模式决定方法。
参照图7,在步骤705中,臂操作部430由施术者进行操作。
在步骤710中,控制部460判断位置控制/速度控制模式(PVM)按钮是否被选择成使手术机器人***在位置控制模式下动作。位置控制/速度控制模式(PVM)按钮是用于指定利用主机器人1的臂操作部430等的操作在位置控制模式下动作还是在速度控制模式下动作的按钮。
步骤710的判断结果,如果PVM按钮被选择成手术机器人***在速度控制模式下工作时,执行图8的步骤810。
但是,如果PVM按钮被选择成用于控制手术工具及腹腔镜5中一个以上的位置的位置控制模式时,进行步骤720。
在步骤720中,控制部460判断工具/视觉选择(IVS)按钮是否被选择成使手术机器人***在工具控制模式下动作。工具/视觉选择(IVS)按钮是施术者执行利用主机器人1的臂操作部430等的操作时,根据操作结果操作腹腔镜5及手术工具中一个以上的按钮。
步骤720的判断结果,如果IVS按钮被选择成以工具控制模式动作时,进行步骤730,而操作信号生成部450生成操作信号并传送给从机器人2,该操作信号用于使在步骤705中基于臂操作部430操作的操作命令适用于手术工具的位置控制。此时,生成的操作信号可以通过适用上面说明的固定或自适应移动比例因子而生成。
在步骤730中,根据传送到从机器人2的操作信号,在从机器人2上具有的手术工具与臂操作部430的操作相应地被移动控制。
但是,如果步骤720的判断结果为,IVS按钮未被选择成以工具控制模式动作时,进行步骤740。
在步骤740中,控制部460判断工具/视觉选择(IVS)按钮是否被选择成使手术机器人***在视觉控制模式下动作。
步骤740的判断结果,如果IVS按钮被选择成以视觉控制模式动作时,进行步骤750,而操作信号生成部450生成操作信号并传送给从机器人2,该操作信号用于使在步骤705中基于臂操作部430操作的操作命令适用于腹腔镜5的位置控制。此时,生成的操作信号可以通过适用上面说明的固定或自适应移动比例因子而生成。
在步骤750中,根据传送给从机器人2的操作信号,在从机器人2上具有的腹腔镜5与臂操作部430的操作相应地被移动控制。
但是,如果步骤740的判断结果为,IVS按钮未被选择成以视觉控制模式动作时,进行步骤760。
在步骤760中,控制部460判断工具/视觉选择(IVS)按钮是否被选择成使手术机器人***在综合控制模式下动作。
如果步骤760的判断结果为,IVS按钮被选择成以综合控制模式动作时,进行步骤770,而操作信号生成部450生成操作信号并传送给从机器人,该操作信号根据臂操作部430的操作而执行手术工具及腹腔镜5两者的位置控制。
在此,操作信号使手术工具和腹腔镜5一同向臂操作部430的操作方向移动,但保持相互间并排状态(例如,保持相互间的相对位置等)的情况下移动。即,根据腹腔镜5的移动,即使拍摄区域的物理位置变更,但在施术者通过画面显示部420确认的显示画面上,以拍摄区域中心点为基准,手术工具的相对配置位置保持不变。施术者例如可以通过选择主机器人重定位按钮,或将动作模式转换成其它模式等的操作,结束腹腔镜5和手术工具的联动移动。
举例简单说明综合位置控制模式的动作状态如下。
施术者为了变更拍摄区域510等目的,将PVM按钮选择成位置控制模式,将IVS按钮选择成综合控制模式时,操作信号生成部450生成操作信号并传送给从机器人2,从而使腹腔镜5和手术工具一同向臂操作部430的操作方向移动。
此时,腹腔镜5和手术工具彼此保持并排状态移动,但任一手术工具夹住东西(例如,夹住手术部位中任一部位的状态,参照图5a及5b)的状态下,为了手术患者的安全,该手术工具可以不与腹腔镜5联动移动而在该位置待机。
而且,参照通过显示部420显示的图像信息时,其末端未在显示画面内显示的手术工具(即,手术工具末端位于通过腹腔镜5拍摄的拍摄范围之外)也可以不与腹腔镜5联动移动,而在该位置待机。
而且,手术工具的夹钳(jaw)处于闭合状态时,为了患者的安全,该手术工具也可以被控制成不移动。
除此之外,控制任一手术工具不移动的方法还可以有多种。例如可以使施术者直接指定的手术工具不移动,或也可以在左右臂操作部430上设置特定按钮(例如,主机器人重定位按钮可分别位于臂操作部430上),通过按该按钮,以使被按按钮的臂操作部430管辖的手术工具不移动。
但是,如果步骤760的判断结果,IVS按钮未被选择成以综合控制模式动作时,进行步骤780,而操作信号生成部450生成操作信号并传送给从机器人,该操作信号用于使手术工具及/或腹腔镜5在被指定的动作模式下操作。例如在保持模式或主机器人重定位模式下,生成操作信号并传送给从机器人,从而能够与主机的操作无关地使手术工具及/或腹腔镜5保持最终控制位置。
图8是表示本发明的另一实施例涉及的手术机器人***的速度控制模式决定方法的顺序图。
如上所述,施术者可以利用主机器人1所具有的位置控制/速度控制模式(PVM)按钮,将手术机器人***的动作模式指定成位置控制模式或速度控制模式。而且,施术者可以利用工具/视觉选择(IVS)按钮,将通过操作臂操作部430而***作的对象决定为手术工具及腹腔镜中的一个以上。
本实施例涉及的手术机器人***的速度控制模式可以包括:用于控制手术工具的移动速度的手术工具速度控制模式、用于控制腹腔镜5移动速度的腹腔镜速度控制模式及用于控制手术工具和腹腔镜两者的移动速度的综合速度控制模式。下面,参照图8说明手术机器人***的速度控制模式决定方法。
之前如参照图7所述,在步骤710中,控制部460判断位置控制/速度控制模式(PVM)按钮是否被选择成使手术机器人***在位置控制模式下动作,如果PVM按钮被选择成使手术机器人***在速度控制模式下动作时,进行图8的步骤810。
参照图8,在步骤810中,控制部460判断工具/视觉选择(IVS)按钮是否被选择成使手术机器人***在工具控制模式下动作。
如果步骤810的判断结果为,IVS按钮被选择成以工具控制模式动作时,进行步骤820,而操作信号生成部450生成操作信号并传送给从机器人2,该操作信号用于使在步骤705(参照图7)中基于臂操作部430操作的操作命令适用于手术工具的速度控制。根据步骤820中传送到从机器人2的操作信号,在从机器人2上具有的手术工具与臂操作部430的操作相应地被移动控制。
此时,生成的操作信号可以通过适用上面说明的固定或自适应移动比例因子而生成。
而且,操作信号可以生成为,根据臂操作部430从开始点的移动程度来改变手术工具的移动速度。即,臂操作部430向特定方向稍微移动(即,稍微移动之后保持臂操作部430的操作状态)时,手术工具被控制成可以向该方向持续缓慢移动,而臂操作部430向该方向移动较大(即,大移动之后保持臂操作部430的操作状态)时,手术工具被控制成可以持续快速移动。例如,臂操作部430如图2所示的形成时,可以与臂操作部430向任一方向操作5度时的手术工具的移动速度相比,臂操作部430向该方向操作30度时的手术工具的移动速度更快。
可预先设定手术工具的移动速度随着臂操作部430的操作量变大而加快,而且有关与臂操作部430的操作量相应的手术工具的移动速度信息可以预先存储在主界面4上所具有的存储部。
当然,臂操作部430恢复到开始点时,所述手术工具的移动被停止。作为参考,在位置控制模式下,臂操作部430复位到开始点时,手术工具也复位到原位置,但在速度控制模式下,臂操作部430复位到开始点时,速度变为零(即,停止移动)。
但是,如果步骤810的判断结果,IVS按钮未被选择成以工具控制模式动作时,进行步骤830。
在步骤830中,控制部460判断工具/视觉选择(IVS)按钮是否被选择成使手术机器人***在视觉控制模式下动作。
如果步骤830的判断结果为,IVS按钮被选择成以视觉控制模式动作时,进行步骤840,操作信号生成部450生成操作信号并传送给从机器人2,该操作信号使基于臂操作部430操作的操作命令适用于腹腔镜5移动速度的控制。此时,生成的操作信号可以通过适用上面说明的固定或自适应移动比例因子而生成。在步骤840中,根据传送到从机器人2的操作信号,在从机器人2上具有的腹腔镜5与臂操作部430的操作相应地被移动控制。
腹腔镜5的移动速度控制方式与上面说明的手术工具的移动速度控制方式相同,故省略对其的说明。
但是,如果步骤830的判断结果为,IVS按钮未被选择成以视觉控制模式动作时,进行步骤850。
在步骤850中,控制部460判断工具/视觉选择(IVS)按钮是否被选择成使手术机器人***在综合控制模式下动作。
如果步骤850的判断结果,IVS按钮被选择成以综合控制模式动作时,进行步骤860,而操作信号生成部450生成操作信号并传送给从机器人2,该操作信号根据臂操作部430的操作执行对手术工具及腹腔镜5两者的移动速度的控制。
在此,操作信号使手术工具和腹腔镜5一同向臂操作部430操作的方向移动,在彼此保持并排状态(例如,保持相互间的相对位置等)的情况下与臂操作部430的操作量相应的速度移动。即,根据腹腔镜5的移动,即使拍摄区域的物理位置发生变更,但施术者通过画面显示部420确认的显示画面上的以拍摄区域中心点为基准的手术工具的相对配置位置保持不变。
而且,手术工具在速度控制模式下移动时,也可以存在,在上面的综合位置控制模式的工作状态中举例说明的手术工具的移动被限制的情况。例如,在任一手术工具处于夹住东西(例如,夹住手术部位中任一部位的状态,参照图5a及5b)的状态,或手术工具的末端未显示在显示画面内的状态,或手术工具的夹钳(jaw)处于闭合的情况,或者施术者为了保持固定状态而指定的手术工具,或臂操作部430上具有的固定状态保持按钮被按下时与其相应的手术工具等,这些手术工具的移动可能被限制。
但是,如果步骤850的判断结果为,IVS按钮未被选择成以综合控制模式动作时,进行步骤870,而操作信号生成部450生成操作信号并传送给从机器人,该操作信号使手术工具及/或腹腔镜5在指定的动作模式下操作。例如,在保持模式或主机器人重定位模式下,能够生成操作信号并传送给从机器人,以便与主机的操作无关地使手术工具及/或腹腔镜5保持最终控制位置。
所述移动比例因子的自适应调节方法及根据臂操作特性的自适应控制方法,也可以通过内装在数字处理装置中的软件程序等按时间序列顺序的自动顺序执行。构成上述程序的代码及代码段,可由该领域的计算机编成人员容易推理出。所述程序存储在计算机可读介质(computer readable media)上,并被计算机读取执行,从而实现所述方法。所述计算机可读介质包括磁记录媒体、光记录媒体及载波媒体。
在上面参照本发明的优选实施例进行了说明,对于所属技术领域的普通技术人员来说,应该理解为,在不超出权利要求书中记载的本发明的思想及领域的范围内,本发明可以进行多种变形及变更。

Claims (14)

1.一种控制对象的位置控制方法,是对在主界面上执行的手术用内窥镜及手术工具这两者中的一者以上控制对象的位置控制方法,包括如下步骤:
利用操作部接收用于移动操作所述控制对象的用户命令的步骤;以及
根据工具/视觉选择输入单元的选择信息,与所述操作部的操作量相应地生成用于控制相应控制对象位置的操作信号的步骤,
根据所述工具/视觉选择输入单元的选择信息,控制对象被指定为所述手术用内窥镜及所述手术工具中的一个以上,
被控制成对应于所述操作部操作量的所述控制对象的位置移动量,通过移动比例因子决定,
所述生成步骤包括:
判断由所述手术用内窥镜当前提供的当前图像信息与通过所述手术用内窥镜提供的图像信息中的任一基准图像相比是被放大还是缩小的步骤;
被放大或缩小时,以与其放大或缩小程度成线性或非线性比例的方式调节所述移动比例因子,并进行再设定的步骤;以及
生成与转换的操作量相应的操作信号的步骤,该转换的操作量符合所述再设定的移动比例因子。
2.根据权利要求1所述的控制对象的位置控制方法,其特征在于,
当根据所述工具/视觉选择输入单元的选择信息,控制对象被指定为所述手术用内窥镜及所述手术工具时,
在所述生成步骤中生成操作信号,该操作信号使所述手术用内窥镜及所述手术工具在保持并排状态下向与所述操作部的操作方向相应的方向移动。
3.根据权利要求1所述的控制对象的位置控制方法,其特征在于,
当根据所述工具/视觉选择输入单元的选择信息,控制对象被指定为所述手术用内窥镜及所述手术工具时,
处于夹住手术部位中任一部位的状态的手术工具、其末端未被所述手术用内窥镜拍摄的手术工具、夹钳处于闭合状态的手术工具、由施术者指定成保持固定状态的手术工具、以及在多个操作部中各自具有的固定状态保持按钮中按下任一固定状态按钮时的与该操作部相应设定的手术工具中的一个以上,与所述操作部的操作无关地不进行移动而保持其位置。
4.根据权利要求1所述的控制对象的位置控制方法,其特征在于,
在判断是被放大还是缩小的步骤中,根据预先设定的图像解析技术检测所述当前图像信息在所述基准图像中的一致区域,并设定区域。
5.根据权利要求1所述的控制对象的位置控制方法,其特征在于,所述生成步骤包括:
接收有关所述手术用内窥镜拍摄条件的信息的步骤;
从预先存储在存储部中的基于拍摄条件的一个以上的移动比例因子中抽取对应于所述接收的信息的移动比例因子的步骤;以及
将所述操作部的操作量转换而使其对应于所述抽取的移动比例因子,从而生成所述操作信号的步骤。
6.根据权利要求5所述的控制对象的位置控制方法,其特征在于,
所述拍摄条件是所述手术用内窥镜的图像拍摄变焦倍率、拍摄位置、距手术部位表面的距离及由所述手术用内窥镜拍摄的手术部位实际尺寸中的一个以上。
7.根据权利要求6所述的控制对象的位置控制方法,其特征在于,
所述图像拍摄变焦倍率为高倍率时的移动比例因子,比所述图像拍摄变焦倍率为低倍率时的移动比例因子,具有相对小的值。
8.根据权利要求6所述的控制对象的位置控制方法,其特征在于,
所述手术用内窥镜***人体内部相对深时的移动比例因子,比所述手术用内窥镜相对***浅时的移动比例因子,具有更小的值。
9.根据权利要求6所述的控制对象的位置控制方法,其特征在于,还包括:
从用于检测距所述手术部位表面的距离的传感器接收检测值的步骤;
距所述手术部位表面的距离越近,移动比例因子设定成越小的值。
10.根据权利要求6所述的控制对象的位置控制方法,其特征在于,
被拍摄的所述手术部位的实际尺寸越小,移动比例因子设定成越小的值。
11.根据权利要求5所述的控制对象的位置控制方法,其特征在于,
根据所述拍摄条件的变化,实时运算移动比例因子并存储在所述存储部。
12.根据权利要求1所述的控制对象的位置控制方法,其特征在于,
当为了控制所述控制对象的位置,所述操作部以相对大的操作量操作时,与所述操作部以相对少的操作量操作时相比,设定更大的移动比例因子。
13.根据权利要求5所述的控制对象的位置控制方法,其特征在于,
当所述手术用内窥镜为获得三维图像的装置时,有关所述拍摄条件的信息是通过解析被所述手术用内窥镜拍摄的图像信息而计算出的深度信息。
14.一种主界面,包括于安装有手术用内窥镜及手术工具这两者中的一者以上控制对象的手术机器人***中,并用于控制所述控制对象的移动速度,该主界面包括:
操作部,接收用于移动操作所述控制对象的用户命令;以及
操作信号生成部,根据工具/视觉选择输入单元的选择信息,与所述操作部的操作量相对应地生成用于控制相应控制对象的移动速度的操作信号,
根据所述工具/视觉选择输入单元的选择信息,控制对象被指定为所述手术用内窥镜及所述手术工具两者中的一个以上,
被控制成对应于所述操作部操作量的所述控制对象的位置移动量,通过移动比例因子决定,
所述操作信号生成部判断由所述手术用内窥镜当前提供的当前图像信息与通过所述手术用内窥镜提供的图像信息中的任一基准图像相比是被放大还是缩小,被放大或缩小时,以与其放大或缩小程度成线性或非线性比例的方式调节所述移动比例因子,并进行再设定,生成与转换的操作量相应的操作信号,该转换的操作量符合所述再设定的移动比例因子。
CN201610566337.8A 2010-12-17 2011-12-16 手术机器人***及其自适应控制方法 Active CN106214262B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020100130289A KR20120068597A (ko) 2010-12-17 2010-12-17 수술 로봇 시스템 및 적응 제어 방법
KR10-2010-0130289 2010-12-17
CN201110423299.8A CN102614019B (zh) 2010-12-17 2011-12-16 手术机器人***及其自适应控制方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201110423299.8A Division CN102614019B (zh) 2010-12-17 2011-12-16 手术机器人***及其自适应控制方法

Publications (2)

Publication Number Publication Date
CN106214262A CN106214262A (zh) 2016-12-14
CN106214262B true CN106214262B (zh) 2019-02-01

Family

ID=46554483

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201610566337.8A Active CN106214262B (zh) 2010-12-17 2011-12-16 手术机器人***及其自适应控制方法
CN201410602504.0A Active CN104473693B (zh) 2010-12-17 2011-12-16 手术机器人***及其自适应控制方法
CN201110423299.8A Active CN102614019B (zh) 2010-12-17 2011-12-16 手术机器人***及其自适应控制方法

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN201410602504.0A Active CN104473693B (zh) 2010-12-17 2011-12-16 手术机器人***及其自适应控制方法
CN201110423299.8A Active CN102614019B (zh) 2010-12-17 2011-12-16 手术机器人***及其自适应控制方法

Country Status (2)

Country Link
KR (1) KR20120068597A (zh)
CN (3) CN106214262B (zh)

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013052886A2 (en) 2011-10-05 2013-04-11 Analog Devices, Inc. Two-wire communication system for high-speed data and power distribution
CN102871724B (zh) * 2012-09-27 2015-02-04 田茂洲 一种手术腔镜旋转摄像中自动保持正位成像的装置
US9946680B2 (en) 2012-10-05 2018-04-17 Analog Devices, Inc. Peripheral device diagnostics and control over a two-wire communication bus
US9772665B2 (en) 2012-10-05 2017-09-26 Analog Devices, Inc. Power switching in a two-wire conductor system
EP2754383B1 (en) * 2013-01-10 2021-03-10 TransEnterix Europe Sàrl Device and method for assisting laparoscopic surgery - rule based approach
KR102206198B1 (ko) * 2013-07-10 2021-01-22 삼성전자주식회사 수술 로봇 시스템 및 그 제어 방법
KR101599129B1 (ko) * 2014-05-20 2016-03-02 박현준 내시경 상 보이는 병변의 크기 측정 방법 및 컴퓨터 판독 가능한 기록매체
JP6615871B2 (ja) * 2014-08-22 2019-12-04 インテュイティブ サージカル オペレーションズ, インコーポレイテッド 適応入力マッピングのためのシステム及び方法
JP2017529907A (ja) * 2014-09-29 2017-10-12 コヴィディエン リミテッド パートナーシップ ロボット外科手術システムの制御のための動的入力スケーリング
CN114052918A (zh) * 2015-02-19 2022-02-18 柯惠Lp公司 机器人手术***的输入装置的重定位方法
JP6339534B2 (ja) * 2015-07-17 2018-06-06 ファナック株式会社 最大で二つのワークを把持するハンドを備えたロボットの制御方法およびロボット制御装置
CN107920863B (zh) * 2015-08-13 2021-12-31 西门子医疗有限公司 用于控制包括成像模态的***的设备和方法
CN105167845A (zh) * 2015-09-21 2015-12-23 鑫麦源创时代医疗科技(苏州)有限公司 具有机械手臂的微波消融***
CN106806012A (zh) * 2015-12-02 2017-06-09 刘美明 一种心血管手术器械
CN108366835B (zh) * 2015-12-10 2021-07-27 柯惠Lp公司 具有独立的侧倾、俯仰和偏摆缩放的机器人外科手术***
US10111719B2 (en) * 2016-08-16 2018-10-30 Ethicon Llc Control of the rate of actuation of tool mechanism based on inherent parameters
JP7132922B2 (ja) * 2016-12-07 2022-09-07 コーニンクレッカ フィリップス エヌ ヴェ ロボット制御のための画像誘導モーションスケーリング
US11583358B2 (en) 2017-09-06 2023-02-21 Covidien Lp Boundary scaling of surgical robots
CN108364680A (zh) * 2018-05-15 2018-08-03 北京润美玉之光医疗美容门诊部 一种用于脂肪手术的控制装置
US11564678B2 (en) 2018-07-16 2023-01-31 Cilag Gmbh International Force sensor through structured light deflection
CN109498162B (zh) * 2018-12-20 2023-11-03 深圳市精锋医疗科技股份有限公司 提升沉浸感的主操作台及手术机器人
US11213361B2 (en) 2019-03-15 2022-01-04 Cilag Gmbh International Robotic surgical systems with mechanisms for scaling surgical tool motion according to tissue proximity
US11992282B2 (en) 2019-03-15 2024-05-28 Cilag Gmbh International Motion capture controls for robotic surgery
US11471229B2 (en) 2019-03-15 2022-10-18 Cilag Gmbh International Robotic surgical systems with selectively lockable end effectors
US11284957B2 (en) 2019-03-15 2022-03-29 Cilag Gmbh International Robotic surgical controls with force feedback
US11583350B2 (en) 2019-03-15 2023-02-21 Cilag Gmbh International Jaw coordination of robotic surgical controls
US11490981B2 (en) 2019-03-15 2022-11-08 Cilag Gmbh International Robotic surgical controls having feedback capabilities
US11666401B2 (en) 2019-03-15 2023-06-06 Cilag Gmbh International Input controls for robotic surgery
US11690690B2 (en) 2019-03-15 2023-07-04 Cilag Gmbh International Segmented control inputs for surgical robotic systems
JP2020163522A (ja) 2019-03-29 2020-10-08 ソニー株式会社 制御装置及びマスタスレーブシステム
CN110429015B (zh) * 2019-08-30 2024-05-17 重庆西山科技股份有限公司 手术器械的开关组件及手术器械
JP7432340B2 (ja) * 2019-11-07 2024-02-16 川崎重工業株式会社 手術システム及び制御方法
US11284963B2 (en) 2019-12-30 2022-03-29 Cilag Gmbh International Method of using imaging devices in surgery
US11759283B2 (en) 2019-12-30 2023-09-19 Cilag Gmbh International Surgical systems for generating three dimensional constructs of anatomical organs and coupling identified anatomical structures thereto
US11776144B2 (en) 2019-12-30 2023-10-03 Cilag Gmbh International System and method for determining, adjusting, and managing resection margin about a subject tissue
US12002571B2 (en) 2019-12-30 2024-06-04 Cilag Gmbh International Dynamic surgical visualization systems
US11832996B2 (en) 2019-12-30 2023-12-05 Cilag Gmbh International Analyzing surgical trends by a surgical system
US11744667B2 (en) 2019-12-30 2023-09-05 Cilag Gmbh International Adaptive visualization by a surgical system
US11648060B2 (en) 2019-12-30 2023-05-16 Cilag Gmbh International Surgical system for overlaying surgical instrument data onto a virtual three dimensional construct of an organ
US11219501B2 (en) 2019-12-30 2022-01-11 Cilag Gmbh International Visualization systems using structured light
US11896442B2 (en) 2019-12-30 2024-02-13 Cilag Gmbh International Surgical systems for proposing and corroborating organ portion removals
CN112043397B (zh) * 2020-10-08 2021-09-24 深圳市精锋医疗科技有限公司 手术机器人及其运动错误检测方法、检测装置
US11813746B2 (en) 2020-12-30 2023-11-14 Cilag Gmbh International Dual driving pinion crosscheck
CN112957082B (zh) * 2021-03-16 2022-11-04 济南显微智能科技有限公司 一种基于体内探针的手术***
KR102549114B1 (ko) 2021-08-02 2023-06-29 주식회사 로엔서지컬 원격 수술용 엔드 이펙터의 이동 거리 조절 장치 및 그 방법
CN113907693B (zh) * 2021-12-10 2022-03-01 极限人工智能有限公司 操作映射比例调整方法、装置、电子设备以及存储介质
CN118141307A (zh) * 2024-05-08 2024-06-07 江西赛新医疗科技有限公司 基于ar技术的内窥镜操控方法和内窥镜***

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1216454A (zh) * 1996-02-20 1999-05-12 电脑动作公司 施行最小侵入性心脏手术的方法和装置
CN101227870A (zh) * 2005-05-19 2008-07-23 直观外科手术公司 用于外科手术及其它应用的软件中心和高度可配置的机器人***
CN101536895A (zh) * 2009-04-09 2009-09-23 上海交通大学 胶囊内镜自动调焦***
KR100956762B1 (ko) * 2009-08-28 2010-05-12 주식회사 래보 이력정보를 이용한 수술 로봇 시스템 및 그 제어 방법
CN101773401A (zh) * 2010-01-06 2010-07-14 哈尔滨工程大学 外科手术机器人多自由度手指

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6793653B2 (en) * 2001-12-08 2004-09-21 Computer Motion, Inc. Multifunctional handle for a medical robotic system
US8079950B2 (en) * 2005-09-29 2011-12-20 Intuitive Surgical Operations, Inc. Autofocus and/or autoscaling in telesurgery

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1216454A (zh) * 1996-02-20 1999-05-12 电脑动作公司 施行最小侵入性心脏手术的方法和装置
CN101227870A (zh) * 2005-05-19 2008-07-23 直观外科手术公司 用于外科手术及其它应用的软件中心和高度可配置的机器人***
CN101536895A (zh) * 2009-04-09 2009-09-23 上海交通大学 胶囊内镜自动调焦***
KR100956762B1 (ko) * 2009-08-28 2010-05-12 주식회사 래보 이력정보를 이용한 수술 로봇 시스템 및 그 제어 방법
CN101773401A (zh) * 2010-01-06 2010-07-14 哈尔滨工程大学 外科手术机器人多自由度手指

Also Published As

Publication number Publication date
CN102614019A (zh) 2012-08-01
CN104473693B (zh) 2017-07-04
KR20120068597A (ko) 2012-06-27
CN106214262A (zh) 2016-12-14
CN104473693A (zh) 2015-04-01
CN102614019B (zh) 2014-12-10

Similar Documents

Publication Publication Date Title
CN106214262B (zh) 手术机器人***及其自适应控制方法
US20230190392A1 (en) Apparatus and method for using a remote control system in surgical procedures
CN106456260B (zh) 用于控制手术机器人***中的照相机位置的***和方法
US9632573B2 (en) Medical manipulator and method of controlling the same
CN105407827B (zh) 医疗用***及其控制方法
KR102171873B1 (ko) 햅틱 글로브 및 수술로봇 시스템
US8583274B2 (en) Method for graphically providing continuous change of state directions to a user of medical robotic system
US9713500B2 (en) Surgical robot control apparatus
JP7160033B2 (ja) 入力制御装置、入力制御方法、および手術システム
CN108778085B (zh) 图像处理设备、内窥镜手术***以及图像处理方法
JP7080861B2 (ja) 手術システム
KR100925102B1 (ko) 원격 수술 로봇
Kawai et al. Hands-free interface for surgical procedures based on foot movement patterns
CN114760903A (zh) 用于在外科手术期间控制图像捕获设备的方法、装置、以及***
US20130103199A1 (en) Surgical robot control apparatus
US20240108432A1 (en) Manual knife bailout monitoring using inductive coupling
WO2018216501A1 (ja) 制御装置、制御方法、および手術システム
KR100997194B1 (ko) 간접적으로 수술감을 제공하는 원격 수술 로봇 시스템 및 그 제어 방법
KR101706994B1 (ko) 수술 로봇 시스템 및 그 복강경 조작 방법
CN116439636B (zh) 一种器械、内窥镜***、医疗***及其定位控制方法
KR20110049703A (ko) 수술 로봇 시스템 및 그 복강경 조작 방법
KR20160008130A (ko) 수술 로봇 시스템 및 적응 제어 방법
KR101114234B1 (ko) 수술 로봇 시스템 및 그 복강경 조작 방법
CN112107276A (zh) 医疗操作设备和用于控制操作设备的方法
KR101709911B1 (ko) 수술 로봇 시스템 및 그 복강경 조작 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant