JP7440262B2 - 患者健康記録ベース器具制御を備える遠隔操作手術システム - Google Patents

患者健康記録ベース器具制御を備える遠隔操作手術システム Download PDF

Info

Publication number
JP7440262B2
JP7440262B2 JP2019524330A JP2019524330A JP7440262B2 JP 7440262 B2 JP7440262 B2 JP 7440262B2 JP 2019524330 A JP2019524330 A JP 2019524330A JP 2019524330 A JP2019524330 A JP 2019524330A JP 7440262 B2 JP7440262 B2 JP 7440262B2
Authority
JP
Japan
Prior art keywords
surgical
surgical instrument
patient
instrument
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019524330A
Other languages
English (en)
Other versions
JP2019536537A (ja
Inventor
シー. ノーリン,ウィリアム
アズィズィアン,マーディ
ピー. ディマイオ,サイモン
ディー. ホフマン,ブライアン
ダブリュ. モーア,ポール
Original Assignee
インテュイティブ サージカル オペレーションズ, インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by インテュイティブ サージカル オペレーションズ, インコーポレイテッド filed Critical インテュイティブ サージカル オペレーションズ, インコーポレイテッド
Publication of JP2019536537A publication Critical patent/JP2019536537A/ja
Priority to JP2022130331A priority Critical patent/JP7503105B2/ja
Application granted granted Critical
Publication of JP7440262B2 publication Critical patent/JP7440262B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B34/35Surgical robots for telesurgery
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/30Surgical robots
    • A61B34/37Master-slave robots
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/03Automatic limiting or abutting means, e.g. for safety
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/40ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/67ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00Surgical instruments, devices or methods, e.g. tourniquets
    • A61B2017/00477Coupling
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B2018/00571Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body for achieving a particular surgical effect
    • A61B2018/00595Cauterization
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B2018/00988Means for storing information, e.g. calibration constants, or for preventing excessive use, e.g. usage, service life counter
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107Visualisation of planned trajectories or target regions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • A61B2034/252User interfaces for surgical systems indicating steps of a surgical procedure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • A61B2034/254User interfaces for surgical systems being adapted depending on the stage of the surgical procedure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • A61B2034/256User interfaces for surgical systems having a database of accessory information, e.g. including context sensitive help or scientific articles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/03Automatic limiting or abutting means, e.g. for safety
    • A61B2090/031Automatic limiting or abutting means, e.g. for safety torque limiting
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Robotics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Urology & Nephrology (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Pathology (AREA)
  • Manipulator (AREA)
  • Gynecology & Obstetrics (AREA)
  • Radiology & Medical Imaging (AREA)

Description

(関連出願の参照)
この出願は、2016年11月11日に出願された米国特許出願第62/421,064号の優先権の利益を主張し、その全文を本明細書に参照として援用する。
発明的な態様は、手術中に使用される医療デバイスと関連する。より具体的には、それらの態様は、ビデオライブラリデータベースと通信する医療デバイスに実装される手術計画ツールと関連する。
外科医は、典型的には、外科的処置を行う前に広範な研究を行う。従来、外科医は、写真又は図面のような一般的な解剖学的モデルの研究に制約されていた。より近年では、様々な術前診断処置(例えば、X線、CT、MRIなど)が、患者特異的な解剖学的情報を利用可能にしている。
場合によっては、追加的な関連する解剖学的及び外科的処置情報を外科医に利用可能にすることが望ましい。1つの態様では、特定の患者に対して手術を計画する外科医に、その特定の患者に対して行われた以前の外科的処置の手術部位ビデオ記録を提供することが望ましい。別の態様では、特定の患者に対して計画された外科的処置に類似する他の患者に対する外科的処置の1以上(1つ又はそれよりも多く)の手術ビデオ記録を外科医に提供することが望ましい。1つの態様では、外科医が特定の外科的処置を行う前に、そのような情報を外科医に提供することが望ましい。そして、別の態様では、この情報を外科医に術中に提供することが望ましいことがある。
1つの態様では、様々な患者が受けた様々な処置の術中手術部位ビデオ記録を含むビデオデータベースを構成することが望ましい。1つの態様では、ビデオが記録されているときに、医療デバイスを使用する外科医がリアルタイムでビデオ記録を強調表示(ハイライト)してビデオ記録に注釈を付けることを可能にする入力を更に含むように、ビデオ記録を行い得る医療デバイスを構成することが望ましい。1つの態様では、ビデオデータベースの個々の記録を検索し、関連するビデオ記録を識別し、特定の外科的処置のためのこの関連情報を外科医に提供するように、コンピュータベースのパターンマッチングアルゴリズムを構成することが望ましい。
以下の要約は、基本的な理解を提供するために発明的な主題の特定の態様を導入する。この要約は、発明的な主題の広範な概観でなく、鍵となる要素又は重要な要素を特定したり或いは発明的な主題の範囲を境界付けたりすることを意図しない。この要約は、発明的な主題の様々な態様及び実施形態に関連する情報を含むが、その唯一の目的は、幾つかの態様及び実施形態を、以下のより詳細な説明の前文として一般的な形態で提示することである。
手術器具と手術器具アクチュエータとを含む遠隔操作手術システムにおける手術患者健康記録の術中使用のための方法が提供される。ユーザからユーザ入力コマンドを受信してロボット手術器具の動作を制御する。ユーザ入力コマンドに応答して、ロボット手術器具の動作中に、ロボット器具の手術器具アクチュエータ状態のアクチュエータ状態をトラッキング(追跡)する。ロボット手術器具が所定のアクチュエータ状態に移行することに応答して、ロボット器具の手術器具アクチュエータ状態を安全モードに移行させる。
最小侵襲遠隔操作手術システムの平面図である。 外科医コンソールの斜視図である。 電子機器カートの斜視図である。 遠隔操作手術システムの図式的な例示である。 患者側カートの斜視図である。 手術器具の立面図である。 器具マニピュレータの斜視図である。 手術計画ツールの図式的な例示である。 手術計画ツールを使用する方法のフロー図である。 幾つかの実施形態に従ったコンピュータ可読ストレージデバイス中のストレージアトラス情報構造を表す例示的な図である。 幾つかの実施形態に従った、個々の手術からの記録されたビデオ情報を対応する手術器具アクチュエータ状態と関連付ける、ストレージデバイス中のアトラス内に含められる第7の情報構造の例を表す例示的な図である。 手術器具が幾つかの実施形態に従った3つの異なる例示的な動作状態において示される例示的な手術器具及び例示的なアクチュエータアセンブリを示す例示的な図である。 手術器具が幾つかの実施形態に従った3つの異なる例示的な動作状態において示される例示的な手術器具及び例示的なアクチュエータアセンブリを示す例示的な図である。 手術器具が幾つかの実施形態に従った3つの異なる例示的な動作状態において示される例示的な手術器具及び例示的なアクチュエータアセンブリを示す例示的な図である。 幾つかの実施形態に従った、異なる例示的な手術患者健康記録特性を手術リスク管理情報と関連付け、特定の外科的処置に対応する、コンピュータ可読ストレージデバイス中に格納されるアトラスの例示的な第8の情報構造を表す、図である。 幾つかの実施形態に従った、警告メッセージを提示し、手術患者健康記録情報に少なくとも部分的に基づいて手術器具を安全状態に移行させる、プロセッサの構成を表す、例示的なフロー図である。
この記述、及び発明的な態様、実施態様、実装、又は適用を例示する添付の図面は、限定的なものと考えられてならない。即ち、請求項が、保護された発明を定義する。この記述及び請求項から逸脱せずに、様々な機械的、組成的、構造的、電気的、及び動作的な変更が行われてよい。場合によっては、本発明を不明瞭にしないために、周知の回路、構造、又は技法は、詳細に示されず或いは記載されない。2以上(2つ又はそれよりも多く)の図中の同等の数字は、同一又は類似の要素を表す。
1つの実施形態、実装、又は適用を参照して詳細に記載される要素は、実用的な場合にはいつでも、それらが具体的に示されておらず或いは記載されていない他の実施形態、実装、又は適用に含められてよい。例えば、ある要素が1つの実施形態を参照して詳細に記載され、第2の実施形態を参照して記載されないならば、その要素は、それにも拘わらず、第2の実施形態に含まれるものとして主張されることがある。よって、以下の記述における不要な反復を避けるために、1つの実施形態、実装、又は適用と関連して示され且つ記載される1以上の要素は、特段の記述がない限り、1以上の要素がある実施形態又は実装を機能的でなくしない限り、或いはそれらの要素のうちの2以上の要素が矛盾する機能を提供しない限り、他の実施形態、実装、又は態様に組み込まれてよい。
本発明の態様は、Sunnyvale, CaliforniaのIntuitive Surgical, Inc.によって商業化されているda Vinci(登録商標)Surgical System(特に、da Vinci XiTMHDTM Surgical Systemとして市販されているModel IS4000)を使用した実施の観点から主に記載されている。しかしながら、当業者は、本明細書に開示する発明的な態様が、ロボット的な実施形態及び実装並びに該当する場合には非ロボット的な実施形態及び実装を含む様々な方法で具現され且つ実施されてよいことを理解するであろう。da Vinci(登録商標)Surgical System(例えば、Model IS4000 da Vinci(登録商標)XiTM Surgical System、 Model IS3000 da Vinci(登録商標)Surgical System)に関する実施は、例示に過ぎず、本明細書に開示する発明的な態様の範囲を制限するものと考えられてならない。
様々な態様に従って、本開示は、外科的処置のパフォーマンスをビデオ記録するように構成された医療デバイスを含む手術計画ツールを記載する。ビデオ記録を様々なメタデータ、例えば、医療者によって作成されるハイライトと共に埋め込むことができる。加えて、ビデオ記録を様々なメタデータ、例えば、ビデオの特定の主題、ビデオ記録が対応する患者の識別、患者に関する経歴的情報又は医学的情報、及び類似のものを記述する、文字注釈でタグ付けすることができる。1つの態様において、タグ付きメタデータは、ビデオ記録に埋め込まれる。
更なる態様によれば、本開示は、外科的処置の1以上の段階において使用される手術器具を含む遠隔操作医療デバイスを記載する。外科的処置の異なる段階は、異なる患者に対する異なるリスクレベルと関連付けられることがある。幾つかの態様では、患者に対するリスクレベルが、医療者によって手動で或いは専門家システム又は人工知能を介して自動的に、少なくとも部分的に、患者の健康記録に基づいて決定されてよい。手術器具は、複数のアクチュエータ状態において作動可能な1以上の手術器具アクチュエータによって制御される。手術器具を制御するアクチュエータのアクチュエータ状態が、外科的処置中にトラッキングされる。幾つかの実施形態において、コンピュータ可読ストレージデバイス内の情報構造は、患者が外科的処置中に潜在的に増大したリスクにある状態に手術器具が移行することに応答して、手術器具アクチュエータ状態を外科医に提示するための手術ガイダンス情報と関連付ける。幾つかの実施形態において、外科医に提示される手術ガイダンス情報は、少なくとも部分的に、手術患者の健康記録に基づいて決定される。幾つかの実施形態では、コンピュータ可読ストレージデバイス内の情報構造が、手術器具アクチュエータ状態を、少なくとも外科的処置の幾つかの態様に関して、手術器具アクチュエータを、患者がより少ないリスクにある、従って、より安全な、アクチュエータの安全動作モードに移行させる使用のための、安全移行情報と関連付ける。幾つかの実施形態において、手術器具アクチュエータの安全動作モードは、手術患者の健康記録に少なくとも部分的に基づいて決定される。
手術器具アクチュエータ状態を手術ガイダンス又はアクチュエータ安全状態情報と関連付けるビデオ記録及び情報構造を、ローカルに又はクラウドデータ格納サービス上に実装される電子医療記録データベース上にアーカイブすることができる。ビデオ記録は、関心を有するヘルスケアプロバイダに利用可能にされることができる。情報構造は、外科的ガイダンスを提供するよう並びに外科的処置の実行中に手術器具アクチュエータ状態を制御するよう、遠隔操作医療デバイスと一緒の使用のために利用可能にされることができる。
ヘルスケアプロバイダは、上述のメタデータタグを使用して、関心を有するビデオ及び情報構造関係についての患者ヘルスケア記録に基づいて、医療デバイスデータベースを検索することができる。加えて、1つの態様において、手術計画ツールは、コンピュータベースのパターンマッチング及び分析アルゴリズムを含む。1つの態様において、パターンマッチングアルゴリズムは、電子医療記録データベースに格納されるビデオを選別して(culls through)、ビデオ記録中の視覚特性と医療者によって作成された関連メタデータタグとの間の相関を識別する。手術計画ツールは、これらの相関を新たに直面する解剖学的構造に適用することにより、処置を遂行する医療者が、患者の解剖学的構造、好適な外科的アプローチ、病態、潜在的な合併症等についての決定を行うのを支援することができる。別の態様では、パターンマッチングアルゴリズムは、(プライベートな又は公共の又は両方の)電子医療記録データベースに格納されるビデオを選別して、ビデオ記録中の視覚特性と患者健康記録情報と間の相関を識別して、健康記録情報と相関する解剖学的特性を識別する。手術計画ツールは、解剖学的構造とヘルスケア記録との間のこれらの相関を現在の患者の解剖学的構造及び健康記録に適用し、それにより、現在の患者に関与する外科的処置を計画し且つ実行する医療者を支援する。
(最小侵襲遠隔操作手術システム)
ここで図面を参照すると、同等の参照番号は幾つかの図を通じて同等の部品を表しており、図1は、手術台14の上に横たわる患者12に対して最小侵襲的な診断又は外科的処置を実施するために典型的に使用される、最小侵襲遠隔操作手術システム10の平面図である。システムは、処置中の外科医18による使用のための外科医コンソール16を含む。1人以上(1人又はそれよりも多く)の助手20が処置に参加することもある。最小侵襲遠隔操作手術システム10は、患者側カート22と、電子機器カート24とを更に含む。患者側カート22は、外科医18が外科医コンソール16を通じて手術部位を見る間に、患者12の身体にある最小侵襲性切開部を通じて少なくとも1つの取り外し可能に連結された手術器具26を操作することができる。立体視内視鏡のような内視鏡28によって手術部位の画像を取得することができ、患者側カート22によって内視鏡28を操作して内視鏡28を方向付けることができる。電子機器カート24に配置されるコンピュータプロセッサを使用して、外科医コンソール16を通じた外科医18への後続の表示のために手術部位の画像を処理することができる。一度に使用される手術器具26の数は、一般的に、他の要因の中でも、診断的処置又は外科的処置及び手術室内の空間制約に依存する。処置中に使用される手術器具26のうちの1以上を変更することが必要であるならば、助手20は手術器具26を患者側カート22から取り外し、それを手術室内のトレイ30からの別の手術器具26と交換することができる。
図2は、外科医コンソール16の斜視図である。外科医コンソール16は、深さ知覚を可能にする手術部位の調整された(coordinated)立体視ビューを外科医18に提示する左眼ディスプレイ32と右眼ディスプレイ34とを含む。コンソール16は、1以上の制御入力36を更に含む。(図1に示す)患者側カート22での使用のために設置される1以上の手術器具が、外科医18の1以上の制御入力36の操作に応答して移動する。制御入力36は、(図1に示す)それらの関連する手術器具26と同じ機械的自由度を提供して、外科医18にテレプレゼンス(telepresence)、又は外科医が手術器具26を直接的に制御しているという強い感覚(sense)を有するよう制御入力36が器具26と一体的であるという知覚(perception)を提供することができる。この目的を達成するために、位置、力、及び触覚フィードバックセンサ(図示せず)を利用して、手術器具26からの位置、力、及び触覚の感覚(sensations)を、制御入力36を通じて外科医の両手に伝えてよい。
外科医コンソール16は、外科医が処置を直接的にモニタリングすることができ、必要であるならば物理的に存在することができ、電話又は他の通信媒体を通じてよりもむしろ患者側の助手と直接的に話すことができるよう、患者と同じ部屋内に配置されるのが普通である。しかしながら、外科医は、遠隔手術を可能にする異なる部屋、全く異なる建物、又は患者から離れた他の場所に配置されることができる。
図3は、電子機器カート24の斜視図である。電子機器カート24は、内視鏡28と連結されることができ、外科医コンソール上の外科医への或いはローカルに又は遠隔に配置された他の適切なディスプレイ上へのような後続の表示のために取込み画像(captured images)を処理するコンピュータプロセッサを含む。例えば、立体視内視鏡が使用されるならば、電子機器カート24上のコンピュータプロセッサが取込み画像を処理して、手術部位の調整された立体視画像を外科医に提示することができる。そのような調整(coordination)は、対向する画像間の整列(アライメント)を含むことができ、立体視内視鏡の立体作動距離を調整することを含むことができる。別の例として、画像処理は、以前に決定されたカメラ較正パラメータを使用して、光学収差のような画像キャプチャデバイスの撮像誤差を補償することを含むことができる。任意的に、電子機器カート内の機器は、外科医コンソール又は患者側カートに統合されてよく、或いはそれは手術室内の様々な他の場所に分配されてよい。
図4は、(図1の最小侵襲遠隔操作手術システム10のような)遠隔操作手術システム50を概略的に例示している。(図1の外科医コンソール16のような)外科医コンソール52が、最小侵襲的な処置中に(図1の患者側カート22のような)患者側カート54を制御するために外科医によって使用されることができる。患者側カート54は、立体視内視鏡のような撮像デバイスを使用して、手術部位の画像を取り込み、取り込んだ画像を(図1の電子機器カート24のような)電子機器カート56に配置されるコンピュータプロセッサに出力することができる。コンピュータプロセッサは、典型的には、コンピュータプロセッサの不揮発性メモリデバイスに格納されるコンピュータ可読コードを実行することを目的とする1以上のデータ処理ボードを含む。1つの態様において、コンピュータプロセッサは、如何なる後続の表示にも先立って、取り込んだ画像を様々な方法において処理することができる。例えば、コンピュータプロセッサは、組み合わせられた画像を外科医コンソール52を介して外科医に表示するに先立って、取り込んだ画像を仮想制御インタフェースでオーバーレイすることができる。
追加的に又は代替的に、取込み画像は、電子機器カート56の外側に配置されるコンピュータプロセッサによる画像処理を受けることができる。1つの態様において、遠隔操作手術システム50は、電子機器カート56に配置されるコンピュータプロセッサに類似する(破線によって示すような)任意的なコンピュータプロセッサ58を含み、患者側カート54は、外科医コンソール52上での表示に先立って、画像処理のために取り込んだ画像をコンピュータプロセッサ58に出力する。別の態様では、取込み画像は、先ず、電子機器カート56にあるコンピュータプロセッサによる画像処理を受け、次に、外科医コンソール52に表示するに先立って、コンピュータプロセッサ58による追加的な画像処理を受ける。遠隔操作手術システム50は、破線によって示すように、任意的なディスプレイ60を含むことができる。ディスプレイ60は、電子機器カート56に配置されたコンピュータプロセッサとコンピュータプロセッサ58とに連結され、これらのコンピュータプロセッサによって処理された取込み画像は、外科医コンソール52のディスプレイに表示されることに加えて、ディスプレイ60に表示されることができる。
図5は、本発明の実施形態に従った最小侵襲遠隔操作手術システムの患者側カート500の斜視図である。患者側カート500は、1以上の支持アセンブリ510を含む。手術器具マニピュレータ512が、各支持アセンブリ510の端に取り付けられる。加えて、各支持アセンブリ510は、任意的に、手術のために患者を基準として取り付けられた手術器具マニピュレータ512を位置決めするために使用される、1以上の電力供給されないロック可能なセットアップジョイントを含むことができる。描写のように、患者側カート500は、フロア上に位置する。他の実施形態では、患者側カートの動作部分を壁、天井、患者の身体522も支持する手術台526、又は他の手術室機器に取り付けることができる。更に、患者側カート500は、4つの手術器具マニピュレータ512を含むものとして示されているが、より多い又はより少ない手術器具マニピュレータ512が使用されてよい。
機能的な最小侵襲遠隔操作手術システムは、一般的に、遠隔操作手術システムのユーザが患者の身体522の外側から手術部位を見ることを可能にするビジョンシステム部分を含む。ビジョンシステム(vision system)は、典型的には、ビデオ画像を取り込むためのカメラ器具528と、取り込んだビデオ画像を表示するための1以上のビデオディスプレイとを含む。幾つかの手術システム構成において、カメラ器具528は、カメラ器具528の遠位端から患者の身体522の外側の1以上の撮像センサ(例えば、CCD又はCMOSセンサ)に画像を転送する光学系を含む。代替的に、(複数の)撮像センサは、カメラ器具528の遠位端に位置付けられることができ、(複数の)センサによって生成される信号は、処理及び1以上のビデオディスプレイ上での表示のためにリード線に沿って或いは無線で送信されることができる。ビデオディスプレイの一例は、Sunnyvale, CaliforniaのIntuitive Surgical, Inc.によって商業化されている手術システム内の外科医コンソール上の立体視ディスプレイである。
図5を参照すると、各手術器具マニピュレータ512に取り付けられているのは、患者の身体522内の手術部位で作動する手術器具520である。各手術器具マニピュレータ512は、関連する手術器具が1以上の機械的自由度(例えば、全部の6つのデカルト自由度、5つ以下のデカルト自由度など)で動くことを可能にする様々な形態において提供されることができる。典型的には、機械的又は制御的拘束は、患者を基準として静止したままである器具上の運動中心の周りでその関連する手術器具を動かすよう、各マニピュレータ512を制約し、この運動中心は、典型的には、器具が身体内に入る位置に配置される。
1つの態様において、手術器具520は、コンピュータ支援遠隔操作を通じて制御される。機能的最小侵襲遠隔手操作術システムは、遠隔操作手術システムのユーザ(例えば、外科医又は他の医療者)から入力を受信する制御入力を含む。制御入力は、手術器具520が連結される1以上のモータのような、1以上のコンピュータ制御される遠隔操作アクチュエータと通信する。このようにして、手術器具520は、医療者の制御入力の動きに応答して動く。1つの態様では、1以上の制御入力が、図2に示す外科医コンソール16のような外科医コンソールに含められる。外科医は、外科医コンソール16の制御入力36を操作して、患者側カート500の遠隔操作アクチュエータを作動させることができる。遠隔操作アクチュエータによって生成される力は、ドライブトレーン機構を介して伝達され、ドライブトレーン機構は、遠隔操作アクチュエータからの力を手術器具520に伝動する。
図5を参照すると、1つの態様において、手術器具520及びカニューレ524は、手術器具520がカニューレ524を通じて挿入された状態で、マニピュレータ512に取り外し可能に連結される。マニピュレータ512の1以上の遠隔操作アクチュエータは、手術器具512を全体的に移動させる。マニピュレータ512は、器具キャリッジ530を更に含む。手術器具520は、器具キャリッジ530に取り外し可能に接続される。1つの態様において、器具キャリッジ530は、手術器具520が手術器具520のエンドエフェクタの様々な動きに変換する多数のコントローラ動作を提供する1以上の遠隔操作アクチュエータを内側に収容する。よって、器具キャリッジ530内の遠隔操作アクチュエータは、器具を全体的に移動させるというよりもむしろ、手術器具520の1以上のコンポーネントのみを移動させる。器具全体又は器具のコンポーネントのいずれかを制御するための入力は、外科医又は他の医療者が制御入力(「マスタ」コマンド)に提供する入力が手術器具による対応する動作(「スレーブ」応答)に変換されるような入力である。
代替的な実施形態において、器具キャリッジ530は、遠隔操作アクチュエータを収容しない。手術器具520のエンドエフェクタの様々な動きを可能にする遠隔操作アクチュエータは、器具キャリッジ530から離れた場所、例えば、患者側カート500の他の場所に収容される。ケーブルベースの力伝動機構又は類似機構は、遠隔配置された遠隔操作アクチュエータの各遠隔操作アクチュエータの動きを器具キャリッジ530に配置された対応する器具インタフェース接続アクチュエータ出力に伝達するために使用される。幾つかの実施形態において、手術器具520は、長手方向(z軸)回転のような手術器具の第1の動きを制御する第1のアクチュエータに機械的に連結される。手術器具520は、二次元(x,y)運動のような手術器具の第2の動きを制御する第2のアクチュエータに機械的に連結される。手術器具520は、ジョーエンドエフェクタの開閉のような手術器具の第3の動きを制御する第3のアクチュエータに機械的に連結される。
図6は、細長いチューブ中心線軸611を有する細長いチューブ610によって連結される近位制御機構640と遠位部分650とを含む手術器具520の側面図である。手術器具520は、患者の身体内に挿入されるように構成され、外科的又は診断的処置を実行するために使用される。手術器具520の遠位部分650は、図示の鉗子、針ドライバ、焼灼デバイス、切削ツール、撮像デバイス(例えば、内視鏡若しくは超音波プローブ)、又は類似物のような、様々なエンドエフェクタ654のうちのいずれかを提供することができる。手術エンドエフェクタ654は、開閉するジョー、又は経路に沿って並進するナイフのような、機能的機械的自由度を含むことができる。図示の実施形態において、エンドエフェクタ654は、リスト652(手首部)によって細長いチューブ610に連結され、リスト652は、エンドエフェクタが細長いチューブ中心線軸611に対して方向付けられることを可能にする。手術器具520は、(例えば器具の内側の半導体メモリに)格納される情報を含んでもよく、それは永久的であってよく、或いは手術器具520を作動させるように構成される手術システムによって更新可能であってよい。従って、手術システムは、手術器具520と手術システムの1以上のコンポーネントとの間の一方向又は双方向の情報通信を提供することがある。
図7は、手術器具マニピュレータ512の斜視図である。器具マニピュレータ512は、手術器具が取り付けられていない状態で示されている。器具マニピュレータ512は、器具キャリッジ530を含み、器具キャリッジ530には、手術器具(例えば、手術器具520)を取り外し可能に接続することができる。器具キャリッジ530は、複数の遠隔操作アクチュエータを収容する。各遠隔操作アクチュエータは、アクチュエータ出力705を含む。手術器具が器具マニピュレータ512上に装着されるとき、器具近位制御機構(例えば、図6にある近位制御機構640)の1以上の器具入力(図示せず)は、対応するアクチュエータ出力705と機械的に連結される。1つの態様において、この機械的連結は直接的であり、アクチュエータ出力705は対応する器具入力と直接的に接触する。別の態様において、この機械的連結は、器具マニピュレータ512と関連する手術器具との間に滅菌バリアを提供するように構成されたドレープのコンポーネントのような中間インタフェースを通じて起こる。
1つの態様において、対応する遠隔操作アクチュエータによる1以上の器具入力の動作は、手術器具の機械的自由度の動きをもたらす。例えば、1つの態様において、器具マニピュレータ512に取り付けられた手術器具は、図6に示す手術器具520である。図6を参照すると、1つの態様において、対応する遠隔操作アクチュエータによる近位制御機構640の1以上の器具入力の動作は、細長いチューブ610(並びに取り付けられたリスト652及びエンドエフェクタ654)を、細長いチューブ中心線軸611の周りで近位制御機構640に対して回転させる。別の態様では、対応する遠隔操作アクチュエータによる1以上の器具入力の動作は、エンドエフェクタ654を細長いチューブ中心線軸611に対して方向付ける、リスト652の動作をもたらす。別の態様において、対応する遠隔操作アクチュエータによる1以上の器具入力の動作は、エンドエフェクタ654の1以上の可動要素(例えば、ジョー部材、ナイフ部材など)の動作をもたらす。従って、器具キャリッジ530の遠隔操作アクチュエータの作動によって器具マニピュレータ512上に装着される手術器具の様々な機械的自由度を移動させることができる。
(記録されたビデオに注釈を付けること)
図8は、例示的な手術計画ツール800の概略図を示している。1つの態様において、手術計画ツール800は、電子医療デバイス記録データベース830とデータ通信する遠隔操作手術システム850を含む。ここに示す遠隔操作手術システム850は、図4に示す遠隔操作手術システム850と類似している。1つの態様において、電子医療記録データベース830は、特定の病院で治療を受けた患者の医療記録を含む。データベース830は、病院で構内に(on-site)配置されるサーバ上に実装されることができる。イントラネットネットワークを通じて病院コンピュータからデータベース830に含められる医療記録エントリにアクセスすることができる。代替的に、例えば、多数のクラウドデータストレージサービスのうちの1つを使用して、データベース830を、病院から構外に(off-site)配置される遠隔サーバ上に実装することができる。この場合、データベース830の医療記録エントリは、クラウドサーバに格納され、インターネットアクセスを有するコンピュータによってアクセスされることができる。
1つの態様では、外科的処置が、遠隔操作手術システム850を用いて第1の患者に対して行われる。遠隔操作手術システム850と関連付けられる撮像デバイスが、手術部位の画像を取り込み、取り込んだ画像を外科医コンソール52のディスプレイにビデオのフレームとして表示する。1つの態様では、外科医コンソール52にいる医療者が、外科医コンソール52の入力デバイスを使用して、表示されるビデオに示される特定の患者解剖学的構造を強調表示(ハイライト)し或いは注釈する。そのような入力デバイスの一例が、図2に示す制御入力36であり、それは表示されるビデオ上にオーバーレイされるグラフィックユーザインタフェースと共に動作するカーソルに連結される。グラフィックユーザインタフェースは、既存のマニピュレータのいずれかを入力デバイスとして再目的化すること(repurposing)を含む、QWERTYキーボード、マウス及び対話型スクリーンディスプレイのようなポインティングデバイス、タッチスクリーンディスプレイ、又はデータ又は文字入力のための他の手段を含むことができる。従って、医療者は、表示される画像中の特定の関心組織を強調表示するか或いは文字注釈を入力することができる。
1つの態様において、手術部位ビデオは、電子機器カート56に配置されるディスプレイに追加的に表示される。1つの態様において、電子機器カートのディスプレイは、電子機器カートのディスプレイに視聴(viewing)のために表示される画像に示される患者解剖学的構造の特定部分を強調表示し或いは注釈するために医療者によって使用可能なタッチスクリーンユーザインタフェースである。ユーザは、タッチスクリーンユーザインタフェース上に表示される患者解剖学的構造の部分に触れることによって、表示される画像の部分を強調表示することができる。加えて、QWERTYキーボードを含むグラフィックインタフェースを表示画像上にオーバーレイすることができる。ユーザはQWERTYキーボードを使用して文字注釈を入力することができる。
1つの態様において、遠隔操作手術システム850と関連付けられる撮像デバイスによって取り込まれる手術部位ビデオは、遠隔操作手術システム850によって記録され、ユーザにリアルタイムで又は略リアルタイムで表示されることに加えて、データベース830に格納される。ユーザによって作成された記録されたビデオと関連付けられるハイライト(強調表示)及び/又は注釈もデータベース830に格納されることができる。1つの態様において、ユーザによって作成されたハイライトは、データベース830へのその格納に先立って、記録されたビデオに埋め込まれる。後に、視聴のために、記録されたビデオを検索することができる。1つの態様では、記録されたビデオの視聴者(viewer)は、ハイライトが表示されるか或いは表示から抑制されるかを選択することができる。同様に、記録されたビデオと関連付けられる注釈も、データベース830に格納されることができる。1つの態様において、ユーザによって作成された注釈は、記録されたビデオにタグを付けるために使用され、記録されたビデオに含まれる主題を識別する手段として提供するために使用されることができる。例えば、1つの注釈は、特定の病態の条件を記述してよい。この注釈は、録画されたビデオにタグを付けるために使用される。後に、この病態に関する記録された処置を見ることを欲する人は、キーワード検索を用いてビデオを探し出すことができる。
(格納されたビデオの検索)
場合によっては、医療者が、所与の患者に対して行われた過去の外科的処置のビデオ記録を見ることができることが望ましい。1つの態様では、ある医学的状態を治療するための第1の外科的処置を以前に受けた患者は、引き続き、同じ医学的状態の再発を治療するために或いは第1の外科的処置の手術部位の近くに位置する解剖学的構造を治療するために、第2の外科的処置を必要とする。1つの態様において、第1の外科的処置の手術部位事象は、手術部位ビデオ記録に取り込まれ、ビデオ記録は、患者の電子医療記録の一部としてデータベース830に保存される。その患者に対して第2の外科的処置を実施するに先立って、医療者はデータベース830の検索を行って、患者の初期の外科的処置のビデオ記録を探し出すことができる。
場合によっては、患者に対して外科的処置を実施することを計画する医療者が、その患者に類似する特定の特性を有する人に対して行われた類似の外科的処置のビデオ記録を見ることができることが望ましい。1つの態様において、外科的処置の手術部位ビデオ記録は、各ビデオ記録がデータベース830中にアーカイブされる前に、患者の年齢、性別、肥満度指数(body mass index)、遺伝情報、患者が受けた処置の種類などのような、メタデータ情報でタグ付けされることができる。1つの態様において、ビデオ記録にタグ付けするために使用されるメタデータ情報は、患者のその時点で存在する医療記録から自動的に検索され、次に、ビデオ記録がデータベース830中にアーカイブされる前にビデオ記録をタグ付けするために使用される。従って、患者に対して医療処置を実施するに先立って、医療者は、その患者と共通する特定の特性を共有する患者に対して行われた類似の処置のビデオ記録について、データベース830を検索することができる。例えば、医療者が肥満度指数の上昇した65歳の男性患者に対して前立腺摘除術を実施するために遠隔操作手術システム850を使用することを計画しているならば、医療者は、類似の上昇した肥満度指数を有する類似の年齢の他の男性に対して遠隔操作手術システム850を使用して実施された前立腺摘除術の手術部位ビデオ記録について、データベース830を検索することができる。
1つの態様では、外科的処置のビデオ記録が、データベース830によって(破線によって示す)任意的なパーソナルコンピュータ820に通信され、外科的処置を実行することを計画する医療者による視聴のために利用可能にされる。追加的に又は代替的に、初期の外科的処置のビデオ記録は、データベース830によって遠隔操作手術システム850に通信されて、術前又は術中視聴のために利用可能にされることができる。1つの態様において、ビデオ記録は、遠隔操作手術システム850によって外科医コンソール52に配置されるディスプレイに表示される。別の態様において、第1の外科的処置のビデオ記録は、電子機器カート56に配置されるディスプレイに表示される。
(クラウドベースのビデオデータベース)
1つの態様において、データベース830は、クラウドデータストレージサービスを使用して遠隔サーバに実装され、複数のヘルスケアプロバイダによってアクセス可能である。図8を参照すると、破線によって示すように、手術計画ツール800は、任意的に、(破線によって示すような)遠隔操作手術システム850と、(破線によって示すような)パーソナルコンピュータ840とを含む。1つの態様では、遠隔操作手術システム50及びパーソナルコンピュータ820が第1のヘルスケアプロバイダに配置され、遠隔操作手術システム850及びパーソナルコンピュータ840が第2のヘルスケアプロバイダに配置される点を除き、遠隔操作手術システム850は、遠隔操作手術システム50と類似し、パーソナルコンピュータ840は、パーソナルコンピュータ820と類似する。1つの態様では、第1の患者が、医学的状態の外科的治療を必要とし、第1のヘルスケアプロバイダで遠隔操作手術システム50を使用する外科的処置を受ける。外科的処置のビデオ記録が、データベース830にアーカイブされる。後に、第2の患者が、同じ医学的状態の外科的治療を必要とし、第2のヘルスケアプロバイダで遠隔操作手術システム850を使用する外科的治療を受けることを計画する。第2の患者に対し外科的処置を実施するに先立って、医療者は、安全なインターネット接続を通じてデータベース830にアクセスし、類似の処置の手術部位ビデオ記録についてデータベース830を検索する。1つの態様において、第2の患者を治療する医療者は、第1の患者の身元に関する知識を取得せずに、データベース830から第1の患者の外科的処置のビデオ記録を検索することができる。このようにして、第1の患者のプライバシーが維持される。1つの態様において、第1の患者の外科的処置のビデオ記録は、第1の患者を治療した医療者によって作成されるハイライト及び/又は注釈を含む。
(コンピュータベースのパターンマッチング及び分析)
手術計画ツール800は、コンピュータ実行可能コードの形態で実装されるパターンマッチング及び分析アルゴリズムを含むことができる。1つの態様において、パターンマッチング及び分析アルゴリズムは、手術計画ツール800の不揮発性メモリデバイスに格納され、データベース830中にアーカイブされるビデオ記録を分析するように構成される。先に議論したように、データベース830中にアーカイブされるビデオ記録の各々には、特定のメタデータ情報がタグ付けされ或いは埋め込まれることができる。このメタデータ情報は、患者の年齢、性別、及び患者の健康又は病歴を記述する他の情報のような、情報を含むことができる。加えて、先に議論したように、メタデータ情報は、医療者によって作成されるハイライト又は注釈を含むことができる。1つの態様において、これらのハイライト及び注釈は、ビデオ記録と共に埋め込まれ、データベース830内のビデオと共にアーカイブされる。メタデータは、最高レベルの外科的技能を表す最適一致(ベストマッチ)を選択するようにパターンマッチングアルゴリズムを設計することが可能であるよう、外科的実行のスキルの客観的格付け又は主観的格付けのいずれかを含むこともできる。
1つの態様において、パターンマッチング及び分析アルゴリズムは、データベース830に格納される複数のビデオ記録中で共有される形状及び色のパターンを識別する画像分析コンポーネントを含む。次に、パターンマッチング及び分析アルゴリズムは、ビデオ記録のこのサブセットと関連付けられるタグ付きメタデータを検討して、いずれかの単語又は句がこのサブセット内のビデオと頻繁に関連付けられているか否かを決定する。医療者が患者解剖学的構造、好適な外科的アプローチ、共存症(co-morbilities)、病態、潜在的な合併症などについての決定を行うのを支援するために、パターンマッチング及び分析アルゴリズムによって実行されるこれらの分析を使用することができる。
(手術計画ツールを使用する方法)
図9は、手術計画ツールを使用する方法900を示している。1つの態様において、手術計画ツールは、図8での手術計画ツール800に類似している。910で、医療デバイスは、医療患者、例えば、患者が患う医学的状態を記述する事実又は特性を受信する。医療デバイスは、遠隔操作外科システム(例えば、図1での遠隔操作手術システム10又は図4での遠隔操作手術システム50)に配置されるユーザインタフェースを介して或いは代替的に図2でのパーソナルコンピュータ820と類似のパーソナルコンピュータを通じて、この事実又は状況を受信することができる。920で、医療デバイスは、910で受信する事実又は特性を使用して、医療デバイスデータベースから外科的処置の少なくとも1つの関連ビデオ記録を検索する。930で、医療デバイスは、ビデオ記録を使用して、手術計画情報を決定する。1つの態様において、手術計画情報は、記録される処置で使用される器具の種類を含む。940で、医療デバイスは、930で決定される手術計画情報をユーザに表示する。
(外科的処置を誘導するために患者健康記録を使用する方法)
図10は、幾つかの実施形態に従ったコンピュータ可読ストレージデバイス内のストレージアトラスを表す例示的な図である。ストレージアトラス1002は、以前の外科的処置に関する第1の情報構造1006と、遠隔操作医療デバイス動作に関する第2の情報構造1008と、外科的処置中に外科的処置を手術器具作動と関連付ける第3の情報構造1010と、患者健康記録を外科的処置に関連付ける第4の情報構造1012と、患者健康記録を医療処置中の手術器具作動に関連付ける第5の情報構造1014とを含む。幾つか実施態様において、ストレージアトラス1002は、手術患者リスクと手術患者健康記録との間の相関を提供する第6の情報構造1016を含む。幾つかの実施形態において、ストレージアトラス1002は、外科処置段階のビデオ画像と外科処置中の手術器具アクチュエータ状態との間の相関を提供する第7の情報構造1018を含む。
幾つかの実施形態において、様々な情報構造1004~1020内の情報は、患者健康記録と外科的処置結果/リスクとの間の相関を識別するために評価される。幾つかの実施形態において、様々な情報構造1010~1020内の情報は、患者安全懸念/リスクと外科的処置の段階との間の相関を識別するために評価される。幾つかの実施形態において、遠隔操作外科的処置は、患者安全懸念/リスクと手術器具作動状態との間の相関を識別するために評価される。これらの評価は、例えば、機械学習(ML)技法を含んでよい。幾つかの実施態様において、ストレージアトラス1002は、手術結果/リスクと手術器具アクチュエータ状態との間の相関を提供する第8の情報構造1020を含む。
ストレージアトラス1002は、患者及び手術に関するデータを含む。幾つかの実施形態において、ストレージアトラス1002は、手術シーンのビデオ画像と、文字及びテレストレーションタグ1022のような対応する注釈とを含む。幾つかの実施態様において、ストレージアトラス1002は、外科的処置中の手術器具アクチュエータ状態の記録1024を含む。
図11は、ストレージデバイス1004中のアトラス1002内に含められる第7の情報構造1018の一例を表す例示的な図であり、それは幾つかの実施形態に従って個々の手術からの記録されたビデオ情報を対応する手術器具アクチュエータ状態情報と関連付ける。1つの態様では、手術中のビデオ記録画像及び手術器具アクチュエータ状態は、ビデオ画像内に示される事象の発生の時刻の経時的記録を生成するために並びに外科的処置中の手術器具アクチュエータ状態の発生の時刻の対応する経時的記録を提供するために、タイムスタンプされる(t1,t2...tn)。よって、タイムスタンプは、外科的処置を使用してビデオ画像を手術器具アクチュエータ状態と一時的に整列させる間に記録される。
手術中、ユーザは、ビデオ記録及び機械手術器具作動状態記録に、手術の段階を示すメタデータで注釈を付けてよい。注釈は、例えば、ビデオ情報及び/又は手術器具作動状態情報にタグ付けされた書込みノート、ビデオ記録中の画像の着色又はハイライト(例えば、テレストレーション)の1以上又は組み合わせを含んでよい。注釈は、それらを対応するビデオ記録情報及び対応する記録された機械ツール状態情報と一時的に整列させる使用のために、タイムスタンプされてよい。
外科的処置は、外科的リスクと関連することがある。幾つかの外科的リスクは、医療処置の特定の段階とより強く関連付けられる。幾つかの態様では、手術の異なる段階が、異なる段階の間の異なる手術器具の使用によって境界付けられる。その上、幾らかの患者は、彼らを外科的処置の特定の段階にある他の患者よりも大きな外科的リスクに置く医療状態を有する。例えば、外科的処置の間に、慢性高血圧を有する患者は、その状態を有さない患者よりも、トレンデレンブルグ***を必要とする処置の段階の間に、脳卒中のリスクがより高い。
遠隔操作手術システムでは、異なる器具が外科的処置の異なる段階で使用されることがある。その上、同じ器具は、外科的処置の異なる段階で異なるアクチュエータ状態において使用されることがある。よって、幾つかの手術では、器具の変化は、異なるレベルのリスクに対応する異なる手術段階への移行を示し、幾つかの外科的処置では、手術器具アクチュエータの状態の変化が、異なるレベルのリスクに対応する異なる手術段階への移行を示す。本明細書で使用するとき、アクチュエータ状態(actuator state)という用語は、外科医又は他の外科チームメンバから受信する入力コマンドに応答して、モータのようなアクチュエータによって決定される手術器具の機械的配置(mechanical disposition)を指す。
図12A~図12Cは、手術器具が幾つかの実施形態に従った3つの異なる例示的な動作状態で示された、例示的な手術器具1202及びアクチュエータアセンブリ1203を示す例示的な図である。例示的な器具1202は、開放状態及び閉鎖状態とそれらの間の部分的に開放した状態/部分的に閉鎖した状態の連続体との間で移行し得るジョーエンドエフェクタ1204を含む。例示的な器具1202は、異なる二次元(x,y)位置状態の間を移動することができる2自由度(2dof)リスト1206も含む。例示的なアクチュエータアセンブリ1203は、幾つかの実施形態ではジョーエンドエフェクタ1204を作動させるために使用されるジョーモータ(JM)を含む、第1のアクチュエータ1208を含む。例示的なアクチュエータアセンブリ1203は、幾つかの実施形態ではリスト1206を作動させるために使用されるリストモータ(WM)を含む、第2のアクチュエータ1210を含む。手術中、手術器具1202は、外科的処置中の異なる段階に対応する複数の作動状態を通じて移行してよい。図12Aに表すように、例えば、外科的処置は、第1のアクチュエータ1208、JMが、ジョーエンドエフェクタ1204を完全開放状態に配置し、第2のアクチュエータ1210、WMが、リスト12061206を第1の位置状態(x1,y1)に配置する、第1の段階を含んでよい。図12Bに表すように、例えば、外科的処置は、第1のアクチュエータ1208がジョーエンドエフェクタ1204を完全閉鎖状態に移行させ、第2のアクチュエータ1210がリスト1206を第2の位置状態(x2,y2)に移行させる、第2の段階を含んでよい。図12Cに表すように、例えば、外科的処置は、第1のアクチュエータ1208がジョーエンドエフェクタ1204を部分的に開放した状態/部分的に閉鎖した状態に配置し、第2のアクチュエータ1210がリスト1206を第3の位置状態(x3,y3)に移行させる、第3の状態を含んでよい。
外科医は、患者の健康記録によって示されるような手術患者の医療状態に基づいて外科的処置を調整してよい。外科医は、手術中に予防措置を講じて、患者の健康記録に基づいて患者に対するリスクを逓減させることがある。例えば、患者の健康記録は、遠隔操作外科的処置の或る段階の外科的リスクと相関する状態を患うことを示すことがある。遠隔操作外科的処置の段階の間のそのような患者に対するリスクを低減するために講じられる予防措置は、例えば、器具の作動を制御することを含む。
図13は、幾つかの実施形態に従った、特定の外科的処置に対応する並びに異なる例示的な手術患者健康記録特性を外科的リスク管理情報と関連付ける、コンピュータ可読ストレージデバイス1004に格納されるアトラス1002の例示的な第8の情報構造1020を表す例示的な図である。情報構造1020の第1の列は、患者健康記録(HR)特性1,2,3,4,5のリストを示している。情報構造1020の第2の列は、外科的処置の段階でHR特性と関連付けられる外科的リスクを示している。具体的には、例えば、HR特性1は、外科的処置の段階1におけるリスク1と関連付けられており、HR特性3は、外科的処置の段階3におけるリスク2と関連付けられており、HR特性5は、外科的処置の段階5におけるリスク3と関連付けられている。情報構造1020の第3の列は、HR特性がリスクの増加と関連付けられるときの手術段階中の手術器具作動状態を示している。例えば、HR特性1は、手術器具アクチュエータ状態Xと関連付けられており、HR特性3は、手術器具アクチュエータ状態Yと関連付けられており、HR特性5は、手術器具アクチュエータ状態Zと関連付けられている。情報構造1020の第4の列は、HR特性に基づいて、外科的処置の異なる段階で手術チームに提示されるべきメッセージを示している。例えば、HR特性1は、段階1及び手術作動状態Xと関連付けられるメッセージAと関連付けられており、HR特性3は、段階3及び手術作動状態Yと関連付けられるメッセージBと関連付けられており、HR特性5は、段階5及び手術作動状態Zに関連付けられるメッセージCと関連付けられている。情報構造1020の第5の列は、HR特性に基づいて、外科的処置の異なる段階で使用されるべき手術器具アクチュエータ安全モードを示している。例えば、HR特性1は、段階1及び手術作動状態Xと関連付けられた安全モードLと関連付けられており、HR特性3は、段階3及び手術作動状態Yと関連付けられた安全モードMと関連付けられており、HR特性5は、段階5及び手術作動状態Zと関連付けられた安全モードNと関連付けられている。
図13の例示的な第8の情報構造1020の第1の行を参照すると、例えば、結腸切除外科的処置の間に、手術の段階1は、切開(dissection)を含むことがある。リスク1は、EHRによって示されるような以前の手術からの癒着に起因する尿管又は膀胱への損傷を伴うことがある。メッセージAは、完全暴露が構築されるまで腸の授動(mobilization)が制限されるべきことを示してよい。手術器具安全作動状態Lは、器具アームに利用可能な力を、通常の非安全モード動作中に利用可能なレベルより小さいレベルに減少させることにより、起こり得る授動損傷を制限することを含んでよい。
図13の例示的な第8の情報構造1020の第3の行を参照すると、例えば、前立腺切除外科的処置の間に、手術の段階3は、効力(potency)及び禁欲(continency)に関与する神経の付近の切開を含むことがある。リスク2は、付近の焼灼エネルギの適用に起因する神経損傷を伴うことがある。メッセージBは、焼灼器具の所定の範囲内の神経組織の存在を示してよい。手術器具安全作動状態Mは、焼灼通電機能の作動を防止することを含んでよい。
例えば、図13の例示的な第8の情報構造1020の第5の行を参照すると、例えば、肝腫瘍切除を含む外科的処置の間に、手術の段階5は、腫瘍塊の切開を含むことがある。リスク3は、その塊付近の肝臓内の大血管の損傷を伴うことがある。メッセージCは、その血管が現在の手術画像上にマッピングされた術前画像によって決定されるような切開進行に近いと予測されることを示してよい。手術器具安全作動状態Nは、それらが動脈に物理的に接触しないように、手術器具の動きを通常の非安全モード動作中に利用可能な範囲未満の範囲に制限することを含んでよい。
図14は、幾つかの実施形態に従った、プロセス1402を実行して警告メッセージを提示し且つ手術患者の健康記録情報に少なくとも部分的に基づいて手術器具を安全モードに移行させるようなプロセッサ58の構成(configuration)を表す例示的なフロー図である。コンピュータプログラムコードが、プロセス1402を実行するためにプロセッサ58の1以上のCPUを構成するよう、幾つかの実施形態において使用される。ブロック1404では、手術患者の健康記録(HR)情報が、電子機器カート56と関連付けられるコンピュータ処理システムへの入力で受信される。ブロック1406では、外科処置の1以上の手術段階を示す外科的処置情報が、電子機器カート56と関連付けられるコンピュータ処理システムの入力で受信される。外科的処置中に使用される幾つかの器具について、器具の使用への移行は、異なる手術段階への移行を示す。外科的処置中に使用される幾つかの器具について、器具の異なるアクチュエータ状態への移行は、異なる手術段階への移行を示す。ブロック1408において、図13の例示的な第8の情報構造1020は、患者が増大したリスクにある1以上の外科的処置段階を識別するために、受信した患者HR情報のHR特性を1以上の外科的処置段階と一致(マッチ)させるよう使用される。ブロック1410において、例示的な第8の情報構造1020は、患者が増大したリスクにある1以上の識別された外科的処置段階を1以上の識別された段階を示す手術器具アクチュエータ状態情報と一致させるよう使用される。ブロック1412において、例示的な第8の情報構造1020は、患者が増大したリスクにある1以上の識別された外科的処置段階を外科チームへの提示のための1以上の対応する警告メッセージと一致させるよう使用される。ブロック1414において、例示的な第8の情報構造1020は、患者が増大したリスクにある1以上の識別された外科的処置段階を対応する手術器具安全作動状態についての情報と一致させるよう使用される。
外科的処置の実行中、ブロック1416は、手術器具アクチュエータの動作状態をトラッキングして、ブロック1410において決定される手術器具アクチュエータ状態情報に基づいて、手術処置が、受信したHR特性を有する患者が増大したリスクにあるブロック1408において識別された段階に移行しているときを決定する。判定ブロック1418では、現在の器具アクチュエータ状態がブロック1410において識別された、識別されたアクチュエータ状態と一致するか否かについての決定が行われる。一致がないことに応答して、制御ループはブロック1416に戻り、トラッキングは継続する。一致があることに応答して、ブロック1420は、ブロック1312において識別された、識別されたアクチュエータ安全モード制御情報を使用して、手術器具アクチュエータを安全モード動作に移行させて、受信したヘルスケア記録を有する患者に対するリスクを低減させる。ブロック1422は、外科的処置の識別された段階の間に受信したヘルスケア記録を有する患者に対して起こり得る増大したリスクに関するメッセージを外科チームに提示するように、ディスプレイデバイス32、34、及び/又は60を構成する。幾つかの実施形態において、制御は、次に、ブロック1416に戻ってよく、ブロック1416は、例えば、他の識別されたアクチュエータ状態移行情報に基づいて、手術器具アクチュエータ状態をトラッキングし続けてよい。
例示的な実施形態を示し且つ記載したが、広範な修正、変更及び置換が、前述の開示において想定されており、ある場合には、実施形態の一部の構成(features)は、他の構成の対応する使用を伴わずに利用されてよい。例えば、幾つかの実施形態において、プロセッサ58は、仮想手術器具と仮想手術器具アクチュエータとを含む仮想手術システムを実施する命令を含むストレージデバイス1004のようなメモリデバイスに連結される。メモリデバイス1004は、プロセッサ58に操作(operations)を実行させるようプロセッサ58上で実行可能な指令セットを含む。幾つかの実施形態において、それらの操作は、ユーザからユーザ入力コマンドを受信して第1の仮想ロボット手術器具の動きを制御することを含む。それらの操作は、ユーザ入力コマンドに応答する第1の仮想ロボット手術器具の移動中に第1の仮想ロボット手術器具の仮想手術器具アクチュエータ状態をトラッキングすることを更に含む。それらの操作は、その上更に、第1のロボット手術器具が第1のアクチュエータ状態に移行することに応答して、第1の仮想ロボット器具の仮想手術器具アクチュエータ状態を第1の安全モードに移行させることを含む。
その上、幾つかの実施形態において、それらの操作は、第1の健康特徴(health feature)を含む手術患者の健康記録情報を、電子ユーザインタフェースで受信することを含む。それらの操作は、コンピュータ可読ストレージデバイス内で、受信した第1の健康特徴を仮想手術器具の第1の仮想アクチュエータ状態と一致させることと、ストレージデバイス1004内で、受信した第1の健康特徴を第1のメッセージと一致させることとを更に含む。それらの操作は、ユーザからユーザ入力コマンドを受信して、第1の仮想ロボット手術器具の動きを制御することを更に含む。それらの操作は、ユーザ入力コマンドに応答する第1の仮想ロボット手術器具の移動中に、第1の仮想ロボット手術器具の仮想手術器具アクチュエータ状態をトラッキングすることを更に含む。それらの操作は、第1の仮想ロボット手術器具が第1の仮想アクチュエータ状態に移行することに応答して、第1の仮想ロボット器具の仮想手術器具アクチュエータ状態を第1の安全モードに移行させることを更に含む。それらの操作は、第1の仮想ロボット手術器具が第1の仮想アクチュエータ状態に移行することに応答して、ユーザデバイスディスプレイに第1のメッセージを表示することを更に含む。
当業者は、多くの変形、代替、及び修正を認識するであろう。よって、開示の範囲は、後続の請求項によってのみ限定されるべきであり、請求項は、本明細書に開示する実施形態の範囲と一致する方法において広く解釈されるべきことが適切である。

Claims (13)

  1. 手術器具と手術器具アクチュエータとを含む手術システムの作動方法であって、
    前記手術システムのプロセッサが、外科処置の1つ以上の手術段階を示す外科処置情報をユーザから受信するステップと、
    前記プロセッサが、第1のロボット手術器具の動作中に前記手術器具アクチュエータ動作状態をトラッキングするステップと、
    前記プロセッサが、前記トラッキングの結果に基づいて、前記第1のロボット手術器具が第1の手術段階にあることを判断して、前記手術器具アクチュエータの動作を第1の安全モードで制御するステップと、を含み前記第1の安全モードは、前記第1の手術段階と関連する前記第1のロボット手術器具の動作を制限する
    方法。
  2. 前記プロセッサが、電子ユーザインタフェースで、手術患者の医学的状態を記述する特性を含む手術患者の健康記録情報を受信するステップと、
    前記プロセッサが、コンピュータ可読ストレージデバイス内の情報構造を用いて、前記手術患者の前記受信する健康記録情報に基づいて、前記第1のロボット手術器具の前記第1の安全モードを前記手術器具の前記第1の手術段階と一致させるステップとを更に含む、
    請求項1に記載の方法。
  3. 前記プロセッサが、前記第1のロボット手術器具が第1の手術段階にあることに応答して、ユーザデバイスディスプレイに第1のメッセージを表示するステップを更に含む、請求項1に記載の方法。
  4. 前記プロセッサが、電子ユーザインタフェースで、手術患者の医学的状態を記述する特性を含む手術患者の健康記録情報を受信するステップと、
    前記プロセッサが、コンピュータ可読ストレージデバイス内の情報構造を用いて、前記手術患者の前記受信する健康記録情報を第1のメッセージと一致させるステップとを更に含む、
    請求項1に記載の方法。
  5. 前記プロセッサが、前記トラッキングの結果に基づいて、前記第1のロボット手術器具が第2の手術段階にあることを判断して、前記手術器具アクチュエータの動作を第2の安全モードで制御するステップを更に含み、前記第2の安全モードは、前記第2の手術段階と関連する前記第1のロボット手術器具の動作を制限する、請求項1に記載の方法。
  6. 前記プロセッサが、前記トラッキングの結果に基づいて、前記第1のロボット手術器具が第2の手術段階にあることを判断して、前記手術器具アクチュエータの動作を第2の安全モードで制御するステップであって、前記第2の安全モードは、前記第2の手術段階と関連する前記第1のロボット手術器具の動作を制限する、制御するステップと、
    前記プロセッサが、前記第1のロボット手術器具が前記第1の手術段階にあることに応答して、ユーザデバイスディスプレイに第1のメッセージを表示するステップと、
    前記プロセッサが、前記第1のロボット手術器具が前記第2の手術段階にあることに応答して、ユーザデバイスディスプレイに第2のメッセージを表示するステップと、を更に含む、
    請求項1に記載の方法。
  7. 前記プロセッサが、前記コンピュータ可読ストレージデバイス内の情報構造を用いて、前記手術患者の前記受信する健康記録情報を第1のメッセージと一致させるステップと、
    前記プロセッサが、前記第1のロボット手術器具が第1の手術段階にあることに応答して、ユーザデバイスディスプレイに第1のメッセージを表示するステップと、を更に含む、
    請求項2に記載の方法。
  8. 手術器具と、手術器具アクチュエータとを含む、手術システムであって、
    プロセッサと、
    前記プロセッサ上で実行可能な指令セットを保持するメモリデバイスと、を含み、
    前記指令セットは、当該手術システムに、
    外科処置の1つ以上の手術段階を示す外科処置情報をユーザから受信すること、
    1のロボット手術器具の動作中に前記手術器具アクチュエータ動作状態をトラッキングすること、及び
    前記トラッキングの結果に基づいて、前記第1のロボット手術器具が第1の手術段階にあることを判断して、前記手術器具アクチュエータの動作を第1の安全モードで制御すること
    を含む操作を実行させ
    前記第1の安全モードは、前記第1の手術段階と関連する前記第1のロボット手術器具の動作を制限する
    手術システム。
  9. 前記操作は、
    電子ユーザインタフェースで、手術患者の医学的状態を記述する特性を含む手術患者の健康記録情報を受信すること、及び
    プロセッサによって、コンピュータ可読ストレージデバイス内の情報構造を用いて、前記手術患者の前記受信する健康記録情報に基づいて、前記第1のロボット手術器具の前記第1の安全モードを前記手術器具の前記第1の手術段階と一致させることを更に含む、
    請求項8に記載の手術システム。
  10. 前記操作は、
    前記第1のロボット手術器具が第1の手術段階にあることに応答して、ユーザデバイスディスプレイに第1のメッセージを表示することを更に含む、
    請求項8に記載の手術システム。
  11. 前記操作は、
    電子ユーザインタフェースで、手術患者の医学的状態を記述する特性を含む手術患者の健康記録情報を受信すること、及び
    プロセッサによって、コンピュータ可読ストレージデバイス内の情報構造を用いて、前記手術患者の前記受信する健康記録情報を第1のメッセージと一致させることを更に含む、
    請求項8に記載の手術システム。
  12. 前記操作は、
    前記トラッキングの結果に基づいて、前記第1のロボット手術器具が第2の手術段階にあることを判断して、前記手術器具アクチュエータを第2の安全モードで制御するステップを更に含み、前記第2の安全モードは、前記第2の手術段階と関連する前記第1のロボット手術器具の動作を制限する
    請求項8に記載の手術システム。
  13. 前記操作は、
    前記トラッキングの結果に基づいて、前記第1のロボット手術器具が第2の手術段階にあることを判断して、前記手術器具アクチュエータを第2の安全モードで制御することを更に含み、前記第2の安全モードは、前記第2の手術段階と関連する前記第1のロボット手術器具の動作を制限し、
    前記第1のロボット手術器具が前記第1の手術段階にあることに応答して、ユーザデバイスディスプレイに第1のメッセージを表示することと、
    前記第1のロボット手術器具が前記第2の手術段階にあることに応答して、ユーザデバイスディスプレイに第2のメッセージを表示することと、を更に含む、
    請求項8に記載の手術システム。
JP2019524330A 2016-11-11 2017-11-10 患者健康記録ベース器具制御を備える遠隔操作手術システム Active JP7440262B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022130331A JP7503105B2 (ja) 2016-11-11 2022-08-18 患者健康記録ベース器具制御を備える遠隔操作手術システム

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201662421064P 2016-11-11 2016-11-11
US62/421,064 2016-11-11
PCT/US2017/061131 WO2018089812A1 (en) 2016-11-11 2017-11-10 Teleoperated surgical system with patient health records based instrument control

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2022130331A Division JP7503105B2 (ja) 2016-11-11 2022-08-18 患者健康記録ベース器具制御を備える遠隔操作手術システム

Publications (2)

Publication Number Publication Date
JP2019536537A JP2019536537A (ja) 2019-12-19
JP7440262B2 true JP7440262B2 (ja) 2024-02-28

Family

ID=62110087

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019524330A Active JP7440262B2 (ja) 2016-11-11 2017-11-10 患者健康記録ベース器具制御を備える遠隔操作手術システム
JP2022130331A Active JP7503105B2 (ja) 2016-11-11 2022-08-18 患者健康記録ベース器具制御を備える遠隔操作手術システム

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2022130331A Active JP7503105B2 (ja) 2016-11-11 2022-08-18 患者健康記録ベース器具制御を備える遠隔操作手術システム

Country Status (6)

Country Link
US (1) US20190282311A1 (ja)
EP (1) EP3538011A4 (ja)
JP (2) JP7440262B2 (ja)
KR (2) KR20190070356A (ja)
CN (1) CN109996508B (ja)
WO (1) WO2018089812A1 (ja)

Families Citing this family (94)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11871901B2 (en) 2012-05-20 2024-01-16 Cilag Gmbh International Method for situational awareness for surgical network or surgical network connected device capable of adjusting function based on a sensed situation or usage
JP6559691B2 (ja) 2014-02-20 2019-08-14 インテュイティブ サージカル オペレーションズ, インコーポレイテッド ロボットアームの手動の動きによって制御される外科取付けプラットフォームの限定的な移動
US11504192B2 (en) 2014-10-30 2022-11-22 Cilag Gmbh International Method of hub communication with surgical instrument systems
WO2019023383A2 (en) * 2017-07-27 2019-01-31 Intuitive Surgical Operations, Inc. INTEGRATED SCREEN AND CONTENT DISPLAY
US11510741B2 (en) 2017-10-30 2022-11-29 Cilag Gmbh International Method for producing a surgical instrument comprising a smart electrical system
US11564756B2 (en) 2017-10-30 2023-01-31 Cilag Gmbh International Method of hub communication with surgical instrument systems
US11801098B2 (en) 2017-10-30 2023-10-31 Cilag Gmbh International Method of hub communication with surgical instrument systems
US11317919B2 (en) 2017-10-30 2022-05-03 Cilag Gmbh International Clip applier comprising a clip crimping system
US11311342B2 (en) 2017-10-30 2022-04-26 Cilag Gmbh International Method for communicating with surgical instrument systems
US11026687B2 (en) 2017-10-30 2021-06-08 Cilag Gmbh International Clip applier comprising clip advancing systems
US11291510B2 (en) 2017-10-30 2022-04-05 Cilag Gmbh International Method of hub communication with surgical instrument systems
US11759224B2 (en) 2017-10-30 2023-09-19 Cilag Gmbh International Surgical instrument systems comprising handle arrangements
US11911045B2 (en) 2017-10-30 2024-02-27 Cllag GmbH International Method for operating a powered articulating multi-clip applier
US11771487B2 (en) 2017-12-28 2023-10-03 Cilag Gmbh International Mechanisms for controlling different electromechanical systems of an electrosurgical instrument
US11864728B2 (en) 2017-12-28 2024-01-09 Cilag Gmbh International Characterization of tissue irregularities through the use of mono-chromatic light refractivity
US11529187B2 (en) 2017-12-28 2022-12-20 Cilag Gmbh International Surgical evacuation sensor arrangements
US11896443B2 (en) 2017-12-28 2024-02-13 Cilag Gmbh International Control of a surgical system through a surgical barrier
US11317937B2 (en) 2018-03-08 2022-05-03 Cilag Gmbh International Determining the state of an ultrasonic end effector
US11419667B2 (en) 2017-12-28 2022-08-23 Cilag Gmbh International Ultrasonic energy device which varies pressure applied by clamp arm to provide threshold control pressure at a cut progression location
US11832840B2 (en) 2017-12-28 2023-12-05 Cilag Gmbh International Surgical instrument having a flexible circuit
US10758310B2 (en) 2017-12-28 2020-09-01 Ethicon Llc Wireless pairing of a surgical device with another device within a sterile surgical field based on the usage and situational awareness of devices
US11786245B2 (en) 2017-12-28 2023-10-17 Cilag Gmbh International Surgical systems with prioritized data transmission capabilities
US11571234B2 (en) 2017-12-28 2023-02-07 Cilag Gmbh International Temperature control of ultrasonic end effector and control system therefor
US11464535B2 (en) 2017-12-28 2022-10-11 Cilag Gmbh International Detection of end effector emersion in liquid
US11937769B2 (en) 2017-12-28 2024-03-26 Cilag Gmbh International Method of hub communication, processing, storage and display
US11324557B2 (en) 2017-12-28 2022-05-10 Cilag Gmbh International Surgical instrument with a sensing array
US11832899B2 (en) 2017-12-28 2023-12-05 Cilag Gmbh International Surgical systems with autonomously adjustable control programs
US11969142B2 (en) 2017-12-28 2024-04-30 Cilag Gmbh International Method of compressing tissue within a stapling device and simultaneously displaying the location of the tissue within the jaws
US11602393B2 (en) 2017-12-28 2023-03-14 Cilag Gmbh International Surgical evacuation sensing and generator control
US11166772B2 (en) 2017-12-28 2021-11-09 Cilag Gmbh International Surgical hub coordination of control and communication of operating room devices
US11998193B2 (en) 2017-12-28 2024-06-04 Cilag Gmbh International Method for usage of the shroud as an aspect of sensing or controlling a powered surgical device, and a control algorithm to adjust its default operation
US20190201146A1 (en) 2017-12-28 2019-07-04 Ethicon Llc Safety systems for smart powered surgical stapling
US11844579B2 (en) 2017-12-28 2023-12-19 Cilag Gmbh International Adjustments based on airborne particle properties
US11257589B2 (en) 2017-12-28 2022-02-22 Cilag Gmbh International Real-time analysis of comprehensive cost of all instrumentation used in surgery utilizing data fluidity to track instruments through stocking and in-house processes
US11464559B2 (en) 2017-12-28 2022-10-11 Cilag Gmbh International Estimating state of ultrasonic end effector and control system therefor
US11678881B2 (en) 2017-12-28 2023-06-20 Cilag Gmbh International Spatial awareness of surgical hubs in operating rooms
US11423007B2 (en) 2017-12-28 2022-08-23 Cilag Gmbh International Adjustment of device control programs based on stratified contextual data in addition to the data
US11903601B2 (en) 2017-12-28 2024-02-20 Cilag Gmbh International Surgical instrument comprising a plurality of drive systems
US11896322B2 (en) 2017-12-28 2024-02-13 Cilag Gmbh International Sensing the patient position and contact utilizing the mono-polar return pad electrode to provide situational awareness to the hub
US11559307B2 (en) 2017-12-28 2023-01-24 Cilag Gmbh International Method of robotic hub communication, detection, and control
US11540855B2 (en) 2017-12-28 2023-01-03 Cilag Gmbh International Controlling activation of an ultrasonic surgical instrument according to the presence of tissue
US11857152B2 (en) 2017-12-28 2024-01-02 Cilag Gmbh International Surgical hub spatial awareness to determine devices in operating theater
US11410259B2 (en) 2017-12-28 2022-08-09 Cilag Gmbh International Adaptive control program updates for surgical devices
US11389164B2 (en) 2017-12-28 2022-07-19 Cilag Gmbh International Method of using reinforced flexible circuits with multiple sensors to optimize performance of radio frequency devices
US11311306B2 (en) 2017-12-28 2022-04-26 Cilag Gmbh International Surgical systems for detecting end effector tissue distribution irregularities
US11576677B2 (en) 2017-12-28 2023-02-14 Cilag Gmbh International Method of hub communication, processing, display, and cloud analytics
US11969216B2 (en) * 2017-12-28 2024-04-30 Cilag Gmbh International Surgical network recommendations from real time analysis of procedure variables against a baseline highlighting differences from the optimal solution
US11419630B2 (en) 2017-12-28 2022-08-23 Cilag Gmbh International Surgical system distributed processing
US11132462B2 (en) 2017-12-28 2021-09-28 Cilag Gmbh International Data stripping method to interrogate patient records and create anonymized record
US11308075B2 (en) 2017-12-28 2022-04-19 Cilag Gmbh International Surgical network, instrument, and cloud responses based on validation of received dataset and authentication of its source and integrity
US10892995B2 (en) 2017-12-28 2021-01-12 Ethicon Llc Surgical network determination of prioritization of communication, interaction, or processing based on system or device needs
US11291495B2 (en) 2017-12-28 2022-04-05 Cilag Gmbh International Interruption of energy due to inadvertent capacitive coupling
US11026751B2 (en) 2017-12-28 2021-06-08 Cilag Gmbh International Display of alignment of staple cartridge to prior linear staple line
US11666331B2 (en) 2017-12-28 2023-06-06 Cilag Gmbh International Systems for detecting proximity of surgical end effector to cancerous tissue
US11612408B2 (en) 2017-12-28 2023-03-28 Cilag Gmbh International Determining tissue composition via an ultrasonic system
US11013563B2 (en) 2017-12-28 2021-05-25 Ethicon Llc Drive arrangements for robot-assisted surgical platforms
US11659023B2 (en) 2017-12-28 2023-05-23 Cilag Gmbh International Method of hub communication
US11589888B2 (en) 2017-12-28 2023-02-28 Cilag Gmbh International Method for controlling smart energy devices
US11446052B2 (en) 2017-12-28 2022-09-20 Cilag Gmbh International Variation of radio frequency and ultrasonic power level in cooperation with varying clamp arm pressure to achieve predefined heat flux or power applied to tissue
US11559308B2 (en) 2017-12-28 2023-01-24 Cilag Gmbh International Method for smart energy device infrastructure
US11744604B2 (en) 2017-12-28 2023-09-05 Cilag Gmbh International Surgical instrument with a hardware-only control circuit
US11424027B2 (en) 2017-12-28 2022-08-23 Cilag Gmbh International Method for operating surgical instrument systems
US11633237B2 (en) 2017-12-28 2023-04-25 Cilag Gmbh International Usage and technique analysis of surgeon / staff performance against a baseline to optimize device utilization and performance for both current and future procedures
US11432885B2 (en) 2017-12-28 2022-09-06 Cilag Gmbh International Sensing arrangements for robot-assisted surgical platforms
US20190201118A1 (en) * 2017-12-28 2019-07-04 Ethicon Llc Display arrangements for robot-assisted surgical platforms
US11786251B2 (en) 2017-12-28 2023-10-17 Cilag Gmbh International Method for adaptive control schemes for surgical network control and interaction
US11818052B2 (en) 2017-12-28 2023-11-14 Cilag Gmbh International Surgical network determination of prioritization of communication, interaction, or processing based on system or device needs
US11202570B2 (en) 2017-12-28 2021-12-21 Cilag Gmbh International Communication hub and storage device for storing parameters and status of a surgical device to be shared with cloud based analytics systems
US11109866B2 (en) 2017-12-28 2021-09-07 Cilag Gmbh International Method for circular stapler control algorithm adjustment based on situational awareness
US11364075B2 (en) 2017-12-28 2022-06-21 Cilag Gmbh International Radio frequency energy device for delivering combined electrical signals
US11707293B2 (en) 2018-03-08 2023-07-25 Cilag Gmbh International Ultrasonic sealing algorithm with temperature control
US11259830B2 (en) 2018-03-08 2022-03-01 Cilag Gmbh International Methods for controlling temperature in ultrasonic device
US11701162B2 (en) 2018-03-08 2023-07-18 Cilag Gmbh International Smart blade application for reusable and disposable devices
US11259806B2 (en) 2018-03-28 2022-03-01 Cilag Gmbh International Surgical stapling devices with features for blocking advancement of a camming assembly of an incompatible cartridge installed therein
US11406382B2 (en) 2018-03-28 2022-08-09 Cilag Gmbh International Staple cartridge comprising a lockout key configured to lift a firing member
US11471156B2 (en) 2018-03-28 2022-10-18 Cilag Gmbh International Surgical stapling devices with improved rotary driven closure systems
US11090047B2 (en) 2018-03-28 2021-08-17 Cilag Gmbh International Surgical instrument comprising an adaptive control system
US11278280B2 (en) 2018-03-28 2022-03-22 Cilag Gmbh International Surgical instrument comprising a jaw closure lockout
US20190378610A1 (en) * 2018-06-06 2019-12-12 Verily Life Sciences Llc Robotic surgery using multi-user authentication without credentials
GB2612245B (en) * 2018-10-03 2023-08-30 Cmr Surgical Ltd Automatic endoscope video augmentation
GB2608752B (en) * 2018-10-03 2023-06-14 Cmr Surgical Ltd Methods and systems for providing assistance to a user of a surgical robot system
US11751872B2 (en) 2019-02-19 2023-09-12 Cilag Gmbh International Insertable deactivator element for surgical stapler lockouts
US11298129B2 (en) 2019-02-19 2022-04-12 Cilag Gmbh International Method for providing an authentication lockout in a surgical stapler with a replaceable cartridge
US11357503B2 (en) 2019-02-19 2022-06-14 Cilag Gmbh International Staple cartridge retainers with frangible retention features and methods of using same
US11317915B2 (en) 2019-02-19 2022-05-03 Cilag Gmbh International Universal cartridge based key feature that unlocks multiple lockout arrangements in different surgical staplers
US11369377B2 (en) 2019-02-19 2022-06-28 Cilag Gmbh International Surgical stapling assembly with cartridge based retainer configured to unlock a firing lockout
USD964564S1 (en) 2019-06-25 2022-09-20 Cilag Gmbh International Surgical staple cartridge retainer with a closure system authentication key
USD952144S1 (en) 2019-06-25 2022-05-17 Cilag Gmbh International Surgical staple cartridge retainer with firing system authentication key
USD950728S1 (en) 2019-06-25 2022-05-03 Cilag Gmbh International Surgical staple cartridge
JP2021029258A (ja) * 2019-08-13 2021-03-01 ソニー株式会社 手術支援システム、手術支援方法、情報処理装置、及び情報処理プログラム
EP3822981A1 (en) * 2019-11-15 2021-05-19 Koninklijke Philips N.V. Image acquisition visuals for augmented reality
CN111568558B (zh) * 2020-04-13 2022-02-22 上海市胸科医院 电子设备、手术机器人***及其控制方法
FR3110764B1 (fr) * 2020-05-20 2024-05-10 Quantum Surgical Méthode de prédiction de la récidive d’une lésion par analyse d’images
US20220353463A1 (en) * 2021-05-03 2022-11-03 Udo, LLC Two-way camera operation

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007111126A (ja) 2005-10-18 2007-05-10 Hitachi Medical Corp 手術支援装置
JP2011206180A (ja) 2010-03-29 2011-10-20 Olympus Corp 操作入力装置およびマニピュレータシステム
US20130041368A1 (en) 2011-08-09 2013-02-14 Tyco Healthcare Group Lp Apparatus and Method for Using a Remote Control System in Surgical Procedures

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6810281B2 (en) * 2000-12-21 2004-10-26 Endovia Medical, Inc. Medical mapping system
ES2216789T3 (es) * 2000-09-26 2004-11-01 Brainlab Ag Sistema para la orientacion asistida por navegacion de elementos sobre un cuerpo.
US8010180B2 (en) * 2002-03-06 2011-08-30 Mako Surgical Corp. Haptic guidance system and method
US20080020362A1 (en) * 2004-08-10 2008-01-24 Cotin Stephane M Methods and Apparatus for Simulaton of Endovascular and Endoluminal Procedures
US8147503B2 (en) * 2007-09-30 2012-04-03 Intuitive Surgical Operations Inc. Methods of locating and tracking robotic instruments in robotic surgical systems
JP4488312B2 (ja) * 2005-07-08 2010-06-23 オリンパス株式会社 医療用マニピュレータシステム
WO2007146984A2 (en) * 2006-06-13 2007-12-21 Intuitive Surgical, Inc. Control system configured to compensate for non-ideal actuator-to-joint linkage characteristics in a medical robotic system
US9135804B2 (en) * 2012-03-23 2015-09-15 Persimmon Scientific, Inc. Systems and methods for assessing risks of pressure ulcers
US9498182B2 (en) * 2012-05-22 2016-11-22 Covidien Lp Systems and methods for planning and navigation
US9220570B2 (en) * 2012-06-29 2015-12-29 Children's National Medical Center Automated surgical and interventional procedures
KR101806195B1 (ko) * 2012-07-10 2018-01-11 큐렉소 주식회사 수술로봇 시스템 및 수술로봇 제어방법
KR101533353B1 (ko) * 2013-06-21 2015-07-03 삼성전자주식회사 환자 정보와 진단 정보를 이용하여 의료 기기의 동작을 제어하기 위한 방법 및 장치
US10194991B2 (en) * 2014-12-08 2019-02-05 Think Surgical, Inc. Implant based planning, digitizing, and registration for total joint arthroplasty
US9694496B2 (en) * 2015-02-26 2017-07-04 Toyota Jidosha Kabushiki Kaisha Providing personalized patient care based on electronic health record associated with a user
WO2016187002A1 (en) * 2015-05-15 2016-11-24 Mako Surgical Corp. Systems and methods for providing guidance for a robotic medical procedure
WO2017028916A1 (en) * 2015-08-19 2017-02-23 Brainlab Ag Reference array holder
WO2017037705A1 (en) * 2015-08-30 2017-03-09 M.S.T. Medical Surgery Technologies Ltd An intelligent surgical tool control system for laparoscopic surgeries

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007111126A (ja) 2005-10-18 2007-05-10 Hitachi Medical Corp 手術支援装置
JP2011206180A (ja) 2010-03-29 2011-10-20 Olympus Corp 操作入力装置およびマニピュレータシステム
US20130041368A1 (en) 2011-08-09 2013-02-14 Tyco Healthcare Group Lp Apparatus and Method for Using a Remote Control System in Surgical Procedures

Also Published As

Publication number Publication date
KR20230003653A (ko) 2023-01-06
WO2018089812A1 (en) 2018-05-17
JP2022159486A (ja) 2022-10-17
EP3538011A4 (en) 2020-07-01
CN109996508B (zh) 2024-03-15
EP3538011A1 (en) 2019-09-18
KR20190070356A (ko) 2019-06-20
JP2019536537A (ja) 2019-12-19
CN109996508A (zh) 2019-07-09
US20190282311A1 (en) 2019-09-19
JP7503105B2 (ja) 2024-06-19

Similar Documents

Publication Publication Date Title
JP7503105B2 (ja) 患者健康記録ベース器具制御を備える遠隔操作手術システム
US11737841B2 (en) Configuring surgical system with surgical procedures atlas
JP7239471B2 (ja) 手術器具摩耗トラッキングを備える遠隔操作手術システム
JP2024014885A (ja) 走査ベースの位置付けを伴う遠隔操作手術システム
US20240197421A1 (en) Teleoperated surgical system with surgeon skill level based instrument control

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190709

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201028

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210824

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210827

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211119

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220419

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20220818

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20221220

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20230307

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230606

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20231017

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240215

R150 Certificate of patent or registration of utility model

Ref document number: 7440262

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150