JP6965338B2 - 医療用観察装置、制御装置、及び観察視野補正方法 - Google Patents

Description

本開示は、医療用観察装置及び観察視野補正方法に関する。

例えば脳神経外科等の微細な領域が対象となる外科手術（いわゆるマイクロサージェリー）において、患部を拡大観察するための観察装置が用いられている。観察装置は、アーム部（支持部）によって顕微鏡部が支持されて構成される。

観察装置としては、光学式の顕微鏡部を備える観察装置（以下、光学式の観察装置ともいう）が主流である。光学式の観察装置を用いた手術では、術者は、顕微鏡部に設けられる接眼部から当該顕微鏡部を直接覗き込んで患部を拡大観察しながら、処置具によって当該患部に対して各種の処置を行う。

一方、近年、画像処理技術が進歩したことや、映像の高解像度化が実現したことにより、撮像素子を有し、患部を電子的に撮影することが可能な電子撮像式の顕微鏡部を備える観察装置（以下、電子撮像式の観察装置ともいう）が開発されている（例えば、特許文献１）。電子撮像式の観察装置を用いた手術では、顕微鏡部によって撮影された映像が適宜拡大されて表示装置に表示される。術者は、その表示された映像（表示映像）によって患部及び処置具の状態を確認しながら、当該処置具によって当該患部に対して各種の処置を行う。

なお、本明細書では、観察装置の顕微鏡部を介して術者によって得られる視野のことを、観察視野と呼称する。光学式の観察装置であれば、観察視野は、光学式の顕微鏡部を覗き込むことによって術者が観察できている範囲に対応する。電子撮像式の観察装置であれば、観察視野は、表示映像の範囲（表示装置に映し出されている映像の範囲）に対応する。

国際公開第２０１５／０４６０８１号 特開平９−２８６６３号公報

観察装置を用いた手術では、様々な方向から患部を観察するため、又は拡大倍率を変更して患部を観察するために、手術中に顕微鏡部に対する操作が頻繁に行われ得る。この際、観察装置では、患部が拡大して観察されているから、顕微鏡部に対する僅かな操作によっても観察視野が大きく移動してしまい、患部が観察視野の中心近傍から外れてしまう恐れがある。患部が観察視野の中心近傍から大きく外れてしまうと、当該患部が当該観察視野の中心近傍に位置するように顕微鏡部の位置及び姿勢を微調整する作業が生じることとなる。当該作業によって手術が中断されることは、円滑な手術の進行の妨げになるとともに、術者にとって精神的な負担となっていた。

ここで、内視鏡下手術を支援するための技術として、特許文献２には、内視鏡によって撮影された映像に基づいて処置具の位置情報を取得する位置検出手段と、当該位置情報に基づいて、処置具の先端部分が表示映像の略中心に位置するように、当該内視鏡の撮像光学系を駆動させてその撮影範囲を変更する制御手段と、を備える内視鏡装置が開示されている。当該内視鏡装置によれば、内視鏡の撮影範囲に処置具の先端部分が常に含まれるように、自動的に当該撮影範囲が変更され得る。従って、所望の映像が得られるように人手で内視鏡を操作する必要がないため、円滑に手術を進行することが可能になる。当該特許文献２に記載の技術を観察装置に適用することにより、上述した顕微鏡部の観察視野の移動に伴う不具合を解消することができる可能性がある。

しかしながら、特許文献２に記載の技術は、内視鏡装置に関するものである。従って、当該技術をそのまま観察装置に適用したとしても、同様の効果が得られるとは限らない。

そこで、本開示では、手術をより円滑に進行することが可能な、新規かつ改良された医療用観察装置及び観察視野補正方法を提案する。

本開示によれば、観察対象を撮影した撮影映像についてのデータである撮影映像データを取得する撮像部と、前記撮像部を支持する支持部と、前記撮像部の動作に関する所定の操作であるトリガ操作を検出するトリガ操作検出部と、前記撮影映像データに基づいて、前記撮影映像に含まれる処置具の形態を認識する処置具認識部と、前記トリガ操作検出部によって前記トリガ操作が検出された場合に、前記処置具認識部によって認識された前記処置具の形態に基づいて、前記撮影映像データに基づいて表示装置に表示される表示映像の範囲である観察視野を補正する観察視野補正部と、を備える、医療用観察装置が提供される。

また、本開示によれば、支持部によって支持された撮像部の動作に関する所定の操作であるトリガ操作を検出することと、前記撮像部によって取得された観察対象を撮影した撮影映像についてのデータである撮影映像データに基づいて、前記撮影映像に含まれる処置具の形態を認識することと、前記トリガ操作が検出された場合に、認識された前記処置具の形態に基づいて、前記撮影映像データに基づいて表示装置に表示される表示映像の範囲である観察視野を補正することと、を含む、観察視野補正方法が提供される。

本開示によれば、撮像部の動作に関する所定の操作であるトリガ操作が検出された場合に（すなわち、撮像部の動作に関する所定の操作が行われた場合に）、認識された処置具の形態に基づいて、観察視野が補正される。従って、当該所定の操作が行われ、撮像部が動作した場合に、ユーザが追加的な作業を行わなくても、手術を続行するために適切な観察視野を得ることができる。よって、手術のより円滑な進行が実現され得る。

以上説明したように本開示によれば、手術をより円滑に進行することが可能になる。なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、又は上記の効果に代えて、本明細書に示されたいずれかの効果、又は本明細書から把握され得る他の効果が奏されてもよい。

第１の実施形態に係る観察システム及び観察装置の一構成例を概略的に示す図である。 図１に示す観察システムを用いた手術の様子を示す図である。 脳外科手術における脳と顕微鏡部との位置関係の一例を概略的に示す図である。 第１の実施形態に係る制御装置の機能構成の一例を示すブロック図である。 第１の実施形態に係る観察視野補正機能が搭載されない、一般的な既存の観察装置における観察視野の変更時の動作について説明するための図である。 第１の実施形態に係る観察視野補正機能が搭載されない、一般的な既存の観察装置における観察視野の変更時の動作について説明するための図である。 第１の実施形態に係る観察装置における観察視野の変更時の動作について説明するための図である。 第１の実施形態に係る観察装置における観察視野の変更時の動作について説明するための図である。 第１の実施形態に係る観察視野補正方法の処理手順の一例を示すフロー図である。 第２の実施形態に係る制御装置の機能構成の一例を示すブロック図である。 第２の実施形態に係る観察視野補正方法の処理手順の一例を示すフロー図である。

以下に添付図面を参照しながら、本開示の好適な実施形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

なお、説明は以下の順序で行うものとする。
１．第１の実施形態
１−１．観察システム及び観察装置の構成
１−２．制御装置の機能構成
１−３．観察視野補正方法
２．第２の実施形態
２−１．制御装置の機能構成
２−２．観察視野補正方法
３．変形例
３−１．処置具の認識処理、及び観察視野中心目標の決定処理の他の方法
３−２．観察装置の他の構成例
４．補足

なお、以下の説明では、後述する観察システム及び観察装置を用いるユーザのことを、便宜的に術者と記載することとする。ただし、この記載は、観察システム及び観察装置を用いるユーザを限定するものではなく、当該観察システム及び当該観察装置を用いる主体は、助手や看護師等、他の医療スタッフであってもよい。

（１．第１の実施形態）
（１−１．観察システム及び観察装置の構成）
図１を参照して、本開示の第１の実施形態に係る観察システム及び観察装置の構成について説明する。図１は、第１の実施形態に係る観察システム及び観察装置の一構成例を概略的に示す図である。

図１を参照すると、第１の実施形態に係る観察システム１は、患者の患部を拡大観察するための電子撮像式の観察装置１０と、観察装置１０によって撮影された映像を表示する表示装置２０と、から構成される。観察システム１は、手術又は検査等の医療行為を行う際に、患者の身体の一部である観察対象部位（手術対象部位又は検査対象部位）を観察するための医療用観察システムである。手術時又は検査時には、術者は、観察装置１０によって撮影され表示装置２０に表示された映像を介して、観察対象部位を観察し、必要に応じて当該観察対象部位に対して各種の処置を行う。以下では、一例として、観察システム１を用いて手術を行う場合について説明することとし、その観察対象部位（手術対象部位）のことを患部とも呼称することとする。

（表示装置）
表示装置２０は、後述する観察装置１０の制御装置１５０からの制御により、観察装置１０によって撮影された映像を表示する。表示装置２０は、例えば手術室の壁面等、手術室内において術者によって視認され得る場所に設置される。表示装置２０の種類は特に限定されず、表示装置２０としては、例えば、ＣＲＴ（Cathode Ray Tube）ディスプレイ装置、液晶ディスプレイ装置、プラズマディスプレイ装置、ＥＬ（Electro−Luminescence）ディスプレイ装置等、各種の公知の表示装置が用いられてよい。また、表示装置２０は、必ずしも手術室内に設置されなくてもよく、ヘッドマウントディスプレイ（ＨＭＤ：Head Mounted Display）や眼鏡型のウェアラブルデバイスのように、術者が身に付けて使用するデバイスに搭載されてもよい。

なお、後述するように、例えば観察装置１０の顕微鏡部１１０の撮像部がステレオカメラとして構成される場合、又は高解像度の撮影が可能に構成される場合には、それに対応して、３Ｄ表示可能な、又は高解像度での表示が可能な表示装置２０が用いられ得る。

（観察装置）
観察装置１０は、患者の患部を拡大観察するための顕微鏡部１１０と、顕微鏡部１１０を支持するアーム部１２０（支持部１２０）と、支持部１２０の基端が接続され顕微鏡部１１０及び支持部１２０を支持するベース部５３１５と、観察システム１及び観察装置１０の動作を制御する制御装置１５０と、を備える。

なお、以下の説明では、観察装置１０が設置される床面に対して鉛直な方向をＺ軸方向と定義する。Ｚ軸方向のことを上下方向とも呼称する。また、Ｚ軸方向と直交する方向であって、ベース部５３１５から支持部１２０が延伸する方向を、Ｘ軸方向と定義する。Ｘ軸方向のことを前後方向とも呼称する。また、Ｘ軸方向及びＺ軸方向とともに直交する方向を、Ｙ軸方向と定義する。Ｙ軸方向のことを左右方向とも呼称する。また、Ｘ−Ｙ平面と平行な面のことを水平面とも呼称し、当該水平面と平行な方向のこと水平方向とも呼称する。

（ベース部）
ベース部５３１５は、顕微鏡部１１０及び支持部１２０を支持する。ベース部５３１５は板状の形状を有する架台と、当該架台の下面に設けられる複数のキャスターと、を有する。当該架台の上面に支持部１２０の一端が接続され、当該架台から延伸される支持部１２０の他端（先端）に顕微鏡部１１０が接続される。また、観察装置１０は、キャスターを介して床面と接地し、当該キャスターによって床面上を移動可能に構成されている。

（顕微鏡部）
顕微鏡部１１０は、電子撮像式の顕微鏡部である。図示する例では、顕微鏡部１１０の光軸方向は、Ｚ軸方向と略一致している。顕微鏡部１１０は、略円筒形状を有する筐体である筒状部５３０５と、筒状部５３０５内に設けられる撮像部（図示せず）と、から構成される。

筒状部５３０５の下端の開口面から、観察対象からの光（観察光）が撮像部に入射する。撮像部は、撮像素子と、当該撮像素子に観察光を集光する光学系と、から構成されており、撮像部に入射した観察光は、当該光学系を介して撮像素子の受光面に集光される。観察光が当該撮像素子によって光電変換されることにより、観察対象の映像に係るデータ（映像データ）が取得される。撮像部によって取得された映像データは、制御装置１５０に送信される。

なお、撮像部は、その光学系のズームレンズ及びフォーカスレンズを光軸に沿って移動させる駆動機構を有してもよい。当該駆動機構によってズームレンズ及びフォーカスレンズが適宜移動されることにより、撮像画像の拡大倍率及び撮像時のピントがそれぞれ調整され得る。また、撮像部には、ＡＥ（Auto Exposure）機能やＡＦ（Auto Focus）機能等、一般的に電子撮像式の顕微鏡部に備えられ得る各種の機能が搭載されてもよい。

また、撮像部は、１つの撮像素子を有するいわゆる単板式の撮像部として構成されてもよいし、複数の撮像素子を有するいわゆる多板式の撮像部として構成されてもよい。撮像部が多板式で構成される場合には、当該撮像部は、例えば、立体視（３Ｄ表示）に対応する右目用及び左目用の画像信号をそれぞれ取得するための１対の撮像素子を有するように構成されてもよい。３Ｄ表示が行われることにより、術者は患部における生体組織の奥行きをより正確に把握することが可能になる。なお、当該撮像部が多板式で構成される場合には、各撮像素子に対応して、光学系も複数系統が設けられ得る。なお、撮像部に搭載される撮像素子は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ又はＣＣＤ（Charge Coupled Device）イメージセンサ等、各種の公知の撮像素子であってよい。

顕微鏡部１１０において、筒状部５３０５の外壁には、顕微鏡部１１０の動作を制御するための操作部５３０７が設けられる。操作部５３０７は、例えば十字レバー又はスイッチ等によって構成される。

例えば、操作部５３０７には、ズームスイッチ（ズームＳＷ）及びフォーカススイッチ（フォーカスＳＷ）が設けられ得る。術者は、当該ズームＳＷ及び当該フォーカスＳＷを介して、顕微鏡部１１０の拡大倍率及びピントをそれぞれ調整する旨の指示を入力することができる。上記撮像部には、当該ズームＳＷ及び当該フォーカスＳＷを介した指示入力に従って撮像部の駆動機構がズームレンズ及びフォーカスレンズを適宜移動させることにより、拡大倍率及びピントが調整され得る。なお、以下では、術者が顕微鏡部１１０における拡大倍率（すなわち、撮像部における拡大倍率）を変更しようとする操作のことをズーム操作とも呼称する。ズーム操作は、上記ズームＳＷを介した、拡大倍率を指定する旨の操作であり得る。

また、例えば、操作部５３０７には、動作モード切り替えスイッチ（動作モード切り替えＳＷ）が設けられ得る。術者は、当該動作モード切り替えＳＷを介して、支持部１２０の動作モードを、フリーモード及び固定モードのいずれかに切り替える旨の指示を入力することができる。ここで、固定モードは、支持部１２０の各回転軸における回転がブレーキにより規制されることにより、顕微鏡部１１０の位置及び姿勢が固定される動作モードである。フリーモードは、当該ブレーキが解除されることにより、支持部１２０の各回転軸が自由に回転可能な動作モードである。例えば、フリーモードでは、術者による直接的な操作によって顕微鏡部１１０の位置及び姿勢を調整可能である。ここで、直接的な操作とは、術者が手で顕微鏡部１１０を把持し、当該顕微鏡部１１０を直接移動させる操作のことを意味する。例えば、術者が操作部５３０７における動作モード切り替えＳＷを押下している間は支持部１２０の動作モードがフリーモードとなり、術者が当該動作モード切り替えＳＷから手を離している間は支持部１２０の動作モードが固定モードとなる。

なお、上記のように、術者が顕微鏡部１１０を移動させようとする場合には、直接的な操作、すなわち当該術者が筒状部５３０５を握るように把持した状態で当該顕微鏡部１１０を移動させる様態が想定される。従って、操作部５３０７（特に動作モード切り替えＳＷ）は、術者が筒状部５３０５を移動させている間でも操作可能なように、術者が筒状部５３０５を握った状態で指によって容易に操作しやすい位置に設けられることが好ましい。

（支持部）
支持部１２０は、顕微鏡部１１０を３次元的に移動させるとともに、移動後の顕微鏡部１１０について、その位置及び姿勢を固定的に支持する。第１の実施形態では、支持部１２０は、６自由度を有するアームとして構成されている。ただし、第２の実施形態はかかる例に限定されず、支持部１２０は、用途に応じて顕微鏡部１１０を適宜移動し得るように構成されればよく、他の異なる数の自由度を有するように構成されてもよい。

支持部１２０には、６自由度に対応する６つの回転軸（第１軸Ｏ_１、第２軸Ｏ_２、第３軸Ｏ_２、第４軸Ｏ_４、第５軸Ｏ_５及び第６軸Ｏ_６）が設けられる。以下では、説明のため便宜的に、各回転軸を構成する部材をまとめて、回転軸部と呼称することとする。例えば、回転軸部は、軸受、当該軸受に回動可能に挿通されるシャフト、及び回転軸における回転を規制するブレーキ等によって構成され得る。

支持部１２０は、複数のリンク（第１アーム部５３１３ａ〜第６アーム部５３１３ｆ）が、６つの回転軸に対応する複数の回転軸部（第１回転軸部５３１１ａ〜第６回転軸部５３１１ｆ）によって互いに回動可能に連結されることによって構成される。

第１回転軸部５３１１ａは、略円柱形状を有し、その先端（下端）で、顕微鏡部１１０の筒状部５３０５の上端を、当該筒状部５３０５の中心軸と平行な回転軸（第１軸Ｏ_１）まわりに回動可能に支持する。ここで、第１回転軸部５３１１ａは、第１軸Ｏ_１が顕微鏡部１１０の撮像部の光軸と一致するように構成され得る。かかる構成により、第１軸Ｏ_１まわりに顕微鏡部１１０を回動させることにより、撮像画像を回転させるように視野を変更することが可能になる。

第１アーム部５３１３ａは、先端で第１回転軸部５３１１ａを固定的に支持する。具体的には、第１アーム部５３１３ａは略Ｌ字形状を有する棒状の部材であり、その先端側の一辺が第１軸Ｏ_１と直交する方向に延伸しつつ、当該一辺の端部が第１回転軸部５３１１ａの外周の上端部に当接するように、第１回転軸部５３１１ａに接続される。第１アーム部５３１３ａの略Ｌ字形状の基端側の他辺の端部に第２回転軸部５３１１ｂが接続される。

第２回転軸部５３１１ｂは、略円柱形状を有し、その先端で、第１アーム部５３１３ａの基端を、第１軸Ｏ_１と直交する回転軸（第２軸Ｏ_２）まわりに回動可能に支持する。第２回転軸部５３１１ｂの基端には、第２アーム部５３１３ｂの先端が固定的に接続される。

第２アーム部５３１３ｂは、略Ｌ字形状を有する棒状の部材であり、その先端側の一辺が第２軸Ｏ_２と直交する方向に延伸しつつ、当該一辺の端部が第２回転軸部５３１１ｂの基端に固定的に接続される。第２アーム部５３１３ｂの略Ｌ字形状の基端側の他辺には、第３回転軸部５３１１ｃが接続される。

第３回転軸部５３１１ｃは、略円柱形状を有し、その先端で、第２アーム部５３１３ｂの基端を、第１軸Ｏ_１及び第２軸Ｏ_２と互いに直交する回転軸（第３軸Ｏ_３）まわりに回動可能に支持する。第３回転軸部５３１１ｃの基端には、第３アーム部５３１３ｃの先端が固定的に接続される。第２軸Ｏ_２及び第３軸Ｏ_３まわりに顕微鏡部１１０を含む先端側の構成を回動させることにより、水平面内での顕微鏡部１１０の位置を変更するように、当該顕微鏡部１１０を移動させることができる。つまり、第２軸Ｏ_２及び第３軸Ｏ_３まわりの回転を制御することにより、撮像画像の視野を平面内で移動させることが可能になる。

第３アーム部５３１３ｃは、その先端側が略円柱形状を有するように構成されており、当該円柱形状の先端に、第３回転軸部５３１１ｃの基端が、両者が略同一の中心軸を有するように、固定的に接続される。第３アーム部５３１３ｃの基端側は角柱形状を有し、その端部に第４回転軸部５３１１ｄが接続される。

第４回転軸部５３１１ｄは、略円柱形状を有し、その先端で、第３アーム部５３１３ｃの基端を、第３軸Ｏ_３と直交する回転軸（第４軸Ｏ_４）まわりに回動可能に支持する。第４回転軸部５３１１ｄの基端には、第４アーム部５３１３ｄの先端が固定的に接続される。

第４アーム部５３１３ｄは、略直線状に延伸する棒状の部材であり、第４軸Ｏ_４と直交するように延伸しつつ、その先端の端部が第４回転軸部５３１１ｄの略円柱形状の側面に当接するように、第４回転軸部５３１１ｄに固定的に接続される。第４アーム部５３１３ｄの基端には、第５回転軸部５３１１ｅが接続される。

第５回転軸部５３１１ｅは、略円柱形状を有し、その先端側で、第４アーム部５３１３ｄの基端を、第４軸Ｏ_４と平行な回転軸（第５軸Ｏ_５）まわりに回動可能に支持する。第５回転軸部５３１１ｅの基端には、第５アーム部５３１３ｅの先端が固定的に接続される。第４軸Ｏ_４及び第５軸Ｏ_５は、顕微鏡部１１０を上下方向に移動させ得る回転軸である。第４軸Ｏ_４及び第５軸Ｏ_５まわりに顕微鏡部１１０を含む先端側の構成を回動させることにより、顕微鏡部１１０の高さ、すなわち顕微鏡部１１０と観察対象との距離を調整することができる。

第５アーム部５３１３ｅは、一辺が鉛直方向に延伸するとともに他辺が水平方向に延伸する略Ｌ字形状を有する第１の部材と、当該第１の部材の水平方向に延伸する部位から鉛直下向きに延伸する棒状の第２の部材と、が組み合わされて構成される。第５アーム部５３１３ｅの第１の部材の鉛直方向に延伸する部位の上端近傍に、第５回転軸部５３１１ｅの基端が固定的に接続される。第５アーム部５３１３ｅの第２の部材の基端（下端）には、第６回転軸部５３１１ｆが接続される。

第６回転軸部５３１１ｆは、略円柱形状を有し、その先端側で、第５アーム部５３１３ｅの基端を、鉛直方向と平行な回転軸（第６軸Ｏ_６）まわりに回動可能に支持する。第６回転軸部５３１１ｆの基端には、第６アーム部５３１３ｆの先端が固定的に接続される。

第６アーム部５３１３ｆは鉛直方向に延伸する棒状の部材であり、その基端はベース部５３１５の上面に固定的に接続される。

第１回転軸部５３１１ａ〜第６回転軸部５３１１ｆの回転可能範囲は、顕微鏡部１１０が所望の動きを可能であるように適宜設定されている。これにより、以上説明した構成を有する支持部１２０においては、顕微鏡部１１０の動きに関して、並進３自由度及び回転３自由度の計６自由度の動きが実現され得る。このように、顕微鏡部１１０の動きに関して６自由度が実現されるように支持部１２０を構成することにより、支持部１２０の可動範囲内において顕微鏡部１１０の位置及び姿勢を自由に制御することが可能になる。従って、あらゆる角度から患部を観察することが可能となり、手術をより円滑に実行することができる。

支持部１２０の第１回転軸部５３１１ａ〜第６回転軸部５３１１ｆには、モータ等の駆動機構、及び各関節部における回転角度を検出するエンコーダ等が搭載されたアクチュエータがそれぞれ設けられ得る。そして、第１回転軸部５３１１ａ〜第６回転軸部５３１１ｆに設けられる各アクチュエータの駆動が制御装置１５０によって適宜制御されることにより、支持部１２０の姿勢、すなわち顕微鏡部１１０の位置及び姿勢が制御され得る。具体的には、制御装置１５０は、エンコーダによって検出された各回転軸部の回転角度についての情報に基づいて、支持部１２０の現在の姿勢、並びに顕微鏡部１１０の現在の位置及び姿勢を把握することができる。制御装置１５０は、把握したこれらの情報を用いて、術者からの操作入力に応じた顕微鏡部１１０の移動を実現するような各回転軸部に対する制御値（例えば、回転角度又は発生トルク等）を算出し、当該制御値に応じて各回転軸部の駆動機構を駆動させる。なお、この際、制御装置１５０による支持部１２０の制御方式は限定されず、力制御又は位置制御等、各種の公知の制御方式が適用されてよい。例えば、当該制御方式としては、本願出願人による先行出願である、上記特許文献１に記載の制御方式を用いることができる。

例えば、力制御が適用される場合には、術者による直接的な操作において、当該術者から受ける外力にならってスムーズに支持部１２０が移動するように第１回転軸部５３１１ａ〜第６回転軸部５３１１ｆのアクチュエータが駆動される、いわゆるパワーアシスト制御が行われてもよい。これにより、術者が直接的な操作において顕微鏡部１１０を把持して直接その位置を移動させようとする際に、比較的軽い力で顕微鏡部１１０を移動させることができる。従って、より直感的に、より簡易な操作で顕微鏡部１１０を移動させることが可能となり、術者の利便性を向上させることができる。

あるいは、位置制御が適用される場合には、術者が、図示しない入力装置を介して適宜操作入力を行うことにより、当該操作入力に応じて制御装置１５０によって第１回転軸部５３１１ａ〜第６回転軸部５３１１ｆのアクチュエータの駆動が適宜制御され、顕微鏡部１１０の位置及び姿勢が制御されてよい。なお、当該入力装置としては、術者の利便性を考慮して、例えばフットスイッチ等、術者が手に術具を有していても操作可能なものが適用されることが好ましい。また、ウェアラブルデバイスや手術室内に設けられるカメラを用いたジェスチャ検出や視線検出に基づいて、あるいは手術室内に設けられるマイクロフォンを用いた音声検出に基づいて、非接触で操作入力が行われてもよい。これにより、清潔域に属する術者であっても、不潔域に属する観察装置をより自由度高く操作することが可能になる。あるいは、支持部１２０は、いわゆるマスタースレイブ方式で操作されてもよい。この場合、支持部１２０は、手術室から離れた場所に設置される入力装置を介して術者によって遠隔操作され得る。

なお、以下では、術者が顕微鏡部１１０（すなわち、撮像部）を移動させようとする操作のことを移動操作とも呼称する。移動操作は、直接的な操作も含み得るし、フットスイッチ等の入力装置を介した操作、又はジェスチャ等を介した非接触の操作も含み得る。

また、第１回転軸部５３１１ａ〜第６回転軸部５３１１ｆには、それぞれ、第１回転軸部５３１１ａ〜第６回転軸部５３１１ｆにおける回転を規制するブレーキが設けられる。これらのブレーキの駆動は、制御装置１５０によって制御される。例えば、顕微鏡部１１０の位置及び姿勢を固定したい場合には、制御装置１５０は各回転軸部のブレーキを作動させる。これにより、アクチュエータを駆動させなくても支持部１２０の姿勢、すなわち顕微鏡部１１０の位置及び姿勢が固定され得るため、消費電力を低減させることができる。顕微鏡部１１０の位置及び姿勢を変更した場合には、制御装置１５０は、各回転軸部のブレーキを解除し、所定の制御方式に従ってアクチュエータを駆動させればよい。

直接的な操作においては、このようなブレーキの動作は、上述したように、操作部５３０７の動作モード切り替えＳＷを介した術者による指示入力に応じて切り替えられ得る。動作モード切り替えＳＷを介した術者による指示入力に応じて、制御装置１５０からの制御によりこれらのブレーキが一斉に解除されることにより、支持部１２０の動作モードがフリーモードに移行する。また、同じく、動作モード切り替えＳＷを介した術者による指示入力に応じて、制御装置１５０からの制御によりこれらのブレーキが一斉に駆動させられることにより、支持部１２０の動作モードが固定モードに移行する。

なお、第１回転軸部５３１１ａ〜第６回転軸部５３１１ｆに設けられるブレーキとしては、一般的な観察装置に用いられる各種のブレーキが適用されてよく、その具体的な機構は限定されない。例えば、これらのブレーキは、機械的に駆動するものであってもよいし、電気的に駆動する電磁ブレーキであってもよい。

なお、図示する支持部１２０の構成はあくまで一例であり、支持部１２０を構成するリンクの数及び形状（長さ）、並びに回転軸部の数、配置位置及び回転軸の方向等は、所望の自由度が実現され得るように適宜設計されてよい。ただし、上述したように、顕微鏡部１１０を自由に動かすためには、支持部１２０は少なくとも６自由度を有するように構成されることが好ましい。また、支持部１２０としては、各種の公知の観察装置の支持部と同様の構成が適用されてよい。例えば、支持部１２０において、第２回転軸部５３１１ｂ及び第３回転軸部５３１１ｃの代わりに、顕微鏡部１１０を水平面内においてＸ軸方向及びＹ軸方向に移動可能なＸ−Ｙ装置が設けられてもよい。

（制御装置）
制御装置１５０は、観察装置１０の動作を制御する。また、制御装置１５０は、表示装置２０の動作も併せて制御する。つまり、制御装置１５０は、観察システム１の動作を統括的に制御し得る。

制御装置１５０は、例えばＣＰＵ（Central Processing Unit）やＤＳＰ（Digital Signal Processor）等のプロセッサ、又はこれらのプロセッサとメモリ等の記憶素子がともに搭載された制御基板等によって構成される。制御装置１５０を構成するプロセッサが所定のプログラムに従って演算処理を実行することにより、制御装置１５０における各機能が実現される。

制御装置１５０は、所定の制御方式に従って第１回転軸部５３１１ａ〜第６回転軸部５３１１ｆのアクチュエータを動作させることにより、支持部１２０の動作を制御する。また、制御装置１５０は、上述した操作部５３０７を介した術者の操作入力に応じて、支持部１２０の各回転軸部に設けられるブレーキの駆動を制御することにより、上述した支持部１２０の動作モードを切り替える。また、制御装置１５０は、上述した操作部５３０７を介した術者の操作入力に応じて、顕微鏡部１１０の撮像部の光学系を適宜駆動させ、顕微鏡部１１０の拡大倍率及びピントを調整する。

また、制御装置１５０は、顕微鏡部１１０の撮像部から送信される映像データに対して、例えばガンマ補正処理、ホワイトバランスの調整処理、電子ズーム機能に係る拡大処理、及び画素間補正処理等、各種の画像処理を行う。つまり、制御装置１５０は、ＣＣＵ（Camera1 Control Unit）としての機能を有する。当該画像処理では、表示装置２０に映像を表示するために一般的に行われる各種の画像処理が行われてよい。制御装置１５０は、各種の画像処理を施した映像データを表示装置２０に送信し、顕微鏡部１１０によって撮影された映像を表示装置２０に表示させる。なお、制御装置１５０と表示装置２０との間の通信は、有線又は無線の各種の公知の方式によって実現されてよい。

なお、以下では、区別のため、顕微鏡部１１０の撮像部によって取得された映像データのことを撮影映像データとも呼称し、表示装置２０によって表示される映像データ（すなわち、撮影映像データに対して各種の画像処理が施された後の映像データ）のことを表示映像データとも呼称することとする。

以上、図１を参照して、第１の実施形態に係る観察システム１及び観察装置１０の構成について説明した。なお、第１の実施形態に係る観察装置１０の構成は、以上説明したものに限定されない。第１の実施形態に係る観察装置１０は、後述する観察視野補正処理が実行可能に構成されればよく、その他の構成は任意に変更されてよい。つまり、第１の実施形態に係る観察装置１０は、後述する観察視野補正処理が実行されること以外は、各種の公知の観察装置と同様の構成を有してよい。

ここで、図２は、図１に示す観察システム１を用いた手術の様子を示す図である。図２では、術者５３２１が、観察システム１を用いて、患者ベッド５３２３上の患者５３２５に対して手術を行っている様子を概略的に示している。なお、図２では、簡単のため、制御装置１５０の図示を省略し、観察装置１０を簡略化して示している。

図２に示すように、手術時には、観察システム１を用いて、観察装置１０によって撮影された患部の画像が、手術室の壁面に設置される表示装置２０に拡大表示される。表示装置２０は、術者５３２１と対向する位置に設置されており、術者５３２１は、表示装置２０に映し出された映像によって患部の様子を観察しながら、当該患部に対して各種の処置を行う。

ここで、観察システム１は、例えば脳外科手術のようなマイクロサージェリーにおいて、患部を拡大観察するために用いられる。脳外科手術では、例えば図３に示すように、脳２１１の深部に位置する患部２１２（例えば、腫瘍や動脈瘤等）を、脳２１１の外部に配置される顕微鏡部１１０によって観察する必要があるため、当該顕微鏡部１１０のズーム操作が頻繁に行われる。図３は、脳外科手術における脳２１１と顕微鏡部１１０との位置関係の一例を概略的に示す図である。図３では、顕微鏡部１１０を模擬的に図示するとともにその撮影方向を点線の矢印で示している。

患部２１２を拡大観察している状態においては、極狭い範囲が、観察視野として表示装置２０に表示されていることとなる。従って、移動操作又はズーム操作に応じて、顕微鏡部１１０が移動したり、あるいは拡大倍率が更に大きくされたりした場合には、患部２１２が観察視野の中心近傍から外れてしまう事態が頻繁に生じ得る。この場合、更に移動操作を行って、患部２１２が観察視野の中心近傍に位置するように、顕微鏡部１１０の位置及び姿勢を微調整する必要が生じるが、直接的な操作によってこのような繊細な調整を行うことは難しい場合がある。一方、例えばフットスイッチ等の入力装置を介した移動操作により、アクチュエータによって顕微鏡部１１０を移動させれば、直接的な操作に比べれば、より容易に、顕微鏡部１１０の位置及び姿勢を微調整することができると考えられるが、術者自身、又は他の医療スタッフが、その移動操作を行う手間は発生する。

このように、観察システム１を用いた手術においては、移動操作又はズーム操作によって観察視野を変更した場合に、患部２１２が当該観察視野の中心近傍から外れてしまうと、当該患部２１２が当該観察視野に含まれるように更なる移動操作を行う作業が生じる可能性がある。かかる作業は、手術の円滑な進行の妨げとなる恐れがある。

そこで、第１の実施形態では、観察システム１において、移動操作又はズーム操作によって観察視野を変更した場合に、患部２１２が当該観察視野に含まれるように、自動的に当該観察視野を補正する処理が行われる。かかる観察視野補正処理が行われることにより、上記の更なる移動操作を行う作業が生じなくなるため、術者等の医療スタッフの負担が軽減し、手術をより円滑に進行することが可能になる。

以下、かかる観察視野補正処理を実行するための、制御装置１５０の機能構成について説明する。

（１−２．制御装置の機能構成）
図４を参照して、以上説明した第１の実施形態に係る観察視野補正処理を実行するための、制御装置１５０の機能構成について詳細に説明する。図４は、第１の実施形態に係る制御装置１５０の機能構成の一例を示すブロック図である。

なお、図４では、説明のため、制御装置１５０以外の構成として、上述した観察装置１０の支持部１２０、観察装置１０の顕微鏡部１１０が有する撮像部１３０（図１では図示を省略）、及び表示装置２０を併せて示している。また、支持部１２０が撮像部１３０を物理的に支持していることを、模擬的に、両者を破線で接続することによって表している。

撮像部１３０は、図１に示す顕微鏡部１１０に搭載される。撮像部１３０は、手術中にその撮影範囲を撮影した撮影映像データを随時取得し、取得した当該映像データを後述する制御装置１５０の画像処理部１５１及び処置具認識部１５４に送信する。

表示装置２０は、後述する制御装置１５０の画像処理部１５１によって生成される表示映像データに基づいて、撮像部１３０によって撮影された映像を表示する。

制御装置１５０は、その機能として、画像処理部１５１と、トリガ操作検出部１５２と、駆動制御部１５３と、処置具認識部１５４と、観察視野中心目標決定部１５５と、観察視野補正部１５６と、を有する。

画像処理部１５１は、撮像部１３０から送信される撮影映像データに対して、例えばガンマ補正処理、ホワイトバランスの調整処理、電子ズーム機能に係る拡大処理、及び画素間補正処理等、各種の画像処理を行う。当該画像処理では、表示装置２０に映像を表示するために一般的に行われる各種の画像処理が行われてよい。画像処理部１５１は、各種の画像処理を施した撮影映像データ（すなわち、表示映像データ）を表示装置２０に送信し、当該表示映像データに基づく映像（すなわち、撮像部１３０によって撮影された映像）を、表示装置２０に表示させる。

トリガ操作検出部１５２は、観察視野補正処理を実行するためのトリガ操作の入力を検出する。第１の実施形態では、トリガ操作は、術者による観察視野を変更する旨の操作である。例えば、トリガ操作は、移動操作又はズーム操作を含む。具体的には、上述したように、観察装置１０では、術者がフリーモードにおいて直接的な操作によって顕微鏡部１１０を移動させる様態が想定され得るため、移動操作は、術者による、図１に示す操作部５３０７の動作モード切り替えＳＷに対する、支持部１２０の動作モードをフリーモードにする旨の操作であり得る。また、ズーム操作は、術者による、図１に示す操作部５３０７のズームＳＷに対する操作であり得る。

ただし、第１の実施形態はかかる例に限定されず、トリガ操作としては、術者による観察視野を変更させる旨の各種の操作が含まれてよい。例えば、支持部１２０の動作が、フットスイッチや、ジェスチャ、又は音声によって操作され得る場合には、これらの操作がトリガ操作に含まれてよい。具体的にどのような操作をトリガ操作に含めるかは、術者又は観察システム１の設計者等によって適宜設定されてよい。

トリガ操作検出部１５２は、トリガ操作を検出すると、当該トリガ操作を検出した旨の情報、及びそのトリガ操作の内容についての情報を、駆動制御部１５３及び処置具認識部１５４に提供する。

駆動制御部１５３は、検出されたトリガ操作の内容に応じて、観察視野を変更し得るように観察装置１０の動作を制御する。例えば、移動操作がトリガ操作として検出された場合には、駆動制御部１５３は、支持部１２０の各回転軸部のアクチュエータの動作を制御し、当該移動操作に従って撮像部１３０の位置及び姿勢を変化させる。あるいは、例えばズーム操作がトリガ操作として検出された場合には、駆動制御部１５３は、撮像部１３０に搭載されるアクチュエータの動作を制御し、当該ズーム操作に従って撮像部１３０の光学系を構成するレンズ等の位置を移動させ、拡大倍率を変化させる。

処置具認識部１５４は、トリガ操作検出部１５２によってトリガ操作が検出された場合に、撮像部１３０によって取得された撮影映像データに基づいて、処置具の形態を認識する。ここで、処置部の形態とは、処置具の位置及び形状を含む。例えば、脳外科手術では、患部を露出させるために、硬膜に設けた創を広げるための一対の開創器（脳べら）が用いられ得る。例えば、処置具認識部１５４は、撮影映像データに基づいて、当該一対の開創器の形状を認識するとともに、その撮影映像内における位置を認識する。あるいは、患部を切除することを目的とする手術であれば、当該患部を焼灼して切除するためのエナジーデバイスが用いられ得る。例えば、処置具認識部１５４は、撮影映像データに基づいて、当該エナジーデバイスの形状を認識するとともに、その撮影映像内における位置を認識する。

なお、駆動制御部１５３によってトリガ操作に従って観察装置１０が動作され、観察視野が変更されているから、処置具認識部１５４は、その観察視野が変更された状態で撮像部１３０によって取得された撮影映像データに基づいて、処置具の形態を認識する。

処置具認識部１５４は、認識した処置具の形態についての情報を、観察視野中心目標決定部１５５に提供する。

観察視野中心目標決定部１５５は、認識された処置具の形態に基づいて、観察視野の中心に位置させるべき目標（観察視野中心目標）を決定する。具体的には、観察視野中心目標決定部１５５は、処置具の形態に基づいて、当該処置具に対する患部の相対的な位置を推測し、推測した当該患部の位置を観察視野中心目標として決定する。

患部の位置を推測する具体的な方法は、その処置具の種類及び用途等に応じて、術者又は観察システム１の設計者等によって適宜設定されてよい。例えば、一般的に、開創器が用いられ得ている場合には、その一対の開創器の間の略中間位置に、患部が存在することが想定される。従って、処置具認識部１５４によって一対の開創器の形態が認識されている場合には、例えば、観察視野中心目標決定部１５５は、当該一対の開創器の間の略中間位置に患部が存在すると推測し、推測した当該患部を観察視野中心目標として決定する。あるいは、エナジーデバイスによって患部が切除される場合には、通常は、当該エナジーデバイスの先端付近に患部が存在することが想定される。従って、処置具認識部１５４によってエナジーデバイスの形態が認識されている場合には、例えば、観察視野中心目標決定部１５５は、当該エナジーデバイスの先端近傍に患部が存在すると推測し、推測した当該患部を観察視野中心目標として決定する。ただし、第１の実施形態はかかる例に限定されず、処置具認識部１５４が患部の位置を推測するアルゴリズムは、処置具の形態と、その処置具が用いられている場合において一般的に想定され得る当該処置具と患部との位置関係に応じて、適宜設定されてよい。

観察視野中心目標決定部１５５は、決定した観察視野中心目標の処置具に対する相対的な位置情報を、観察視野補正部１５６に提供する。

観察視野補正部１５６は、観察視野中心目標決定部１５５によって決定された観察視野中心目標の処置具に対する相対的な位置情報に基づいて、当該観察視野中心目標が、観察視野の略中心に位置するように、観察視野を補正する。第１の実施形態では、観察視野補正部１５６は、駆動制御部１５７（駆動制御部１５３と区別するために、以下、補正駆動制御部１５７と呼称する）として機能し、支持部１２０の動作を制御することにより、観察視野を補正する。具体的には、補正駆動制御部１５７は、観察視野中心目標決定部１５５によって決定された観察視野中心目標が、観察視野の略中心に位置するように、支持部１２０の動作を制御し、撮像部１３０の位置及び姿勢を変化させる。このとき、撮影映像内における処置具の位置が認識されており、当該処置具に対する観察視野中心目標の相対的な位置が分かっているから、補正駆動制御部１５７は、現時点での観察視野中心目標と撮像部１３０との相対的な位置関係、及び観察視野中心目標を観察視野の略中心に位置させるための撮像部１３０の移動量を算出することができる。従って、補正駆動制御部１５７は、算出した当該移動量の分だけ撮像部１３０（すなわち、顕微鏡部１１０）を移動させるように、支持部１２０を動作させることにより、観察視野を補正することができる。

このとき、具体的には、補正駆動制御部１５７によって、支持部１２０の回転軸のうち、先端側の３軸（第１軸Ｏ_１、第２軸Ｏ_２、及び第３軸Ｏ_３）まわりの回転が制御され得る。これらの回転軸まわりの回転により、撮像部１３０のＺ軸まわりの回転角度（すなわち、映像の方向）、及び撮像部１３０の水平面内での位置が調整され得るからである。あるいは、支持部１２０がＸ−Ｙ装置を有するように構成されている場合には、補正駆動制御部１５７は、当該Ｘ−Ｙ装置を動作させて撮像部１３０の水平面内での位置を調整することにより、観察視野を補正してもよい。

このように、第１の実施形態によれば、術者がトリガ操作に対応する操作を行い、観察視野を変更した場合に、観察視野補正部１５６（すなわち、補正駆動制御部１５７）によって撮像部１３０の位置及び姿勢が制御され、観察視野中心目標、すなわち患部が観察視野の略中心に位置するように、当該観察視野が自動的に変更され得る。

ここで、図５〜図８を参照して、第１の実施形態に係る観察視野補正処理の効果について説明する。まず、比較のため、図５及び図６を参照して、第１の実施形態に係る観察視野補正機能が搭載されない、一般的な既存の観察装置における観察視野の変更時の動作について説明する。図５及び図６は、第１の実施形態に係る観察視野補正機能が搭載されない、一般的な既存の観察装置における観察視野の変更時の動作について説明するための図である。

図５及び図６では、表示装置２０の表示画面２０１に映し出される表示映像（すなわち、観察視野）を概略的に示している。例えば、初めに、術者が手動で撮像部１３０の位置及び姿勢を調整した結果、図５に示すように、一対の開創器２０２によって脳の硬膜に設けられた創が広げられて、患部である動脈瘤２０３が露出されている様子が、観察視野に捉えられているとする。ただし、動脈瘤２０３は、観察視野の略中心からは外れた位置に位置しているとする。

この状態で、動脈瘤２０３に対して処置を行うために、術者が、ズーム操作を行ったとする。この場合、通常は、ズーム操作により、図６に示すように、観察視野の中心を基点として当該表示映像が拡大されることとなる。このとき、図示する例では、図５に示す拡大前の状態において、動脈瘤２０３が観察視野の略中心に位置していないから、図６に示す拡大後の状態においては、動脈瘤２０３は、観察視野の略中心から大きく外れた位置に存在することとなる。

術者にとっては、処置を行うために、動脈瘤２０３は観察視野の略中心に存在することが好ましい。従って、一般的な既存の観察装置では、例えば図６に示すように拡大操作を行った後に、動脈瘤２０３が観察視野の略中心に位置するように、撮像部１３０の位置及び姿勢を手動で微調整する作業が生じ得る。このとき、撮像部１３０の拡大倍率が大きい状態であるから、撮像部１３０の位置及び姿勢の僅かな移動によって、観察視野は大きく変化してしまう。従って、この撮像部１３０の位置及び姿勢を微調整する作業には、繊細な操作が求められることとなる。このように、一般的な既存の観察装置では、ズーム操作時に撮像部１３０の位置及び姿勢を微調整するという繊細な作業が生じる可能性があり、当該作業が手術の円滑な進行の妨げとなる恐れがある。

次に、図７及び図８を参照して、第１の実施形態に係る観察装置１０（すなわち、観察視野補正機能が搭載された観察装置１０）における観察視野の変更時の動作について説明する。図７及び図８は、第１の実施形態に係る観察装置１０における観察視野の変更時の動作について説明するための図である。

図７及び図８では、図５及び図６と同様に、表示装置２０の表示画面２０１に映し出される表示映像（すなわち、観察視野）を概略的に示している。例えば、初めに、術者が手動で撮像部１３０の位置及び姿勢を調整した結果、図５に示す場合と同様に、図７に示すように、一対の開創器２０２によって脳の硬膜に設けられた創が広げられて、患部である動脈瘤２０３が露出されている様子が、観察視野に捉えられているとする。ただし、動脈瘤２０３は、観察視野の略中心からは外れた位置に位置しているとする。

この状態で、図５及び図６を参照して説明した場合と同様に、動脈瘤２０３に対して処置を行うために、術者がズーム操作を行ったとする。この場合、第１の実施形態では、まず、上述した制御装置１５０の駆動制御部１５３によって、撮像部１３０の光学系が動作され、観察視野が拡大される。

次に、トリガ操作検出部１５２によって、当該ズーム操作がトリガ操作として検出される。次に、トリガ操作が検出されたことをトリガとして、処置具認識部１５４によって、一対の開創器２０２の形態が認識される（便宜的に、このことを、図５において一対の開創器２０２にハッチングを付すことによって表現している）。次に、観察視野中心目標決定部１５５によって、認識された当該一対の開創器２０２の形態に基づいて、当該一対の開創器２０２の間の略中間位置に患部である動脈瘤２０３が存在することが推測される。更に、観察視野中心目標決定部１５５によって、推測された当該動脈瘤２０３が存在する位置が、観察視野中心目標として決定される。

そして、観察視野補正部１５６（すなわち、補正駆動制御部１５７）によって、決定された観察視野中心目標が観察視野の略中心に位置するように（すなわち、動脈瘤２０３が観察視野の略中心に位置するように）、支持部１２０の動作が制御され、撮像部１３０の位置及び姿勢が調整される。以上の一連の処理により、結果的に、図８に示すように、拡大された後の観察視野において、動脈瘤２０３が観察視野の略中心に位置するように、自動的に当該観察視野が調整されることとなる。

このように、第１の実施形態に係る観察装置１０では、ズーム操作時に撮像部１３０の位置及び姿勢を微調整するという追加的な作業を行うことなく、動脈瘤２０３が観察視野の略中心に位置するように、自動的に当該観察視野が調整され得る。従って、手術の円滑な進行を実現することができる。

なお、ここでは、一例として、ズーム操作がトリガ操作である場合について説明したが、上述したように、第１の実施形態では、トリガ操作は他の操作であってもよい。例えば、トリガ操作は移動操作であってもよい。この場合には、例えば、手術開始時のセッティングの段階で、術者による直接的な操作によって、処置具及び患部が観察視野に含まれるように撮像部１３０の位置及び姿勢が大まかに調整された後、観察視野補正処理によって当該患部が当該観察視野の略中央に位置するように撮像部１３０の位置及び姿勢が微調整される、といった使用態様が想定され得る。

また、以上では、処置具認識部１５４によって認識される処置具の例として、開創器及びエナジーデバイスを挙げたが、第１の実施形態はかかる例に限定されない。処置具認識部１５４によって認識される対象は、あらゆる処置具であってよい。例えば、当該処置具は、血管吻合クリップであってよい。当該血管吻合クリップは、一対の挟持部を有し、血管吻合時において、吻合する対象である血管が切断されている部位を挟んで、その血管のそれぞれを当該一対の挟持部によって挟むように用いられる。血管吻合時には、撮像部１３０によって、その吻合する対象となる部位（すなわち、血管が切断されている部位）が患部として拡大観察され得る。従って、処置具認識部１５４によって血管吻合クリップが処置具として認識された場合には、観察視野中心目標決定部１５５は、その血管吻合クリップの一対の挟持部の間の略中間位置を患部の位置と推測し、観察視野中心目標として決定すればよい。これにより、観察視野補正部１５６によって、吻合する対象となる部位が観察視野の略中心となるように、当該観察視野が自動的に補正され得ることとなる。

また、以上説明した例では、ズーム操作に伴う表示映像の拡大処理が行われた後に、処置具認識部１５４から観察視野補正部１５６までの一連の処理が行われていたが、第１の実施形態はかかる例に限定されない。これらの処理が実行される順番の前後関係は任意に設定可能であってよい。例えば、以上説明した例とは逆に、トリガ操作が検出された場合に、患部を観察視野の略中心に位置させるような観察視野の自動的な変更が行われた後に、その観察視野の略中心を中心として表示映像が拡大されてもよい。あるいは、これらの処理は並列的に実行されてもよく、例えば、トリガ操作が検出された場合に、表示映像が拡大されつつ、患部を観察視野の略中心に位置させるような当該観察視野の自動的な変更が行われてもよい。

更に、第１の実施形態では、トリガ操作が検出される前から、処置具認識部１５４による処置具の認識処理、及び観察視野中心目標決定部１５５による観察視野中心目標の決定処理が、随時行われていてもよい。この場合には、トリガ操作が検出された場合に、直近に決定された観察視野中心目標に基づいて、観察視野の補正が行われ得る。かかる場合には、トリガ操作が検出された後に、処置具の認識処理及び観察視野中心目標の決定処理を改めて行う必要がないため、これらの処理を行う時間を省くことができ、より迅速に観察視野を補正することが可能になる。

なお、図４では、説明のため、制御装置１５０の機能のうち、第１の実施形態に係る観察視野補正処理に関係する機能のみを示している。制御装置１５０は、図示する機能以外にも、一般的に観察装置の制御装置が有する各種の機能を有し得る。例えば、画像処理部１５１及び駆動制御部１５３は、観察視野補正処理が実行されるときだけでなく（すなわち、トリガ操作が検出された場合だけでなく）、通常時から、撮影映像データに基づいて表示映像データを生成する処理、及び術者の操作に応じて支持部１２０及び撮像部１３０の動作を制御する処理をそれぞれ実行し得る。

ここで、上述したように、上記特許文献２には、内視鏡によって撮影された映像に基づいて処置具の位置情報を取得する位置検出手段と、当該位置情報に基づいて、処置具の先端部分が表示映像の略中心に位置するように、当該内視鏡の撮像光学系を駆動させてその撮影範囲を変更する制御手段と、を備える内視鏡装置が開示されている。当該内視鏡装置によれば、内視鏡の撮影範囲に処置具の先端部分が常に含まれるように、自動的に当該撮影範囲が変更され得る。特許文献２に記載の技術を、そのまま観察装置１０に適用した場合にも、適切な観察視野が得られる可能性がある。

しかしながら、特許文献２に記載の技術では、処置具の先端部分が常に含まれるように、自動的に内視鏡の撮影範囲が変更される。従って、処置を行っている間、処置具が移動すると、それに伴い観察視野も変化することとなるため、観察視野の移動が頻繁に生じてしまう。また、処置具の先端部分を撮影範囲に含める対象としているため、処置具の種類や動きによっては、患部自体は撮影範囲に含まれない事態も生じ得る。従って、特許文献２に記載の技術では、必ずしも適切な観察視野が得られるとは限らず、かえって術者が処置を円滑に行い難くなってしまう恐れがある。

これに対して、第１の実施形態では、上述したように、トリガ操作が検出された場合に、観察視野が補正される（すなわち、観察視野が変更される）。従って、不要な観察視野の移動は生じない。また、処置具自体を観察視野に含める対象とするのではなく、処置具の形態から推測される観察視野中心目標（すなわち、患部）を、観察視野に含める対象とする。従って、患部が観察視野により確実に含まれ得ることとなる。このように、第１の実施形態によれば、例えば特許文献２に記載されているような既存の技術に比べて、より適切な観察視野を得ることが可能となる。よって、より円滑な手術の進行が実現され得る。

（１−３．観察視野補正方法）
図９を参照して、第１の実施形態に係る観察視野補正方法の処理手順について説明する。図９は、第１の実施形態に係る観察視野補正方法の処理手順の一例を示すフロー図である。なお、図９に示す各処理は、図１及び図３に示す制御装置１５０によって実行される処理に対応している。これらの各処理の詳細については、制御装置１５０の機能構成について説明する際に既に説明しているため、以下の観察視野補正方法の処理手順についての説明では、各処理についての詳細な説明は割愛する。なお、図９に示す各処理が行われている間、撮像部１３０による撮影映像の取得は随時行われている。

図９を参照すると、第１の実施形態に係る観察視野補正方法では、まず、トリガ操作が検出されたかどうかが判断される（ステップＳ１０１）。ステップＳ１０１における処理は、図４に示すトリガ操作検出部１５２によって実行される処理に対応している。

ステップＳ１０１でトリガ操作が検出されていないと判断された場合には、ステップＳ１０３には進まず、トリガ操作が検出されるまで待機する（すなわち、トリガ操作が検出されるまで、ステップＳ１０１における処理が繰り返される）。

ステップＳ１０１でトリガ操作が検出されたと判断された場合には、ステップＳ１０３に進む。ステップＳ１０３では、トリガ操作に応じて、撮像部１３０の動作が制御される。ステップＳ１０３では、具体的には、支持部１２０が動作されることにより、撮像部１３０の位置及び姿勢が制御され得る。あるいは、撮像部１３０の光学系を構成するレンズ等が動作されることにより、拡大倍率が制御され得る。

次に、撮影映像データに基づいて、処置具の形態が認識される（ステップＳ１０５）。ステップＳ１０５における処理は、図４に示す処置具認識部１５４によって実行される処理に対応している。

次に、認識された処置具の形態に基づいて、観察視野中心目標が決定される（ステップＳ１０７）。ステップＳ１０７では、具体的には、認識された処置具の形態に基づいて患部の位置が推測され、その推測された患部の位置が観察視野中心目標として決定される。ステップＳ１０７における処理は、図４に示す観察視野中心目標決定部１５５によって実行される処理に対応している。

次に、決定された観察視野中心目標が観察視野の略中心に位置するように、支持部１２０が動作され、撮像部１３０の位置及び姿勢が調整される（すなわち、決定された観察視野中心目標が観察視野の略中心に位置するように観察視野が補正される）（ステップＳ１０９）。ステップＳ１０９における処理は、図３に示す観察視野補正部１５６（すなわち、補正駆動制御部１５７）によって実行される処理に対応している。

以上、第１の実施形態に係る観察視野補正方法の処理手順について説明した。なお、図９に示す例では、ステップＳ１０３における処理（トリガ操作に応じた撮像部１３０の動作の制御処理）が行われた後に、ステップＳ１０５〜ステップＳ１０９における処理（処置具の認識処理、観察視野中心目標の決定処理、及び観察視野の補正処理）が行われることとなっているが、第１の実施形態はかかる例に限定されない。上述したように、ステップＳ１０３における処理と、ステップＳ１０５〜ステップＳ１０９における処理とは、図示する順番とは逆の順番で実行されてもよいし、並列的に実行されてもよい。また、ステップＳ１０５における処理（処理具の認識処理）及びステップＳ１０７における処理（観察視野中心目標の決定処理）は、ステップＳ１０１における処理（トリガ操作の検出処理）に先立って行われてもよい。

（２．第２の実施形態）
本開示の第２の実施形態について説明する。なお、第２の実施形態は、上述した第１の実施形態において、観察視野を補正する具体的な方法が異なるものに対応する。第２の実施形態におけるこのこと以外の事項は第１の実施形態と同様であるため、以下の第２の実施形態についての説明では、第１の実施形態と相違する事項について主に説明することとし、重複する事項についてはその詳細な説明を省略する。

（２−１．制御装置の機能構成）
第２の実施形態に係る観察システムの構成は、図１を参照して説明した第１の実施形態に係る観察システム１と略同様である。ただし、第２の実施形態では、観察視野補正処理を実行するための制御装置１５０の機能が、第１の実施形態とは異なる。ここでは、図１０を参照して、第２の実施形態に係る制御装置の機能構成について説明する。

図１０は、第２の実施形態に係る制御装置１５０ａの機能構成の一例を示すブロック図である。なお、図１０では、説明のため、制御装置１５０ａ以外の構成として、図１に示す観察装置１０の顕微鏡部１１０が有する撮像部１３０（図１では図示を省略）、及び表示装置２０を併せて示している。

第２の実施形態では、撮像部１３０は、手術中にその撮影範囲を撮影した撮影映像データを随時取得し、取得した当該撮影映像データを後述する制御装置１５０ａの処置具認識部１５４及び観察視野補正部１５６ａ（補正画像処理部１５７ａ）に送信する。表示装置２０は、後述する制御装置１５０の観察視野補正部１５６ａ（補正画像処理部１５７ａ）によって生成される表示映像データに基づいて、撮像部１３０によって撮影された映像を表示する。

制御装置１５０ａは、制御装置１５０と同様に、例えばＣＰＵやＤＳＰ等のプロセッサ、又はこれらのプロセッサとメモリ等の記憶素子がともに搭載された制御基板等によって構成される。制御装置１５０ａは、その機能として、トリガ操作検出部１５２ａと、処置具認識部１５４と、観察視野中心目標決定部１５５と、観察視野補正部１５６ａと、を有する。制御装置１５０ａを構成するプロセッサが所定のプログラムに従って演算処理を実行することにより、これらの各機能が実現される。なお、これらの機能のうち、処置具認識部１５４及び観察視野中心目標決定部１５５の機能は、第１の実施形態におけるこれらの機能と略同様であるため、ここではその詳細な説明を省略する。

トリガ操作検出部１５２ａは、第１の実施形態と同様に、トリガ操作の入力を検出する。ただし、図示する構成例では、トリガ操作がズーム操作である場合が想定されている。つまり、図示する構成例では、トリガ操作検出部１５２ａは、トリガ操作として、ズーム操作のみを検出するように構成され得る。

トリガ操作検出部１５２ａは、トリガ操作を検出した旨の情報、及びそのトリガ操作の内容についての情報を、処置具認識部１５４に提供する。

処置具認識部１５４は、第１の実施形態と同様に、撮影映像データに基づいて処置具の形態を認識する。また、観察視野中心目標決定部１５５は、第１の実施形態と同様に、処置具の形態に基づいて観察視野中心目標を決定する。

観察視野補正部１５６ａは、観察視野中心目標決定部１５５によって決定された観察視野中心目標の処置具に対する相対的な位置情報に基づいて、当該観察視野中心目標が、観察視野の略中心に位置するように、観察視野を補正する。第２の実施形態では、観察視野補正部１５６ａは、画像処理部１５７ａ（図４に示す画像処理部１５１と区別するために、以下、補正画像処理部１５７ａと呼称する）として機能する。補正画像処理部１５７ａは、第１の実施形態における画像処理部１５１と同様に、撮影映像データに対して各種の画像処理を実行することにより表示映像データを生成する。ただし、このとき、補正画像処理部１５７ａは、電子ズーム機能により、撮影映像のうち、観察視野中心目標決定部１５５によって決定された観察視野中心目標を中心として撮影映像の一部領域を切り出し、その切り出した領域をトリガ操作において指定された倍率で拡大して、表示映像データを生成する。

補正画像処理部１５７ａは、撮影映像データに対して当該電子ズームに係る拡大処理を含む各種の画像処理を施すことにより生成した表示映像データを、表示装置２０に送信し、当該表示映像データに基づく映像（すなわち、撮像部１３０による撮影映像が電子ズーム機能によって拡大された映像）を、表示装置２０に表示させる。

このように、第２の実施形態では、撮像部１３０の光学系が駆動されることにより（すなわち、光学ズーム機能によって）観察視野の拡大が行われるのではなく、補正画像処理部１５７ａによって電子ズーム機能により観察視野の拡大が行われる。また、そのとき、観察視野中心目標を中心として電子ズームが実行される。これにより、補正画像処理部１５７ａによって生成される表示映像データは、観察視野中心目標（すなわち、患部）を中心として、トリガ操作において指定された倍率で拡大された映像データとなる。

ここで、電子撮像式の観察装置では、一般的な既存の構成においても、電子ズーム機能は搭載され得る。ただし、かかる一般的な構成における電子ズーム機能では、通常、撮影映像のうち、当該撮影映像の略中心を中心とする所定の領域が切り出されて拡大される。従って、上記図５及び図６を参照して説明した場合と同様に、拡大前において観察視野の略中心に患部が存在していない場合には、電子ズーム機能による拡大後の観察視野においては、当該患部は、当該観察視野の中心から大きく外れた位置に存在し得ることとなる。従って、当該患部を観察視野の略中心に位置させるために、撮像部１３０の位置及び姿勢を微調整する作業が生じてしまう。これに対して、第２の実施形態によれば、上記のように、患部を中心として電子ズーム機能による拡大処理が行われるため、第１の実施形態と同様に、撮像部１３０の位置及び姿勢を微調整する作業が生じることがなく、手術の円滑な実行が実現され得る。

なお、第２の実施形態においては、以上説明したように、電子ズーム機能において撮影映像から表示映像に対応する領域が切り出される際に、当該領域の切り出し位置及び切り出し範囲が調整されることにより、観察視野が補正される。このように電子ズーム機能を用いた場合において、その拡大倍率が大きい場合には、表示映像の解像度が低下し、患部を詳細に観察することが困難になることが懸念される。しかしながら、撮影映像が高解像度で撮影されていれば、電子ズーム機能によって当該撮影映像を拡大した場合であっても、鮮明な表示映像を得ることができる。例えば、４Ｋであれば２倍、８Ｋであれば４倍に電子ズーム機能によって撮影映像を拡大した場合であっても、表示映像としてはＦｕｌｌ ＨＤ画質が確保され得る。従って、第２の実施形態においては、表示映像の解像度を確保する観点から、高解像度での撮影が可能な撮像部１３０が用いられることが好ましい。

なお、第２の実施形態においては、以上説明したように、電子ズーム機能において撮影映像から表示映像に対応する領域を切り出す際に、当該撮影映像の略中心とは異なる位置に存在する観察視野中心目標を中心として当該領域が切り出され得る。従って、観察視野補正処理が行われている間は、その撮像部１３０の位置及び姿勢によって通常得られる表示映像とは異なる範囲を映した表示映像が得られる可能性がある。よって、例えば、その後、患部を異なる方向から観察するために移動操作を行う際にもこの状態が続いていると、術者による当該撮像部１３０の移動のための操作と、当該術者が観察している表示映像との間に感覚的なずれが存在することとなり、好ましくない。

そこで、第２の実施形態では、観察視野補正処理が行われている間に（すなわち、撮影映像の略中心とは異なる位置を中心として所定の領域が切り出され拡大表示されている間に）、明示的な移動操作が入力された場合には、通常の電子ズーム機能の態様により拡大された観察視野が表示されるように（すなわち、撮影映像の略中心を中心とした所定の領域が切り出され拡大表示されるように）、当該観察視野が切り替えられてもよい。これにより、上記のような感覚的なずれは解消され得る。ただし、観察視野が切り替えられることにより、術者が戸惑いを感じることが懸念される。そこで、第２の実施形態では、観察視野補正処理が行われている間には、そのことを術者に対して通知する旨の表示が、表示映像に重畳して表示されてもよい。これにより、術者は、観察視野補正処理が行われていること、すなわち、撮影映像の略中心とは異なる位置を中心として所定の領域が切り出され拡大表示されていることを把握することができる。よって、上記のような戸惑いを感じにくくなり、術者の使い勝手をより向上させることが可能となる。

また、以上説明した例では、補正画像処理部１５７ａが、観察視野中心目標を中心とした電子ズーム機能による拡大処理を一括して行っていた。いわば、補正画像処理部１５７ａが、観察視野中心目標を中心とするような観察視野の変更処理と、電子ズーム機能による表示映像の拡大処理と、を同時に行っていた。しかし、第２の実施形態はかかる例に限定されない。例えば、補正画像処理部１５７ａによる上記の処理は、段階的に行われてもよい。具体的には、補正画像処理部１５７ａは、まず、電子ズーム機能による表示映像の拡大処理を行い、次いで、観察視野中心目標を中心とするような観察視野の変更処理（すなわち、撮影映像から切り出す領域を、観察視野中心目標を中心とする領域に変更する処理）を行ってもよい。この場合には、まず表示映像が拡大され、次いで観察視野が移動するように、当該表示映像が術者に対して提示されることとなるため、術者は、観察視野補正処理が行われていることをより直感的に把握することが可能となる。あるいは、上記の２つの処理が逆の順番で行われてもよい。

更に、第２の実施形態では、第１の実施形態と同様に、トリガ操作が検出される前から、処置具認識部１５４による処置具の認識処理、及び観察視野中心目標決定部１５５による観察視野中心目標の決定処理が、随時行われていてもよい。この場合には、トリガ操作が検出された場合に、これらの処理が改めて実行される必要がないため、これらの処理を行う時間を省くことができ、より迅速に観察視野を補正することが可能になる。

また、以上説明した例では、トリガ操作がズーム操作に限定されていたが、第２の実施形態はかかる例に限定されない。例えば、第１の実施形態と同様に移動操作をトリガ操作として検出する場合であっても、第２の実施形態のように電子ズーム機能における撮影映像の切り出し位置を変更することによって観察視野を補正することが可能である。この場合、制御装置１５０ａは、例えば、観察視野補正処理が行われる前から（すなわち、トリガ操作が検出される前から）、撮影映像の一部領域を切り出して表示映像データを生成するように構成される。このとき、観察視野補正処理が行われる前においては、撮影映像の略中心を中心とした所定の領域が切り出されて表示映像データが生成され得る。そして、トリガ操作が検出され、観察視野補正処理が行われる際には、観察視野中心目標を中心とした所定の領域が切り出されるように、撮影映像の切り出し位置及び切り出し範囲が変更されて、その切り出された領域について表示映像データが生成される。このように、観察視野補正処理が行われる前から、撮影映像の一部領域を切り出して表示映像データを生成するように制御装置１５０ａを構成すれば、ズーム操作以外の操作をトリガ操作として設定した場合であっても、その撮影映像の切り出し位置及び切り出し範囲を適宜変更すれば、観察視野補正処理を実行することが可能となる。

また、図１０では、説明のため、制御装置１５０ａの機能のうち、第２の実施形態に係る観察視野補正処理に関係する機能のみを示している。制御装置１５０ａは、図示する機能以外にも、一般的に観察装置の制御装置が有する各種の機能を有し得る。例えば、制御装置１５０ａは、第１の実施形態と同様に画像処理部１５１及び駆動制御部１５３を有し、これら画像処理部１５１及び駆動制御部１５３は、観察視野補正処理が実行されるときだけでなく（すなわち、トリガ操作が検出された場合だけでなく）、通常時から、撮影映像データに基づいて表示映像データを生成する処理、及び術者の操作に応じて支持部１２０及び撮像部１３０の動作を制御する処理をそれぞれ実行し得る。この際、画像処理部１５１は、電子ズームも実行し得るが、観察視野補正処理が実行されていない場合には、当該電子ズームでは、撮影映像の略中心を中心とする所定の領域が切り出されて拡大されて表示映像データが生成され得る。

（２−２．観察視野補正方法）
図１１を参照して、第２の実施形態に係る観察視野補正方法の処理手順について説明する。図１１は、第２の実施形態に係る観察視野補正方法の処理手順の一例を示すフロー図である。なお、図１１に示す各処理は、図１０に示す制御装置１５０ａによって実行される処理に対応している。これらの各処理の詳細については、制御装置１５０ａの機能構成について説明する際に既に説明しているため、以下の観察視野補正方法の処理手順についての説明では、各処理についての詳細な説明は割愛する。

図１１を参照すると、第２の実施形態に係る観察視野補正方法では、まず、トリガ操作が検出されたかどうかが判断される（ステップＳ２０１）。第２の実施形態では、トリガ操作として、例えばズーム操作が検出され得る。ステップＳ２０１における処理は、図１０に示すトリガ操作検出部１５２ａによって実行される処理に対応している。

ステップＳ２０１でトリガ操作が検出されていないと判断された場合には、ステップＳ２０３には進まず、トリガ操作が検出されるまで待機する（すなわち、トリガ操作が検出されるまで、ステップＳ２０１における処理が繰り返される）。

ステップＳ２０１でトリガ操作が検出されたと判断された場合には、ステップＳ２０３に進む。ステップＳ２０３では、撮影映像データに基づいて、処置具の形態が認識される（ステップＳ２０３）。ステップＳ２０３における処理は、図１０に示す処置具認識部１５４によって実行される処理に対応している。

次に、認識された処置具の形態に基づいて、観察視野中心目標が決定される（ステップＳ２０５）。ステップＳ２０５では、具体的には、認識された処置具の形態に基づいて患部の位置が推測され、その推測された患部の位置が観察視野中心目標として決定される。ステップＳ２０５における処理は、図１０に示す観察視野中心目標決定部１５５によって実行される処理に対応している。

次に、決定された観察視野中心目標が観察視野の略中心に位置するように、撮影映像の切り出し位置及び切り出し範囲が調整され、電子ズームが実行される（すなわち、決定された観察視野中心目標が観察視野の略中心に位置するように観察視野が補正される）（ステップＳ２０７）。ステップＳ２０７における処理は、図１０に示す観察視野補正部１５６ａ（すなわち、補正画像処理部１５７ａ）によって実行される処理に対応している。

以上、第２の実施形態に係る観察視野補正方法の処理手順について説明した。なお、図１１に示す例では、ステップＳ２０７において、観察視野中心目標を中心とした電子ズーム機能による拡大処理が一括して行われているが、第２の実施形態はかかる例に限定されない。上述したように、電子ズーム機能による観察視野の拡大処理は、段階的に行われてもよい。また、ステップＳ２０３における処理（処理具を認識する処理）及びステップＳ２０５における処理（観察視野中心目標を決定する処理）は、ステップＳ２０１における処理に先立って行われてもよい。

（３．変形例）
以上説明した実施形態におけるいくつかの変形例について説明する。

（３−１．処置具の認識処理、及び観察視野中心目標の決定処理の他の方法）
以上説明したように、第１及び第２の実施形態では、処置具の形態が認識され、その認識された処置具の形態に応じて、患部の位置が推測される。そして、その推測された患部の位置が、観察視野中心目標として決定される。

しかしながら、このとき、必ずしも患部の位置が正確に推測されない場合も想定され得る。例えば、上述した例では、一対の開創器の間の略中間位置に患部が存在すると推測していたが、創の開口部と患部の位置関係等によっては、一対の開創器と当該患部とは、必ずしもこのような位置関係にはならない可能性がある。

そこで、第１及び第２の実施形態においては、患部の位置を指し示すための処置具が予め設定されていてもよく、当該処置具によって指し示された位置が観察視野中心目標として決定されてもよい。例えば、当該処置具は鉗子であり得る。

かかる機能が搭載される場合には、制御装置１５０、１５０ａの処置具認識部１５４は、処置具の形態を認識する際に、当該処置具が鉗子であること、及び当該鉗子の先端位置を認識する。そして、観察視野中心目標決定部１５５は、当該鉗子の先端によって指し示されている位置を患部の位置と推測し、当該患部の位置を観察視野中心目標として決定する。

当該機能が搭載されることにより、もしも患部の位置が正確に推測されない場合であっても、術者がその患部の位置、すなわち観察視野中心目標を具体的に指定することが可能となるため、術者の利便性を向上させることができる。なお、この場合には、完全に自動的に観察視野補正処理が行われる場合に比べて、観察視野中心目標を指し示すという術者の作業は追加的に生じるものの、当該作業の負荷は、観察視野中心目標を観察視野の略中心に位置させるような移動操作等に比べれば簡便なものである。従って、当該作業が追加的に発生したとしても、手術の円滑な進行にとって大きな妨げにはならない。

（３−２．観察装置の他の構成例）
以上説明した構成例では、観察装置１０は６つの回転軸部の全てにアクチュエータが搭載されて構成されていたが、第１及び第２の実施形態はかかる例に限定されない。例えば、バランスアームとして構成される観察装置に対しても、第１及び第２の実施形態に係る観察視野補正処理を適用可能である。ただし、バランスアームとして構成される観察装置に対して、第１の実施形態に係る観察視野補正処理を適用する場合には、その支持部においては、少なくとも顕微鏡部の水平面内での位置を調整し得る回転軸部にはアクチュエータが搭載される必要がある。

また、以上説明した構成例では、観察装置１０は電子撮像式の観察装置であった。ただし、第１の実施形態はかかる例に限定されない。第１の実施形態に係る観察視野補正処理は、光学式の観察装置にも適用可能である。例えば、光学式の観察装置には、術者以外の医療スタッフが当該術者の視野を共有するために、その顕微鏡部に撮像素子が搭載され、当該撮像素子によって術者が肉眼で視認している像と略同様の映像を取得し、表示装置に表示可能なものが存在し得る。かかる構成を有する光学式の観察装置において、視野を共有するための取得される撮影映像データに基づいて、以上説明した第１の実施形態に係る観察視野補正処理が実行されてもよい。

（４．補足）
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

例えば、図１に示す例では、制御装置１５０は、顕微鏡部１１０、支持部１２０及びベース部５３１５とは異なる構成として設けられているが、本開示はかかる例に限定されない。例えば、制御装置１５０と同様の機能を実現するプロセッサや制御基板等が、ベース部５３１５内に配置されてもよい。また、制御装置１５０と同様の機能を実現するプロセッサや制御基板等が顕微鏡部１１０の内部に組み込まれることにより、制御装置１５０と顕微鏡部１１０とが一体的に構成されてもよい。図１には示されないが、制御装置１５０ａについても同様に、その設置位置は限定されない。

また、制御装置１５０、１５０ａは、必ずしも１つの装置でなくてもよく、複数の装置の協働によって実現されてもよい。この場合には、制御装置１５０、１５０ａの各機能が、これらの機能を実現し得る構成を有する複数の装置に分散して搭載され、これら複数の装置が互いに各種の情報をやり取りしながら協働して動作することにより、全体として、制御装置１５０、１５０ａとしての機能が実現され得る。例えば、図１に示す構成において、プロセッサや制御基板等が、支持部１２０を構成する各回転軸部にそれぞれ配置され、これら複数のプロセッサや制御基板等が互いに協働することにより、制御装置１５０、１５０ａと同様の機能が実現されてもよい。

なお、以上説明した制御装置１５０、１５０ａの各機能を実現するためのコンピュータプログラムを作製し、ＰＣ等に実装することが可能である。また、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体も提供することができる。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリ等である。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信されてもよい。

また、本明細書に記載された効果は、あくまで説明的又は例示的なものであって限定的なものではない。つまり、本開示に係る技術は、上記の効果とともに、又は上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏し得る。

なお、以下のような構成も本開示の技術的範囲に属する。
（１）
観察対象を撮影した撮影映像についてのデータである撮影映像データを取得する撮像部と、
前記撮像部を支持する支持部と、
前記撮像部の動作に関する所定の操作であるトリガ操作を検出するトリガ操作検出部と、
前記撮影映像データに基づいて、撮影映像に含まれる処置具の形態を認識する処置具認識部と、
前記トリガ操作検出部によって前記トリガ操作が検出された場合に、前記処置具認識部によって認識された前記処置具の形態に基づいて、前記撮影映像データに基づいて表示装置に表示される表示映像の範囲である観察視野を補正する観察視野補正部と、
を備える、
医療用観察装置。
（２）
前記観察視野補正部は、前記支持部の動作を制御し、前記撮像部の位置及び姿勢を調整することにより、前記観察視野を補正する、
前記（１）に記載の医療用観察装置。
（３）
前記トリガ操作は、前記観察視野に係る表示映像を拡大する旨のズーム操作であり、
前記観察視野補正部は、電子ズーム機能により前記撮影映像の所定の領域を切り出して拡大する際に、前記所定の領域の切り出し位置及び切り出し範囲を調整することにより、前記観察視野を補正する、
前記（１）に記載の医療用観察装置。
（４）
前記処置具認識部によって認識された前記処置具の形態に基づいて、前記観察視野の中心に位置すべき目標である観察視野中心目標を決定する観察視野中心目標決定部、を更に備え、
前記観察視野補正部は、前記観察視野中心目標決定部によって決定された前記観察視野中心目標が、前記観察視野の略中心に位置するように、前記観察視野を補正する、
前記（１）〜（３）のいずれか１項に記載の医療用観察装置。
（５）
前記観察視野中心目標決定部は、前記処置具の形態に基づいて前記処置具の位置に対する患部の相対的な位置を推測し、前記患部の位置を前記観察視野中心目標として決定する、
前記（４）に記載の医療用観察装置。
（６）
前記処置具は一対の開創器であり、
前記観察視野中心目標決定部は、前記一対の開創器の間の略中間位置を患部の位置として推測する、
前記（５）に記載の医療用観察装置。
（７）
前記処置具はエナジーデバイスであり、
前記観察視野中心目標決定部は、前記エナジーデバイスの先端位置を患部の位置として推測する、
前記（５）に記載の医療用観察装置。
（８）
前記処置具は鉗子であり、
前記観察視野中心目標決定部は、前記鉗子の先端位置を患部の位置として推測する、
前記（５）に記載の医療用観察装置。
（９）
前記トリガ操作は、前記観察視野に係る表示映像を拡大する旨のズーム操作であり、
前記観察視野補正部は、前記ズーム操作によって拡大された表示映像に係る観察視野を補正する、
前記（１）〜（８）のいずれか１項に記載の医療用観察装置。
（１０）
前記トリガ操作は、前記撮像部の位置及び姿勢を移動させる旨の移動操作であり、
前記観察視野補正部は、前記移動操作によって移動された後に前記撮像部によって取得された前記撮影映像データに基づく表示映像に係る観察視野を補正する、
前記（１）〜（８）のいずれか１項に記載の医療用観察装置。
（１１）
支持部によって支持された撮像部の動作に関する所定の操作であるトリガ操作を検出することと、
前記撮像部によって取得された観察対象を撮影した撮影映像についてのデータである撮影映像データに基づいて、前記撮影映像に含まれる処置具の形態を認識することと、
前記トリガ操作が検出された場合に、認識された前記処置具の形態に基づいて、前記撮影映像データに基づいて表示装置に表示される表示映像の範囲である観察視野を補正することと、
を含む、
観察視野補正方法。

１ 観察システム
１０ 観察装置
２０ 表示装置
１１０ 顕微鏡部
１２０ 支持部（アーム部）
１３０ 撮像部
１５０、１５０ａ 制御装置
１５１ 画像処理部
１５２、１５２ａ トリガ操作検出部
１５３ 駆動制御部
１５４ 処置具認識部
１５５ 観察視野中心目標決定部
１５６、１５６ａ 観察視野補正部
１５７ 補正駆動制御部（駆動制御部）
１５７ａ 補正画像処理部（画像処理部）

Claims (10)

1. 観察対象を撮影した撮影映像についてのデータである撮影映像データを取得する撮像部と、
   前記撮像部の動作に関する所定の操作であるトリガ操作を検出するトリガ操作検出部と、
   前記撮影映像データに基づいて、前記撮影映像に含まれる処置具の形態を認識する処置具認識部と、
   前記処置具認識部によって認識された前記処置具の形態に基づいて前記処置具の位置に対する患部の相対的な位置を推測し、前記患部の位置を前記撮影映像データに基づいて表示装置に表示される表示映像の範囲である観察視野の中心に位置すべき目標である観察視野中心目標として決定する観察視野中心目標決定部と、
   前記トリガ操作検出部によって前記トリガ操作が検出された場合に、前記観察視野中心目標決定部によって決定された前記観察視野中心目標が、前記観察視野の略中心に位置するように、前記観察視野を補正する観察視野補正部と、
   を備える、
   医療用観察装置。
2. 前記観察視野補正部は、前記撮像部を支持する支持部の動作を制御し、前記撮像部の位置及び姿勢を調整することにより、前記観察視野を補正する、
   請求項１に記載の医療用観察装置。
3. 前記トリガ操作は、前記観察視野に係る表示映像を拡大する旨のズーム操作であり、
   前記観察視野補正部は、電子ズーム機能により前記撮影映像の所定の領域を切り出して拡大する際に、前記所定の領域の切り出し位置及び切り出し範囲を調整することにより、前記観察視野を補正する、
   請求項１に記載の医療用観察装置。
4. 前記処置具は一対の開創器であり、
   前記観察視野中心目標決定部は、前記一対の開創器の間の略中間位置を患部の位置として推測する、
   請求項１〜３のいずれか１項に記載の医療用観察装置。
5. 前記処置具はエナジーデバイスであり、
   前記観察視野中心目標決定部は、前記エナジーデバイスの先端位置を患部の位置として推測する、
   請求項１〜３のいずれか１項に記載の医療用観察装置。
6. 前記処置具は鉗子であり、
   前記観察視野中心目標決定部は、前記鉗子の先端位置を患部の位置として推測する、
   請求項１〜３のいずれか１項に記載の医療用観察装置。
7. 前記トリガ操作は、前記観察視野に係る表示映像を拡大する旨のズーム操作であり、
   前記観察視野補正部は、前記ズーム操作によって拡大された表示映像に係る観察視野を補正する、
   請求項１〜６のいずれか１項に記載の医療用観察装置。
8. 前記トリガ操作は、前記撮像部の位置及び姿勢を移動させる旨の移動操作であり、
   前記観察視野補正部は、前記移動操作によって移動された後に前記撮像部によって取得された前記撮影映像データに基づく表示映像に係る観察視野を補正する、
   請求項１〜６のいずれか１項に記載の医療用観察装置。
9. 観察対象を撮影した撮影映像についてのデータである撮影映像データを取得する撮像部の動作に関する所定の操作であるトリガ操作を検出するトリガ操作検出部と、
   前記撮影映像データに基づいて、前記撮影映像に含まれる処置具の形態を認識する処置具認識部と、
   前記処置具認識部によって認識された前記処置具の形態に基づいて前記処置具の位置に対する患部の相対的な位置を推測し、前記患部の位置を前記撮影映像データに基づいて表示装置に表示される表示映像の範囲である観察視野の中心に位置すべき目標である観察視野中心目標として決定する観察視野中心目標決定部と、
   前記トリガ操作検出部によって前記トリガ操作が検出された場合に、前記観察視野中心目標決定部によって決定された前記観察視野中心目標が、前記観察視野の略中心に位置するように、前記観察視野を補正する観察視野補正部と、
   を備える、
   制御装置。
10. 支持部によって支持された撮像部の動作に関する所定の操作であるトリガ操作を検出することと、
    前記撮像部によって取得された観察対象を撮影した撮影映像についてのデータである撮影映像データに基づいて、前記撮影映像に含まれる処置具の形態を認識することと、
    認識された前記処置具の形態に基づいて前記処置具の位置に対する患部の相対的な位置を推測し、前記患部の位置を前記撮影映像データに基づいて表示装置に表示される表示映像の範囲である観察視野の中心に位置すべき目標である観察視野中心目標として決定することと、
    前記トリガ操作が検出された場合に、決定された前記観察視野中心目標が、前記観察視野の略中心に位置するように、前記観察視野を補正することと、
    を含む、
    観察視野補正方法。

Images