JP6359264B2 - 手術情報管理装置 - Google Patents

Description

本発明の実施形態は、手術に関する情報を、時間軸を合わせて表示する手術情報管理装置に関する。

近年、手術では複数の医療機器が使用され、これらの医療機器からそれぞれ出力されるデータが記録される。医療機器から出力されるデータとは、例えば、異常状態収集装置により計測される血圧、心電図及び脈拍等の生体データ、医用画像診断装置等により撮影される検査データ、並びに、術野カメラにより撮影される動画データ等である。

ところで、術後に手術についての手術レポートを作成しようとする場合、医師は、手術中に記録した生体データ、検査データ及び動画データ等を参照する。しかしながら、手術中に得られるデータの量は膨大であるため、手術中に実施した医療行為及び手術中に発生した事象等を把握しようとすると、医師は、手術中に得られたデータを手術の開始から確認する必要があり、時間がかかっていた。

特開２００６−１６４２５１号公報

以上のように、手術レポートを作成しようとする場合、手術中に得られたデータを確認しなければならないため、大きな負担となっていた。

そこで、目的は、手術中に得られたデータを容易に確認可能であり、医師等の負担を軽減することが可能な手術情報管理装置を提供することにある。

本実施形態に係る手術情報管理装置は、指示マスタ、データベース、イベント認識部及び表示画面作成部を具備する。指示マスタは、手術において実施され得る医療行為についての情報が予め記録される。データベースは、被検体の状態を収集する異常状態収集装置により取得される生体データと、ビデオカメラ及び術野カメラにより前記手術中の様子を撮影した動画データと、前記被検体を検査する医用画像診断装置により前記手術中に取得される医用画像データとを記録する。イベント認識部は、前記生体データにおける異常値の発生、及び、異常値から正常値への回復を、前記イベントとして認識する。表示画面作成部は、前記認識したイベントを発生時刻順に並べ、前記認識したイベント、前記動画データ及び前記医用画像データの時間軸を合わせた表示画面を作成する。

本実施形態に係る手術情報管理装置が用いられる手術システムの機能構成を示すブロック図である。 図１に示す手術情報管理装置の機能構成を示すブロック図である。 図１に示す手術情報管理装置が表示画面を作成する際のフローチャートを示す図である。 図２に示す表示画面作成部により作成される表示画面を示す図である。 図２に示すレポート作成部により作成される手術レポートを示す図である。

以下、図面を参照しながら本実施形態に係わる手術情報管理装置を説明する。図１は、本実施形態に係る手術情報管理装置１０が用いられる手術システムの機能構成を示すブロック図である。図１に示す手術システムは、手術情報管理装置１０、録音装置２０、状態収集装置３０、記録装置４０、検査装置５０及び表示装置６０を備える。

録音装置２０は、手術中の音声を録音する。手術には、執刀医、麻酔医、執刀助手及び看護師等が参加している。録音装置２０は、執刀医、麻酔医、執刀助手及び看護師等が発声する指示及び確認等を録音する。音声データには、録音された時刻がタイムコードとして付されている。録音装置２０は、録音した音声データを手術情報管理装置１０へ出力する。

状態収集装置３０は、例えば、血圧計、心電計、体温計及び脈拍計等であり、それぞれ、血圧、心電図及び脈拍等の生体データを取得する。生体データには、データが取得された時刻がタイムコードとして付されている。状態収集装置３０は、取得した生体データを手術情報管理装置１０へ出力する。

記録装置４０は、例えば、ビデオカメラ及び術野カメラ等であり、手術中の映像を動画データとして記録する。動画データには、映像が撮影された時刻がタイムコードとして付されている。記録装置４０は、記録した動画データを手術情報管理装置１０へ出力する。

検査装置５０は、顕微鏡、内視鏡、超音波診断装置、ＣＴ装置及びＭＲＩ装置等である。検査装置５０は、患者を検査し、検査結果を検査データとして取得する。検査データには、検査が実施された時刻がタイムコードとして付されている。検査装置５０は、取得した検査データを手術情報管理装置１０へ出力する。

表示装置６０は、手術情報管理装置１０により作成され、手術の経過の一覧表示が可能な表示画面を表示する。

図２は、本実施形態に係る手術情報管理装置１０の機能構成を示すブロック図である。図２に示す手術情報管理装置１０は、データベース１１、指示マスタ１２、薬剤マスタ１３、器材マスタ１４、音声解析部１５、イベント認識部１６、表示画面作成部１７、レポート作成部１８、再生制御部１９及び出力制御部１１０を備える。

データベース１１は、録音装置２０から供給される音声データ、状態収集装置３０から供給される生体データ、記録装置４０から供給される動画データ及び検査装置５０から供給される検査データを記録する。

指示マスタ１２は、手術において医療行為を開始するための指示についての情報を予め記録する。ここで、医療行為には、例えば、患者に対する麻酔処置、患者に対する開腹術、患者への輸血処置、超音波診断装置による撮像、ＣＴ装置による撮像及びＭＲＩ装置による撮像等が含まれる。また、指示についての情報には、キーワード検索可能な文字情報が含まれる。

薬剤マスタ１３は、手術において投与され得る薬剤についての情報を予め記録する。薬剤について情報には、キーワード検索可能な文字情報が含まれる。

器材マスタ１４は、手術において使用され得る器材についての情報を予め記録する。手術において使用され得る器材には、例えば、メス等が含まれる。器材についての情報には、キーワード検索可能な文字情報が含まれる。

音声解析部１５は、データベース１１に記録されている音声データを解析する。音声解析部１５は、解析結果をイベント認識部１６へ出力する。

イベント認識部１６は、音声解析部１５から出力される解析結果に基づき、手術に携わった手術関係者を判別する。例えば、イベント認識部１６は、執刀医、麻酔医師、執刀助手及び看護師を判別する。

また、イベント認識部１６は、音声解析部１５から出力される解析結果と、指示マスタ１２、薬剤マスタ１３及び器材マスタ１４に記録される情報とを照合することで、どのようなイベントが発生したか、発生したイベントにおいてどのような薬剤が投与されたか、及び、発生したイベントにおいてどのような器材が使用されたかを判別する。ここで、イベントとは、手術中に発生する事象を示す。

すなわち、イベント認識部１６は、解析結果と指示マスタ１２に記録される情報とを照合させることで、解析結果に含まれるキーワード、例えば、「麻酔」、「開腹」、「○○術」、「輸血」、「超音波」、「ＣＴ」及び「ＭＲＩ」等を検出する。解析結果においてキーワードが検出される場合、イベント認識部１６は、検出したキーワードに応じた医療行為を開始するための指示が執刀医から発せられ、その他の関係者によりその医療行為が実施されたとして、イベントが発生したと判断する。

また、イベント認識部１６は、解析結果と薬剤マスタ１３に記録される情報とを照合させることで、解析結果に含まれるキーワード、例えば、薬剤名及び投与量等を検出する。解析結果においてキーワードが検出される場合、イベント認識部１６は、イベントにおいて、検出された投与量の薬剤が投与されたと判断する。

また、イベント認識部１６は、解析結果と器材マスタ１４に記録される情報とを照合させることで、解析結果に含まれるキーワード、例えば、器材名を検出する。解析結果においてキーワードが検出される場合、イベント認識部１６は、イベントにおいて、検出された器材が使用されたと判断する。

また、イベント認識部１６は、データベース１１に記録される生体データの値が、予め設定される異常値の範囲に達したか否かを判断する。異常値の範囲に達した場合、イベント認識部１６は、患者に異常が発生したとして、イベントが発生したと判断する。また、イベント認識部１６は、生体データが異常値の範囲から、正常値の範囲へ移行した場合、患者の異常が回復したとして、イベントが発生したと判断する。

イベント認識部１６は、イベントテーブルに、イベントが発生した日時、イベントの内容及びイベントの分類を登録する。イベントの分類とは、指示、行為、異常値（または正常値）、使用器具及び薬剤等である。

表示画面作成部１７は、イベント認識部１６で認識されたイベントと、データベース１１に記録される生体データ、動画データ及び検査データとを、時間軸を揃えて一覧表示させるように表示画面を作成する。表示画面作成部１７は、手術日、患者、検査、症例及び手術名等により、作成した表示画面が管理されるようにする。例えば、手術日、患者、検査、症例及び手術名等の少なくともいずれかがキーワードとして入力された場合、表示制御部は、キーワードを参照して作成した表示画面を検索する。

レポート作成部１８は、イベント認識部１６により作成されたイベントテーブルを参照し、発生したイベントをつなぎ合わせることで、手術内容をまとめた手術レポートを作成する。レポート作成部１８は、医師に、作成した手術レポートに手術結果を入力させ、手術レポートを完成させる。完成した手術レポートは、印刷されたり、ＰＤＦファイル化されて電子カルテ等へ配信されたりする。

再生制御部１９は、表示画面作成部１７が作成した表示画面における所定のイベントに対し、動画データの再生が要求された場合、イベントの発生から予め設定した秒数だけ遡って動画データを再生する。

出力制御部１１０は、表示画面作成部１７が作成した表示画面における所定のイベントに対し、生体データ、動画データ、薬剤、薬剤の投与量及び使用器具の出力が要求された場合、要求された情報を要求もとへ出力する。

次に、以上のように構成される手術情報管理装置１０が表示画面を作成する際の動作を詳細に説明する。図３は、本実施形態に係る手術情報管理装置１０が表示画面を作成する際のフローチャートを示す図である。図３における説明では、手術関係者が執刀医、麻酔医、執刀助手及び看護師であり、状態収集装置３０として血圧計及び心電計が設置され、記録装置４０としてビデオ及び術野カメラが設置され、検査装置５０として顕微鏡、内視鏡、超音波診断装置及びＣＴ装置が設置される場合を例に説明する。また、図３における説明では、患者に対する麻酔処置、開腹術、第１の手技、輸血、超音波診断装置による検査、ＣＴ装置による検査、第２の手技、内視鏡による検査、細胞診、第３の手技、第４の手技及び縫合処置がこの順序で手術関係者により実施される場合を例に説明する。

まず、手術情報管理装置１０の音声解析部１５は、データベース１１に記録されている音声データを解析する（ステップＳ３１）。

イベント認識部１６は、音声解析部１５から出力される解析結果に基づき、手術関係者である執刀医、麻酔医、執刀助手、看護師を判別する（ステップＳ３２）。

イベント認識部１６は、音声解析部１５からの解析結果と指示マスタ１２に記録される情報とを照合させて解析結果に含まれるキーワード、例えば、「麻酔」、「開腹」、「第１の手技」、「輸血」、「超音波」、「ＣＴ」、「第２の手技」、「内視鏡」、「細胞診」、「第３の手技」、「第４の手技」及び「縫合」等を検出することで、イベントが発生したと判断する（ステップＳ３３）。

イベント認識部１６は、音声解析部１５からの解析結果と薬剤マスタ１３に記録される情報とを照合させて解析結果に含まれる薬剤名及び投与量を検出することで、イベントにおいて、検出された投与量の薬剤が投与されたと判断する（ステップＳ３４）。

イベント認識部１６は、音声解析部１５からの解析結果と器材マスタ１４に記録される情報とを照合させて解析結果に含まれる器材名を検出することで、イベントにおいて、検出された器材が使用されたと判断する（ステップＳ３５）。

イベント認識部１６は、データベース１１に記録される血圧及び心電図の値が、予め設定される異常値の範囲に達したか否かを判断する。イベント認識部１６は、異常値の範囲に達した場合、患者に異常が発生したとして、イベントが発生したと判断し、血圧及び心電図の値が異常値の範囲から、正常値の範囲へ移行した場合、患者の異常が回復したとして、イベントが発生したと判断する（ステップＳ３６）。

イベント認識部１６は、イベントテーブルに、発生したイベントについての情報を登録する（ステップＳ３７）。

表示画面作成部１７は、イベント認識部１６で認識されたイベントと、データベース１１に記録される血圧及び心電図と、データベース１に記録されるビデオ及び術野カメラによる動画データと、データベース１１に記録される顕微鏡、内視鏡、超音波診断装置及びＣＴ装置による検査データとを、時間軸を揃えて一覧表示させるように表示画面を作成する（ステップＳ３８）。図４は、表示画面作成部１７により作成される表示画面の例を示す図である。

以上のように、本実施形態に係わる手術情報管理装置１０は、音声データに基づいて手術中に発生するイベントを時系列で把握し、把握したイベントと、生体データ、検査データ及び動画データとを時間軸を合わせ、イベント、生体データ、検査データ及び動画データが一覧表示可能な表示画面を作成するようにしている。これにより、手術情報管理装置１０は、手術中に何らかのイベントが発生した時に患者に何が起きていたのかが把握可能な生体データ、検査データ及び動画データを、医師へ提示することが可能となる。これにより、医師は、膨大な手術記録から該当する生体データ、検査データ及び動画データを捜索する手間が省けることとなる。また、患者等への手術経過の説明、カンファレンス及び研修医の教育等に有効活用することが可能となる。

また、本実施形態では、イベント認識部１６は、生体データに異常が発生していた場合、及び、生体データに発生していた異常が正常に戻った場合をイベントとして認識するようにしている。これにより、手術情報管理装置１０は、異常の発生時、及び、異常の回復時の生体データ、検査データ及び動画データを医師へ提示することが可能となる。これにより、患者の容体の変化時の術野の状態、及び、検査結果がわかることとなり、術後の治療及び他件の今後の手術に役立てることが可能となる。

また、本実施形態では、レポート作成部１８は、イベント認識部１６により作成されたイベントテーブルを参照し、手術内容をまとめた手術レポートを作成するようにしている。これにより、手術情報管理装置１０は、医師が手術レポートを作成する負担を軽減させることが可能となる。レポート作成部１８が作成する手術レポートの例を図５に示す。医師は、作成された手術レポートへのコメントの記入、及び、動画データからキー画像を取り出した後のアノテーション等により、手術レポートを完成させる。

また、本実施形態では、再生制御部１９は、イベントの発生から予め設定した秒数だけ遡って動画データを再生するようにしている。これにより、手術情報管理装置１０は、イベント発生の原因である可能性の高い動画を医師へ提示することが可能となる。

また、本実施形態では、表示画面作成部１７は、手術日、患者、検査、症例及び手術名等により、作成した表示画面を管理するようにしている。これにより、手術情報管理装置１０は、表示画面の検索、表示、集計が可能となるため、手術用ＰＡＣＳ（Picture Archiving and Communication System）として利用されることが可能となる。

したがって、本実施形態に係わる手術情報管理装置１０によれば、手術中に得られたデータを容易に確認でき、医師等の負担を軽減することができる。

なお、上記実施形態では、動画データはイベントと時間軸をそろえて表示する場合を例に説明したが、これに限定されない。例えば、手術情報管理装置１０は、イベント発生時刻に動画データに対してイベントを識別可能なチャプタを入れる動画処理部をさらに備えていても良い。これにより、医師は、動画データにおけるイベント発生のタイミング、及び、発生したイベントをより正確に把握することが可能となる。

本発明の実施形態を説明したが、この実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。この実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。

１０…手術情報管理装置、１１…データベース、１２…指示マスタ、１３…薬剤マスタ、１４…器材マスタ、１５…音声解析部、１６…イベント認識部、１７…表示画面作成部、１８…レポート作成部、１９…再生制御部、１１０…出力制御部、２０…録音装置、３０…状態収集装置、４０…記録装置、５０…検査装置

Claims (5)

1. 手術において実施され得る医療行為についての情報が予め記録される指示マスタと、
   被検体の状態を収集する状態収集装置により取得される生体データと、ビデオカメラ及び術野カメラにより前記手術中の様子を撮影した動画データと、前記被検体を検査する医用画像診断装置により前記手術中に取得される医用画像データとを記録するデータベースと、
   前記生体データにおける異常値の発生、及び、異常値から正常値への回復を、イベントとして認識するイベント認識部と、
   前記認識したイベントを発生時刻順に並べ、前記認識したイベント、前記動画データ及び前記医用画像データの時間軸を合わせた表示画面を作成する表示画面作成部と
   を具備する手術情報管理装置。
2. 音声データを解析する音声解析部をさらに具備し、
   前記データベースは、前記手術の最中に取得される音声データをさらに記録し、
   前記イベント認識部は、前記データベースに記録されている音声データの解析結果を前記指示マスタに記録される情報と照合させることで、前記手術において実施された医療行為を前記イベントとしてさらに認識する請求項１記載の手術情報管理装置。
3. 前記手術において投与され得る薬剤についての情報が予め記録される薬剤マスタと、
   前記手術において使用され得る器材についての情報が予め記録される器材マスタとをさらに具備し、
   前記イベント認識部は、前記音声データの解析結果を前記薬剤マスタと照合させることで、前記イベントにおいて使用される薬剤を特定し、
   前記イベント認識部は、前記音声データの解析結果を前記器材マスタと照合させることで、前記イベントにおいて使用される器材を特定し、
   前記表示画面作成部は、前記認識したイベントと、前記特定した薬剤及び前記特定した器材とを関連付けて前記表示画面を作成する請求項２記載の手術情報管理装置。
4. 前記イベントについての動画データを再生する指示を受けると、前記イベントの発生から予め設定した秒数だけ遡って前記動画データを再生する再生制御部をさらに具備する請求項１乃至３のいずれかに記載の手術情報管理装置。
5. 前記イベント認識部により認識されたイベントを利用することで、手術内容をまとめた手術レポートを作成するレポート作成部をさらに具備する請求項１乃至４のいずれかに記載の手術情報管理装置。