JP2015097065A - Surgical information management apparatus - Google Patents

Surgical information management apparatus Download PDF

Info

Publication number
JP2015097065A
JP2015097065A JP2013237439A JP2013237439A JP2015097065A JP 2015097065 A JP2015097065 A JP 2015097065A JP 2013237439 A JP2013237439 A JP 2013237439A JP 2013237439 A JP2013237439 A JP 2013237439A JP 2015097065 A JP2015097065 A JP 2015097065A
Authority
JP
Japan
Prior art keywords
event
surgery
information management
data
display screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013237439A
Other languages
Japanese (ja)
Other versions
JP6359264B2 (en
JP2015097065A5 (en
Inventor
さゆり 松本
Sayuri Matsumoto
さゆり 松本
彰一 野川
Shoichi Nogawa
彰一 野川
健一 薄井
Kenichi Usui
健一 薄井
鈴木 秀行
Hideyuki Suzuki
秀行 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Canon Medical Systems Corp
Original Assignee
Toshiba Corp
Toshiba Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp, Toshiba Medical Systems Corp filed Critical Toshiba Corp
Priority to JP2013237439A priority Critical patent/JP6359264B2/en
Publication of JP2015097065A publication Critical patent/JP2015097065A/en
Publication of JP2015097065A5 publication Critical patent/JP2015097065A5/ja
Application granted granted Critical
Publication of JP6359264B2 publication Critical patent/JP6359264B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

PROBLEM TO BE SOLVED: To provide a surgical information management apparatus capable of facilitating confirming data obtained during a surgical procedure, and alleviating burden of a medical doctor and the like.SOLUTION: A surgical information management apparatus according to an embodiment of the present invention includes: an instruction master; a database; a voice analyzer; an event recognition unit; and a display-screen formation unit. The instruction master records therein information on medical activities possibly implemented in a surgical procedure in advance. The database records therein voice data acquired during the surgical procedure, and biological data acquired by a state collector collecting a condition of an analyte. The voice analyzer analyzes the voice data. The event recognition unit recognizes a medical activity implemented in the surgical procedure as an event by collating a voice data analysis result with the information recorded in the instruction master, and also recognizes occurrence of an abnormal value in the biological data and return from the abnormal value to a normal value therein as events. The display-screen formation unit forms a display screen on which recognized events are lined up in order of occurrence time.

Description

本発明の実施形態は、手術に関する情報を、時間軸を合わせて表示する手術情報管理装置に関する。   Embodiments described herein relate generally to a surgery information management apparatus that displays information related to surgery along a time axis.

近年、手術では複数の医療機器が使用され、これらの医療機器からそれぞれ出力されるデータが記録される。医療機器から出力されるデータとは、例えば、異常状態収集装置により計測される血圧、心電図及び脈拍等の生体データ、医用画像診断装置等により撮影される検査データ、並びに、術野カメラにより撮影される動画データ等である。   In recent years, a plurality of medical devices are used in surgery, and data output from each of these medical devices is recorded. The data output from the medical device is, for example, blood pressure measured by an abnormal state collection device, biological data such as an electrocardiogram and a pulse, examination data photographed by a medical image diagnostic device, etc., and photographed by an operative field camera. Video data.

ところで、術後に手術についての手術レポートを作成しようとする場合、医師は、手術中に記録した生体データ、検査データ及び動画データ等を参照する。しかしながら、手術中に得られるデータの量は膨大であるため、手術中に実施した医療行為及び手術中に発生した事象等を把握しようとすると、医師は、手術中に得られたデータを手術の開始から確認する必要があり、時間がかかっていた。   By the way, when an operation report about an operation is to be created after an operation, a doctor refers to biological data, examination data, moving image data, and the like recorded during the operation. However, since the amount of data obtained during surgery is enormous, when trying to understand the medical practices performed during the surgery and the events that occurred during the surgery, doctors can use the data obtained during the surgery to It was time consuming to check from the start.

特開2006−164251号公報JP 2006-164251 A

以上のように、手術レポートを作成しようとする場合、手術中に得られたデータを確認しなければならないため、大きな負担となっていた。   As described above, when an operation report is to be created, the data obtained during the operation must be confirmed, which is a heavy burden.

そこで、目的は、手術中に得られたデータを容易に確認可能であり、医師等の負担を軽減することが可能な手術情報管理装置を提供することにある。   Therefore, an object is to provide an operation information management apparatus that can easily check data obtained during an operation and can reduce a burden on a doctor or the like.

本実施形態に係る手術情報管理装置は、指示マスタ、データベース、音声解析部、イベント認識部及び表示画面作成部を具備する。指示マスタは、手術において実施され得る医療行為についての情報が予め記録される。データベースは、前記手術の最中に取得される音声データ、及び、被検体の状態を収集する異常状態収集装置により取得される生体データを記録する。音声解析部は、前記音声データを解析する。イベント認識部は、前記音声データの解析結果を前記指示マスタに記録される情報と照合させることで、前記手術において実施された医療行為をイベントとして認識すると共に、前記生体データにおける異常値の発生、及び、異常値から正常値への回復を、前記イベントとして認識する。表示画面作成部は、前記認識したイベントを発生時刻順に並べた表示画面を作成する。   The surgery information management apparatus according to the present embodiment includes an instruction master, a database, a voice analysis unit, an event recognition unit, and a display screen creation unit. In the instruction master, information on medical practices that can be performed in surgery is recorded in advance. The database records voice data acquired during the surgery and biological data acquired by an abnormal state collection device that collects the state of the subject. The voice analysis unit analyzes the voice data. The event recognizing unit collates the analysis result of the voice data with information recorded in the instruction master, thereby recognizing a medical practice performed in the surgery as an event, and generating an abnormal value in the biological data, And recovery from an abnormal value to a normal value is recognized as the event. The display screen creation unit creates a display screen in which the recognized events are arranged in order of occurrence time.

本実施形態に係る手術情報管理装置が用いられる手術システムの機能構成を示すブロック図である。It is a block diagram which shows the function structure of the surgery system with which the surgery information management apparatus which concerns on this embodiment is used. 図1に示す手術情報管理装置の機能構成を示すブロック図である。It is a block diagram which shows the function structure of the surgery information management apparatus shown in FIG. 図1に示す手術情報管理装置が表示画面を作成する際のフローチャートを示す図である。It is a figure which shows the flowchart at the time of the surgery information management apparatus shown in FIG. 1 producing a display screen. 図2に示す表示画面作成部により作成される表示画面を示す図である。It is a figure which shows the display screen produced by the display screen creation part shown in FIG. 図2に示すレポート作成部により作成される手術レポートを示す図である。It is a figure which shows the surgery report produced by the report production part shown in FIG.

以下、図面を参照しながら本実施形態に係わる手術情報管理装置を説明する。図1は、本実施形態に係る手術情報管理装置10が用いられる手術システムの機能構成を示すブロック図である。図1に示す手術システムは、手術情報管理装置10、録音装置20、状態収集装置30、記録装置40、検査装置50及び表示装置60を備える。   Hereinafter, an operation information management apparatus according to the present embodiment will be described with reference to the drawings. FIG. 1 is a block diagram showing a functional configuration of a surgery system in which the surgery information management apparatus 10 according to the present embodiment is used. The surgical system shown in FIG. 1 includes a surgical information management device 10, a recording device 20, a state collection device 30, a recording device 40, an inspection device 50, and a display device 60.

録音装置20は、手術中の音声を録音する。手術には、執刀医、麻酔医、執刀助手及び看護師等が参加している。録音装置20は、執刀医、麻酔医、執刀助手及び看護師等が発声する指示及び確認等を録音する。音声データには、録音された時刻がタイムコードとして付されている。録音装置20は、録音した音声データを手術情報管理装置10へ出力する。   The recording device 20 records sound during surgery. Surgeons, anesthesiologists, surgical assistants and nurses participate in the surgery. The recording device 20 records instructions and confirmations uttered by the surgeon, anesthesiologist, surgical assistant, nurse, and the like. The recorded time is attached to the audio data as a time code. The recording device 20 outputs the recorded voice data to the surgery information management device 10.

状態収集装置30は、例えば、血圧計、心電計、体温計及び脈拍計等であり、それぞれ、血圧、心電図及び脈拍等の生体データを取得する。生体データには、データが取得された時刻がタイムコードとして付されている。状態収集装置30は、取得した生体データを手術情報管理装置10へ出力する。   The state collection device 30 is, for example, a sphygmomanometer, an electrocardiograph, a thermometer, a pulse meter, and the like, and acquires biological data such as a blood pressure, an electrocardiogram, and a pulse, respectively. The time when the data was acquired is attached to the biological data as a time code. The state collection device 30 outputs the acquired biological data to the surgery information management device 10.

記録装置40は、例えば、ビデオカメラ及び術野カメラ等であり、手術中の映像を動画データとして記録する。動画データには、映像が撮影された時刻がタイムコードとして付されている。記録装置40は、記録した動画データを手術情報管理装置10へ出力する。   The recording device 40 is, for example, a video camera, an operative field camera, or the like, and records a video during surgery as moving image data. The time when the video was shot is attached to the moving image data as a time code. The recording device 40 outputs the recorded moving image data to the surgery information management device 10.

検査装置50は、顕微鏡、内視鏡、超音波診断装置、CT装置及びMRI装置等である。検査装置50は、患者を検査し、検査結果を検査データとして取得する。検査データには、検査が実施された時刻がタイムコードとして付されている。検査装置50は、取得した検査データを手術情報管理装置10へ出力する。   The inspection apparatus 50 is a microscope, endoscope, ultrasonic diagnostic apparatus, CT apparatus, MRI apparatus, or the like. The inspection device 50 inspects the patient and acquires the inspection result as inspection data. The time at which the inspection is performed is attached to the inspection data as a time code. The inspection device 50 outputs the acquired inspection data to the surgery information management device 10.

表示装置60は、手術情報管理装置10により作成され、手術の経過の一覧表示が可能な表示画面を表示する。   The display device 60 displays a display screen that is created by the surgery information management device 10 and that can display a list of the progress of surgery.

図2は、本実施形態に係る手術情報管理装置10の機能構成を示すブロック図である。図2に示す手術情報管理装置10は、データベース11、指示マスタ12、薬剤マスタ13、器材マスタ14、音声解析部15、イベント認識部16、表示画面作成部17、レポート作成部18、再生制御部19及び出力制御部110を備える。   FIG. 2 is a block diagram showing a functional configuration of the surgery information management apparatus 10 according to the present embodiment. 2 includes a database 11, an instruction master 12, a drug master 13, an equipment master 14, a voice analysis unit 15, an event recognition unit 16, a display screen creation unit 17, a report creation unit 18, and a reproduction control unit. 19 and the output control unit 110.

データベース11は、録音装置20から供給される音声データ、状態収集装置30から供給される生体データ、記録装置40から供給される動画データ及び検査装置50から供給される検査データを記録する。   The database 11 records audio data supplied from the recording device 20, biological data supplied from the state collection device 30, moving image data supplied from the recording device 40, and inspection data supplied from the inspection device 50.

指示マスタ12は、手術において医療行為を開始するための指示についての情報を予め記録する。ここで、医療行為には、例えば、患者に対する麻酔処置、患者に対する開腹術、患者への輸血処置、超音波診断装置による撮像、CT装置による撮像及びMRI装置による撮像等が含まれる。また、指示についての情報には、キーワード検索可能な文字情報が含まれる。   The instruction master 12 records in advance information about an instruction for starting a medical practice in surgery. Here, the medical practice includes, for example, anesthesia treatment for the patient, laparotomy for the patient, blood transfusion treatment for the patient, imaging by an ultrasonic diagnostic apparatus, imaging by a CT apparatus, imaging by an MRI apparatus, and the like. Further, the information about the instruction includes character information that can be searched for a keyword.

薬剤マスタ13は、手術において投与され得る薬剤についての情報を予め記録する。薬剤について情報には、キーワード検索可能な文字情報が含まれる。   The drug master 13 records in advance information about a drug that can be administered in surgery. The information about the medicine includes character information that can be searched for keywords.

器材マスタ14は、手術において使用され得る器材についての情報を予め記録する。手術において使用され得る器材には、例えば、メス等が含まれる。器材についての情報には、キーワード検索可能な文字情報が含まれる。   The instrument master 14 records in advance information about instruments that can be used in surgery. Equipment that can be used in surgery includes, for example, a scalpel. The information about the equipment includes character information that can be searched for keywords.

音声解析部15は、データベース11に記録されている音声データを解析する。音声解析部15は、解析結果をイベント認識部16へ出力する。   The voice analysis unit 15 analyzes the voice data recorded in the database 11. The voice analysis unit 15 outputs the analysis result to the event recognition unit 16.

イベント認識部16は、音声解析部15から出力される解析結果に基づき、手術に携わった手術関係者を判別する。例えば、イベント認識部16は、執刀医、麻酔医師、執刀助手及び看護師を判別する。   The event recognizing unit 16 discriminates a surgical operation person who has been involved in the surgery based on the analysis result output from the voice analyzing unit 15. For example, the event recognition unit 16 determines a surgeon, an anesthesiologist, a surgical assistant, and a nurse.

また、イベント認識部16は、音声解析部15から出力される解析結果と、指示マスタ12、薬剤マスタ13及び器材マスタ14に記録される情報とを照合することで、どのようなイベントが発生したか、発生したイベントにおいてどのような薬剤が投与されたか、及び、発生したイベントにおいてどのような器材が使用されたかを判別する。ここで、イベントとは、手術中に発生する事象を示す。   In addition, the event recognition unit 16 collates the analysis result output from the voice analysis unit 15 with the information recorded in the instruction master 12, the drug master 13, and the equipment master 14, and what event has occurred. It is determined what kind of medicine was administered in the event that occurred and what equipment was used in the event that occurred. Here, the event indicates an event that occurs during the operation.

すなわち、イベント認識部16は、解析結果と指示マスタ12に記録される情報とを照合させることで、解析結果に含まれるキーワード、例えば、「麻酔」、「開腹」、「○○術」、「輸血」、「超音波」、「CT」及び「MRI」等を検出する。解析結果においてキーワードが検出される場合、イベント認識部16は、検出したキーワードに応じた医療行為を開始するための指示が執刀医から発せられ、その他の関係者によりその医療行為が実施されたとして、イベントが発生したと判断する。   In other words, the event recognition unit 16 collates the analysis result with the information recorded in the instruction master 12, so that keywords included in the analysis result, for example, “anesthetic”, “laparotomy”, “XX technique”, “ “Transfusion”, “Ultrasound”, “CT”, “MRI” and the like are detected. When a keyword is detected in the analysis result, the event recognition unit 16 assumes that an instruction for starting a medical practice corresponding to the detected keyword is issued from the surgeon, and that the medical practice has been carried out by other related parties. It is determined that an event has occurred.

また、イベント認識部16は、解析結果と薬剤マスタ13に記録される情報とを照合させることで、解析結果に含まれるキーワード、例えば、薬剤名及び投与量等を検出する。解析結果においてキーワードが検出される場合、イベント認識部16は、イベントにおいて、検出された投与量の薬剤が投与されたと判断する。   In addition, the event recognition unit 16 collates the analysis result with the information recorded in the drug master 13, thereby detecting a keyword included in the analysis result, such as a drug name and a dose. When a keyword is detected in the analysis result, the event recognition unit 16 determines that the detected dose of the drug has been administered in the event.

また、イベント認識部16は、解析結果と器材マスタ14に記録される情報とを照合させることで、解析結果に含まれるキーワード、例えば、器材名を検出する。解析結果においてキーワードが検出される場合、イベント認識部16は、イベントにおいて、検出された器材が使用されたと判断する。   Moreover, the event recognition part 16 detects the keyword contained in an analysis result, for example, an equipment name, by collating an analysis result and the information recorded on the equipment master 14. FIG. When a keyword is detected in the analysis result, the event recognition unit 16 determines that the detected equipment has been used in the event.

また、イベント認識部16は、データベース11に記録される生体データの値が、予め設定される異常値の範囲に達したか否かを判断する。異常値の範囲に達した場合、イベント認識部16は、患者に異常が発生したとして、イベントが発生したと判断する。また、イベント認識部16は、生体データが異常値の範囲から、正常値の範囲へ移行した場合、患者の異常が回復したとして、イベントが発生したと判断する。   Further, the event recognition unit 16 determines whether or not the value of the biometric data recorded in the database 11 has reached a preset abnormal value range. When the range of the abnormal value is reached, the event recognition unit 16 determines that an event has occurred, assuming that an abnormality has occurred in the patient. Further, the event recognition unit 16 determines that an event has occurred, assuming that the patient's abnormality has been recovered when the biological data has shifted from the abnormal value range to the normal value range.

イベント認識部16は、イベントテーブルに、イベントが発生した日時、イベントの内容及びイベントの分類を登録する。イベントの分類とは、指示、行為、異常値(または正常値)、使用器具及び薬剤等である。   The event recognition unit 16 registers the date and time when the event occurred, the contents of the event, and the classification of the event in the event table. The event classification includes instructions, actions, abnormal values (or normal values), devices used, drugs, and the like.

表示画面作成部17は、イベント認識部16で認識されたイベントと、データベース11に記録される生体データ、動画データ及び検査データとを、時間軸を揃えて一覧表示させるように表示画面を作成する。表示画面作成部17は、手術日、患者、検査、症例及び手術名等により、作成した表示画面が管理されるようにする。例えば、手術日、患者、検査、症例及び手術名等の少なくともいずれかがキーワードとして入力された場合、表示制御部は、キーワードを参照して作成した表示画面を検索する。   The display screen creation unit 17 creates a display screen so that the events recognized by the event recognition unit 16 and the biological data, moving image data, and examination data recorded in the database 11 are displayed in a list with the time axis aligned. . The display screen creation unit 17 manages the created display screen based on the operation date, patient, examination, case, operation name, and the like. For example, when at least one of an operation date, a patient, an examination, a case, and an operation name is input as a keyword, the display control unit searches for a display screen created by referring to the keyword.

レポート作成部18は、イベント認識部16により作成されたイベントテーブルを参照し、発生したイベントをつなぎ合わせることで、手術内容をまとめた手術レポートを作成する。レポート作成部18は、医師に、作成した手術レポートに手術結果を入力させ、手術レポートを完成させる。完成した手術レポートは、印刷されたり、PDFファイル化されて電子カルテ等へ配信されたりする。   The report creating unit 18 refers to the event table created by the event recognizing unit 16, and creates an operation report summarizing the operation contents by connecting the generated events. The report creation unit 18 causes the doctor to input the surgical result into the created surgical report, and completes the surgical report. The completed surgical report is printed or converted into a PDF file and distributed to an electronic medical record or the like.

再生制御部19は、表示画面作成部17が作成した表示画面における所定のイベントに対し、動画データの再生が要求された場合、イベントの発生から予め設定した秒数だけ遡って動画データを再生する。   When the reproduction of the moving image data is requested for a predetermined event on the display screen created by the display screen creating unit 17, the reproduction control unit 19 reproduces the moving image data by going back a predetermined number of seconds from the occurrence of the event. .

出力制御部110は、表示画面作成部17が作成した表示画面における所定のイベントに対し、生体データ、動画データ、薬剤、薬剤の投与量及び使用器具の出力が要求された場合、要求された情報を要求もとへ出力する。   The output control unit 110 is requested information when a predetermined event on the display screen created by the display screen creation unit 17 is requested to output biometric data, moving image data, a drug, a dose of the drug, and a device used. Is output to the request source.

次に、以上のように構成される手術情報管理装置10が表示画面を作成する際の動作を詳細に説明する。図3は、本実施形態に係る手術情報管理装置10が表示画面を作成する際のフローチャートを示す図である。図3における説明では、手術関係者が執刀医、麻酔医、執刀助手及び看護師であり、状態収集装置30として血圧計及び心電計が設置され、記録装置40としてビデオ及び術野カメラが設置され、検査装置50として顕微鏡、内視鏡、超音波診断装置及びCT装置が設置される場合を例に説明する。また、図3における説明では、患者に対する麻酔処置、開腹術、第1の手技、輸血、超音波診断装置による検査、CT装置による検査、第2の手技、内視鏡による検査、細胞診、第3の手技、第4の手技及び縫合処置がこの順序で手術関係者により実施される場合を例に説明する。   Next, the operation when the surgery information management apparatus 10 configured as described above creates a display screen will be described in detail. FIG. 3 is a diagram illustrating a flowchart when the surgery information management apparatus 10 according to the present embodiment creates a display screen. In the description of FIG. 3, surgical personnel are a surgeon, anesthesiologist, surgical assistant, and nurse, a blood pressure meter and an electrocardiograph are installed as the state collection device 30, and a video and an operative field camera are installed as the recording device 40. The case where a microscope, an endoscope, an ultrasonic diagnostic apparatus, and a CT apparatus are installed as the inspection apparatus 50 will be described as an example. In the description of FIG. 3, anesthesia treatment, laparotomy, first technique, blood transfusion, examination using an ultrasonic diagnostic apparatus, examination using a CT apparatus, second technique, examination using an endoscope, cytology, An example will be described in which the third procedure, the fourth procedure, and the suturing procedure are performed by surgical personnel in this order.

まず、手術情報管理装置10の音声解析部15は、データベース11に記録されている音声データを解析する(ステップS31)。   First, the voice analysis unit 15 of the surgery information management apparatus 10 analyzes the voice data recorded in the database 11 (step S31).

イベント認識部16は、音声解析部15から出力される解析結果に基づき、手術関係者である執刀医、麻酔医、執刀助手、看護師を判別する(ステップS32)。   The event recognizing unit 16 discriminates the surgeon, anesthesiologist, surgical assistant, and nurse who are related to the operation based on the analysis result output from the voice analysis unit 15 (step S32).

イベント認識部16は、音声解析部15からの解析結果と指示マスタ12に記録される情報とを照合させて解析結果に含まれるキーワード、例えば、「麻酔」、「開腹」、「第1の手技」、「輸血」、「超音波」、「CT」、「第2の手技」、「内視鏡」、「細胞診」、「第3の手技」、「第4の手技」及び「縫合」等を検出することで、イベントが発生したと判断する(ステップS33)。   The event recognition unit 16 collates the analysis result from the voice analysis unit 15 with the information recorded in the instruction master 12, and includes keywords included in the analysis result, such as “anesthetic”, “laparotomy”, “first technique”, for example. ”,“ Blood transfusion ”,“ ultrasound ”,“ CT ”,“ second procedure ”,“ endoscope ”,“ cytology ”,“ third procedure ”,“ fourth procedure ”and“ suture ” It is determined that an event has occurred (step S33).

イベント認識部16は、音声解析部15からの解析結果と薬剤マスタ13に記録される情報とを照合させて解析結果に含まれる薬剤名及び投与量を検出することで、イベントにおいて、検出された投与量の薬剤が投与されたと判断する(ステップS34)。   The event recognition unit 16 collates the analysis result from the voice analysis unit 15 with the information recorded in the drug master 13, and detects the drug name and dose contained in the analysis result, thereby detecting the event. It is determined that a dose of drug has been administered (step S34).

イベント認識部16は、音声解析部15からの解析結果と器材マスタ14に記録される情報とを照合させて解析結果に含まれる器材名を検出することで、イベントにおいて、検出された器材が使用されたと判断する(ステップS35)。   The event recognition unit 16 collates the analysis result from the voice analysis unit 15 with the information recorded in the device master 14, and detects the device name included in the analysis result, so that the detected device is used in the event. It is determined that it has been done (step S35).

イベント認識部16は、データベース11に記録される血圧及び心電図の値が、予め設定される異常値の範囲に達したか否かを判断する。イベント認識部16は、異常値の範囲に達した場合、患者に異常が発生したとして、イベントが発生したと判断し、血圧及び心電図の値が異常値の範囲から、正常値の範囲へ移行した場合、患者の異常が回復したとして、イベントが発生したと判断する(ステップS36)。   The event recognition unit 16 determines whether or not the blood pressure and electrocardiogram values recorded in the database 11 have reached a preset abnormal value range. When the event recognition unit 16 reaches the abnormal value range, it is determined that an event has occurred, and the blood pressure and the electrocardiogram values have shifted from the abnormal value range to the normal value range. In this case, it is determined that an event has occurred, assuming that the patient's abnormality has been recovered (step S36).

イベント認識部16は、イベントテーブルに、発生したイベントについての情報を登録する(ステップS37)。   The event recognition unit 16 registers information about the event that has occurred in the event table (step S37).

表示画面作成部17は、イベント認識部16で認識されたイベントと、データベース11に記録される血圧及び心電図と、データベース1に記録されるビデオ及び術野カメラによる動画データと、データベース11に記録される顕微鏡、内視鏡、超音波診断装置及びCT装置による検査データとを、時間軸を揃えて一覧表示させるように表示画面を作成する(ステップS38)。図4は、表示画面作成部17により作成される表示画面の例を示す図である。   The display screen creation unit 17 is recorded in the database 11, the event recognized by the event recognition unit 16, the blood pressure and electrocardiogram recorded in the database 11, the video recorded in the database 1 and the moving image data by the surgical field camera. A display screen is created so that inspection data from the microscope, endoscope, ultrasonic diagnostic apparatus, and CT apparatus are displayed in a list with the time axis aligned (step S38). FIG. 4 is a diagram illustrating an example of a display screen created by the display screen creation unit 17.

以上のように、本実施形態に係わる手術情報管理装置10は、音声データに基づいて手術中に発生するイベントを時系列で把握し、把握したイベントと、生体データ、検査データ及び動画データとを時間軸を合わせ、イベント、生体データ、検査データ及び動画データが一覧表示可能な表示画面を作成するようにしている。これにより、手術情報管理装置10は、手術中に何らかのイベントが発生した時に患者に何が起きていたのかが把握可能な生体データ、検査データ及び動画データを、医師へ提示することが可能となる。これにより、医師は、膨大な手術記録から該当する生体データ、検査データ及び動画データを捜索する手間が省けることとなる。また、患者等への手術経過の説明、カンファレンス及び研修医の教育等に有効活用することが可能となる。   As described above, the surgery information management apparatus 10 according to the present embodiment grasps events that occur during surgery based on audio data in time series, and obtains the grasped events, biological data, examination data, and moving image data. A display screen capable of displaying a list of events, biological data, examination data, and moving image data is created by adjusting the time axis. Thereby, the surgery information management apparatus 10 can present to the doctor biometric data, examination data, and moving image data that can grasp what has happened to the patient when an event occurs during the surgery. . As a result, the doctor can save time and effort to search the corresponding biometric data, examination data, and moving image data from a huge amount of operation records. In addition, it can be effectively used for explanation of the progress of surgery to a patient, conference, education of a resident, and the like.

また、本実施形態では、イベント認識部16は、生体データに異常が発生していた場合、及び、生体データに発生していた異常が正常に戻った場合をイベントとして認識するようにしている。これにより、手術情報管理装置10は、異常の発生時、及び、異常の回復時の生体データ、検査データ及び動画データを医師へ提示することが可能となる。これにより、患者の容体の変化時の術野の状態、及び、検査結果がわかることとなり、術後の治療及び他件の今後の手術に役立てることが可能となる。   In the present embodiment, the event recognition unit 16 recognizes, as an event, when an abnormality has occurred in the biological data and when an abnormality that has occurred in the biological data has returned to normal. Thereby, the surgery information management apparatus 10 can present to the doctor biometric data, examination data, and moving image data when an abnormality occurs and when the abnormality is recovered. As a result, the state of the operative field at the time of change of the patient's condition and the examination result can be understood, and it can be used for post-operative treatment and other future operations.

また、本実施形態では、レポート作成部18は、イベント認識部16により作成されたイベントテーブルを参照し、手術内容をまとめた手術レポートを作成するようにしている。これにより、手術情報管理装置10は、医師が手術レポートを作成する負担を軽減させることが可能となる。レポート作成部18が作成する手術レポートの例を図5に示す。医師は、作成された手術レポートへのコメントの記入、及び、動画データからキー画像を取り出した後のアノテーション等により、手術レポートを完成させる。   In the present embodiment, the report creating unit 18 refers to the event table created by the event recognizing unit 16 and creates a surgical report summarizing the surgical contents. Thereby, the surgery information management apparatus 10 can reduce the burden of a doctor creating a surgery report. An example of a surgical report created by the report creating unit 18 is shown in FIG. The doctor completes the surgical report by entering comments on the created surgical report and by annotation after extracting the key image from the moving image data.

また、本実施形態では、再生制御部19は、イベントの発生から予め設定した秒数だけ遡って動画データを再生するようにしている。これにより、手術情報管理装置10は、イベント発生の原因である可能性の高い動画を医師へ提示することが可能となる。   In this embodiment, the playback control unit 19 plays back the moving image data by going back a preset number of seconds from the occurrence of the event. Thereby, the surgery information management apparatus 10 can present a doctor with a video that is highly likely to cause an event.

また、本実施形態では、表示画面作成部17は、手術日、患者、検査、症例及び手術名等により、作成した表示画面を管理するようにしている。これにより、手術情報管理装置10は、表示画面の検索、表示、集計が可能となるため、手術用PACS(Picture Archiving and Communication System)として利用されることが可能となる。   In the present embodiment, the display screen creation unit 17 manages the created display screen based on the operation date, patient, examination, case, operation name, and the like. As a result, the surgical information management apparatus 10 can search, display, and tabulate the display screen, and thus can be used as a surgical PACS (Picture Archiving and Communication System).

したがって、本実施形態に係わる手術情報管理装置10によれば、手術中に得られたデータを容易に確認でき、医師等の負担を軽減することができる。   Therefore, according to the surgery information management apparatus 10 according to the present embodiment, data obtained during the surgery can be easily confirmed, and the burden on the doctor or the like can be reduced.

なお、上記実施形態では、動画データはイベントと時間軸をそろえて表示する場合を例に説明したが、これに限定されない。例えば、手術情報管理装置10は、イベント発生時刻に動画データに対してイベントを識別可能なチャプタを入れる動画処理部をさらに備えていても良い。これにより、医師は、動画データにおけるイベント発生のタイミング、及び、発生したイベントをより正確に把握することが可能となる。   In the above embodiment, the case where the moving image data is displayed with the event and the time axis aligned is described as an example, but the present invention is not limited to this. For example, the surgery information management apparatus 10 may further include a moving image processing unit that inserts a chapter capable of identifying an event with respect to moving image data at the event occurrence time. Thereby, the doctor can grasp the timing of the event occurrence in the moving image data and the event that has occurred more accurately.

本発明の実施形態を説明したが、この実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。この新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。この実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。   Although the embodiment of the present invention has been described, this embodiment is presented as an example and is not intended to limit the scope of the invention. The novel embodiment can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the scope of the invention. This embodiment and its modifications are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.

10…手術情報管理装置、11…データベース、12…指示マスタ、13…薬剤マスタ、14…器材マスタ、15…音声解析部、16…イベント認識部、17…表示画面作成部、18…レポート作成部、19…再生制御部、110…出力制御部、20…録音装置、30…状態収集装置、40…記録装置、50…検査装置   DESCRIPTION OF SYMBOLS 10 ... Surgery information management apparatus, 11 ... Database, 12 ... Instruction master, 13 ... Drug master, 14 ... Equipment master, 15 ... Voice analysis part, 16 ... Event recognition part, 17 ... Display screen creation part, 18 ... Report creation part , 19: Playback control unit, 110: Output control unit, 20 ... Recording device, 30 ... Status collection device, 40 ... Recording device, 50 ... Inspection device

Claims (5)

手術において実施され得る医療行為についての情報が予め記録される指示マスタと、
前記手術の最中に取得される音声データ、及び、被検体の状態を収集する状態収集装置により取得される生体データを記録するデータベースと、
前記音声データを解析する音声解析部と、
前記音声データの解析結果を前記指示マスタに記録される情報と照合させることで、前記手術において実施された医療行為をイベントとして認識すると共に、前記生体データにおける異常値の発生、及び、異常値から正常値への回復を、前記イベントとして認識するイベント認識部と、
前記認識したイベントを発生時刻順に並べた表示画面を作成する表示画面作成部と
を具備する手術情報管理装置。
An instruction master in which information about medical practices that can be performed in surgery is recorded in advance;
Voice data acquired during the surgery, and a database that records biological data acquired by a state collection device that collects the state of the subject;
A voice analysis unit for analyzing the voice data;
By collating the analysis result of the voice data with the information recorded in the instruction master, the medical action performed in the surgery is recognized as an event, the occurrence of an abnormal value in the biological data, and the abnormal value An event recognition unit that recognizes recovery to a normal value as the event;
A surgical information management apparatus comprising: a display screen creation unit that creates a display screen in which the recognized events are arranged in order of occurrence time.
前記データベースは、前記手術中の様子を撮影した動画データと、前記被検体を検査する検査装置により取得される検査データとを記録し、
前記表示画面作成部は、前記認識したイベント、前記動画データ及び前記検査データの時間軸を合わせることで前記表示画面を作成する請求項1記載の手術情報管理装置。
The database records moving image data obtained by imaging the state during the operation, and examination data acquired by an examination apparatus that examines the subject,
The surgical information management device according to claim 1, wherein the display screen creation unit creates the display screen by combining time axes of the recognized event, the moving image data, and the examination data.
前記手術において投与され得る薬剤についての情報が予め記録される薬剤マスタと、
前記手術において使用され得る器材についての情報が予め記録される器材マスタと
をさらに具備し、
前記イベント認識部は、前記音声データの解析結果を前記薬剤マスタと照合させることで、前記イベントにおいて使用される薬剤を特定し、
前記イベント認識部は、前記音声データの解析結果を前記器材マスタと照合させることで、前記イベントにおいて使用される器材を特定し、
前記表示画面作成部は、前記認識したイベントと、前記特定した薬剤及び前記特定した器材とを関連付けて前記表示画面を作成する請求項1又は2記載の手術情報管理装置。
A drug master in which information about drugs that can be administered in the surgery is recorded in advance;
Further comprising an equipment master in which information about equipment that can be used in the surgery is recorded in advance;
The event recognition unit identifies a drug used in the event by collating the analysis result of the voice data with the drug master,
The event recognition unit identifies the equipment used in the event by collating the analysis result of the audio data with the equipment master,
The surgery information management device according to claim 1 or 2, wherein the display screen creation unit creates the display screen by associating the recognized event with the identified medicine and the identified equipment.
前記イベントについての動画データを再生する指示を受けると、前記イベントの発生から予め設定した秒数だけ遡って前記動画データを再生する再生制御部をさらに具備する請求項1乃至3のいずれかに記載の手術情報管理装置。   The reproduction control unit according to any one of claims 1 to 3, further comprising: a reproduction control unit that reproduces the moving image data by going back a preset number of seconds from the occurrence of the event when receiving an instruction to reproduce the moving image data regarding the event. Surgical information management device. 前記イベント認識部により認識されたイベントを利用することで、手術内容をまとめた手術レポートを作成するレポート作成部をさらに具備する請求項1乃至4のいずれかに記載の手術情報管理装置。   The surgery information management apparatus according to any one of claims 1 to 4, further comprising a report creation unit that creates a surgery report summarizing surgery contents by using an event recognized by the event recognition unit.
JP2013237439A 2013-11-15 2013-11-15 Surgery information management device Active JP6359264B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013237439A JP6359264B2 (en) 2013-11-15 2013-11-15 Surgery information management device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013237439A JP6359264B2 (en) 2013-11-15 2013-11-15 Surgery information management device

Publications (3)

Publication Number Publication Date
JP2015097065A true JP2015097065A (en) 2015-05-21
JP2015097065A5 JP2015097065A5 (en) 2017-01-19
JP6359264B2 JP6359264B2 (en) 2018-07-18

Family

ID=53374322

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013237439A Active JP6359264B2 (en) 2013-11-15 2013-11-15 Surgery information management device

Country Status (1)

Country Link
JP (1) JP6359264B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5989877B1 (en) * 2015-09-03 2016-09-07 株式会社メディカルプラットフォーム Information processing apparatus, information processing method, and information processing program
WO2021199952A1 (en) * 2020-03-30 2021-10-07 テルモ株式会社 Information processing method, program, and information processing system
JP2022520701A (en) * 2019-02-21 2022-04-01 シアター・インコーポレイテッド Systems and methods for analysis of surgical videos
US11769207B2 (en) 2019-02-21 2023-09-26 Theator inc. Video used to automatically populate a postoperative report

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002065618A (en) * 2000-08-30 2002-03-05 Olympus Optical Co Ltd Medical care communication system
JP2006235938A (en) * 2005-02-24 2006-09-07 Mitsubishi Electric Corp Health management support system
JP2006245686A (en) * 2005-02-28 2006-09-14 D Glatt:Kk Image recorder and image recording/reproducing method
JP2006252286A (en) * 2005-03-11 2006-09-21 Gifu Univ Medical information processor synchronized with standard treatment program, and medical information processing method
JP2006302057A (en) * 2005-04-22 2006-11-02 Gifu Univ Medical audio information processing apparatus and medical audio information processing program
JP2007233850A (en) * 2006-03-02 2007-09-13 Gifu Univ Medical treatment evaluation support device, medical treatment evaluation support system and medical treatment evaluation support program
JP2009205456A (en) * 2008-02-28 2009-09-10 Fujifilm Corp Unit and method for health and disease management support, and medical network system
JP2011122402A (en) * 2009-12-14 2011-06-23 Fukuhara Shoten:Kk Planar supporting tile for solar panel, and method for installing solar panel using the same
US20130080161A1 (en) * 2011-09-27 2013-03-28 Kabushiki Kaisha Toshiba Speech recognition apparatus and method

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002065618A (en) * 2000-08-30 2002-03-05 Olympus Optical Co Ltd Medical care communication system
JP2006235938A (en) * 2005-02-24 2006-09-07 Mitsubishi Electric Corp Health management support system
JP2006245686A (en) * 2005-02-28 2006-09-14 D Glatt:Kk Image recorder and image recording/reproducing method
JP2006252286A (en) * 2005-03-11 2006-09-21 Gifu Univ Medical information processor synchronized with standard treatment program, and medical information processing method
JP2006302057A (en) * 2005-04-22 2006-11-02 Gifu Univ Medical audio information processing apparatus and medical audio information processing program
JP2007233850A (en) * 2006-03-02 2007-09-13 Gifu Univ Medical treatment evaluation support device, medical treatment evaluation support system and medical treatment evaluation support program
JP2009205456A (en) * 2008-02-28 2009-09-10 Fujifilm Corp Unit and method for health and disease management support, and medical network system
JP2011122402A (en) * 2009-12-14 2011-06-23 Fukuhara Shoten:Kk Planar supporting tile for solar panel, and method for installing solar panel using the same
US20130080161A1 (en) * 2011-09-27 2013-03-28 Kabushiki Kaisha Toshiba Speech recognition apparatus and method
JP2013072974A (en) * 2011-09-27 2013-04-22 Toshiba Corp Voice recognition device, method and program

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5989877B1 (en) * 2015-09-03 2016-09-07 株式会社メディカルプラットフォーム Information processing apparatus, information processing method, and information processing program
JP2022520701A (en) * 2019-02-21 2022-04-01 シアター・インコーポレイテッド Systems and methods for analysis of surgical videos
US11769207B2 (en) 2019-02-21 2023-09-26 Theator inc. Video used to automatically populate a postoperative report
US11798092B2 (en) 2019-02-21 2023-10-24 Theator inc. Estimating a source and extent of fluid leakage during surgery
WO2021199952A1 (en) * 2020-03-30 2021-10-07 テルモ株式会社 Information processing method, program, and information processing system

Also Published As

Publication number Publication date
JP6359264B2 (en) 2018-07-18

Similar Documents

Publication Publication Date Title
KR102572006B1 (en) Systems and methods for analysis of surgical video
US11769207B2 (en) Video used to automatically populate a postoperative report
US11786312B2 (en) Surgical system with AR/VR training simulator and intra-operative physician image-guided assistance
US8313432B2 (en) Surgical data monitoring and display system
US20060100497A1 (en) Medical information system, program product for use in the medical information system and method of processing data to manage a medical procedures
JP4157573B2 (en) Questionnaire data creation device
JP2006164251A (en) Medical information system, medical information system program, and medical information processing method for performing information processing for management of medical practice
CN110366758A (en) Managing medical information equipment, method for managing medical information and medical information management system
JP6359264B2 (en) Surgery information management device
JP2007233850A (en) Medical treatment evaluation support device, medical treatment evaluation support system and medical treatment evaluation support program
JP2015097065A5 (en)
JP7164877B2 (en) Information sharing system
JP2016042272A (en) Medical information provision system
Mackenzie et al. Observational analysis of video records of team performance

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20150615

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20160512

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161114

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161114

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20161114

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20161115

RD07 Notification of extinguishment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7427

Effective date: 20161219

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20161219

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171127

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171205

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180205

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180306

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180507

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180522

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180620

R150 Certificate of patent or registration of utility model

Ref document number: 6359264

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150