WO2021005909A1 - 医療支援装置、その作動方法及び医療支援プログラム並びに医療支援システム - Google Patents
医療支援装置、その作動方法及び医療支援プログラム並びに医療支援システム Download PDFInfo
- Publication number
- WO2021005909A1 WO2021005909A1 PCT/JP2020/021120 JP2020021120W WO2021005909A1 WO 2021005909 A1 WO2021005909 A1 WO 2021005909A1 JP 2020021120 W JP2020021120 W JP 2020021120W WO 2021005909 A1 WO2021005909 A1 WO 2021005909A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- information
- test
- patient
- interview
- voice
- Prior art date
Links
- 238000000034 method Methods 0.000 title abstract description 22
- 238000012360 testing method Methods 0.000 claims description 171
- 238000007689 inspection Methods 0.000 claims description 170
- 230000004044 response Effects 0.000 claims description 5
- 230000004913 activation Effects 0.000 claims description 2
- 238000004458 analytical method Methods 0.000 description 16
- 230000006870 function Effects 0.000 description 16
- 238000012545 processing Methods 0.000 description 12
- 238000003745 diagnosis Methods 0.000 description 9
- 238000012790 confirmation Methods 0.000 description 8
- 238000009534 blood test Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 6
- 238000011976 chest X-ray Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000010801 machine learning Methods 0.000 description 4
- 238000003058 natural language processing Methods 0.000 description 4
- 206010011224 Cough Diseases 0.000 description 3
- 230000007812 deficiency Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 230000005855 radiation Effects 0.000 description 3
- 238000009557 abdominal ultrasonography Methods 0.000 description 2
- 238000002059 diagnostic imaging Methods 0.000 description 2
- 238000009589 serological test Methods 0.000 description 2
- 206010013975 Dyspnoeas Diseases 0.000 description 1
- 206010037660 Pyrexia Diseases 0.000 description 1
- 238000002555 auscultation Methods 0.000 description 1
- 230000036760 body temperature Effects 0.000 description 1
- 238000013276 bronchoscopy Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000002559 palpation Methods 0.000 description 1
- 238000009527 percussion Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 238000011179 visual inspection Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/20—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H80/00—ICT specially adapted for facilitating communication between medical practitioners or patients, e.g. for collaborative diagnosis, therapy or health monitoring
Definitions
- the present invention relates to a medical support device, an operation method thereof, a medical support program, and a medical support system.
- medical staff including doctors obtain various information for diagnosis or treatment by interviewing patients.
- the doctor decides the type of examination and the treatment policy based on the information obtained from the interview, and gives the examination instruction to the examination department as necessary.
- Patent Document 1 Medical support methods and medical support systems are disclosed (Patent Document 1).
- the medical support method and the like described in Patent Document 1 aim to reduce the burden on patients and the like and improve the efficiency of medical treatment while ensuring the accuracy of diagnosis.
- test instructions if one or more types of tests instructed by a doctor or the like are suitable for diagnosis or treatment of a patient without excess or deficiency, it can be said that the test instructions are appropriate. Therefore, inappropriate inspection instructions are, for example, omission of inspection instructions in which all necessary inspections are not instructed, excessive inspection instructions instructing unnecessary inspections, or error in inspection instructions due to human error in instructions.
- the test instruction error may be, for example, when an incorrect test instruction is given unintentionally by a doctor or the like, or when a doctor or the like does not notice that there is another more appropriate test and the test instruction is inappropriate. included.
- An object of the present invention is to provide a medical support device, an operation method thereof, a medical support program, and a medical support system capable of assisting a medical worker to give an appropriate examination instruction to an examination department. ..
- the present invention is a medical support device, and in a medical support device including a processor, the processor notifies the examination department of the type of examination that the medical staff has determined to be performed on the patient based on an interview with the patient.
- the medical examination information generated by acquiring the instruction test information for the patient and analyzing the voice emitted in the medical inquiry with the patient is acquired, and the medical inquiry information and the implementation test information regarding the type of examination to be performed on the patient are corresponded in advance.
- the attached response information is acquired, and based on the interview information and the response information, estimated test information that estimates the type of test to be performed on the patient is generated, and the instruction test information and the estimated test information are compared and the comparison result is compared. Generate and control notification based on the comparison result.
- the processor gives a goodness of fit to the type of test to be performed on the patient and generates estimated test information that estimates the type of test whose goodness of fit is within a specific value range.
- the processor shall notify the medical staff by the notification content prompting the medical staff to confirm the instruction test information. Is preferable.
- the processor further notifies by the notification content including the estimated inspection information.
- the processor performs the notification by the notification content including the estimated inspection information.
- the processor controls to acquire the voice emitted in the interview with the patient and analyzes the voice in order to generate the interview information.
- the processor controls the acquisition of the voice and controls the storage of the acquired voice.
- the processor starts acquiring voice when it starts up.
- the processor starts voice acquisition when it detects voice.
- the processor saves the acquired voice for each patient.
- the processor erases the voice after analyzing the voice.
- the processor acquires the instructed test information that has been notified to the test department regarding the type of test that the medical staff has determined to be performed on the patient after the notification is performed.
- the processor generates a trained model trained by associating the interview information with the instructed test information, and controls to store the trained model.
- the processor preferably acquires the trained model as correspondence information.
- the present invention is a method of operating a medical support device, and is instructional test information for notifying the test department of the type of test determined by a medical worker to be performed on a patient based on an interview with a patient.
- Correspondence information acquisition step to acquire correspondence information associated with examination information in advance
- examination estimation step to generate estimation examination information which estimated type of examination to perform for patient based on interview information and correspondence information
- instruction It is provided with a comparison step of comparing the inspection information for use and the estimation inspection information to generate a comparison result, and a notification control step of controlling notification based on the comparison result.
- the present invention is a medical support program, and in a medical support program installed in a medical support device, a type of examination determined by a medical worker to be performed on a patient based on an interview with a patient on a computer.
- the present invention is a medical support system and includes a medical support device.
- the medical support device of the present invention is used in a situation where a medical worker gives an inspection instruction to an inspection department. Therefore, in the present embodiment, the medical support device is installed in an examination room or the like where a doctor asks a question with a patient.
- the medical worker means a person who can make a decision regarding a test to be performed on a patient, for example, a doctor or a person who can make a decision regarding a test under the instruction of a doctor. Includes nurses, clinical laboratory technicians, radiological technologists, etc.
- the medical support device is, for example, a computer such as a personal computer in which an application program for executing a predetermined function is installed.
- the medical support device 10 in addition to an output device 12 such as a display and an input device 13 such as a mouse, a microphone, or a keyboard, the medical support device 10 includes a CPU (Central Processing Unit) 14 which is a processor, a memory 15, and a storage. It includes a device 16 and a communication unit 17. These are interconnected via the data bus 18.
- the communication unit 17 has a function of communicating with another device or the network 19.
- the storage device 16 is a disk array in which a plurality of hard disk drives or hard disk drives built in the medical support device 10 or connected via a cable or network 19 are connected. Therefore, the storage device 16 functions as a storage unit.
- the storage device 16 stores control programs such as an operating system, various application programs, and various data associated with these programs.
- the memory 15 is a work memory for the CPU 14 to execute a process.
- the CPU 14 comprehensively controls each part of the medical support device 10 by loading the program stored in the storage device 16 into the memory 15 and executing processing according to the program.
- the medical support device 10 registers and manages information such as patient information, medical information, examination information, accounting information, and imaging instructions for diagnostic imaging for each patient by the communication unit 17, HIS (Hospital Information System: hospital information system). ), RIS (Radiology Information System) and other information management servers, or, for example, PACS (Picture Archiving and Communication System for medical application: medical image storage) that manages captured radiation images and information related to these radiation images. It may be connected to an image server such as a communication system). When connecting to these servers, mutual communication of various information is performed with these servers. In addition, the computer of the medical support device 10 can also be used as a client terminal of these servers.
- HIS Hospital Information System
- RIS Radiology Information System
- PACS Picture Archiving and Communication System for medical application: medical image storage
- the medical support device 10 is installed in the examination room 20 and is operated by a person who can make a decision regarding an examination to be performed on a patient such as a doctor DR.
- the doctor DR asks questions by visual inspection, auscultation, percussion, palpation, etc., in addition to talking with the patient PA.
- the doctor DR emits voice SP1 to ask a question
- the patient PA responds to emit voice SP2 to answer the question.
- the doctor DR decides a diagnosis or treatment policy in the interview, and gives an examination instruction 21 to the patient PA with the support of the medical support device 10, for example, to the image examination room 30 which is an examination department.
- the image examination room 30 includes an examination room 30a and an operation room 30b. Specifically, the inspection instruction 21 is given by using the input device 13 of the medical support device 10.
- the input device 13 includes, for example, a keyboard 13a, a microphone 13b, and the like, and these are collectively referred to as the input device 13.
- the inspection instruction 21 is given via RIS (not shown).
- a RIS client terminal 31 is installed in the operation room 30b, and the radiological examination technician RT receives an inspection instruction 21 from the client terminal 31.
- the radiological examination engineer RT acquires a medical image of the patient PA in the examination room 30a by using, for example, an X-ray imaging apparatus 32.
- the operation program 41 is stored in the storage device 16.
- the CPU 14 cooperates with the memory 15 and the like to display the instruction inspection information acquisition unit 51, the inquiry information acquisition unit 52, the correspondence information acquisition unit 53, the inspection estimation unit 54, and the comparison unit 55. And functions as a notification control unit 56 and the like. Therefore, the medical support device 10 includes an instruction inspection information acquisition unit 51, an inquiry information acquisition unit 52, a correspondence information acquisition unit 53, an inspection estimation unit 54, a comparison unit 55, and a notification control unit 56.
- the instructional examination information acquisition unit 51 notifies the imaging examination room 30, which is an examination department, of the type of examination that the doctor DR has determined to be performed on the patient PA based on the interview with the patient PA. To get.
- the acquisition of the instruction test information is performed, for example, by the doctor DR inputting various information capable of notifying the input device 13 of the type of test.
- the interview information acquisition unit 52 acquires the interview information obtained in the interview with the patient PA by analyzing the voice emitted in the interview with the patient PA.
- the interview information is acquired, for example, by inputting various information to the input device 13.
- the correspondence information acquisition unit 53 acquires correspondence information in which the interview information and the examination information regarding the type of examination to be performed on the patient PA are associated in advance.
- the correspondence information for example, the one stored in the storage device is used.
- the examination estimation unit 54 generates estimation examination information that estimates the type of examination to be performed on the patient PA based on the interview information and the correspondence information.
- the inspection estimation unit 54 acquires the interview information from the interview information acquisition unit 52, and also acquires the correspondence information from the correspondence information acquisition unit 53.
- the generated estimated inspection information is sent to the comparison unit 55.
- the comparison unit 55 compares the instruction inspection information with the estimation inspection information and generates a comparison result.
- the instruction inspection information is acquired from the instruction inspection information acquisition unit 51, and the estimated inspection information is acquired from the inspection estimation unit 54.
- the generated comparison result is sent to the notification control unit 56.
- the notification control unit 56 controls notification based on the comparison result acquired from the comparison unit 55.
- the notification is performed using an output device 12 or the like such as a display.
- the instruction test information to be acquired by the instruction test information acquisition unit 51 is information on the type of test that the doctor DR has determined to be performed on the patient PA by interviews, etc., and the type of test determined to be performed is given to the patient PA. This is information for giving an inspection instruction by notifying the inspection department to carry out the inspection. Therefore, the instructional test information includes information necessary for the instructed examination department to perform the instructed examination on the patient PA without any problem.
- the instruction test information may include information that the patient PA does not need a test as a result of the judgment of the doctor DR. Therefore, the instruction inspection information may not include any inspection type.
- the instructional test information includes the type of test performed on the patient PA, the test conditions, and the like. For example, when the doctor DR determines by interview that an imaging test and a blood test for the patient are necessary for the diagnosis or treatment of the patient PA, the position of the instruction test information is P ⁇ A (posterior ⁇ anterior). , Back ⁇ front), including instructions to obtain a standing front view of a chest X-ray image, and instructions to perform a serological test in a blood test.
- the instructional test information includes information such as the name of the type of test to be performed, but not only the type of test but also various information regarding tests that may be performed on the patient for diagnosis such as test conditions. including.
- the doctor DR inputs the instruction test information into the medical support device 10. Further, since the medical support device 10 is connected to the HIS and / or RIS, the instruction test information input by the doctor DR to the medical support device 10 may be automatically input to the HIS and / or RIS. Good.
- the means or method of input is not limited, and input is performed by, for example, a keyboard 13a or an input device 13 such as a mouse (not shown). When a mouse is used, for example, a method such as selecting from the inspection list displayed on the display is used.
- the instruction test information is information for the doctor DR to notify or instruct the examination department, but when the instruction examination information is input to the medical support device 10, the instruction to the examination department has not yet been given.
- the interview information acquisition unit 52 acquires the interview information generated by analyzing the voice emitted in the interview with the patient PA. As shown in FIG. 4, the interview information acquisition unit 52 includes a voice acquisition unit 52a and a voice analysis unit 52b. The voice acquisition unit 52a controls to acquire the voice emitted in the interview. The voice analysis unit 52b analyzes the voice and generates interview information.
- the audio data format to be acquired is not particularly limited as long as it can be stored or analyzed by a computer.
- the voice acquisition unit 52a mainly controls to acquire the voice SP1 and the voice SP2 emitted by the doctor DR and the patient PA in the interview.
- voices by a person other than the doctor DR and the patient PA such as an attendant of the patient PA or a nurse, who may speak in the interview, may be included.
- the interview information is information used by the doctor DR to give an appropriate examination instruction to the examination department regarding the type of examination to be performed on the patient PA. Therefore, the interview information is information that enables the examination department to be instructed to perform an appropriate examination in the diagnosis or treatment of the patient PA, for example, the subjective symptoms and the course of the patient PA, the history of the patient PA, and the like.
- the medical history of the patient PA's family is included. It also includes information about the patient PA itself, such as the age, occupation, or family composition of the patient PA. It also includes information based on what the doctor DR or the nurse said about the patient PA during the interview. For example, the name of a disease that the patient PA may be suffering from, or information on the progress so far when the patient PA is revisited, which the doctor DR speaks during the interview. Therefore, the interview information may include information acquired from the electronic medical record of the patient PA.
- the interview information further includes the conversation speed, volume, and clarity of words in the speech in the voice SP2 of the patient PA, or the time from when the doctor DR asks the question by the voice PA1 until the patient PA responds by the voice SP2. Etc., including information other than the content of the conversation in the interview.
- the doctor DR causes the patient PA to make a statement of the patient PA including the interview information by the statement of the doctor DR.
- the voice acquisition unit 52a controls to acquire the voice SP1 emitted by the doctor DR and the voice SP2 emitted by the patient PA by these remarks.
- the means of voice acquisition is not particularly limited.
- the microphone 13b acquires the voice SP1 made by the doctor DR's voice and the voice SP2 made by the patient PA's voice in the interview.
- the medical support device 10 or the microphone 13b is provided with a voice acquisition button (not shown) for instructing the start and end of voice acquisition, so that the doctor DR can obtain a voice for each interview. Can be operated to acquire voice SP1 and voice SP2 for each patient PA.
- the voice analysis unit 52b analyzes the voice including the voice SP1 and the voice SP2 in order to acquire the interview information.
- known speech recognition means and / or natural language processing means can be used.
- known speech recognition means and / or natural language processing means a known machine learning technique or a technique other than the machine learning technique can be used.
- the content of the remark and the information of the person who made the remark are acquired as text information by the voice recognition means using the known machine learning technology, and the natural language processing means for the text information of the patient PA It is possible to acquire words and phrases necessary for giving appropriate test instructions for diagnosis or treatment, and use these as interview information.
- various voice recognition means are used to ask information other than the content of the conversation, such as the conversation speed, volume, or the clarity of words in the speech, based on the voice SP2 of the patient PA. May be obtained as. Further, depending on the type of interview information to be acquired, a plurality of voice recognition means and / or natural language processing means may be used and these may be used properly. The obtained interview information is sent to the inspection estimation unit 54.
- the correspondence information acquisition unit 53 acquires correspondence information in which the interview information and the implementation inspection information regarding the type of examination to be performed on the patient PA are associated in advance.
- Correspondence information is information in which the interview information is associated with the implementation test information, which is the examination performed on the patient PA who conducted the interview for which the interview information was acquired, but the interview information and the implementation test information are ,
- the information may be the information obtained by the actual interview, or it may be based on the assumption. That is, the interview information and the implementation inspection information associated with the corresponding information may each use expected information.
- Correspondence information may be any one in which the interview information and the test information of the test performed on the patient PA are associated in advance, and the format or generation method is not limited. Since the interview information is obtained by analyzing the voice, it may be, for example, various types of voice information or various types of text information obtained by analyzing the voice. Therefore, the correspondence information can take various forms according to the interview information. For example, it may be created as a table by associating known interview information, which is text information, with test information of a test performed on a patient PA. Further, the trained model created by the inspection estimation unit 54 may be used as the corresponding information. This trained model will be described later.
- the interview information used for the correspondence information may include a plurality of information constituting the interview information, and the implementation inspection information may also be an inspection menu including a plurality of inspection types.
- a plurality of correspondence information may be used properly so that preferable estimated inspection information can be obtained according to various conditions. Therefore, the trained models that have been trained differently may be used properly according to various conditions.
- preferable estimated test information may be obtained by properly using the trained model which is the corresponding information according to the age of the patient PA.
- the preferred estimated test information means that the type of test included in the estimated test information matches the appropriate test instruction for the patient PA. Therefore, it can be said that the interview information and / or the corresponding information for generating the estimated test information is preferable so that the type of the test included in the estimated test information is suitable for the diagnosis or treatment of the patient without excess or deficiency.
- the correspondence information 61 is, for example, information in which the interview information is associated with the execution examination information of the examination performed on the patient PA who conducted the interview from which the interview information was acquired. is there.
- the correspondence information 61 may be correspondence information in which one or more inquiry information is associated with one or more inspection types or inspection menus.
- the interview information is the phrase "cough does not stop” based on the statement of the patient PA in the interview
- the type of examination based on the performed examination information is "chest X-ray photography (standing front)".
- P ⁇ A) is the associated information.
- the interview information is the words "80 years old” and "difficulty breathing” based on the statement to the patient PA in the interview
- the type of examination based on the performed examination information is associated with "examination menu A”.
- the contents of "test menu A” are "chest X-ray (front standing, P ⁇ A)” and "blood test (serological test)”.
- "bronchoscopy” corresponds to the type of examination based on the performed examination information. It is attached.
- the means by which the correspondence information acquisition unit 53 acquires the correspondence information is not limited.
- the correspondence information is stored in a storage device (not shown) in advance, and the correspondence information acquisition unit 53 can acquire the correspondence information stored in the storage device.
- the examination estimation unit 54 generates estimation examination information that estimates the type of examination to be performed on the patient PA based on the interview information and the correspondence information. As described above, the examination estimation unit 54 is connected to the interview information acquisition unit 52, and the examination estimation unit 54 receives the interview information acquired by the interview information acquisition unit 52. Further, the inspection estimation unit 54 is connected to the correspondence information acquisition unit 53, and the inspection estimation unit 54 receives the correspondence information acquired by the correspondence information acquisition unit 53. The inspection estimation unit 54 estimates an appropriate type of inspection based on the interview information received from the inquiry information acquisition unit 52 based on the inquiry information received from the inquiry information acquisition unit 52 and the response information received from the response information acquisition unit 53. And generate estimated test information, including the appropriate test type.
- the appropriate test type is not limited to one test type, and may include a plurality of test types. Since the estimated test information is information that estimates the type of test to be performed on the patient, it is information that includes the type of test, but also includes information that is estimated that no test is necessary. Further, each information included in the inquiry information and / or the corresponding information used by the inspection estimation unit 54 may be weighted.
- the examination estimation unit 54 includes, for example, the interview information 62 received from the interview information acquisition unit 52 includes the phrase “cough does not stop” acquired by the analysis of the voice SP2 of the patient PA.
- the estimated examination information 63 is estimated that the type of examination is "chest X-ray (standing front, P ⁇ A)".
- the test estimation unit 54 assigns a goodness of fit to the type of test to be performed on the patient PA and generates estimation test information that estimates the type of test to which the goodness of fit is given a specific value or more. Good.
- the goodness of fit given by the examination estimation unit 54 is that when the examination estimation unit 54 estimates the type of examination to be performed on the patient PA based on the interview information and the correspondence information, the estimated type of examination is performed on the patient PA. It is a numerical value corresponding to the probability of being performed.
- the method of imparting the goodness of fit is not limited, and for example, the type of inspection to which the goodness of fit is imparted may be estimated by a machine learning technique or the like using the trained model as correspondence information. This trained model will be described later. Since the goodness of fit is given to the type of inspection, the type of inspection whose goodness of fit is within a specific value range may be selected to generate estimated inspection information. Specific values of goodness of fit are configurable.
- the examination estimation unit 54 for example, said that the interview information 62 received from the interview information acquisition unit 52 was acquired by the analysis of the voice SP2 of the patient PA, and the phrase "coughing does not stop", " When the body temperature information that the fever is 38 degrees and the personal information of the patient PA that the patient PA is a "company employee" are included, the type of examination to which the degree of conformity is given is estimated based on the correspondence information 61. Generate an estimated inspection list 63a. When the estimated inspection information 63 is generated under the condition that the goodness of fit is 70% or more, the "inspection menu A" having the goodness of fit of "98%” and the goodness of fit of the estimated inspection list 63a are generated. The estimated inspection information 63 is generated by the “inspection menu B” in which is “70%”.
- the comparison unit 55 compares the instruction inspection information with the estimation inspection information and generates a comparison result.
- the instructional examination information includes information on the type of examination because it is information for notifying the examination department of the type of examination that the doctor DR has determined to be performed on the patient PA.
- the estimated test information is information that estimates the type of test to be performed on the patient PA, it includes information on the type of test. Therefore, the comparison result is the result of comparison with respect to the type of inspection.
- the comparison result includes the following cases.
- the first is a case where, as shown in FIG. 8, the comparison result 71 does not include any type of inspection in which the instruction inspection information 72 and the estimation inspection information 63 are common. That is, the type of examination determined by the doctor DR to be performed on the patient PA is not included in the type of examination estimated by the examination estimation unit 54.
- the instruction inspection information 72 includes the inspection type and the estimated inspection information 63 includes the inspection type (Case A73)
- the instruction inspection information 72 determines that the inspection is not necessary.
- the inspection estimation unit 54 estimates that inspection is necessary and the estimation inspection information 63 includes the type of inspection (case B74), and the inspection estimation unit 54 estimates that inspection is not necessary
- the estimation inspection information While 63 does not include the inspection information the case where the instruction inspection information 72 determines that the inspection is necessary (case C75) is included.
- the solid circle indicates a set with the type of inspection as an element, and the hatching with diagonal lines indicates that there is a type of inspection that is an element of the set.
- the dashed circle indicates that there is no type and set of tests.
- the second is the case where, as shown in FIG. 9, in the comparison result 71, the estimated inspection information 63 and the instruction inspection information 72 include a part of the inspection type in common.
- the doctor DR has determined to perform on the patient PA
- the others are not common (Case D76)
- the doctor All of the types of tests that DR determines to perform on patient PA are included in the types of tests estimated by the test estimation unit 54, but the estimated types of tests also include other types of tests.
- Case (Case E77), and all the types of tests estimated by the test estimation unit 54 are included in the types of tests that the doctor DR has determined to perform on the patient PA, but the doctor DR has determined to perform.
- the type of inspection includes the case where other types of inspection are also included (Case F78).
- the third is the case where the estimated inspection information 63 and the instruction inspection information 72 match in the comparison result 71 as shown in FIG. 10 (case G79). That is, the type of examination determined by the doctor DR to be performed on the patient PA and the type of examination estimated by the examination estimation unit 54 match without excess or deficiency.
- the notification control unit 56 controls notification based on the comparison result 71.
- the control of notification includes control of the presence / absence of notification with or without notification, control of the content of notification when notification, control of the number of notifications when notification, control of the other party when notification, etc. It means deciding the matters for executing the notification. These items can be changed by setting in some cases.
- the notification is performed to the doctor DR or the like who created the instruction test information 72 by using the medical support device 10.
- the means of notification is not limited as long as it can recognize that the doctor DR has been notified.
- the notification is performed to the doctor DR by displaying characters or images on the display 12a which is the output device 12.
- the notification control unit 56 determines the content of the notification and controls the notification based on the comparison result 71. For example, as shown in FIG. 8, when the comparison result 71 does not include any type of inspection in which the instruction inspection information 72 and the estimation inspection information 63 are common (case A73, case B74, or case C75), the notification The control unit notifies the doctor DR by the notification content 81 prompting the confirmation of the instruction test information 72.
- the notification content 81 that prompts the confirmation of the instruction test information 72 may be any as long as it prompts the doctor DR to confirm the instruction test information 72 and the like including the type of the test that he / she has determined. For example, the instruction test.
- a character display 82 such as "Please check the inspection information for instructions because it is completely different from the estimation” to prompt confirmation of the information 72, or an image display 83 with an "x" symbol indicating a warning. ..
- the character display 82 or the image display 83 is displayed on a part or all of the display.
- the comparison result 71 includes a type of inspection in which the instruction inspection information 72 and the estimation inspection information 63 are partially common (case D76, case E77, or case F78).
- the notification control unit 56 may notify the doctor DR by the notification content 81a including the estimated test information 63, or may notify the doctor DR by the notification content 81b that prompts the confirmation of the instruction test information 72.
- the notification content 81a including the estimated test information 63 as the character display 82 is the instruction test information 72 including the test type determined by the doctor DR by recognizing the test type of the estimated test information 63 and the estimated test. Anything that can recognize the difference from the information 63 is sufficient.
- the character display 82 in the notification content 81a For example, in the character display 82 in the notification content 81a, "blood test” is displayed in the column displayed as “for instruction”, and it can be recognized that the instruction test information 72 consists of “blood test” as the type of test.
- the instruction test information 72 consists of "blood test” as the type of test.
- "blood test” and “abdominal ultrasonography” are described in the column displayed as “estimated”
- the estimated test information 63 consists of "blood test” and "abdominal ultrasonography” as the types of tests.
- the hidden character display is performed by instructing the inverted triangular arrow 84 displayed on the character display 82 in the notification content 81a with a mouse or the like. You can scroll through 82 mag.
- the notification content 81b can be a character display 82b or the like for prompting confirmation of the instruction inspection information 72.
- the notification content 81 that prompts the confirmation of the instruction inspection information 72 is, for example, a character display 82 such as "Please confirm the instruction inspection information because it is partially different from the estimation" for prompting the confirmation of the instruction inspection information 72. , Or an image display 83 or the like with a “!” Symbol indicating caution. These notification contents 81 can be changed by setting.
- the match is notified.
- the notification content 81 of the notification regarding the match may be such that the doctor DR can recognize that the instruction test information 72 including the type of test determined by himself and the presumed test information 63 match, for example.
- the character display 82 such as "the types of inspections match", or the image display 83 with the symbol "O" indicating the meaning of matching can be used.
- the notification is provided by the notification content including the estimated inspection information 63.
- a character display 82 such as "Please check the instruction inspection information because it is completely different from the estimation” to prompt confirmation of the instruction inspection information 72, or an image with an "x" symbol indicating a warning.
- the inspection type information of the instruction inspection information 72 and the inspection type information of the estimation inspection information 63 are displayed in parallel.
- the notification content 81d by the character display 82 written as described above can be displayed on the display.
- the estimated examination information 63 estimated by using the voice in the interview is used as the instruction examination information 72. Since notification is performed based on the comparison result of the above, it is possible to check the type of inspection and receive a proposal that oneself has judged without hassle. Therefore, when the doctor DR gives an examination instruction by himself / herself, it is possible to suppress an error in the examination instruction, and it is possible to prevent the examination from being redone or the wrong examination. In addition, since the estimated examination information 63 proposes candidates for examination instructions that the doctor DR did not notice, the doctor DR knows a better examination type for the patient PA or a better imaging method in the case of a medical imaging examination.
- the medical support device 10 of the present invention can be suitably used for the education of doctor DR.
- the doctor DR gives an examination instruction to the examination department after receiving the notification regarding the instruction examination information 72. Therefore, the doctor DR can give an appropriate examination instruction to the examination department with the support of the medical support device 10.
- the interview information acquisition unit 52 that acquires the interview information may include a voice acquisition control unit 52c and a voice storage control unit 52d (see FIG. 4).
- the voice acquisition control unit 52c controls the acquisition of voice.
- the voice storage control unit 52d controls the storage of the acquired voice.
- the voice acquisition control unit 52c and the voice storage control unit 52d can use known means.
- the voice acquisition control unit 52c realizes control of acquisition of the voice emitted in the interview by performing various controls such as means for acquiring the voice.
- the voice may be acquired by the doctor DR or the like manually instructing the start and end of the voice acquisition, but it is preferable to automatically acquire the voice.
- control is performed so that the voice acquisition is automatically started and the voice acquisition is automatically ended.
- the voice acquisition control unit 52c can start voice acquisition when the voice is detected.
- the voice acquisition control unit 52c can end the voice acquisition when the state without voice continues for a specific period.
- the voice acquisition control unit 52c may start the voice acquisition by a specific trigger or switch for starting the voice acquisition.
- a specific trigger or switch for starting the voice acquisition For example, when the activation of the medical support device 10 is used as a trigger for voice acquisition, the voice acquisition is automatically started when the medical support device 10 is activated. Further, when the detection of the voice which is the human voice is triggered in the interview, the acquisition of the voice is automatically started when the voice which is the human voice is detected in the interview. In addition, when the detection of the voice of a specific person who has registered the voice is used as a trigger in the interview, for example, when the voice of the doctor DR is detected, the acquisition of the voice is automatically started.
- the voice of the patient PA can be recognized in the interview, so that the acquisition of the voice for each patient is automatically started. be able to.
- the voice analysis unit 52b analyzes the voice that utters a specific word such as "recording start" regardless of the specific person, and "recording starts”. When the phrase "" is extracted, voice acquisition is automatically started.
- the voice acquisition control unit 52c By these controls by the voice acquisition control unit 52c, for example, the voice emitted in the interview can be acquired without the doctor DR or the like manually instructing the voice acquisition.
- the specific words and phrases can be set by the voice acquisition control unit 52c.
- the voice acquisition control unit 52c not only starts and / or ends voice acquisition, but also controls, for example, when to send the acquired voice to the voice analysis unit 52b. As described above, the voice acquisition control unit 52c can prevent forgetting to acquire the voice. Further, the voice acquisition control unit 52c controls the cooperation with the voice analysis unit 52b, so that various voice acquisition controls can be performed.
- the voice storage control unit 52d controls the storage of the acquired voice.
- the voice storage control unit 52d may store the acquired voice for each patient PA by cooperating with the voice analysis unit 52b.
- the voice can be saved in a file for each patient PA.
- the storage of voice may be managed by RIS or the like in conjunction with an electronic medical record or the like.
- the voice acquisition control unit 52c may perform control to erase the voice after analyzing the voice, for example, in cooperation with the voice analysis unit 52b. This saves storage means for storing audio.
- an instructed examination for acquiring the instructed examination information which has completed the notification to the examination department regarding the type of examination that the doctor DR has determined to be performed on the patient PA after the notification is given.
- the information acquisition unit 101 may be provided.
- the directed test information includes information on the type of test that the physician DR has determined to perform on the patient PA. Since the instructed test information includes the type of test re-judged by the doctor DR after being notified by the medical support device 10, it is possible to suppress omission of test instructions, excessive test instructions, incorrect test instructions, or inappropriate test instructions. It is an appropriate inspection instruction given.
- the instructed inspection information is sent to the inspection estimation unit 54.
- the inspection estimation unit 54 may include a trained model creation unit 102.
- the trained model creation unit 102 connects to the interview information acquisition unit 52 and the instructed inspection information acquisition unit 101, and acquires the inquiry information and the instructed inspection information, respectively.
- the trained model 103 trained by associating the interview information with the instructed test information is generated.
- the generated learned model 103 is stored in the storage device 16 which is a storage unit.
- the learned model 103 stored in the storage device 16 is acquired by the correspondence information acquisition unit 53 as correspondence information. Therefore, the instructed inspection information becomes the implementation inspection information in the corresponding information. As a result, it is possible to generate estimated inspection information that estimates the inspection type with higher accuracy. Further, regarding the goodness of fit, the goodness of fit can be given to the type of inspection with higher accuracy. Further, for example, even if the criteria of the examination to be performed are different for each medical facility, it is possible to estimate the type of examination suitable for each medical facility.
- the medical support system provided with the medical support device 10 includes the above-mentioned medical support device 10. Further, another device connected to the medical support device 10 may be provided.
- a conversation between the doctor DR and the patient PA is started (step ST100).
- the voice acquisition unit 52a controls to automatically acquire the voice SP1 emitted by the doctor DR and the voice SP2 emitted by the patient PA (step ST110).
- the acquired voice SP1 and voice SP2 are analyzed by the voice analysis unit 52b (step ST120).
- Interview information is generated by the analysis (step ST130).
- the generated interview information is acquired by the interview information acquisition unit 52 and sent to the inspection estimation unit 54.
- the inspection estimation unit 54 generates estimation inspection information (step ST140).
- the doctor DR provides the medical support device 10 with the instruction test information which is the type of the test determined to be performed on the patient. Is input to, and the instruction inspection information acquisition unit 51 acquires the instruction inspection information (step ST150).
- the comparison unit 55 compares the interview information with the estimated test information and generates a comparison result (step ST160). Based on the comparison result, the notification control unit 56 controls whether or not to notify (step ST170). When notifying (YES in step ST170), the content of the notification is determined and the notification is performed (step ST180).
- the inspection department is instructed by the inspection information for instructions without notification, and if notification is given, the inspection information for instructions is corrected as appropriate after confirming the notification or the content of the notification.
- the inspection department is instructed to inspect (step SP190). Therefore, the doctor DR can give appropriate examination instructions to the examination department.
- the hardware structure of the processing unit that executes various processes is various processors as shown below.
- the circuit configuration is changed after manufacturing the CPU (Central Processing Unit), FPGA (Field Programmable Gate Array), etc., which are general-purpose processors that execute software (programs) and function as various processing units.
- PLD Programmable Logic Device
- ASIC Application Specific Integrated Circuit
- GPU Graphical Processing Unit
- One processing unit may be composed of one of these various processors, or a combination of two or more processors of the same type or different types (for example, a plurality of FPGAs, a combination of a CPU and an FPGA, a GPU and the like. It may be composed of a combination of CPUs). Further, a plurality of processing units may be configured by one processor. As an example of configuring a plurality of processing units with one processor, first, as represented by a computer such as a client or a server, one processor is configured by a combination of one or more CPUs and software. There is a form in which this processor functions as a plurality of processing units.
- SoC System On Chip
- a processor that realizes the functions of the entire system including a plurality of processing units with one IC (Integrated Circuit) chip is used.
- the various processing units are configured by using one or more of the above-mentioned various processors as a hardware-like structure.
- the hardware structure of these various processors is, more specifically, an electric circuit in the form of a combination of circuit elements such as semiconductor elements.
- the present invention is not limited to the above-described embodiment, and various configurations can be adopted as long as the gist of the present invention is not deviated. Further, the present invention extends to a storage medium for storing a program in addition to the program.
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Biomedical Technology (AREA)
- Epidemiology (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
検査部門に対して適切な検査指示を行うための支援をすることができる医療支援装置、その作動方法及び医療支援プログラム並びに医療支援システムを提供する。 プロセッサ(14)を備える医療支援装置(10)において、プロセッサ(14)は、医療従事者が判断した検査の種類に関する指示用検査情報を取得し、問診の音声による問診情報を取得し、問診情報と実施する検査の種類に関する実施検査情報とを予め対応付けた対応情報を取得し、問診情報と対応情報とに基づき、実施する検査の種類を推定した推定検査情報を生成し、指示用検査情報と推定検査情報との比較結果を生成し、比較結果に基づき報知を制御する。
Description
本発明は、医療支援装置、その作動方法及び医療支援プログラム並びに医療支援システムに関する。
医療現場において、診療の場面では、医師を含む医療従事者は、患者との問診により診断又は治療のための様々な情報を得る。例えば、医師は、問診で得た情報等に基づき検査の種類や治療の方針を決定し、必要に応じて検査部門に検査指示を行う。
問診で得た情報等を利用する方法としては、問診によって取得された問診データに基づいて一時検査が選択され、一次検査を実施することにより取得された検査データに基づいて二次検査が選択される医療支援方法及び医療支援システムが開示されている(特許文献1)。特許文献1に記載の医療支援方法等は、診断の正確性を担保しつつ、患者等への負担軽減及び診療の効率化を図ることを目的とする。
医療の性格上、患者に必要な検査を医師等が決定又は確認した上で、検査部門へ検査指示を行いたいという場合がある。この場合は、検査に関して医師等が確認した上で検査指示を行うことができる一方で、人的ミス等により適切な検査指示が行えず、不適切な検査指示となる場合が生じうる。
検査指示については、医師等により指示された一つ又は複数の種類の検査が、過不足なく患者の診断又は治療に適したものである場合、適切な検査指示であると言える。したがって、不適切な検査指示とは、例えば、必要な検査が全て指示されない検査指示漏れの場合、不必要な検査が指示される検査指示過剰の場合、又は指示の人的ミスによる検査指示過誤の場合等がある、検査指示過誤には、例えば、医師等が意図しない間違った検査指示が行われる場合、又はより適切な別の検査があることに医師等が気付かない検査指示不適の場合等が含まれる。
本発明は、医療従事者が検査部門に対して適切な検査指示を行うための支援をすることができる医療支援装置、その作動方法及び医療支援プログラム並びに医療支援システムを提供することを目的とする。
本発明は、医療支援装置であって、プロセッサを備える医療支援装置において、プロセッサは、患者との問診に基づき、医療従事者が患者に対して実施すると判断した検査の種類を検査部門に通知するための指示用検査情報を取得し、患者との問診において発せられる音声の解析を行うことにより生成した問診情報を取得し、問診情報と患者に実施する検査の種類に関する実施検査情報とを予め対応付けた対応情報を取得し、問診情報と対応情報とに基づき、患者に実施する検査の種類を推定した推定検査情報を生成し、指示用検査情報と推定検査情報とを比較して比較結果を生成し、比較結果に基づき報知を制御する。
プロセッサは、患者に実施する検査の種類に適合度を付与し、かつ、適合度が特定の値の範囲内である検査の種類を推定した推定検査情報を生成することが好ましい。
比較結果において、指示用検査情報と推定検査情報とが共通する検査の種類を一つも含まない場合、プロセッサは、医療従事者に対し、指示用検査情報の確認を促す報知内容により報知を行うことが好ましい。
プロセッサは、さらに推定検査情報を含む報知内容により報知を行うことが好ましい。
比較結果において、指示用検査情報と推定検査情報とが一部共通する検査の種類を含む場合、プロセッサは、推定検査情報を含む報知内容により報知を行うことが好ましい。
比較結果において、指示用検査情報と推定検査情報とが一致する場合、プロセッサは、一致に関する報知を行うことが好ましい。
プロセッサは、患者との問診において発せられる音声を取得する制御を行い、問診情報を生成するために音声を解析することが好ましい。
プロセッサは、音声の取得を制御し、取得した音声の保存を制御することが好ましい。
プロセッサは、起動の際に音声の取得を開始することが好ましい。
プロセッサは、音声を検知した際に音声取得を開始することが好ましい。
プロセッサは、取得した音声を、患者毎に保存することが好ましい。
プロセッサは、音声を解析した後に、音声を消去することが好ましい。
プロセッサは、報知が行われた後に、医療従事者が患者に対して実施すると判断した検査の種類に関して検査部門に通知を完了した指示済検査情報を取得することが好ましい。
プロセッサは、問診情報と指示済検査情報とを対応させて学習させた学習済みモデルを生成し、学習済みモデルを記憶する制御を行うことが好ましい。
プロセッサは、学習済みモデルを対応情報として取得することが好ましい。
また、本発明は、医療支援装置の作動方法であって、患者との問診に基づき、医療従事者が患者に対して実施すると判断した検査の種類を検査部門に通知するための指示用検査情報を取得する指示用検査情報取得ステップと、患者との問診において発せられる音声の解析を行うことにより生成した問診情報を取得する問診情報取得ステップと、問診情報と患者に実施する検査の種類に関する実施検査情報とを予め対応付けた対応情報を取得する対応情報取得ステップと、問診情報と対応情報とに基づき、患者に実施する検査の種類を推定した推定検査情報を生成する検査推定ステップと、指示用検査情報と推定検査情報とを比較して比較結果を生成する比較ステップと、比較結果に基づく報知を制御する報知制御ステップと、を備える。
また、本発明は、医療支援プログラムであって、医療支援装置にインストールされる医療支援プログラムにおいて、コンピュータに、患者との問診に基づき、医療従事者が患者に対して実施すると判断した検査の種類を検査部門に通知するための指示用検査情報を取得する機能と、患者との問診において発せられる音声の解析を行うことにより生成した問診情報を取得する機能と、問診情報と患者に実施する検査の種類に関する実施検査情報とを予め対応付けた対応情報を取得する機能と、問診情報と対応情報とに基づき、患者に実施する検査の種類を推定した推定検査情報を生成する機能と、指示用検査情報と推定検査情報とを比較して比較結果を生成する機能と、比較結果に基づく報知を制御する機能とを実現させるための医療支援プログラムである。
また、本発明は、医療支援システムであって、医療支援装置を備える。
本発明によれば、医療従事者が検査部門に対して適切な検査指示を行うための支援をすることができる。
本発明の医療支援装置は、医療従事者が検査部門に対して検査指示を行う場面で使用する。したがって、本実施形態では、医療支援装置を、医師が患者との問診を行う診察室等に設置する。本明細書において、医療従事者とは、患者に実施する検査に関する決定をすることができる者をいい、例えば、医師、又は医師の指示等の元で検査に関する決定をすることができる者である看護師、臨床検査技師、若しくは放射線検査技師等を含む。医療支援装置は、例えば、所定の機能を実行するためのアプリケーションプログラムがインストールされたパーソナルコンピュータ等のコンピュータである。
図1に示すように、医療支援装置10は、ディスプレイ等の出力デバイス12及びマウス、マイク、又はキーボード等の入力デバイス13に加えて、プロセッサであるCPU(Central Processing Unit)14、メモリ15、ストレージデバイス16、及び通信部17を備える。これらはデータバス18を介して相互接続されている。通信部17は、他の装置又はネットワーク19と通信する機能を有する。
ストレージデバイス16は、医療支援装置10に内蔵、又はケーブル若しくはネットワーク19を通じて接続されたハードディスクドライブ、若しくはハードディスクドライブを複数台連装したディスクアレイである。したがって、ストレージデバイス16は、記憶部として機能する。ストレージデバイス16には、オペレーティングシステム等の制御プログラム、各種アプリケーションプログラム、及びこれらのプログラムに付随する各種データ等が記憶されている。
メモリ15は、CPU14が処理を実行するためのワークメモリである。CPU14は、ストレージデバイス16に記憶されたプログラムをメモリ15へロードして、プログラムに従った処理を実行することにより、医療支援装置10の各部を統括的に制御する。
医療支援装置10は、通信部17により、患者情報、診療情報、検査情報、会計情報、及び画像診断の撮影指示等の情報を患者毎に登録及び管理する、HIS(Hospital Information System:病院情報システム)、RIS(Radiology Information System:放射線情報システム)等の情報管理サーバ、又は、例えば、撮影した放射線画像とこの放射線画像に関する情報等を管理するPACS(Picture Archiving and Communication System for medical application:医療画像保管通信システム)等の画像サーバと接続してもよい。これらのサーバと接続する場合は、これらのサーバと各種情報の相互通信を行う。また、医療支援装置10のコンピュータは、これらのサーバのクラインアント端末としても使用することができる。
図2に示すように、医療支援装置10は、診察室20に設置されており、医師DR等の患者に実施する検査に関する決定をすることができる者が操作を行う。診察室20において、医師DRは患者PAと会話に加え、視診、聴診、打診、又は触診等により問診を行う。会話では、例えば、医師DRが質問をするために音声SP1を発し、これに応じて患者PAが質問に答えるために音声SP2を発する。医師DRは、問診において、診断又は治療の方針を決定し、医療支援装置10の支援により患者PAに対して行う検査指示21を、例えば、検査部門である画像検査室30に対して行う。画像検査室30は、検査室30aと操作室30bとを含む。検査指示21は、具体的には、医療支援装置10の入力デバイス13を用いて行われる。入力デバイス13は、例えば、キーボード13a、又はマイク13b等を含み、入力デバイス13という場合はこれらを総称する。
検査指示21は、RIS(図示しない)を介して行われる。操作室30bには、RISのクライアント端末31が設置されており、放射線検査技師RTがクライアント端末31により検査指示21を受け取る。放射線検査技師RTは、検査指示21に基づき、検査室30aにおいて患者PAに対して、例えば、X線撮影装置32を用いて医療画像を取得する。
図3に示すように、医療支援装置10において、ストレージデバイス16には、作動プログラム41が記憶される。作動プログラム41が起動されると、CPU14は、メモリ15等と協働して、指示用検査情報取得部51、問診情報取得部52、対応情報取得部53、検査推定部54、比較部55、及び報知制御部56等として機能する。したがって、医療支援装置10は、指示用検査情報取得部51、問診情報取得部52、対応情報取得部53、検査推定部54、比較部55、及び報知制御部56を備える。
指示用検査情報取得部51は、患者PAとの問診に基づき、医師DRが患者PAに対して実施すると判断した検査の種類を検査部門である画像検査室30に通知するための指示用検査情報を取得する。指示用検査情報の取得は、例えば、医師DRが、入力デバイス13に検査の種類を通知することができる各種情報を入力することにより行われる。問診情報取得部52は、患者PAとの問診において発せられる音声の解析を行うことにより、患者PAとの問診において得られる問診情報を取得する。問診情報の取得は、例えば、入力デバイス13への各種情報の入力によって行われる。
対応情報取得部53は、問診情報と患者PAに対して行う検査の種類に関する検査情報とを予め対応付けた対応情報を取得する。対応情報は、例えば、記憶装置に保存しておいたものを用いる。検査推定部54は、問診情報と対応情報とに基づき、患者PAに対して行う検査の種類を推定した推定検査情報を生成する。検査推定部54は、問診情報取得部52から問診情報を取得し、また、対応情報取得部53から対応情報を取得する。生成した推定検査情報は、比較部55に送られる。
比較部55は、指示用検査情報と推定検査情報とを比較して比較結果を生成する。指示用検査情報は、指示用検査情報取得部51から取得し、推定検査情報は、検査推定部54から取得する。生成した比較結果は、報知制御部56に送られる。報知制御部56は、比較部55から取得した比較結果に基づく報知を制御する。報知を行う場合は、ディスプレイ等の出力デバイス12等を用いて報知を行う。
次に、医療支援装置10が備える各部等について詳細に説明する。指示用検査情報取得部51について、取得する指示用検査情報は、問診等により、医師DRが患者PAに実施すると判断した検査の種類に関する情報であり、実施すると判断した検査の種類を患者PAに実施するよう検査部門に通知することにより、検査指示を行うための情報である。したがって、指示用検査情報は、指示された検査部門が、問題なく指示された検査を患者PAに行うために必要な情報を含む。また、指示用検査情報は、医師DRが判断した結果、患者PAには検査が必要無いとの情報を含んでもよい。したがって、指示用検査情報には、検査の種類が一つも含まれない場合がある。
指示用検査情報は、患者PAに実施される検査の種類、又は検査の条件等を含む。例えば、問診により、医師DRが患者PAの診断又は治療等のために、患者に対する画像検査及び血液検査が必要であると判断する場合、指示用検査情報は、ポジショニングがP→A(posterior→anterior、後ろ→前)である胸部X線画像の立位正面像を取得する指示、及び、血液検査における血清学的検査を行う指示の情報を含む。指示用検査情報は、実施する検査の種類の名称といった情報を含むが、検査の種類のみならず、検査の条件等、診断のために患者に対して実施する可能性がある検査に関する種々の情報を含む。
医師DRは、医療支援装置10に指示用検査情報を入力する。また、医療支援装置10は、HIS及び/又はRISと接続するため、医師DRが医療支援装置10に入力した指示用検査情報は、自動的にHIS及び/又はRISに入力されるようにしてもよい。入力の手段又は方法は限定されず、例えば、キーボード13a、又はマウス(図示しない)等の入力デバイス13により入力する。マウスを用いる場合は、例えば、ディスプレイに表示された検査リストから選択する等の方法を用いる。なお、指示用検査情報は、医師DRが検査部門に通知又は指示するための情報であるが、指示用検査情報を医療支援装置10に入力した時点では、検査部門に対する指示はまだ行われない。
問診情報取得部52は、患者PAとの問診において発せられる音声を解析することにより生成した問診情報を取得する。図4に示すように、問診情報取得部52は、音声取得部52aと、音声解析部52bとを備える。音声取得部52aは、問診において発せられる音声を取得する制御を行う。音声解析部52bは、音声を解析して問診情報を生成する。取得する音声のデータ形式としては、コンピュータで保存又は解析等の処理が可能な形式であれば、特に制限されない。
音声取得部52aは、問診において、主に、医師DR及び患者PAが発した音声SP1及び音声SP2を取得する制御を行う。なお、問診において発言する可能性がある、患者PAの付き添い人、又は看護師等の、医師DR及び患者PA以外の者による音声が含まれても良い。
本明細書において、問診情報とは、患者PAに実施する検査の種類に関して、医師DRが検査部門に対して適切な検査指示を行うために用いられる情報である。したがって、問診情報は、患者PAの診断又は治療に際して適切な検査を過不足なく検査部門に指示することが可能となる情報であり、例えば、患者PAの自覚症状及びその経過、患者PAの既往症、又は患者PAの家族の病歴等を含む。また、患者PAの年齢、職種、又は家族の構成等の患者PA自身の情報も含む。また、医師DR又は看護師等が、問診中に患者PAに関して発言した内容による情報も含む。例えば、医師DRが問診中に発言する、患者PAが罹患している可能性がある疾病名、又は患者PAが再診の場合のこれまでの経過に関する情報等である。したがって、問診情報は、患者PAの電子カルテから取得した情報を含んでも良い。
問診情報は、さらに、患者PAの音声SP2における、患者PAの会話速度、音量、発言における言葉の明瞭さ、又は医師DRが音声PA1により質問してから患者PAが音声SP2により返答するまでの時間等、問診における会話の内容以外における情報も含む。医師DRは、問診において、医師DRの発言により、患者PAに対して、これらの問診情報を含む患者PAの発言を行わせる。音声取得部52aは、これらの発言によって、医師DRが発する音声SP1及び患者PAが発する音声SP2を取得する制御を行う。
音声取得の手段については、特に限定されない。例えば、マイク13bにより、問診において発せられる医師DRの発言による音声SP1及び患者PAの発言による音声SP2を取得する。音声取得の手順としては、例えば、医療支援装置10又はマイク13b等に、音声取得の開始と終了とを指示する音声取得ボタン(図示しない)を設けることにより、医師DRが問診毎に音声取得ボタンを操作して、患者PA毎に音声SP1及び音声SP2の取得を行うことができる。
音声解析部52bは、問診情報を取得するために音声SP1及び音声SP2を含む音声を解析する。解析の手段は、公知の音声認識手段及び/又は自然言語処理手段を使用することができる。公知の音声認識手段及び/又は自然言語処理手段としては、公知の機械学習技術、又は機械学習技術以外の技術を用いることができる。例えば、公知の機械学習技術を利用した音声認識手段により、発言の内容、及びその発言を行った者等の情報がテキスト情報として取得され、これらのテキスト情報に対する自然言語処理手段により、患者PAの診断又は治療に適切な検査指示を行うために必要な語句等を取得し、これらを問診情報とすることができる。また、テキスト情報以外にも、各種の音声認識手段により、患者PAの音声SP2に基づき、患者PAの会話速度、音量、又は発言における言葉の明瞭さ等の、会話の内容以外における情報を問診情報として取得してもよい。また、取得する問診情報の種類により、複数の音声認識手段及び/又は自然言語処理手段を使用し、これらを使い分けても良い。得られた問診情報は、検査推定部54に送られる。
対応情報取得部53は、問診情報と、患者PAに対して行う検査の種類に関する実施検査情報とを予め対応付けた対応情報を取得する。対応情報は、予め、問診情報とその問診情報が取得された問診を行った患者PAに対して実施した検査である実施検査情報とを対応付けた情報であるが、問診情報及び実施検査情報は、実際に行われた問診により取得された情報であっても、想定によるものであってもよい。すなわち、対応情報において対応付けられる問診情報及び実施検査情報は、それぞれ、想定される情報を用いたものであってもよい。
対応情報は、問診情報と患者PAに対して行われた検査の実施検査情報とを予め対応付けたものであればよく、形式、又は生成方法等は限られない。問診情報は、音声を解析して得られるものであるから、例えば、様々な形式の音声情報、又は音声を解析した様々な形式のテキスト情報等であり得る。したがって、対応情報は、これらの問診情報に応じたさまざまな形式を取り得る。例えば、テキスト情報である既知の問診情報と患者PAに対して行われた検査の実施検査情報とを対応付けてテーブルとして作成したものであってもよい。また、検査推定部54において作成した学習済みモデルを対応情報としてもよい。この学習済みモデルについては後述する。なお、対応情報に用いる問診情報は、問診情報を構成する複数の情報を含んだものとしてもよく、実施検査情報も、複数の検査の種類を含む検査メニューであってもよい。
対応情報は、種々の条件に応じて、好ましい推定検査情報が得られるように、複数の対応情報を使い分けても良い。したがって、種々の条件に応じて、異なる学習をさせた学習済みモデル使い分けても良い。例えば、患者PAの年齢に応じて、対応情報である学習済みモデルを使い分けることにより、好ましい推定検査情報が得られるようにしても良い。なお、好ましい推定検査情報とは、推定検査情報が含む検査の種類が、患者PAに対する適切な検査指示と一致することを意味する。したがって、推定検査情報が含む検査の種類が、過不足なく患者の診断又は治療に適したものである程、推定検査情報を生成するための問診情報及び/又は対応情報が好ましいといえる。
図5に示すように、対応情報61は、例えば、問診情報と、その問診情報が取得された問診を行った患者PAに対して行われた検査の実施検査情報とが対応付けられた情報である。対応情報61では、一つ又は複数の問診情報と、一つ又は複数の検査の種類若しくは検査メニューとが対応付けられた対応情報であってもよい。対応情報61において、例えば、問診情報が、問診における患者PAの発言に基づく「咳が止まらない」との語句である場合、実施検査情報による検査の種類として、「胸部X線撮影(立位正面、P→A)」が対応付けられた情報である。また、問診情報が、問診における患者PAに発言に基づく「80歳です」及び「呼吸が苦しい」との語句である場合、実施検査情報による検査の種類は、「検査メニューA」が対応付けられており、「検査メニューA」の内容は、「胸部X線撮影(立位正面、P→A)」と「血液検査(血清学的検査)」である。また、問診情報が患者PAの発言に含まれる語句ではなく、患者PAの声の状態、例えば、枯れた声の音声である場合、実施検査情報による検査の種類は、「気管支鏡検査」が対応付けられている。
対応情報取得部53が対応情報を取得する手段は限定されない。例えば、対応情報を予め記憶装置(図示しない)に保存し、対応情報取得部53は、この記憶装置に保存された対応情報を取得することができる。
検査推定部54は、問診情報と対応情報とに基づき、患者PAに対して行う検査の種類を推定した推定検査情報を生成する。上記したように、検査推定部54は、問診情報取得部52と接続し、検査推定部54は、問診情報取得部52が取得した問診情報を受け取る。また、検査推定部54は、対応情報取得部53と接続し、検査推定部54は、対応情報取得部53が取得した対応情報を受け取る。検査推定部54は、問診情報取得部52から受け取った問診情報と、対応情報取得部53から受け取った対応情報とにより、問診情報取得部52から受け取った問診情報に基づく適切な検査の種類を推定し、適切な検査の種類を含む推定検査情報を生成する。適切な検査の種類は、一つの検査の種類に限らず、複数の検査の種類が含まれても良い。なお、推定検査情報は、患者に対して行う検査の種類を推定した情報であるので、検査の種類を含む情報であるが、検査が必要無いと推定した情報である場合も含む。また、検査推定部54が用いる問診情報及び/又は対応情報が含むそれぞれの情報は、それぞれ重み付けがされたものであってもよい。
図6に示すように、検査推定部54は、例えば、問診情報取得部52から受け取った問診情報62が、患者PAの音声SP2の解析により取得された「咳が止まらない」との語句を含む場合、対応情報61に基づき、推定検査情報63を、検査の種類が「胸部X線撮影(立位正面、P→A)」であると推定する。
また、検査推定部54は、患者PAに実施する検査の種類に適合度を付与し、かつ、特定の値以上の適合度が付与された検査の種類を推定した推定検査情報を生成してもよい。検査推定部54が付与する適合度とは、検査推定部54が問診情報と対応情報とに基づき、患者PAに実施する検査の種類を推定する際に、推定した検査の種類が患者PAに実施される確率に対応する数値である。適合度を付与する方法に関しては限定されず、例えば、学習済みモデルを対応情報とした機械学習技術等により、適合度を付与した検査の種類を推定してもよい。この学習済みモデルについては後述する。検査の種類に適合度が付与されているので、適合度が特定の値の範囲内である検査の種類を選択して、推定検査情報を生成してもよい。適合度の特定の値は、設定可能である。
図7に示すように、検査推定部54は、例えば、問診情報取得部52から受け取った問診情報62が、患者PAの音声SP2の解析により取得された「咳が止まらない」との語句、「熱が38度」との体温の情報、及び患者PAが「会社員」であるとの患者PAの個人情報等を含む場合、対応情報61に基づき、適合度を付与した検査の種類を推定した推定検査リスト63aを生成する。適合度が70%以上の検査の種類であるとの条件により推定検査情報63を生成する場合、推定検査リスト63aのうち、適合度が「98%」である「検査メニューA」、及び適合度が「70%」である「検査メニューB」により、推定検査情報63を生成する。
比較部55は、指示用検査情報と推定検査情報とを比較して比較結果を生成する。上記したように、指示用検査情報は、医師DRが患者PAに対して実施すると判断した検査の種類を検査部門に通知するための情報であるので、検査の種類に関する情報を含む。また、推定検査情報は、患者PAに対して実施する検査の種類を推定した情報であるので、検査の種類に関する情報を含む。したがって、比較結果は、検査の種類に関して比較した結果である。
比較結果は、次のような場合を含む。第1は、図8に示すように、比較結果71において、指示用検査情報72と推定検査情報63とが共通する検査の種類を一つも含まない場合である。すなわち、医師DRが患者PAに対して実施すると判断した検査の種類が、検査推定部54により推定された検査の種類に、一つも含まれない場合である。この場合は、指示用検査情報72が検査の種類を含み、また、推定検査情報63が検査の種類を含む場合(ケースA73)、指示用検査情報72において検査が必要ないと判断されたのに対し、検査推定部54により検査が必要であると推定され、推定検査情報63が検査の種類を含む場合(ケースB74)、及び、検査推定部54において検査が必要ないと推定され、推定検査情報63が検査の情報を含まないのに対し、指示用検査情報72において検査が必要であると判断された場合(ケースC75)を含む。なお、図8ないし図10において、実線の円は検査の種類を要素とした集合を示し、斜線のハッチングは集合の要素である検査の種類があることを示す。破線の円は検査の種類及び集合がないことを示す。
第2は、図9に示すように、比較結果71において、推定検査情報63と指示用検査情報72とが一部共通する検査の種類を含む場合である。この場合、医師DRが患者PAに対して実施すると判断した検査の種類の一部が、検査推定部54により推定された検査の種類に含まれるが、その他は共通しない場合(ケースD76)、医師DRが患者PAに対して実施すると判断した検査の種類のすべてが、検査推定部54により推定された検査の種類に含まれるが、推定された検査の種類にはその他の検査の種類も含まれる場合(ケースE77)、及び、検査推定部54により推定された検査の種類のすべてが、医師DRが患者PAに対して実施すると判断した検査の種類に含まれるが、医師DRが実施すると判断した検査の種類にはその他の検査の種類も含まれる場合(ケースF78)を含む。
第3は、図10に示すように、比較結果71において、推定検査情報63と指示用検査情報72とが一致する場合(ケースG79)である。すなわち、医師DRが患者PAに対して実施すると判断した検査の種類と、検査推定部54により推定された検査の種類とが、過不足なく一致する場合である。
報知制御部56は、比較結果71に基づき報知を制御する。報知の制御とは、報知を行う又は行わないとの報知の有無の制御、報知する場合の報知内容の制御、報知する場合の報知回数の制御、又は、報知する場合の相手先の制御等、報知を実行するための事項を決定することをいう。これらの事項は場合によって設定により変更可能である。
本実施形態では、報知は、医療支援装置10を使用して、指示用検査情報72を作成した医師DR等に対して行われる。報知の手段は、医師DRが報知されたことを認知できれば良く、手段等は限定されない。例えば、医療支援装置10の出力デバイス12による報知の場合、出力デバイス12であるディスプレイ12aに文字又はイメージを表示することにより医師DRに対して報知が行われる。
報知制御部56は、比較結果71に基づき、報知内容を決定して報知を制御する。例えば、図8に示すように、比較結果71において、指示用検査情報72と推定検査情報63とが共通する検査の種類を一つも含まない場合(ケースA73、ケースB74、又はケースC75)、報知制御部は、医師DRに対し、指示用検査情報72の確認を促す報知内容81により報知を行う。指示用検査情報72の確認を促す報知内容81は、医師DRが、自らが判断した検査の種類を含む指示用検査情報72等を確認することを促すものであればよく、例えば、指示用検査情報72の確認を促すための「推定と全部異なるため指示用検査情報を確認して下さい」といった文字表示82、又は警告の意を表す「×」の記号によるイメージ表示83等とすることができる。これらの文字表示82又はイメージ表示83は、ディスプレイの一部又は全部に表示する。
また、例えば、図9に示すように、比較結果71において、指示用検査情報72と推定検査情報63とが一部共通する検査の種類を含む場合(ケースD76、ケースE77、又はケースF78)、報知制御部56は、医師DRに対し、推定検査情報63を含む報知内容81aにより報知を行っても良いし、指示用検査情報72の確認を促す報知内容81bにより報知を行っても良い。推定検査情報63を文字表示82として含む報知内容81aは、医師DRが、推定検査情報63の検査の種類を認識することにより、自らが判断した検査の種類を含む指示用検査情報72と推定検査情報63との違いを認識することができるものであればよい。例えば、報知内容81aにおける文字表示82において、「指示用」と表示された列に「血液検査」と表示され、指示用検査情報72が検査の種類として「血液検査」からなることが認識できる。一方、「推定」と表示された列に「血液検査」と「腹部超音波検査」と記載され、推定検査情報63が検査の種類として「血液検査」と「腹部超音波検査」とからなることが認識できる。なお、例えば、検査の種類の数が3つ以上である場合等に、報知内容81aにおける文字表示82に表示される逆三角形のアロー84をマウス等で指示等することにより、隠れている文字表示82等をスクロールして見ることができる。
また、例えば、報知内容81bは、指示用検査情報72の確認を促すための文字表示82b等とすることができる。なお、指示用検査情報72の確認を促す報知内容81は、例えば、指示用検査情報72の確認を促すための「推定と一部異なるため指示用検査情報を確認して下さい」といった文字表示82、又は注意の意を表す「!」の記号によるイメージ表示83等とすることができる。これらの報知内容81は設定により変更することができる。
また、例えば、図10に示すように、比較結果71において、指示用検査情報72と推定検査情報63とが一致する場合(ケースG79)、一致に関する報知を行う。一致に関する報知の報知内容81は、医師DRが、自らが判断した検査の種類を含む指示用検査情報72と推定検査情報63とが一致したことを認識することができるものであればよく、例えば、「検査の種類は一致しています」といった文字表示82、又は一致の意を表す「O」の記号によるイメージ表示83等とすることができる。推定検査情報63と指示用検査情報72とが一致したことを報知内容81として報知することにより、医師DRが、自らが患者PAに対して実施すると判断した検査の種類と、検査推定部54により推定された検査の種類とが、過不足なく一致したことを認知できる。
なお、図11に示すように、比較結果71において、指示用検査情報72と推定検査情報63とが共通する検査の種類を一つも含まない場合は、推定検査情報63を含む報知内容により報知を行っても良い。例えば、ディスプレイに、指示用検査情報72の確認を促すための「推定と全部異なるため指示用検査情報を確認して下さい」といった文字表示82、又は警告の意を表す「×」の記号によるイメージ表示83等がある場合、カーソル91により文字表示82又はイメージ表示83をクリックすることにより、指示用検査情報72の検査の種類の情報と、推定検査情報63の検査の種類の情報とを、並列して表記した文字表示82による報知内容81dをディスプレイに表示することができる。
以上のように、本発明の医療支援装置10は、医師DRが検査部門に対して検査指示を行う際に、問診における音声を利用して推定した推定検査情報63により、指示用検査情報72との比較結果に基づき報知を行うため、手間なく自らが判断した検査の種類のチェック、及び提案を受けることができる。したがって、医師DRが自ら検査指示を行うにあたって、検査指示のミスを抑制することができ、検査のやり直し、又は間違った検査の実施等を防ぐことができる。また、推定検査情報63により、医師DRが気づかなかった検査指示の候補が提案されるため、患者PAにとってより良い検査の種類、又は医療画像検査による場合はより良い撮影方法を医師DRが知ることができる。したがって、本発明の医療支援装置10は、医師DRの教育にも好適に使用することができる。医師DRは、指示用検査情報72に関する報知を受けた後に、検査部門に対して検査指示を行う。したがって、医師DRは、医療支援装置10の支援により、検査部門に対して適切な検査指示を行うことができる。
なお、問診情報を取得する問診情報取得部52においては、音声取得制御部52cと音声保存制御部52dとを備えてもよい(図4参照)。音声取得制御部52cは、音声の取得を制御する。また、音声保存制御部52dは、取得した音声の保存を制御する。なお、音声取得制御部52c及び音声保存制御部52dは、具体的には、公知の手段を使用することができる。
音声取得制御部52cは、音声を取得する手段等の各種の制御を行うことにより、問診において発せられる音声の取得の制御を実現する。音声の取得は、医師DR等が音声取得の開始と終了とを手動で指示することにより行っても良いが、自動的に音声を取得することが好ましい。この場合、音声の取得の制御としては、例えば、音声の取得の開始を自動的に行うように、また、音声の取得の終了を自動的に行うように制御する。音声の取得の開始を自動的に行う方法としては、例えば、音声取得制御部52cが、音声を検知した際に音声取得を開始することができる。また、音声の取得の終了を自動的に行う方法としては、例えば、音声取得制御部52cが、音声が無い状態が特定期間継続した際に、音声の取得を終了することができる。
音声取得制御部52cは、音声の取得の開始を自動的に行う際、音声の取得を開始する特定のトリガー又はスイッチとなるものにより、音声の取得を開始してもよい。例えば、医療支援装置10の起動を音声取得のトリガーとした場合、医療支援装置10を起動した際に、音声の取得を自動的に開始する。また、問診において、人の声である音声の感知をトリガーとした場合、問診において人の声である音声を感知した際に、音声の取得を自動的に開始する。また、問診において、音声を登録した特定人の音声の感知をトリガーとした場合、例えば、医師DRの音声を感知した際に、音声の取得を自動的に開始する。一方、特定人以外又は音声を登録されていない人の音声の感知をトリガーとした場合、問診において、患者PAの音声を認識することができるため、患者毎の音声の取得を自動的に開始することができる。また、音声の解析により特定の語句が抽出されることをトリガーとした場合、特定人によらず、「録音開始」等の特定の語句を発する音声を音声解析部52bが解析し、「録音開始」の語句が抽出された際に、音声の取得を自動的に開始する。
音声取得制御部52cによるこれらの制御により、例えば、医師DR等が手動による音声取得の指示を行なわずに、問診において発せられる音声を取得することができる。なお、特定の語句は、音声取得制御部52cにより、設定可能である。なお、音声取得制御部52cは、音声取得の開始及び/又は終了のみならず、例えば、取得した音声をいつ音声解析部52bに送るか等の制御も行う。以上のように、音声取得制御部52cにより、音声の取得し忘れ等を防ぐことができる。また、音声取得制御部52cが、音声解析部52bとの協働を制御することにより、様々な音声取得制御が可能となる。
音声保存制御部52dは、取得した音声の保存を制御する。例えば、音声保存制御部52dは、取得した音声について、音声解析部52bと協働することにより、患者PA毎に保存してもよい。この場合、取得した音声を解析して、患者PAの名前、又は診察カード番号等の患者PAの個人情報の語句が抽出された場合、患者PA毎のファイルに音声を保存することができる。なお、音声の保存については、電子カルテ等と連動してRIS等で管理してもよい。
なお、音声取得制御部52cは、音声解析部52bと協働して、例えば、音声を解析した後、その音声を消去する制御を行っても良い。これにより、音声を保存する保存手段を節約することができる。
なお、図12に示すように、報知が行われた後に、医師DRが患者PAに対して実施すると判断した検査の種類に関して検査部門に通知を完了した、指示済検査情報を取得する指示済検査情報取得部101を備えても良い。指示済検査情報は、医師DRが患者PAに対して実施すると判断した検査の種類の情報を含む。指示済検査情報は、医療支援装置10による報知が行われた後に、医師DRが再判断した検査の種類を含むので、検査指示漏れ、検査指示過剰、検査指示過誤、又は検査指示不適当が抑えられた適切な検査指示となっている。
指示済検査情報は、検査推定部54に送られる。検査推定部54は、学習済みモデル作成部102を備えてもよい。学習済みモデル作成部102は、問診情報取得部52と指示済検査情報取得部101と接続し、それぞれ、問診情報と指示済検査情報とを取得する。そして、問診情報と指示済検査情報とを対応させて学習させた学習済みモデル103を生成する。生成した学習済みモデル103は、記憶部であるストレージデバイス16に記憶する。
ストレージデバイス16に記憶された学習済みモデル103は、対応情報取得部53が、対応情報として取得する。したがって、指示済検査情報は、対応情報では実施検査情報となる。これにより、より高い精度で検査の種類を推定した推定検査情報を生成することができる。また、適合度に関しても、より高い精度で適合度を検査の種類に付与することができる。また、例えば、行う検査の基準等が医療施設毎に異なっていても、各医療施設に適した検査の種類を推定することができる。
また、医療支援装置10を備える医療支援システムは、上記の医療支援装置10を備える。さらに、医療支援装置10に接続される他の装置を備えてもよい。
次に、上記構成による作用について、図13のフローチャートを参照して説明する。まず、問診において、医師DRと患者PAとの会話を開始する(ステップST100)。音声取得部52aは、自動的に医師DRが発する音声SP1と患者PAが発する音声SP2とを取得する制御を行う(ステップST110)。取得された音声SP1と音声SP2とは、音声解析部52bが解析する(ステップST120)。解析により、問診情報が生成される(ステップST130)。生成された問診情報は、問診情報取得部52が取得し、検査推定部54に送る。検査推定部54は、推定検査情報を生成する(ステップST140)。
問診において、音声取得部52aが音声SP1と音声SP2とを取得する制御を行う流れと並行して、医師DRは、患者に実施すると判断した検査の種類である指示用検査情報を医療支援装置10に入力し、指示用検査情報取得部51が指示用検査情報を取得する(ステップST150)。比較部55が、問診情報と推定検査情報とを比較して比較結果を生成する(ステップST160)。比較結果に基づき、報知制御部56が、報知をするかしないか等を制御する(ステップST170)。報知をする場合は(ステップST170でYES)、報知内容を決定して報知を行う(ステップST180)。報知を行わない場合は、報知をせずに、指示用検査情報により検査部門に検査指示がされ、報知を行った場合は、報知又は報知内容を確認した上で、適宜指示用検査情報を修正したものにより、検査部門に検査指示がされる(ステップSP190)。したがって、医師DRは、検査部門に対して適切な検査指示を行うことができる。
上記実施形態において、指示用検査情報取得部51、問診情報取得部52、対応情報取得部53、検査推定部54、比較部55、報知制御部56、指示済検査情報取得部101、学習済みモデル作成部102等といった各種の処理を実行する処理部(processing unit)のハードウェア的な構造は、次に示すような各種のプロセッサ(processor)である。各種のプロセッサには、ソフトウエア(プログラム)を実行して各種の処理部として機能する汎用的なプロセッサであるCPU(Central Processing Unit)、FPGA (Field Programmable Gate Array) などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス(Programmable Logic Device:PLD)、各種の処理を実行するために専用に設計された回路構成を有するプロセッサである専用電気回路(Application Specific Integrated Circuit:ASIC、Graphical Processing Unit:GPU)などが含まれる。
1つの処理部は、これら各種のプロセッサのうちの1つで構成されてもよいし、同種または異種の2つ以上のプロセッサの組み合せ(例えば、複数のFPGAや、CPUとFPGAの組み合わせ、GPUとCPUの組み合わせ)で構成されてもよい。また、複数の処理部を1つのプロセッサで構成してもよい。複数の処理部を1つのプロセッサで構成する例としては、第1に、クライアントやサーバなどのコンピュータに代表されるように、1つ以上のCPUとソフトウエアの組み合わせで1つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第2に、システムオンチップ(System On Chip:SoC)などに代表されるように、複数の処理部を含むシステム全体の機能を1つのIC(Integrated Circuit)チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、上記各種のプロセッサを1つ以上用いて構成される。
さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた形態の電気回路(circuitry)である。
本発明は、上記実施形態に限らず、本発明の要旨を逸脱しない限り種々の構成を採用し得ることはもちろんである。さらに、本発明は、プログラムに加えて、プログラムを記憶する記憶媒体にもおよぶ。
10 医療支援装置
12 出力デバイス
13 入力デバイス
13a キーボード
13b マイク
14 CPU
15 メモリ
16 ストレージデバイス
17 通信部
18 データバス
19 ネットワーク
20 診察室
21 検査指示
30 画像検査室
30a 検査室
30b 操作室
31 クライアント端末
32 X線撮影装置
41 作動プログラム
51 指示用検査情報取得部
52 問診情報取得部
52a 音声取得部
52b 音声解析部
52c 音声取得制御部
52d 音声解析部
53 対応情報取得部
54 検査推定部
55 比較部
56 報知制御部
61 対応情報
62 問診情報
63 推定検査情報
63a 推定検査リスト
71 比較結果
72 指示用検査情報
73 ケースA
74 ケースB
75 ケースC
76 ケースD
77 ケースE
78 ケースF
79 ケースG
81、81a、81b、81c、81d 報知内容
82 文字表示
83 イメージ表示
84 アロー
91 カーソル
101 指示済検査情報取得部
102 学習済みモデル作成部
103 学習済みモデル
PA 患者
DR 医師
RT 放射線検査技師
SP1 音声
SP2 音声
ST100~ST190 ステップ
12 出力デバイス
13 入力デバイス
13a キーボード
13b マイク
14 CPU
15 メモリ
16 ストレージデバイス
17 通信部
18 データバス
19 ネットワーク
20 診察室
21 検査指示
30 画像検査室
30a 検査室
30b 操作室
31 クライアント端末
32 X線撮影装置
41 作動プログラム
51 指示用検査情報取得部
52 問診情報取得部
52a 音声取得部
52b 音声解析部
52c 音声取得制御部
52d 音声解析部
53 対応情報取得部
54 検査推定部
55 比較部
56 報知制御部
61 対応情報
62 問診情報
63 推定検査情報
63a 推定検査リスト
71 比較結果
72 指示用検査情報
73 ケースA
74 ケースB
75 ケースC
76 ケースD
77 ケースE
78 ケースF
79 ケースG
81、81a、81b、81c、81d 報知内容
82 文字表示
83 イメージ表示
84 アロー
91 カーソル
101 指示済検査情報取得部
102 学習済みモデル作成部
103 学習済みモデル
PA 患者
DR 医師
RT 放射線検査技師
SP1 音声
SP2 音声
ST100~ST190 ステップ
Claims (18)
- プロセッサを備える医療支援装置において、
前記プロセッサは、
患者との問診に基づき、医療従事者が前記患者に対して実施すると判断した検査の種類を検査部門に通知するための指示用検査情報を取得し、
患者との問診において発せられる音声の解析を行うことにより生成した問診情報を取得し、
前記問診情報と前記患者に実施する検査の種類に関する実施検査情報とを予め対応付けた対応情報を取得し、
前記問診情報と前記対応情報とに基づき、前記患者に実施する検査の種類を推定した推定検査情報を生成し、
前記指示用検査情報と前記推定検査情報とを比較して比較結果を生成し、
前記比較結果に基づき報知を制御する医療支援装置。 - 前記プロセッサは、前記患者に実施する検査の種類に適合度を付与し、かつ、前記適合度が特定の値の範囲内である前記検査の種類を推定した前記推定検査情報を生成する請求項1に記載の医療支援装置。
- 前記比較結果において、前記指示用検査情報と前記推定検査情報とが共通する前記検査の種類を一つも含まない場合、
前記プロセッサは、前記医療従事者に対し、前記指示用検査情報の確認を促す報知内容により前記報知を行う請求項1又は2に記載の医療支援装置。 - 前記プロセッサは、さらに前記推定検査情報を含む報知内容により前記報知を行う請求項3に記載の医療支援装置。
- 前記比較結果において、前記指示用検査情報と前記推定検査情報とが一部共通する前記検査の種類を含む場合、
前記プロセッサは、前記推定検査情報を含む報知内容により前記報知を行う請求項1又は2に記載の医療支援装置。 - 前記比較結果において、前記指示用検査情報と前記推定検査情報とが一致する場合、
前記プロセッサは、前記一致に関する報知を行う請求項1又は2に記載の医療支援装置。 - 前記プロセッサは、前記患者との前記問診において発せられる前記音声を取得する制御を行い、
前記問診情報を生成するために前記音声を解析する請求項1ないし6のいずれか1項に記載の医療支援装置。 - 前記プロセッサは、前記音声の取得を制御し、
取得した前記音声の保存を制御する請求項7に記載の医療支援装置。 - 前記プロセッサは、起動の際に前記音声の取得を開始する請求項8に記載の医療支援装置。
- 前記プロセッサは、前記音声を検知した際に前記音声取得を開始する請求項8に記載の医療支援装置。
- 前記プロセッサは、前記取得した前記音声を、前記患者毎に保存する請求項8ないし10のいずれか1項に記載の医療支援装置。
- 前記プロセッサは、前記音声を解析した後に、前記音声を消去する請求項8ないし11のいずれか1項に記載の医療支援装置。
- 前記プロセッサは、前記報知が行われた後に、前記医療従事者が前記患者に対して実施すると判断した検査の種類に関して前記検査部門に通知を完了した指示済検査情報を取得する請求項1ないし12のいずれか1項に記載の医療支援装置。
- 前記プロセッサは、問診情報と前記指示済検査情報とを対応させて学習させた学習済みモデルを生成し、
前記学習済みモデルを記憶する制御を行う請求項13項に記載の医療支援装置。 - 前記プロセッサは、前記学習済みモデルを前記対応情報として取得する請求項14に記載の医療支援装置。
- 患者との問診に基づき、医療従事者が前記患者に対して実施すると判断した検査の種類を検査部門に通知するための指示用検査情報を取得する指示用検査情報取得ステップと、
患者との問診において発せられる音声の解析を行うことにより生成した問診情報を取得する問診情報取得ステップと、
前記問診情報と前記患者に実施する検査の種類に関する実施検査情報とを予め対応付けた対応情報を取得する対応情報取得ステップと、
前記問診情報と前記対応情報とに基づき、前記患者に実施する検査の種類を推定した推定検査情報を生成する検査推定ステップと、
前記指示用検査情報と前記推定検査情報とを比較して比較結果を生成する比較ステップと、
前記比較結果に基づく報知を制御する報知制御ステップと、
を備える医療支援装置の作動方法。 - 医療支援装置にインストールされる医療支援プログラムにおいて、
コンピュータに、
患者との問診に基づき、医療従事者が前記患者に対して実施すると判断した検査の種類を検査部門に通知するための指示用検査情報を取得する機能と、
患者との問診において発せられる音声の解析を行うことにより生成した問診情報を取得する機能と、
前記問診情報と前記患者に実施する検査の種類に関する実施検査情報とを予め対応付けた対応情報を取得する機能と、
前記問診情報と前記対応情報とに基づき、前記患者に実施する検査の種類を推定した推定検査情報を生成する機能と、
前記指示用検査情報と前記推定検査情報とを比較して比較結果を生成する機能と、
前記比較結果に基づく報知を制御する機能とを実現させるための医療支援プログラム。 - 請求項1ないし15のいずれか1項に記載の医療支援装置を備える医療支援システム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202080049989.9A CN114097040A (zh) | 2019-07-08 | 2020-05-28 | 医疗支持装置、其工作方法及医疗支持程序和医疗支持*** |
JP2021530521A JP7225401B2 (ja) | 2019-07-08 | 2020-05-28 | 医療支援装置、その作動方法及び医療支援プログラム並びに医療支援システム |
EP20836942.1A EP3998612A4 (en) | 2019-07-08 | 2020-05-28 | HEALTH CARE ASSIST DEVICE, METHOD OF OPERATION, HEALTH CARE ASSIST PROGRAM AND HEALTH CARE ASSIST SYSTEM |
US17/568,703 US20220130533A1 (en) | 2019-07-08 | 2022-01-04 | Medical support device, operation method of medical support device, and medical support system |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019-127109 | 2019-07-08 | ||
JP2019127109 | 2019-07-08 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
US17/568,703 Continuation US20220130533A1 (en) | 2019-07-08 | 2022-01-04 | Medical support device, operation method of medical support device, and medical support system |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2021005909A1 true WO2021005909A1 (ja) | 2021-01-14 |
Family
ID=74114004
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/JP2020/021120 WO2021005909A1 (ja) | 2019-07-08 | 2020-05-28 | 医療支援装置、その作動方法及び医療支援プログラム並びに医療支援システム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20220130533A1 (ja) |
EP (1) | EP3998612A4 (ja) |
JP (1) | JP7225401B2 (ja) |
CN (1) | CN114097040A (ja) |
WO (1) | WO2021005909A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023100280A1 (ja) * | 2021-12-01 | 2023-06-08 | 日本電気株式会社 | 情報処理システム、情報処理方法及び非一時的なコンピュータ可読媒体 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007018460A (ja) * | 2005-07-11 | 2007-01-25 | Infocom Corp | 診療支援システム |
JP2010237800A (ja) * | 2009-03-30 | 2010-10-21 | Fujitsu Ltd | 利用支援プログラム、該装置、及び該方法 |
JP2016139221A (ja) * | 2015-01-27 | 2016-08-04 | 一般社団法人 医科学総合研究所 | 病名診断装置、病名診断プログラム、及びそのプログラムを記憶したコンピュータ読取可能な記録媒体 |
JP2018005553A (ja) | 2016-07-01 | 2018-01-11 | 株式会社トプコン | 医療支援方法及び医療支援システム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7822622B2 (en) * | 2003-10-01 | 2010-10-26 | Siemens Aktiengesellschaft | System and method for medical appointment and examination sequence planning |
US7276031B2 (en) * | 2004-05-12 | 2007-10-02 | New York University | System and method for classifying patient's breathing using artificial neural network |
US9318108B2 (en) * | 2010-01-18 | 2016-04-19 | Apple Inc. | Intelligent automated assistant |
US7953614B1 (en) * | 2006-11-22 | 2011-05-31 | Dr Systems, Inc. | Smart placement rules |
US10803538B2 (en) * | 2014-04-14 | 2020-10-13 | Optum, Inc. | System and method for automated data entry and workflow management |
US10825558B2 (en) * | 2017-07-19 | 2020-11-03 | International Business Machines Corporation | Method for improving healthcare |
US11158427B2 (en) * | 2017-07-21 | 2021-10-26 | International Business Machines Corporation | Machine learning for medical screening recommendations based on patient activity information in social media |
WO2020136573A1 (en) * | 2018-12-27 | 2020-07-02 | 3M Innovative Properties Company | Voice-assisted dental systems |
-
2020
- 2020-05-28 CN CN202080049989.9A patent/CN114097040A/zh active Pending
- 2020-05-28 JP JP2021530521A patent/JP7225401B2/ja active Active
- 2020-05-28 EP EP20836942.1A patent/EP3998612A4/en active Pending
- 2020-05-28 WO PCT/JP2020/021120 patent/WO2021005909A1/ja unknown
-
2022
- 2022-01-04 US US17/568,703 patent/US20220130533A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007018460A (ja) * | 2005-07-11 | 2007-01-25 | Infocom Corp | 診療支援システム |
JP2010237800A (ja) * | 2009-03-30 | 2010-10-21 | Fujitsu Ltd | 利用支援プログラム、該装置、及び該方法 |
JP2016139221A (ja) * | 2015-01-27 | 2016-08-04 | 一般社団法人 医科学総合研究所 | 病名診断装置、病名診断プログラム、及びそのプログラムを記憶したコンピュータ読取可能な記録媒体 |
JP2018005553A (ja) | 2016-07-01 | 2018-01-11 | 株式会社トプコン | 医療支援方法及び医療支援システム |
Non-Patent Citations (1)
Title |
---|
See also references of EP3998612A4 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023100280A1 (ja) * | 2021-12-01 | 2023-06-08 | 日本電気株式会社 | 情報処理システム、情報処理方法及び非一時的なコンピュータ可読媒体 |
Also Published As
Publication number | Publication date |
---|---|
US20220130533A1 (en) | 2022-04-28 |
EP3998612A4 (en) | 2022-08-03 |
CN114097040A (zh) | 2022-02-25 |
JPWO2021005909A1 (ja) | 2021-01-14 |
JP7225401B2 (ja) | 2023-02-20 |
EP3998612A1 (en) | 2022-05-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6914839B2 (ja) | 放射線レポートのためのレポート内容のコンテキスト生成 | |
Gerke | Health AI for good rather than evil? The need for a new regulatory framework for AI-based medical devices | |
JP2006338523A (ja) | 医療情報管理システム | |
US20070106501A1 (en) | System and method for subvocal interactions in radiology dictation and UI commands | |
JP7388356B2 (ja) | 医療用情報処理システム、医療用情報処理装置、および医療用情報処理方法 | |
US20220172366A1 (en) | Medical support device, operation method of medical support device, non-transitory computer readable medium, and medical support system | |
JP5151913B2 (ja) | 情報処理装置 | |
US20200286294A1 (en) | Adaptive interactive medical training program with virtual patients | |
US20130290019A1 (en) | Context Based Medical Documentation System | |
WO2021005909A1 (ja) | 医療支援装置、その作動方法及び医療支援プログラム並びに医療支援システム | |
US20170109473A1 (en) | Method and system for detecting and identifying patients who did not obtain the relevant recommended diagnostic test or therapeutic intervention, based on processing information that is present within radiology reports or other electronic health records | |
JP5226201B2 (ja) | 検査安全確保システム及び該システムを搭載する医用診断装置 | |
KR20220095581A (ko) | 음성 인식을 이용한 치과 전자 차트 생성 방법 및 장치 | |
Wachs et al. | Operation room tool handling and miscommunication scenarios: An object-process methodology conceptual model | |
US20230185524A1 (en) | System and method for leveraging audio communication and guidance to improve medical workflow | |
JP2021039683A (ja) | 診療支援方法、診療支援システム、学習モデルの生成方法、および、診療支援プログラム | |
JP2021163133A (ja) | 医用支援システム及び医用支援プログラム | |
JP5167647B2 (ja) | 診断システム | |
US20210375414A1 (en) | Apparatus and methods for generation of a medical summary | |
Chleborad et al. | Evaluation of voice-based data entry to an electronic health record system for dentistry | |
JPWO2008099777A1 (ja) | 小規模診断システム及び表示制御方法 | |
Littlefair et al. | Does the thinking aloud condition affect the search for pulmonary nodules? | |
KR20160037024A (ko) | 개인화된 체크 리스트를 기반으로 의료 진료를 지원하기 위한 장치 및 방법 | |
US11587232B1 (en) | Systems and methods for preventing errors in medical imaging | |
US20240013524A1 (en) | Information processing apparatus, method of operating information processing apparatus, and program for operating information processing apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 20836942 Country of ref document: EP Kind code of ref document: A1 |
|
ENP | Entry into the national phase |
Ref document number: 2021530521 Country of ref document: JP Kind code of ref document: A |
|
ENP | Entry into the national phase |
Ref document number: 2020836942 Country of ref document: EP Effective date: 20220208 |