CN112568936A - 医用图像诊断装置、超声波诊断装置、医用图像***以及拍摄控制方法 - Google Patents
医用图像诊断装置、超声波诊断装置、医用图像***以及拍摄控制方法 Download PDFInfo
- Publication number
- CN112568936A CN112568936A CN202011039148.8A CN202011039148A CN112568936A CN 112568936 A CN112568936 A CN 112568936A CN 202011039148 A CN202011039148 A CN 202011039148A CN 112568936 A CN112568936 A CN 112568936A
- Authority
- CN
- China
- Prior art keywords
- medical image
- data
- ultrasonic
- diagnostic apparatus
- region
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 72
- 238000000034 method Methods 0.000 title claims abstract description 28
- 238000003745 diagnosis Methods 0.000 title description 4
- 239000000523 sample Substances 0.000 claims description 100
- 238000012545 processing Methods 0.000 claims description 97
- 230000005540 biological transmission Effects 0.000 claims description 39
- 230000033001 locomotion Effects 0.000 claims description 14
- 230000006870 function Effects 0.000 description 135
- 210000000056 organ Anatomy 0.000 description 86
- 238000002604 ultrasonography Methods 0.000 description 56
- 238000010586 diagram Methods 0.000 description 23
- 239000003550 marker Substances 0.000 description 18
- 230000036544 posture Effects 0.000 description 17
- 206010028980 Neoplasm Diseases 0.000 description 14
- 210000001519 tissue Anatomy 0.000 description 14
- 238000012549 training Methods 0.000 description 10
- 238000006243 chemical reaction Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 9
- 238000002591 computed tomography Methods 0.000 description 8
- 210000004185 liver Anatomy 0.000 description 8
- 238000013528 artificial neural network Methods 0.000 description 7
- 238000002595 magnetic resonance imaging Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 239000000284 extract Substances 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 239000002872 contrast media Substances 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 108010076504 Protein Sorting Signals Proteins 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 230000002238 attenuated effect Effects 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000002059 diagnostic imaging Methods 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000012285 ultrasound imaging Methods 0.000 description 2
- 206010025323 Lymphomas Diseases 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000017531 blood circulation Effects 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000001727 in vivo Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 210000000936 intestine Anatomy 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 210000004072 lung Anatomy 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 210000003205 muscle Anatomy 0.000 description 1
- 210000005036 nerve Anatomy 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 210000000496 pancreas Anatomy 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000000241 respiratory effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 210000002784 stomach Anatomy 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/54—Control of the diagnostic device
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
- A61B8/4444—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device related to the probe
- A61B8/4461—Features of the scanning mechanism, e.g. for moving the transducer within the housing of the probe
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
- A61B6/032—Transmission computed tomography [CT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0825—Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of the breast, e.g. mammography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/08—Detecting organic movements or changes, e.g. tumours, cysts, swellings
- A61B8/0833—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures
- A61B8/085—Detecting organic movements or changes, e.g. tumours, cysts, swellings involving detecting or locating foreign bodies or organic structures for locating body or organic structures, e.g. tumours, calculi, blood vessels, nodules
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/42—Details of probe positioning or probe attachment to the patient
- A61B8/4245—Details of probe positioning or probe attachment to the patient involving determining the position of the probe, e.g. with respect to an external reference frame or to the patient
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
- A61B8/4416—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device related to combined acquisition of different diagnostic modalities, e.g. combination of ultrasound and X-ray acquisitions
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
- A61B8/4444—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device related to the probe
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/44—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device
- A61B8/4483—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device characterised by features of the ultrasound transducer
- A61B8/4494—Constructional features of the ultrasonic, sonic or infrasonic diagnostic device characterised by features of the ultrasound transducer characterised by the arrangement of the transducer elements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
- A61B8/461—Displaying means of special interest
- A61B8/466—Displaying means of special interest adapted to display 3D data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/48—Diagnostic techniques
- A61B8/481—Diagnostic techniques involving the use of contrast agent, e.g. microbubbles introduced into the bloodstream
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/48—Diagnostic techniques
- A61B8/483—Diagnostic techniques involving the acquisition of a 3D volume of data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/48—Diagnostic techniques
- A61B8/488—Diagnostic techniques involving Doppler signals
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5207—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of raw data to produce diagnostic data, e.g. for generating an image
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/5223—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for extracting a diagnostic or physiological parameter from medical diagnostic data
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/5238—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
- A61B8/5246—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image combining images from the same or different imaging techniques, e.g. color Doppler and B-mode
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5215—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
- A61B8/5238—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
- A61B8/5261—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image combining images from different diagnostic modalities, e.g. ultrasound and X-ray
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/52—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/5269—Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving detection or reduction of artifacts
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/56—Details of data transmission or power supply
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/56—Details of data transmission or power supply
- A61B8/565—Details of data transmission or power supply involving data transmission via a network
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
- A61B8/48—Diagnostic techniques
- A61B8/485—Diagnostic techniques involving measuring strain or elastic properties
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10132—Ultrasound image
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Animal Behavior & Ethology (AREA)
- Radiology & Medical Imaging (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Vascular Medicine (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Graphics (AREA)
- General Engineering & Computer Science (AREA)
- High Energy & Nuclear Physics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Pulmonology (AREA)
- Hematology (AREA)
- Gynecology & Obstetrics (AREA)
- Physiology (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
说明书等中公开的实施方式涉及医用图像诊断装置、超声波诊断装置、医用图像***、以及拍摄控制方法。提供确定医用图像数据中的未拍摄的对象物区域的医用图像诊断装置、超声波诊断装置、医用图像***、以及拍摄控制方法。实施方式所涉及的医用图像诊断装置具备取得部和确定部。取得部取得对被检体的对象物进行拍摄而得到的医用图像、和与医用图像对应的位置信息。确定部使用所取得的医用图像和位置信息,确定对象物之中没有包含于医用图像的未拍摄的区域。
Description
相关申请的引用:
本申请以日本专利申请2019-179248(申请日:2019年9月30日)以及日本专利申请2020-157597(申请日:2020年9月18日)为基础,享受这些申请的优先权利益。本申请通过参考这些申请而包含同申请的全部内容。
技术领域
说明书等中公开的实施方式涉及医用图像诊断装置、超声波诊断装置、医用图像***、以及拍摄控制方法。
背景技术
存在生成被检体的体内组织被图像化而成的医用图像数据的医用图像诊断装置。作为医用图像诊断装置,可列举超声波诊断装置、X射线CT(计算机断层扫描(ComputedTomography))装置、MRI(磁共振成像(Magnetic Resonance Imaging))装置等。超声波诊断装置使超声波从超声波探头向被检体内发送,生成基于反射波的回波信号,通过图像处理而得到期望的超声波图像。X射线CT装置根据基于向被检体照射X射线而由X射线检测器检测到的X射线的电信号,生成被检体的轴向断层等的CT图像。MRI装置是在静磁场中配置被检体、基于施加给被检体的高频脉冲而生成被检体的内部信息作为MRI图像的装置。
在医用图像诊断装置所进行的图像取得中,有时仅被检体内的应拍摄的对象物(例如,脏器)的整体区域的一部分被影像化,应拍摄的整体区域的一部分数据从图像中缺失。若数据缺失的数据缺失区域没有显现在对象物区域中,则没什么问题,但有时数据缺失区域显现在对象物区域中。在数据缺失区域在对象物区域中显现的情况下,对象物区域中的数据缺失区域的部分成为未拍摄的对象物区域。在这样的情况下,还有以其他图像对数据缺失区域进行插补从而得到未拍摄的对象物区域的方法,但还会有不存在没有数据缺失区域的其他图像的情况、或数据缺失区域大而插补困难的情况。
发明内容
本发明要解决的课题是提供确定医用图像数据中的未拍摄的对象物区域的医用图像诊断装置、超声波诊断装置、医用图像***、以及拍摄控制方法。其中,由本说明书等中公开的实施方式解决的课题不限于上述课题。也可以将与后述的实施方式所示的各结构的各效果对应的课题定位成本说明书等中公开的实施方式所解决的其他课题。
实施方式所涉及的医用图像诊断装置具备取得部和确定部。取得部取得对被检体的对象物进行拍摄而得到的医用图像、和与医用图像对应的位置信息。确定部使用所取得的医用图像和位置信息,确定对象物之中没有包含于医用图像的未拍摄的区域。
根据上述结构的医用图像诊断装置,能够确定医用图像数据中的未拍摄的对象物区域。
附图说明
图1是表示实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置的结构的概略图。
图2是用于说明在实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置中超声波探头的位置信息的图。
图3是表示实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置的功能的框图。
图4的(A)~(G)是用于说明实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置中,由超声波探头进行连续拍摄的情况下产生数据缺失区域的原因的图。
图5的(A)、(B)是用于说明在实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置中,由超声波探头进行断续拍摄的情况下产生数据缺失区域的原因的图。
图6的(A)、(B)是表示在实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置中,被检体内的对象物和多个截面的超声波图像数据中包含的数据区域的概念的图。
图7是表示在实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置中,学习时的数据流程的一例的说明图。
图8是表示在实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置中,运用时的数据流程的一例的说明图。
图9是将实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置的第一动作例表示为流程图的图。
图10是用于说明在实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置中,用于对数据缺失所导致的未拍摄的对象物区域进行拍摄的超声波探头的体表位置以及姿势的决定方法的图。
图11的(A)~(C)是表示在实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置中,与数据缺失所导致的未拍摄的对象物区域相关的信息的显示例的图。
图12是将实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置的第二动作例表示为流程图的图。
图13是表示第二变形例所涉及的包含作为医用图像诊断装置的一例的超声波诊断装置在内的医用图像***的结构的概略图。
具体实施方式
以下,参考附图,针对医用图像诊断装置、超声波诊断装置、医用图像***、以及拍摄控制方法的实施方式详细地进行说明。
作为实施方式的医用图像诊断装置,可列举超声波诊断装置、X射线CT装置、MRI装置等。X射线CT装置具备拍摄装置和医用图像处理装置,在拍摄装置中向被检体照射X射线,从而由X射线检测器检测X射线来生成电信号,在医用图像处理装置中,基于所接收到的电信号而生成被检体的轴向断层等的CT图像。MRI装置具备拍摄装置和医用图像处理装置,在拍摄装置所形成的静磁场中配置被检体,在拍摄装置中向被检体施加高频脉冲而接收MR信号,在医用图像处理装置中基于MR信号而生成被检体的MRI图像。
以下,作为医用图像诊断装置而以超声波诊断装置为例进行说明,但并非限定于该情况。
1.超声波诊断装置
图1是表示实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置的结构的概略图。
图1表示实施方式所涉及的作为医用图像诊断装置的一例的超声波诊断装置1。超声波诊断装置1具备作为医用图像处理装置的装置主体10、作为拍摄装置的超声波探头30、和位置传感器40。另外,还有仅将装置主体10称为“超声波诊断装置”的情况,还有将超声波探头30与位置传感器40的至少一方、和装置主体10称为“超声波诊断装置”的情况。在以下的说明中,对超声波诊断装置1除了具有装置主体10之外还具备超声波探头30和位置传感器40双方的情况进行说明。
超声波诊断装置1的装置主体10具备收发电路11、B模式处理电路12、多普勒处理电路13、图像生成电路14、图像存储器15、网络接口16、处理电路17、主存储器18、输入接口19、和显示器20。另外,输入接口19和显示器20也可以在装置主体10的外部具备,或者也可以设置在超声波诊断装置1的外部。此外,电路11~14由专用集成电路(ASIC:ApplicationSpecific Integrated Circuit)等构成。但是,并非限定于该情况,电路11~14的功能的全部或者一部分也可以通过处理电路17执行计算机程序来实现。
收发电路11具有发送电路以及接收电路(省略图示)。收发电路11在处理电路17所进行的控制之下,对超声波的收发中的发送指向性和接收指向性进行控制。另外,对收发电路11设置于装置主体10的情况进行说明,但收发电路11也可以设置于超声波探头30,也可以设置于装置主体10以及超声波探头30这双方。另外,收发电路11是收发部的一例。
发送电路具有脉冲产生电路、发送延迟电路、以及脉冲器电路等,对超声波振子供应驱动信号。脉冲产生电路以规定的额定频率,反复产生用于形成发送超声波的额定脉冲。发送延迟电路对脉冲产生电路所产生的各额定脉冲给予为了对从超声波探头30的超声波振子产生的超声波以波束状进行集束来决定发送指向性而需要的延迟时间。此外,脉冲器电路在基于额定脉冲的定时,对超声波振子施加驱动脉冲。发送延迟电路使对各额定脉冲给予的延迟时间发生变化,从而任意地进行调整从压电振子面发送的超声波波束的发送方向。
接收电路具有放大器电路、A/D(模拟数字(Analog to Digital))转换器、以及加法器等,接受超声波振子所接收到的回波信号,对该回波信号进行各种处理而生成回波数据。放大器电路将回波信号按每个信道进行放大而进行增益校正处理。A/D转换器对增益校正后的回波信号进行A/D变换,对数字数据给予决定接收指向性所需的延迟时间。加法器进行由A/D转换器处理后的回波信号的加法处理,生成回波数据。通过加法器的加法处理,来自与回波信号的接收指向性相应的方向的反射成分被增强。
B模式处理电路12在处理电路17所进行的控制之下,从接收电路接受回波数据,对其进行对数放大以及包络线检波处理等,从而生成信号强度以亮度的明亮度来表现的数据(二维或者三维数据)。该数据一般来说被称为B模式数据。另外,B模式处理电路12是B模式处理部的一例。
另外,B模式处理电路12通过滤波处理使检波频率发生变化,从而能够改变影像化的频带。通过使用B模式处理电路12的滤波处理功能,能够执行对比度谐波成像(CHI:Contrast Harmonic Imaging)、组织谐波成像(THI:Tissue Harmonic Imaging)等谐波成像。即,B模式处理电路12能够从被注入了造影剂的被检体的反射波数据中,分离出以造影剂(微小气泡、气泡)为反射源的谐波成分的反射波数据(谐波数据或者分频波数据)、和以被检体内的组织为反射源的基波成分的反射波数据(基波数据)。B模式处理电路12还能够从谐波成分的反射波数据(接收信号)中,生成用于生成造影图像数据的B模式数据,还能够从基波成分的反射波数据(接收信号)中,生成用于生成基波(基础)图像数据的B模式数据。
此外,在使用B模式处理电路12的滤波处理功能的THI中,能够从被检体的反射波数据,分离出作为谐波成分的反射波数据(接收信号)的谐波数据或者分频波数据。并且,B模式处理电路12能够从谐波成分的反射波数据(接收信号)中,生成用于生成去除了噪声成分的组织图像数据的B模式数据。
进而,在进行CHI或THI的谐波成像时,B模式处理电路12能够通过与使用了上述的滤波处理的方法不同的方法,提取谐波成分。在谐波成像中,进行振幅调制(AM:AmplitudeModulation)法、相位调制(PM:Phase Modulation)法、或组合了AM法以及PM法的被称为AMPM法的影像法。在AM法、PM法以及AMPM法中,对同一扫描线多次进行振幅或相位不同的超声波发送。由此,收发电路11在各扫描线生成并输出多个反射波数据(接收信号)。并且,B模式处理电路12对各扫描线的多个反射波数据(接收信号)进行与调制法相应的加减法处理,从而提取谐波成分。并且,B模式处理电路12对谐波成分的反射波数据(接收信号)进行包络线检波处理等,生成B模式数据。
例如,在进行PM法的情况下,收发电路11通过处理电路17设定的扫描时序,例如(-1,1)那样,将使相位极性反转的同一振幅的超声波在各扫描线上发送2次。并且,收发电路11生成基于“-1”的发送的接收信号和基于“1”的发送的接收信号,B模式处理电路12对这两个接收信号进行相加。由此,基波成分被去除,生成主要残存二次谐波成分的信号。并且,B模式处理电路12对该信号进行包络线检波处理等,生成THI的B模式数据或CHI的B模式数据。
或者,例如,在THI中,使用接收信号中包含的二次谐波成分和差音成分进行影像化的方法被实用化。在使用了差音成分的影像化法中,例如,从超声波探头30发送将中心频率为“f1”的第一基波和中心频率为比“f1”大的“f2”的第二基波合成而得的合成波形的发送超声波。该合成波形是将相互的相位被调整的第一基波的波形和第二基波的波形合成而使得产生具有与二次谐波成分同一极性的差音成分的波形。收发电路11一边使相位反转,一边例如发送2次合成波形的发送超声波。在该情况下,例如,B模式处理电路12对两个接收信号进行相加,从而去除基波成分,提取了主要残存差音成分以及二次谐波成分的谐波成分之后,进行包络线检波处理等。
多普勒处理电路13在处理电路17所进行的控制之下,根据来自接收电路的回波数据对速度信息进行频率分析,生成针对多点提取了平均速度、方差、功率等移动体的移动信息的数据(二维或者三维数据)。该数据一般来说被称为多普勒数据。在此,移动体例如是血流、心壁等组织、造影剂。另外,多普勒处理电路13是多普勒处理部的一例。
图像生成电路14在处理电路17所进行的控制之下,基于超声波探头30所接收到的回波信号,生成以规定的亮度范围来表现的超声波图像作为图像数据。例如,图像生成电路14根据由B模式处理电路12生成的二维的B模式数据,生成以亮度表示反射波的强度的B模式图像作为超声波图像。此外,图像生成电路14根据由多普勒处理电路13生成的二维的多普勒数据,生成表示移动态信息的平均速度图像、方差图像、功率图像、或者作为它们的组合图像的彩色多普勒图像作为超声波图像。另外,图像生成电路14是图像生成部的一例。
在此,图像生成电路14一般而言将超声波扫描的扫描线信号串变换(扫描转换)为以电视等为代表的视频格式的扫描线信号串,生成显示用的超声波图像数据。具体而言,图像生成电路14根据超声波探头30的超声波的扫描方式进行坐标变换,从而生成显示用的超声波图像数据。此外,图像生成电路14除扫描转换以外,作为各种图像处理,例如使用扫描转换后的多个图像帧,进行再次生成亮度的平均值图像的图像处理(平滑化处理)、或在图像内使用微分滤波器的图像处理(边缘增强处理)等。此外,图像生成电路14对超声波图像数据合成各种参数的字符信息、刻度、身体标记等。
即,B模式数据以及多普勒数据是扫描转换处理前的超声波图像数据,图像生成电路14所生成的数据是扫描转换处理后的显示用的超声波图像数据。另外,B模式数据以及多普勒数据也被称为原始数据(Raw Data)。图像生成电路14根据扫描转换处理前的二维超声波图像数据,生成显示用的二维超声波图像数据。
图像存储器15包含二维存储器,所述二维存储器是按照每1帧在2轴方向上具备多个存储器单元并且具有多个帧相应量的该结构而成的存储器。作为图像存储器15的二维存储器在处理电路17的控制所导致的控制之下,将由图像生成电路14生成的1帧、或者多个帧的超声波图像作为二维图像数据来存储。另外,图像存储器15是存储部的一例。
进而,图像生成电路14对由B模式处理电路12生成的三维的B模式数据进行坐标变换,从而生成三维B模式图像数据。此外,图像生成电路14对由多普勒处理电路13生成的三维的多普勒数据进行坐标变换,从而生成三维多普勒图像数据。图像生成电路14生成“三维的B模式图像数据或三维多普勒图像数据”作为“三维超声波图像数据(体数据)”。
图像存储器15还有时包含三维存储器,所述三维存储器是在3轴方向(X轴、Y轴、以及Z轴方向)上具备多个存储器单元的存储器。作为图像存储器15的三维存储器在处理电路17的控制所导致的控制之下,存储由图像生成电路14生成的多个超声波图像作为体数据。
并且,图像生成电路14为了生成用于在显示器20中显示三维存储器中存储的体数据的各种二维图像数据,对体数据进行用于将体数据显示于二维显示器的处理,进行用于将三维数据三维地显示的处理。图像生成电路14进行体绘制(VR:Volume Rendering)处理、表面绘制(SR:Surface Rendering)处理、MIP(最大强度投影(Maximum IntensityProjection))处理、MPR(多平面重建(Multi Planer Reconstruction))处理等作为该处理。
网络接口16安装与网络的方式相应的各种信息通信用协议。网络接口16按照该各种协议,将超声波诊断装置1与外部的医用图像管理装置或医用图像处理装置等其他设备进行连接。对该连接,能够应用经由电子网络的电连接等。在此,电子网络意味着利用了电通信技术的信息通信网整体,除了无线/有线的医院主干的LAN(局域网(Local AreaNetwork))或互联网之外,还包含电话通信线路网、光纤通信网络、线缆通信网络以及卫星通信网络等。
此外,网络接口16也可以安装非接触无线通信用的各种协议。在该情况下,装置主体10能够不经由网络而与例如超声波探头30直接进行数据收发。另外,网络接口16是网络连接部的一例。
处理电路17除专用或者通用的CPU(中央处理单元(central processing unit))、MPU(微处理器单元(micro processor unit))、或者GPU(图形处理单元(GraphicsProcessing Unit))之外,还意味着ASIC以及可编程逻辑器件等。作为可编程逻辑器件,例如可列举简易可编程逻辑器件(SPLD:simple programmable logic device)、复杂可编程逻辑器件(CPLD:complex programmable logic device)、以及现场可编程门阵列(FPGA:field programmable gate array)等。
此外,处理电路17也可以由单一的电路构成,也可以由多个独立的电路要素的组合构成。在后者的情况下,主存储器18也可以按每个电路要素而个别地设置,单一的主存储器18也可以存储与多个电路要素的功能对应的程序。另外,处理电路17是处理部的一例。
主存储器18由RAM(随机存取存储器(random access memory))、闪速存储器(flash memory)等半导体存储器元件、硬盘、光盘等构成。主存储器18也可以由USB(通用串行总线(universal serial bus))存储器以及DVD(数字视盘(digital video disk))等可移动介质构成。主存储器18存储处理电路17中使用的各种处理程序(除应用程序之外,还包含OS(操作***(operating system))等)、程序的执行所需的数据。此外,在OS中,在显示器20相对于操作者的信息显示中多用图形,还能够包含能够通过输入接口19进行基础的操作的GUI(图形用户界面(graphical user interface))。另外,主存储器18是存储部的一例。
输入接口19包含能够由操作者操作的输入器件、和输入来自输入器件的信号的输入电路。输入器件由追踪球、开关、鼠标、键盘、通过对操作面进行触摸来进行输入操作的触摸板、将显示画面和触摸板一体化而成的触摸屏幕、使用了光学传感器的非接触输入器件、以及声音输入器件等实现。若由操作者操作输入器件,则输入电路生成与该操作相应的信号而输出至处理电路17。另外,输入接口19是输入部的一例。
显示器20例如由液晶显示器或OLED(有机发光二极管(Organic Light EmittingDiode))显示器等一般的显示输出装置构成。显示器20按照处理电路17的控制而显示各种信息。另外,显示器20是显示部的一例。
超声波诊断装置1的超声波探头30是在前面部具备多个微小的振子(压电元件)的拍摄装置。超声波探头30对被检体(例如,患者)内的对象物进行超声波的收发。各振子是电声转换元件,具有在发送时将电脉冲变换为超声波脉冲、还在接收时将反射波变换为电信号(接收信号)的功能。超声波探头30小型、轻量地构成,经由线缆(或者无线通信)而与装置主体10连接。
超声波探头30根据扫描方式的差异,被分为线型、凸阵型、以及扇型等种类。此外,超声波探头30根据阵列排列维度的差异,被分为在方位角方向上一维(1D)地排列了多个振子的1D阵列探头、和在方位角方向以及仰角方向上二维(2D)地排列了多个振子的2D阵列探头的种类。另外,1D阵列探头包含在仰角方向上排列了少数的振子的探头。
在此,在执行3D扫描即体扫描的情况下,利用具备线型、凸阵型、以及扇型等扫描方式的2D阵列探头作为超声波探头30。或者,在执行体扫描的情况下,利用具备线型、凸阵型、以及扇型等扫描方式且具备在仰角方向上机械地摆动的机构的1D探头作为超声波探头30。后者的探头也可以被称为机械4D探头。
位置传感器40检测超声波探头30的时间序列上的多个位置信息,并输出至装置主体10。作为位置传感器40,有安装于超声波探头30的类型的传感器、和与超声波探头30分体设置的类型的传感器。后者的传感器是光学式传感器,从多个位置拍摄作为测量对象的超声波探头30的特征点,以三角测量的原理检测超声波探头30的各位置。
此外,位置传感器40安装于超声波探头30,检测自身的位置信息,并输出至装置主体10。还能够将位置传感器40的位置信息视为超声波探头30的位置信息。超声波探头30的位置信息包含超声波探头30的位置(X,Y,Z)以及相对于各轴的倾斜角(姿势)。例如,磁场发送器(省略图示)依次发送3轴的磁场,并由位置传感器40依次接收将该磁场,从而能够检测到超声波探头30的姿势。
此外,位置传感器40也可以是所谓的9轴传感器,所述9轴传感器包含对三维空间中的3轴的角速度进行检测的3轴陀螺传感器、对三维空间中的3轴的加速度进行检测的3轴加速度传感器、对三维空间中的3轴的地磁进行检测的3轴地磁传感器之中的至少某一个。另外,位置传感器40并非必须的结构。
图2是用于说明超声波探头30的位置信息的图。
图2表示以超声波探头30为基准的正交的3轴方向,即U轴方向、V轴方向、W轴方向。U轴方向由振子的阵列方向、即方位角方向定义,V轴方向由深度方向、即U轴方向以及W轴方向的正交方向定义,W轴方向由仰角方向来定义。通过U轴方向、V轴方向、和W轴方向而定义位置、姿势的超声波探头30在配置有被检体的XYZ空间中,被任意地配置超声波探头30,被任意地移动操作。
接下来,针对超声波诊断装置1的功能进行说明。
图3是表示超声波诊断装置1的功能的框图。
处理电路17读出并执行被存储于主存储器18或者被直接编入至处理电路17内的计算机程序,从而实现取得功能171、推测功能172、确定功能173、输出控制功能174、以及移动控制功能175。以下,将功能171~175以软件的方式发挥作用的情况例举为例进行说明,但功能171~175的全部或者一部分也可以作为ASIC等电路等的功能而设置于超声波诊断装置1。此外,推测功能172和确定功能173的全部或者一部分也可以通过经由网络N而连接的外部装置来实现。
取得功能171包含如下功能:对收发电路11、B模式处理电路12、多普勒处理电路13、和图像生成电路14等进行控制,使用超声波探头30而使其执行被检体的对象物的拍摄,取得超声波图像数据作为医用图像数据。具体而言,取得功能171收集M模式图像数据、B模式图像数据、或多普勒图像数据等作为超声波图像数据。此外,取得功能171包含取得与超声波图像数据对应的位置信息(例如,超声波探头30的位置信息、以及基于超声波探头30的位置的截面的位置信息)的功能。
例如,取得功能171取得多个截面的超声波图像数据作为多个截面的医用图像数据。此外,取得功能171取得与多个截面的超声波图像数据分别对应的位置信息。以下,针对取得功能171取得多个截面的超声波图像数据的情况进行说明。另外,取得功能171是取得部的一例。
在此,由取得功能171取得的各截面的超声波图像数据包含影像化的数据区域、和未影像化而插补困难的缺失区域。数据区域意味着具有发送波能够到达的长度的超声波波束(栅)的范围。
图4的(A)~(G)是用于说明在超声波探头30进行连续拍摄的情况下产生缺失区域的原因的图。
图4的(A)表示在W轴的正方向上操作超声波探头30的情况下的理想的各数据区域P。在图4的(A)中,数据区域P大致均等地遍及对象物区域R的整体,不显现不存在数据区域P的数据缺失区域。例如,对象物是脏器,对象物区域是与脏器对应的脏器区域。在此,脏器是以构成动物的多细胞生物体的单位协同执行一定的功能的组织的集合体,例如包含脑、心脏、肺、肝脏、胰、胃、肠、血管、神经等。
图4的(B)表示相对于图4的(A),超声波探头30的向W轴的正方向的操作速度并非一定的情况下的各数据区域P。在图4的(B)中,在对象物区域R之中相邻的数据区域P之间比较空的地点上,显现不存在数据区域P的数据缺失区域。
图4的(C)表示相对于图4的(A),包含声阻抗的差较大的组织的情况下的各数据区域P。在图4的(C)中,在对象物区域R中的中央的V轴负方向侧的地点,显现不存在数据区域P的数据缺失区域。在声阻抗的差较大的组织中,数据区域P的超声波波束较大地衰减,因此穿过该组织的数据区域P的长度变短。
图4的(D)表示相对于图4的(A),在对应拍摄的对象物所对应的对象物区域R进行拍摄的中途中止了拍摄的情况下的各数据区域P。在图4的(D)中,在对象物区域R中W轴的正方向侧的地点上,显现不存在数据区域P的数据缺失区域。
图4的(E)表示相对于图4的(A),超声波探头30的操作中的姿势并非一定的情况下(VW轴在V-W面内旋转)的各数据区域P。在图4的(E)中,在对象物区域R中的相邻的数据区域P之间比较空的地点上,显现不存在数据区域P的数据缺失区域。
图4的(F)表示相对于图4的(A),超声波探头30的操作并非直线的情况下(W轴在U轴方向上发生变化)的各数据区域P。在图4的(F)中,在对象物区域R中的U轴的正方向侧且W轴的负方向侧方向的地点上,显现不存在数据区域P的数据缺失区域。
图4的(G)表示相对于图4的(A),超声波探头30的操作中的旋转角度并非一定的情况下(UW轴在U-W面内旋转)的各数据区域P。在图4的(G)中,在对象物区域R中的相邻的数据区域P之间比较空的地点上,显现不存在数据区域P的数据缺失区域。
在图4的(B)~(G)所示的各个情况下,与图4的(A)的情况相比,在对象物区域R中,显现不存在数据区域P的数据缺失区域。
图5的(A)、(B)是用于说明在由超声波探头30进行断续拍摄的情况下产生数据缺失区域的原因的图。
图5的(A)表示不包含声阻抗的差较大的组织的情况下的各数据区域P。图5的(B)表示相对于图5的(A),包含声阻抗的差较大的组织的情况下的各数据区域P。在声阻抗的差较大的组织中,数据区域P的超声波波束较大地衰减,因此穿过该组织的数据区域P的长度变短。
在图5的(B)所示的左右各自的情况下,与图5的(A)的情况相比,在对象物区域R中,显现变短的数据区域P的相应量的不存在数据区域P的数据缺失区域。由此,在对象物区域R中,显现未拍摄的对象物区域Q。另外,从对象物区域R去除了未拍摄的对象物区域Q的区域是拍摄完毕的对象物区域。也就是说,对象物区域R由未拍摄的对象物区域Q、和拍摄完毕的对象物区域构成。
另外,即使通过图4的(B)~(G)、图5的(B)的组合,也会复杂地显现数据缺失区域。其结果,在对象物区域R中,复杂地显现未拍摄的对象物区域。
返回到图3的说明,推测功能172包含如下功能:使用由取得功能171取得的多个超声波图像数据和位置信息,对被检体内的对象物形状和拍摄完毕的对象物区域进行推测。例如,推测功能172包含使用多个截面的超声波图像数据和它们的位置信息对被检体内的脏器形状和拍摄完毕的脏器区域进行推测的功能。另外,推测功能172是推测部的一例。
此外,推测功能172基于由位置传感器40取得的位置信息,将由取得功能171取得的超声波图像数据配置于作为三维存储器的图像存储器15。
图6的(A)、(B)是表示被检体内的对象物和多个截面的超声波图像数据中包含的数据区域P的概念的图。
图6的(A)是表示对作为被检体内的对象物的肝脏收发超声波而得到的、作为对象物区域R的肝脏区域R1的图。图6的(B)示出了对被检体的体表的多个位置抵接超声波探头30、对图6的(A)的肝脏从多个位置收发超声波的情况下的数据区域P。
如图6的(B)概念性所示,即使从肝脏R1的所有位置以所有角度发送超声波,也不能取得肝脏区域R1整体作为可影像化的数据区域P。在图6的(B)中,欠缺图6的(A)的灰色部分的部分是由于数据缺失而显现的未拍摄的对象物区域。数据缺失是由于使用图4的(A)~(G)以及图5的(A)、(B)说明过的原因而产生的。
因此,推测功能172基于被三维地配置的多个截面的超声波图像数据和它们的位置信息,进行推测被检体内的肝脏等的脏器形状的处理,对脏器形状和拍摄完毕的脏器区域进行推测。并且,后述的确定功能173确定从推测出的肝脏区域R1整体去除了推测出的拍摄完毕的脏器区域后的区域作为未拍摄的对象物区域。另外,未拍摄的对象物区域是对象物区域整体之中的基于数据区域P不足的数据缺失区域而不能影像化的部分,意味着在该检查内应继续拍摄的区域。
推测功能172也可以在被检体内的脏器形状的推测处理中使用例如将超声波图像数据和脏器形状建立关联而成的数据库。对于脏器形状,也可以与表示一般的脏器整体的形状的形状信息以及脏器名一起,还附带表示为了对脏器整体进行拍摄而应怎样移动超声波探头30的轨迹的信息、过去对成为对象的脏器进行拍摄时得到的各种图像、以及该图像的位置信息。此外,推测功能172也可以在被检体内的脏器形状的推测处理中使用机械学习。此外,也可以作为机械学习而使用利用了CNN(卷积神经网络)、卷积深度信念网络(CDBN:Convolutional Deep Belief Network)等多层的神经网络的深度学习。
以下,示出了推测功能172使用包含神经网络Na的深度学习,根据超声波图像数据中包含的部分的脏器形状,推测该超声波图像数据中包含的整体的脏器形状的情况的例子。
图7是表示学习时的数据流程的一例的说明图。
推测功能172通过被输入多个训练数据进行学习,从而逐次地更新参数数据Pa。训练数据包括作为训练输入数据的超声波图像数据(例如,构成体数据的任意截面数据)S1、S2、S3、……和与各任意截面数据对应的脏器形状T1、T2、T3、……的组。超声波图像数据S1、S2、S3,……构成训练输入数据组Ba。脏器形状T1、T2、T3、……构成训练输出数据组Ca。
推测功能172进行所谓的学习,该所谓的学习是,在每次被输入训练数据时,逐渐更新参数数据Pa,以使利用神经网络Na处理超声波图像数据S1、S2、S3、……后的结果接近于脏器形状T1、T2、T3、……。一般来说,若参数数据Pa的变化比例收敛于阈值以内,则判断为学习结束。以下,将学习后的参数数据Pa特别地称为学习完毕参数数据Pa′。
另外,注意应使训练输入数据的种类和图8所示的运用时的输入数据的种类一致。例如,在运用时的输入数据为超声波图像数据的情况下,学习时的训练输入数据组Ba也被设为超声波图像数据。
此外,“超声波图像数据”包含超声波诊断装置1所生成的原始数据。即,神经网络Na的输入数据也可以是扫描转换前的原始数据。
图8是表示运用时的数据流程的一例的说明图。
在运用时,推测功能172输入成为诊断对象的对象物的超声波图像数据Sa,使用学习完毕参数数据Pa′,输出超声波图像数据中包含的脏器形状Ta。在输出脏器形状Ta时,也可以与脏器整体的形状以及脏器名一起,输出当前的超声波探头的位置或角度、用于对未拍摄的对象物区域进行拍摄的、即对脏器整体进行拍摄之前的超声波探头30的运动、脏器整体中的各拍摄图像的位置的信息中的某一个。
另外,神经网络Na和学习完毕参数数据Pa′构成学习完毕模型19a。神经网络Na以程序的形态存储于主存储器18。学习完毕参数数据Pa′也可以存储于主存储器18,也可以存储于经由网络N而与超声波诊断装置1连接的存储介质中。在该情况下,由处理电路17的处理器实现的推测功能172从主存储器18读出并执行学习完毕模型19a,从而生成超声波图像数据中包含的脏器形状的信息。另外,学习完毕模型19a也可以由ASIC(专用集成电路(Application Specific Integrated Circuit))、FPGA(现场可编程门阵列(FieldProgrammable Gate Array))等集成电路构筑。
另外,为了使推测功能172的判断精度提高,作为输入数据,除了超声波图像数据之外,也可以使用补充信息,所述补充信息包括拍摄对象的身高、体重、已拍摄的其他医用设备(modality)也含有的图像数据或小工具(gadget)的代表模型数据中的至少一个。
在该情况下,在学习时,作为训练输入数据的超声波图像数据S1、S2、S3、……的各自的被检体的补充信息也作为训练输入数据而输入至神经网络Na。在运用时,推测功能172针对从主存储器18读出的学习完毕模型19a,与成为诊断对象的对象物的超声波图像数据Ba一同地,输入具有对象物的被检体的补充信息,从而输出超声波图像数据中包含的脏器形状Ta。通过作为输入数据而使用超声波图像数据和被检体的补充信息,从而能够生成进行了与被检体的类型相应的学习而成的学习完毕参数数据Pa′,所以与仅将超声波图像数据作为输入数据的情况相比,能够使推测精度提高。
返回到图3的说明,确定功能173包含如下功能:使用由取得功能171取得的多个截面的超声波图像数据和位置信息,确定对象物之中没有包含于多个截面的超声波图像数据中的未拍摄的对象物区域。或者,确定功能173包含基于由推测功能172推测的对象物形状(例如,脏器形状)和拍摄完毕的对象物区域(例如,脏器区域)确定未拍摄的对象物区域(例如,未拍摄的脏器区域)的功能。也就是说,确定功能173对超声波图像数据中包含的拍摄的脏器形状与推定的脏器形状三维地进行比较,确定脏器区域中的数据缺失引起的未拍摄的脏器区域。另外,确定功能173是确定部的一例。
输出控制功能174包含将由确定功能173确定的未拍摄的对象物区域的三维的信息、以及/或者用于对未拍摄的对象物区域进行拍摄的信息输出至处理电路17的外部的功能。例如,输出控制功能174包含显示控制功能71、存储控制功能72、和发送控制功能73。另外,输出控制功能174包含显示控制功能71、存储控制功能72、和发送控制功能73之中的至少一个即可。
显示控制功能71包含如下功能:在将取得功能171所取得的超声波图像数据显示于显示器20,并且由确定功能173确定了未拍摄的对象物区域的情况下,将与未拍摄的对象物区域相关的信息显示于显示器20。例如,与未拍摄的对象物区域相关的信息是相对于脏器整体的未拍摄的脏器区域(位置·大小)的显示,是为了对该未拍摄的脏器区域进行拍摄所需的体表上的超声波探头30的位置(作为标识而示出)或角度·拍摄时的压力。在进行与未拍摄的脏器区域相关的显示时能够一起显示警报。还有体表上的探头的位置直接被投影到体表的情况。另外,显示控制功能71是显示控制部的一例。
存储控制功能72包含在由确定功能173确定了未拍摄的对象物区域的情况下,将用于拍摄的信息与未拍摄的对象物区域的三维的信息一起存储于图像存储器15等存储介质的功能。另外,存储控制功能72是存储控制部的一例。
发送控制功能73包含如下功能:在由确定功能173确定了未拍摄的对象物区域的情况下,将用于拍摄的信息与未拍摄的对象物区域的三维的信息一起经由网络接口16发送至医用图像处理装置10的外部装置(例如,图13所示的医用图像显示装置80)。另外,发送控制功能73是发送控制部的一例。
移动控制功能175包含如下功能:在由确定功能173确定了未拍摄的对象物区域的情况下,对机器人臂等外部的装置进行控制,使作为拍摄装置的超声波探头30移动(包含滑动移动、旋转移动、探头姿势的角度、探头压力变更)。超声波探头30的移动操作也可以由持握超声波探头30的操作者操作,但还有时通过以对被检体的呼吸性等的运动进行校正为目的而进行的自动扫描、或以减轻操作者所进行的超声波探头30的操作为目的而进行的机器人臂扫描来进行超声波探头30的移动操作。另外,移动控制功能175是移动控制部的一例。
接下来,针对超声波诊断装置1的动作,使用图9以及图12进行说明。
图9是将超声波诊断装置1的第一动作例表示为流程图的图。在图9中,对“ST”赋予数字而成的标号表示流程图的各步骤。另外,在图9中,使用应拍摄的对象物为脏器的情况进行说明。
取得功能171对收发电路11、B模式处理电路12、多普勒处理电路13、和图像生成电路14等进行控制,执行使用了超声波探头30的被检体的对象物的超声波拍摄,取得超声波图像数据(步骤ST1)。显示控制功能71将由步骤ST1取得的超声波图像数据作为超声波图像而显示于显示器20(步骤ST2)。
此外,取得功能171基于超声波图像数据的位置信息,使由步骤ST1取得的超声波图像数据三维配置并存储于图像存储器15的三维存储器内(步骤ST3)。在此,对影像化的数据所存在的数据区域进行匹配从而能够检测相对的超声波探头30的位置以及姿势的转变,所以位置传感器40并非必须的结构。另外,显示控制功能71也可以将超声波图像数据的三维配置显示于显示器20。由此,进行拍摄的操作者能够视觉辨认在体内、特别是体干部拍摄到哪里为止的范围。
取得功能171判断是否结束超声波拍摄(步骤ST4)。取得功能171也可以基于由操作者经由输入接口19输入的结束指示,判断为结束超声波拍摄,也可以在超声波探头30从被检体的体表离开而空中放置后经过一定时间之后,判断为结束超声波拍摄。例如,根据超声波探头30的位置信息判断超声波探头30的空中放置即可。
在步骤ST4的判断中判断为“否”、即不结束超声波拍摄而进行对于下一断层的超声波拍摄的情况下,取得功能171对收发电路11、B模式处理电路12、多普勒处理电路13、和图像生成电路14等进行控制,执行使用了超声波探头30的超声波拍摄,针对下一断层取得超声波图像数据(步骤ST1)。由于步骤ST4的“否”而反复进行步骤ST1~ST3的集合,从而在图像存储器15的三维存储器内,配置多个截面的超声波图像数据(图6的(B)所图示)。
另一方面,在步骤ST4的判断中判断为“是”、即结束超声波拍摄的情况下,推测功能172使用被配置于图像存储器15的三维存储器的1个或者多个截面的超声波图像数据,对被检体内的对象脏器整体的脏器形状、和拍摄完毕的脏器区域进行推测(步骤ST5)。确定功能173基于由步骤ST3三维地配置的1个或者多个截面的超声波图像数据中包含的部分的脏器形状、和由步骤ST5推测的整体的脏器形状,确定三维的未拍摄的脏器区域(步骤ST6)。
确定功能173从三维地配置的多个截面的超声波图像数据提取脏器轮廓,对提取到的脏器轮廓三维地进行配置,在此基础上,与脏器整体的3D模型进行对照。并且,确定功能173将从3D模型的脏器轮廓之中去除了已经存在的数据区域中包含的脏器轮廓之后的区域确定为未拍摄的脏器区域。另外,也可以通过从同一被检体(同一患者)事先拍摄的3D-CT图像数据等体数据中取得脏器轮廓,从而生成3D模型,也可以使用表示一般的脏器形状的3D模型。
确定功能173判断是否存在未拍摄的脏器区域(步骤ST7)。在步骤ST7的判断中判断为“是”、即存在未拍摄的脏器区域的情况下,显示控制功能71为了操作者而使显示器20显示与未拍摄的脏器区域相关的信息(步骤ST8)。与未拍摄的脏器区域相关的信息也可以是被决定为对未拍摄的脏器区域进行填充的超声波波束的范围(后述的显示例(1)),也可以包含用于对未拍摄的脏器区域进行拍摄的超声波探头30的体表位置以及姿势(后述的显示例(2)~(4))等。此外,显示控制功能71显示用于对未拍摄的对象物区域进行拍摄的信息,从而显示与未拍摄的对象物区域相关的信息,以及/或者三维地显示未拍摄的对象物区域。
图10是用于说明用于对数据缺失所导致的未拍摄的脏器区域进行拍摄的超声波探头30的体表位置以及姿势的决定方法的图。
图10表示图5的(B)所示的未拍摄的对象物区域Q。显示控制功能71在超声波拍摄的情况下,也可以选择能够尽量在浅部对未拍摄的对象物区域Q进行拍摄的体表位置以及姿势,且是拍摄范围、拍摄位置、拍摄角度与已经存在的数据区域P相似的体表位置以及姿势(例如图10的两端的两个探头位置)。也可以由显示控制功能71选择为了对未拍摄的对象物区域进行拍摄而显示的超声波探头30的体表位置以及姿势。另外,所选择的体表位置以及姿势也可以是一个也可以是多个。此外,在被检体内的声阻抗的差较大的部位(例如,骨等)的位置为已知的情况下,还能够选择在根据体表位置以及姿势而决定的截面上不存在声阻抗的差较大的部位的体表位置以及姿势,还能够错开体表位置以及姿势从而调整体表位置以及姿势。
接着表示与未拍摄的对象物区域相关的信息的显示例(1)~(4)。
(1)针对3D模型上的未拍摄的对象物区域(图6的(B)所图示),显示被决定为填充未拍摄的对象物区域的超声波波束的范围。
(2)对被检体投影用于对未拍摄的对象物区域进行拍摄的超声波探头30的探头标记并进行显示。
(3)在被检体的3D模型上,显示用于对未拍摄的对象物区域进行拍摄的超声波探头30的探头标记。
(4)对超声波探头30本身安装LED灯等,利用该灯而显示移动以及旋转方向。
图11的(A)~(C)是表示与数据缺失所导致的未拍摄的对象物区域相关的信息的显示例的图。
图11的(A)表示上述显示例(1)。图11的(B)表示上述显示例(2)。图11的(C)表示上述显示例(3)。在图11的(A)中,以较粗的线形成的梯形的上底(两个底边之中较短的边)相当于体表位置。在图11的(B)中,标记M1是被投影到被检体的体表的探头标记,标记M2是被投影到被检体的体表的、安装于超声波探头30的一侧的侧面的标识器的标记(marker)。在图11的(C)中,标记M1是被显示于显示器20的3D模型上的探头标记,标记M2是被显示于显示器20的3D模型上的、安装于超声波探头30的一侧的侧面的标识器的标记。
另外,也可以对被检体的体表,与标记M1、M2一起投影未拍摄的对象物区域。根据包含拍摄完毕的对象物区域的多个超声波图像数据和它们的位置信息来求取未拍摄的对象物区域的位置。这是因为,能够利用包含拍摄完毕的对象物区域的多个超声波图像数据和它们的位置信息,求得对象物区域整体的位置。
操作者确认由步骤ST8显示的、与未拍摄的对象物区域相关的信息,根据需要而继续检查。具体而言,操作者在与显示于显示器20的被检体的体表位置(梯形的上底)对应的被检体的体表位置上按压超声波探头30的前端部。或者,操作者将超声波探头30的前端部向标记M1(图11的(B)所图示)按压以使标识器与被投影到被检体的体表的标记M2(图11的(B)所图示)一致。或者,操作者在显示于显示器20的被检体的体表位置中,将超声波探头30的前端部向标记M1(图11的(C)所图示)按压以使标识器与标记M2(图11的(C)所图示)一致。操作者对超声波探头30进行按压以使安装于超声波探头30的标识器对准,从而能够对准超声波探头30的旋转方向的位置。
此外,还能够在被检体的3D模型上,显示用于对未拍摄的对象物区域进行拍摄的探头模型,针对探头模型,以箭头显示应使超声波探头30移动以及旋转的方向。另外,也可以在探头模型上,与箭头一起显示未拍摄的对象物区域。
返回至图9的说明,在步骤ST7的判断中判断为“否”、即不存在未拍摄的脏器区域的情况下,检查结束。
如以上那样,根据超声波诊断装置1的第一动作例,在由于拍摄的不足而产生了数据缺失的情况下,能够在拍摄结束后,催促操作者需要针对数据缺失引起的未拍摄的对象物区域追加实施拍摄的情况。此外,也能够向操作者提示与未拍摄的对象物区域相关的信息。例如,作为与未拍摄的对象物区域相关的信息,能够显示未拍摄的对象物区域本身,也能够显示从被检体的体表上以怎样的位置和角度抵接超声波探头30即可的情况。进而,不会为了填充未拍摄的对象物区域而进行基于其他图像的插补。由此,能够避免在检查后没有被检体之后判断为针对未拍摄的对象物区域应实施追加的拍摄的状况。
图12是将超声波诊断装置1的第二动作例表示为流程图的图。在图12中,对“ST”赋予了数字而成的标号表示流程图的各步骤。超声波诊断装置1的第二动作例与超声波诊断装置1的第一动作例不同,是逐次确定未拍摄的对象物区域的动作例。另外,在图12中,使用应拍摄的对象物为脏器的情况进行说明。
在图12中,对与图9所示的步骤相同的步骤赋予同一标号而省略说明。
推测功能172与步骤ST5(图9所图示)同样,使用配置于图像存储器15的三维存储器中的1个或者多个截面的超声波图像数据,对被检体内的对象脏器整体的脏器形状、和拍摄完毕的脏器区域进行推测(步骤ST15)。确定功能173与步骤ST6(图9所图示)同样,基于由步骤ST3三维地配置的1个或者多个截面的超声波图像数据中包含的部分的脏器形状、和由步骤ST5推测的整体的脏器形状,确定三维的未拍摄的脏器区域(步骤ST16)。
显示控制功能71判断未拍摄的脏器区域的体积或轮廓相对于根据由步骤ST15推测的整体的脏器形状而求得的体积或轮廓的比例是否为阈值(例如,20%)以下(步骤ST17)。在通过步骤ST17的判断而判断为“是”、即未拍摄的脏器区域的体积或轮廓的比例为阈值以下的情况下,显示控制功能71使显示器显示数据缺失少而数据充分的情况(步骤ST18)。
另一方面,在通过步骤ST17的判断而判断为“否”、即未拍摄的脏器区域的体积的比例超过阈值的情况下,显示控制功能71与步骤ST8(图9所图示)同样,使显示器对操作者显示与未拍摄的脏器区域相关的信息(步骤ST19)。
如以上那样,根据超声波诊断装置1的第二动作例,在拍摄中能够实时地向操作者提示未拍摄的对象物区域的体积或轮廓相对于根据所推测的整体的对象物形状而求得的体积或轮廓的比例或其位置以及范围。由此,操作者能够一边确认未拍摄的对象物区域的比例一边进行拍摄,因此能够避免在检查后而没有被检体之后针对未拍摄的对象物区域判断为应实施追加的拍摄的状况。
另外,针对拍摄的不足所导致的数据缺失进行了说明,但并非限定于该情况。例如,针对即使在数据中没有缺失但在超声波图像数据上存在伪像(artifact)而不能视觉辨认应视觉辨认的组织的一部分的情况,也能够应用。在该情况下,能够检测超声波图像数据上的伪像部分,将其设为数据缺失区域。
此外,在确定了未拍摄的对象物区域之后,还能够将假设已对未拍摄的对象物区域进行了拍摄的情况下的虚拟的超声波图像数据作为样板来显示。虚拟的超声波图像数据也可以是将已经存在的数据区域之中的与未拍摄的对象物区域接近的位置的像素值彼此进行合成而生成的,也可以是在已经有CT图像的体数据等的情况下根据该体数据而生成的MPR图像。
2.第一变形例
由超声波探头30拍摄的被检体的对象物也可以是非正常的对象物。例如,被拍摄的被检体的对象物也可以是包含肿瘤的对象物。在该情况下,推测功能172使用被拍摄的多个截面的超声波图像数据和它们的位置信息,基于同一被检体的过去的医用图像数据(例如,超声波图像数据),对同一被检体内的对象物形状和拍摄完毕的对象物区域进行推测。并且,确定功能173基于由推测功能172推测的对象物形状和拍摄完毕的对象物区域,确定未拍摄的对象物区域。确定功能173能够基于过去的医用图像数据而提取肿瘤的位置,能够基于被拍摄的多个截面的超声波图像数据的位置信息而确定数据区域的位置。
由此,在未拍摄肿瘤部分的情况下,输出控制功能174能够将由确定功能173确定的、包含肿瘤的未拍摄的对象物区域的三维的信息、或者用于对包含肿瘤的未拍摄的对象物区域进行拍摄的信息输出至处理电路17的外部。
另一方面,在拍摄完毕肿瘤部分的情况下,确定功能173判断拍摄完毕的对象物区域的肿瘤中的数据缺失的程度。在判断为肿瘤中的数据缺失的程度为阈值以上的情况下,输出控制功能174将用于对拍摄完毕的对象物区域的肿瘤进行拍摄的信息输出至处理电路17的外部。用于对肿瘤进行拍摄的信息的显示例和上述“与未拍摄的对象物区域相关的信息的显示例(1)~(4)”同样。由此,能够对操作者催促对肿瘤的以较细的间隔的再拍摄或从适合的方向的再拍摄。另一方面,在判断为肿瘤中的数据缺失的程度小于阈值,肿瘤所涉及的数据充分的情况下,输出控制功能174允许超声波拍摄的结束。
3.第二变形例
说明输出控制功能174的发送控制功能73将由确定功能173确定的未拍摄的对象物区域的三维的信息、以及/或者用于对未拍摄的对象物区域进行拍摄的信息发送至超声波诊断装置1的外部装置的情况。
图13是表示第二变形例所涉及的包含作为医用图像诊断装置的一例的超声波诊断装置在内的医用图像***的结构的概略图。
图13表示包含作为医用图像诊断装置的超声波诊断装置1的医用图像***S。医用图像***S包含上述的超声波诊断装置1、和作为医用图像处理装置的医用图像显示装置80。医用图像显示装置80是对医用图像数据施加各种图像处理的工作站、或平板终端等便携型信息处理终端等,经由网络N以能够通信的方式连接于超声波诊断装置1。
医用图像显示装置80具备网络接口86、处理电路87、存储器88、输入接口89、和显示器90。网络接口86、处理电路87、存储器88、输入接口89、和显示器90分别具备与图1所示的网络接口16、处理电路17、主存储器18、输入接口19、和显示器20相同的结构,从而省略说明。
处理电路87读出并执行被存储于存储器88的、或者直接被编入至处理电路87内的计算机程序,从而实现显示控制功能71A。以下,举、例举功能71A以软件的方式发挥作用的情况来进行说明,但功能71A的全部或者一部分也可以作为ASIC等电路等的功能而设置于医用图像显示装置80。
显示控制功能71A包含如下功能:在接收由超声波诊断装置1的取得功能171取得的超声波图像数据而显示于显示器90、并且由超声波诊断装置1的确定功能173确定了未拍摄的对象物区域的情况下,接收与未拍摄的对象物区域相关的信息而显示于显示器90。此外,显示控制功能71A还能够生成3D全息图像数据(可立体视觉的图像数据),使其显示于作为显示器90的3D全息显示器,投影到被检者的体表。
通过图13所示的结构,作为超声波诊断装置1的外部装置的医用图像显示装置80能够显示未拍摄的对象物区域的三维的信息、以及/或者用于对未拍摄的对象物区域进行拍摄的信息。
根据以上说明的至少一个实施方式,能够确定医用图像数据中的未拍摄的对象物区域。此外,通过减少拍摄的不足,还能够实现对操作者间差异的缩小或效率的提高。
另外,取得功能171是取得部的一例。推测功能172是推测部的一例。确定功能173是确定部的一例。输出控制功能174是输出控制部的一例。移动控制功能175是移动控制部的一例。显示控制功能71是显示控制部的一例。存储控制功能72是存储控制部的一例。发送控制功能73是发送控制部的一例。
此外,在上述的实施方式中主要说明了将被检体内的脏器作为对象,确定拍摄完毕的脏器区域、以及未拍摄的脏器区域的情况。但是,脏器只是对象物的一例,也可以将脏器以外的被检体内的对象物设为对象而进行同样的确定。例如,也可以代替脏器而将***至被检体中的支架等手术器件、肿瘤、淋巴瘤等病变部位、或者肌肉的层等作为对象物。有时对这些扫描的对象物的形状作为统称而称为“对象物形状”,将拍摄完毕的区域称为“拍摄完毕的对象物区域”,将未拍摄的区域称为“未拍摄的对象物区域”。
另外,说明了一些实施方式,但这些实施方式是作为例子来提示的,并非意图限定发明的范围。这些新的实施方式能够以其他各种方式来实施,能够在不脱离发明的主旨的范围中,进行各种省略、置换、变更、实施方式彼此的组合。这些实施方式或其变形包含于发明的范围或主旨中,并且包含于权利要求书所记载的发明及其均等的范围内。
Claims (16)
1.一种医用图像诊断装置,其中,具有:
取得部,取得对被检体的对象物进行拍摄而得到的医用图像、和与所述医用图像对应的位置信息;以及
确定部,使用所取得的所述医用图像和所述位置信息,确定所述对象物之中没有包含于所述医用图像的未拍摄的区域。
2.如权利要求1所述的医用图像诊断装置,其中,
还具有显示控制部,在确定了所述未拍摄的区域的情况下,所述显示控制部显示与所述未拍摄的区域相关的信息。
3.如权利要求2所述的医用图像诊断装置,其中,
所述显示控制部在拍摄的结束后,显示与所述未拍摄的区域相关的信息。
4.如权利要求2所述的医用图像诊断装置,其中,
所述显示控制部在拍摄中,显示与所述未拍摄的区域相关的信息。
5.如权利要求2至4的任一项所述的医用图像诊断装置,其中,
所述显示控制部三维地显示所述未拍摄的区域,或者显示用于对所述未拍摄的区域进行拍摄的信息,从而显示与所述未拍摄的区域相关的信息。
6.如权利要求2至4的任一项所述的医用图像诊断装置,其中,
作为与所述未拍摄的区域相关的信息,所述显示控制部对所述被检体投影所述未拍摄的区域和用于对该区域进行拍摄的位置从而来进行显示。
7.如权利要求2至4的任一项所述的医用图像诊断装置,其中,
作为与所述未拍摄的区域相关的信息,所述显示控制部在三维模型中显示所述未拍摄的区域和用于对该区域进行拍摄的位置。
8.如权利要求1至7的任一项所述的医用图像诊断装置,其中,
还具有推测部,
所述取得部取得多个医用图像、和与所述多个医用图像分别对应的位置信息,
所述推测部使用所取得的所述多个医用图像和所述位置信息,对所述被检体的对象物形状、和所述对象物之中包含于所述多个医用图像的拍摄完毕的区域进行推测,
所述确定部基于所推测的所述对象物形状和所述拍摄完毕的区域,确定所述未拍摄的区域。
9.如权利要求1所述的医用图像诊断装置,其中,
还具有移动控制部,在由所述确定部确定了所述未拍摄的区域的情况下,所述移动控制部使拍摄装置进一步移动。
10.如权利要求1至9的任一项所述的医用图像诊断装置,其中,
还具有存储控制部和发送控制部之中的至少一方,
所述存储控制部将用于拍摄的信息与所述未拍摄的区域的三维的信息一起存储至存储介质,所述发送控制部将用于拍摄的信息与所述未拍摄的区域的三维的信息一起发送至装置外。
11.一种超声波诊断装置,其中,具有:
取得部,取得利用超声波探头的扫描对被检体的对象物进行拍摄而得到的多个超声波图像、和与所述多个超声波图像分别对应的所述超声波探头的位置信息;以及
确定部,使用所取得的所述多个超声波图像和所述位置信息,确定所述对象物之中没有包含于所述多个超声波图像的未拍摄的区域。
12.如权利要求11所述的超声波诊断装置,其中,
还具有推测部,
所述推测部使用所取得的所述多个超声波图像和所述位置信息,对所述被检体的对象物形状、和所述对象物之中包含于所述多个超声波图像的拍摄完毕的区域进行推测,
所述确定部基于所推测的所述对象物形状和所述拍摄完毕的区域,确定所述未拍摄的区域。
13.一种医用图像***,通过医用图像诊断装置和医用图像处理装置经由网络以能够通信的方式连接而成,其中,所述医用图像***具有:
取得部,取得对被检体的对象物进行拍摄而得到的医用图像、和与所述医用图像对应的位置信息;以及
确定部,使用所取得的所述医用图像和所述位置信息,确定所述对象物之中没有包含于所述医用图像的未拍摄的区域。
14.如权利要求13所述的医用图像***,其中,
还具有推测部,
所述取得部取得多个医用图像、和与所述多个医用图像分别对应的位置信息,
所述推测部使用所取得的所述多个医用图像和所述位置信息,对所述被检体的对象物形状、和所述对象物之中包含于所述多个医用图像的拍摄完毕的区域进行推测,
所述确定部基于所推测的所述对象物形状和所述拍摄完毕的区域,确定所述未拍摄的区域。
15.一种拍摄控制方法,其中,
取得对被检体的对象物进行拍摄而得到的医用图像、和与所述医用图像对应的位置信息;以及
使用所取得的所述医用图像和所述位置信息,确定所述对象物之中没有包含于所述医用图像的未拍摄的区域。
16.如权利要求15所述的拍摄控制方法,其中,
取得多个医用图像、和与所述多个医用图像分别对应的位置信息;
使用所取得的所述多个医用图像和所述位置信息,对所述被检体的对象物形状、和所述对象物之中包含于所述多个医用图像的拍摄完毕的区域进行推测;
基于所推测的所述对象物形状和所述拍摄完毕的区域,确定所述未拍摄的区域。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019179248 | 2019-09-30 | ||
JP2019-179248 | 2019-09-30 | ||
JP2020-157597 | 2020-09-18 | ||
JP2020157597A JP2021053379A (ja) | 2019-09-30 | 2020-09-18 | 医用画像診断装置、超音波診断装置、医用画像システム、及び撮像制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112568936A true CN112568936A (zh) | 2021-03-30 |
CN112568936B CN112568936B (zh) | 2024-07-26 |
Family
ID=
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000053095A1 (fr) * | 1999-03-05 | 2000-09-14 | Hitachi Medical Corporation | Dispositif et procede d'imagerie ultrasonique |
CN101164498A (zh) * | 2006-05-05 | 2008-04-23 | 西门子公司 | 用于产生医学图像的方法和医学图像拍摄*** |
CN102905623A (zh) * | 2011-05-26 | 2013-01-30 | 株式会社东芝 | 超声波诊断装置 |
CN103239253A (zh) * | 2012-02-14 | 2013-08-14 | 株式会社东芝 | 医用图像诊断装置 |
CN104219997A (zh) * | 2012-05-22 | 2014-12-17 | 株式会社东芝 | 医用图像诊断装置以及图像显示装置 |
US20150297177A1 (en) * | 2014-04-17 | 2015-10-22 | The Johns Hopkins University | Robot assisted ultrasound system |
US20160073974A1 (en) * | 2013-05-28 | 2016-03-17 | Kabushiki Kaisha Toshiba | Medical image diagnosis apparatus and control method |
CN105939671A (zh) * | 2014-01-28 | 2016-09-14 | 皇家飞利浦有限公司 | 用于利用单-或双-平面实时成像的多平面采集的超声***以及其操作的方法 |
JP2017202310A (ja) * | 2016-05-09 | 2017-11-16 | 東芝メディカルシステムズ株式会社 | 医用画像撮像装置及び方法 |
JP2019048211A (ja) * | 2018-12-27 | 2019-03-28 | キヤノン株式会社 | 超音波画像診断システム、及びその制御方法 |
CN109688938A (zh) * | 2016-09-12 | 2019-04-26 | 富士胶片株式会社 | 超声波诊断***及超声波诊断***的控制方法 |
WO2019148154A1 (en) * | 2018-01-29 | 2019-08-01 | Lang Philipp K | Augmented reality guidance for orthopedic and other surgical procedures |
JP2019130223A (ja) * | 2018-02-02 | 2019-08-08 | キヤノンメディカルシステムズ株式会社 | 医用画像診断装置及びx線照射制御装置 |
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000053095A1 (fr) * | 1999-03-05 | 2000-09-14 | Hitachi Medical Corporation | Dispositif et procede d'imagerie ultrasonique |
CN101164498A (zh) * | 2006-05-05 | 2008-04-23 | 西门子公司 | 用于产生医学图像的方法和医学图像拍摄*** |
CN102905623A (zh) * | 2011-05-26 | 2013-01-30 | 株式会社东芝 | 超声波诊断装置 |
CN103239253A (zh) * | 2012-02-14 | 2013-08-14 | 株式会社东芝 | 医用图像诊断装置 |
CN104219997A (zh) * | 2012-05-22 | 2014-12-17 | 株式会社东芝 | 医用图像诊断装置以及图像显示装置 |
US20160073974A1 (en) * | 2013-05-28 | 2016-03-17 | Kabushiki Kaisha Toshiba | Medical image diagnosis apparatus and control method |
CN105939671A (zh) * | 2014-01-28 | 2016-09-14 | 皇家飞利浦有限公司 | 用于利用单-或双-平面实时成像的多平面采集的超声***以及其操作的方法 |
US20150297177A1 (en) * | 2014-04-17 | 2015-10-22 | The Johns Hopkins University | Robot assisted ultrasound system |
JP2017202310A (ja) * | 2016-05-09 | 2017-11-16 | 東芝メディカルシステムズ株式会社 | 医用画像撮像装置及び方法 |
CN109688938A (zh) * | 2016-09-12 | 2019-04-26 | 富士胶片株式会社 | 超声波诊断***及超声波诊断***的控制方法 |
WO2019148154A1 (en) * | 2018-01-29 | 2019-08-01 | Lang Philipp K | Augmented reality guidance for orthopedic and other surgical procedures |
JP2019130223A (ja) * | 2018-02-02 | 2019-08-08 | キヤノンメディカルシステムズ株式会社 | 医用画像診断装置及びx線照射制御装置 |
JP2019048211A (ja) * | 2018-12-27 | 2019-03-28 | キヤノン株式会社 | 超音波画像診断システム、及びその制御方法 |
Also Published As
Publication number | Publication date |
---|---|
US11883241B2 (en) | 2024-01-30 |
US20210093303A1 (en) | 2021-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5284123B2 (ja) | 超音波診断装置および位置情報取得プログラム | |
JP4470187B2 (ja) | 超音波装置、超音波撮像プログラム及び超音波撮像方法 | |
US9173632B2 (en) | Ultrasonic diagnosis system and image data display control program | |
US20230414201A1 (en) | Ultrasonic diagnostic apparatus | |
US9568598B2 (en) | Ultrasonic diagnostic apparatus and program | |
CN104994792B (zh) | 超声波诊断装置以及医用图像处理装置 | |
JP6615603B2 (ja) | 医用画像診断装置および医用画像診断プログラム | |
WO2007114375A1 (ja) | 超音波診断装置及び超音波診断装置制御方法 | |
US9990725B2 (en) | Medical image processing apparatus and medical image registration method using virtual reference point for registering images | |
JP2010284218A (ja) | 超音波診断装置及び医用画像処理装置 | |
JP6125380B2 (ja) | 超音波診断装置、医用画像処理装置及び画像処理プログラム | |
JP2023014321A (ja) | 超音波診断装置、及び制御プログラム | |
JP6833533B2 (ja) | 超音波診断装置および超音波診断支援プログラム | |
JP6720001B2 (ja) | 超音波診断装置、及び医用画像処理装置 | |
US20230320700A1 (en) | Apparatus and method for automatic ultrasound segmentation for visualization and measurement | |
CN110123372B (zh) | 医用图像诊断装置以及x射线照射控制装置 | |
US11850101B2 (en) | Medical image diagnostic apparatus, medical image processing apparatus, and medical image processing method | |
JP7171228B2 (ja) | 超音波診断装置及び医用情報処理プログラム | |
JP2013143978A (ja) | 超音波診断装置 | |
CN112568936B (zh) | 医用图像诊断装置、超声波诊断装置、医用图像***以及拍摄控制方法 | |
JP7275261B2 (ja) | 3次元超音波画像生成装置、方法、及びプログラム | |
CN112568936A (zh) | 医用图像诊断装置、超声波诊断装置、医用图像***以及拍摄控制方法 | |
JP2021053379A (ja) | 医用画像診断装置、超音波診断装置、医用画像システム、及び撮像制御方法 | |
CN110893107A (zh) | 超声波诊断装置、医用图像处理装置及非暂时性记录介质 | |
CN116158784A (zh) | 超声波诊断装置、超声波图像分析装置及其控制方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant |