CN106529115A - 信息处理装置、信息处理方法以及信息处理*** - Google Patents

信息处理装置、信息处理方法以及信息处理*** Download PDF

Info

Publication number
CN106529115A
CN106529115A CN201610807491.XA CN201610807491A CN106529115A CN 106529115 A CN106529115 A CN 106529115A CN 201610807491 A CN201610807491 A CN 201610807491A CN 106529115 A CN106529115 A CN 106529115A
Authority
CN
China
Prior art keywords
information
region
medical imaging
viewing area
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610807491.XA
Other languages
English (en)
Other versions
CN106529115B (zh
Inventor
久保武
青山岳人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN106529115A publication Critical patent/CN106529115A/zh
Application granted granted Critical
Publication of CN106529115B publication Critical patent/CN106529115B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G06F19/321

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供一种信息处理装置、信息处理方法以及信息处理***。所述信息处理装置包括:报告获取单元,其适于获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;相关区域获取单元,其适于获取与所述医用图像中的所述关注区域相关的区域;确定单元,其适于确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及显示控制单元,其适于显示包括所述注释信息的医用图像,使得在显示单元上的所述显示区域的所确定的显示位置处显示所述注释信息。

Description

信息处理装置、信息处理方法以及信息处理***
技术领域
本发明涉及一种信息处理装置、信息处理方法以及信息处理***,并且尤其是,涉及一种医用图像显示技术。
背景技术
在医疗现场中,使用医用摄像装置,诸如X射线CT(计算机断层扫描)装置、MRI(核磁共振成像)装置或PET(正电子发射断层扫描)装置等,进行对患者的摄像。CT是ComputedTomography的缩写,MRI是Magnetic Resonance Imaging的缩写,而PET是PositronEmission Tomography的缩写。通过对通过摄像获得的、并且在预定时段被保存在医院中的数据服务器中的图像数据进行各种图像处理来创建医用图像。对于医生的图像诊断操作,使用医用图像显示装置(也称为阅览器)来搜索目标医用图像,并将目标医用图像显示在监视器上,并且使用医用图像显示装置的各种功能来进行图像诊断。医生记录图像诊断的结果作为解释报告。
当参照所记录的解释报告时,用户参照它同时将医用图像与解释报告的描述内容相关联。然而,有时难以容易地指定由解释报告的描述内容表示的医用图像上的位置。此外,用户在将两个信息(即医用图像和解释报告)彼此相关联的同时,需要时间来参照解释报告。
日本特开2011-083590号公报描述了在医用图像上显示在解释报告中描述的病变部的信息。根据该布置,解释报告中的字符串与由字符串表示的医用图像上的位置相链接,并且字符串被显示在该位置附近。因此,用户能够正确地掌握由解释报告中描述的字符串所表示的医用图像上的位置,并且能够正确地参照解释报告而无需花费时间。
然而,在日本特开2011-083590号公报的布置中,确定医用图像上显示的字符串的位置,而没有考虑解剖结构或解释报告的内容。由于这个原因,字符串有时叠加在医用图像上的解剖重要位置或与解释报告的内容相关的医用图像上的位置。在这种情况下,用户难以在医用图像上确认解剖结构或解释报告的内容。
发明内容
本发明是考虑到上述问题而做出的,并且提供一种能够更容易地掌握医用图像与解释报告之间的对应关系的技术。
根据本发明的一个方面,一种信息处理装置包括:报告获取单元,其适于获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;相关区域获取单元,其适于获取与所述医用图像中的所述关注区域相关的区域;确定单元,其适于确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及显示控制单元,其适于显示包括所述注释信息的医用图像,使得在显示单元上的所述显示区域的所确定的显示位置处显示所述注释信息。
根据本发明的另一方面,一种信息处理装置包括:报告获取单元,其适于获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;相关区域获取单元,其适于基于所述注释信息中包括的字符串,获取所述医用图像中的相关区域;确定单元,其适于确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及显示控制单元,其适于显示包括所述注释信息的医用图像,使得在显示单元上的所述显示区域的所确定的显示位置处显示所述注释信息。
根据本发明的又一方面,一种信息处理***包括:报告获取单元,其适于获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;相关区域获取单元,其适于获取与所述医用图像中的所述关注区域相关的区域;确定单元,其适于确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及显示控制单元,其适于显示包括所述注释信息的医用图像,使得在显示单元上的所述显示区域的所确定的显示位置处显示所述注释信息。
根据本发明的又一方面,一种信息处理***包括:报告获取单元,其适于获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;相关区域获取单元,其适于基于所述注释信息中包括的字符串,获取所述医用图像中的相关区域;确定单元,其适于确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及显示控制单元,其适于显示包括所述注释信息的医用图像,使得在显示单元上的所述显示区域的所确定的显示位置处显示所述注释信息。
根据本发明的又一方面,一种信息处理方法包括:由报告获取单元获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;由相关区域获取单元获取与所述医用图像中的所述关注区域相关的区域;由确定单元确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及由显示控制单元显示包括所述注释信息的医用图像,使得在显示单元上的所述显示区域的所确定的显示位置处显示所述注释信息。
根据本发明的又一方面,一种信息处理方法包括:由报告获取单元获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;由相关区域获取单元基于所述注释信息中包括的字符串,获取所述医用图像中的相关区域;由确定单元确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及由显示控制单元显示包括所述注释信息的医用图像,使得在显示单元上的所述显示区域的所确定的显示位置处显示所述注释信息。
通过以下(参照附图)对示例性实施例的描述,本发明的进一步特征将变得清楚。
附图说明
图1是示出医用图像***的布置的框图;
图2是用于说明医用图像***的处理过程的流程图;
图3是示出解释报告创建画面的示例的图;
图4是示出医用图像和字符串显示区域的示例的图;
图5A、图5B、图5C和图5D是示出叠加显示在医用图像上的字符串显示区域的示例的图;
图6是用于说明字符串显示区域的显示位置被唯一地确定的示例的图;
图7A和图7B是示出字符串显示区域被叠加显示在医用图像上的示例的图;
图8是示意性示出切片图像以及显示字符串的范围的图;
图9A、图9B和图9C是示出字符串显示区域被叠加显示在医用图像上的示例的图;
图10A和图10B是示意性示出切片图像以及显示字符串的范围的图;
图11是用于说明当前图像、过去图像和减影(subtraction)图像的图;
图12是示出字符串显示区域被叠加显示在医用图像上的示例的图;
图13A、图13B和图13C是示出字符串显示区域被叠加显示在医用图像上的示例的图;
图14是示出关键字与获取区域之间的关系的图;
图15是示出字符串显示区域被叠加显示在医用图像上的示例的图;以及
图16是示出图像显示区域的详细显示示例的图。
具体实施方式
现在,将参照附图描述本发明的实施例。然而,本发明的范围不限于以下的布置示例。
(医用图像***)
图1是示出包括根据本发明的实施例的医用图像显示装置的医用图像***(医用图像显示***)的整体布置的框图。作为信息处理***的医用图像***包括医用图像显示装置10和数据库22。这些装置经由通信装置连接,以便能够彼此通信。在该实施例中,将描述由LAN(局域网)21形成通信装置的示例。然而,可以由无线通信装置(例如,无线LAN)或公共通信网络形成通信装置。
数据库22管理测试信息,例如医用图像和解释报告。数据库22将医用图像和解释报告相关联地保持。医用图像显示装置10经由LAN 21获取由数据库22管理的医用图像或解释报告。
作为信息处理装置的医用图像显示装置10包括通信IF(接口)31、ROM(只读存储器)32、RAM(随机存取存储器)33、存储单元34、操作单元35、显示单元36以及控制单元37,作为其功能部件。通信IF 31通过例如LAN卡来实现,并且经由LAN 21控制外部装置(例如,数据库22)与医用图像显示装置10之间的通信。ROM 32是由非易失性存储器等实现的只读存储器,并且存储各种程序等。RAM 33是由易失性存储器等实现的可写存储器,并且临时存储各种信息。存储单元34是由例如HDD(硬盘驱动器)实现的存储设备,并且存储各种信息。操作单元35例如由键盘或指点设备来实现,并且向装置输入用户指令。显示单元36例如由显示器来实现,并且向用户(例如,医生)显示各种信息。控制单元37例如由CPU(中央处理单元)来实现,并且总体控制医用图像显示装置10的处理。
控制单元37包括医用图像获取单元41、解释报告获取单元42、关键字提取单元43、区域获取单元44、显示位置确定单元45以及显示处理单元46,作为其功能部件。医用图像获取单元41根据由操作单元35输入的用户操作,经由通信IF 31和LAN 21,从数据库22获取所关心的患者的医用图像。医用图像获取单元41将医用图像输出到区域获取单元44、显示位置确定单元45以及显示处理单元46。
解释报告获取单元42根据由操作单元35输入的用户操作,经由通信IF 31和LAN21,从数据库22获取解释报告(报告信息)。注意,解释报告是与由医用图像获取单元41获取的医用图像相对应的解释报告,并且稍后将描述创建解释报告的详细方法。此外,报告信息是包括被检体(例如,患者)的医用图像中的关注区域以及与关注区域相关联的注释信息的信息。报告信息是解释报告中包括的信息的子集或解释报告本身。解释报告不仅包括由解释医生登记在解释报告服务器中的解释报告,还包括输入到解释报告编辑画面的、在登记前或在编辑下的解释报告。在这种情况下,上述的报告信息是在编辑下的解释报告中包括的信息,该信息是包括被检体的医用图像中的关注区域以及与关注区域相关联的注释信息的信息。
获取的解释报告的一部分或全部被输出到关键字提取单元43、显示位置确定单元45以及显示处理单元46。
关键字提取单元43针对由解释报告获取单元42获取的解释报告进行后述的处理,从而提取关键字。关键字提取单元43将所提取的关键字输出到区域获取单元44。
用作相关区域获取单元的区域获取单元44基于由关键字提取单元43获取的关键字,针对由医用图像获取单元41获取的医用图像进行后述的处理,从而获取医用图像中的解剖区域。区域获取单元44将所获取的解剖区域输出到显示位置确定单元45。
显示位置确定单元45在由医用图像获取单元41获取的医用图像上,确定对由解释报告获取单元42获取的解释报告中的字符串进行显示的显示位置。在此,解释报告中的字符串表示在解释报告中描述的文本的一部分或全部。注意,基于医用图像、解释报告以及由区域获取单元44获取的区域的一部分或全部,通过后述的处理来确定显示位置。显示位置确定单元45将所确定的显示位置输出到显示处理单元46。
显示处理单元46将由医用图像获取单元41获取的医用图像显示在显示单元36上,同时将由解释报告获取单元42获取的解释报告中的字符串叠加在由显示位置确定单元45确定的显示位置上。
注意,在控制单元37中提供的单元中的至少一些可以被实现为独立的设备。可选地,各个单元可以被实现为实现功能的软件(计算机程序)。在这种情况下,实现功能的软件可以经由网络(例如云)在服务器上进行操作。在该实施例中,将描述由软件在本地环境中实现各个单元的示例。
(处理过程)
接下来,将参照图2至图4描述根据该实施例的控制单元37的总体处理过程。例如,下面,通过由X射线CT装置对被检体的胸部区域进行拍摄而创建的医用图像将被描述为目标。然而,目标医用图像不限于此。
图2是由控制单元37进行的处理的流程图。在步骤S201中,医用图像获取单元41根据由操作单元35输入的用户操作,经由通信IF 31和LAN 21从数据库22读出医用图像。
在步骤S202中,解释报告获取单元42经由通信IF 31和LAN 21,从数据库22获取与在步骤S201中读出的医用图像相对应的解释报告。在该实施例中,以下面的方式来创建解释报告并将解释报告登记在数据库22中。
图3示出了解释报告创建画面300,作为解释报告创建画面的示例。图3中所示的图像显示区域310表示显示医用图像的画面区域。注意,对于在图像显示区域310中显示的医用图像,医用图像阅览器的各种功能(诸如对整个图像的放大/缩小功能、浓度值转换功能、显示位置平移功能、图形描绘功能以及浓度值测量功能等)是可用的。报告显示区域320是将用户的医用图像解释的结果描述为文本的画面区域。在下文中,描述解释结果的文本将被称为解释文本(注释信息)。在图3中,“在右肺S2区域中观察到实性结节”被描述为在报告显示区域320中的解释文本。按钮321是关注位置设置按钮。通过选择按钮321,能够设置当描述解释文本时用户关注的医用图像上的位置(在下文中被称为关注位置)。由×表示的符号311示出了由用户设置的关注位置。注意,关注位置可以是图像中的像素或体素,或者可以是包括多个像素或体素的区域。在下文中,将由用户设置的位置或区域称为关注区域。注意,当用户通过操作输入设置了关注位置时,可以由医用图像***将所设置的关注位置的信息、以及与关注位置相对应的关于病变部的区域的信息,作为关注区域的信息来管理。
将详细描述解释报告创建方法的示例。用户从数据库22读出要解释的医用图像,并将其显示在图像显示区域310中。用户使用如上所述的医用图像阅览器的各种功能,详细观察医用图像。用户在报告显示区域320中描述观察结果,作为解释文本。在图3中,解释文本被描述为自由文本。然而,也可以是结构化文本。然后,用户选择按钮321来设置针对解释文本的关注位置。使用操作单元35(未示出)来设置关注位置。例如,用户通过使用指点设备点击关注位置,来设置关注位置。关注位置设置方法当然不限于此,并且任何方法都是可用的,只要能够指定表示关注位置的位置信息(在下文中被称为关注位置信息)即可。关注位置信息包括例如医用图像中的坐标值。在图3中,符号311被描绘在所设置的关注位置上。然而,将关注位置信息记录在医用图像显示装置10中即可,不必总是描绘表示关注位置的符号。医用图像显示装置10将解释文本和关注位置信息(或关注区域信息)相关联地保存在数据库22中。因此,在步骤S202中,读出解释文本和关注位置信息,作为解释报告。
在步骤S203中,关键字提取单元43通过关键字匹配,从在步骤S202中读出的解释文本,提取预先设置的关键字。在该实施例中,关键字是表示解剖信息的字符串,诸如在医用图像中显示的器官名称。示例为大脑、小脑、眼球、鼻、齿、肺、支气管、心脏、肝脏、脾脏、胰脏、胃、大肠、小肠、空肠、回肠、直肠、***、子宫、前臂、上臂、大腿、下腿、***、肌肉、骨骼、脊柱、仙骨、尾骨以及骨盆。在此描述的器官名称当然仅仅是示例,本发明不限于此。关键字不限于器官名称,并且可以是任意字符串,只要能够指定在医用图像中的位置即可。下面将描述如图3所示的、“在右肺S2区域中观察到实性结节”被描述为解释报告的解释文本的示例。在这种情况下,“肺”被提取为关键字。可选地,可以设置并提取能够更严格地指定在医用图像中的位置的“右肺”或“右肺S2”。注意,在此通过关键字匹配来提取关键字,但是也可以使用其他方法(例如已知的自然语言处理)来提取。
在步骤S204中,区域获取单元44从在步骤S201中获取的医用图像提取与在步骤S203中提取的关键字相对应的解剖区域,并且获取该区域作为与关注区域有关的区域。将描述在步骤S203中“肺”被提取为关键字的情况,作为示例。在该示例中,区域获取单元44从医用图像获取肺部区域。更具体地,使用平滑滤波器,从在步骤S201中获取的医用图像进行噪声去除。接下来,针对医用图像的像素值,使用预定阈值(例如,HU值:-200)进行二值化处理,从而将医用图像分离成内部区域和外部区域。使用另一阈值(例如,HU值:-500)将分离的内部区域分离成肺部区域和其他区域,从而提取并获取肺部区域。注意,解剖区域提取处理仅需要从读出的医用图像提取预定的区域,并且不限于该方法。例如,可以使用其他的器官分割处理(诸如图形切割方法)来提取解剖区域。
在步骤S205中,显示位置确定单元45对在步骤S201中读出的医用图像上叠加显示构成在步骤S202中读出的解释文本的字符串的一部分或全部的显示位置进行确定。在该实施例中,显示区域被确定为不使解释文本的显示区域与解剖区域交叠。将参照图4、图5A、图5B、图5C和图5D描述显示位置确定方法。图4中所示的医用图像410表示在步骤S201中读出的医用图像。在该示例中,医用图像是由胸部X射线CT装置拍摄的轴向(水平)图像,并且切片位置是在步骤S202中将关注位置设置到的位置。在下文中,在切片位置处的图像将被称为关注切片图像。虚线411表示医用图像410中的肺野与外部之间的边界线。符号412表示病变部(结节)。字符串显示区域420表示显示在步骤S202中读出的解释文本(注释信息)的字符串的一些或全部字符串(在下文中将被称为显示字符串)的区域(在下文中将被称为字符串显示区域)。在该实施例中,字符串显示区域420具有预定的大小和形状。在这种情况下,如果相对于字符串显示区域存在许多显示字符串,则会无法在字符串显示区域中显示所有的显示字符串。在这样的情况下,如由字符串显示区域421所表示的,可以使用滚动条422滚动显示字符串。如由字符串显示区域423所表示的,显示字符串的字体可以被改变为在字符串显示区域中显示所有的显示字符串。可选地,可以隐藏显示字符串中的、无法被显示在字符串显示区域中的字符串,或者可以使用已知的自然语言处理来自动生成显示字符串的摘要并进行显示。
下面将描述字符串显示区域420被叠加显示在医用图像410上的情况。注意,将说明如下的示例,其中,在步骤S203中“肺”被提取为解释文本的关键字,并且在步骤S204中获取医用图像410中的肺部区域。
显示位置确定单元45基于预定条件(在下文中被称为显示位置确定条件),确定字符串显示区域420的显示位置。将给出显示位置确定条件“整个字符串显示区域位于医用图像内部”和“字符串显示区域不与基于解释文本的关键字而提取的区域的内部交叠”的示例,来进行描述。在这种情况下,字符串显示区域420的显示位置被确定为医用图像410内部且虚线411外部的区域。图5A、图5B、图5C和图5D示出了显示位置的示例。在图5A和图5B中,字符串显示区域420的显示位置位于医用图像410内部且虚线411外部。因此,图5A和图5B中所示的字符串显示区域的显示位置是符合条件的适当的显示位置。在图5C中,字符串显示区域420的显示位置位于虚线411外部,但部分地位于医用图像410外部。因此,图5C中所示的字符串显示区域的显示位置是不符合条件的不适当的显示位置。在图5D中,字符串显示区域420的显示位置位于医用图像410内部并且虚线411内部。因此,图5D中所示的字符串显示区域的显示位置是不符合条件的不适当的显示位置。
仅由上述的两个显示位置确定条件,无法唯一地确定字符串显示区域的显示位置。因此,在该上述的示例中,字符串显示区域的显示位置能够是符合上述的显示位置确定条件的医用图像上的任何位置。为了唯一地确定字符串显示区域的显示位置,附加地设置诸如“关注位置与字符串显示区域的中心之间的距离变得最短”等显示位置确定条件。图6示出了使用医用图像410和字符串显示区域420的示例。计算在步骤S202中获取的关注位置413与字符串显示区域420的中心421之间的距离。字符串显示区域420被显示在这样的位置,即,在符合其他显示位置确定条件的同时,使中心之间的距离最短。
在步骤S206中,显示处理单元46将包括在步骤S202中获取的解释文本的字符串中的一些或全部的字符串显示区域,在步骤S205中确定的显示位置处,叠加在步骤S201中获取的医用图像上。显示处理单元46进行显示控制,以在显示单元36上对叠加有包括解释文本的字符串显示区域的医用图像进行显示。
如上所述,根据该实施例的医用图像显示装置10,能够获得以下效果。即,当将解释文本的字符串中的一些或全部叠加显示在医用图像上时,根据解释文本的内容来确定显示位置。因此,能够避免字符串被叠加显示在医用图像的与解释文本的内容密切相关的区域上。由于这个原因,即使当观看叠加有字符串的医用图像时,也不妨碍用户确认字符串的内容,并且使得用户能够更容易地掌握医用图像与解释报告之间的对应关系。
如果在会议***等中,除解释者以外的用户参照解释报告和医用图像,则对除解释者以外的用户而言,通常难以理解解释报告的内容。同样在这种情况下,当解释报告的解释文本连同医用图像一起,被显示在不与和关注区域相关的区域交叠的位置处时,则除解释者以外的用户能够更容易地掌握医用图像与解释报告之间的对应关系。在本实施例中,由于确定字符串显示区域的显示位置在由医用图像所占据的区域中,所以解释文本被显示在医用图像的对应区域附近,并且能够容易地识别解释文本与医用图像的对应区域之间的关系。
注意,在该实施例中,考虑不使解释文本(注释信息)的字符串显示区域与和关注区域相关的区域交叠。已经描述了包括关注区域的解剖区域被获取为与关注区域相关的区域的示例。然而,相关区域不限于此。即,相关区域能够是当浏览解释文本时可以参照的、由医用图像中的被检体所占据的区域的任意部分区域。例如,当针对右肺疾病创建解释文本时,在确定解释文本的显示位置时,不仅可以考虑由右肺野占据的区域,还可以考虑由会与疾病相关的其他器官(例如,左肺野和支气管)占据的区域。对于诸如可能转移的癌症等疾病,关注区域中存在的疾病可能转移到的区域可以被获取为相关区域。可选地,距关注位置预定距离(例如,10厘米)的范围可以被获取为相关区域。
此外,根据解释文本(注释信息)的修改,显示位置确定单元45可以改变解释文本的字符串显示区域的显示位置,并且显示处理单元46可以在显示单元36上显示在改变后的显示位置处叠加有修改后的解释文本的医用图像。当根据解释文本的修改来改变解释文本的字符串显示区域在医用图像上的显示位置时,用户能够总是容易地掌握解释文本与对应于解释文本的医用图像的区域之间的对应关系。
根据由区域获取单元44从解释文本中包括的字符串对关键字的提取,显示处理单元46可以显示与字符串中的关键字相对应的部分,以便与其他字符串区分。例如,可以使用与其他部分不同的字符颜色或背景颜色来显示与关键字相对应的部分。该部分可以被加下划线、使用不同的字体显示、或突出显示。这使得用户能够一眼识别出解释文本中包括的关键字,并且容易地掌握解释文本的内容。
在该实施例中,已经描述了基于解释文本中包括的字符串的关键字来确定解释文本的字符串显示区域的显示位置的示例。然而,不必总是基于关键字确定解释文本的字符串显示区域的显示位置,只要解释文本的字符串显示区域不与关注区域的相关区域交叠即可。例如,可以通过基于医用图像中的关注区域的位置获取解剖区域作为相关区域,来确定解释文本的字符串显示区域的显示位置。可选地,如果无法基于字符串获取解剖区域,如同在解释文本不包括关键字的情况下,可以基于医用图像中的关注区域的位置来获取解剖区域。因此,解释文本能够被显示为不与在不使用关键词的情况下,以高的可能性与要连同解释文本一起被参照的解剖区域交叠,并且能够更容易地掌握医用图像与解释报告之间的对应关系。
可以创建包括解释文本和显示位置信息的医用图像的图像文件,显示位置信息表示由显示位置确定单元45确定的字符串显示区域的显示位置。因此,只要装置能够加载图像文件,即使是不具有根据该实施例的医用图像显示装置10的功能的装置,也能够读出图像文件并将其输出到显示器以显示解释文本与对应区域之间的关系。例如,图像文件的格式可以是DICOM。关注区域的信息、与关注区域相对应的解释文本(注释信息)以及显示解释文本(注释信息)的显示区域的信息,被包括在DICOM图像文件中。注释信息和显示区域的信息被保持为与例如由DICOM定义的GSPS的注释相对应的数据。GSPS是灰度软拷贝呈现状态(Grayscale Softcopy Presentation State)的缩写。显示上述解释文本(注释信息)显示区域的切片图像的信息也被包括在DICOM图像文件中。
可以根据用户的操作输入来移动解释文本的字符串显示区域。例如,假设做出了将字符串显示区域(第一显示区域)移动到与关注区域的相关区域(第二显示区域)交叠的位置的操作输入。在这种情况下,第一显示区域和第二显示区域中的至少一者的显示位置,被确定为不使第一显示区域和第二显示区域彼此交叠。这能够防止解释文本的字符串显示区域在解释文本的字符串显示区域的移动之前和之后与相关区域交叠,并且能够清楚地显示医用图像与解释文本之间的对应关系。
在上述实施例中,作为要在步骤S203中从解释文本提取的关键字,预先设置表示解剖信息(诸如要在医用图像中显示的器官名称)的字符串。然而,预先设置的关键字不限于此。例如,可以设置疾病名称,诸如结节、癌症、肺炎、肺气肿或分枝杆菌病等。
在此,将参照图7A描述在“结节”被设置为关键字的情况下的字符串显示区域显示位置确定方法。图7A中的医用图像410、虚线411以及黑圈412与图4中所示的相同。
在步骤S202中,“在右肺S2区域中观察到实性结节”被获取为解释文本。在步骤S203中,由于“结节”被设置为关键字,所以从解释文本提取“结节”。在步骤S204中,从医用图像获取“结节”的区域。通过诸如图形切割处理等的区域分割处理,来进行结节的区域的提取。
在步骤S205中,如在上述实施例中,显示位置确定条件被设置为“整个字符串显示区域位于医用图像内部”和“字符串显示区域不与基于解释文本的关键字而提取的区域的内部交叠”。在这种情况下,字符串显示区域的显示位置被确定为医用图像410内部且黑圈412外部的区域。根据显示位置确定条件,不同于上述实施例,显示位置能够位于虚线411内部或外部。在图7A中,字符串显示区域的显示位置位于医用图像410内部且黑圈412外部。因此,图7A中所示的字符串显示区域的显示位置是符合条件的适当的显示位置。
将参照图7B描述另一示例,其中,“肺炎”被设置为关键字。图7B中的阴影区域414表示在医用图像中提取肺炎图像的区域。在步骤S202中,“在左肺的背面观察到间质性肺炎的早期图像”被获取为解释文本。在步骤S203中,由于“肺炎”被设置为关键字,所以从解释文本提取“肺炎”。在步骤S204中,从医用图像获取“肺炎”的区域。通过例如预先存储表示肺炎的纹理图案,并且提取医用图像中的具有该纹理图案的区域,来提取肺炎的区域。也能够通过已知的方法,来执行具有器官中的特定图案的疾病区域的提取处理。在步骤S205中,如在上述实施例中,显示位置确定条件被设置为“整个字符串显示区域位于医用图像内部”和“字符串显示区域不与基于解释文本的关键字而提取的区域的内部交叠”。在这种情况下,字符串显示区域的显示位置被确定为医用图像410内部且阴影区域414外部的区域。在图7B中,字符串显示区域的显示位置位于医用图像410内部且阴影区域414外部。因此,图7B中所示的字符串显示区域的显示位置是符合条件的适当的显示位置。
如上所述,当解释文本被显示为不与具有基于关键字(诸如疾病名称)的疾病的区域交叠时,能够更容易地掌握解释文本与医用图像的关注区域之间的对应关系。注意,上述的预先设置的关键字仅仅是示例,并且不限于这些示例。
在上述实施例中,在步骤S205中,仅针对关注切片图像确定字符串显示区域的显示位置。然而,甚至可以对另一切片位置处的图像确定显示位置。将参照图8描述甚至对另一切片位置处的图像确定字符串显示区域的显示位置的情况。参照图8,附图标记801至807表示切片位置处的医用图像,并且图像804是关注切片图像。
图8示出了如下的示例,其中,对与关注切片图像的切片位置相距预定范围内的切片位置处的医用图像,确定字符串显示区域的显示位置。可以使用对例如“在关注切片图像的切片位置的正面和背面中的各个上的两个切片位置”的固定值,来确定预定范围。在这种情况下,对图8中的切片位置802至806处的医用图像,确定字符串显示区域的显示位置。作为另一示例,可以基于在步骤S204中提取的区域的大小,来设置确定字符串显示区域的显示位置的切片位置的范围。更具体地,如果所提取的区域的大小很小,则设置窄的范围。如果所提取的区域的大小很大,则设置宽的范围。可选地,用户可以手动设置范围。
可以使用与用来对关注切片图像确定字符串显示区域的显示位置相同的显示位置确定条件,来确定另一切片位置处的字符串显示区域的显示位置。各个切片位置处的字符串显示区域的显示位置,可以与关注切片图像上的相同。在这种情况下,依据切片位置,字符串显示区域可以被显示在步骤S204中提取的区域内部,所以不满足显示位置确定条件。在这种情况下,显示位置确定条件被设置为“整个字符串显示区域位于医用图像内部”、“字符串显示区域不与基于解释文本的关键字而提取的区域的内部交叠”以及“显示位置对所有切片位置相同”。因此,字符串显示区域的显示位置不在切片位置之间改变,并且能够避免与解释文本的内容密切相关的医用图像的区域被设置为显示位置。
如上所述,当要显示的医用图像包括从同一被检体获取的多个切片图像时,显示位置确定单元45从该多个切片图像中,确定显示包括解释文本的字符串显示区域的切片图像。然后,显示处理单元46将包括解释文本的字符串显示区域显示在所确定的切片图像上。因此,根据该实施例,由于在多个切片位置处显示在医用图像上显示的字符串,所以用户能够更容易地识别字符串。
在该实施例中,显示处理单元46对与关注区域相关联的解释文本,连同在垂直于切片图像的截面的方向上与关注区域相距预定距离内存在的各个切片图像一起进行显示。由于这个原因,即使疾病是三维分布的,用户也能够容易地掌握解释文本与具有疾病的区域之间的对应关系。
在上述实施例中,表示医用图像中的特定坐标的位置被记录并被用作解释报告的关注位置信息。然而,关注位置信息不限于此。例如,用户可以将关注位置设置为范围(在下文中被称为关注范围)。更具体地,设置ROI(Region Of Interest,关注区域)或VOI(VolumeOf Interest,关注体积)。
将参照图9A、图9B和图9C描述设置ROI的示例。图9A、图9B和图9C中的医用图像410和虚线411与图4中的相同。与医用图像的解释文本相对应的关注范围被用户设置为ROI415。将描述在这种情况下的字符串显示区域显示位置确定方法。
步骤S201至S204的处理与上述实施例中的相同。在图9A中,在步骤S205中的显示位置确定条件被设置为“整个字符串显示区域位于医用图像内部”和“字符串显示区域不与关注位置区域的内部交叠”。在这种情况下,字符串显示区域的显示位置被确定为医用图像410内部且ROI415外部的区域。不同于上述实施例,显示位置能够位于虚线411内部或外部。在图9A中,字符串显示区域的显示位置位于医用图像410内部且ROI 415外部。因此,图9A中所示的字符串显示区域的显示位置是符合条件的适当的显示位置。注意,如果在步骤S205中预先设置的条件不使用医用图像中的解剖区域的信息,则如在图9A中,能够省略步骤S203和S204的处理。
作为另一示例,在步骤S205中的显示位置确定条件被设置如下。即,显示位置确定条件被设置为“整个字符串显示区域位于医用图像内部”、“字符串显示区域不与基于解释文本的关键字而提取的区域的内部交叠”以及“字符串显示区域不与关注位置区域的内部交叠”。在这种情况下,字符串显示区域420的显示位置被确定为医用图像410内部、虚线411外部且ROI 415外部的区域。在图9B中,字符串显示区域的显示位置位于医用图像410内部、虚线411外部且ROI 415外部。因此,图9B中所示的字符串显示区域的显示位置是符合条件的适当的显示位置。根据上述条件,字符串显示区域的边缘和ROI的边缘可能连续,并且可能难以看到ROI。在这种情况下,显示位置确定条件被设置如下。即,显示位置确定条件被设置为“整个字符串显示区域位于医用图像内部”、“字符串显示区域不与基于解释文本的关键字而提取的区域的内部交叠”以及“字符串显示区域以预定距离位于关注位置区域外部”。可以由用户预先确定或设置该预定距离。在图9C中,字符串显示区域的显示位置位于医用图像410内部、虚线411外部且以预定距离在ROI 415外部。因此,图9C中所示的字符串显示区域的显示位置是符合条件的适当的显示位置。
当用户不是将ROI而是将VOI设置为关注范围时,能够通过与用于ROI的相同的处理,在关注切片图像中确定字符串显示区域的显示位置。如在上述实施例中,当确定预定范围内的多个切片位置处的字符串显示区域的显示位置时,设置VOI的切片位置可以被设置为范围。将参照图10A和图10B描述在多个切片位置处确定显示位置的情况。参照图10A和图10B,附图标记1001至1007表示切片位置处的医用图像,并且图像1004是关注切片图像。将描述VOI被设置在切片位置1003至1005处的医用图像上的示例。在这种情况下,切片位置1003至1005被设置为范围。作为另一示例,可以将从在设置VOI的切片位置稍前的切片位置、至在设置VOI的切片位置稍后的切片位置的范围,设置为显示字符串显示区域的范围。图10B示出了如下的示例,其中,将从第二个在前的切片位置、至设置VOI的切片位置之后的一个切片位置设置为范围。在这种情况下,切片位置1001至1006被设置为范围。
图16是示出图3中所示的图像显示区域310的详细显示示例的图。在图16中,通过参照图9C描述的方法,来确定字符串显示区域的显示位置。
参照图16,图像显示区域310包括以下部分区域。测试列表1601是以列表格式来显示作为当前测试目标的患者的所有测试(当前和过去的测试)的区域。缩略图列表1602是以缩略图列表格式来显示由用户从测试列表1601中显示的测试列表选择的测试中包括的所有图像的区域。测试中包括的各个图像可以是一个切片图像或由多个切片图像形成的一系列图像(3D图像)。缩略图通常是通过缩小一个切片图像而创建的图像。为了由一系列图像创建缩略图,对一系列图像中的代表性图像(例如,切片位置位于中心的切片图像)进行缩小。
工具栏1603是布置和显示多个按钮(图标)的区域。当用户选择工具栏1603上的按钮时,执行与该按钮预先关联的功能(例如,图像显示形式改变、图形绘制或字符串显示区域绘制)。图像/查找(finding)显示图块1604是显示图像显示图块1605(稍后描述)、查找列表1606以及诊断支持信息列表(CAD列表)1607的区域。
能够根据用户指令来显示一个至预定的上限数量的图像/查找显示图块1604。图16示出了以2×2布局模式显示4个图像/查找显示图块1604的示例。图像显示图块1605是显示与由用户选择的缩略图相对应的图像的区域。图像显示图块1605中显示的图像,能够根据用户指令经历诸如对所显示的切片位置的改变、图像平移/放大/旋转或浓度值转换等的操作。此外,能够根据用户指令,进行对图像显示图块1605中显示的图像的图形绘制或图形删除。在图16中所示的示例中,用户使用诸如鼠标等的操作单元35,来绘制围绕图像的关注区域(ROI)的椭圆图案。使用参照图9C描述的方法来显示字符串显示区域。用户能够使用诸如键盘等的操作单元35,来输入或编辑字符串显示区域中的任意字符串(在下文中将被称为查找)。
查找列表1606是以列表格式来显示在图像显示图块1605中显示的图像(对一系列图像而言,为多个切片图像)上布置的所有查找的区域。当用户选择在查找列表1606中显示的任意查找时,布置有所选择的查找的切片图像被显示在图像显示图块1605中。CAD列表1607是以列表格式来显示由控制单元37中配设的诊断支持信息获取单元(未示出)获得的所有诊断支持信息的区域。也能够针对由用户指定的ROI获取诊断支持信息,或者能够由控制单元37中配设的ROI检测设备(未示出)来获取。当用户选择在CAD列表1607中显示的任意诊断支持信息时,与所选择的诊断支持信息相对应的ROI中存在的切片图像,被显示在图像显示图块1605中。
如上所述,在该实施例中,由于基于ROI或VOI确定了解释文本的字符串显示区域的显示位置,所以用户能够容易地掌握解释文本与医用图像中的关注区域之间的对应关系。
在上述实施例中,由医用图像和与医用图像相对应的解释报告,来确定字符串显示区域的显示位置。然而,可以由多个时间点的医用图像和与该些医用图像相对应的解释报告,来确定字符串显示区域的显示位置。例如,可以使用同一患者的过去的医用图像或解释报告。
将参照图11和图12描述由多个时间点的医用图像或解释报告来确定字符串显示区域的显示位置的情况。参照图11,医用图像(当前图像)1110是与由用户书写的解释文本相对应的医用图像,并且被显示在字符串显示区域1100中。医用图像(过去图像)1120是在医用图像1110的拍摄时间之前的时间点拍摄的同一患者的图像。减影图像1130是医用图像1110与医用图像1120之间的减影图像。能够通过例如使用诸如FFD(Free-FormDeformation,自由变形)等的变形对准处理在医用图像1110与医用图像1120之间进行变形对准,并且在这两个图像之间进行减影处理,来生成减影图像。减影图像1130上的阴影区域1131是各自具有当前图像1110与过去图像1120之间的差的区域。图12中所示的阴影区域1200表示与减影图像1130上的阴影区域1131相对应的当前图像1110上的位置。
在步骤S201中,读出当前医用图像1110。在步骤S202中,读出针对医用图像1110创建的解释报告。将描述如下的示例,其中,所创建的解释报告中的解释文本是“与上次相比,肺内结节作为整体增加了”,这被显示在图11中所示的字符串显示区域1100中。在步骤S203中,“与上次相比”、“相对于之前”、“与之前相比”被预先设置为要从解释文本提取的关键字。在这种情况下,由于“与上次相比”被设置为关键字,所以从解释文本提取“与上次相比”。注意,上述的预先设置的关键字仅仅是示例,并且如果它们是被假设为与过去的医用图像相比、由用户随时间在解释文本中创建的字符串,则不限于这些示例。
在步骤S204中,读出过去图像1120,并使用上述方法生成减影图像1130。获取具有减影值不小于预定阈值的减影图像上的区域(例如,阴影区域1131)。可以预先设置减影值的阈值,或者用户可以设置任意值。在步骤S205中,显示位置确定条件被设置为“整个字符串显示区域位于医用图像内部”和“字符串显示区域不与基于解释文本的关键字而提取的区域的内部交叠”。在这种情况下,字符串显示区域的显示位置被确定为医用图像1110内部、且与减影图像上的阴影区域1131的位置相对应的当前图像1110上的阴影区域1200外部的区域。在图12中,字符串显示区域的显示位置位于医用图像1110内部且阴影区域1200外部。因此,图12中所示的字符串显示区域1100的显示位置是符合条件的适当的显示位置。
如上所述,在该实施例中,获取医用图像与另一医用图像之间的减影图像,并且基于减影图像的像素值,确定解释文本的字符串显示区域的显示位置。因此,显示对诊断而言重要的区域(例如,疾病扩展的部分),同时呈现与解释文本的对应关系,从而促使医生做出诊断。
在上述实施例中,描述了在步骤S205中字符串显示区域是具有预定大小和形状的区域的示例。然而,依据字符串显示区域的显示位置、要显示的字符串的量、要叠加显示的医用图像、提取的区域等,字符串显示区域的大小或形状可以是能够根据需要而改变的。
将参照图13A、图13B和图13C对此进行描述。在步骤S201中,读出医用图像1300。在步骤S202中,读出针对医用图像1300创建的解释报告。将描述如下的示例,其中,所创建的解释报告中的解释文本是“在右肺S2区域中观察到实性结节。结节具有不规则形状并且包括穗状体(spicula),首先怀疑肺癌”,这被显示在图13A中所示的字符串显示区域1302中。在步骤S203中,从解释文本提取“肺”作为关键字。在步骤S204中,从医用图像1300提取与关键字相对应的肺部区域1301。在步骤S205中,如在上述实施例中,显示位置确定条件被设置为“整个字符串显示区域位于医用图像内部”和“字符串显示区域不与基于解释文本的关键字而提取的区域的内部交叠”。
图13A示出了如下的示例,其中,由于字符串显示区域1302很大,所以在医用图像中不存在符合显示位置确定条件的位置,并且字符串显示区域不能被适配在医用图像中。在这种情况下,可以向用户警告不存在能够显示字符串显示区域的区域。可选地,如由图13B中所示的字符串显示区域1303所表示的,字符串显示区域的大小可以被缩小到这样的大小,即,使得符合显示位置确定条件的位置能够存在于医用图像中。在图13B中,在字符串显示区域中显示的解释文本的字体大小被缩小,从而将字符串显示区域1303显示在符合显示位置确定条件的位置处,而不改变的解释文本的内容。
作为另一示例,将描述图13C中所示的示例。在这种情况下,在步骤S203中,从解释文本提取“右肺”作为关键字。在步骤S204中,右肺区域1305被提取。在步骤S205中,如在上述实施例中,显示位置确定条件被设置为“整个字符串显示区域位于医用图像内部”和“字符串显示区域不与基于解释文本的关键字而提取的区域的内部交叠”。在该示例中,与图13A中所示的字符串显示区域1302相比,图13C中所示的字符串显示区域1304通过改变其形状,被显示在符合显示位置确定条件的位置处。
根据该实施例,基于医用图像中包括的相关区域的分布,改变字符串显示区域的大小或形状,从而将字符串显示区域显示在医用图像上。因此,能够与解释文本的量或大小无关地,示出解释文本与关注区域之间的对应关系。
在上述实施例中,在步骤S204中获取与在步骤S203中提取的一个关键字相对应的医用图像上的一个区域,并在步骤S205中将该区域用作显示位置确定条件。然而,可以对应于一个关键字获取医用图像上的多个区域,并将这些区域用作显示位置确定条件。
将参照图14和图15来确定。图14是示出表示在步骤S203中从解释文本提取的预设关键字、与在步骤S204中对应于关键字获取的区域之间的关系的表信息的示例的图。例如,参照图14,如果在步骤S203中从解释文本提取“脑”作为关键字,则在步骤S204中获取“大脑”区域和“小脑”区域。作为另一示例,如果在步骤S203中从解释文本提取“肺”作为关键字,则在步骤S204中获取“右肺野”区域、“左肺野”区域和“支气管”区域。在该表信息中,与被检体的医用图像中的关注区域相关联的字符串和表示解剖区域的类型的字符串,由此被彼此关联。
图15示出了当在步骤S203中提取“肺”,并且在步骤S204中获取“右肺野”区域、“左肺野”区域和“支气管”区域时,在医用图像中显示字符串显示区域的示例。更具体地,在步骤S201中,读出医用图像1500。在步骤S202中,读出针对医用图像1500创建的解释报告。将描述如下的示例,其中,所创建的解释报告中的解释文本是“在右肺S2区域中观察到实性结节”,这被显示在图15中所示的字符串显示区域1504中。
在步骤S203中,从解释文本提取“肺”作为关键字。在步骤S204中,参照图12从医用图像1500提取与关键字相对应的右肺区域1501、左肺区域1502以及支气管区域1503。在步骤S205中,如在上述实施例中,显示位置确定条件被设置为“整个字符串显示区域位于医用图像内部”、“字符串显示区域不与基于解释文本的关键字而提取的区域的内部交叠”。在这种情况下,字符串显示区域1504的显示位置被确定为医用图像1500内部、右肺区域1501外部、左肺区域1502外部且支气管区域1503外部的区域。在图15中,字符串显示区域的显示位置位于医用图像1500内部且右肺区域1501、左肺区域1502和支气管区域1503外部。因此,图15中所示的字符串显示区域1504的显示位置是符合条件的适当的显示位置。
在该实施例中,还考虑到与解释文本中的关键字相对应的区域在解剖方面或医学方面密切相关的另一区域,来确定字符串显示区域的显示位置。因此,用户能够更容易地识别文字串。
注意,解释报告可以包括医用图像中的多个关注区域和与这些关注区域相关联的多个解释文本(注释信息),并且显示位置确定单元45可以针对多个解释文本,确定不彼此交叠的字符串显示区域的显示位置。这使得能够将多个关注区域和对应的解释文本(注释信息)同时显示在一个医用图像上而不交叠。
在上述实施例中,在步骤S206中,显示处理单元46在显示单元36上显示叠加在医用图像上的字符串。然而,可以创建并显示字符串被直接嵌入的医用图像。
步骤S201至S205的处理与上述实施例中的相同。在步骤S206中,创建第二医用图像,其中,在步骤S202中获取的解释文本的字符串中的一些或全部,被嵌入在步骤S201中读出的医用图像上的、在步骤S205中确定的显示位置处。第二医用图像被显示在显示单元36上。
如上所述,在该实施例中,生成在字符串显示区域的显示位置处布置有解释文本的新的医用图像。新的医用图像被显示在显示单元36上,作为包括解释文本的医用图像。因此,能够示出医用图像与解释文本之间的对应关系,而不会如同字符串被叠加在医用图像上的情况使解释文本叠加在相关区域。
在上述实施例中,由软件在本地环境中实现医用图像显示装置10的各个单元。然而,可以形成如下的服务器-客户端***,其中,医用图像显示装置10中的控制单元37的功能中的至少一些由服务器使用LAN来执行。
例如,预期具有大的计算量的医用图像获取单元41、解释报告获取单元42、关键字提取单元43、区域获取单元44以及显示位置确定单元45的处理由服务器来实现。进行向用户最终显示医用图像的处理的显示处理单元46的处理可以在客户端侧实现。更具体地,当在客户端侧从列表(未示出)选择案例编号时,所选择的案例编号被经由LAN发送到服务器。在服务器侧,基于所选择的案例编号获取医用图像和解释报告,并且进行上述处理以最终确定解释文本的显示位置(步骤S201至S205)。接下来,服务器将医用图像、解释报告、解释文本和解释文本的显示位置发送到客户端侧。在客户端侧,基于发送的内容显示医用图像和解释文本(步骤S206)。
根据该实施例,即使客户端侧上的计算资源很小,也能够使用服务器清楚地显示医用图像与解释文本之间的对应关系。
如上所述,在本发明的各个实施例中,获取医用图像上的关注位置或关注范围、以及针对关注位置或关注范围的解释文本(注释信息)。基于字符串的内容来确定注释信息(字符串等)在医用图像上的显示位置。因此,能够当基于字符串的内容而将字符串显示在医用图像上时确定显示位置,并且将字符串叠加显示在医用图像上的显示位置。因此,能够避免将字符串在解剖方面重要的位置处叠加在医用图像上,或在与字符串的内容相关的位置处叠加在医用图像上。因此,能够提供一种进行显示而不妨碍用户确认字符串的内容的医用图像显示技术。
根据本发明,用户能够更容易地掌握医用图像与解释报告之间的对应关系。
其他实施例
还可以通过读出并执行记录在存储介质(也可更完整地称为“非暂时性计算机可读存储介质”)上的计算机可执行指令(例如,一个或更多个程序)以执行上述实施例中的一个或更多个的功能、并且/或者包括用于执行上述实施例中的一个或更多个的功能的一个或更多个电路(例如,专用集成电路(ASIC))的***或装置的计算机,来实现本发明的实施例,并且,可以利用通过由***或装置的计算机例如读出并执行来自存储介质的计算机可执行指令以执行上述实施例中的一个或更多个的功能、并且/或者控制一个或更多个电路以执行上述实施例中的一个或更多个的功能的方法,来实现本发明的实施例。计算机可以包括一个或更多个处理器(例如,中央处理单元(CPU),微处理单元(MPU)),并且可以包括分开的计算机或分开的处理器的网络,以读出并执行计算机可执行指令。计算机可执行指令可以例如从网络或存储介质被提供给计算机。存储介质可以包括例如硬盘、随机存取存储器(RAM)、只读存储器(ROM)、分布式计算***的存储器、光盘(诸如压缩光盘(CD)、数字通用光盘(DVD)或蓝光光盘(BD)TM)、闪存装置以及存储卡等中的一者或更多。
本发明的实施例还可以通过如下的方法来实现,即,通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给***或装置,该***或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
虽然参照示例性实施例对本发明进行了描述,但是应当理解,本发明不限于所公开的示例性实施例。应当对所附权利要求的范围给予最宽的解释,以使其涵盖所有这些变型例以及等同的结构和功能。

Claims (24)

1.一种信息处理装置,所述信息处理装置包括:
报告获取单元,其适于获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;
相关区域获取单元,其适于获取与所述医用图像中的所述关注区域相关的区域;
确定单元,其适于确定所述注释信息的显示区域的显示位置,以不使所述注释信息的所述显示区域与所述相关区域交叠;以及
显示控制单元,其适于显示包括所述注释信息的医用图像,使得在显示单元上的所述显示区域的所确定的显示位置处显示所述注释信息。
2.根据权利要求1所述的信息处理装置,其中,所述确定单元根据所述注释信息的修改,改变所述显示区域的所述显示位置,并且
所述显示控制单元将包括所述注释信息的医用图像,显示在所述显示区域的改变后的显示位置处。
3.根据权利要求1所述的信息处理装置,其中,所述相关区域获取单元获取包括所述关注区域的解剖区域作为所述相关区域,所述解剖区域是患者在所述医用图像中占据的区域的部分区域。
4.根据权利要求3所述的信息处理装置,其中,所述相关区域获取单元还获取与所述解剖区域相关的其他解剖区域作为所述相关区域。
5.根据权利要求3所述的信息处理装置,其中,所述相关区域获取单元基于所述注释信息,获取所述解剖区域作为所述相关区域。
6.根据权利要求5所述的信息处理装置,其中,所述相关区域获取单元从所述注释信息中包括的字符串提取关键字,并基于所述关键字获取所述解剖区域。
7.根据权利要求6所述的信息处理装置,其中,所述相关区域获取单元基于表信息获取所述解剖区域作为所述相关区域,在所述表信息中关联于所述关注区域的字符串与所述解剖区域的类型彼此相关联。
8.根据权利要求6所述的信息处理装置,其中,根据由所述相关区域获取单元从所述注释信息中包括的字符串对所述关键字的提取,所述显示控制单元将与所述关键字相对应的部分以与其他字符串区分开的方式进行显示。
9.根据权利要求6所述的信息处理装置,其中,所述相关区域获取单元提取器官名称和/或疾病名称作为所述关键字。
10.根据权利要求3所述的信息处理装置,其中,所述相关区域获取单元基于所述医用图像中的所述关注区域的位置,获取所述解剖区域。
11.根据权利要求10所述的信息处理装置,其中,在基于所述注释信息中包括的字符串无法获取所述解剖区域的情况下,所述相关区域获取单元基于所述医用图像中的所述关注区域的位置,获取所述解剖区域。
12.根据权利要求1所述的信息处理装置,其中,要显示的医用图像包括从同一患者获取的多个切片图像,
所述确定单元还从所述多个切片图像,确定要与所述注释信息一起显示的切片图像,并且
所述显示控制单元将所述注释信息显示在所确定的切片图像的显示区域中。
13.根据权利要求1所述的信息处理装置,其中,要显示的医用图像包括从同一患者获取的多个切片图像,并且
所述显示控制单元将与所述关注区域相关联的注释信息,连同在垂直于所述切片图像的截面的方向上距所述关注区域预定距离内存在的各个切片图像一起显示。
14.根据权利要求1所述的信息处理装置,所述信息处理装置还包括图像获取单元,所述图像获取单元适于获取所述医用图像与其他医用图像之间的减影图像,
其中,所述确定单元基于所述减影图像的像素值,确定所述显示区域的所述显示位置。
15.根据权利要求1所述的信息处理装置,其中,所述确定单元确定所述显示区域的所述显示位置,使得所述显示位置被包括在由所述医用图像占据的区域中。
16.根据权利要求1所述的信息处理装置,所述信息处理装置还包括生成单元,所述生成单元适于生成在由所述确定单元确定的显示位置处所显示的显示区域中布置有所述注释信息的新的医用图像,
其中,所述显示控制单元显示所述新的医用图像,作为包括所述注释信息的医用图像。
17.根据权利要求1所述的信息处理装置,所述信息处理装置还包括创建单元,所述创建单元适于创建医用图像的图像文件,所述图像文件包括所述注释信息以及表示由所述确定单元确定的所述显示区域的区域信息。
18.根据权利要求1所述的信息处理装置,其中,所述报告信息包括所述医用图像中的多个关注区域以及与所述关注区域相关联的多个注释信息,并且
所述确定单元针对所述多个注释信息的显示区域,确定彼此不交叠的显示位置。
19.根据权利要求1所述的信息处理装置,所述信息处理装置还包括移动单元,所述移动单元适于根据用户的操作输入,移动所述注释信息的所述显示区域,
其中,在做出了将第一显示区域移动到与第二显示区域交叠的位置的操作输入的情况下,所述确定单元确定所述第一显示区域和所述第二显示区域中的至少一者的显示位置,不使所述第一显示区域和所述第二显示区域彼此交叠。
20.一种信息处理装置,所述信息处理装置包括:
报告获取单元,其适于获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;
相关区域获取单元,其适于基于所述注释信息中包括的字符串,获取所述医用图像中的相关区域;
确定单元,其适于确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及
显示控制单元,其适于显示包括所述注释信息的医用图像,使得所述注释信息被显示在显示单元上的所述显示区域的所确定的显示位置处。
21.一种信息处理***,所述信息处理***包括:
报告获取单元,其适于获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;
相关区域获取单元,其适于获取与所述医用图像中的所述关注区域相关的区域;
确定单元,其适于确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及
显示控制单元,其适于显示包括所述注释信息的医用图像,使得所述注释信息被显示在显示单元上的所述显示区域的所确定的显示位置处。
22.一种信息处理***,所述信息处理***包括:
报告获取单元,其适于获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;
相关区域获取单元,其适于基于所述注释信息中包括的字符串,获取所述医用图像中的相关区域;
确定单元,其适于确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及
显示控制单元,其适于显示包括所述注释信息的医用图像,使得在显示单元上的所述显示区域的所确定的显示位置处显示所述注释信息。
23.一种信息处理方法,所述信息处理方法包括:
由报告获取单元获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;
由相关区域获取单元获取与所述医用图像中的所述关注区域相关的区域;
由确定单元确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及
由显示控制单元显示包括所述注释信息的医用图像,使得在显示单元上的所述显示区域的所确定的显示位置处显示所述注释信息。
24.一种信息处理方法,所述信息处理方法包括:
由报告获取单元获取报告信息,所述报告信息包括医用图像中的关注区域和与所述关注区域相关联的注释信息;
由相关区域获取单元基于所述注释信息中包括的字符串,获取所述医用图像中的相关区域;
由确定单元确定所述注释信息的显示区域的显示位置,以便不使所述注释信息的所述显示区域与所述相关区域交叠;以及
由显示控制单元显示包括所述注释信息的医用图像,使得在显示单元上的所述显示区域的所确定的显示位置处显示所述注释信息。
CN201610807491.XA 2015-09-09 2016-09-07 信息处理装置、信息处理方法 Active CN106529115B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JPJP2015-177914 2015-09-09
JP2015177914 2015-09-09
JP2016080480A JP6827706B2 (ja) 2015-09-09 2016-04-13 情報処理装置及びその方法、情報処理システム、コンピュータプログラム
JPJP2016-080480 2016-04-13

Publications (2)

Publication Number Publication Date
CN106529115A true CN106529115A (zh) 2017-03-22
CN106529115B CN106529115B (zh) 2019-10-15

Family

ID=58319786

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610807491.XA Active CN106529115B (zh) 2015-09-09 2016-09-07 信息处理装置、信息处理方法

Country Status (2)

Country Link
JP (1) JP6827706B2 (zh)
CN (1) CN106529115B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109461494A (zh) * 2018-10-29 2019-03-12 北京青燕祥云科技有限公司 一种ris平台与影像辅助诊断***例数据同步方法
CN109637628A (zh) * 2017-10-06 2019-04-16 佳能株式会社 信息处理装置、方法及非瞬态计算机可读存储介质
CN111627508A (zh) * 2020-04-29 2020-09-04 数坤(北京)网络科技有限公司 一种医学影像的解读方法、装置及计算机可读介质
CN111681739A (zh) * 2020-06-15 2020-09-18 杭州依图医疗技术有限公司 病理信息的显示方法及计算机可读存储介质
CN112562042A (zh) * 2020-12-24 2021-03-26 凌云光技术股份有限公司 一种实时编辑与解析图像检测文本的显示方法及装置

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6987551B2 (ja) * 2017-07-03 2022-01-05 キヤノンメディカルシステムズ株式会社 医用画像処理装置
JP7086630B2 (ja) * 2018-02-09 2022-06-20 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
JP7171271B2 (ja) * 2018-07-04 2022-11-15 キヤノンメディカルシステムズ株式会社 医用情報表示装置
WO2020105415A1 (ja) * 2018-11-23 2020-05-28 富士フイルム株式会社 医療情報表示装置、方法およびプログラム、並びに医療情報を表示するためのグラフィックユーザインターフェース
KR102216697B1 (ko) * 2020-02-28 2021-02-17 주식회사 루닛 의료 영상 장치 및 의료 영상 처리 방법
WO2021177157A1 (ja) * 2020-03-05 2021-09-10 富士フイルム株式会社 医用画像処理装置、医用画像処理方法及びプログラム、医用画像表示システム
JP7436698B2 (ja) * 2020-09-29 2024-02-22 富士フイルム株式会社 医用画像処理装置、方法およびプログラム
JP7418018B2 (ja) * 2021-11-12 2024-01-19 iSurgery株式会社 診断支援装置、およびコンピュータプログラム
WO2023199957A1 (ja) * 2022-04-12 2023-10-19 富士フイルム株式会社 情報処理装置、情報処理方法及び情報処理プログラム

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050107690A1 (en) * 2003-11-13 2005-05-19 Konica Minolta Medical & Graphic, Inc. Medical image interpretation system and interpretation report generating method
JP2006255021A (ja) * 2005-03-15 2006-09-28 Toshiba Corp 画像表示装置及び画像表示方法
CN101053521A (zh) * 2006-04-12 2007-10-17 株式会社东芝 医用图像显示装置
WO2011033769A1 (ja) * 2009-09-17 2011-03-24 富士フイルム株式会社 医用画像表示装置および方法並びにプログラム
CN103941855A (zh) * 2013-01-22 2014-07-23 株式会社东芝 医用图像参照装置以及医用图像参照方法
CN104011787A (zh) * 2011-12-26 2014-08-27 佳能株式会社 图像处理装置、其控制方法、图像处理***和程序
CN104281683A (zh) * 2014-09-30 2015-01-14 深圳华声医疗技术有限公司 医学图像的检索方法及共享方法
CN104584018A (zh) * 2012-08-22 2015-04-29 皇家飞利浦有限公司 用于有效查看和报告成像研究相关的先前注释的自动检测和检索

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5987345A (en) * 1996-11-29 1999-11-16 Arch Development Corporation Method and system for displaying medical images
JP4897293B2 (ja) * 2006-01-11 2012-03-14 株式会社日立メディコ 医用画像表示装置
JP2007282771A (ja) * 2006-04-14 2007-11-01 Konica Minolta Medical & Graphic Inc 医用情報処理装置及びプログラム
JP2009018048A (ja) * 2007-07-12 2009-01-29 Fujifilm Corp 医用画像表示装置、方法及びプログラム
JP5062477B2 (ja) * 2007-11-20 2012-10-31 よこはまティーエルオー株式会社 医療画像表示装置
JP5317558B2 (ja) * 2008-07-07 2013-10-16 株式会社東芝 医用情報作成装置
JP2010057902A (ja) * 2008-08-06 2010-03-18 Toshiba Corp レポート作成支援装置、レポート作成支援システム、及び医用画像参照装置
JP5203858B2 (ja) * 2008-09-01 2013-06-05 富士フイルム株式会社 医用画像表示装置、医用画像表示方法、並びに医用画像表示プログラム
JP2010057684A (ja) * 2008-09-03 2010-03-18 Fujifilm Corp 医用画像表示装置、医用画像表示方法、並びに医用画像表示プログラム
US9788729B2 (en) * 2008-11-21 2017-10-17 Toshiba Medical Systems Corporation Image processing apparatus and image processing method
JP5455470B2 (ja) * 2009-07-02 2014-03-26 株式会社東芝 医用画像読影システム
JP5523891B2 (ja) * 2009-09-30 2014-06-18 富士フイルム株式会社 病変領域抽出装置、その作動方法およびプログラム
JP2012040044A (ja) * 2010-08-12 2012-03-01 Toshiba Corp 医用画像表示装置
WO2012049741A1 (ja) * 2010-10-13 2012-04-19 株式会社日立製作所 医用画像表示装置、医用情報管理サーバ
JP5644607B2 (ja) * 2011-03-17 2014-12-24 富士通株式会社 情報提供プログラム、情報提供装置および情報提供方法
JP5746908B2 (ja) * 2011-05-06 2015-07-08 株式会社東芝 医用画像処理装置
WO2013001678A1 (ja) * 2011-06-30 2013-01-03 パナソニック株式会社 類似症例検索装置および関連度データベース作成装置並びに類似症例検索方法および関連度データベース作成方法
WO2013076930A1 (ja) * 2011-11-25 2013-05-30 パナソニック株式会社 医用画像圧縮装置、医用画像圧縮方法、及び予測知識データベース作成装置
JP6080249B2 (ja) * 2012-09-13 2017-02-15 富士フイルム株式会社 3次元画像表示装置および方法並びにプログラム
WO2014053986A2 (en) * 2012-10-01 2014-04-10 Koninklijke Philips N.V. Multi-study medical image navigation
JP2015095050A (ja) * 2013-11-11 2015-05-18 株式会社東芝 読影レポート作成装置
JP6595193B2 (ja) * 2014-03-11 2019-10-23 キヤノンメディカルシステムズ株式会社 読影レポート作成装置および読影レポート作成システム

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050107690A1 (en) * 2003-11-13 2005-05-19 Konica Minolta Medical & Graphic, Inc. Medical image interpretation system and interpretation report generating method
JP2006255021A (ja) * 2005-03-15 2006-09-28 Toshiba Corp 画像表示装置及び画像表示方法
CN101053521A (zh) * 2006-04-12 2007-10-17 株式会社东芝 医用图像显示装置
WO2011033769A1 (ja) * 2009-09-17 2011-03-24 富士フイルム株式会社 医用画像表示装置および方法並びにプログラム
CN102497805A (zh) * 2009-09-17 2012-06-13 富士胶片株式会社 医用图像显示设备、方法和程序
CN104011787A (zh) * 2011-12-26 2014-08-27 佳能株式会社 图像处理装置、其控制方法、图像处理***和程序
CN104584018A (zh) * 2012-08-22 2015-04-29 皇家飞利浦有限公司 用于有效查看和报告成像研究相关的先前注释的自动检测和检索
CN103941855A (zh) * 2013-01-22 2014-07-23 株式会社东芝 医用图像参照装置以及医用图像参照方法
CN104281683A (zh) * 2014-09-30 2015-01-14 深圳华声医疗技术有限公司 医学图像的检索方法及共享方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109637628A (zh) * 2017-10-06 2019-04-16 佳能株式会社 信息处理装置、方法及非瞬态计算机可读存储介质
CN109461494A (zh) * 2018-10-29 2019-03-12 北京青燕祥云科技有限公司 一种ris平台与影像辅助诊断***例数据同步方法
CN111627508A (zh) * 2020-04-29 2020-09-04 数坤(北京)网络科技有限公司 一种医学影像的解读方法、装置及计算机可读介质
CN111627508B (zh) * 2020-04-29 2021-05-11 数坤(北京)网络科技有限公司 一种医学影像的解读方法、装置及计算机可读介质
CN111681739A (zh) * 2020-06-15 2020-09-18 杭州依图医疗技术有限公司 病理信息的显示方法及计算机可读存储介质
CN112562042A (zh) * 2020-12-24 2021-03-26 凌云光技术股份有限公司 一种实时编辑与解析图像检测文本的显示方法及装置

Also Published As

Publication number Publication date
JP2017051591A (ja) 2017-03-16
CN106529115B (zh) 2019-10-15
JP6827706B2 (ja) 2021-02-10

Similar Documents

Publication Publication Date Title
CN106529115B (zh) 信息处理装置、信息处理方法
US10460838B2 (en) Automated anatomically-based reporting of medical images via image annotation
CN105167793B (zh) 图像显示装置、显示控制装置及显示控制方法
CN106560827B (zh) 控制方法
US10181187B2 (en) Information processing apparatus, method thereof, information processing system, and computer-readable storage medium that display a medical image with comment information
US8625867B2 (en) Medical image display apparatus, method, and program
US10282840B2 (en) Image reporting method
US20180060535A1 (en) Updating probabilities of conditions based on annotations on medical images
US10729396B2 (en) Tracking anatomical findings within medical images
EP3100209B1 (en) Extraction of information from an image and inclusion thereof in a clinical report
RU2493593C2 (ru) Способ извлечения данных из набора данных медицинских изображений
CN112885453A (zh) 用于标识后续医学图像中的病理变化的方法和***
CN110050281A (zh) 学习图像中的对象的注释
US20190150870A1 (en) Classification of a health state of tissue of interest based on longitudinal features
JP6824845B2 (ja) 画像処理システム、装置、方法およびプログラム
KR20150125436A (ko) 관심 영역별 추가 정보 제공 장치 및 방법
US8238999B2 (en) Method for display of at least one medical finding
US20180060534A1 (en) Verifying annotations on medical images using stored rules
US20180060488A1 (en) Customizing annotations on medical images
JP2017534316A (ja) 画像レポート注釈同定
CN106250665A (zh) 信息处理装置、信息处理方法及信息处理***
JP2021087864A (ja) 情報処理装置、情報処理方法、及びプログラム
JP6797858B2 (ja) 医用画像表示装置、表示制御装置および表示制御方法、プログラム
CN110709888B (zh) 信息处理装置和用于控制信息处理装置的方法
US20230410305A1 (en) Information management apparatus, method, and program and information processing apparatus, method, and program

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant