CN105682540B - 用于使用hdr成像和高光去除进行口腔内成像的方法和*** - Google Patents

用于使用hdr成像和高光去除进行口腔内成像的方法和*** Download PDF

Info

Publication number
CN105682540B
CN105682540B CN201380079958.8A CN201380079958A CN105682540B CN 105682540 B CN105682540 B CN 105682540B CN 201380079958 A CN201380079958 A CN 201380079958A CN 105682540 B CN105682540 B CN 105682540B
Authority
CN
China
Prior art keywords
irradiation
hdr
multiple images
described multiple
mirror
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201380079958.8A
Other languages
English (en)
Other versions
CN105682540A (zh
Inventor
吴颖谦
汪伟
王贵建
V.C.王
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Rui Ke Dental Technology Co., Ltd.
Original Assignee
Eastman Kodak Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Eastman Kodak Co filed Critical Eastman Kodak Co
Publication of CN105682540A publication Critical patent/CN105682540A/zh
Application granted granted Critical
Publication of CN105682540B publication Critical patent/CN105682540B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0088—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for oral or dental tissue
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/24—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the mouth, i.e. stomatoscopes, e.g. with tongue depressors; Instruments for opening or keeping open the mouth
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7225—Details of analog processing, e.g. isolation amplifier, gain or sensitivity adjustment, filtering, baseline or drift compensation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61C—DENTISTRY; APPARATUS OR METHODS FOR ORAL OR DENTAL HYGIENE
    • A61C9/00—Impression cups, i.e. impression trays; Impression methods
    • A61C9/004—Means or methods for taking digitized impressions
    • A61C9/0046—Data acquisition means or methods
    • A61C9/0053—Optical means or methods, e.g. scanning the teeth by a laser or light beam
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G06T5/94—Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20208—High dynamic range [HDR] image processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30036—Dental; Teeth

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Signal Processing (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Optics & Photonics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Physiology (AREA)
  • Psychiatry (AREA)
  • Power Engineering (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Epidemiology (AREA)
  • Multimedia (AREA)
  • Endoscopes (AREA)
  • Image Processing (AREA)
  • Dental Tools And Instruments Or Auxiliary Dental Instruments (AREA)

Abstract

提出了一种用于使用高动态范围(HDR)和高光去除进行口腔内成像的方法和***。所述方法包括生成牙齿的第一高HDR照射图，其中在不同曝光下对相同口腔内场景捕捉多个图像；和以细节保留方式从所述第一HDR照射图去除由镜面反射造成的高光以便获得第二HDR照射图，在所述第二HDR照射图中所述镜面反射至少部分受抑制。

Description

用于使用HDR成像和高光去除进行口腔内成像的方法和***
发明领域
本申请大体上涉及一种用于口腔内成像的方法和***，具体涉及使用高动态范围(HDR)成像和高光去除以便去除镜面反射并获得高度清晰的HDR图像。
发明背景
在牙科领域中，重要的是在治疗过程期间获得牙齿图像。口腔内窥镜可为对口腔环境中的牙齿直接成像提供便利，且被广泛用于医院。
然而，因为通过灌肠剂(其即使在干涸时也是极光滑又透明的)修补牙齿表面，所以极容易捕捉来自光滑表面的一些镜面反射。对于自动曝光和固定曝光两者，镜面反射将总是导致图像中的一些过饱和高光区域，其极大地破坏图像的细节且使最终显示的图像的密度极不清晰。在某些牙科实践中(诸如检查一些汞合金区域和牙齿光滑表面的水分)，过饱和高光区域使得不可能对反射区域中的病变作出任何诊断且使目视观察极不舒服。
更重要的是，由镜面反射造成的过饱和镜面高光区域使所有基于计算机的自动病变检测***无法用于所述区域，其将被视为假阳性或假阴性。
尽管HDR成像技术已被广泛用于图像处理领域，但其很少被应用于2D口腔内成像领域。此外，在某些情况下，即使口腔内成像技术方案采用HDR技术，但其无法抑制前述镜面反射和去除过饱和高光区域。
因此，将需要提供一种去除镜面反射使得可呈现高度清晰牙齿图像的方法。
发明内容
本发明旨在解决上文所描述的问题。
根据本发明的一个方面，提供了一种用于口腔内成像的方法，且这种方法包括以下步骤：
生成牙齿的第一高动态范围(HDR)照射图，其中在不同曝光下对相同口腔内场景捕捉多个图像；和
以细节保留方式从所述第一HDR照射图去除由镜面反射造成的高光以便获得第二HDR照射图，在所述第二HDR照射图中所述镜面反射至少部分受抑制。
根据本申请的实施方案的方法，生成所述第一HDR照射图的步骤包括以下步骤：
在不同曝光下对相同口腔内场景捕捉所述多个图像；
确定所述多个图像中的一个图像为关键曝光帧；
基于所述多个图像恢复照射映射曲线；和
基于所述多个图像和所述照射映射曲线恢复所述第一HDR照射图，其包括以下步骤：
对于所述多个图像中的每个，基于所述照射映射曲线将像素值映射为照射值，和
通过针对每个像素对所述多个图像中的所有图像的所述照射值进行加权平均，获得所述第一HDR照射图。
根据本发明的另一方面，提供了一种用于口腔内成像的***，且这个***包括：
HDR成像装置，其用于生成牙齿的第一高动态范围(HDR)照射图，其中在不同曝光下对相同口腔内场景捕捉多个图像；和
细节保留滤波器，其用于从所述第一HDR照射图去除由镜面反射造成的高光以便获得第二HDR照射图，在所述第二HDR照射图中所述镜面反射至少部分受抑制。
根据本发明的又一方面，提供了一种用于抑制所述镜面反射的方法，且这种方法包括以下步骤：
生成牙齿的第一高动态范围(HDR)照射图，其中在不同曝光下对相同口腔内场景捕捉多个图像；和
以细节保留方式从所述第一HDR照射图去除由镜面反射造成的高光以便获得第二HDR照射图，在所述第二HDR照射图中所述镜面反射至少部分受抑制。
根据本发明的又一方面，提供了一种计算机程序产品，且所述计算机程序产品包括计算机可读介质，所述计算机可读介质包括用于执行以下步骤的指令：
生成牙齿的第一高动态范围(HDR)照射图，其中在不同曝光下对相同口腔内场景捕捉多个图像；和
以细节保留方式从所述第一HDR照射图去除由镜面反射造成的高光以便获得第二HDR照射图，在所述第二HDR照射图中所述镜面反射至少部分受抑制。
附图简述
从下文详述并参考附图，将完全了解本发明的上述和其它目的和优点，其中相同或相似元件是由相同参考符号表示。
图1示出了使用现有技术口腔内窥镜所得的单次曝光图像的示意图。
图2是根据本发明的实施方案的用于口腔内成像的方法的工作流程；
图3示出了对应于如图2中所说明的方法的口腔内成像的示意图。
具体实施方式
本发明的诸多可能的实施方案中的一些将在下文作描述以便基本了解本发明而非识别本发明的重要或决定性因素或者界定保护范围。可容易了解，根据本发明的技术方案，本领域普通技术人员可在不背离本发明的真实精神的情况下提议其它替代实施方式。因此，以下实施方案和附图是本发明的技术方案的说明性描述，且不应被解释为构成本发明的全部或者被解释为限制或界定本发明的技术方案。
图1示出了使用现有技术口腔内窥镜所得的单次曝光图像的示意图。从图1的实施方案将清楚地了解本申请的发明背景部分中所指出的问题。具体来说，图1(a)示出了当LED在口腔内环境中进行照明时实际上产生的漫反射和镜面反射；图1(b)示出了表示口腔内窥镜的实际输入照射的原始照射图；图1(c)示出了在单次曝光之后获得的低动态范围的显示图像。在单次曝光成像的过程中，口腔内窥镜无法完全捕捉图1(b)中所示的原始照射图。
因为口腔内环境存在一些镜面反射，所以来自某个口腔内场景的实际反射可被分解为如图1(a)中所说明的漫反射和镜面反射。显然，镜面反射的照射值大于漫反射的照射值，这使强度范围宽于无镜面反射的场景的强度范围。自然地，实际反射产生对应于镜面反射的高光区域，其被示出为波峰。此外，对于常规口腔内窥镜，在单次曝光的情况下，其仅可生成有低动态图像的图像，其中高光区域的强度在曝光过度下处于过饱和状态，而对应于漫反射的其它低强度区域被表示为曝光不足；因此，图1(c)中的图像显得失真又不清晰。
对于细节，在口腔环境中，光滑牙齿表面、唾液、牙龈和其它器官组织一起共存，且其发射和照明(所谓照射)反射是极不相同的。因为数字图像中的像素值实际上是场景照射的非线性映射，所以常规口腔内窥镜不可能在单次爆光下提供足够高以便描述一个图像中的全场景照射(图1(c)中所示)的动态范围。因此，不可避免的是，将对应于镜面反射的高光区域映射到由常规窥镜在单次爆光下捕捉的最后数字图像中的过饱和区域中。
如图2和3中所说明，提供抑制镜面反射的实施方案。同时，所述实施方案还相应地公开了一种用于口腔内成像的方法，根据所述方法，最后可实时生成无过饱和高光区域的HDR图像。因此，可在2DHDR图像中清晰地显示牙齿，其将极大地有助于口腔的诊断。所述方法基于图2和3如下般作详述。
在步骤S210中，通过口腔内窥镜在不同曝光下捕捉如图3(a)中所示的一系列图像。
在这个实施方案中，在使用口腔内窥镜来观察至少包括牙齿的场景时，其照明器可为但不限于白光，诸如LED。口腔内窥镜将来自照明器的光投射到场景上且然后使反射的光成像。作为说明的实例，口腔内窥镜可参考发布的专利，即，Rongguang Liang的申请号US2010/0268069，“Dental Surface Imaging Using Polarized Fringe Projection”，其全部内容以引用方式并入本文中。
口腔内窥镜还被配置为在捕捉图像时可针对曝光进行调整。在这个实施方案中，对应于相应图像的每次曝光可通过其曝光持续时间来确定。当然，可使用其它方式以在捕捉图像时处理每次曝光。可在n个递增的曝光持续时间内对相同场景捕捉带有数字n的多个图像，即，311、312至31n。或者，数字n可被设为4、8或16。捕捉的图像越多，最后显示的HDR图像越清晰。同时，所有这些曝光的范围会影响最后HDR图像的清晰度，且其可通过镜面反射的具体化强度来确定。
还应注意，在捕捉如图3(a)中所示的一系列图像的过程中，除曝光外的所有参数是不变的，且口腔内窥镜还保持在口腔内始终静止。因此，多个成像场景可被视为静止场景。
此外，在步骤S213中，确定多个图像中的一个为关键曝光帧。
在这个实施方案中，比较多个图像的所有曝光与所有曝光的平均值，从而确定其中曝光最接***均值的图像为关键曝光帧。即，在口腔环境中进行相同照明下，关键曝光帧的曝光持续时间接近相同口腔内窥镜的平均自动曝光。
此外，关键曝光帧看起来很像常规的自动曝光图像，其中不同区域(诸如牙齿区域、牙龈区域和背景)可通过熟知的迭代自适应阈值计算程序进行分割。作为颜色分割的特定实例，可对红色分量/绿色分量的图像进行自适应阈值分割，通过其可分割出牙齿区域。因此，可确定并从关键曝光帧提取在曝光过度下的过饱和高光区域。同样地，还可按相同方式确定并从关键曝光帧提取用户意图观察的其它区域，诸如牙齿区域和牙龈区域。
此外，在步骤S215中，基于图3(a)中所示的多个图像恢复图3(b)中所示的照射映射曲线
在这个实施方案中，为了恢复照射映射曲线，如果给定恢复最优化方程式，有不同曝光持续时间的图像中的所有像素将促进统计最优解，那么这将引进大量计算。因此，几乎不可能实时实施，但实际上，对应相同材料的同质像素相似地有助于最优解且过多像素作出少量贡献。即，涉及整个同质区域中的所有像素的计算结果与涉及少数代表性像素的计算结果相似。从而，计算曲线仅涉及整个同质区域中的少数像素已足够。
为了实时恢复照射映射曲线，可在步骤213中所描述的关键曝光帧中分割牙齿区域、牙龈区域和高光区域，且可分别提取牙齿区域、牙龈区域和高光区域中的像素。
因此，将采用少得多像素来解方程式和恢复照射映射曲线，同时可获得相似解。因此，使实时恢复照射映射曲线成为可能。此外，为了确保涉及的计算实时进行，本文中使用基于形状的空间自适应下采样方法，因为没必要将所有像素均涉及到映射的曲线计算中，且牙齿区域、牙龈区域和高光区域中的每个区域中的一些代表性像素可提供足够准确的计算。在基于形状的空间自适应下采样方法中，首先计算不同分割区域的面积；然后，对于每个单独区域，生成下采样率和相关下采样网格以便使每个分割区域将提供相等数量的像素。因此，容易实现整个场景的重建曲线的高计算效率和高准确度，且可实时恢复照射映射曲线。
此外，在步骤S220中，根据图3(a)中所示的多个图像和图3(b)中所示的照射映射曲线恢复图3(c)中所示的第一HDR照射图。
在这个实施方案中，首先，对于多个图像中的每个，根据照射映射曲线将每个像素值映射为照射值。然后，可通过针对每个像素对多个图像中的所有图像的照射值进行加权平均，恢复并获得第一HDR照射图。图3(c)中所示的第一HDR照射图可表示漫反射和镜面反射的汇总，因此，其基本上相当于如图1(b)中所示的原始照射图。因而，通过多次曝光，基本上可在第一HDR照射图中获得并具体化口腔内窥镜的实际输入照射。
恢复第一HDR照射图的上述步骤如下般作详细说明。
在恢复的照射颜色图像中，镜面区域显得高光，其中照射强度值是由2个分量组成，包括漫射分量和镜面反射分量，其意指由RGB窥镜捕捉的反射光颜色图像中的位置(x，y)处的像素值可被表示为漫射颜色分量和镜面颜色分量的线性组合；其中假设白光为照明源，那么(x，y)表示像素的空间位置。其中是像素值，IR(x，y)是红色分量的像素值，IG(x，y)是绿色分量的像素值，IB(x，y)是红色分量的像素值，是漫射颜色分量，是漫射红色分量的像素值，是漫射绿色分量的像素值，是漫射蓝色分量的像素值；是镜面颜色分量，是镜面红色分量的像素值，是镜面绿色分量的像素值，是镜面蓝色分量的像素值。
高光去除技术将从恢复的照射颜色图像中的颜色分量估计漫射颜色图像。漫射色度可通过以下公式(1)来计算。
其中θ(x，y)是漫射色度，θR(x，y)是红色分量的漫射色度，θG(x，y)是绿色分量的漫射色度，θB(x，y)是蓝色分量的漫射色度。
最大漫射色度可通过以下公式(1)来计算。
θmax(x，y)＝max[(x，y)，θG(x，y)，θB(x，y)] (2)。
其中θmax(x，y)是最大漫射色度。
此外，存在用来估计每个像素的漫射颜色分量的经验公式(3)。
在其中颜色一致的小局部区域中，每个像素的θmax(x，y)改变极少，但对于镜面像素，镜面反射导致在有相同表面颜色的局部区域中颜色间断，且可使用细节保留滤波器(包括著名的双边滤波器)来去除局部间断。
此外，在步骤S230中，使用双边滤波器从第一HDR照射图去除由镜面反射造成的高光以便获得第二HDR照射图。
在这个实施方案中，在前述内容中，可在关键曝光帧中分割牙齿区域、牙龈区域和高光区域，尤其是每个高光区域，其可从关键曝光帧提取。在确定高光区域的最大几何尺寸(即，从高光区域的边界到中轴的最大距离)之后，可将这个最大几何尺寸设为双边滤波器的尺度参数；然后，双边滤波器关于第一HDR照射图的θmax(x，y)重复地运行直到达到最小变化标准为止。基于最小变化标准，容易去除看起来间断又突然的任何镜面反射。因此，可从第一HDR照射图去除过饱和高光区域，且继续获得图3(d)中所示的第二HDR照射图，在所述第二HDR照射图中镜面反射极大地受抑制且对应于漫反射的细节被完全保留。
因此，用于步骤S230的滤波器不局限于上述实施方案中的双边滤波器，且在本文中可将任何其它细节保留滤波技术应用于去除高光。在使用细节保留滤波器时，可成功地保持小于最小变化标准的细节，同时可容易去除大于最小变化标准的高光。
到目前为止，已去除镜面反射，同时将漫反射保持在口腔内场景的第二HDR照射图中。
此外，在步骤S240中，为了将HDR图像显示在低动态范围显示装置上，使用色调映射重建关于第二HDR照射图的图3(e)中所示的可显示的HDR图像。
在这个实施方案中，为了重建可被显示在有低动态范围的数字显示器中的最后白光图像，使用色调映射以将高动态范围照射值映射到常规图像动态范围中。此外，将在关键曝光帧中所提取的牙齿区域的最大几何尺寸(其被定义为从牙齿区域的边界到中轴的最大距离)用作另一双边滤波器的尺度参数，且使用这个双边滤波器以将第二HDR照射图分解成粗糙级和精细级。因为粗糙级支配主要动态范围，所以其应被下缩放以便使所述动态范围适于重建常规图像。在对精细级进行相似操作之后，将缩放的粗糙级和精细级组合在一起以产生可便于牙医观察的最后牙齿图像。
最后，获得其中同时清晰地捕捉变亮物体和变暗物体的HDR牙齿图像，其中镜面反射极大地受抑制。
可了解，在其它实施方案中，在第二HDR照射图可被直接显示在被调适来显示任何HDR照射图的显示器中的情况下，可省略步骤S240。
已描述本发明的优选实施方案，现将对一般技术人员显而易见的是，可以使用并入这些优选实施方案的其它实施方案。此外，被包括作为本发明的部分的软件可以在包括计算机可用介质的计算机程序产品中具体化。例如，这个计算机可用介质可包括上面存储有计算机可读程序代码段的可读存储器装置，诸如硬盘驱动装置、CD-ROM、DVD-ROM或计算机磁盘。计算机可读介质还可包括在上面携带程序代码段作为数字或模拟信号的通信链路(光学链路、有线链路或无线链路)。因此，应认为，本发明不应限于所描述的实施方案，但相反，应仅受所附权利要求书的精神和范围的限制。本文中所引用的所有发布案和参考案的全部内容明确地以引用方式并入本文中。

Claims (9)

1.一种用于口腔内成像的方法，其包括以下步骤：
从多个图像生成牙齿的第一高动态范围（HDR）照射图，其中在不同曝光下对相同口腔内场景捕捉所述多个图像；和
以细节保留方式从所述第一HDR照射图去除由镜面反射造成的高光以便获得第二HDR照射图，在所述第二HDR照射图中所述镜面反射至少部分受抑制，
其中所述细节保留方式是双边滤波，其中去除高光的步骤包括基于从多个图像中的一个确定的关键曝光帧确定双边滤波器的尺度参数，其中从所述关键曝光帧分割且提取过饱和高光区域，其中所述过饱和高光区域的最大几何尺寸被设为所述双边滤波器的尺度参数。
2.根据权利要求1所述的方法，其中生成所述第一HDR照射图的步骤包括以下步骤：
在不同曝光下对相同口腔内场景捕捉所述多个图像；
确定所述多个图像中的一个图像为关键曝光帧；
基于所述多个图像恢复照射映射曲线；和
基于所述多个图像和所述照射映射曲线恢复所述第一HDR照射图，其包括以下步骤：
对于所述多个图像中的每个，基于所述照射映射曲线将像素值映射为照射值，和
通过针对每个像素对所述多个图像中的所有图像的所述照射值进行加权平均，获得所述第一HDR照射图。
3.根据权利要求2所述的方法，其中通过比较所述多个图像中的每个的曝光与所有曝光的平均值，确定其中曝光最接近所述平均值的图像为所述关键曝光帧。
4.根据权利要求2所述的方法，其中可在所述关键曝光帧中分割牙齿区域、牙龈区域、高光区域和背景，且从所述关键曝光帧提取所述牙齿区域、牙龈区域和高光区域使得仅对应于所述牙齿区域、牙龈区域和高光区域的像素被用来恢复所述照射映射曲线。
5. 根据权利要求4所述的方法，其中将基于形状的空间自适应下采样方法用于减少恢复所述照射映射曲线的计算，其中所述基于形状的空间自适应下采样方法包括以下步骤：
计算所述牙齿区域、牙龈区域和高光区域中的每个分割区域的面积；和
生成下采样率和相关下采样网格以便使每个分割区域生成相等数量的像素。
6.根据权利要求5所述的方法，其中实时显示所述HDR图像。
7. 根据权利要求1 所述的方法，其中所述方法还包括以下步骤：
使用色调映射基于所述第二HDR照射图重建可显示的HDR图像以便将所述所得HDR图像显示到低动态范围显示装置上。
8. 用于口腔内成像的***，其特征在于包括：
HDR成像装置，其配置为从多个图像生成牙齿的第一高动态范围（HDR）照射图，其中在不同曝光下对相同口腔内场景捕捉所述多个图像；和
细节保留滤波器，其配置为从所述第一HDR 照射图去除由镜面反射造成的高光以便获得第二HDR 照射图，在所述第二HDR 照射图中所述镜面反射至少部分受抑制，
其中所述细节保留滤波器是双边滤波器，其中去除高光的步骤包括基于从多个图像中的一个确定的关键曝光帧确定双边滤波器的尺度参数，其中从所述关键曝光帧分割且提取过饱和高光区域，其中所述过饱和高光区域的最大几何尺寸被设为所述双边滤波器的尺度参数。
9. 根据权利要求8所述的***，其中所述HDR 成像装置包括：
用于在不同曝光下对相同口腔内场景捕捉所述多个图像的构件；
用于确定所述多个图像中的一个图像为关键曝光帧的构件；
用于基于所述多个图像恢复照射映射曲线的构件；和
用于基于所述多个图像和所述照射映射曲线恢复所述第一HDR照射图的构件，其包括：
用于对于所述多个图像中的每个基于所述照射映射曲线将所述像素值映射为照射值的构件，和
用于通过针对每个像素对所述多个图像中的所有图像的所述照射值进行加权平均获得所述第一HDR 照射图的构件。
CN201380079958.8A 2013-09-30 2013-09-30 用于使用hdr成像和高光去除进行口腔内成像的方法和*** Expired - Fee Related CN105682540B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2013/084691 WO2015042939A1 (en) 2013-09-30 2013-09-30 Method and system for intra-oral imaging using hdr imagine and highlight removal

Publications (2)

Publication Number Publication Date
CN105682540A CN105682540A (zh) 2016-06-15
CN105682540B true CN105682540B (zh) 2019-07-16

Family

ID=52741868

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380079958.8A Expired - Fee Related CN105682540B (zh) 2013-09-30 2013-09-30 用于使用hdr成像和高光去除进行口腔内成像的方法和***

Country Status (6)

Country Link
US (1) US10219703B2 (zh)
EP (1) EP3052006A4 (zh)
JP (1) JP6478984B2 (zh)
KR (1) KR20160063338A (zh)
CN (1) CN105682540B (zh)
WO (1) WO2015042939A1 (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10122928B2 (en) * 2015-09-09 2018-11-06 Red.Com, Llc Motion video output for multiple displays
CN105741249B (zh) * 2016-02-03 2018-05-04 哈尔滨理工大学 一种强反射表面高光去除方法
CN105678713B (zh) * 2016-02-03 2018-04-17 哈尔滨理工大学 基于线性扩散板与反射分量分离理论的高光去除方法
JP6601264B2 (ja) * 2016-02-29 2019-11-06 富士通株式会社 照明条件設定装置、照明条件設定方法及び照明条件設定用コンピュータプログラム
KR102614906B1 (ko) 2016-12-05 2023-12-18 삼성전자주식회사 영상 처리 방법 및 장치
CN108932716B (zh) * 2017-05-26 2020-09-22 无锡时代天使医疗器械科技有限公司 用于牙齿图像的图像分割方法
EP3639725A4 (en) * 2017-06-12 2020-06-10 Sony Corporation MEDICAL SYSTEM, MEDICAL DEVICE AND CONTROL METHOD
WO2020039716A1 (ja) * 2018-08-21 2020-02-27 ソニー・オリンパスメディカルソリューションズ株式会社 医療用制御装置及び医療用観察装置
JP7084548B2 (ja) * 2018-09-11 2022-06-14 コーニンクレッカ フィリップス エヌ ヴェ 歯肉炎検出のための大きなダイナミックレンジ検出器
CN110390648A (zh) * 2019-06-24 2019-10-29 浙江大学 一种基于非饱和与饱和高光区分的图像高光去除方法
CN111080686B (zh) * 2019-12-16 2022-09-02 中国科学技术大学 用于自然场景中图像高光去除的方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101588750A (zh) * 2007-01-17 2009-11-25 卡尔斯特里姆保健公司 用于早期检测龋齿的***
CN102509279A (zh) * 2011-11-02 2012-06-20 北京工业大学 根部欠照明舌图像的自适应暗部细节复现方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1155808A (ja) 1997-08-05 1999-02-26 Yamakichi:Kk 惰力を利用した電気自動車用発電方法
JP3623351B2 (ja) 1997-10-14 2005-02-23 日産ディーゼル工業株式会社 蓄圧式ハイブリッド車両の制動装置
JPH11155808A (ja) * 1997-11-27 1999-06-15 Olympus Optical Co Ltd 内視鏡撮像装置
US6236751B1 (en) 1998-09-23 2001-05-22 Xerox Corporation Automatic method for determining piecewise linear transformation from an image histogram
US7084868B2 (en) 2000-04-26 2006-08-01 University Of Louisville Research Foundation, Inc. System and method for 3-D digital reconstruction of an oral cavity from a sequence of 2-D images
US7146059B1 (en) 2003-03-05 2006-12-05 Massachusetts Institute Of Technology Method of performing fast bilateral filtering and using the same for the display of high-dynamic-range images
EP2107446A1 (en) 2008-04-04 2009-10-07 ETH Zurich System and a method for tracking input devices on LC-displays
WO2010026983A1 (ja) * 2008-09-03 2010-03-11 日本電気株式会社 画像処理装置、画像処理方法、及び画像処理プログラム
US20100268069A1 (en) * 2009-04-16 2010-10-21 Rongguang Liang Dental surface imaging using polarized fringe projection
WO2011093994A1 (en) * 2010-01-27 2011-08-04 Thomson Licensing High dynamic range (hdr) image synthesis with user input
KR101664123B1 (ko) 2010-06-14 2016-10-11 삼성전자주식회사 필터링에 기반하여 고스트가 없는 ｈｄｒｉ를 생성하는 장치 및 방법
KR101844549B1 (ko) * 2010-07-12 2018-04-02 쓰리세이프 에이/에스 질감 특징을 이용한 객체의 3ｄ 모형제작
JP5683888B2 (ja) 2010-09-29 2015-03-11 オリンパス株式会社 画像処理装置、画像処理方法、および画像処理プログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101588750A (zh) * 2007-01-17 2009-11-25 卡尔斯特里姆保健公司 用于早期检测龋齿的***
CN102509279A (zh) * 2011-11-02 2012-06-20 北京工业大学 根部欠照明舌图像的自适应暗部细节复现方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Fast bilateral filtering for the display of high-dynamic-range images;FREDO DURAND et al.;《ACM TRANSACTIONS ON GRAPHICS》;20020701;257-266

Also Published As

Publication number Publication date
JP2016538008A (ja) 2016-12-08
WO2015042939A1 (en) 2015-04-02
US10219703B2 (en) 2019-03-05
KR20160063338A (ko) 2016-06-03
US20160220118A1 (en) 2016-08-04
JP6478984B2 (ja) 2019-03-06
EP3052006A4 (en) 2017-05-10
EP3052006A1 (en) 2016-08-10
CN105682540A (zh) 2016-06-15

Similar Documents

Publication Publication Date Title
CN105682540B (zh) 用于使用hdr成像和高光去除进行口腔内成像的方法和***
US20210174477A1 (en) Domain specific image quality assessment
US11151753B2 (en) Generic framework for blurring of colors for teeth in generated images using height map
US11730569B2 (en) Generation of synthetic post treatment images of teeth
JP5729924B2 (ja) 齲蝕定量方法
ES2608406T3 (es) Procedimiento de detección de caries
US11083552B2 (en) Rendering of dental models
TWI696450B (zh) 資訊處理裝置、資訊處理系統、及資訊處理程式
JP6573907B2 (ja) ３ｄスキャンされるオブジェクトに関する色情報を収集するためのシステム、方法、装置、及びコンピュータ可読記憶媒体
US20210338392A1 (en) Rendering a dental model in an image
Hamer et al. Validation of image analysis techniques to measure skin aging features from facial photographs
WO2009091409A1 (en) Methods and systems for analyzing hard tissues
Kaur et al. Edge detection in digital panoramic dental radiograph using improved morphological gradient and MATLAB
CN110992464A (zh) 渲染牙模型
ES2889575T3 (es) Renderización de un modelo dental en una imagen
Wisotzky et al. A multispectral 3D-endoscope for cholesteatoma removal
JP7284814B2 (ja) 画像処理装置
CN114445388A (zh) 一种基于多光谱的图像识别方法、装置及存储介质
KR20220017830A (ko) 3차원 데이터 획득 방법, 장치 및 그 방법을 수행하는 프로그램이 저장된 컴퓨터 판독 가능 저장 매체
JP6721939B2 (ja) 蛍光画像解析装置
JP7449459B1 (ja) 物体を分析する方法及びシステム
EP4285864A1 (en) Three-dimensional scanning system and method for operating same
NAAJI et al. Software filtering applications for the analysis of dental images
Schweitzer et al. Mobile forensic photogrammetry in the field: Conservative approach to non-collaborative surfaces
JPWO2021111539A5 (ja) 光源装置、内視鏡システム及び制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20191231

Address after: England Atsushi

Patentee after: Rui Ke Dental Technology Co., Ltd.

Address before: New York State, USA

Patentee before: Karlstrim Health Care Company

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190716

Termination date: 20200930