JP2023548226A - 画像処理方法、電子機器および可読記憶媒体 - Google Patents
画像処理方法、電子機器および可読記憶媒体 Download PDFInfo
- Publication number
- JP2023548226A JP2023548226A JP2023527384A JP2023527384A JP2023548226A JP 2023548226 A JP2023548226 A JP 2023548226A JP 2023527384 A JP2023527384 A JP 2023527384A JP 2023527384 A JP2023527384 A JP 2023527384A JP 2023548226 A JP2023548226 A JP 2023548226A
- Authority
- JP
- Japan
- Prior art keywords
- image
- frame rate
- value
- cavity
- original image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 39
- 238000000034 method Methods 0.000 claims abstract description 39
- 239000002775 capsule Substances 0.000 claims abstract description 20
- 238000005070 sampling Methods 0.000 claims description 20
- 238000012545 processing Methods 0.000 claims description 10
- 238000004590 computer program Methods 0.000 claims description 9
- 238000001514 detection method Methods 0.000 claims description 4
- 238000003384 imaging method Methods 0.000 abstract description 16
- 230000000968 intestinal effect Effects 0.000 abstract description 15
- 238000010586 diagram Methods 0.000 abstract description 6
- 230000005540 biological transmission Effects 0.000 description 7
- 210000001035 gastrointestinal tract Anatomy 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000004422 calculation algorithm Methods 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 239000013598 vector Substances 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 210000002429 large intestine Anatomy 0.000 description 2
- 210000000214 mouth Anatomy 0.000 description 2
- 210000000813 small intestine Anatomy 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000001839 endoscopy Methods 0.000 description 1
- 210000003238 esophagus Anatomy 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000003902 lesion Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008855 peristalsis Effects 0.000 description 1
- 210000002784 stomach Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/041—Capsule endoscopes for imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/273—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the upper alimentary canal, e.g. oesophagoscopes, gastroscopes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30028—Colon; Small intestine
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Radiology & Medical Imaging (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Optics & Photonics (AREA)
- Biophysics (AREA)
- Animal Behavior & Ethology (AREA)
- Pathology (AREA)
- Public Health (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Gastroenterology & Hepatology (AREA)
- Endoscopes (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本発明は、画像処理方法、電子機器および可読記憶媒体を提供し、前記画像処理方法は、原画を取得し、現在の原画に空洞が含まれているかどうかを判断し、含まれている場合、元の撮影フレームレートに基づいて撮影フレームレートを増加させ、含まれていない場合、元の撮影フレームレートを維持して撮影を継続するステップを含む。本発明の画像処理方法、電子機器および可読記憶媒体は、カプセル内視鏡が実際に撮影した画像に応じてその撮影フレームレートを自動的に調整し、腸管腔画像の撮影を改善し、撮り逃がし確率を減少させるとともに、省電力で、カプセル内視鏡の使用効率を向上させるという目的を達成することができる。【選択図】図1
Description
(関連出願の相互参照)
本出願は、2020年11月6日に出願され、出願番号202011227075.5、発明名称が「画像処理方法、電子機器および可読記憶媒体」の中国特許出願の優先権を主張し、そのすべての内容は参照によって本出願に組み込まれる。
本出願は、2020年11月6日に出願され、出願番号202011227075.5、発明名称が「画像処理方法、電子機器および可読記憶媒体」の中国特許出願の優先権を主張し、そのすべての内容は参照によって本出願に組み込まれる。
本発明は、医療機器の画像処理の分野に関し、特に、画像処理方法、電子機器および可読記憶媒体に関する。
カプセル内視鏡は、消化管の検査に使用されることが多くなってきている。カプセル内視鏡は口から摂取され、口、食道、胃、小腸、大腸を通り、最終的に体外に排出される。カプセル内視鏡は通常、消化管の蠕動運動に合わせて受動的に動作し、この過程中、医師が患者の消化管の各部の健康状態を調べるために、カプセル内視鏡が一定のフレームレートで画像を撮影する。
カプセル内視鏡は、内蔵された電池で給電され、カメラモジュールで消化管の写真を撮影し、無線で体外に送信する。電池電力などの制限により、カプセル内視鏡の総検査時間は通常8~14時間、総撮影画像数は3~10万である。したがって、平均画像撮影フレームレートは1~2fps(frame per second)であり、短時間で4~8fps、さらに10~30fpsにも対応できる。
電力、撮影品質および伝送効率を考慮すると、既存のカプセル内視鏡は以下の問題がある。
問題1:撮影品質を考慮すると、撮影フレームレートが高いほど、映像が滑らかになり、撮り逃がしの確率も低くなるが、カプセル内視鏡は電池によって給電され、電力には限界があり、常時高フレームレートでの8~14時間の撮影には対応できない。
問題2:電池電力を考慮し、常時低い撮影フレームレートで撮影すると、撮り逃がしリスクがある。
問題3:腸管空洞の画像が少なすぎ、腸壁の画像が多すぎる。小腸や大腸の検査では、腸管空洞の構造や形態を観察することが病気の診断に非常に役立つが、腸道中のカプセル内視鏡は、レンズが腸壁に付着しやすく、視野が狭い一方で、腸道全体の状況を把握することができず、病変の発見が妨げられる。
現在、十分な電力を確保し、撮影フレームレートを高めると同時に、より多くの腸管空洞情報を把握することが求められており、上記問題を解決するための新しい画像処理方法が必要である。
本発明の目的は、上記技術的問題を解決するための画像処理方法、電子機器および可読記憶媒体を提供することである。
上記発明の目的の1つを果たすために、本発明の一実施形態は、画像処理方法を提供する。かかる方法は、原画を取得し、現在の原画に空洞が含まれているかどうかを判断し、含まれている場合、元の撮影フレームレートに基づいて撮影フレームレートを増加させ、含まれていない場合、前記元の撮影フレームレートを維持して撮影を継続するステップを含む。
本発明の一実施形態のさらなる改良として、前記現在の原画に空洞が含まれているかどうかを判断することは、
前記現在の原画をグレースケール画像に変換すること、
前記グレースケール画像を第1の二値化画像に変換すること、
前記第1の二値化画像に基づいて、暗黒画素の各連結領域を取得し、前記暗黒画素の数が予め設定された第1の閾値よりも大きい前記暗黒画素の前記連結領域の総数をカウントすることであって、前記暗黒画素はグレースケール値が小さい画素点であること、
カウントによって得られた前記暗黒画素の前記連結領域の総数に基づいて前記現在の原画に空洞が含まれているかどうかを確認することを含む。
前記現在の原画をグレースケール画像に変換すること、
前記グレースケール画像を第1の二値化画像に変換すること、
前記第1の二値化画像に基づいて、暗黒画素の各連結領域を取得し、前記暗黒画素の数が予め設定された第1の閾値よりも大きい前記暗黒画素の前記連結領域の総数をカウントすることであって、前記暗黒画素はグレースケール値が小さい画素点であること、
カウントによって得られた前記暗黒画素の前記連結領域の総数に基づいて前記現在の原画に空洞が含まれているかどうかを確認することを含む。
本発明の一実施形態のさらなる改良として、前記グレースケール画像を前記第1の二値化画像に変換することは、前記グレースケール画像の最大グレースケール値と最小グレースケール値に基づいて、前記グレースケール画像を二値化処理して前記第1の二値化画像を形成することを含む。
本発明の一実施形態のさらなる改良として、前記グレースケール画像の前記最大グレースケール値と前記最小グレースケール値に基づいて、前記グレースケール画像を二値化処理して前記第1の二値化画像を形成することは、具体的に、
前記グレースケール画像中の画素点の前記グレースケール値がグレースケール閾値よりも大きい場合、この画素点の値を前記第1の二値化画像において第1の値で表し、前記グレースケール画像中の画素点の前記グレースケール値が前記グレースケール閾値以下である場合、この画素点の値を前記第1の二値化画像において第2の値で表すことであって、前記第1の値と前記第2の値は異なること、
前記グレースケール閾値はm1=R×maxv+(1‐R)×minv、ここで、Rは定数であるスケールファクターを示し、maxvは前記グレースケール画像中の前記最大グレースケール値を示し、minvは前記グレースケール画像中の前記最小グレースケール値を示すことを含む。
前記グレースケール画像中の画素点の前記グレースケール値がグレースケール閾値よりも大きい場合、この画素点の値を前記第1の二値化画像において第1の値で表し、前記グレースケール画像中の画素点の前記グレースケール値が前記グレースケール閾値以下である場合、この画素点の値を前記第1の二値化画像において第2の値で表すことであって、前記第1の値と前記第2の値は異なること、
前記グレースケール閾値はm1=R×maxv+(1‐R)×minv、ここで、Rは定数であるスケールファクターを示し、maxvは前記グレースケール画像中の前記最大グレースケール値を示し、minvは前記グレースケール画像中の前記最小グレースケール値を示すことを含む。
本発明の一実施形態のさらなる改良として、カウントによって得られた前記暗黒画素の前記連結領域の総数に基づいて、前記現在の原画に空洞が含まれているかどうかを確認することは、具体的に、
前記暗黒画素の前記連結領域の総数が0である場合、前記現在の原画に空洞が含まれていないことを確認すること、
前記暗黒画素の前記連結領域の総数が0から第1のインデックス閾値の間である場合、前記現在の原画に空洞が含まれていることを確認すること、
前記暗黒画素の前記連結領域の総数が前記第1のインデックス閾値以上である場合、前記現在の原画の誤認識を確認することを含む。
前記暗黒画素の前記連結領域の総数が0である場合、前記現在の原画に空洞が含まれていないことを確認すること、
前記暗黒画素の前記連結領域の総数が0から第1のインデックス閾値の間である場合、前記現在の原画に空洞が含まれていることを確認すること、
前記暗黒画素の前記連結領域の総数が前記第1のインデックス閾値以上である場合、前記現在の原画の誤認識を確認することを含む。
本発明の一実施形態のさらなる改良として、前記現在の原画に空洞が含まれているかどうかを判断することは、
前記現在の原画を深度画像に変換することであって、前記深度画像中の各深度値は前記原画中の各画素点に対応する検出対象物のカプセル内視鏡に対する距離であること、
前記深度画像を第2の二値化画像に変換すること、
前記第2の二値化画像に基づいて、明るい画素の各連結領域を取得し、前記明るい画素の数が予め設定された第2の閾値よりも大きい前記明るい画素の前記連結領域の総数をカウントすることであって、前記明るい画素は距離が遠い画素点であること、
カウントによって得られた前記明るい画素の前記連結領域の総数に基づいて、前記現在の原画に空洞が含まれているかどうかことを確認することを含む。
前記現在の原画を深度画像に変換することであって、前記深度画像中の各深度値は前記原画中の各画素点に対応する検出対象物のカプセル内視鏡に対する距離であること、
前記深度画像を第2の二値化画像に変換すること、
前記第2の二値化画像に基づいて、明るい画素の各連結領域を取得し、前記明るい画素の数が予め設定された第2の閾値よりも大きい前記明るい画素の前記連結領域の総数をカウントすることであって、前記明るい画素は距離が遠い画素点であること、
カウントによって得られた前記明るい画素の前記連結領域の総数に基づいて、前記現在の原画に空洞が含まれているかどうかことを確認することを含む。
本発明の一実施形態のさらなる改良として、グレースケール画像を第1の二値化画像に変換し、前記深度画像を前記第2の二値化画像に変換することは、
前記深度画像中の画素点の深度値が予め設定された深度閾値よりも大きい場合、この画素点の値を前記第2の二値化画像において第3の値で表し、前記グレースケール画像中の画素点の前記グレースケール値が予め設定された深度閾値以下である場合、この画素点の値を前記第2の二値化画像において第4の値で表すことであって、前記第3の値と前記第4の値は異なることを含む。
前記深度画像中の画素点の深度値が予め設定された深度閾値よりも大きい場合、この画素点の値を前記第2の二値化画像において第3の値で表し、前記グレースケール画像中の画素点の前記グレースケール値が予め設定された深度閾値以下である場合、この画素点の値を前記第2の二値化画像において第4の値で表すことであって、前記第3の値と前記第4の値は異なることを含む。
本発明の一実施形態のさらなる改良として、カウントによって得られた前記明るい画素の前記連結領域の総数に基づいて、前記現在の原画に空洞が含まれているかどうかを確認することは、具体的に、
前記明るい画素の前記連結領域の総数が0である場合、前記現在の原画に空洞が含まれていないことを確認すること、
前記明るい画素の前記連結領域の総数が0から第2のインデックス閾値の間である場合、前記現在の原画に空洞が含まれていることを確認すること、
前記明るい画素の前記連結領域の総数が前記第2のインデックス閾値以上である場合、前記現在の原画の誤認識を確認することを含む。
前記明るい画素の前記連結領域の総数が0である場合、前記現在の原画に空洞が含まれていないことを確認すること、
前記明るい画素の前記連結領域の総数が0から第2のインデックス閾値の間である場合、前記現在の原画に空洞が含まれていることを確認すること、
前記明るい画素の前記連結領域の総数が前記第2のインデックス閾値以上である場合、前記現在の原画の誤認識を確認することを含む。
本発明の一実施形態のさらなる改良として、前記含まれている場合、元の撮影フレームレートに基づいて撮影フレームレートを増加させることは、具体的に、
前記現在の原画に空洞が含まれていることを確認する場合、空洞の総面積を原画に対応する空洞インデックスとして使用すること、
前記空洞インデックスに応じて前記撮影フレームレートを調整し、前記空洞インデックスが大きいほど、前記撮影フレームレートが高くなることを含む。
前記現在の原画に空洞が含まれていることを確認する場合、空洞の総面積を原画に対応する空洞インデックスとして使用すること、
前記空洞インデックスに応じて前記撮影フレームレートを調整し、前記空洞インデックスが大きいほど、前記撮影フレームレートが高くなることを含む。
本発明の一実施形態のさらなる改良として、前記現在の原画に空洞が含まれている場合、前記元の撮影フレームレートに基づいて前記撮影フレームレートを増加させた後、前記画像処理方法は、
前記元の撮影フレームレートに応じて隣接する画像のサンプリング出力間隔時間tを算出すること、
取得した最初の原画から開始し、距離間隔時間tごとに1枚の原画をサンプリングすること、
各サンプリング後に、現在サンプリングされた原画に基づいて、それに空洞が含まれているかどうかを判断することをさらに含む。
前記元の撮影フレームレートに応じて隣接する画像のサンプリング出力間隔時間tを算出すること、
取得した最初の原画から開始し、距離間隔時間tごとに1枚の原画をサンプリングすること、
各サンプリング後に、現在サンプリングされた原画に基づいて、それに空洞が含まれているかどうかを判断することをさらに含む。
本発明の一実施形態のさらなる改良として、前記現在の原画中に空洞が含まれているかどうかを判断した後、前記画像処理方法は、
前記元の撮影フレームレートに応じて隣接する画像のサンプリング出力間隔時間tを算出すること、
取得した最初の原画から開始し、距離間隔時間tごとに1枚の原画をサンプリングすること、
各サンプリング後に、現在サンプリングされた原画と予め記憶された画像との類似性を比較すること、
類似している場合、前記現在サンプリングされた原画を破棄すること、
類似していない場合、前記現在サンプリングされた原画を出力し、前記予め記憶された画像を前記現在サンプリングされた原画に置き換えることをさらに含む。
前記元の撮影フレームレートに応じて隣接する画像のサンプリング出力間隔時間tを算出すること、
取得した最初の原画から開始し、距離間隔時間tごとに1枚の原画をサンプリングすること、
各サンプリング後に、現在サンプリングされた原画と予め記憶された画像との類似性を比較すること、
類似している場合、前記現在サンプリングされた原画を破棄すること、
類似していない場合、前記現在サンプリングされた原画を出力し、前記予め記憶された画像を前記現在サンプリングされた原画に置き換えることをさらに含む。
上記発明の目的の1つを果たすために、本発明の一実施形態は、メモリとプロセッサを含む電子機器を提供し、前記メモリに前記プロセッサ上で実行可能なコンピュータープログラムが記憶され、前記プロセッサは前記プログラムを実行すると画像処理方法におけるステップを実施し、ここで、前記画像処理方法は、原画を取得し、現在の原画に空洞が含まれているかどうかを判断し、含まれている場合、元の撮影フレームレートに基づいて撮影フレームレートを増加させ、含まれていない場合、元の撮影フレームレートを維持して撮影を継続することを含む。
上記発明の目的の1つを果たすために、本発明の一実施形態は、コンピュータープログラムが記憶されたコンピューター可読記憶媒体を提供し、前記コンピュータープログラムはプロセッサによって実行されると画像処理方法におけるステップを実施し、ここで、前記画像処理方法は、原画を取得し、現在の原画に空洞が含まれているかどうかを判断し、含まれている場合、元の撮影フレームレートに基づいて撮影フレームレートを増加させ、含まれていない場合、元の撮影フレームレートを維持して撮影を継続することを含む。
従来技術と比較すると、本発明は以下の有益な効果を有する。本発明の画像処理方法、電子機器および可読記憶媒体は、カプセル内視鏡が実際に撮影した画像に応じてその撮影フレームレートを自動的に調整し、腸管空洞画像の撮影を改善し、撮り逃がし確率を減少させると同時に、省電力で、カプセル内視鏡の使用効率を向上させることができる。
以下、添付図面に示す具体的な実施形態を参照しながら本発明を詳細に説明する。しかし、これらの実施形態は本発明を限定するものではなく、当業者が行う、これらの実施形態に基づいて得られた構造、方法、または機能の変更は、すべて本発明の保護範囲内に含まれる。
図1に示すように、本発明の第1の実施形態は画像処理方法を提供し、その方法は、以下のステップを含む。
S1、原画を取得し、現在の原画に空洞が含まれているかどうかを判断し、含まれている場合、元の撮影フレームレートを基に撮影フレームレートを増加させ、含まれていない場合、元の撮影フレームレートを維持して撮影を継続する。
本発明の好ましい実施形態では、以下の2つの方法によって原画中に空洞が含まれているかどうかを識別する。
本発明の第1の実施形態(方法1)では、図2に示すように、現在の原画に空洞が含まれているかどうかを判断することは、ステップS11:現在の原画をグレースケール画像に変換すること、ステップS12:グレースケール画像を第1の二値化画像に変換すること、ステップS13:前記第1の二値化画像に基づいて、暗黒画素の各連結領域を取得し、暗黒画素の数が予め設定された第1の閾値よりも大きい暗黒画素の連結領域の総数をカウントすることであって、前記暗黒画素はグレースケール値が小さい画素点であること、ステップS14:カウントによって得られた暗黒画素の連結領域の総数に基づいて、現在の原画に空洞が含まれているかどうかを確認すること、を含む。
ステップS11において、原画はRGBフォーマットのカラー画像であり、カラー画像をグレースケール画像に変換することは従来技術であり、ここではこれ以上の説明を省略する。図3に示すように、原画をグレースケール画像に変換した後、グレースケール画像中の各画素点は固有のグレースケール値を有する。
ステップS12において、グレースケール画像を第1の二値化画像に変換する方法は様々であり、本発明の好ましい実施形態では、グレースケール画像の最大グレースケール値と最小グレースケール値に基づいて、前記グレースケール画像を二値化処理して第1の二値化画像を形成する。具体的に、前記最大グレースケール値と最小グレースケール値に基づいて、グレースケール閾値を算出し、グレースケール画像中の画素点のグレースケール値がグレースケール閾値よりも大きい場合、この画素点の値を第1の二値化画像において第1の値で表し、グレースケール画像中の画素点のグレースケール値がグレースケール閾値以下である場合、この画素点の値を第1の二値化画像において第2の値で表す。前記第1の値と前記第2の値は異なる。本発明の好ましい実施形態では、前記グレースケール閾値はm1=R×maxv+(1‐R)×minv、ここで、Rは定数であるスケールファクターを示し、maxvはグレースケール画像中の最大グレースケール値を示し、minvはグレースケール画像中の最小グレースケール値を示す。図3に示すように、本発明の一具体例では、R=0.2と設定され、グレースケール画像を分析して取得されるmaxvとminvの値は、maxv=255、minv=0である。このように、上記の式によってm1の値を51と算出した。さらに、グレースケール画像中の各画素点のグレースケール値を、算出したグレースケール閾値m1と順次比較した後、図4に示す第1の二値化画像を形成する。
なお、第1の二値化画像では、画像中の各画素点は2つの値のみで置き換えられ、2つの値は必要に応じて選択でき、本発明の具体例では、2つの値はそれぞれ「0」と「255」であり、「0」は暗黒画素を示し、「255」は明るい画素を示す。本発明の他の実施形態では、「0」と「255」はそれぞれ明るい画素と暗黒画素を示してもよく、2つの値は必要に応じて変更でき、例えば「0」と「1」に変更するか、または他の値に変更してもよく、ここではこれ以上の説明を省略する。
ステップS12について、腸管空洞を撮影する時、暗いものと明るいものとが存在するので、そのシーンはグラデーションとなっている。そのため、通常暗いシーンが腸管空洞であると識別される。そして、二値化処理は腸管空洞領域を切り離すことができる。この具体例では、明るさがグレースケール閾値未満であるものを0、グレースケール閾値を超えるものを255とする。
ステップS13において、暗黒画素の各連結領域について暗黒画素の数をカウントし、第1の閾値と比較して、免れた暗黒画素の連結領域を除外する。
前記第1の閾値は一定値であり、その大きさは必要に応じて設定すればよい。
図5に示すように、図5は本発明の別の具体例で得られた第1の二値化画像を示し、図4および図5に示す具体例では、前記第1の閾値を4とし、図4に示す具体例では、比較した後、算出用の残りの暗黒画素の連結領域は1つである。図5に示す具体例について、3つの暗黒画素の連結領域中の画素の数はいずれも第1の閾値未満であり、このように、比較した後、図5に示す具体例では算出用の残りの暗黒画素の連結領域は0である。
好ましくは、ステップS14では、暗黒画素の連結領域の総数が0である場合、現在の原画に空洞が含まれていないことを確認し、暗黒画素の連結領域の総数が0から第1のインデックス閾値の間である場合、現在の原画に空洞が含まれていることを確認し、暗黒画素の連結領域の総数が第1のインデックス閾値以上である場合、現在の原画の誤認識を確認する。
前記第1のインデックス閾値は一定値であり、その大きさは必要に応じて設定すればよい。本発明の具体例では、画像中の空洞について、存在している場合、その数は通常1、2または3であり、それに対応して、前記第1のインデックス閾値は例えば4に設定される。
図6に示すように、本発明の第2の実施形態(方法2)では、現在の原画に空洞が含まれているかどうかを判断することは、ステップS21:現在の原画を深度画像に変換し、前記深度画像中の各深度値は原画中の各画素点に対応する検出対象物のカプセル内視鏡に対する距離であること、ステップS22:深度画像を第2の二値化画像に変換すること、ステップS23:前記第2の二値化画像に基づいて、明るい画素の各連結領域を取得し、明るい画素の数が予め設定された第2の閾値よりも大きい明るい画素の連結領域の総数をカウントすることであって、前記明るい画素は距離が遠い画素点であること、ステップS24:カウントによって得られた明るい画素の連結領域の総数に基づいて、現在の原画に空洞が含まれているかどうかを確認すること、を含む。
ステップS21について、原画を深度画像に変換する方法は様々であり、従来技術であり、具体的に開示番号CN110335318Aの中国特許出願、発明名称「撮影システムに基づく消化管内の物体測定方法」を参照する。
ステップS22について、深度画像を第2の二値化画像に変換する方法は様々であり、本発明の一具体的な実施形態では、ステップS22は具体的に、深度画像中の画素点の深度値が予め設定された深度閾値よりも大きい場合、この画素点の値を第2の二値化画像において第3の値で表し、グレースケール画像中の画素点のグレースケール値が予め設定された深度閾値以下である場合、この画素点の値を第2の二値化画像において第4の値で表し、前記第3の値と前記第4の値は異なる。
前記予め設定された深度閾値は一定値であり、その大きさは必要に応じて設定すればよい。
図7に示すように、本発明の一具体例では、予め設定された深度閾値を19に設定し、その単位はmmである。さらに、深度画像中の各深度値を予め設定された深度閾値と順次比較した後、図8に示す第2の二値化画像を形成する。
なお、第2の二値化画像では、画像中の各画素点の深度値は2つの値のみで置き換えられ、それに対応して、2つの値は必要に応じて選択でき、本発明の具体例では、2つの値はそれぞれ「0」と「1」であり、「0」は画素点の深度値が小さいことを示し、「1」は画素点の深度値が大きいことを示し、つまり、距離が遠い画素点を表現する。本発明の他の実施形態では、「0」と「1」を入れ替えることも可能であり、2つの値は必要に応じて変更することもでき、例えば「0」と「255」に変更するか、または他の値に変更してもよく、ここではこれ以上の説明を省略する。
ステップS22について、腸管空洞を撮影するとき、距離が遠いものと近いものとが存在するので、そのシーンは多数の段階構造となっている。そのため、通常距離が遠いシーンが腸管空洞であると識別され、距離が近いシーンは通常腸壁に付着して撮影したものであると識別される。二値化処理は腸管空洞領域を切り離すことができる。この具体例では、距離が予め設定された深度閾値よりも大きいものを1、距離が予め設定された深度閾値未満のものを0とする。
ステップS23について、明るい画素の各連結領域に対して、その明るい画素の数をカウントし、第2の閾値と比較して、免れた明るい画素の連結領域を除外する。図8に示す具体例では、比較した後、算出用の残りの明るい画素の連結領域は1つである。
好ましくは、ステップS24について、明るい画素の連結領域の総数が0である場合、現在の原画に空洞が含まれていないことを確認し、明るい画素の連結領域の総数が0から第2のインデックス閾値の間である場合、現在の原画に空洞が含まれていることを確認し、明るい画素の連結領域の総数が第2のインデックス閾値以上である場合、現在の原画の誤認識を確認する。
前記第2のインデックス閾値は一定値であり、その大きさは必要に応じて設定すればよい。本発明の具体例では、画像中の空洞について、存在している場合、その数は通常1、2または3であり、それに対応して、前記第2のインデックス閾値は例えば4に設定される。
なお、上記の現在の原画中に空洞が含まれているかどうかを判断する2つの実施形態、つまり方法1と方法2は、どちらを選択してもよく、順次実行してもよく、または同時に実行してもよい。順次に実行する場合、まず方法1を実行してから方法2を実行する場合を例にすると、方法1で空洞が含まれていると判断したとき、方法2で検証し、方法2の結果を最終的な判断結果とする。同様に、まず方法2を実行してから方法1を実行する場合を例にすると、方法2で空洞が含まれていると判断したとき、方法1で検証し、方法1の結果を最終的な判断結果とする。2つの方法を同時に実行するとき、方法1と方法2とでいずれも空洞が含まれていると判断したとき、空洞が含まれていることを確認し、そうでなければ、結果として、現在の原画の誤認識であると確認する。
好ましくは、ステップS1について、空洞が含まれていることを確認すると、元の撮影フレームレートに基づいて撮影フレームレートを増加させ、具体的に、現在の原画に空洞が含まれていることを確認すると、空洞の特定に用いた連結領域の総面積を原画に対応する空洞インデックスとして使用し、前記空洞インデックスに従って撮影フレームレートを調整し、前記空洞インデックスが大きいほど、前記撮影フレームレートを高くする。
理解を容易にするために、図4に示す具体例を参照して説明する。例えば、各画素点の面積を1とする場合、図4に示す具体例では、その暗黒画素の連結領域に含まれる画素点は6である。よって、その面積の値は6となる。つまりこの原画に対応する空洞インデックスは6である。
さらに、画像撮影の前に、フレームレートと空洞インデックスのマッピング関係を設定する。例えば、元のベースフレームレートは2fpsであり、空洞インデックスは4である場合、フレームレートは4fpsであり、空洞インデックスは5である場合、フレームレートは5fpsであり、空洞インデックスは6である場合、フレームレートは6fpsであり、このように、空洞インデックスとフレームレートのマッピング関係は必要に応じて設定すればよく、ここではこれ以上の説明を省略する。
上記マッピング関係に対応して、図4に示す具体例では空洞が含まれ、かつ空洞インデックスは6であるので、撮影フレームレートを高める必要があり、調整した後の撮影フレームレートは6fpsである。
さらに、図9に示すように、本発明の好ましい実施形態では、現在の原画中に空洞が含まれているかどうかを判断した後、前記方法は、ステップP1:元の撮影フレームレートに従って隣接する画像のサンプリング出力間隔時間tを算出すること、ステップP2:取得した最初の原画から開始し、距離間隔時間tごとに1枚の原画をサンプリングすること、ステップP3:各サンプリング後に、現在サンプリングされた原画と予め記憶された画像との類似性を比較し、類似している場合、現在サンプリングされた原画を破棄し、類似していない場合、現在サンプリングされた原画を出力し、予め記憶された画像を現在サンプリングされた原画に置き換えることをさらに含む。このように、撮影過程中に多数の冗長画像が生成されるが、出力過程中、画像を選択的に出力し、つまりより多くの重複画像の出力を回避し、さらに医師の読影効率を向上させ、医師の読影負担を軽減することができる。
なお、上記ステップP1からステップP3は、説明上の便宜のために付加されたものに過ぎず、実際には、記述された順序は各ステップの実行順序を表すものではないことに留意されたい。
ステップP1について、t=1/f(s)、fは元の撮影フレームレートを示し、sは時間単位「秒」である。
ステップP2について、サンプリング間隔時間はtであり、つまり、元の撮影フレームレートが変更されていなければ、撮影された各画像はいずれもサンプリングされる。撮影フレームレートを上げると、最初の画像から間隔時間tごとに撮影された画像のみがサンプリングされ、つまり撮影フレームレートを上げても、同じ時間内でのサンプリング総数は変わらない。このように、サンプリング効率を向上させることができる。
なお、ここでのサンプリングとは処理スレッドが所定時間間隔で撮影画像をサンプリングし、さらに、サンプリングされた画像のみに対して類似性の比較を行うことを意味する。このように、類似性の比較を選択的に行い、さらに画像を選択的に出力し、ひいては読影効率を向上させることができる。
ステップP3について、類似性の比較は従来技術の汎用アルゴリズムであり、通常原画の特徴を抽出し、特徴ベクトルをカウントし、最終的に類似性判断を行う。
例えば、LBP(Local Binary Pattern、ローカルバイナリーパターン)の画像類似性アルゴリズムが用いられ、このアルゴリズムの主なステップは以下のとおりである。画像のLBP情報を抽出し、いくつかの領域でヒストグラムをカウントし、次に画像情報の特徴ベクトルを記述し、その後特徴ベクトルの大きさに応じて2枚の画像が類似しているかどうかを判断する。ここではこれ以上の説明を省略する。
カプセル内視鏡の画像撮影過程中、カプセル内視鏡が回転する。複数の角度で撮影された画像が類似性判断およびユーザの主観に与える影響を避けるために、類似性の比較の前に、比較する画像と同じ撮影角度や姿勢になるように、カプセル内視鏡の姿勢に応じて画像を回転させる。このようすれば、類似性判断結果がより正確になる。
図10に示すように、本発明の一具体例では、独立したスレッドを用いて上記ステップを実行し、具体的に、撮影スレッド、処理スレッドおよび伝送スレッドという3つの独立したスレッドを設定し、各スレッドは互いに干渉することなく独立して実行される。このようにすれば、空洞に応じてフレームレートを調整し、冗長画像の伝送を効果的に低減することができると同時に、冗長画像の伝送を低減する際に、フレームレートの調整による作業負荷の増加がない。
具体的に、前記撮影スレッドは設定されたフレームレートに従って画像を撮影し、空洞が検出されないとき、常に元の撮影フレームレートで画像を撮影し、つまり間隔時間tごとに、1枚の画像を撮影し、同時に、処理スレッドは間隔時間tごとに1枚の画像をサンプリングする。フレームレートを高めた後、撮影スレッドは調整後のフレームレートに従って画像を撮影し、この具体例では、撮影フレームレートは元のフレームレートから増加し、つまり間隔t1ごとに1枚の画像を撮影し(t1<t)、同時に、処理スレッドは同様に間隔時間tごとに1枚の画像をサンプリングする。撮影スレッド上のバーは画像を示し、ここで、比較的高いバーは元の撮影フレームレートに従って算出してサンプリングされた画像を示す。
伝送スレッドは、サンプリングされた画像と予め記憶された画像との類似性の比較のみを行い、ここで、予め記憶された最初の画像はサンプリングされた最初の画像であり、その後の予め記憶された画像は類似性の結果に応じて変更される。上記から分かるように、ここで、空洞が識別されたかどうかにかかわらず、処理スレッドは常にtの時間間隔でサンプリングし、伝送スレッドを介してサンプリングされた画像に対してICD(Intestinal Cavity Detection、腸管空洞識別)およびISJ(Image Similarity Judgment、画像類似性比較)処理を行う。
好ましくは、ステップS1について、空洞が含まれていることを確認すると、元の撮影フレームレートに基づいて撮影フレームレートを増加させた後、前記方法は、元の撮影フレームレートに従って隣接する画像のサンプリング出力間隔時間tを算出し、取得した最初の原画から開始し、距離間隔時間tごとに1枚の原画をサンプリングし、各サンプリング後にステップS1を繰り返して実行する。つまり、現在サンプリングされた原画に基づいて、それに空洞が含まれているかどうかを判断する。
空洞があると識別した後、撮影スレッドの撮影フレームレートを高めるが、フレームレートの向上により得られた画像は算出処理されることなくすべて伝送され、空洞がないことを識別した後、撮影フレームレートを変更せず、同時に、伝送スレッドはサンプリング画像の類似性の比較を行い、現在の画像が類似画像であると判断すると、この画像を伝送することなく破棄する。
それに対応して、伝送スレッド中のある枝路によりサンプリングされた原画に対して類似性の比較を行い、比較結果に応じて現在サンプリングされた原画を出力するかどうかを決定し、別の枝路により原画に対して空洞識別を行い、識別結果に応じて撮影フレームレートを調整する。
もちろん、本発明の他の実施形態では、増加した後のフレームレートに従って隣接する画像のサンプリング出力間隔時間を算出し、サンプリングされた画像に対して類似性の比較を行って出力し、またはサンプリングされた画像に対して空洞識別を行ってフレームレートを調整してもよく、ここではこれ以上の説明を省略する。
さらに、本発明の一実施形態が提供する電子機器は、メモリとプロセッサを含み、前記メモリに前記プロセッサ上で実行可能なコンピュータープログラムが記憶され、前記プロセッサは前記プログラムを実行すると前記画像処理方法におけるステップを実施する。
さらに、本発明の一実施形態が提供するコンピューター可読記憶媒体は、コンピュータープログラムが記憶され、前記コンピュータープログラムはプロセッサによって実行されると前記画像処理方法におけるステップを実施する。
以上のように、本発明の画像処理方法、電子機器および可読記憶媒体は、既存のハードウェア構造で取得した画像に基づいて、追加のハードウェア支援なしに、ハードウェアの演算能力の要求度合が低く、カプセル内視鏡が予め設定した検出位置に到達するかどうかを簡単で効率的に確認することができると同時に、画像の取得過程中、極めて低い等価フレームレートで画像データを取得し、電池電力を大きく節約し、カプセル内視鏡の使用効率を向上させる。
なお、本明細書は実施形態に従って説明されるが、各実施形態は1つの独立した技術的解決策のみを含むわけではなく、明細書を明確にするためにのみ説明され、当業者は、明細書全体を考慮すべきであり、各実施形態における技術的解決策は適切に組み合わせて当業者が理解できる他の実施形態になろう。
上記に示した一連の詳細な説明は、本発明の実現可能な実施形態の具体的な説明に過ぎず、本発明の保護範囲を限定するものではなく、本発明の技術精神から逸脱することなくなされた等価の実施形態または変形は、すべて本発明の保護範囲に含まれるものとする。
Claims (13)
- 原画を取得し、現在の原画に空洞が含まれているかどうかを判断し、含まれている場合、元の撮影フレームレートに基づいて撮影フレームレートを増加させ、含まれていない場合、前記元の撮影フレームレートを維持して撮影を継続するステップを含む、ことを特徴とする画像処理方法。
- 前記現在の原画に空洞が含まれているかどうかを判断することは、
前記現在の原画をグレースケール画像に変換すること、
前記グレースケール画像を第1の二値化画像に変換すること、
前記第1の二値化画像に基づいて、暗黒画素の各連結領域を取得し、前記暗黒画素の数が予め設定された第1の閾値よりも大きい前記暗黒画素の前記連結領域の総数をカウントすることであって、前記暗黒画素は前記グレースケール画像中のグレースケール値がグレースケール閾値以下の画素点であること、
カウントで得られた前記暗黒画素の前記連結領域の総数に基づいて前記現在の原画に空洞が含まれているかどうかを確認すること、を含む、ことを特徴とする請求項1に記載の画像処理方法。 - 前記グレースケール画像を前記第1の二値化画像に変換することは、前記グレースケール画像の最大グレースケール値と最小グレースケール値に基づいて、前記グレースケール画像を二値化処理して前記第1の二値化画像を形成することを含む、ことを特徴とする請求項2に記載の画像処理方法。
- 前記グレースケール画像の前記最大グレースケール値と前記最小グレースケール値に基づいて、前記グレースケール画像を二値化処理して前記第1の二値化画像を形成することは、具体的に、
前記グレースケール画像中の画素点の前記グレースケール値が前記グレースケール閾値よりも大きい場合、この画素点の値を前記第1の二値化画像において第1の値で表し、前記グレースケール画像中の画素点の前記グレースケール値が前記グレースケール閾値以下である場合、この画素点の値を前記第1の二値化画像において第2の値で表すことであって、前記第1の値と前記第2の値は異なること、
前記グレースケール閾値はm1=R×maxv+(1‐R)×minvであり、Rは定数であるスケールファクターを示し、maxvは前記グレースケール画像中の前記最大グレースケール値を示し、minvは前記グレースケール画像中の前記最小グレースケール値を示すこと、を含むことを特徴とする請求項3に記載の画像処理方法。 - カウントによって得られた前記暗黒画素の前記連結領域の総数に基づいて、前記現在の原画に空洞が含まれているかどうかを確認することは、具体的に、
前記暗黒画素の前記連結領域の総数が0である場合、前記現在の原画に空洞が含まれていないことを確認すること、
前記暗黒画素の前記連結領域の総数が0から第1のインデックス閾値の間である場合、前記現在の原画に空洞が含まれていることを確認すること、
前記暗黒画素の前記連結領域の総数が前記第1のインデックス閾値以上である場合、前記現在の原画の誤認識を確認すること、を含む、ことを特徴とする請求項2に記載の画像処理方法。 - 前記現在の原画に空洞が含まれているかどうかを判断することは、
前記現在の原画を深度画像に変換することであって、前記深度画像中の各深度値は、前記原画中の各画素点に対応する検出対象物のカプセル内視鏡に対する距離であること、
前記深度画像を第2の二値化画像に変換すること、
前記第2の二値化画像に基づいて、明るい画素の各連結領域を取得し、前記明るい画素の数が予め設定された第2の閾値よりも大きい前記明るい画素の前記連結領域の総数をカウントすることであって、前記明るい画素は前記深度画像中の深度値が予め設定された深度閾値よりも大きい画素点であること、
カウントによって得られた前記明るい画素の前記連結領域の総数に基づいて、前記現在の原画に空洞が含まれているかどうかを確認すること、を含む、ことを特徴とする請求項1に記載の画像処理方法。 - 前記深度画像を前記第2の二値化画像に変換することは、
前記深度画像中の画素点の深度値が予め設定された深度閾値よりも大きい場合、この画素点の値を前記第2の二値化画像において第3の値で表し、前記グレースケール画像中の画素点の前記グレースケール値が予め設定された深度閾値以下である場合、この画素点の値を前記第2の二値化画像において第4の値で表すことであって、前記第3の値と前記第4の値は異なること、を含む、ことを特徴とする請求項6に記載の画像処理方法。 - カウントによって得られた前記明るい画素の前記連結領域の総数に基づいて、前記現在の原画に空洞が含まれているかどうかを確認することは、具体的に、
前記明るい画素の前記連結領域の総数が0である場合、前記現在の原画に空洞が含まれていないことを確認すること、
前記明るい画素の前記連結領域の総数が0から第2のインデックス閾値の間である場合、前記現在の原画に空洞が含まれていることを確認すること、
前記明るい画素の前記連結領域の総数が前記第2のインデックス閾値以上である場合、前記現在の原画の誤認識を確認すること、を含む、ことを特徴とする請求項6に記載の画像処理方法。 - 前記含まれている場合、元の撮影フレームレートに基づいて撮影フレームレートを増加させることは、具体的に、
前記現在の原画に空洞が含まれていることを確認する場合、空洞の特定に用いた前記連結領域の総面積を原画に対応する空洞インデックスとして使用すること、
前記空洞インデックスに応じて前記撮影フレームレートを調整し、前記空洞インデックスが大きいほど、前記撮影フレームレートが高くなること、を含む、ことを特徴とする請求項1に記載の画像処理方法。 - 前記現在の原画に空洞が含まれている場合、前記元の撮影フレームレートに基づいて前記撮影フレームレートを増加させた後、前記画像処理方法は、
前記元の撮影フレームレートに従って隣接する画像のサンプリング出力間隔時間tを算出すること、
取得した最初の原画から開始し、距離間隔時間tごとに1枚の原画をサンプリングすること、
各サンプリング後に、現在サンプリングされた原画に基づいて、それに空洞が含まれているかどうかを判断すること、をさらに含む、ことを特徴とする請求項1~9のいずれか1項に記載の画像処理方法。 - 前記現在の原画中に空洞が含まれているかどうかを判断した後、前記画像処理方法は、
前記元の撮影フレームレートに従って隣接する画像のサンプリング出力間隔時間tを算出すること、
取得した最初の原画から開始し、距離間隔時間tごとに1枚の原画をサンプリングすること、
各サンプリング後に、現在サンプリングされた原画と予め記憶された画像との類似性を比較すること、
類似している場合、前記現在サンプリングされた原画を破棄すること、
類似していない場合、前記現在サンプリングされた原画を出力し、前記予め記憶された画像を前記現在サンプリングされた原画に置き換えること、をさらに含む、ことを特徴とする請求項1~9のいずれか1項に記載の画像処理方法。 - メモリとプロセッサを含み、前記メモリに前記プロセッサ上で実行可能なコンピュータープログラムが記憶される電子機器であって、前記プロセッサは前記プログラムを実行すると画像処理方法におけるステップを実行し、ここで、前記画像処理方法は、
原画を取得し、現在の原画に空洞が含まれているかどうかを判断し、含まれている場合、元の撮影フレームレートに基づいて撮影フレームレートを増加させ、含まれていない場合、元の撮影フレームレートを維持して撮影を継続することを含む、ことを特徴とする電子機器。 - コンピュータープログラムが記憶されたコンピューター可読記憶媒体であって、前記コンピュータープログラムがプロセッサによって実行されると画像処理方法におけるステップを実施し、ここで、前記画像処理方法は、
原画を取得し、現在の原画に空洞が含まれているかどうかを判断し、含まれている場合、元の撮影フレームレートに基づいて撮影フレームレートを増加させ、含まれていない場合、元の撮影フレームレートを維持して撮影を継続することを含む、ことを特徴とするコンピューター可読記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011227075.5 | 2020-11-06 | ||
CN202011227075.5A CN112022067B (zh) | 2020-11-06 | 2020-11-06 | 图像处理方法、电子设备及可读存储介质 |
PCT/CN2021/128057 WO2022095839A1 (zh) | 2020-11-06 | 2021-11-02 | 图像处理方法、电子设备及可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023548226A true JP2023548226A (ja) | 2023-11-15 |
Family
ID=73572757
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023527384A Pending JP2023548226A (ja) | 2020-11-06 | 2021-11-02 | 画像処理方法、電子機器および可読記憶媒体 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20230419482A1 (ja) |
EP (1) | EP4241650A1 (ja) |
JP (1) | JP2023548226A (ja) |
KR (1) | KR20230083326A (ja) |
CN (1) | CN112022067B (ja) |
WO (1) | WO2022095839A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112022067B (zh) * | 2020-11-06 | 2021-01-12 | 安翰科技(武汉)股份有限公司 | 图像处理方法、电子设备及可读存储介质 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07175925A (ja) * | 1993-12-17 | 1995-07-14 | Mitsubishi Electric Corp | 特徴量算出装置及び特徴量算出方法 |
GB2396406A (en) * | 2002-12-17 | 2004-06-23 | Qinetiq Ltd | Image analysis |
JP4547293B2 (ja) * | 2005-04-04 | 2010-09-22 | オリンパス株式会社 | 画像表示装置 |
KR100876673B1 (ko) * | 2007-09-06 | 2009-01-07 | 아이쓰리시스템 주식회사 | 촬영 속도 조절이 가능한 캡슐형 내시경 |
CN101579227A (zh) * | 2009-03-19 | 2009-11-18 | 清华大学 | 一种图像采集存储***及方法 |
JP6603245B2 (ja) * | 2014-07-02 | 2019-11-06 | コヴィディエン リミテッド パートナーシップ | 肺のセグメント化のためのシステムおよび方法 |
CN106570930A (zh) * | 2016-10-08 | 2017-04-19 | 中国海洋大学 | 一种基于三维超体素描述的数字化生理生物体建模方法 |
WO2018084025A1 (ja) * | 2016-11-07 | 2018-05-11 | オリンパス株式会社 | カプセル型内視鏡、受信装置、カプセル型内視鏡の作動方法、及びカプセル型内視鏡の作動プログラム |
CN108615045B (zh) * | 2018-03-06 | 2022-07-12 | 重庆金山医疗技术研究院有限公司 | 筛选胶囊内镜拍摄的图像的方法、装置及设备 |
CN109325468B (zh) * | 2018-10-18 | 2022-06-03 | 广州智颜科技有限公司 | 一种图像处理方法、装置、计算机设备和存储介质 |
CN111345772B (zh) * | 2018-12-20 | 2022-06-10 | 重庆金山医疗技术研究院有限公司 | 一种调节图像采集帧率的方法及胶囊内窥镜*** |
CN109480746A (zh) * | 2019-01-14 | 2019-03-19 | 深圳市资福医疗技术有限公司 | 智能控制胶囊式内窥镜在消化道不同部位工作方法及装置 |
CN110335318B (zh) | 2019-04-28 | 2022-02-11 | 安翰科技(武汉)股份有限公司 | 一种基于摄像***的消化道内物体测量方法 |
CN110897594A (zh) * | 2019-12-05 | 2020-03-24 | 重庆金山医疗技术研究院有限公司 | 帧率调节方法、图像记录仪、胶囊式内窥镜及*** |
CN110897596A (zh) * | 2019-12-05 | 2020-03-24 | 重庆金山医疗技术研究院有限公司 | 自动调节胶囊拍摄速率的方法、内窥镜、记录仪及*** |
CN112022067B (zh) * | 2020-11-06 | 2021-01-12 | 安翰科技(武汉)股份有限公司 | 图像处理方法、电子设备及可读存储介质 |
-
2020
- 2020-11-06 CN CN202011227075.5A patent/CN112022067B/zh active Active
-
2021
- 2021-11-02 EP EP21888536.6A patent/EP4241650A1/en active Pending
- 2021-11-02 WO PCT/CN2021/128057 patent/WO2022095839A1/zh active Application Filing
- 2021-11-02 JP JP2023527384A patent/JP2023548226A/ja active Pending
- 2021-11-02 US US18/252,037 patent/US20230419482A1/en active Pending
- 2021-11-02 KR KR1020237015372A patent/KR20230083326A/ko active Search and Examination
Also Published As
Publication number | Publication date |
---|---|
EP4241650A1 (en) | 2023-09-13 |
CN112022067A (zh) | 2020-12-04 |
WO2022095839A1 (zh) | 2022-05-12 |
US20230419482A1 (en) | 2023-12-28 |
KR20230083326A (ko) | 2023-06-09 |
CN112022067B (zh) | 2021-01-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9324145B1 (en) | System and method for detection of transitions in an image stream of the gastrointestinal tract | |
US8055033B2 (en) | Medical image processing apparatus, luminal image processing apparatus, luminal image processing method, and programs for the same | |
Zhou et al. | Polyp detection and radius measurement in small intestine using video capsule endoscopy | |
US8768024B1 (en) | System and method for real time detection of villi texture in an image stream of the gastrointestinal tract | |
US9186051B2 (en) | Image processing device, computer-readable recording device, and image processing method | |
US7907775B2 (en) | Image processing apparatus, image processing method and image processing program | |
WO2007119297A1 (ja) | 医療用画像処理装置及び医療用画像処理方法 | |
WO2016110993A1 (ja) | 内視鏡システム、内視鏡装置及び内視鏡システムの制御方法 | |
US20130064436A1 (en) | Medical image processing apparatus and method of operating medical image processing apparatus | |
WO2020224153A1 (zh) | 一种基于深度学习和图像增强的nbi图像处理方法及其应用 | |
JP4749732B2 (ja) | 医用画像処理装置 | |
CN104203075B (zh) | 医疗用图像处理装置 | |
JP2023548226A (ja) | 画像処理方法、電子機器および可読記憶媒体 | |
Ghosh et al. | Block based histogram feature extraction method for bleeding detection in wireless capsule endoscopy | |
JP2006166939A (ja) | 画像処理方法 | |
CN113850299B (zh) | 一种自适应阈值的胃肠道胶囊内镜视频关键帧提取方法 | |
WO2022037534A1 (zh) | 基于图像的位置探测方法、电子设备及可读存储介质 | |
JP5057651B2 (ja) | 管腔画像処理装置、管腔画像処理方法及びそのためのプログラム | |
CN111839444A (zh) | 一种基于图像识别匹配的肠镜镜头静止检测方法 | |
US8929629B1 (en) | Method and system for image-based ulcer detection | |
CN110772210B (zh) | 一种诊断交互***及方法 | |
Mackiewicz et al. | Colour and texture based gastrointestinal tissue discrimination | |
JP7295333B2 (ja) | 画像記録システム、画像記録方法及びraw画像データ作成プログラム | |
Alizadeh et al. | Effects of improved adaptive gamma correction method on wireless capsule endoscopy images: Illumination compensation and edge detection | |
CN106296631A (zh) | 一种基于注意力先验的胃镜视频摘要方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230619 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240315 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240409 |