JP6156137B2 - 画像処理装置及びプログラム - Google Patents
画像処理装置及びプログラム Download PDFInfo
- Publication number
- JP6156137B2 JP6156137B2 JP2013271141A JP2013271141A JP6156137B2 JP 6156137 B2 JP6156137 B2 JP 6156137B2 JP 2013271141 A JP2013271141 A JP 2013271141A JP 2013271141 A JP2013271141 A JP 2013271141A JP 6156137 B2 JP6156137 B2 JP 6156137B2
- Authority
- JP
- Japan
- Prior art keywords
- sample
- target
- target cell
- difficulty level
- detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 claims description 173
- 238000000034 method Methods 0.000 claims description 42
- 230000010354 integration Effects 0.000 claims description 26
- 238000004364 calculation method Methods 0.000 claims description 12
- 238000002360 preparation method Methods 0.000 claims description 7
- 210000004027 cell Anatomy 0.000 description 177
- 210000004940 nucleus Anatomy 0.000 description 23
- 230000003287 optical effect Effects 0.000 description 18
- 210000004369 blood Anatomy 0.000 description 16
- 239000008280 blood Substances 0.000 description 16
- 238000000605 extraction Methods 0.000 description 15
- 210000000265 leukocyte Anatomy 0.000 description 8
- 230000008774 maternal effect Effects 0.000 description 8
- 238000010186 staining Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 210000003743 erythrocyte Anatomy 0.000 description 6
- 239000000284 extract Substances 0.000 description 6
- 239000011521 glass Substances 0.000 description 6
- 239000013598 vector Substances 0.000 description 6
- 210000003855 cell nucleus Anatomy 0.000 description 5
- 230000035935 pregnancy Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 2
- 238000012706 support-vector machine Methods 0.000 description 2
- 238000002738 Giemsa staining Methods 0.000 description 1
- 235000005811 Viola adunca Nutrition 0.000 description 1
- 240000009038 Viola odorata Species 0.000 description 1
- 235000013487 Viola odorata Nutrition 0.000 description 1
- 235000002254 Viola papilionacea Nutrition 0.000 description 1
- 238000004820 blood count Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 230000001605 fetal effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
- G01N15/10—Investigating individual particles
- G01N15/14—Optical investigation techniques, e.g. flow cytometry
- G01N15/1429—Signal processing
- G01N15/1433—Signal processing using image recognition
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/25—Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
- G01N21/27—Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands using photo-electric detection ; circuits for computing concentration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
- G01N15/10—Investigating individual particles
- G01N2015/1006—Investigating individual particles for cytology
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Chemical & Material Sciences (AREA)
- Multimedia (AREA)
- Analytical Chemistry (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Theoretical Computer Science (AREA)
- Biochemistry (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Optics & Photonics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Mathematical Physics (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Dispersion Chemistry (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
- Apparatus Associated With Microorganisms And Enzymes (AREA)
- Investigating Or Analysing Biological Materials (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Description
図1には、本実施形態に係る画像処理システム1のシステム構成例を示した。図1に示されるように画像処理システム1は、光学顕微鏡10、画像処理装置20、入力装置50、表示装置60を含み、画像処理装置20と光学顕微鏡10、入力装置50及び表示装置60とはデータ通信可能に接続されている。
次に、本実施形態に係る画像処理装置20に備えられる機能について説明する。
Df=w1・A0/A+w2・B0/B+w3・C/C0 (1)
次に、図5乃至図10に基づいて、本実施形態に係る画像処理システム1において行われる処理の一例について詳細に説明する。
まず、図5〜図8に示したフロー図に基づき、画像処理システム1により実行される第1の実施例に係る処理の詳細について説明する。
図5に示されるように、画像処理装置20は、入力装置50から入力されたデータに基づいて、対象の検体から生成した標本の数(N(Nは1以上の整数)とする)を設定するとともに(S101)、対象の検体の情報(検体情報)を取得する(S102)。ここで、検体情報には、年齢、病歴、妊娠週数の情報の少なくともいずれかを含むこととしてよい。
図6に示されるように、画像処理装置20は、変数iを1に初期化して(S201)、標本Siの深度(A)を測定する(S202)。例えば、標本Siの複数の点に関して、標本Siの表面からスライドグラスまでの深度を光学顕微鏡10で測定することとしてよい。
図5に示されるように、画像処理装置20は、処理対象の標本について標的細胞の検出難易度Dfの算出を終えると、S107で算出された検出難易度Dfと、S106で決定した処理対象の標本の情報との少なくとも1つに基づいて、検出パラメータを設定する(S108)。例えば、検出パラメータは、標本の検出対象の当否を示す検出対象フラグ、標本から核候補領域として抽出する画像領域の条件を示す核候補領域パラメータ、標本の画像について設定する判定対象領域の設定条件を示す判定対象領域パラメータを含むこととしてよい。ここで、画像処理装置20は、例えば、検出対象フラグについては、S106で決定した処理対象の標本の情報に基づいて設定し、核候補領域パラメータと判定対象領域パラメータについては標本Siについて算出した検出難易度Dfiに基づいて設定することとしてよい。
図7に示されるように、画像処理装置20は、変数i,j,kの値をそれぞれ1に初期化して(S301)、対象の検体についての標本Siが検出対象であるか否かを判断する(S302)。例えば、画像処理装置20は、標本Siの検出対象フラグが真(T)であれば検出対象と判断し、偽(F)であれば検出対象でないと判断することとしてよい。
図8に示されるように、画像処理装置20は、標本Siの撮像画像Tiについて設定したそれぞれの標的細胞領域に対して、処理済みフラグを付与する(S401)。なお、処理済みフラグは、真偽値であり、処理済みが真(T)、未処理が偽(F)とし、S401で付与される処理済みフラグの初期値は偽(F)であるとする。
ここで、図5のフロー図に戻り説明を続ける。画像処理装置20は、処理対象の検体のそれぞれについて標的細胞の検出処理を終えると、各検体について統合後の標的細胞領域に基づいて、標的細胞領域の情報を出力して(S110)、処理を終了する。例えば、画像処理装置20は、検体ごとに、統合後の標的細胞領域のスコアが大きい順に標的細胞領域をソートして標的細胞領域を表示装置60に表示させることとしてよい。
次に、図9に示したフロー図に基づき、画像処理システム1により実行される第2の実施例に係る処理の詳細について説明する。第2の実施例においては、検出難易度を用いずに検出パラメータを設定する点で第1の実施例と異なっている。
次に、図10に示したフロー図に基づき、画像処理システム1により実行される第3の実施例に係る処理の詳細について説明する。第3の実施例においては、対象の検体について推定される標的細胞数を用いずに検出パラメータを設定する点で第1の実施例と異なっている。
Claims (11)
- 標本の厚さ、該標本に含まれる核の輝度、又は該標本に含まれる予め定めた濃度よりも薄い色の画素の割合に基づいて、該標本に含まれる標的細胞を検出する難易度を示す検出難易度を算出する難易度算出手段と、
前記検出難易度に基づいて、前記標本の撮像画像から前記標的細胞を検出する処理に関する検出パラメータを設定する設定手段と、を含む
画像処理装置。 - 前記検出パラメータは、前記撮像画像において前記標的細胞領域が含まれているか否かを判定する判定対象領域の設定条件を定める情報を含み、
前記撮像画像に対して、前記検出パラメータに基づいて設定した判定対象領域に前記標的細胞が含まれるか否かを判定する判定手段を含む
請求項1に記載の画像処理装置。 - 前記設定手段は、前記検出難易度が高い程、前記判定対象領域が多く設定されるように前記設定条件を設定する
請求項2に記載の画像処理装置。 - 前記標的細胞が含まれると判定された互いに少なくとも一部が重なる複数の判定対象領域がある場合に、前記判定手段により前記標的細胞が含まれる可能性が最も高いと判定された判定対象領域に該複数の判定対象領域を統合する統合手段を含む
請求項2又は3に記載の画像処理装置。 - 前記検出難易度算出部は、前記標本の厚さの均一性が高い程、前記検出難易度を低く算出し、前記標本に含まれる核の輝度が低い程、前記検出難易度を低く算出し、前記標本に含まれる予め定めた濃度よりも薄い画素の割合が高い程、前記検出難易度を高く算出する
請求項1乃至4のいずれかに記載の画像処理装置。 - 前記検出パラメータは、対象の検体から生成される複数の標本のそれぞれについて前記標的細胞が含まれているかを検出する対象とするか否かを定める情報を含み、
前記設定手段は、前記検出難易度に基づいて、前記対象の検体から生成される複数の標本の中から検出対象とする検体の情報を設定する
請求項1乃至5のいずれかに記載の画像処理装置。 - 標本の厚さ、該標本に含まれる核の輝度、又は該標本に含まれる予め定めた濃度よりも薄い色の画素の割合に基づいて、該標本に含まれる標的細胞を検出する難易度を示す検出難易度を算出する難易度算出手段と、
前記検出難易度に基づいて、前記標本の撮像画像から前記標的細胞を検出する処理に関する検出パラメータを設定する設定手段
としてコンピュータを機能させるためのプログラム。 - 標本の作製状態に基づいて、該標本に含まれる標的細胞を検出する難易度を示す検出難易度を算出する難易度算出手段と、
前記検出難易度に基づいて、前記撮像画像において前記標的細胞領域が含まれているか否かを判定する判定対象領域の設定条件を設定する設定手段と、
前記撮像画像に対して、前記設定した判定対象領域に前記標的細胞が含まれるか否かを判定する判定手段と、を含み、
前記設定手段は、前記検出難易度が高い程、前記判定対象領域が多く設定されるように前記設定条件を設定する
画像処理装置。 - 標本の作製状態に基づいて、該標本に含まれる標的細胞を検出する難易度を示す検出難易度を算出する難易度算出手段、
前記検出難易度に基づいて、前記撮像画像において前記標的細胞領域が含まれているか否かを判定する判定対象領域の設定条件を設定する設定手段、
前記撮像画像に対して、前記設定した判定対象領域に前記標的細胞が含まれるか否かを判定する判定手段、
としてコンピュータを機能させるためのプログラムであって、
前記設定手段は、前記検出難易度が高い程、前記判定対象領域が多く設定されるように前記設定条件を設定する
プログラム。 - 標本の作製状態に基づいて、該標本に含まれる標的細胞を検出する難易度を示す検出難易度を算出する難易度算出手段と、
前記検出難易度に基づいて、前記撮像画像において前記標的細胞領域が含まれているか否かを判定する判定対象領域の設定条件を設定する設定手段と、
前記撮像画像に対して、前記設定した判定対象領域に前記標的細胞が含まれるか否かを判定する判定手段と、
前記標的細胞が含まれると判定された互いに少なくとも一部が重なる複数の判定対象領域がある場合に、前記判定手段により前記標的細胞が含まれる可能性が最も高いと判定された判定対象領域に該複数の判定対象領域を統合する統合手段と、を含む
画像処理装置。 - 標本の作製状態に基づいて、該標本に含まれる標的細胞を検出する難易度を示す検出難易度を算出する難易度算出手段、
前記検出難易度に基づいて、前記撮像画像において前記標的細胞領域が含まれているか否かを判定する判定対象領域の設定条件を設定する設定手段、
前記撮像画像に対して、前記設定した判定対象領域に前記標的細胞が含まれるか否かを判定する判定手段、
前記標的細胞が含まれると判定された互いに少なくとも一部が重なる複数の判定対象領域がある場合に、前記判定手段により前記標的細胞が含まれる可能性が最も高いと判定された判定対象領域に該複数の判定対象領域を統合する統合手段、
としてコンピュータを機能させるためのプログラム。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013271141A JP6156137B2 (ja) | 2013-12-27 | 2013-12-27 | 画像処理装置及びプログラム |
EP14875850.1A EP3091348B1 (en) | 2013-12-27 | 2014-09-11 | Image processing device, program, storage medium, and image processing method |
CN201480056915.2A CN105637344B (zh) | 2013-12-27 | 2014-09-11 | 图像处理设备、程序、存储介质和图像处理方法 |
PCT/JP2014/074016 WO2015098199A1 (ja) | 2013-12-27 | 2014-09-11 | 画像処理装置、プログラム、記憶媒体、及び画像処理方法 |
US15/065,335 US10146042B2 (en) | 2013-12-27 | 2016-03-09 | Image processing apparatus, storage medium, and image processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013271141A JP6156137B2 (ja) | 2013-12-27 | 2013-12-27 | 画像処理装置及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015125098A JP2015125098A (ja) | 2015-07-06 |
JP6156137B2 true JP6156137B2 (ja) | 2017-07-05 |
Family
ID=53478082
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013271141A Active JP6156137B2 (ja) | 2013-12-27 | 2013-12-27 | 画像処理装置及びプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US10146042B2 (ja) |
EP (1) | EP3091348B1 (ja) |
JP (1) | JP6156137B2 (ja) |
CN (1) | CN105637344B (ja) |
WO (1) | WO2015098199A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6194791B2 (ja) * | 2013-12-27 | 2017-09-13 | 富士ゼロックス株式会社 | 画像処理装置及びプログラム |
WO2022201881A1 (ja) * | 2021-03-25 | 2022-09-29 | 日本電気株式会社 | スライド数推定装置、制御方法、及び非一時的なコンピュータ可読媒体 |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0991430A (ja) * | 1995-09-27 | 1997-04-04 | Hitachi Ltd | パターン認識装置 |
US6151405A (en) * | 1996-11-27 | 2000-11-21 | Chromavision Medical Systems, Inc. | System and method for cellular specimen grading |
US7756305B2 (en) * | 2002-01-23 | 2010-07-13 | The Regents Of The University Of California | Fast 3D cytometry for information in tissue engineering |
JP4346923B2 (ja) * | 2003-02-21 | 2009-10-21 | 晴夫 高林 | 標的細胞自動探索システム |
JP2006317406A (ja) * | 2005-05-16 | 2006-11-24 | Olympus Corp | 細胞画像撮像装置、細胞画像撮像方法、細胞画像撮像プログラム、及び細胞観察装置 |
EP2042853B1 (en) * | 2006-07-12 | 2014-04-23 | Toyobo Co., Ltd. | Analyzer and use thereof |
JP2008124885A (ja) | 2006-11-14 | 2008-05-29 | Sony Corp | 撮像システム、撮像方法 |
CN101339185B (zh) * | 2008-06-23 | 2011-03-02 | 武汉呵尔医疗科技发展有限公司 | 用于脱落细胞检测的自动显微成像仪及检测方法 |
US11105686B2 (en) * | 2010-05-10 | 2021-08-31 | University of Pittshurgh-Of the Commonwealth System of Higher Education | Spatial-domain low-coherence quantitative phase microscopy |
JP5413408B2 (ja) | 2011-06-09 | 2014-02-12 | 富士ゼロックス株式会社 | 画像処理装置、プログラム及び画像処理システム |
JP5333570B2 (ja) * | 2011-12-21 | 2013-11-06 | 富士ゼロックス株式会社 | 画像処理装置、プログラム及び画像処理システム |
JP5907125B2 (ja) * | 2013-07-25 | 2016-04-20 | 富士ゼロックス株式会社 | 画像処理装置、プログラム及び画像処理システム |
-
2013
- 2013-12-27 JP JP2013271141A patent/JP6156137B2/ja active Active
-
2014
- 2014-09-11 CN CN201480056915.2A patent/CN105637344B/zh active Active
- 2014-09-11 EP EP14875850.1A patent/EP3091348B1/en active Active
- 2014-09-11 WO PCT/JP2014/074016 patent/WO2015098199A1/ja active Application Filing
-
2016
- 2016-03-09 US US15/065,335 patent/US10146042B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US10146042B2 (en) | 2018-12-04 |
EP3091348A1 (en) | 2016-11-09 |
EP3091348A4 (en) | 2017-05-10 |
EP3091348B1 (en) | 2020-07-08 |
CN105637344A (zh) | 2016-06-01 |
WO2015098199A1 (ja) | 2015-07-02 |
JP2015125098A (ja) | 2015-07-06 |
US20160187637A1 (en) | 2016-06-30 |
CN105637344B (zh) | 2019-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6194791B2 (ja) | 画像処理装置及びプログラム | |
US9704017B2 (en) | Image processing device, program, image processing method, computer-readable medium, and image processing system | |
EP2889367B1 (en) | Image processing device, program, image processing method, computer-readable medium, and image processing system | |
US9684958B2 (en) | Image processing device, program, image processing method, computer-readable medium, and image processing system | |
US10007834B2 (en) | Detection control device, detection system, non-transitory storage medium, and detection control method | |
JP5333570B2 (ja) | 画像処理装置、プログラム及び画像処理システム | |
EP3006551B1 (en) | Image processing device, image processing method, program, and storage medium | |
JP6070420B2 (ja) | 画像処理装置及びプログラム | |
JP6156137B2 (ja) | 画像処理装置及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160218 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160705 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160902 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170214 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170413 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170509 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170522 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6156137 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |