JP6375925B2 - 画像処理装置、画像処理システム、画像処理プログラム及び画像処理方法 - Google Patents
画像処理装置、画像処理システム、画像処理プログラム及び画像処理方法 Download PDFInfo
- Publication number
- JP6375925B2 JP6375925B2 JP2014252819A JP2014252819A JP6375925B2 JP 6375925 B2 JP6375925 B2 JP 6375925B2 JP 2014252819 A JP2014252819 A JP 2014252819A JP 2014252819 A JP2014252819 A JP 2014252819A JP 6375925 B2 JP6375925 B2 JP 6375925B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- fluorescent
- image processing
- alignment
- cell morphology
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
- Investigating Or Analysing Biological Materials (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
Description
本発明は、画像処理装置、画像処理システム、画像処理プログラム及び画像処理方法に関する。
病理診断では、まず採取した組織を固定するために脱水し、パラフィンによるブロック化といった処理を行った後、２〜８μｍの厚さの薄片に切り、パラフィンを取り除き、染色して顕微鏡観察を行う。病理医は、この顕微鏡像の中で、細胞の核の大きさや形の変化、組織としてのパターンの変化等の形態学的な情報、染色情報をもとに診断を行っている。
病理診断において、組織切片で過剰発現をしている特定の生体物質及びその発現量を特定することは、予後の予測やその後の治療計画を決める上で非常に重要な情報となり得る。
過剰発現をしている特定の生体物質の例としては、例えば、乳癌、肺癌、大腸癌、胃癌、膀胱癌等の細胞においては、細胞膜上に発現するであるＨＥＲ２タンパクや、細胞核に発現するＫｉ６７タンパクが挙げられる。
過剰発現をしている特定の生体物質の例としては、例えば、乳癌、肺癌、大腸癌、胃癌、膀胱癌等の細胞においては、細胞膜上に発現するであるＨＥＲ２タンパクや、細胞核に発現するＫｉ６７タンパクが挙げられる。
従来の病理診断では、例えばＤＡＢ法のような酵素を用いた色素染色法によって特定の生体物質が染色された生体組織の画像から、生体物質の発現量や分布が評価された。しかし、ＤＡＢ法のような従来の色素染色法は、生体物質の発現量を詳細に定量する場合には、精度が低い。
一方、近年、蛍光物質を用いて特定の生体物質を染色して、生体物質の発現量や分布を評価する病理診断が行われている。蛍光物質を用いることにより、組織切片における特定の生体物質の発現が蛍光画像上で蛍光輝点として表され、発現量や分布を高精度に把握できるため、極めて有用である。
蛍光物質を用いた病理診断において、１細胞当たりの生体物質の発現量や分布を評価する場合には、蛍光画像と同一視野範囲を撮影した細胞の形態を示す明視野画像を取得し、蛍光画像と明視野画像を重ね合わせることにより、蛍光輝点と細胞領域の位置関係を把握する。しかし、明視野画像及び蛍光画像を重ね合わせる場合には、撮影手段の切り替えに伴う振動や、顕微鏡の光軸のずれなどに起因して、２枚の画像の撮影領域がずれる場合があり、診断結果に誤差が生じ得るという問題点があった。
また、従来の病理診断において一般的に実施されるＨＥ染色後の明視野画像からは、細胞膜の自動抽出が困難であることから、例えば、特許文献１に記載の技術では、細胞核の重心から所定の距離の範囲内の円領域を細胞膜に囲まれた細胞領域とみなして診断を行っている。しかし、実際の細胞領域に対して誤差が大きく、細胞ごとに生体物質の発現量や分布を解析して病理診断を行うためには精度が不十分であった。
そこで、例えば特許文献２には、光学顕微鏡撮影による二次元可視画像と顕微質量分析の二次元解析画像の両方において検出可能な位置合わせ用マーカーを標本に付設することにより、２枚の画像の重ね合わせの際に自動的に位置合わせを行う技術が記載されている。
また、例えば特許文献３には、定量対象である生体物質の蛍光染色に加えて、細胞膜の蛍光染色を実施することにより、蛍光画像上で細胞膜の位置を特定して、細胞膜上の生体物質の発現を評価する技術が記載されている。
特許文献２又は３に記載の技術によれば、従来の病理診断に必要な染色に加えて、位置合わせのためのマーカー物質付設工程、又は、細胞膜の蛍光染色工程が別途必要であるため、手間がかかり、さらに、標本が劣化しやすいという問題点があった。
したがって、本発明の主な目的は、従来の病理診断で一般的に行われる染色に加えてマーカー物質の付設や染色を標本に施すことなく、観察対象細胞における特定の生体物質の発現を正確に診断できる画像処理装置、画像処理システム、画像処理プログラム、及び画像処理方法を提供することにある。
上記課題を解決するため、請求項１に記載の発明によれば、
標本における特定の生体物質の発現を蛍光輝点で表す蛍光画像と、前記蛍光輝点と異なる情報源に基づく細胞の形態を表す細胞形態画像を入力する入力手段と、
前記細胞形態画像における前記細胞の形態と前記蛍光画像における前記蛍光輝点との位置関係に基づいて、前記細胞形態画像と前記蛍光画像の位置合わせを行う位置合わせ手段と、
を備えることを特徴とする画像処理装置が提供される。
標本における特定の生体物質の発現を蛍光輝点で表す蛍光画像と、前記蛍光輝点と異なる情報源に基づく細胞の形態を表す細胞形態画像を入力する入力手段と、
前記細胞形態画像における前記細胞の形態と前記蛍光画像における前記蛍光輝点との位置関係に基づいて、前記細胞形態画像と前記蛍光画像の位置合わせを行う位置合わせ手段と、
を備えることを特徴とする画像処理装置が提供される。
請求項２に記載の発明によれば、
前記位置合わせ手段は、前記細胞形態画像と前記蛍光画像の少なくとも一方に対して、平行移動、回転、拡大、または縮小の少なくとも一つの画像処理を行うことにより、位置合わせを行うことを特徴とする請求項１に記載の画像処理装置が提供される。
前記位置合わせ手段は、前記細胞形態画像と前記蛍光画像の少なくとも一方に対して、平行移動、回転、拡大、または縮小の少なくとも一つの画像処理を行うことにより、位置合わせを行うことを特徴とする請求項１に記載の画像処理装置が提供される。
請求項３に記載の発明によれば、
前記細胞形態画像における前記細胞の形態は、染色された細胞核の領域を示す核領域であることを特徴とする請求項１または２に記載の画像処理装置が提供される。
前記細胞形態画像における前記細胞の形態は、染色された細胞核の領域を示す核領域であることを特徴とする請求項１または２に記載の画像処理装置が提供される。
請求項４に記載の発明によれば、
前記特定の生体物質は細胞核に発現することを特徴とする請求項３に記載の画像処理装置が提供される。
前記特定の生体物質は細胞核に発現することを特徴とする請求項３に記載の画像処理装置が提供される。
請求項５に記載の発明によれば、
前記特定の生体物質は細胞膜に発現することを特徴とする請求項３に記載の画像処理装置が提供される。
前記特定の生体物質は細胞膜に発現することを特徴とする請求項３に記載の画像処理装置が提供される。
請求項６に記載の発明によれば、
前記核領域と重なる前記蛍光輝点の数を算出する算出手段を有し、
前記位置合わせ手段は、前記蛍光輝点の数が最大となるように位置合わせを行うことを特徴とする請求項４に記載の画像処理装置が提供される。
前記核領域と重なる前記蛍光輝点の数を算出する算出手段を有し、
前記位置合わせ手段は、前記蛍光輝点の数が最大となるように位置合わせを行うことを特徴とする請求項４に記載の画像処理装置が提供される。
請求項７に記載の発明によれば、
前記核領域と重なる前記蛍光輝点の数を算出する算出手段を有し、
前記位置合わせ手段は、前記蛍光輝点の数が最小となるように位置合わせを行うことを特徴とする請求項５に記載の画像処理装置が提供される。
前記核領域と重なる前記蛍光輝点の数を算出する算出手段を有し、
前記位置合わせ手段は、前記蛍光輝点の数が最小となるように位置合わせを行うことを特徴とする請求項５に記載の画像処理装置が提供される。
請求項８に記載の発明によれば、
前記核領域と前記蛍光輝点の位置関係に基づいて、各々の前記蛍光輝点が前記核領域のいずれに対応するかを決定する決定手段を有し、
前記位置合わせ手段は、前記蛍光輝点と対応する前記核領域の重心との距離を算出し、当該重心との距離の総和が最小となるように位置合わせを行うことを特徴とする請求項４に記載の画像処理装置が提供される。
前記核領域と前記蛍光輝点の位置関係に基づいて、各々の前記蛍光輝点が前記核領域のいずれに対応するかを決定する決定手段を有し、
前記位置合わせ手段は、前記蛍光輝点と対応する前記核領域の重心との距離を算出し、当該重心との距離の総和が最小となるように位置合わせを行うことを特徴とする請求項４に記載の画像処理装置が提供される。
請求項９に記載の発明によれば、
前記核領域と前記蛍光輝点の位置関係に基づいて、各々の前記蛍光輝点が前記核領域のいずれに対応するかを決定する決定手段を有し、
前記位置合わせ手段は、前記蛍光輝点と対応する前記核領域の輪郭との最短距離を算出し、前記蛍光輝点が対応する前記核領域と重なっている場合には前記輪郭との最短距離を所定の固定値に置換した後、前記輪郭との最短距離の総和が最小となるように位置合わせを行うことを特徴とする請求項５に記載の画像処理装置が提供される。
前記核領域と前記蛍光輝点の位置関係に基づいて、各々の前記蛍光輝点が前記核領域のいずれに対応するかを決定する決定手段を有し、
前記位置合わせ手段は、前記蛍光輝点と対応する前記核領域の輪郭との最短距離を算出し、前記蛍光輝点が対応する前記核領域と重なっている場合には前記輪郭との最短距離を所定の固定値に置換した後、前記輪郭との最短距離の総和が最小となるように位置合わせを行うことを特徴とする請求項５に記載の画像処理装置が提供される。
請求項１０に記載の発明によれば、
前記核領域と前記蛍光輝点の位置関係に基づいて、各々の前記蛍光輝点が前記核領域のいずれに対応するかを決定する決定手段を有し、
前記位置合わせ手段は、前記蛍光輝点と対応する前記核領域の重心との距離を算出し、前記核領域ごとに前記重心との距離の標準偏差を算出して、当該標準偏差の総和が最小となるように位置合わせを行うことを特徴とする請求項５に記載の画像処理装置が提供される。
前記核領域と前記蛍光輝点の位置関係に基づいて、各々の前記蛍光輝点が前記核領域のいずれに対応するかを決定する決定手段を有し、
前記位置合わせ手段は、前記蛍光輝点と対応する前記核領域の重心との距離を算出し、前記核領域ごとに前記重心との距離の標準偏差を算出して、当該標準偏差の総和が最小となるように位置合わせを行うことを特徴とする請求項５に記載の画像処理装置が提供される。
請求項１１に記載の発明によれば、
前記位置合わせ手段は、対応する前記蛍光輝点の数が所定の値よりも大きい前記核領域において算出された前記標準偏差の総和が最小となるように位置合わせを行うことを特徴とする請求項１０に記載の画像処理装置が提供される。
前記位置合わせ手段は、対応する前記蛍光輝点の数が所定の値よりも大きい前記核領域において算出された前記標準偏差の総和が最小となるように位置合わせを行うことを特徴とする請求項１０に記載の画像処理装置が提供される。
請求項１２に記載の発明によれば、
前記位置合わせ手段は、前記細胞形態画像と前記蛍光画像の少なくとも一方に対して、所定の制限値の範囲内の平行移動を施すことにより位置合わせを行うことを特徴とする請求項２〜１１の何れか一項に記載の画像処理装置が提供される。
前記位置合わせ手段は、前記細胞形態画像と前記蛍光画像の少なくとも一方に対して、所定の制限値の範囲内の平行移動を施すことにより位置合わせを行うことを特徴とする請求項２〜１１の何れか一項に記載の画像処理装置が提供される。
請求項１３に記載の発明によれば、
前記位置合わせ手段は、前記細胞形態画像と前記蛍光画像の少なくとも一方に対して、所定の制限値の範囲内の拡大または縮小を行うことにより位置合わせを行うことを特徴とする請求項２〜１２の何れか一項に記載の画像処理装置が提供される。
前記位置合わせ手段は、前記細胞形態画像と前記蛍光画像の少なくとも一方に対して、所定の制限値の範囲内の拡大または縮小を行うことにより位置合わせを行うことを特徴とする請求項２〜１２の何れか一項に記載の画像処理装置が提供される。
請求項１４に記載の発明によれば、
前記位置合わせ手段による位置合わせの後に、前記核領域に重ならない前記蛍光輝点を削除する削除手段を備えることを特徴とする請求項４、６、または８の何れか一項に記載の画像処理装置が提供される。
前記位置合わせ手段による位置合わせの後に、前記核領域に重ならない前記蛍光輝点を削除する削除手段を備えることを特徴とする請求項４、６、または８の何れか一項に記載の画像処理装置が提供される。
請求項１５に記載の発明によれば、
前記位置合わせ手段は、前記細胞形態画像及び前記蛍光画像を取得する度に位置合わせを行うことを特徴とする請求項１〜１４の何れか一項に記載の画像処理装置が提供される。
前記位置合わせ手段は、前記細胞形態画像及び前記蛍光画像を取得する度に位置合わせを行うことを特徴とする請求項１〜１４の何れか一項に記載の画像処理装置が提供される。
請求項１６に記載の発明によれば、
請求項１〜１５のいずれか一項に記載の画像処理装置と、
前記画像処理装置で使用される、前記細胞形態画像と前記蛍光画像とを取得する画像取得装置と、
を備えることを特徴とする画像処理システムが提供される。
請求項１〜１５のいずれか一項に記載の画像処理装置と、
前記画像処理装置で使用される、前記細胞形態画像と前記蛍光画像とを取得する画像取得装置と、
を備えることを特徴とする画像処理システムが提供される。
請求項１７に記載の発明によれば、
コンピュータを、
標本における特定の生体物質の発現を蛍光輝点で表す蛍光画像と、前記蛍光輝点と異なる情報源に基づく細胞の形態を表す細胞形態画像を入力する入力手段、
前記細胞形態画像における前記細胞の形態と前記蛍光画像における前記蛍光輝点との位置関係に基づいて、前記細胞形態画像と前記蛍光画像の位置合わせを行う位置合わせ手段、
として機能させるための画像処理プログラムが提供される。
コンピュータを、
標本における特定の生体物質の発現を蛍光輝点で表す蛍光画像と、前記蛍光輝点と異なる情報源に基づく細胞の形態を表す細胞形態画像を入力する入力手段、
前記細胞形態画像における前記細胞の形態と前記蛍光画像における前記蛍光輝点との位置関係に基づいて、前記細胞形態画像と前記蛍光画像の位置合わせを行う位置合わせ手段、
として機能させるための画像処理プログラムが提供される。
請求項１８に記載の発明によれば、
標本における特定の生体物質の発現を蛍光輝点で表す蛍光画像と、前記蛍光輝点と異なる情報源に基づく細胞の形態を表す細胞形態画像を入力する入力工程と、
前記細胞形態画像における前記細胞の形態と前記蛍光画像における前記蛍光輝点との位置関係に基づいて、前記細胞形態画像と前記蛍光画像の位置合わせを行う位置合わせ工程と、
を有することを特徴とする画像処理方法が提供される。
標本における特定の生体物質の発現を蛍光輝点で表す蛍光画像と、前記蛍光輝点と異なる情報源に基づく細胞の形態を表す細胞形態画像を入力する入力工程と、
前記細胞形態画像における前記細胞の形態と前記蛍光画像における前記蛍光輝点との位置関係に基づいて、前記細胞形態画像と前記蛍光画像の位置合わせを行う位置合わせ工程と、
を有することを特徴とする画像処理方法が提供される。
本発明によれば、従来の病理診断で一般的に行われる染色に加えてマーカー物質の付設や染色を標本に施すことなく、観察対象細胞における特定の生体物質の発現を正確に診断することができる。
以下、図を参照して本発明を実施するための形態について説明するが、本発明はこれらに限定されない。
＜病理診断支援システム１００の構成＞
図１に、本実施の形態における病理診断支援システム１００の全体構成例を示す。病理診断支援システム１００は、所定の染色試薬で染色された人体の組織切片の顕微鏡画像を取得し、取得された顕微鏡画像を解析することにより、観察対象の組織切片における特定の生体物質の発現を定量的に表す特徴量を出力するシステムである。
図１に、本実施の形態における病理診断支援システム１００の全体構成例を示す。病理診断支援システム１００は、所定の染色試薬で染色された人体の組織切片の顕微鏡画像を取得し、取得された顕微鏡画像を解析することにより、観察対象の組織切片における特定の生体物質の発現を定量的に表す特徴量を出力するシステムである。
図１に示すように、病理診断支援システム１００は、顕微鏡画像取得装置１Ａと、画像処理装置２Ａと、がケーブル３Ａ等のインターフェースを介してデータ送受信可能に接続されて構成されている。なお、顕微鏡画像取得装置１Ａと画像処理装置２Ａとの接続方式は特に限定されない。例えば、顕微鏡画像取得装置１Ａと画像処理装置２ＡはＬＡＮ（Local Area Network）により接続されることとしてもよいし、無線により接続される構成としてもよい。
顕微鏡画像取得装置１Ａは、公知のカメラ付き光学顕微鏡であり、スライド固定ステージ上に載置されたスライド上の組織切片の顕微鏡画像を取得し、画像処理装置２Ａに送信するものである。
顕微鏡画像取得装置１Ａは、照射手段、結像手段、撮像手段、通信Ｉ／Ｆ等を備えて構成されている。照射手段は、光源、フィルター等により構成され、スライド固定ステージに載置されたスライド上の組織切片に光を照射する。結像手段は、接眼レンズ、対物レンズ等により構成され、照射した光によりスライド上の組織切片から発せられる透過光、反射光、又は蛍光を結像する。撮像手段は、ＣＣＤ(Charge Coupled Device)センサー等を備え、結像手段により結像面に結像される像を撮像して顕微鏡画像のデジタル画像データを生成する顕微鏡設置カメラである。通信Ｉ／Ｆは、生成された顕微鏡画像の画像データを画像処理装置２Ａに送信する。本実施の形態において、顕微鏡画像取得装置１Ａは、明視野観察に適した照射手段及び結像手段を組み合わせた明視野ユニット、蛍光観察に適した照射手段及び結像手段を組み合わせた蛍光ユニットが備えられており、ユニットを切り替えることにより明視野／蛍光を切り替えることが可能である。
顕微鏡画像取得装置１Ａは、照射手段、結像手段、撮像手段、通信Ｉ／Ｆ等を備えて構成されている。照射手段は、光源、フィルター等により構成され、スライド固定ステージに載置されたスライド上の組織切片に光を照射する。結像手段は、接眼レンズ、対物レンズ等により構成され、照射した光によりスライド上の組織切片から発せられる透過光、反射光、又は蛍光を結像する。撮像手段は、ＣＣＤ(Charge Coupled Device)センサー等を備え、結像手段により結像面に結像される像を撮像して顕微鏡画像のデジタル画像データを生成する顕微鏡設置カメラである。通信Ｉ／Ｆは、生成された顕微鏡画像の画像データを画像処理装置２Ａに送信する。本実施の形態において、顕微鏡画像取得装置１Ａは、明視野観察に適した照射手段及び結像手段を組み合わせた明視野ユニット、蛍光観察に適した照射手段及び結像手段を組み合わせた蛍光ユニットが備えられており、ユニットを切り替えることにより明視野／蛍光を切り替えることが可能である。
なお、顕微鏡画像取得装置１Ａとしては、カメラ付き顕微鏡に限定されず、例えば、顕微鏡のスライド固定ステージ上のスライドをスキャンして組織切片全体の顕微鏡画像を取得するバーチャル顕微鏡スライド作成装置（例えば、特表２００２−５１４３１９号公報参照）等を用いてもよい。バーチャル顕微鏡スライド作成装置によれば、スライド上の組織切片全体像を表示部で一度に閲覧可能な画像データを取得することができる。
画像処理装置２Ａは、顕微鏡画像取得装置１Ａから送信された顕微鏡画像を解析することにより、観察対象の組織切片における特定の生体物質の発現量を定量的に示す特徴量を算出し、算出された特徴量を出力する。
図２に、画像処理装置２Ａの機能構成例を示す。図２に示すように、画像処理装置２Ａは、制御部２１、操作部２２、表示部２３、通信Ｉ／Ｆ２４、記憶部２５等を備えて構成され、各部はバス２６を介して接続されている。
図２に、画像処理装置２Ａの機能構成例を示す。図２に示すように、画像処理装置２Ａは、制御部２１、操作部２２、表示部２３、通信Ｉ／Ｆ２４、記憶部２５等を備えて構成され、各部はバス２６を介して接続されている。
制御部２１は、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）等を備えて構成され、記憶部２５に記憶されている各種プログラムとの協働により各種処理を実行し、画像処理装置２Ａの動作を統括的に制御する。例えば、制御部２１は、記憶部２５に記憶されているプログラムとの協働により画像解析処理（図１０参照）を実行し、位置合わせ手段、算出手段、決定手段、削除手段としての機能を実現する。
操作部２２は、文字入力キー、数字入力キー、及び各種機能キー等を備えたキーボードと、マウス等のポインティングデバイスを備えて構成され、キーボードで押下操作されたキーの押下信号とマウスによる操作信号とを、入力信号として制御部２１に出力する。
表示部２３は、例えば、ＣＲＴ（Cathode Ray Tube）やＬＣＤ（Liquid Crystal Display）等のモニタを備えて構成されており、制御部２１から入力される表示信号の指示に従って、各種画面を表示する。本実施の形態において、表示部２３は、画像解析結果を出力するための出力手段として機能する。
通信Ｉ／Ｆ２４は、顕微鏡画像取得装置１Ａをはじめとする外部機器との間でデータ送受信を行なうためのインターフェースである。通信Ｉ／Ｆ２４は、明視野画像と蛍光画像の入力手段として機能する。
記憶部２５は、例えばＨＤＤ（Hard Disk Drive）や半導体の不揮発性メモリー等で構成されている。記憶部２５には、前述のように各種プログラムや各種データ等が記憶されている。
その他、画像処理装置２Ａは、ＬＡＮアダプターやルーター等を備え、ＬＡＮ等の通信ネットワークを介して外部機器と接続される構成としてもよい。
その他、画像処理装置２Ａは、ＬＡＮアダプターやルーター等を備え、ＬＡＮ等の通信ネットワークを介して外部機器と接続される構成としてもよい。
本実施の形態における画像処理装置２Ａは、顕微鏡画像取得装置１Ａから送信された明視野画像（ＨＥ染色画像）及び蛍光画像を用いて解析を行う。
明視野画像は、ＨＥ（ヘマトキシリン−エオジン）染色試薬を用いて染色された組織切片を、顕微鏡画像取得装置１Ａにおいて明視野で拡大結像及び撮影することにより得られる顕微鏡画像である。ヘマトキシリンは青紫色の色素であり、細胞核、骨組織、軟骨組織の一部、漿液成分など（好塩基性の組織等）を染色する。エオジンは赤〜ピンク色の色素であり、細胞質、軟部組織の結合組織、赤血球、線維素、内分泌顆粒など（好酸性の組織等）を染色する。図３に、ＨＥ染色を行った組織切片を撮影した明視野画像の一例を示す。図３に示すように、ＨＥ染色を行った組織切片を撮影した明視野画像においては、組織切片における細胞の形態が表れている。すなわち、明視野画像は組織切片における細胞の形態を表す細胞形態画像である。かかる明視野画像では、細胞核は、周囲の細胞質よりも濃い色（青紫色）で周囲と区別して表れており、細胞核の形態をはっきり捉えることができる。
蛍光画像は、特定の生体物質と特異的に結合及び／又は反応する生体物質認識部位が結合した蛍光物質を内包したナノ粒子（蛍光物質内包ナノ粒子と呼ぶ）を含む染色試薬を用いて染色された組織切片に対し、顕微鏡画像取得装置１Ａにおいて所定波長の励起光を照射して蛍光物質内包ナノ粒子を発光（蛍光）させ、この蛍光を拡大結像及び撮影することにより得られる顕微鏡画像である。即ち、蛍光画像に現れる蛍光は、組織切片における、生体物質認識部位に対応する特定の生体物質の発現を示すものである。図４に、蛍光画像の一例を示す。
明視野画像は、ＨＥ（ヘマトキシリン−エオジン）染色試薬を用いて染色された組織切片を、顕微鏡画像取得装置１Ａにおいて明視野で拡大結像及び撮影することにより得られる顕微鏡画像である。ヘマトキシリンは青紫色の色素であり、細胞核、骨組織、軟骨組織の一部、漿液成分など（好塩基性の組織等）を染色する。エオジンは赤〜ピンク色の色素であり、細胞質、軟部組織の結合組織、赤血球、線維素、内分泌顆粒など（好酸性の組織等）を染色する。図３に、ＨＥ染色を行った組織切片を撮影した明視野画像の一例を示す。図３に示すように、ＨＥ染色を行った組織切片を撮影した明視野画像においては、組織切片における細胞の形態が表れている。すなわち、明視野画像は組織切片における細胞の形態を表す細胞形態画像である。かかる明視野画像では、細胞核は、周囲の細胞質よりも濃い色（青紫色）で周囲と区別して表れており、細胞核の形態をはっきり捉えることができる。
蛍光画像は、特定の生体物質と特異的に結合及び／又は反応する生体物質認識部位が結合した蛍光物質を内包したナノ粒子（蛍光物質内包ナノ粒子と呼ぶ）を含む染色試薬を用いて染色された組織切片に対し、顕微鏡画像取得装置１Ａにおいて所定波長の励起光を照射して蛍光物質内包ナノ粒子を発光（蛍光）させ、この蛍光を拡大結像及び撮影することにより得られる顕微鏡画像である。即ち、蛍光画像に現れる蛍光は、組織切片における、生体物質認識部位に対応する特定の生体物質の発現を示すものである。図４に、蛍光画像の一例を示す。
＜蛍光画像の取得＞
ここで、蛍光画像の取得方法について、この蛍光画像の取得に際して用いられる染色試薬（蛍光物質内包ナノ粒子）、染色試薬による組織切片の染色方法等も含めて詳細に説明する。
ここで、蛍光画像の取得方法について、この蛍光画像の取得に際して用いられる染色試薬（蛍光物質内包ナノ粒子）、染色試薬による組織切片の染色方法等も含めて詳細に説明する。
〔蛍光物質〕
蛍光画像の取得のための染色試薬に用いられる蛍光物質としては、蛍光有機色素及び量子ドット（半導体粒子）を挙げることができる。２００〜７００ｎｍの範囲内の波長の紫外〜近赤外光により励起されたときに、４００〜１１００ｎｍの範囲内の波長の可視〜近赤外光の発光を示すことが好ましい。
蛍光画像の取得のための染色試薬に用いられる蛍光物質としては、蛍光有機色素及び量子ドット（半導体粒子）を挙げることができる。２００〜７００ｎｍの範囲内の波長の紫外〜近赤外光により励起されたときに、４００〜１１００ｎｍの範囲内の波長の可視〜近赤外光の発光を示すことが好ましい。
蛍光有機色素としては、フルオレセイン系色素分子、ローダミン系色素分子、Ａｌｅｘａ Ｆｌｕｏｒ（インビトロジェン社製）系色素分子、ＢＯＤＩＰＹ（インビトロジェン社製）系色素分子、カスケード系色素分子、クマリン系色素分子、エオジン系色素分子、ＮＢＤ系色素分子、ピレン系色素分子、Ｔｅｘａｓ Ｒｅｄ系色素分子、シアニン系色素分子等を挙げることができる。
具体的には、５−カルボキシ−フルオレセイン、６−カルボキシ−フルオレセイン、５，６−ジカルボキシ−フルオレセイン、６−カルボキシ−２’，４，４’，５’，７，７’−ヘキサクロロフルオレセイン、６−カルボキシ−２’，４，７，７’−テトラクロロフルオレセイン、６−カルボキシ−４’，５’−ジクロロ−２’，７’−ジメトキシフルオレセイン、ナフトフルオレセイン、５−カルボキシ−ローダミン、６−カルボキシ−ローダミン、５，６−ジカルボキシ−ローダミン、ローダミン ６Ｇ、テトラメチルローダミン、Ｘ−ローダミン、及びＡｌｅｘａ Ｆｌｕｏｒ ３５０、Ａｌｅｘａ Ｆｌｕｏｒ ４０５、Ａｌｅｘａ Ｆｌｕｏｒ ４３０、Ａｌｅｘａ Ｆｌｕｏｒ ４８８、Ａｌｅｘａ Ｆｌｕｏｒ ５００、Ａｌｅｘａ Ｆｌｕｏｒ ５１４、Ａｌｅｘａ Ｆｌｕｏｒ ５３２、Ａｌｅｘａ Ｆｌｕｏｒ ５４６、Ａｌｅｘａ Ｆｌｕｏｒ ５５５、Ａｌｅｘａ Ｆｌｕｏｒ ５６８、Ａｌｅｘａ Ｆｌｕｏｒ ５９４、Ａｌｅｘａ Ｆｌｕｏｒ ６１０、Ａｌｅｘａ Ｆｌｕｏｒ ６３３、Ａｌｅｘａ Ｆｌｕｏｒ ６３５、Ａｌｅｘａ Ｆｌｕｏｒ ６４７、Ａｌｅｘａ Ｆｌｕｏｒ ６６０、Ａｌｅｘａ Ｆｌｕｏｒ ６８０、Ａｌｅｘａ Ｆｌｕｏｒ ７００、Ａｌｅｘａ Ｆｌｕｏｒ ７５０、ＢＯＤＩＰＹ ＦＬ、ＢＯＤＩＰＹ ＴＭＲ、ＢＯＤＩＰＹ ４９３／５０３、ＢＯＤＩＰＹ ５３０／５５０、ＢＯＤＩＰＹ ５５８／５６８、ＢＯＤＩＰＹ ５６４／５７０、ＢＯＤＩＰＹ ５７６／５８９、ＢＯＤＩＰＹ ５８１／５９１、ＢＯＤＩＰＹ ６３０／６５０、ＢＯＤＩＰＹ ６５０／６６５（以上インビトロジェン社製）、メトキシクマリン、エオジン、ＮＢＤ、ピレン、Ｃｙ５、Ｃｙ５．５、Ｃｙ７等を挙げることができる。単独でも複数種を混合したものを用いてもよい。
量子ドットとしては、ＩＩ−ＶＩ族化合物、ＩＩＩ−Ｖ族化合物、又はＩＶ族元素を成分として含有する量子ドット（それぞれ、「ＩＩ−ＶＩ族量子ドット」、「ＩＩＩ−Ｖ族量子ドット」、「ＩＶ族量子ドット」ともいう。）のいずれかを用いることができる。単独でも複数種を混合したものを用いてもよい。
具体的には、ＣｄＳｅ、ＣｄＳ、ＣｄＴｅ、ＺｎＳｅ、ＺｎＳ、ＺｎＴｅ、ＩｎＰ、ＩｎＮ、ＩｎＡｓ、ＩｎＧａＰ、ＧａＰ、ＧａＡｓ、Ｓｉ、Ｇｅが挙げられるが、これらに限定されない。
上記量子ドットをコアとし、その上にシェルを設けた量子ドットを用いることもできる。以下、本明細書中シェルを有する量子ドットの表記法として、コアがＣｄＳｅ、シェルがＺｎＳの場合、ＣｄＳｅ／ＺｎＳと表記する。例えば、ＣｄＳｅ／ＺｎＳ、ＣｄＳ／ＺｎＳ、ＩｎＰ／ＺｎＳ、ＩｎＧａＰ／ＺｎＳ、Ｓｉ／ＳｉＯ2、Ｓｉ／ＺｎＳ、Ｇｅ／ＧｅＯ2、Ｇｅ／ＺｎＳ等を用いることができるが、これらに限定されない。
量子ドットは必要に応じて、有機ポリマー等により表面処理が施されているものを用いてもよい。例えば、表面カルボキシ基を有するＣｄＳｅ／ＺｎＳ（インビトロジェン社製）、表面アミノ基を有するＣｄＳｅ／ＺｎＳ（インビトロジェン社製）等が挙げられる。
量子ドットは必要に応じて、有機ポリマー等により表面処理が施されているものを用いてもよい。例えば、表面カルボキシ基を有するＣｄＳｅ／ＺｎＳ（インビトロジェン社製）、表面アミノ基を有するＣｄＳｅ／ＺｎＳ（インビトロジェン社製）等が挙げられる。
〔蛍光物質内包ナノ粒子〕
本実施の形態において蛍光物質内包ナノ粒子とは、蛍光物質がナノ粒子内部に分散されたものをいい、蛍光物質とナノ粒子自体とが化学的に結合していても、結合していなくてもよい。
ナノ粒子を構成する素材は特に限定されるものではなく、ポリスチレン、ポリ乳酸、シリカ等を挙げることができる。
本実施の形態において蛍光物質内包ナノ粒子とは、蛍光物質がナノ粒子内部に分散されたものをいい、蛍光物質とナノ粒子自体とが化学的に結合していても、結合していなくてもよい。
ナノ粒子を構成する素材は特に限定されるものではなく、ポリスチレン、ポリ乳酸、シリカ等を挙げることができる。
本実施の形態で用いられる蛍光物質内包ナノ粒子は、公知の方法により作製することが可能である。例えば、蛍光有機色素を内包したシリカナノ粒子は、ラングミュア ８巻 ２９２１ページ（１９９２）に記載されているＦＩＴＣ内包シリカ粒子の合成を参考に合成することができる。ＦＩＴＣの代わりに所望の蛍光有機色素を用いることで種々の蛍光有機色素内包シリカナノ粒子を合成することができる。
量子ドットを内包したシリカナノ粒子は、ニュー・ジャーナル・オブ・ケミストリー ３３巻 ５６１ページ（２００９）に記載されているＣｄＴｅ内包シリカナノ粒子の合成を参考に合成することができる。
蛍光有機色素を内包したポリスチレンナノ粒子は、米国特許４３２６００８（１９８２）に記載されている重合性官能基をもつ有機色素を用いた共重合法や、米国特許５３２６６９２（１９９２）に記載されているポリスチレンナノ粒子への蛍光有機色素の含浸法を用いて作製することができる。
量子ドットを内包したポリマーナノ粒子は、ネイチャー・バイオテクノロジー１９巻６３１ページ（２００１）に記載されているポリスチレンナノ粒子への量子ドットの含浸法を用いて作製することができる。
本実施の形態で用いられる蛍光物質内包ナノ粒子の平均粒径は特に限定されないが、３０〜８００ｎｍ程度のものを用いることができる。また、粒径のばらつきを示す変動係数（＝（標準偏差／平均値）×１００％）は特に限定されないが、２０％以下のものを用いることが好ましい。平均粒径は、走査型電子顕微鏡（ＳＥＭ）を用いて電子顕微鏡写真を撮影し十分な数の粒子について断面積を計測し、各計測値を円の面積としたときの円の直径を粒径として求めた。本願においては、１０００個の粒子の粒径の算術平均を平均粒径とした。変動係数も、１０００個の粒子の粒径分布から算出した値とした。
〔生体物質認識部位と蛍光物質内包ナノ粒子との結合〕
本実施の形態に係る生体物質認識部位とは、目的とする生体物質と特異的に結合及び／又は反応する部位である。目的とする生体物質は、それと特異的に結合する物質が存在するものであれば特に限定されるものではないが、代表的にはタンパク質（ペプチド）および核酸（オリゴヌクレオチド、ポリヌクレオチド）、抗体等が挙げられる。したがって、そのような目的とする生体物質に結合する物質としては、前記タンパク質を抗原として認識する抗体やそれに特異的に結合する他のタンパク質等、および前記核酸にハイブリタイズする塩基配列を有する核酸等が挙げられる。具体的には、細胞表面に存在するタンパク質であるＨＥＲ２に特異的に結合する抗ＨＥＲ２抗体、細胞核に存在するエストロゲン受容体（ＥＲ）に特異的に結合する抗ＥＲ抗体、細胞骨格を形成するアクチンに特異的に結合する抗アクチン抗体等があげられる。中でも抗ＨＥＲ２抗体及び抗ＥＲ抗体を蛍光物質内包ナノ粒子に結合させたものは、乳癌の投薬選定に用いることができ、好ましい。
本実施の形態に係る生体物質認識部位とは、目的とする生体物質と特異的に結合及び／又は反応する部位である。目的とする生体物質は、それと特異的に結合する物質が存在するものであれば特に限定されるものではないが、代表的にはタンパク質（ペプチド）および核酸（オリゴヌクレオチド、ポリヌクレオチド）、抗体等が挙げられる。したがって、そのような目的とする生体物質に結合する物質としては、前記タンパク質を抗原として認識する抗体やそれに特異的に結合する他のタンパク質等、および前記核酸にハイブリタイズする塩基配列を有する核酸等が挙げられる。具体的には、細胞表面に存在するタンパク質であるＨＥＲ２に特異的に結合する抗ＨＥＲ２抗体、細胞核に存在するエストロゲン受容体（ＥＲ）に特異的に結合する抗ＥＲ抗体、細胞骨格を形成するアクチンに特異的に結合する抗アクチン抗体等があげられる。中でも抗ＨＥＲ２抗体及び抗ＥＲ抗体を蛍光物質内包ナノ粒子に結合させたものは、乳癌の投薬選定に用いることができ、好ましい。
生体物質認識部位と蛍光物質内包ナノ粒子の結合の態様としては特に限定されず、共有結合、イオン結合、水素結合、配位結合、物理吸着及び化学吸着等が挙げられる。結合の安定性から共有結合等の結合力の強い結合が好ましい。
また、生体物質認識部位と蛍光物質内包ナノ粒子の間を連結する有機分子があってもよい。例えば、生体物質との非特異的吸着を抑制するため、ポリエチレングリコール鎖を用いることができ、Ｔｈｅｒｍｏ Ｓｃｉｅｎｔｉｆｉｃ社製ＳＭ（ＰＥＧ）１２を用いることができる。
蛍光物質内包シリカナノ粒子へ生体物質認識部位を結合させる場合、蛍光物質が蛍光有機色素の場合でも、量子ドットの場合でも同様の手順を適用することができる。例えば、無機物と有機物を結合させるために広く用いられている化合物であるシランカップリング剤を用いることができる。このシランカップリング剤は、分子の一端に加水分解でシラノール基を与えるアルコキシシリル基を有し、他端に、カルボキシル基、アミノ基、エポキシ基、アルデヒド基等の官能基を有する化合物であり、上記シラノール基の酸素原子を介して無機物と結合する。具体的には、メルカプトプロピルトリエトキシシラン、グリシドキシプロピルトリエトキシシラン、アミノプロピルトリエトキシシラン、ポリエチレングリコール鎖をもつシランカップリング剤（例えば、Ｇｅｌｅｓｔ社製ＰＥＧ−ｓｉｌａｎｅ ｎｏ．ＳＩＭ６４９２．７）等が挙げられる。シランカップリング剤を用いる場合、二種以上を併用してもよい。
蛍光有機色素内包シリカナノ粒子とシランカップリング剤との反応手順は、公知の手法を用いることができる。例えば、得られた蛍光有機色素内包シリカナノ粒子を純水中に分散させ、アミノプロピルトリエトキシシランを添加し、室温で１２時間反応させる。反応終了後、遠心分離又はろ過により表面がアミノプロピル基で修飾された蛍光有機色素内包シリカナノ粒子を得ることができる。続いてアミノ基と抗体中のカルボキシル基とを反応させることで、アミド結合を介し抗体を蛍光有機色素内包シリカナノ粒子と結合させることができる。必要に応じて、ＥＤＣ（１−Ｅｔｈｙｌ−３−［３−Ｄｉｍｅｔｈｙｌａｍｉｎｏｐｒｏｐｙｌ］ｃａｒｂｏｄｉｉｍｉｄｅ Ｈｙｄｒｏｃｈｌｏｒｉｄｅ：Ｐｉｅｒｃｅ（登録商標）社製）のような縮合剤を用いることもできる。
必要により、有機分子で修飾された蛍光有機色素内包シリカナノ粒子と直接結合しうる部位と、分子標的物質と結合しうる部位とを有するリンカー化合物を用いることができる。具体例として、アミノ基と選択的に反応する部位とメルカプト基と選択的に反応する部位の両方をもつｓｕｌｆｏ−ＳＭＣＣ（Ｓｕｌｆｏｓｕｃｃｉｎｉｍｉｄｙｌ ４［Ｎ−ｍａｌｅｉｍｉｄｏｍｅｔｈｙｌ］−ｃｙｃｌｏｈｅｘａｎｅ−１−ｃａｒｂｏｘｙｌａｔｅ：Ｐｉｅｒｃｅ社製）を用いると、アミノプロピルトリエトキシシランで修飾した蛍光有機色素内包シリカナノ粒子のアミノ基と、抗体中のメルカプト基を結合させることで、抗体結合した蛍光有機色素内包シリカナノ粒子ができる。
蛍光物質内包ポリスチレンナノ粒子へ生体物質認識部位を結合させる場合、蛍光物質が蛍光有機色素の場合でも、量子ドットの場合でも同様の手順を適用することができる。すなわち、アミノ基等の官能基をもつポリスチレンナノ粒子へ蛍光有機色素、量子ドットを含浸することにより、官能基もつ蛍光物質内包ポリスチレンナノ粒子を得ることができ、以降ＥＤＣ又はｓｕｌｆｏ−ＳＭＣＣを用いることで、抗体結合した蛍光物質内包ポリスチレンナノ粒子ができる。
特定抗原を認識する抗体としては、Ｍ．アクチン、Ｍ．Ｓ．アクチン、Ｓ．Ｍ．アクチン、ＡＣＴＨ、Ａｌｋ−１、α１−アンチキモトリプシン、α１−アンチトリプシン、ＡＦＰ、ｂｃｌ−２、ｂｃｌ−６、β−カテニン、ＢＣＡ２２５、ＣＡ１９−９、ＣＡ１２５、カルシトニン、カルレチニン、ＣＤ１ａ、ＣＤ３、ＣＤ４、ＣＤ５、ＣＤ８、ＣＤ１０、ＣＤ１５、ＣＤ２０、ＣＤ２１、ＣＤ２３、ＣＤ３０、ＣＤ３１、ＣＤ３４、ＣＤ４３、ＣＤ４５、ＣＤ４５Ｒ、ＣＤ５６、ＣＤ５７、ＣＤ６１、ＣＤ６８、ＣＤ７９ａ、“ＣＤ９９、ＭＩＣ２“、ＣＤ１３８、クロモグラニン、ｃ−ＫＩＴ、ｃ−ＭＥＴ、コラーゲンタイプIV、Ｃｏｘ−２、サイクリンD1、ケラチン、サイトケラチン（高分子量）、パンケラチン、パンケラチン、サイトケラチン５／６、サイトケラチン７、サイトケラチン８、サイトケラチン８／１８、サイトケラチン１４、サイトケラチン１９、サイトケラチン２０、ＣＭＶ、Ｅ−カドヘリン、ＥＧＦＲ、ＥＲ、ＥＭＡ、ＥＢＶ、第ＶＩＩＩ因子関連抗原、ファッシン、ＦＳＨ、ガレクチン−３、ガストリン、ＧＦＡＰ、グルカゴン、グリコフォリンＡ、グランザイムＢ、ｈＣＧ、ｈＧＨ、ヘリコバクターピロリ、ＨＢｃ抗原、ＨＢｓ抗原、ヘパトサイト特異抗原、ＨＥＲ２、ＨＳＶ−Ｉ、ＨＳＶ−ＩＩ、ＨＨＶ−８、ＩｇＡ、ＩｇＧ、ＩｇＭ、ＩＧＦ−１Ｒ、インヒビン、インスリン、カッパL鎖、Ｋｉ６７、ラムダL鎖、ＬＨ、リゾチーム、マクロファージ、メランＡ、ＭＬＨ−１、ＭＳＨ−２、ミエロパーオキシダーゼ、ミオゲニン、ミオグロビン、ミオシン、ニューロフィラメント、ＮＳＥ、ｐ２７（Ｋｉｐ１）、ｐ５３、Ｐ６３、ＰＡＸ５、ＰＬＡＰ、ニューモシスティス カリニ、ポドプラニン（Ｄ２−４０）、ＰＧＲ、プロラクチン、ＰＳＡ、前立腺酸性フォスファターゼ、Ｒｅｎａｌ Ｃｅｌｌ Ｃａｒｃｉｎｏｍａ、Ｓ１００、ソマトスタチン、スペクトリン、シナプトフィジン、ＴＡＧ−７２、ＴｄＴ、サイログロブリン、ＴＳＨ、ＴＴＦ−１、ＴＲＡｃＰ、トリプターゼ、ビリン、ビメンチン、ＷＴ１、Ｚａｐ−７０が挙げられる。
〔染色方法〕
以下、組織切片の染色方法について述べる。以下に説明する染色方法は病理切片組織に限定せず、細胞染色にも適用可能である。
また、以下に説明する染色方法が適用できる切片の作製法は特に限定されず、公知の方法により作製されたものを用いることができる。
以下、組織切片の染色方法について述べる。以下に説明する染色方法は病理切片組織に限定せず、細胞染色にも適用可能である。
また、以下に説明する染色方法が適用できる切片の作製法は特に限定されず、公知の方法により作製されたものを用いることができる。
１）脱パラフィン工程
キシレンを入れた容器に病理切片を浸漬させ、パラフィンを除去する。温度は特に限定されるものではないが、室温で行うことができる。浸漬時間は、３分以上３０分以下であることが好ましい。また、必要により浸漬途中でキシレンを交換してもよい。
次いで、エタノールを入れた容器に病理切片を浸漬させ、キシレンを除去する。温度は特に限定されるものではないが、室温で行うことができる。浸漬時間は、３分以上３０分以下であることが好ましい。また、必要により浸漬途中でエタノールを交換してもよい。
次いで、水を入れた容器に病理切片を浸漬させ、エタノールを除去する。温度は特に限定されるものではないが、室温で行うことができる。浸漬時間は、３分以上３０分以下であることが好ましい。また、必要により浸漬途中で水を交換してもよい。
キシレンを入れた容器に病理切片を浸漬させ、パラフィンを除去する。温度は特に限定されるものではないが、室温で行うことができる。浸漬時間は、３分以上３０分以下であることが好ましい。また、必要により浸漬途中でキシレンを交換してもよい。
次いで、エタノールを入れた容器に病理切片を浸漬させ、キシレンを除去する。温度は特に限定されるものではないが、室温で行うことができる。浸漬時間は、３分以上３０分以下であることが好ましい。また、必要により浸漬途中でエタノールを交換してもよい。
次いで、水を入れた容器に病理切片を浸漬させ、エタノールを除去する。温度は特に限定されるものではないが、室温で行うことができる。浸漬時間は、３分以上３０分以下であることが好ましい。また、必要により浸漬途中で水を交換してもよい。
２）賦活化処理
公知の方法にならい、目的とする生体物質の賦活化処理を行う。賦活化条件に特に定めはないが、賦活液としては、０．０１Ｍ クエン酸緩衝液（ｐＨ６．０）、１ｍＭ ＥＤＴＡ溶液（ｐＨ８．０）、５％尿素、０．１Ｍ トリス塩酸緩衝液等を用いることができる。加熱機器は、オートクレーブ、マイクロウェーブ、圧力鍋、ウォーターバス等を用いることができる。温度は特に限定されるものではないが、室温で行うことができる。温度は５０−１３０℃、時間は５−３０分で行うことができる。
次いで、ＰＢＳ（Phosphate Buffered Saline：リン酸緩衝生理食塩水）を入れた容器に、賦活化処理後の切片を浸漬させ、洗浄を行う。温度は特に限定されるものではないが、室温で行うことができる。浸漬時間は、３分以上３０分以下であることが好ましい。また、必要により浸漬途中でＰＢＳを交換してもよい。
公知の方法にならい、目的とする生体物質の賦活化処理を行う。賦活化条件に特に定めはないが、賦活液としては、０．０１Ｍ クエン酸緩衝液（ｐＨ６．０）、１ｍＭ ＥＤＴＡ溶液（ｐＨ８．０）、５％尿素、０．１Ｍ トリス塩酸緩衝液等を用いることができる。加熱機器は、オートクレーブ、マイクロウェーブ、圧力鍋、ウォーターバス等を用いることができる。温度は特に限定されるものではないが、室温で行うことができる。温度は５０−１３０℃、時間は５−３０分で行うことができる。
次いで、ＰＢＳ（Phosphate Buffered Saline：リン酸緩衝生理食塩水）を入れた容器に、賦活化処理後の切片を浸漬させ、洗浄を行う。温度は特に限定されるものではないが、室温で行うことができる。浸漬時間は、３分以上３０分以下であることが好ましい。また、必要により浸漬途中でＰＢＳを交換してもよい。
３）生体物質認識部位が結合された蛍光物質内包ナノ粒子を用いた染色
生体物質認識部位が結合された蛍光物質内包ナノ粒子のＰＢＳ分散液を病理切片に載せ、目的とする生体物質と反応させる。蛍光物質内包ナノ粒子と結合させる生体物質認識部位を変えることにより、さまざまな生体物質に対応した染色が可能となる。数種類の生体物質認識部位が結合された蛍光物質内包ナノ粒子を用いる場合には、それぞれの蛍光物質内包ナノ粒子ＰＢＳ分散液を予め混合しておいてもよいし、別々に順次病理切片に載せてもよい。
温度は特に限定されるものではないが、室温で行うことができる。反応時間は、３０分以上２４時間以下であることが好ましい。
蛍光物質内包ナノ粒子による染色を行う前に、ＢＳＡ含有ＰＢＳ等、公知のブロッキング剤を滴下することが好ましい。
次いで、ＰＢＳを入れた容器に、染色後の切片を浸漬させ、未反応蛍光物質内包ナノ粒子の除去を行う。温度は特に限定されるものではないが、室温で行うことができる。浸漬時間は、３分以上３０分以下であることが好ましい。また、必要により浸漬途中でＰＢＳを交換してもよい。カバーガラスを切片に載せ、封入する。必要に応じて市販の封入剤を使用してもよい。
なお、ＨＥ染色試薬を用いて染色を行う場合、カバーガラスによる封入前にＨＥ染色を行う。
生体物質認識部位が結合された蛍光物質内包ナノ粒子のＰＢＳ分散液を病理切片に載せ、目的とする生体物質と反応させる。蛍光物質内包ナノ粒子と結合させる生体物質認識部位を変えることにより、さまざまな生体物質に対応した染色が可能となる。数種類の生体物質認識部位が結合された蛍光物質内包ナノ粒子を用いる場合には、それぞれの蛍光物質内包ナノ粒子ＰＢＳ分散液を予め混合しておいてもよいし、別々に順次病理切片に載せてもよい。
温度は特に限定されるものではないが、室温で行うことができる。反応時間は、３０分以上２４時間以下であることが好ましい。
蛍光物質内包ナノ粒子による染色を行う前に、ＢＳＡ含有ＰＢＳ等、公知のブロッキング剤を滴下することが好ましい。
次いで、ＰＢＳを入れた容器に、染色後の切片を浸漬させ、未反応蛍光物質内包ナノ粒子の除去を行う。温度は特に限定されるものではないが、室温で行うことができる。浸漬時間は、３分以上３０分以下であることが好ましい。また、必要により浸漬途中でＰＢＳを交換してもよい。カバーガラスを切片に載せ、封入する。必要に応じて市販の封入剤を使用してもよい。
なお、ＨＥ染色試薬を用いて染色を行う場合、カバーガラスによる封入前にＨＥ染色を行う。
〔蛍光画像の取得〕
染色した病理切片に対し顕微鏡画像取得装置１Ａを用いて、広視野の顕微鏡画像（蛍光画像）を取得する。顕微鏡画像取得装置１Ａにおいて、染色試薬に用いた蛍光物質の吸収極大波長及び蛍光波長に対応した励起光源及び蛍光検出用光学フィルターを選択する。
蛍光画像の視野は、３ｍｍ2以上であることが好ましく、３０ｍｍ2以上であることがさらに好ましく、３００ｍｍ2以上であることがさらに好ましい。
染色した病理切片に対し顕微鏡画像取得装置１Ａを用いて、広視野の顕微鏡画像（蛍光画像）を取得する。顕微鏡画像取得装置１Ａにおいて、染色試薬に用いた蛍光物質の吸収極大波長及び蛍光波長に対応した励起光源及び蛍光検出用光学フィルターを選択する。
蛍光画像の視野は、３ｍｍ2以上であることが好ましく、３０ｍｍ2以上であることがさらに好ましく、３００ｍｍ2以上であることがさらに好ましい。
＜蛍光輝点とＦＩＳＨスコアとの関係＞
ここで、本件出願人は、以下に説明するように、一実施例として、Ｃｙ５内包シリカナノ粒子（以下、ナノ粒子１という。）を作製し、ナノ粒子１に対して抗ＨＥＲ２抗体を結合させた標識材料Ａを作製した。また、ＣｄＳｅ／ＺｎＳ内包シリカナノ粒子（以下、ナノ粒子２という）を作製し、ナノ粒子２に対して抗ＨＥＲ２抗体を結合させた標識材料Ｂを作製した。そして、作製した標識材料Ａ、Ｂ及び比較例としての標識材料Ｃ、Ｄを用いて予めＦＩＳＨスコアを測定したヒト***組織の隣接切片を用いて免疫染色を行って視野を変えて複数の蛍光画像を取得し、各蛍光画像に現れている蛍光輝点の数を計測してＦＩＳＨスコアとの関連を調べる実験を行った。
ここで、本件出願人は、以下に説明するように、一実施例として、Ｃｙ５内包シリカナノ粒子（以下、ナノ粒子１という。）を作製し、ナノ粒子１に対して抗ＨＥＲ２抗体を結合させた標識材料Ａを作製した。また、ＣｄＳｅ／ＺｎＳ内包シリカナノ粒子（以下、ナノ粒子２という）を作製し、ナノ粒子２に対して抗ＨＥＲ２抗体を結合させた標識材料Ｂを作製した。そして、作製した標識材料Ａ、Ｂ及び比較例としての標識材料Ｃ、Ｄを用いて予めＦＩＳＨスコアを測定したヒト***組織の隣接切片を用いて免疫染色を行って視野を変えて複数の蛍光画像を取得し、各蛍光画像に現れている蛍光輝点の数を計測してＦＩＳＨスコアとの関連を調べる実験を行った。
〔蛍光物質内包ナノ粒子の合成〕
（合成例１：蛍光有機色素内包シリカ：Ｃｙ５内包シリカナノ粒子の合成）
下記工程（１）〜（５）の方法により、Ｃｙ５内包シリカナノ粒子（ナノ粒子１）を作製した。
工程（１）：Ｃｙ５のＮ−ヒドロキシスクシンイミドエステル誘導体（ＧＥヘルスケア社製）１ｍｇ（０．００１２６ｍｍｏｌ）とテトラエトキシシラン４００μＬ（１．７９６ｍｍｏｌ）を混合した。
工程（２）：エタノール４０ｍＬと１４％アンモニア水１０ｍＬを混合した。
工程（３）：工程（２）で作製した混合液を室温下で撹拌しているところに、工程（１）で調製した混合液を添加した。添加開始から１２時間撹拌を行った。
工程（４）：反応混合物を１００００Ｇで６０分遠心分離を行い、上澄みを除去した。
工程（５）：エタノールを加え、沈降物を分散させ、再度遠心分離を行った。同様の手順でエタノールと純水による洗浄を１回ずつ行った。
得られたナノ粒子１を走査型電子顕微鏡（ＳＥＭ；日立（登録商標）社製Ｓ−８００型）で観察したところ、平均粒径は１１０ｎｍ、変動係数は１２％であった。
（合成例１：蛍光有機色素内包シリカ：Ｃｙ５内包シリカナノ粒子の合成）
下記工程（１）〜（５）の方法により、Ｃｙ５内包シリカナノ粒子（ナノ粒子１）を作製した。
工程（１）：Ｃｙ５のＮ−ヒドロキシスクシンイミドエステル誘導体（ＧＥヘルスケア社製）１ｍｇ（０．００１２６ｍｍｏｌ）とテトラエトキシシラン４００μＬ（１．７９６ｍｍｏｌ）を混合した。
工程（２）：エタノール４０ｍＬと１４％アンモニア水１０ｍＬを混合した。
工程（３）：工程（２）で作製した混合液を室温下で撹拌しているところに、工程（１）で調製した混合液を添加した。添加開始から１２時間撹拌を行った。
工程（４）：反応混合物を１００００Ｇで６０分遠心分離を行い、上澄みを除去した。
工程（５）：エタノールを加え、沈降物を分散させ、再度遠心分離を行った。同様の手順でエタノールと純水による洗浄を１回ずつ行った。
得られたナノ粒子１を走査型電子顕微鏡（ＳＥＭ；日立（登録商標）社製Ｓ−８００型）で観察したところ、平均粒径は１１０ｎｍ、変動係数は１２％であった。
（合成例２：量子ドット内包シリカ：発光波長６５５ｎｍのＣｄＳｅ／ＺｎＳ内包シリカナノ粒子の合成）
下記工程（１）〜（５）の方法により、ＣｄＳｅ／ＺｎＳ内包シリカナノ粒子（以下、ナノ粒子２という。）を作製した。
工程（１）：ＣｄＳｅ／ＺｎＳデカン分散液（インビトロジェン社Ｑｄｏｔ６５５）１０μＬとテトラエトキシシラン４０μＬを混合した。
工程（２）：エタノール４ｍＬと１４％アンモニア水１ｍＬを混合した。
工程（３）：工程（２）で作製した混合液を室温下で撹拌しているところに、工程（１）で作製した混合液を添加した。添加開始から１２時間撹拌を行った。
工程（４）：反応混合物を１００００Ｇで６０分遠心分離を行い、上澄みを除去した。
工程（５）：エタノールを加え、沈降物を分散させ、再度遠心分離を行った。同様の手順でエタノールと純水による洗浄を１回ずつ行った。
得られたナノ粒子２を走査型電子顕微鏡で観察したところ、平均粒径は１３０ｎｍ、変動係数は１３％であった。
下記工程（１）〜（５）の方法により、ＣｄＳｅ／ＺｎＳ内包シリカナノ粒子（以下、ナノ粒子２という。）を作製した。
工程（１）：ＣｄＳｅ／ＺｎＳデカン分散液（インビトロジェン社Ｑｄｏｔ６５５）１０μＬとテトラエトキシシラン４０μＬを混合した。
工程（２）：エタノール４ｍＬと１４％アンモニア水１ｍＬを混合した。
工程（３）：工程（２）で作製した混合液を室温下で撹拌しているところに、工程（１）で作製した混合液を添加した。添加開始から１２時間撹拌を行った。
工程（４）：反応混合物を１００００Ｇで６０分遠心分離を行い、上澄みを除去した。
工程（５）：エタノールを加え、沈降物を分散させ、再度遠心分離を行った。同様の手順でエタノールと純水による洗浄を１回ずつ行った。
得られたナノ粒子２を走査型電子顕微鏡で観察したところ、平均粒径は１３０ｎｍ、変動係数は１３％であった。
〔蛍光物質内包シリカナノ粒子への抗体の結合〕
下記工程（１）〜（１２）の方法により、蛍光物質内包シリカナノ粒子に対して抗体を結合させた。ここでは、ナノ粒子１を用いた例を示すが、ナノ粒子２についても同様である。
工程（１）：１ｍｇのナノ粒子１を純水５ｍＬに分散させた。次いで、アミノプロピルトリエトキシシラン水分散液１００μＬを添加し、室温で１２時間撹拌した。
工程（２）：反応混合物を１００００Ｇで６０分遠心分離を行い、上澄みを除去した。
工程（３）：エタノールを加え、沈降物を分散させ、再度遠心分離を行った。同様の手順でエタノールと純水による洗浄を１回ずつ行った。
得られたアミノ基修飾したシリカナノ粒子のＦＴ−ＩＲ測定を行ったところ、アミノ基に由来する吸収が観測でき、アミノ基修飾されたことが確認できた。
下記工程（１）〜（１２）の方法により、蛍光物質内包シリカナノ粒子に対して抗体を結合させた。ここでは、ナノ粒子１を用いた例を示すが、ナノ粒子２についても同様である。
工程（１）：１ｍｇのナノ粒子１を純水５ｍＬに分散させた。次いで、アミノプロピルトリエトキシシラン水分散液１００μＬを添加し、室温で１２時間撹拌した。
工程（２）：反応混合物を１００００Ｇで６０分遠心分離を行い、上澄みを除去した。
工程（３）：エタノールを加え、沈降物を分散させ、再度遠心分離を行った。同様の手順でエタノールと純水による洗浄を１回ずつ行った。
得られたアミノ基修飾したシリカナノ粒子のＦＴ−ＩＲ測定を行ったところ、アミノ基に由来する吸収が観測でき、アミノ基修飾されたことが確認できた。
工程（４）：工程（３）で得られたアミノ基修飾したシリカナノ粒子を、ＥＤＴＡ（エチレンジアミン四酢酸）を２ｍＭ含有したＰＢＳを用いて３ｎＭに調整した。
工程（５）：工程（４）で調整した溶液に、最終濃度１０ｍＭとなるようＳＭ（ＰＥＧ）１２（サーモサイエンティフィック社製、ｓｕｃｃｉｎｉｍｉｄｙｌ−［（Ｎ−ｍａｌｅｏｍｉｄｏｐｒｏｐｉｏｎａｍｉｄ）−ｄｏｄｅｃａｅｔｈｙｌｅｎｅｇｌｙｃｏｌ］ｅｓｔｅｒ）を混合し、１時間反応させた。
工程（６）：反応混合液を１００００Ｇで６０分遠心分離を行い、上澄みを除去した
工程（７）：ＥＤＴＡを２ｍＭ含有したＰＢＳを加え、沈降物を分散させ、再度遠心分離を行った。同様の手順による洗浄を３回行った。最後に５００μＬのＰＢＳを用いて再分散させた。
工程（５）：工程（４）で調整した溶液に、最終濃度１０ｍＭとなるようＳＭ（ＰＥＧ）１２（サーモサイエンティフィック社製、ｓｕｃｃｉｎｉｍｉｄｙｌ−［（Ｎ−ｍａｌｅｏｍｉｄｏｐｒｏｐｉｏｎａｍｉｄ）−ｄｏｄｅｃａｅｔｈｙｌｅｎｅｇｌｙｃｏｌ］ｅｓｔｅｒ）を混合し、１時間反応させた。
工程（６）：反応混合液を１００００Ｇで６０分遠心分離を行い、上澄みを除去した
工程（７）：ＥＤＴＡを２ｍＭ含有したＰＢＳを加え、沈降物を分散させ、再度遠心分離を行った。同様の手順による洗浄を３回行った。最後に５００μＬのＰＢＳを用いて再分散させた。
工程（８）：抗ＨＥＲ２抗体１００μｇを１００μＬのＰＢＳに溶解させたところに、１Ｍジチオスレイトール（ＤＴＴ）を添加し、３０分反応させた。
工程（９）：反応混合物についてゲルろ過カラムにより過剰のＤＴＴを除去し、還元化抗ＨＥＲ２抗体溶液を得た。
工程（９）：反応混合物についてゲルろ過カラムにより過剰のＤＴＴを除去し、還元化抗ＨＥＲ２抗体溶液を得た。
工程（１０）：ナノ粒子１を出発原料として工程（７）で得られた粒子分散液と工程（９）で得られた還元化抗ＨＥＲ２抗体溶液とをＰＢＳ中で混合し、１時間反応させた。
工程（１１）：１０ｍＭメルカプトエタノール４μＬを添加し、反応を停止させた。
工程（１２）：反応混合物を１００００Ｇで６０分遠心分離を行い、上澄みを除去した後、ＥＤＴＡを２ｍＭ含有したＰＢＳを加え、沈降物を分散させ、再度遠心分離を行った。同様の手順による洗浄を３回行った。最後に５００μＬのＰＢＳを用いて再分散させ、抗ＨＥＲ２抗体が結合された蛍光物質内包シリカナノ粒子を得た。
工程（１１）：１０ｍＭメルカプトエタノール４μＬを添加し、反応を停止させた。
工程（１２）：反応混合物を１００００Ｇで６０分遠心分離を行い、上澄みを除去した後、ＥＤＴＡを２ｍＭ含有したＰＢＳを加え、沈降物を分散させ、再度遠心分離を行った。同様の手順による洗浄を３回行った。最後に５００μＬのＰＢＳを用いて再分散させ、抗ＨＥＲ２抗体が結合された蛍光物質内包シリカナノ粒子を得た。
ナノ粒子１を出発原料として得られた抗ＨＥＲ２抗体が結合された蛍光物質内包シリカナノ粒子を標識材料Ａ、ナノ粒子２を出発原料として得られた抗ＨＥＲ２抗体が結合された蛍光物質内包シリカナノ粒子を標識材料Ｂとする。
また、比較例として、Ｃｙ５に抗ＨＥＲ２抗体を結合させ、還元化抗ＨＥＲ２抗体溶液（標識材料Ｄ）を得た。同様に、ＣｄＳｅに抗ＨＥＲ２抗体を結合させたものを標識材料Ｃとして作製した。
〔蛍光物質内包ナノ粒子を用いた組織染色〕
下記工程（１）〜（１０）の方法により、作製した抗体結合標識材料Ａ〜Ｄを用い、予めＦＩＳＨスコアを測定したヒト***組織の隣接切片を用いて免疫染色を行った。染色切片はコスモバイオ社製の組織アレイスライド（ＣＢ−Ａ７１２）を用いた。ＦＩＳＨスコアで１〜９の２４切片を用いた。
下記工程（１）〜（１０）の方法により、作製した抗体結合標識材料Ａ〜Ｄを用い、予めＦＩＳＨスコアを測定したヒト***組織の隣接切片を用いて免疫染色を行った。染色切片はコスモバイオ社製の組織アレイスライド（ＣＢ−Ａ７１２）を用いた。ＦＩＳＨスコアで１〜９の２４切片を用いた。
工程（１）：キシレンを入れた容器に病理切片を３０分浸漬させた。途中３回キシレンを交換した。
工程（２）：エタノールを入れた容器に病理切片を３０分浸漬させた。途中３回エタノールを交換した。
工程（３）：水を入れた容器に病理切片を３０分浸漬させた。途中３回水を交換した。
工程（４）：１０ｍＭクエン酸緩衝液（ｐＨ６．０）に病理切片を３０分浸漬させた。
工程（５）：１２１度で１０分オートクレーブ処理を行った。
工程（６）：ＰＢＳを入れた容器に、オートクレーブ処理後の切片を３０分浸漬させた。
工程（７）：１％ＢＳＡ含有ＰＢＳを組織に載せて、１時間放置した。
工程（８）：１％ＢＳＡ含有ＰＢＳで０．０５ｎＭに希釈した抗ＨＥＲ２抗体が結合された標識材料Ａ〜Ｄを、各組織切片に載せて３時間放置した。
工程（９）：ＰＢＳを入れた容器に、染色後の切片をそれぞれ３０分浸漬させた。
工程（１０）：Ｍｅｒｃｋ Ｃｈｅｍｉｃａｌｓ社製Ａｑｕａｔｅｘを滴下後、カバーガラスを載せ封入した。
工程（２）：エタノールを入れた容器に病理切片を３０分浸漬させた。途中３回エタノールを交換した。
工程（３）：水を入れた容器に病理切片を３０分浸漬させた。途中３回水を交換した。
工程（４）：１０ｍＭクエン酸緩衝液（ｐＨ６．０）に病理切片を３０分浸漬させた。
工程（５）：１２１度で１０分オートクレーブ処理を行った。
工程（６）：ＰＢＳを入れた容器に、オートクレーブ処理後の切片を３０分浸漬させた。
工程（７）：１％ＢＳＡ含有ＰＢＳを組織に載せて、１時間放置した。
工程（８）：１％ＢＳＡ含有ＰＢＳで０．０５ｎＭに希釈した抗ＨＥＲ２抗体が結合された標識材料Ａ〜Ｄを、各組織切片に載せて３時間放置した。
工程（９）：ＰＢＳを入れた容器に、染色後の切片をそれぞれ３０分浸漬させた。
工程（１０）：Ｍｅｒｃｋ Ｃｈｅｍｉｃａｌｓ社製Ａｑｕａｔｅｘを滴下後、カバーガラスを載せ封入した。
〔実験結果〕
各標識材料Ａ〜Ｄを用いて染色した組織切片について、視野（観察面積）を変えて複数の蛍光画像を取得し、画像解析ソフトにより、各蛍光画像から蛍光輝点の数（輝点数）を計測した。
なお、顕微鏡は、カールツアイス社製正立顕微鏡Ａｘｉｏ Ｉｍａｇｅｒ Ｍ２を用い、対物レンズを２０倍に設定し、６３０〜６７０ｎｍの波長を有する励起光を照射して、組織切片から発せられる蛍光を結像し、顕微鏡設置カメラ（モノクロ）により蛍光画像（画像データ）を取得し、画像解析ソフトにより輝点数を計測した。なお、上記カメラは画素サイズ６．４μｍ×６．４μｍ、縦画素数１０４０個、横画素数１３８８個（撮像領域８．９ｍｍ×６．７ｍｍ）を有している。
また、各標識材料Ａ〜Ｄについて、各視野において、計測された輝点数とＦＩＳＨスコアとの相関係数Ｒを算出した。ＦＩＳＨスコアは、ＨＥＲ２遺伝子の過剰発現レベルと対応しており、ＦＩＳＨスコアの値が大きいほど、ＨＥＲ２遺伝子の過剰発現レベルが高いことを示している。
各標識材料Ａ〜Ｄを用いて染色した組織切片について、視野（観察面積）を変えて複数の蛍光画像を取得し、画像解析ソフトにより、各蛍光画像から蛍光輝点の数（輝点数）を計測した。
なお、顕微鏡は、カールツアイス社製正立顕微鏡Ａｘｉｏ Ｉｍａｇｅｒ Ｍ２を用い、対物レンズを２０倍に設定し、６３０〜６７０ｎｍの波長を有する励起光を照射して、組織切片から発せられる蛍光を結像し、顕微鏡設置カメラ（モノクロ）により蛍光画像（画像データ）を取得し、画像解析ソフトにより輝点数を計測した。なお、上記カメラは画素サイズ６．４μｍ×６．４μｍ、縦画素数１０４０個、横画素数１３８８個（撮像領域８．９ｍｍ×６．７ｍｍ）を有している。
また、各標識材料Ａ〜Ｄについて、各視野において、計測された輝点数とＦＩＳＨスコアとの相関係数Ｒを算出した。ＦＩＳＨスコアは、ＨＥＲ２遺伝子の過剰発現レベルと対応しており、ＦＩＳＨスコアの値が大きいほど、ＨＥＲ２遺伝子の過剰発現レベルが高いことを示している。
図５は、標識材料Ａ（Ｃｙ５内包標識材料）を用いた場合の、複数の異なる視野（０．３ｍｍ2、３ｍｍ2、３２ｍｍ2、３２４ｍｍ2）の蛍光画像から計測された輝点数と、ＦＩＳＨスコアとの関係を示す図である。図中に示すＲ2の値は、輝点数とＦＩＳＨスコアとの相関係数の２乗値である。
図６は、標識材料Ｂ（ＣｄＳｅ内包標識材料）を用いた場合の、複数の異なる視野（０．３ｍｍ2、３ｍｍ2、３２ｍｍ2、３２４ｍｍ2）の蛍光画像から計測された輝点数と、ＦＩＳＨスコアとの関係を示す図である。
図７は、標識材料Ｃ（ＣｄＳｅ）を用いた場合の、複数の異なる視野（０．３ｍｍ2、３ｍｍ2、３２ｍｍ2、３２４ｍｍ2）の蛍光画像から計測された輝点数と、ＦＩＳＨスコアとの関係を示す図である。
図８は、標識材料Ｄ（Ｃｙ５）を用いた場合の、複数の異なる視野（０．３ｍｍ2、３ｍｍ2、３２ｍｍ2、３２４ｍｍ2）の蛍光画像から計測された輝点数と、ＦＩＳＨスコアとの関係を示す図である。
表１及び図９に、各標識材料Ａ〜Ｄについて、各視野（観察面積）の蛍光画像から計測された輝点数とＦＩＳＨスコアとの相関係数の２乗値（Ｒ2）を示す。
標識材料Ａを用いて組織切片を染色し、０．３ｍｍ2の視野の蛍光画像から輝点数を計測した場合には、輝点数とＦＩＳＨスコアとの相関係数の２乗値（Ｒ2）は０．１２４１であり、輝点数とＦＩＳＨスコアには、相関が見られなかった。０．３ｍｍ2の視野では、視野が狭すぎ、ばらつきが大きいためであると考えられる。
標識材料Ａを用いて組織切片を染色し、３ｍｍ2の視野の蛍光画像から輝点数を計測した場合には、輝点数とＦＩＳＨスコアとの相関係数の２乗値（Ｒ2）は０．５３８７であった。この値は、相関係数Ｒに換算すると約０．７３４となり、輝点数とＦＩＳＨスコアには、強い相関があるといえる。
標識材料Ａを用いて組織切片を染色し、３２ｍｍ2の視野の蛍光画像から輝点数を計測した場合には、輝点数とＦＩＳＨスコアとの相関係数の２乗値（Ｒ2）は０．９０１１であった。視野が３２ｍｍ2の場合には、視野が３ｍｍ2の場合と比較して、さらに相関が強いといえる。
標識材料Ａを用いて組織切片を染色し、３２４ｍｍ2の視野の蛍光画像から輝点数を計測した場合には、輝点数とＦＩＳＨスコアとの相関係数の２乗値（Ｒ2）は０．９８８７であった。視野が３２４ｍｍ2の場合には、視野が３２ｍｍ2の場合と比較して、さらに相関が強いといえる。
標識材料Ｂを用いた場合も同様に、３ｍｍ2以上の視野では、輝点数とＦＩＳＨスコアには相関があり、視野が広いほど相関係数が大きくなることがわかった。
また、標識材料Ａ，Ｂを用いた場合の結果から、３２４ｍｍ2の視野では輝点数とＦＩＳＨスコアとの相関係数の２乗値（Ｒ2）が十分１に近いことがわかった。
一方、標識材料Ｃ又は標識材料Ｄを用いて組織切片を染色した場合には、輝点数とＦＩＳＨスコアには、相関が見られなかった。
また、観察対象となる組織切片の厚さ（通常は数μｍ）の上方、或いは下方部に顕微鏡のピントを若干ずらした場合であっても、上記の状況に大きな差異は見られなかった。
以上の結果から、標識材料Ａ，Ｂを用いて広視野で組織切片を観察した場合に、輝点数とＦＩＳＨスコアとの相関が良好であり、輝点数に基づいてＨＥＲ２の発現レベルを評価することが可能であることがわかった。すなわち、ＦＩＳＨ法のような手間のかかる方法を用いなくても、特定の生体物質を認識する生体物質認識部位が結合した蛍光物質内包ナノ粒子の染色試薬で組織切片を染色し、これを顕微鏡で拡大結像して撮影することにより得られた３ｍｍ2以上の視野の画像から輝点数を計測することにより、特定の生体物質の発現レベルを評価することができ、ＦＩＳＨ法に代わる方法として有効である。
標識材料Ａ，Ｂは、蛍光物質を内包した粒子を用いており、蛍光物質単体を用いた標識材料Ｃ，Ｄと比較して高輝度であるため、画像から輝点の１点１点を捉えやすく、輝点数を精度良く計測することができる。
＜病理診断支援システム１００の動作（病理診断支援方法を含む。）＞
以下、病理診断支援システム１００において、上記説明した蛍光画像及び明視野画像を取得して解析を行う動作について説明する。ここでは、特定のタンパク質（ここでは、乳癌組織におけるＫｉ６７タンパクまたはＨＥＲ２タンパクとする。以下、特定タンパクと呼ぶ。）を認識する生体物質認識部位が結合した蛍光物質内包ナノ粒子を含む染色試薬を用いて染色された組織切片を観察対象とする場合を例にとり説明するが、これに限定されるものではない。
以下、病理診断支援システム１００において、上記説明した蛍光画像及び明視野画像を取得して解析を行う動作について説明する。ここでは、特定のタンパク質（ここでは、乳癌組織におけるＫｉ６７タンパクまたはＨＥＲ２タンパクとする。以下、特定タンパクと呼ぶ。）を認識する生体物質認識部位が結合した蛍光物質内包ナノ粒子を含む染色試薬を用いて染色された組織切片を観察対象とする場合を例にとり説明するが、これに限定されるものではない。
まず、操作者は、ＨＥ染色試薬と、特定タンパクを認識する生体物質認識部位が結合した蛍光物質内包ナノ粒子を蛍光標識材料とした染色試薬との、２種の染色試薬を用いて組織切片を染色する。
その後、顕微鏡画像取得装置１Ａにおいて、（ａ１）〜（ａ５）の手順により明視野画像及び蛍光画像が取得される。
（ａ１）操作者は、ＨＥ染色試薬と蛍光物質内包ナノ粒子を含む染色試薬とによりそれぞれ染色された組織切片をスライドに載置し、そのスライドを顕微鏡画像取得装置１Ａのスライド固定ステージに設置する。
（ａ２）明視野ユニットに設定し、撮影倍率、ピントの調整を行い、組織上の観察対象の領域を視野に納める。
（ａ３）撮像手段で撮影を行って明視野画像の画像データを生成し、画像処理装置２Ａに画像データを送信する。
（ａ４）ユニットを蛍光ユニットに変更する。
（ａ５）視野及び撮影倍率を変えずに撮像手段で撮影を行って蛍光画像の画像データを生成し、画像処理装置２Ａに画像データを送信する。
その後、顕微鏡画像取得装置１Ａにおいて、（ａ１）〜（ａ５）の手順により明視野画像及び蛍光画像が取得される。
（ａ１）操作者は、ＨＥ染色試薬と蛍光物質内包ナノ粒子を含む染色試薬とによりそれぞれ染色された組織切片をスライドに載置し、そのスライドを顕微鏡画像取得装置１Ａのスライド固定ステージに設置する。
（ａ２）明視野ユニットに設定し、撮影倍率、ピントの調整を行い、組織上の観察対象の領域を視野に納める。
（ａ３）撮像手段で撮影を行って明視野画像の画像データを生成し、画像処理装置２Ａに画像データを送信する。
（ａ４）ユニットを蛍光ユニットに変更する。
（ａ５）視野及び撮影倍率を変えずに撮像手段で撮影を行って蛍光画像の画像データを生成し、画像処理装置２Ａに画像データを送信する。
なお、本願発明者等の検討によれば、ＨＥ染色と蛍光物質内包ナノ粒子による染色を同時に行う場合、組織の自家蛍光とエオジンの発光（バックグラウンド）に対し、１０％（１．１倍）以上の発光量差を蛍光物質内包ナノ粒子の蛍光輝点が有していれば、８ビット（０〜２５５階調）、１２ビット（０〜４０９５階調）の何れの処理系においても、顕微鏡画像（蛍光画像）から蛍光輝点の自動検出処理が可能であった。蛍光物質内包ナノ粒子による染色のみの場合においては、組織の自家蛍光に対し、１０％（１．１倍）以上の発光量差を蛍光物質内包ナノ粒子が有していれば、８ビット（０〜２５５階調）、１２ビット（０〜４０９５階調）の何れの処理系においても蛍光輝点の自動検出処理が可能であった。そのため、蛍光ユニットにおける励起光波長は５６０〜６３０ｎｍの範囲のものを選択することが好ましい。また、前記蛍光物質としては当該励起光により５８０〜６９０ｎｍの範囲、より好ましくは６００〜６３０ｎｍの範囲にピークを有する蛍光を発するものを用いることが好ましい。この範囲にピークを有する蛍光物質であれば、上記範囲の励起光を選択したときに、エオジンの発光を含む組織の自家蛍光と蛍光物質内包ナノ粒子からの蛍光の発光差を確保して両者を区別して認識可能とする（両者の光量差１０％（１．１倍）以上）を確保できるからである。
なお、ＨＥ染色を同時に行わない場合においては、組織の自家蛍光が微弱なため励起光の波長の範囲は、一般的な２００ｎｍ〜７００ｎｍの範囲で特に限定せずとも自家蛍光と蛍光物質内包ナノ粒子からの蛍光の発光差を確保して両者を区別して認識可能とする（両者の光量差１０％（１．１倍）以上）を確保することができる。
なお、ＨＥ染色を同時に行わない場合においては、組織の自家蛍光が微弱なため励起光の波長の範囲は、一般的な２００ｎｍ〜７００ｎｍの範囲で特に限定せずとも自家蛍光と蛍光物質内包ナノ粒子からの蛍光の発光差を確保して両者を区別して認識可能とする（両者の光量差１０％（１．１倍）以上）を確保することができる。
画像処理装置２Ａにおいては、明視野画像及び蛍光画像に基づき画像解析処理が実行される。
図１０に、画像処理装置２Ａにおける画像解析処理のフローチャートを示す。図１０に示す画像解析処理は、制御部２１と記憶部２５に記憶されているプログラムとの協働により実行される。
図１０に、画像処理装置２Ａにおける画像解析処理のフローチャートを示す。図１０に示す画像解析処理は、制御部２１と記憶部２５に記憶されているプログラムとの協働により実行される。
まず、通信Ｉ／Ｆ２４により顕微鏡画像取得装置１Ａからの明視野画像が入力されると（ステップＳ１）、明視野画像から細胞核の領域を示す核領域が抽出される（ステップＳ２）。
図１１に、ステップＳ２における処理の詳細フローを示す。ステップＳ２の処理は、制御部２１と記憶部２５に記憶されているプログラムとの協働により実行される。
図１１に、ステップＳ２における処理の詳細フローを示す。ステップＳ２の処理は、制御部２１と記憶部２５に記憶されているプログラムとの協働により実行される。
ステップＳ２においては、まず、明視野画像のモノクロ画像への変換が行われる（ステップＳ２０１）。図１２Ａに、モノクロ画像の一例を示す。
次いで、モノクロ画像に対し予め定められた閾値を用いて閾値処理が施され、各画素の値が２値化される（ステップＳ２０２）。図１２Ｂに、閾値処理後の二値画像の一例を示す。
次いで、モノクロ画像に対し予め定められた閾値を用いて閾値処理が施され、各画素の値が２値化される（ステップＳ２０２）。図１２Ｂに、閾値処理後の二値画像の一例を示す。
次いで、ノイズ処理が行われる（ステップＳ２０３）。ノイズ処理は、具体的には、二値画像にクロージング処理が施されることにより行うことができる。クロージング処理は、膨張処理を行ってから同じ回数分だけ収縮処理を行う処理である。膨張処理は、注目画素からｎ×ｎ画素（ｎは２以上の整数）の範囲内にある画素に１つでも白が含まれている場合に注目画素を白に置き換える処理である。収縮処理は、注目画素からｎ×ｎ画素の範囲内にある画素に１つでも黒が含まれている場合に注目画素を黒に置き換える処理である。クロージング処理により、ノイズ等の小さい領域を除去することができる。図１２Ｃに、ノイズ処理後の画像の一例を示す。図１２Ｃに示すように、ノイズ処理後には、細胞核が抽出された画像（細胞核画像）が得られる。
次いで、ノイズ処理後の画像にラベリング処理が施され、抽出された細胞核のそれぞれにラベルLabel_nucleusが付与される（ステップＳ２０４）。ラベリング処理とは、連結している画素に同じラベル（番号）を付与していくことで画像内のオブジェクトを識別する処理である。ラベリング処理により、ノイズ処理後の画像から各細胞核を識別してラベルを付与することができる。
なお、後述する蛍光輝点の抽出におけるラベルの番号と区別するため、コンピュータの保持できる最大値をＭＡＸとし、現在までに行ったラベリング回数をLabel_tempとすると、新たな細胞核にはラベルLabel_nucleusとして、ＭＡＸ−Label_tempが付与される。例えば、１０１個目の細胞核にラベルを付与する場合、Label_temp＝100であるので、ＭＡＸ＝65536とすると、Label_nucleusとして65436が付与される。
なお、後述する蛍光輝点の抽出におけるラベルの番号と区別するため、コンピュータの保持できる最大値をＭＡＸとし、現在までに行ったラベリング回数をLabel_tempとすると、新たな細胞核にはラベルLabel_nucleusとして、ＭＡＸ−Label_tempが付与される。例えば、１０１個目の細胞核にラベルを付与する場合、Label_temp＝100であるので、ＭＡＸ＝65536とすると、Label_nucleusとして65436が付与される。
一方、通信Ｉ／Ｆ２４により顕微鏡画像取得装置１Ａからの蛍光画像が入力されると（ステップＳ３）、蛍光画像から蛍光輝点が抽出される（ステップＳ４）。
図１３に、ステップＳ４における処理の詳細フローを示す。ステップＳ４の処理は、制御部２１と記憶部２５に記憶されているプログラムとの協働により実行される。
図１３に、ステップＳ４における処理の詳細フローを示す。ステップＳ４の処理は、制御部２１と記憶部２５に記憶されているプログラムとの協働により実行される。
まず、蛍光画像からＲ成分の抽出が行われる（ステップＳ４０１）。
次いで、Ｒ成分が抽出された画像にＴｏｐｈａｔ変換が施される（ステップＳ４０２）。Ｔｏｐｈａｔ変換は、入力画像の各画素の値から、入力画像に最小値フィルター及び最大値フィルターをこの順でかけた画像の、対応する画素の値を減算する処理である。最小値フィルターは、注目画素の近傍の画素（例えば、３×３画素）のうちの最小値で注目画素の値を置き換えるものである。最大値フィルターは、注目画素の近傍の画素（例えば、３×３画素）のうちの最大値で注目画素の値を置き換えるものである。Ｔｏｐｈａｔ変換により、濃淡プロファイル上の小突起（近傍の画素に比べて輝度の高い領域）を抽出することができる。これにより、蛍光輝点候補画像を得ることができる。図１４Ａに、蛍光輝点候補画像の一例を示す。
次いで、Ｒ成分が抽出された画像にＴｏｐｈａｔ変換が施される（ステップＳ４０２）。Ｔｏｐｈａｔ変換は、入力画像の各画素の値から、入力画像に最小値フィルター及び最大値フィルターをこの順でかけた画像の、対応する画素の値を減算する処理である。最小値フィルターは、注目画素の近傍の画素（例えば、３×３画素）のうちの最小値で注目画素の値を置き換えるものである。最大値フィルターは、注目画素の近傍の画素（例えば、３×３画素）のうちの最大値で注目画素の値を置き換えるものである。Ｔｏｐｈａｔ変換により、濃淡プロファイル上の小突起（近傍の画素に比べて輝度の高い領域）を抽出することができる。これにより、蛍光輝点候補画像を得ることができる。図１４Ａに、蛍光輝点候補画像の一例を示す。
次いで、蛍光輝点候補画像からノイズ除去が行われることにより、蛍光輝点が抽出された画像（蛍光輝点画像）が得られる（ステップＳ４０３）。図１４Ｂに、図１４Ａに示す蛍光輝点候補画像からノイズ除去後に得られる蛍光輝点画像を示す。
そして、ノイズ除去後の画像にラベリング処理が施され、抽出された蛍光輝点のそれぞれにラベルLabel_pointが付与される（ステップＳ４０４）。Label_pointは、１から順に付与される。ラベリング処理の終了後、処理は図１０のステップＳ５に移行する。
ステップＳ５において、制御部２１は、明視野画像において観察される細胞の形態と蛍光画像において観察される蛍光輝点に基づいて、明視野画像と蛍光画像との各画像の位置合わせを行う。
当該位置合わせに用いられる明視野画像はステップＳ２で得られた核領域画像（図１２Ｃ参照）であり、当該位置合わせに用いられる蛍光画像はステップＳ４で得られた蛍光輝点画像（図１４Ｂ参照）である。ステップＳ５では、明視野画像または蛍光画像の少なくとも何れか一方に対して、以下の式を用いた座標変換を施して平行移動、回転、拡大、または縮小の少なくとも一つの画像処理を行う。制御部２１は、パラメータｄｘ、ｄｙ、θ、α及びβを変えて、明視野画像及び蛍光画像の位置が最も合っているパラメータの組み合わせ（最適パラメータ）を探索する。
当該位置合わせに用いられる明視野画像はステップＳ２で得られた核領域画像（図１２Ｃ参照）であり、当該位置合わせに用いられる蛍光画像はステップＳ４で得られた蛍光輝点画像（図１４Ｂ参照）である。ステップＳ５では、明視野画像または蛍光画像の少なくとも何れか一方に対して、以下の式を用いた座標変換を施して平行移動、回転、拡大、または縮小の少なくとも一つの画像処理を行う。制御部２１は、パラメータｄｘ、ｄｙ、θ、α及びβを変えて、明視野画像及び蛍光画像の位置が最も合っているパラメータの組み合わせ（最適パラメータ）を探索する。
（ｄｘ、ｄｙ） ：平行移動量
θ ：回転移動量
（α、β） ：拡大率
（ｘ０、ｙ０） ：変換前の輝点座標
最適パラメータの探索において、明視野画像及び蛍光画像の位置が合っていることの判断は、特定タンパクおよび組織標本の種類に応じて、任意の基準を設けて行ってよいが、例えば、以下に挙げる判断方法のいずれかを用いることができる。なお、最適パラメータの探索方法は、総当たり探索でもＩＣＰのような反復探索手法でもよい。
（１−１）特定タンパクが核タンパク質である場合の判断方法１
特定タンパクが、例えばＫｉ６７のように細胞核に発現する核タンパク質である場合には、制御部２１は、例えば、染色された細胞核の内側に存在する輝点数が最大である時に、明視野画像及び蛍光画像の位置が合っていると判断する。
具体的には、例えば、ステップＳ４で抽出した蛍光輝点が、ステップＳ２で抽出したいずれかの核領域と重なっているか否かを判断し、重なっている場合には輝点のスコアを＋１、重なっていない場合には輝点のスコアを０として、画像全体のスコアの総和を算出する。図１５（ａ）の模式図においては、●で表される１６個の蛍光輝点３０のうち、１３個が核領域３１Ａまたは３１Ｂのいずれか一方と重なっているため、蛍光画像内の全ての輝点のスコアの総和は１３と算出される。また、図１５（ａ）の蛍光輝点を平行移動した図１５（ｂ）においては、スコアの総和は９と算出される。スコアの総和が最大となるパラメータを探索し、最適パラメータとして用いて座標変換を行うことにより、明視野画像と蛍光画像とが精度よく位置合わせされる。
特定タンパクが、例えばＫｉ６７のように細胞核に発現する核タンパク質である場合には、制御部２１は、例えば、染色された細胞核の内側に存在する輝点数が最大である時に、明視野画像及び蛍光画像の位置が合っていると判断する。
具体的には、例えば、ステップＳ４で抽出した蛍光輝点が、ステップＳ２で抽出したいずれかの核領域と重なっているか否かを判断し、重なっている場合には輝点のスコアを＋１、重なっていない場合には輝点のスコアを０として、画像全体のスコアの総和を算出する。図１５（ａ）の模式図においては、●で表される１６個の蛍光輝点３０のうち、１３個が核領域３１Ａまたは３１Ｂのいずれか一方と重なっているため、蛍光画像内の全ての輝点のスコアの総和は１３と算出される。また、図１５（ａ）の蛍光輝点を平行移動した図１５（ｂ）においては、スコアの総和は９と算出される。スコアの総和が最大となるパラメータを探索し、最適パラメータとして用いて座標変換を行うことにより、明視野画像と蛍光画像とが精度よく位置合わせされる。
（１−２）特定タンパクが核タンパク質である場合の判断方法２
また、特定タンパクが核タンパクである場合には、制御部２１は、例えば、染色された細胞核と輝点の距離の総和が最小となる時に、明視野画像及び蛍光画像の位置が合っていると判断してもよい。
具体的には、まず、ステップＳ４で抽出した各蛍光輝点において、ステップＳ４で抽出した核領域との距離を算出し、最も近い核領域を探して蛍光輝点と対応付ける。核領域との距離の定義は任意であるが、例えば、図１５（ｃ）において点線で示されるような核領域の重心３２と対応する蛍光輝点３０の距離、または、核領域３１Ａ及び３１Ｂの輪郭線と各蛍光輝点３０の距離を用いることができる。
全ての蛍光輝点について算出した細胞核との距離の総和が最小となるパラメータを最適パラメータとして用いて座標変換を行うことにより、明視野画像と蛍光画像とが正確に位置合わせされる。
また、特定タンパクが核タンパクである場合には、制御部２１は、例えば、染色された細胞核と輝点の距離の総和が最小となる時に、明視野画像及び蛍光画像の位置が合っていると判断してもよい。
具体的には、まず、ステップＳ４で抽出した各蛍光輝点において、ステップＳ４で抽出した核領域との距離を算出し、最も近い核領域を探して蛍光輝点と対応付ける。核領域との距離の定義は任意であるが、例えば、図１５（ｃ）において点線で示されるような核領域の重心３２と対応する蛍光輝点３０の距離、または、核領域３１Ａ及び３１Ｂの輪郭線と各蛍光輝点３０の距離を用いることができる。
全ての蛍光輝点について算出した細胞核との距離の総和が最小となるパラメータを最適パラメータとして用いて座標変換を行うことにより、明視野画像と蛍光画像とが正確に位置合わせされる。
距離の総和の算出方法は任意であるが、例えば、以下のような方法を用いることができる。
各距離の絶対値を加算した単純和を総和とすれば、最も簡便な計算方法により総和を算出可能である。
また、各距離の２乗和を総和とすれば、距離が長いほど、パラメータを変えた時の総和に大きく影響するため、領域から大きく外れる蛍光輝点数を減らすパラメータを最適パラメータとすることができる。
また、核領域ごとに、対応付けられた全ての蛍光輝点との距離の平均値を算出し、その平均値の単純和または二乗和を総和としてもよい。これにより、核領域に対応する蛍光輝点数のばらつきが大きい場合でも、全ての核領域を同等に加味した総和を算出することができる。
また、各距離を、対応する核領域の面積の逆数で重みづけして、その単純和または二乗和を総和としてもよい。
また、各距離を、対応する核領域に対応づけられた蛍光輝点の数で重みづけして、その単純和または二乗和を総和としても良い。これにより、対応付けられた蛍光輝点数が多い核領域を優先的に位置合わせに用いることができる。
各距離の絶対値を加算した単純和を総和とすれば、最も簡便な計算方法により総和を算出可能である。
また、各距離の２乗和を総和とすれば、距離が長いほど、パラメータを変えた時の総和に大きく影響するため、領域から大きく外れる蛍光輝点数を減らすパラメータを最適パラメータとすることができる。
また、核領域ごとに、対応付けられた全ての蛍光輝点との距離の平均値を算出し、その平均値の単純和または二乗和を総和としてもよい。これにより、核領域に対応する蛍光輝点数のばらつきが大きい場合でも、全ての核領域を同等に加味した総和を算出することができる。
また、各距離を、対応する核領域の面積の逆数で重みづけして、その単純和または二乗和を総和としてもよい。
また、各距離を、対応する核領域に対応づけられた蛍光輝点の数で重みづけして、その単純和または二乗和を総和としても良い。これにより、対応付けられた蛍光輝点数が多い核領域を優先的に位置合わせに用いることができる。
（２−１）特定タンパクが膜タンパク質である場合の判断方法１
特定タンパクが、例えばＨＥＲ２のように細胞膜に発現する膜タンパク質である場合には、膜タンパクが付着している細胞膜を明視野画像から直接抽出することは難しい。そこで、組織標本を薄切した組織切片においては、膜タンパクの発現を示す蛍光輝点は核領域に重ならずに核領域の外側に分布すると考えられることに基づいて、制御部２１は、例えば、染色された核領域の内側に存在する輝点数が最小となる時に、明視野画像及び蛍光画像の位置が合っていると判断する。
具体的には、上述した（１−１）の方法と同様に、核領域と蛍光輝点の重なりに基づくスコアを算出する。蛍光画像内の全ての輝点のスコアの総和が最小となるパラメータを探索し、最適パラメータとして用いて座標変換を行うことにより、明視野画像と蛍光画像とが精度よく位置合わせされる。
特定タンパクが、例えばＨＥＲ２のように細胞膜に発現する膜タンパク質である場合には、膜タンパクが付着している細胞膜を明視野画像から直接抽出することは難しい。そこで、組織標本を薄切した組織切片においては、膜タンパクの発現を示す蛍光輝点は核領域に重ならずに核領域の外側に分布すると考えられることに基づいて、制御部２１は、例えば、染色された核領域の内側に存在する輝点数が最小となる時に、明視野画像及び蛍光画像の位置が合っていると判断する。
具体的には、上述した（１−１）の方法と同様に、核領域と蛍光輝点の重なりに基づくスコアを算出する。蛍光画像内の全ての輝点のスコアの総和が最小となるパラメータを探索し、最適パラメータとして用いて座標変換を行うことにより、明視野画像と蛍光画像とが精度よく位置合わせされる。
（２−２）特定タンパクが膜タンパク質である場合の判断方法２
また、特定タンパクが膜タンパク質である場合には、制御部２１は、例えば、染色された核領域の輪郭と輝点の距離の総和が最小となる時に、明視野画像及び蛍光画像の位置が合っていると判断してもよい。
具体的には、まず、ステップＳ４で抽出した各蛍光輝点において、ステップＳ２で抽出した核領域の輪郭との距離を算出し、最も近い核領域を探して蛍光輝点と対応付ける。
全ての輝点について対応する核領域の輪郭との距離を算出し、その総和が最小となるパラメータを探索して最適パラメータとして用いて座標変換を行うことにより、明視野画像と蛍光画像とが正確に位置合わせされる。図１６（ａ）の●は、核領域３１Ｃ、３１Ｄに対応付けられた蛍光輝点３０を示し、点線の長さは、対応する核領域の輪郭までの距離を示す。核領域３１Ｄのように、核領域に重なる蛍光輝点が存在する場合には、各領域に重なる蛍光起点と核領域の輪郭との距離を所定の固定値に置き換えて、総和を算出することとしても良い。所定の固定値を大きな値に設定すれば、核領域と重なる蛍光輝点が存在する場合には、蛍光輝点と核領域の輪郭までの距離の総和が必ず大きくなるため、蛍光輝点が核領域と重なっている場合のパラメータが最適パラメータと判断される可能性が低い。
また、特定タンパクが膜タンパク質である場合には、制御部２１は、例えば、染色された核領域の輪郭と輝点の距離の総和が最小となる時に、明視野画像及び蛍光画像の位置が合っていると判断してもよい。
具体的には、まず、ステップＳ４で抽出した各蛍光輝点において、ステップＳ２で抽出した核領域の輪郭との距離を算出し、最も近い核領域を探して蛍光輝点と対応付ける。
全ての輝点について対応する核領域の輪郭との距離を算出し、その総和が最小となるパラメータを探索して最適パラメータとして用いて座標変換を行うことにより、明視野画像と蛍光画像とが正確に位置合わせされる。図１６（ａ）の●は、核領域３１Ｃ、３１Ｄに対応付けられた蛍光輝点３０を示し、点線の長さは、対応する核領域の輪郭までの距離を示す。核領域３１Ｄのように、核領域に重なる蛍光輝点が存在する場合には、各領域に重なる蛍光起点と核領域の輪郭との距離を所定の固定値に置き換えて、総和を算出することとしても良い。所定の固定値を大きな値に設定すれば、核領域と重なる蛍光輝点が存在する場合には、蛍光輝点と核領域の輪郭までの距離の総和が必ず大きくなるため、蛍光輝点が核領域と重なっている場合のパラメータが最適パラメータと判断される可能性が低い。
なお、総和の算出には、上述した（１−２）と同様の任意の方法を用いることができる。
（２−３）特定タンパクが膜タンパク質である場合の判断方法３
また、特定タンパクが膜タンパク質であり、細胞核が細胞のほぼ中心に存在していると想定される場合には、制御部２１は、図１６（ｂ）に示すように、核領域３１Ｃの重心３２から核領域に対応付けられた蛍光輝点までの距離がほぼ一定であるとみなして、例えば、ステップＳ２で抽出された核領域の重心と蛍光輝点の距離の標準偏差の総和が最小となる時に、明視野画像及び蛍光画像の位置が合っていると判断してもよい。
具体的には、まず、ステップＳ４で抽出した各蛍光輝点において、ステップＳ２で抽出した核領域の重心との距離を算出し、最も近い核領域を探して蛍光輝点と対応付ける。次いで、核領域ごとに、対応付けられた蛍光輝点との距離の標準偏差を算出し、標準偏差の総和が最小となるパラメータを最適パラメータとして用いて座標変換を行うことにより、明視野画像と蛍光画像とが正確に位置合わせされる。
また、特定タンパクが膜タンパク質であり、細胞核が細胞のほぼ中心に存在していると想定される場合には、制御部２１は、図１６（ｂ）に示すように、核領域３１Ｃの重心３２から核領域に対応付けられた蛍光輝点までの距離がほぼ一定であるとみなして、例えば、ステップＳ２で抽出された核領域の重心と蛍光輝点の距離の標準偏差の総和が最小となる時に、明視野画像及び蛍光画像の位置が合っていると判断してもよい。
具体的には、まず、ステップＳ４で抽出した各蛍光輝点において、ステップＳ２で抽出した核領域の重心との距離を算出し、最も近い核領域を探して蛍光輝点と対応付ける。次いで、核領域ごとに、対応付けられた蛍光輝点との距離の標準偏差を算出し、標準偏差の総和が最小となるパラメータを最適パラメータとして用いて座標変換を行うことにより、明視野画像と蛍光画像とが正確に位置合わせされる。
なお、標準偏差の総和の算出方法は任意であるが、例えば、以下のような方法を用いることができる。
標準偏差の絶対値を加算した単純和を総和とすれば、最も簡便な計算方法により総和を算出することができる。
また、標準偏差の２乗和を総和とすれば、標準偏差が大きいほど総和への影響が大きいため、総和が最小となる最適パラメータを探索することにより、標準偏差が大きい核領域を減らすことができる。
また、標準偏差を、核領域の面積の逆数で重みづけして、その単純和または二乗和を総和としてもよい。
また、標準偏差を、核領域に対応する蛍光輝点の数で重みづけして、総和の算出に用いても良い。また、核領域に対応付けられた蛍光輝点の数が所定の値よりも少ない核領域は、標準偏差の総和の算出には用いないこととしても良い。これにより、対応付けられた蛍光輝点数が多い核領域を、優先的に位置合わせに用いることができる。
標準偏差の絶対値を加算した単純和を総和とすれば、最も簡便な計算方法により総和を算出することができる。
また、標準偏差の２乗和を総和とすれば、標準偏差が大きいほど総和への影響が大きいため、総和が最小となる最適パラメータを探索することにより、標準偏差が大きい核領域を減らすことができる。
また、標準偏差を、核領域の面積の逆数で重みづけして、その単純和または二乗和を総和としてもよい。
また、標準偏差を、核領域に対応する蛍光輝点の数で重みづけして、総和の算出に用いても良い。また、核領域に対応付けられた蛍光輝点の数が所定の値よりも少ない核領域は、標準偏差の総和の算出には用いないこととしても良い。これにより、対応付けられた蛍光輝点数が多い核領域を、優先的に位置合わせに用いることができる。
なお、以上説明したステップＳ５の位置合わせにおいては、明視野画像及び蛍光画像が本実施の形態の方法により取得された場合、通常、顕微鏡の光軸のずれや振動に起因する画像のずれはわずかであるため、過剰な画像処理によって最適パラメータが誤認識されることを防ぐために、各パラメータに所定の制限値を設けることが好ましい。
各パラメータに制限値を設けることにより、例えば、生体物質が核タンパクである場合に、明視野画像の過度な拡大により全ての蛍光輝点が１つの核領域に重なった時のパラメータが最適パラメータとされたり、また、生体物質が膜タンパクである場合に、一方の画像の過度な平行移動により全ての蛍光輝点が核領域外となった時のパラメータが最適パラメータとされるといった誤認識を防ぐことができる。
各パラメータに制限値を設けることにより、例えば、生体物質が核タンパクである場合に、明視野画像の過度な拡大により全ての蛍光輝点が１つの核領域に重なった時のパラメータが最適パラメータとされたり、また、生体物質が膜タンパクである場合に、一方の画像の過度な平行移動により全ての蛍光輝点が核領域外となった時のパラメータが最適パラメータとされるといった誤認識を防ぐことができる。
また、特定タンパクが核タンパク質である場合には、位置合わせ後に明視野画像と蛍光画像を重ね合わせた時に、核領域の外に存在する蛍光輝点は、特定タンパクの発現とは無関係なノイズであるとみなして削除し、ステップＳ６以降の処理には用いないこととしても良い。
また、特定タンパクが膜タンパク質である場合には、位置合わせ後に明視野画像と蛍光画像を重ね合わせた時に、核領域と重なっている蛍光輝点は、特定タンパクの発現とは無関係なノイズであるとみなして削除し、ステップＳ６以降の処理には用いないこととしても良い。
また、特定タンパクが膜タンパク質である場合には、位置合わせ後に明視野画像と蛍光画像を重ね合わせた時に、核領域と重なっている蛍光輝点は、特定タンパクの発現とは無関係なノイズであるとみなして削除し、ステップＳ６以降の処理には用いないこととしても良い。
ステップＳ５の工程による位置合わせの終了後、位置合わせして重ね合わせられた明視野画像（ステップＳ２で得られた核領域画像）及び蛍光画像（ステップＳ４で得られた蛍光輝点画像）に基づいて、それぞれの核領域における特定タンパクの発現状況の判定が行われる（ステップＳ６）。
詳しくは、明視野画像と蛍光画像とを位置合わせして重ね合わせた状態において、例えば、ステップＳ２で抽出した核領域のそれぞれに対応する蛍光輝点数が算出され、癌の悪性度や進行度の指標とされる。
悪性度の判定や治療計画に用いる統計値は、特に限定されないが、例えば、核領域に対応する蛍光輝点数の総計値を核領域の数で除した値や、核領域に対応する蛍光輝点の分布の偏り等が評価され、また核領域に対応する蛍光輝点数をヒストグラム化して一定数以上の蛍光輝点を有する核領域数の比率等も好ましく用いられる。
詳しくは、明視野画像と蛍光画像とを位置合わせして重ね合わせた状態において、例えば、ステップＳ２で抽出した核領域のそれぞれに対応する蛍光輝点数が算出され、癌の悪性度や進行度の指標とされる。
悪性度の判定や治療計画に用いる統計値は、特に限定されないが、例えば、核領域に対応する蛍光輝点数の総計値を核領域の数で除した値や、核領域に対応する蛍光輝点の分布の偏り等が評価され、また核領域に対応する蛍光輝点数をヒストグラム化して一定数以上の蛍光輝点を有する核領域数の比率等も好ましく用いられる。
次いで、判定後の核領域に対応する特定タンパクの発現状況に基づき、解析結果画面２３１が生成され表示部２３に表示される（ステップＳ７）。
例えば、ステップＳ７では、１つの核領域に対応する蛍光輝点数が予め定められた複数の閾値を超えるか否かに基づいて、特定タンパクの発現状況が複数の段階に分類され、高発現領域、中発現領域、低発現領域、極低発現領域といった態様で区分けされる。その後、明視野画像上に、分類結果に応じて異なる表示態様で区分け（例えば、色分け）された画像（タンパク発現状況表示画像）が生成され、解析結果画面２３１として表示部２３に表示出力される。タンパク発現状況表示画像においては、例えば、区分けに応じて核領域部分を色分けして表示しても良いし、また、それぞれの核領域に対応する蛍光輝点を包含する領域を作成し、核領域の区分けに応じて色分けして表示しても良い。
例えば、ステップＳ７では、１つの核領域に対応する蛍光輝点数が予め定められた複数の閾値を超えるか否かに基づいて、特定タンパクの発現状況が複数の段階に分類され、高発現領域、中発現領域、低発現領域、極低発現領域といった態様で区分けされる。その後、明視野画像上に、分類結果に応じて異なる表示態様で区分け（例えば、色分け）された画像（タンパク発現状況表示画像）が生成され、解析結果画面２３１として表示部２３に表示出力される。タンパク発現状況表示画像においては、例えば、区分けに応じて核領域部分を色分けして表示しても良いし、また、それぞれの核領域に対応する蛍光輝点を包含する領域を作成し、核領域の区分けに応じて色分けして表示しても良い。
図１７に、解析結果画面２３１の一例を示す。図１７に示すように、解析結果画面２３１には、明視野画像２３１ａと、蛍光輝点画像２３１ｂと、タンパク発現状況表示２３１ｃと、が表示されている。
タンパク発現状況表示画像２３１ｃには、明視野画像上に、特定タンパクの高発現領域、中発現領域、低発現領域、極低発現領域が色分けして表示されている。特定タンパクの発現状況に応じて色分けして表示されるので、医師は、癌の悪性度の指標となる特定タンパクの過剰発現、その広がりを効率よく把握することが可能となり、適切な治療計画を立てることが可能となる。
タンパク発現状況表示画像２３１ｃには、明視野画像上に、特定タンパクの高発現領域、中発現領域、低発現領域、極低発現領域が色分けして表示されている。特定タンパクの発現状況に応じて色分けして表示されるので、医師は、癌の悪性度の指標となる特定タンパクの過剰発現、その広がりを効率よく把握することが可能となり、適切な治療計画を立てることが可能となる。
なお、解析結果画面２３１は、図１７に示すものに限定されない。
例えば、タンパク発現状況表示画像２３１ｃのみを表示することとしてもよい。また、操作部２２からの切り替え指示に応じて、明視野画像２３１ａとタンパク発現状況表示画像２３１ｃを切り替え表示することとしてもよい。また、解析結果画面２３１に表示する明視野画像２３１ａ、蛍光輝点画像２３１ｂ、タンパク発現状況表示画像２３１ｃは、観察しやすいように何れか又は全てを拡大縮小して表示することとしてもよい。
さらに、操作部２２からの指示に応じて、明視野画像２３１ａと蛍光輝点画像２３１ｂとを単に重ね合わせた画像を表示することとしてもよく、かかる場合にはその重ね合わせた画像により、特定タンパクの発現状況を医師に視覚的に提示し、判断を促すこともできる。
例えば、タンパク発現状況表示画像２３１ｃのみを表示することとしてもよい。また、操作部２２からの切り替え指示に応じて、明視野画像２３１ａとタンパク発現状況表示画像２３１ｃを切り替え表示することとしてもよい。また、解析結果画面２３１に表示する明視野画像２３１ａ、蛍光輝点画像２３１ｂ、タンパク発現状況表示画像２３１ｃは、観察しやすいように何れか又は全てを拡大縮小して表示することとしてもよい。
さらに、操作部２２からの指示に応じて、明視野画像２３１ａと蛍光輝点画像２３１ｂとを単に重ね合わせた画像を表示することとしてもよく、かかる場合にはその重ね合わせた画像により、特定タンパクの発現状況を医師に視覚的に提示し、判断を促すこともできる。
解析結果は、印刷ボタン２３１ｄや送信ボタン２３１ｅを押下することでプリント出力又は外部機器への出力が可能となる。
操作部２２により印刷ボタン２３１ｄが押下されると、制御部２１により解析結果のデータが通信Ｉ／Ｆ２４やＬＡＮ等の通信ネットワークを介して図示しないプリンタに送信され、解析結果が印刷出力される。また、操作部２２により送信ボタン２３１ｅが押下されると、制御部２１により解析結果のデータが通信Ｉ／Ｆ２４やＬＡＮ等の通信ネットワークを介して外部機器（例えば、ＰＡＣＳ（Picture Archiving and Communication System for medical application））に送信される。
なお、顕微鏡画像取得装置１Ａを操作して視野範囲や倍率を変えることにより、同じ標本から連続して取得した蛍光画像及び明視野画像であっても、視野範囲をずらす操作時の振動などにより、不規則なずれが発生する可能性があり、視野範囲ごとにずれの程度が異なる可能性があるため、視野範囲を変えるごとに図５のフローチャートに示される位置合わせを行うことが好ましい。
操作部２２により印刷ボタン２３１ｄが押下されると、制御部２１により解析結果のデータが通信Ｉ／Ｆ２４やＬＡＮ等の通信ネットワークを介して図示しないプリンタに送信され、解析結果が印刷出力される。また、操作部２２により送信ボタン２３１ｅが押下されると、制御部２１により解析結果のデータが通信Ｉ／Ｆ２４やＬＡＮ等の通信ネットワークを介して外部機器（例えば、ＰＡＣＳ（Picture Archiving and Communication System for medical application））に送信される。
なお、顕微鏡画像取得装置１Ａを操作して視野範囲や倍率を変えることにより、同じ標本から連続して取得した蛍光画像及び明視野画像であっても、視野範囲をずらす操作時の振動などにより、不規則なずれが発生する可能性があり、視野範囲ごとにずれの程度が異なる可能性があるため、視野範囲を変えるごとに図５のフローチャートに示される位置合わせを行うことが好ましい。
以上説明した本実施の形態によれば、蛍光画像と明視野画像の少なくとも一方に対して、平行移動、回転、拡大、または縮小の少なくとも一つの画像処理を行って、特定タンパクの発現領域を特定して位置合わせを行うことにより、明視野画像で形態が示される細胞に対して、蛍光画像の蛍光輝点が正確に重ねられる。つまり、本発明の方法によれば、従来の診断において通常行われる染色に加えて、マーカー物質を付与したり、細胞膜を蛍光染色するための工程を別途設けることなく、明視野画像と蛍光画像の位置合わせが可能である。明視野画像と蛍光画像との位置合わせにより、細胞における特定タンパクの発現状態を正確に診断することができる。
また、平行移動、拡大、または縮小の画像処理に所定の制限値を設けることとすれば、過度な画像処理によって、最適パラメータが誤認識されることを防ぐことができる。
また、特定タンパクが、細胞形態画像から自動抽出することが難しい細胞膜に発現している場合であっても、細胞形態画像から容易に抽出可能な核領域及び蛍光輝点の位置関係に基づいて、位置合わせが可能である。
また、特定タンパクが細胞核に発現している場合には、位置合わせ後に核領域外に存在する輝点はノイズであるとみなして削除することにより、ノイズを除去して正確な診断を実施することができる。
また、特定タンパクが細胞膜に発現している場合には、位置合わせ後に核領域内に存在する輝点はノイズであるとみなして削除することにより、ノイズを除去して正確な診断を実施することができる。
また、特定タンパクが細胞膜に発現している場合には、位置合わせ後に核領域内に存在する輝点はノイズであるとみなして削除することにより、ノイズを除去して正確な診断を実施することができる。
また、核領域内の蛍光輝点数に基づいて位置合わせを行うこととすれば、位置合わせの処理が比較的単純であり、計算量が少ないため、短時間で簡易に測定を行うことができる。また、核領域外の蛍光輝点については、核領域からの距離に関わらず、核領域内の蛍光輝点ではないとして全て同等に扱うため、特定タンパクの発現とは無関係な蛍光輝点（ノイズ）が核領域の外側に存在する場合に、画像の平行移動、回転、拡大、または縮小の画像処理によってノイズと核領域の位置関係が変わっても、核領域内の蛍光輝点数に影響しにくい。すなわち、核領域内の蛍光輝点数に基づく位置合わせは、ノイズの影響を受けにくい位置合わせ方法であると考えられる。
また、蛍光輝点から、各蛍光輝点に最も近い核領域までの距離に基づいて位置合わせを行うことにより、例えば細胞核の染色にムラがあるために核領域外に存在するとみなされる蛍光輝点が存在する場合であっても、全ての蛍光輝点に対して核領域との距離を加味して位置合わせを行うため、高精度に位置合わせを行うことができる。
また、細胞のほぼ中心に細胞核が存在する細胞においては、細胞膜上の蛍光輝点から核領域の重心までの距離がほぼ一定となり、標準偏差が小さいことに基づいて、高精度に位置合わせを行うことができる。
また、核領域に対応する蛍光輝点の数や核領域の大きさに基づく重みづけをすることにより、診断対象として好ましい核領域を適宜選択して、位置合わせを行うことができる。
また、同一標本の複数の視野範囲から、それぞれ明視野画像及び蛍光画像を取得する場合には、例えば、視野を変える際の振動などによる不規則なずれが生じ得るが、視野範囲を変えるごとに位置合わせを行うことにとすれば、取得した全ての明視野画像及び蛍光画像に対して位置合わせを行うことができる。
また、特定タンパクの発現状況については、１つの核領域に対応する蛍光輝点数が予め定められた複数の閾値を超えるか否かに基づいて、特定タンパクの発現状況が複数の段階に分類され、分類結果に応じた態様で区分けした画像が解析結果として出力される。そのため、核領域は、特定タンパクの発現状況に応じて異なる表示態様で表示され、医師は、癌の悪性度の指標となる特定タンパクの過剰発現、その広がりを効率よく把握することが可能となり、適切な治療計画を立てることが可能となる。
なお、上記実施の形態における記述内容は、本発明の好適な一例であり、これに限定されるものではない。
例えば、上記実施の形態においては、特定タンパクの例として乳癌におけるＫｉ６７タンパク及びＨＥＲ２タンパクを挙げたが、これに限定されない。診断対象となる病変（がん）種に応じて、蛍光画像を取得する際の生体物質認識部位を異なるものとすれば、病変種に応じた特定タンパクの発現量を定量的に示す特徴量を医師に提供することが可能となる。
例えば、上記実施の形態においては、特定タンパクの例として乳癌におけるＫｉ６７タンパク及びＨＥＲ２タンパクを挙げたが、これに限定されない。診断対象となる病変（がん）種に応じて、蛍光画像を取得する際の生体物質認識部位を異なるものとすれば、病変種に応じた特定タンパクの発現量を定量的に示す特徴量を医師に提供することが可能となる。
また、上記の説明では、本発明に係るプログラムのコンピュータ読み取り可能な媒体としてＨＤＤや半導体の不揮発性メモリー等を使用した例を開示したが、この例に限定されない。その他のコンピュータ読み取り可能な媒体として、ＣＤ-ＲＯＭ等の可搬型記録媒
体を適用することが可能である。また、本発明に係るプログラムのデータを、通信回線を介して提供する媒体として、キャリアウエーブ(搬送波)も適用される。
体を適用することが可能である。また、本発明に係るプログラムのデータを、通信回線を介して提供する媒体として、キャリアウエーブ(搬送波)も適用される。
その他、病理診断支援システム１００を構成する各装置の細部構成及び細部動作に関しても、発明の趣旨を逸脱することのない範囲で適宜変更可能である。
１Ａ 顕微鏡画像取得装置
２Ａ 画像処理装置
３Ａ ケーブル
２１ 制御部（位置合わせ手段、算出手段、決定手段、削除手段）
２２ 操作部
２３ 表示部
２４ 通信Ｉ／Ｆ（入力手段）
２５ 記憶部
２６ バス
３０ 蛍光輝点
３１Ａ、３１Ｂ、３１Ｃ、３１Ｄ 核領域
３２ 核領域の重心
１００ 病理診断支援システム
２Ａ 画像処理装置
３Ａ ケーブル
２１ 制御部（位置合わせ手段、算出手段、決定手段、削除手段）
２２ 操作部
２３ 表示部
２４ 通信Ｉ／Ｆ（入力手段）
２５ 記憶部
２６ バス
３０ 蛍光輝点
３１Ａ、３１Ｂ、３１Ｃ、３１Ｄ 核領域
３２ 核領域の重心
１００ 病理診断支援システム
Claims (18)
- 標本における特定の生体物質の発現を蛍光輝点で表す蛍光画像と、前記蛍光輝点と異なる情報源に基づく細胞の形態を表す細胞形態画像を入力する入力手段と、
前記細胞形態画像における前記細胞の形態と前記蛍光画像における前記蛍光輝点との位置関係に基づいて、前記細胞形態画像と前記蛍光画像の位置合わせを行う位置合わせ手段と、
を備えることを特徴とする画像処理装置。 - 前記位置合わせ手段は、前記細胞形態画像と前記蛍光画像の少なくとも一方に対して、平行移動、回転、拡大、または縮小の少なくとも一つの画像処理を行うことにより、位置合わせを行うことを特徴とする請求項１に記載の画像処理装置。
- 前記細胞形態画像における前記細胞の形態は、染色された細胞核の領域を示す核領域であることを特徴とする請求項１または２に記載の画像処理装置。
- 前記特定の生体物質は細胞核に発現することを特徴とする請求項３に記載の画像処理装置。
- 前記特定の生体物質は細胞膜に発現することを特徴とする請求項３に記載の画像処理装置。
- 前記核領域と重なる前記蛍光輝点の数を算出する算出手段を有し、
前記位置合わせ手段は、前記蛍光輝点の数が最大となるように位置合わせを行うことを特徴とする請求項４に記載の画像処理装置。 - 前記核領域と重なる前記蛍光輝点の数を算出する算出手段を有し、
前記位置合わせ手段は、前記蛍光輝点の数が最小となるように位置合わせを行うことを特徴とする請求項５に記載の画像処理装置。 - 前記核領域と前記蛍光輝点の位置関係に基づいて、各々の前記蛍光輝点が前記核領域のいずれに対応するかを決定する決定手段を有し、
前記位置合わせ手段は、前記蛍光輝点と対応する前記核領域の重心との距離を算出し、当該重心との距離の総和が最小となるように位置合わせを行うことを特徴とする請求項４に記載の画像処理装置。 - 前記核領域と前記蛍光輝点の位置関係に基づいて、各々の前記蛍光輝点が前記核領域のいずれに対応するかを決定する決定手段を有し、
前記位置合わせ手段は、前記蛍光輝点と対応する前記核領域の輪郭との最短距離を算出し、前記蛍光輝点が対応する前記核領域と重なっている場合には前記輪郭との最短距離を所定の固定値に置換した後、前記輪郭との最短距離の総和が最小となるように位置合わせを行うことを特徴とする請求項５に記載の画像処理装置。 - 前記核領域と前記蛍光輝点の位置関係に基づいて、各々の前記蛍光輝点が前記核領域のいずれに対応するかを決定する決定手段を有し、
前記位置合わせ手段は、前記蛍光輝点と対応する前記核領域の重心との距離を算出し、前記核領域ごとに前記重心との距離の標準偏差を算出して、当該標準偏差の総和が最小となるように位置合わせを行うことを特徴とする請求項５に記載の画像処理装置。 - 前記位置合わせ手段は、対応する前記蛍光輝点の数が所定の値よりも大きい前記核領域において算出された前記標準偏差の総和が最小となるように位置合わせを行うことを特徴とする請求項１０に記載の画像処理装置。
- 前記位置合わせ手段は、前記細胞形態画像と前記蛍光画像の少なくとも一方に対して、所定の制限値の範囲内の平行移動を施すことにより位置合わせを行うことを特徴とする請求項２〜１１の何れか一項に記載の画像処理装置。
- 前記位置合わせ手段は、前記細胞形態画像と前記蛍光画像の少なくとも一方に対して、所定の制限値の範囲内の拡大または縮小を行うことにより位置合わせを行うことを特徴とする請求項２〜１２の何れか一項に記載の画像処理装置。
- 前記位置合わせ手段による位置合わせの後に、前記核領域に重ならない前記蛍光輝点を削除する削除手段を備えることを特徴とする請求項４、６、または８の何れか一項に記載の画像処理装置。
- 前記位置合わせ手段は、前記細胞形態画像及び前記蛍光画像を取得する度に位置合わせを行うことを特徴とする請求項１〜１４の何れか一項に記載の画像処理装置。
- 請求項１〜１５のいずれか一項に記載の画像処理装置と、
前記画像処理装置で使用される、前記細胞形態画像と前記蛍光画像とを取得する画像取得装置と、
を備えることを特徴とする画像処理システム。 - コンピュータを、
標本における特定の生体物質の発現を蛍光輝点で表す蛍光画像と、前記蛍光輝点と異なる情報源に基づく細胞の形態を表す細胞形態画像を入力する入力手段、
前記細胞形態画像における前記細胞の形態と前記蛍光画像における前記蛍光輝点との位置関係に基づいて、前記細胞形態画像と前記蛍光画像の位置合わせを行う位置合わせ手段、
として機能させるための画像処理プログラム。 - 標本における特定の生体物質の発現を蛍光輝点で表す蛍光画像と、前記蛍光輝点と異なる情報源に基づく細胞の形態を表す細胞形態画像を入力する入力工程と、
前記細胞形態画像における前記細胞の形態と前記蛍光画像における前記蛍光輝点との位置関係に基づいて、前記細胞形態画像と前記蛍光画像の位置合わせを行う位置合わせ工程と、
を有することを特徴とする画像処理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014252819A JP6375925B2 (ja) | 2014-12-15 | 2014-12-15 | 画像処理装置、画像処理システム、画像処理プログラム及び画像処理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2014252819A JP6375925B2 (ja) | 2014-12-15 | 2014-12-15 | 画像処理装置、画像処理システム、画像処理プログラム及び画像処理方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2016114447A JP2016114447A (ja) | 2016-06-23 |
| JP6375925B2 true JP6375925B2 (ja) | 2018-08-22 |
Family
ID=56139981
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2014252819A Active JP6375925B2 (ja) | 2014-12-15 | 2014-12-15 | 画像処理装置、画像処理システム、画像処理プログラム及び画像処理方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6375925B2 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP6948145B2 (ja) * | 2017-04-14 | 2021-10-13 | シスメックス株式会社 | 蛍光画像分析装置、蛍光画像の画像処理方法及びコンピュータプログラム |
| US10935773B2 (en) | 2017-08-09 | 2021-03-02 | Allen Institute | Systems, devices, and methods for image processing to generate an image having predictive tagging |
| EP3623798B1 (de) * | 2018-09-13 | 2021-11-03 | Euroimmun Medizinische Labordiagnostika AG | Verfahren und vorrichtung zum erfassen und darstellen eines immunfluoreszenzbildes einer biologischen probe |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4854832B2 (ja) * | 2000-03-27 | 2012-01-18 | オリンパス株式会社 | 細胞の画像解析方法，装置、及び記録媒体 |
| US20090081775A1 (en) * | 2005-05-25 | 2009-03-26 | Stiftesen Unversitetsforskning Bergen | Microscope system and screening method for drugs, physical therapies and biohazards |
| JP2010085219A (ja) * | 2008-09-30 | 2010-04-15 | Nec Soft Ltd | 顕微質量分析の二次元解析画像と、光学顕微鏡撮影の二次元可視画像との自動的位置重ね合わせ方法 |
| JP4997255B2 (ja) * | 2009-01-05 | 2012-08-08 | オリンパス株式会社 | 細胞画像解析装置 |
| JP2011043350A (ja) * | 2009-08-19 | 2011-03-03 | Olympus Corp | 細胞画像解析装置、細胞画像解析方法、及びコンピュータープログラム |
| US8269827B2 (en) * | 2009-09-29 | 2012-09-18 | General Electric Company | System and methods for mapping fluorescent images into a bright field color space |
| JP6350527B2 (ja) * | 2013-07-03 | 2018-07-04 | コニカミノルタ株式会社 | 画像処理装置、病理診断支援システム、画像処理プログラム及び病理診断支援方法 |
-
2014
- 2014-12-15 JP JP2014252819A patent/JP6375925B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2016114447A (ja) | 2016-06-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6350527B2 (ja) | 画像処理装置、病理診断支援システム、画像処理プログラム及び病理診断支援方法 | |
| JP5892238B2 (ja) | 医用画像処理装置及びプログラム | |
| JP5804194B2 (ja) | 医用画像処理装置及びプログラム | |
| JP6443450B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
| JP5822054B1 (ja) | 画像処理装置、病理診断支援システム、画像処理プログラム及び画像処理方法 | |
| JP6597316B2 (ja) | 画像処理装置及びプログラム | |
| JPWO2016093090A1 (ja) | 画像処理装置及び画像処理プログラム | |
| JP6635108B2 (ja) | 画像処理装置、画像処理方法、及び画像処理プログラム | |
| JP5768948B1 (ja) | 画像処理装置および画像処理プログラム | |
| WO2017126420A1 (ja) | 画像処理装置及びプログラム | |
| JP7173034B2 (ja) | 画像処理装置、合焦位置特定方法及び合焦位置特定プログラム | |
| JP5887823B2 (ja) | 組織評価方法 | |
| JP6493398B2 (ja) | 診断支援情報生成方法、画像処理装置、診断支援情報生成システム及び画像処理プログラム | |
| JP5835536B1 (ja) | 組織評価方法、画像処理装置、病理診断支援システム及びプログラム | |
| JPWO2018143406A1 (ja) | 画像処理装置及びプログラム | |
| JP6375925B2 (ja) | 画像処理装置、画像処理システム、画像処理プログラム及び画像処理方法 | |
| JP6337629B2 (ja) | 診断支援情報生成方法、画像処理装置、診断支援情報生成システム及び画像処理プログラム | |
| JP6702339B2 (ja) | 画像処理装置及びプログラム | |
| JPWO2019172097A1 (ja) | 画像処理方法、画像処理装置及びプログラム | |
| JP6405985B2 (ja) | 画像処理装置、画像処理システム、画像処理プログラム及び画像処理方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170921 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180523 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180626 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180709 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6375925 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |