JPWO2019200116A5 - - Google Patents
Download PDFInfo
- Publication number
- JPWO2019200116A5 JPWO2019200116A5 JP2020555800A JP2020555800A JPWO2019200116A5 JP WO2019200116 A5 JPWO2019200116 A5 JP WO2019200116A5 JP 2020555800 A JP2020555800 A JP 2020555800A JP 2020555800 A JP2020555800 A JP 2020555800A JP WO2019200116 A5 JPWO2019200116 A5 JP WO2019200116A5
- Authority
- JP
- Japan
- Prior art keywords
- sequence
- color video
- color
- video
- light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Description
本明細書の様々な実施形態に関して説明された特徴は、任意の所望の組み合わせで混合および一致され得ることを理解されたい。加えて、本明細書に開示または想定される概念は、他の特定の形態で具現化され得る。説明される実施形態は、あらゆる点において単に例示的であり、限定的ではないと見なされるべきである。したがって、その範囲は、前述の説明ではなく、添付の特許請求の範囲によって示される。特許請求の範囲の意味および同等性の範囲内に入る全ての変更は、それらの範囲内に包含されるべきである。
また、好ましい構成態様として、本発明を次のように構成することもできる。
１． モノクロカメラでカラービデオを生成するための方法であって、
シーケンス内で複数の光源の各々に選択的に通電することであって、前記シーケンスが、一連の段階を有し、前記シーケンスの各段階が、１つ以上の光源からの異なる波長の光の活性化に対応して、サンプルを照射する、通電することと、
前記シーケンスの各段階で、モノクロカメラで、前記照射されたサンプルのモノクロ画像を捕捉することと、
前記モノクロ画像から、カラービデオを生成することと、を含む、方法。
２． 前記シーケンスの各段階における対応する異なる波長の光に基づいて、前記モノクロ画像に色を割り当てることをさらに含む、上記１に記載の方法。
３． 前記シーケンス内で前記複数の光源の各々に選択的に通電することが、所定の期間、前記複数の光源の各々に通電することを含む、上記１または２に記載の方法。
４． 前記所定の期間が、前記シーケンスの少なくとも２つの段階について同じ期間である、上記３に記載の方法。
５． 前記所定の期間が、前記シーケンスの少なくとも２つの段階について異なる期間であり、前記少なくとも２つの段階が、同じ強度で選択的に通電された１つ以上の対応する光源を有する、上記３に記載の方法。
６． 前記シーケンス内で前記複数の光源の各々に選択的に通電することが、所定の強度で前記複数の光源の各々に通電することを含む、上記１または２に記載の方法。
７． 前記所定の強度が、前記複数の光源の各々について異なる、上記６に記載の方法。
８． 前記カラービデオのカラーバランスを調整することをさらに含む、上記６または７に記載の方法。
９． 前記カラービデオのカラーバランスを調整することが、前記複数の光源のうちの１つ以上について、自動的にまたは手動で前記所定の強度を調整することを含む、上記８に記載の方法。
１０． 前記カラービデオのカラーバランスを調整することが、白色サンプルの前記カラービデオが白色に見えるまで、赤色チャネル、緑色チャネル、または青色チャネルのうちの１つ以上を、自動的にまたは手動で調整することを含む、上記８に記載の方法。
１１． 前記カラービデオのカラーバランスを調整することは、前記複数の光源のうちの１つ以上が前記シーケンス内で選択的に通電される所定の強度を、自動的にまたは手動で調整することを含む、上記８に記載の方法。
１２． 前記シーケンス内で前記複数の光源の各々に選択的に通電することが、前記複数の光源の各々から生じる光を選択的に遮断し、露出することを含む、上記１～１１のいずれか１項に記載の方法。
１３． 前記シーケンスが、繰り返される環状シーケンスを含む、上記１～１２のいずれか１項に記載の方法。
１４． 前記カラービデオを生成することが、ビデオフレームのシーケンスをコンパイルすることを含み、各ビデオフレームは、
前記シーケンスの第１の段階で捕捉された第１のモノクロ画像であって、前記第１の段階が、第１の波長の光と関連付けられている、第１のモノクロ画像と、
前記シーケンスの第２の段階で捕捉された第２のモノクロ画像であって、前記第２の段階が、第２の波長の光と関連付けられている、第２のモノクロ画像と、
前記シーケンスの第３の段階で捕捉された第３のモノクロ画像であって、前記第３の段階が、第３の波長の光と関連付けられている、第３のモノクロ画像と、の合成カラー画像を含む、上記１～１３のいずれか１項に記載の方法。
１５． 前記第１、第２、および第３の波長の光が、赤色光、緑色光、および青色光から選択される異なる波長の光を含む、上記１４に記載の方法。
１６． 各モノクロ画像が、タイムスタンプを含む、上記１４または１５に記載の方法。
１７． 前記ビデオフレームのシーケンスをコンパイルすることが、前記ビデオフレームのシーケンス内に最も新しいビデオフレームを生成することを含み、前記最も新しいビデオフレームが、最も新しいタイムスタンプを有する第１、第２、および第３のモノクロ画像を含む、上記１６に記載の方法。
１８． 前記カラービデオを生成することは、
第１のビデオフレームをコンパイルすることであって、前記第１のビデオフレームの合成カラー画像が、前記シーケンスの第１のサイクルにおける第１の波長の光と関連付けられた第１のモノクロ画像と、前記シーケンスの前記第１のサイクルにおける第２の波長の光と関連付けられた第２のモノクロ画像と、前記シーケンスの前記第１のサイクルにおける第３の波長の光と関連付けられた第３のモノクロ画像と、を含む、第１のビデオフレームをコンパイルすることと、
第２のビデオフレームをコンパイルすることであって、前記第２のビデオフレームが、前記第１のビデオフレームの後に時系列的に存在し、前記第２のビデオフレームの合成カラー画像が、前記シーケンスの第２のサイクルにおける第１の波長の光と関連付けられた前記第２のモノクロ画像、前記第３のモノクロ画像、および第４のモノクロ画像を含む、第２のビデオフレームをコンパイルすることと、を含む、上記１～１６のいずれか１項に記載の方法。
１９． 前記シーケンスの前記第１のサイクルにおける前記第１の波長の光が、前記シーケンスの前記第２のサイクルにおける前記第１の波長の光と同じ第１の波長の光である、上記１８に記載の方法。
２０． 前記カラービデオを生成することが、追加的に、第３のビデオフレームをコンパイルすることを含み、前記第３のビデオフレームが、前記第２のビデオフレームの後に時系列的に存在し、前記第３のビデオフレームの合成カラー画像が、前記シーケンスの前記第２のサイクルにおける第２の波長の光と関連付けられた前記第３のモノクロ画像、前記第４のモノクロ画像、および第５のモノクロ画像を含む、上記１８または１９に記載の方法。
２１． 前記シーケンスの前記第１のサイクルにおける前記第２の波長の光が、前記シーケンスの前記第２のサイクルにおける前記第２の波長の光と同じ第２の波長の光である、上記２０に記載の方法。
２２． 前記モノクロ画像から前記カラービデオを生成することが、前記カラービデオにおける各ビデオフレームの基礎となるオフセットを決定することと、各カラービデオフレームをコンパイルするときに、各モノクロ画像ごとに補正オフセットを適用することと、を含む、上記１～２１のいずれか１項に記載の方法。
２３． 前記基礎となるオフセットを決定することが、前記カラービデオにおける各ビデオフレームの垂直方向および／または水平方向のオフセット量のうちの１つ以上を決定することを含む、上記２２に記載の方法。
２４． 選択されたモノクロ画像を、前記カラービデオから分離および表示することをさらに含む、上記１～２３のいずれか１項に記載の方法。
２５． カラービデオを生成するための撮像システムであって、
光アセンブリの光軸の周りに配設された複数の光源を含む光アセンブリであって、前記光アセンブリが、シーケンス内で前記複数の光源に選択的に通電するように構成された、光アセンブリと、
前記光アセンブリの光経路内で生体サンプルを受容するように構成された、ステージアセンブリと、
前記光経路内に配置され、かつ前記シーケンスの連続的な段階に対応するモノクロ画像を生成するように構成された、モノクロカメラと、
前記モノクロカメラと電気通信する画像プロセッサであって、前記画像プロセッサが、連続的な時点で前記モノクロ画像を受信し、前記モノクロ画像を複数のビデオフレームにコンパイルして、カラービデオを生成するように構成された、画像プロセッサと、を含む、撮像システム。
２６． 前記複数の光源が、複数の光セットを含み、各光セットが、一対の光源を有し、各光セットの前記光源が、前記光軸の反対側上に位置付けられている、上記２５に記載の撮像システム。
２７． 前記複数の光源が、前記光軸の周りに概ね円形パターンで配設されている、上記２５または２６に記載の撮像システム。
２８． 前記光アセンブリが、一般的に前記概ね円形パターンの中心に位置付けられた追加的な光源をさらに含む、上記２７に記載の撮像システム。
２９． 前記複数の光源が、レーザーを含む、上記２５～２８のいずれか１項に記載の撮像システム。
３０． 前記複数の光源が、発光ダイオード（ＬＥＤ）を含む、上記２５～２８のいずれか１項に記載の撮像システム。
３１． 前記複数の光源が、組み合わされると、白色光を生成する、上記２５～３０のいずれか１項に記載の撮像システム。
３２． 前記光アセンブリにおける前記複数の光源が、６１７ｎｍの光、５３０ｎｍの光、および４４７．５ｎｍの光を含む、上記２５～３１のいずれか１項に記載の撮像システム。
３３． 前記光軸と整列された顕微鏡対物レンズと、
前記光軸と整列されたレンズチューブと、をさらに含む、上記２５～３２のいずれか１項に記載の撮像システム。
３４． 前記光軸と整列され、かつ前記光アセンブリを囲むように位置付けられた、光バレルをさらに含み、前記光バレルが、その中に位置付けられた光拡散器を有する、上記２５～３３のいずれか１項に記載の撮像システム。
３５． 前記光バレルが、追加的に、距離を置いて前記光拡散器から離れて配置された第２の光拡散器を含む、上記３４に記載の撮像システム。
３６． 前記光バレルが、追加的に、前記第２の光拡散器に隣接して位置付けられ、かつ前記光拡散器から第２の距離だけ離れて配置された第３の光拡散器を含む、上記３５に記載の撮像システム。
３７． 前記距離が、約１０ｍｍ～３０ｍｍ、好ましくは約１５ｍｍ～２５ｍｍ、より好ましくは約１８ｍｍ～２２ｍｍを含む、上記３５に記載の撮像システム。
３８． 前記ステージアセンブリに位置付けられた前記生体サンプルからのフルオロフォア放出光を誘導するために、前記ステージアセンブリに方向付けされた励起光を生成するように構成されたフルオロフォア励起源をさらに含む、上記２５～３７のいずれか１項に記載の撮像システム。
３９． 前記シーケンスが、一連の段階を含み、各段階が、特定の波長の光に選択的に通電することに対応する、上記２５～３８のいずれか１項に記載の撮像システム。
４０． 前記複数のビデオフレームの各ビデオフレームが、少なくとも３つのモノクロ画像の合成カラー画像を含み、各合成カラー画像が、少なくとも２つのモノクロ画像を、少なくとも１つの他の合成カラー画像と共有する、上記２５～３９のいずれか１項に記載の撮像システム。
４１． 前記カラービデオが、前記モノクロカメラのフレームレート出力に一致するカラービデオフレームレートを有する、ライブカラービデオを含む、上記２５～４０のいずれか１項に記載の撮像システム。
４２． 前記ステージアセンブリが、前記光アセンブリの前記光経路内で、前記生体サンプルを移動させるようにさらに構成されている、上記２５～４１のいずれか１項に記載の撮像システム。
４３． モノクロ画像からカラービデオを生成するためのシステムであって、
１つ以上のプロセッサと、
前記システムに、少なくとも、
シーケンスの第１の段階に対応する第１のモノクロ画像を受信することと、
前記シーケンスの第２の段階に対応する第２のモノクロ画像を受信することと、
前記シーケンスの第３の段階に対応する第３のモノクロ画像を受信することと、
前記シーケンスの繰り返される第１の段階に対応する第４のモノクロ画像を受信することと、
前記シーケンスの繰り返される第２の段階に対応する第５のモノクロ画像を受信することと、
前記シーケンスの繰り返される第３の段階に対応する第６のモノクロ画像を受信することと、
前記第１、第２、および第３のモノクロ画像を含む第１のカラービデオフレームをコンパイルすることと、
前記第１のカラービデオフレームを含むカラービデオを生成することと、を実行させるための前記１つ以上のプロセッサによって実行可能である、そこに記憶されたコンピュータ実行可能命令を有する、１つ以上のコンピュータ可読媒体と、を含む、システム。
４４． 前記命令が、追加的に、前記システムに、前記第２、第３、および第４のモノクロ画像を含む第２のカラービデオフレームをコンパイルさせ、前記カラービデオが、前記第１および第２のカラービデオフレームを含む、上記４３に記載のシステム。
４５． 前記命令が、追加的に、前記システムに、前記第３、第４、および第５のモノクロ画像を含む第２のカラービデオフレームをコンパイルさせ、前記カラービデオが、前記第１および第２のカラービデオフレームを含む、上記４３に記載のシステム。
４６． 前記命令が、追加的に、前記システムに、前記第４、第５、および第６のモノクロ画像を含む第２のカラービデオフレームをコンパイルさせ、前記カラービデオが、前記第１および第２のカラービデオフレームを含む、上記４３に記載のシステム。
４７． 前記命令が、追加的に、前記システムに、前記カラービデオにおける各カラービデオフレームの基礎となるオフセットを決定させ、各カラービデオフレームをコンパイルするときに、各モノクロ画像ごとに補正オフセットを適用させる、上記４３～４６のいずれか１項に記載のシステム。
４８． 前記基礎となるオフセットを決定することが、前記システムに、前記カラービデオにおける各ビデオフレームの垂直方向および／または水平方向のオフセット量のうちの１つ以上を決定させる、上記４７に記載のシステム。
４９． モノクロカメラでモノクロビデオおよびカラービデオを生成するための方法であって、
カラービデオを生成することであって、前記カラービデオを生成することは、
シーケンス内で複数の光源の各々に選択的に通電することであって、前記シーケンスが、一連の段階を有し、前記シーケンスの各段階が、１つ以上の光源からの異なる波長の光の活性化に対応して、サンプルを照射する、通電することと、
前記シーケンスの各段階で、モノクロカメラで、前記照射されたサンプルのモノクロ画像を捕捉することと、
複数のモノクロ画像を、前記カラービデオを含む一連のカラービデオフレームにコンパイルすることと、を含む、カラービデオを生成することと、を含む、カラービデオを生成することと、
要求に応答して、前記サンプルのモノクロビデオを生成することであって、前記モノクロビデオを生成することが、単一の光源を用いて前記モノクロカメラで捕捉された複数のモノクロ画像を、前記モノクロビデオを含む一連のモノクロビデオフレームにコンパイルすることを含む、モノクロビデオを生成することと、を含む、方法。
５０． 前記モノクロビデオを生成することが、前記単一の光源に連続的に通電して、前記サンプルを照射することをさらに含む、上記４９に記載の方法。
５１． 前記モノクロビデオを生成することが、前記シーケンスの単一の段階と関連付けられたモノクロ画像を選択的に受信することをさらに含み、前記シーケンスの前記単一の段階が、前記シーケンス内で前記単一の光源に選択的に通電することに対応する、上記４９に記載の方法。
５２． 第２の要求に応答して第２のモノクロビデオを生成することをさらに含む、上記４９～５１のいずれか１項に記載の方法。
５３． 前記第２のモノクロビデオを生成することが、第２の光源で前記モノクロカメラで捕捉された第２の複数のモノクロ画像を、前記第２のモノクロビデオを含む第２の一連のモノクロビデオフレームにコンパイルすることを含む、上記５２に記載の方法。
５４． 後続の要求に応答して前記カラービデオの生成を再開することをさらに含む、上記４９～５２のいずれか１項に記載の方法。
５５． モノクロカメラでモノクロビデオおよびカラービデオを生成するためのシステムであって、
１つ以上のプロセッサと、
前記システムに、少なくとも、
カラービデオを生成することであって、前記カラービデオを生成することは、前記システムに、
シーケンス内で複数の光源の各々に選択的に通電することであって、前記シーケンスが、一連の段階を有し、前記シーケンスの各段階が、１つ以上の光源からの異なる波長の光の活性化に対応して、サンプルを照射する、通電することと、
前記シーケンスの各段階で、モノクロカメラで、前記照射されたサンプルのモノクロ画像を捕捉することと、
複数のモノクロ画像を、前記カラービデオを含む一連のカラービデオフレームにコンパイルすることと、を行わせる、カラービデオを生成することと、
前記サンプルのモノクロビデオに対する要求を受信することと、
前記要求を受信したことに応答してモノクロビデオを生成することであって、前記モノクロビデオを生成することが、前記システムに、単一の光源を用いて前記モノクロカメラで捕捉された複数のモノクロ画像を、前記モノクロビデオを含む一連のモノクロビデオフレームにコンパイルさせる、モノクロビデオを生成することと、を実行させるための前記１つ以上のプロセッサによって実行可能である、そこに記憶されたコンピュータ実行可能命令を有する、１つ以上のコンピュータ可読媒体と、を含む、システム。
５６． 前記モノクロビデオを生成することが、さらに前記システムに、前記単一の光源に連続的に通電させて、前記サンプルを照射させる、上記５５に記載のシステム。
５７． 前記モノクロビデオを生成することが、さらに前記システムに、前記シーケンスの単一の段階と関連付けられたモノクロ画像を選択的に受信させ、前記シーケンスの前記単一の段階が、前記シーケンス内で前記単一の光源に選択的に通電することに対応する、上記５５に記載のシステム。
５８． 前記命令が、追加的に、前記システムに、第２の要求に応答して第２のモノクロビデオを生成させる、上記５５～５７のいずれか１項に記載のシステム。
５９． 前記第２のモノクロビデオを生成することが、前記システムに、第２の光源で前記モノクロカメラで捕捉された第２の複数のモノクロ画像を、前記第２のモノクロビデオを含む第２の一連のモノクロビデオフレームにコンパイルさせる、上記５８に記載のシステム。
６０． 前記命令が、追加的に、前記システムに、後続の要求に応答して前記カラービデオの生成を再開させる、上記５５～５９のいずれか１項に記載のシステム。
６１． 前記カラービデオが、ほぼリアルタイムのカラービデオである、上記１～２４または４９～５４のいずれか１項に記載の方法。
６２． 前記ほぼリアルタイムのカラービデオが、タイムラグを有し、前記タイムラグが、５秒未満である、上記６１に記載の方法。
６３． 前記タイムラグが、２秒未満である、上記６２に記載の方法。
６４． 前記タイムラグが、１秒未満である、上記６３に記載の方法。
６５． 前記タイムラグが、０．５秒未満である、上記６４に記載の方法。
６６． 前記カラービデオが、リアルタイムのカラービデオである、上記１～２４または４９～５４のいずれか１項に記載の方法。
６７． 前記リアルタイムのカラービデオが、顕著なタイムラグを有していない、上記６６に記載の方法。
６８． 前記リアルタイムのカラービデオが、画像データの視覚的損失を含まない、上記６６に記載の方法。
６９． 前記画像データの視覚的損失が、カラーバンディングアーチファクトを含む、上記６８に記載の方法。
７０． 前記画像データの視覚的損失が、カラーバランスの欠如を含む、上記６８に記載の方法。
７１． 前記カラービデオが、毎秒少なくとも６フレームのフレームレートを有する、上記１～２４、４９～５４または６１～７０のいずれか１項に記載の方法。
７２． 前記カラービデオが、毎秒少なくとも１２フレームのフレームレートを有する、上記７０に記載の方法。
７３． 前記カラービデオが、毎秒少なくとも１８フレームのフレームレートを有する、上記７１に記載の方法。
７４． 前記カラービデオが、毎秒少なくとも２４フレームのフレームレートを有する、上記７２に記載の方法。
７５． 前記モノクロ画像が、捕捉され、前記カラービデオが、前記サンプルを操作している間に生成される、上記１～２４、４９～５４、または６１～７４のいずれか１項に記載の方法。
７６． 前記サンプルが、前記サンプルが位置付けられているステージアセンブリの移動によって操作される、上記７５に記載の方法。
７７． 前記移動が、２次元での移動を含む、上記７６に記載の方法。
７８． 前記カラービデオが、追加的に、前記サンプルが操作されている間にユーザ表示デバイス上に表示される、上記７５～７７のいずれか１項に記載の方法。
７９． 前記モノクロ画像が、捕捉され、前記カラービデオが、前記サンプルを合焦している間に生成される、上記１～２４、４９～５４または６１～７４のいずれか１項に記載の方法。
８０． 前記サンプルが、ユーザによって合焦される、上記７９に記載の方法。
８１． 前記サンプルが、コンピューティングデバイスによって自動的に合焦される、上記７９に記載の方法。
８２． 前記カラービデオが、追加的に、前記サンプルを合焦している間に、ユーザ表示デバイス上に表示される、上記７９～８１のいずれか１項に記載の方法。
８３． 前記モノクロ画像が、捕捉され、前記カラービデオが、１つ以上の照射条件を調整している間に生成される、上記１～２４、４９～５４または６１～７４のいずれか１項に記載の方法。
８４． 前記１つ以上の照射条件を調整することは、１つ以上の照明コンデンサを調整すること、１つ以上の光拡散器を調整すること、前記１つ以上の光源の波長を調整すること、前記１つ以上の光源のうちの１つ以上が通電される期間を調整すること、前記１つ以上の光源のうちの１つ以上からの光の遮断を調整すること、または前記１つ以上の光源のうちの１つ以上からの光の露出を調整することを含む、上記８３に記載の方法。
８５． 前記カラービデオが、追加的に、前記１つ以上の照射条件を調整している間に、ユーザ表示デバイス上に表示される、上記８３または８４に記載の方法。
８６． 前記カラービデオが、少なくとも部分的にｚスタックビデオである、上記１～２４、４９～５４、または６１～７４のいずれか１項に記載の方法。
８７． 前記カラービデオは、ｚスタック画像が前記モノクロ画像から取得されている間に生成される、上記１～２４、４９～５４、または６１～７４のいずれか１項に記載の方法。
８８． 前記カラービデオが、ほぼリアルタイムのカラービデオである、上記２５～４２のいずれか１項に記載のシステム。
８９． 前記ほぼリアルタイムのカラービデオが、タイムラグを有し、前記タイムラグが、５秒未満である、上記８８に記載のシステム。
９０． 前記タイムラグが、２秒未満である、上記８９に記載のシステム。
９１． 前記タイムラグが、１秒未満である、上記９０に記載のシステム。
９２． 前記タイムラグが、０．５秒未満である、上記９１に記載のシステム。
９３． 前記カラービデオが、リアルタイムのカラービデオである、上記２５～４２のいずれか１項に記載のシステム。
９４． 前記リアルタイムのカラービデオが、顕著なタイムラグを有していない、上記９３に記載のシステム。
９５． 前記リアルタイムのカラービデオが、画像データの視覚的損失を含まない、上記９３に記載のシステム。
９６． 前記画像データの視覚的損失が、カラーバンディングアーチファクトを含む、上記９５に記載のシステム。
９７． 前記画像データの視覚的損失が、カラーバランスの欠如を含む、上記９５に記載のシステム。
９８． 前記カラービデオが、毎秒少なくとも６フレームのフレームレートを有する、上記２５～４２のいずれか１項に記載のシステム。
９９． 前記カラービデオが、毎秒少なくとも１２フレームのフレームレートを有する、上記９８に記載のシステム。
１００． 前記カラービデオが、毎秒少なくとも１８フレームのフレームレートを有する、上記９９に記載のシステム。
１０１． 前記カラービデオが、毎秒少なくとも２４フレームのフレームレートを有する、上記１００に記載のシステム。
１０２． 前記システムが、前記モノクロ画像を生成し、前記生体サンプルを操作している間に、前記カラービデオを生成するように構成されている、上記２５～４２または８８～１０１のいずれか１項に記載のシステム。
１０３． 前記システムが、前記サンプルが位置付けられているステージアセンブリの移動によって、前記生体サンプルを操作するように構成されている、上記１０２に記載のシステム。
１０４． 前記移動が、２次元での移動を含む、上記１０３に記載のシステム。
１０５． 前記カラービデオが、追加的に、前記生体サンプルが操作されている間にユーザ表示デバイス上に表示される、上記１０２または１０３に記載のシステム。
１０６． 前記システムが、前記モノクロ画像を生成し、前記生体サンプルを合焦している間に、前記カラービデオを生成するように構成されている、上記２５～４２または８８～１０１のいずれか１項に記載のシステム。
１０７． 前記システムは、ユーザが、前記生体サンプルを合焦することを可能にするように構成されている、上記１０６に記載のシステム。
１０８． 前記システムが、
１つ以上のプロセッサと、
前記システムに、少なくとも、
前記カラービデオを生成し続けている間に、前記生体サンプルを合焦することを実行させるための前記１つ以上のプロセッサによって実行可能である、そこに記憶されたコンピュータ実行可能命令を有する、１つ以上のコンピュータ可読媒体と、を含む、上記１０６に記載のシステム。
１０９． システムが、ユーザ表示デバイスを含み、前記システムが、前記生体サンプルを合焦している間に、前記ユーザ表示デバイス上に前記カラービデオを表示するように構成されている、上記１０６～１０８のいずれか１項に記載のシステム。
１１０． 前記システムは、前記モノクロ画像を生成し、前記システムが前記光アセンブリの１つ以上の照射条件を調整している間に、前記カラービデオを生成するように構成されている、上記２５～４２または８８～１０１のいずれか１項に記載のシステム。
１１１． 前記システムによって調整された前記１つ以上の照射条件は、１つ以上の照明コンデンサの調整、１つ以上の光拡散器の調整、前記１つ以上の光源の波長の調整、前記１つ以上の光源のうちの１つ以上が通電される期間の調整、前記１つ以上の光源のうちの１つ以上からの光の遮断の調整、または前記１つ以上の光源のうちの１つ以上からの光の露出の調整を含む、上記１１０に記載のシステム。
１１２． システムが、ユーザ表示デバイスを含み、前記システムは、前記システムが前記光アセンブリの前記１つ以上の照射条件を調整している間に、前記ユーザ表示デバイス上に前記カラービデオを表示するように構成されている、上記１１１に記載のシステム。
１１３． 前記カラービデオが、少なくとも部分的にｚスタックビデオである、上記２５～４２のいずれか１項に記載のシステム。
１１４． 前記システムが、前記モノクロ画像からｚスタック画像を取得している間に、前記カラービデオを生成するように構成されている、上記２５～４２のいずれか１項に記載のシステム。
It should be appreciated that the features described with respect to the various embodiments herein can be mixed and matched in any desired combination. In addition, the concepts disclosed or envisioned herein may be embodied in other particular forms. The embodiments described are merely exemplary in all respects and should be considered non-limiting. Therefore, the scope is indicated by the attached claims rather than the above description. Any changes that fall within the meaning and equivalence of the claims should be included within those scopes.
Further, as a preferred configuration mode, the present invention can be configured as follows.
1. 1. A way to generate color video with a monochrome camera,
The selective energization of each of a plurality of light sources in a sequence, wherein the sequence has a series of steps, each step of the sequence is the activity of light of different wavelengths from one or more light sources. In response to the change, irradiate the sample, energize it,
At each stage of the sequence, a monochrome camera captures a monochrome image of the irradiated sample.
A method comprising generating a color video from the monochrome image.
2. 2. The method of 1 above, further comprising assigning a color to the monochrome image based on the corresponding different wavelengths of light at each stage of the sequence.
3. 3. The method according to 1 or 2 above, wherein selectively energizing each of the plurality of light sources in the sequence comprises energizing each of the plurality of light sources for a predetermined period of time.
4. 3. The method of 3 above, wherein the predetermined period is the same period for at least two stages of the sequence.
5. 3 described above, wherein the predetermined period is a different period for at least two stages of the sequence, wherein the at least two stages have one or more corresponding light sources selectively energized with the same intensity. Method.
6. The method according to 1 or 2 above, wherein selectively energizing each of the plurality of light sources in the sequence comprises energizing each of the plurality of light sources with a predetermined intensity.
7. 6. The method according to 6 above, wherein the predetermined intensity is different for each of the plurality of light sources.
8. 6. The method of 6 or 7 above, further comprising adjusting the color balance of the color video.
9. 8. The method of 8 above, wherein adjusting the color balance of the color video comprises automatically or manually adjusting the predetermined intensity for one or more of the plurality of light sources.
10. Adjusting the color balance of the color video automatically or manually adjusts one or more of the red, green, or blue channels until the color video of the white sample looks white. 8. The method according to 8 above.
11. Adjusting the color balance of the color video comprises automatically or manually adjusting a predetermined intensity at which one or more of the plurality of light sources is selectively energized within the sequence. The method according to 8 above.
12. Item 1 of any one of 1 to 11 above, wherein selectively energizing each of the plurality of light sources in the sequence selectively blocks and exposes the light generated from each of the plurality of light sources. The method described in.
13. The method according to any one of 1 to 12 above, wherein the sequence comprises a repeating cyclic sequence.
14. Generating the color video involves compiling a sequence of video frames, where each video frame is
A first monochrome image captured in a first step of the sequence, wherein the first step is associated with light of a first wavelength.
A second monochrome image captured in a second step of the sequence, wherein the second step is associated with light of a second wavelength.
A composite color image of a third monochrome image captured in the third stage of the sequence, wherein the third stage is associated with light of a third wavelength. The method according to any one of 1 to 13 above, which comprises.
15. 14. The method of 14 above, wherein the light of the first, second, and third wavelengths comprises light of a different wavelength selected from red light, green light, and blue light.
16. 14. The method of 14 or 15 above, wherein each monochrome image comprises a time stamp.
17. Compiling the sequence of the video frames involves generating the newest video frame within the sequence of the video frames, the newest video frame having the newest time stamp, first, second, and first. 16. The method according to 16 above, comprising the monochrome image of 3.
18. Generating the color video is
Compiling the first video frame, wherein the composite color image of the first video frame is the first monochrome image associated with the light of the first wavelength in the first cycle of the sequence. A second monochrome image associated with the light of the second wavelength in the first cycle of the sequence and a third monochrome image associated with the light of the third wavelength in the first cycle of the sequence. And, including, compiling the first video frame,
By compiling the second video frame, the second video frame exists in chronological order after the first video frame, and the composite color image of the second video frame is the sequence. Compiling a second video frame containing the second monochrome image, the third monochrome image, and the fourth monochrome image associated with the light of the first wavelength in the second cycle of. The method according to any one of 1 to 16 above, which comprises.
19. 18 above, wherein the light of the first wavelength in the first cycle of the sequence is light of the same first wavelength as the light of the first wavelength in the second cycle of the sequence. Method.
20. Generating the color video additionally comprises compiling a third video frame, wherein the third video frame exists in chronological order after the second video frame, said first. The composite color image of the video frame 3 is the third monochrome image, the fourth monochrome image, and the fifth monochrome image associated with the light of the second wavelength in the second cycle of the sequence. 18. The method according to 18 or 19 above.
21. 20 above, wherein the light of the second wavelength in the first cycle of the sequence is light of the same second wavelength as the light of the second wavelength in the second cycle of the sequence. Method.
22. Generating the color video from the monochrome image determines the underlying offset for each video frame in the color video and applies a correction offset for each monochrome image when compiling each color video frame. The method according to any one of 1 to 21 above, which comprises.
23. 22. The method of 22 above, wherein determining the underlying offset comprises determining one or more of the vertical and / or horizontal offset amounts of each video frame in the color video.
24. The method according to any one of 1 to 23 above, further comprising separating and displaying the selected monochrome image from the color video.
25. An imaging system for producing color video
An optical assembly comprising a plurality of light sources disposed around the optical axis of the optical assembly, wherein the optical assembly is configured to selectively energize the plurality of light sources in a sequence. ,
A stage assembly configured to receive a biological sample within the optical path of the optical assembly.
A monochrome camera arranged in the optical path and configured to generate a monochrome image corresponding to the continuous stages of the sequence.
An image processor that telecommunicationss with the monochrome camera so that the image processor receives the monochrome image at successive points in time and compiles the monochrome image into multiple video frames to produce a color video. An imaging system, including an image processor, configured.
26. 25. The above 25, wherein the plurality of light sources include a plurality of light sets, each light set has a pair of light sources, and the light source of each light set is positioned on the opposite side of the optical axis. Imaging system.
27. 25 or 26, wherein the plurality of light sources are arranged in a substantially circular pattern around the optical axis.
28. 27. The imaging system according to 27, wherein the optical assembly further comprises an additional light source, generally positioned in the center of the generally circular pattern.
29. The imaging system according to any one of 25 to 28 above, wherein the plurality of light sources include a laser.
30. The imaging system according to any one of 25 to 28 above, wherein the plurality of light sources include a light emitting diode (LED).
31. The imaging system according to any one of 25 to 30, wherein white light is generated when the plurality of light sources are combined.
32. 25. The imaging system according to any one of 25 to 31, wherein the plurality of light sources in the optical assembly include 617 nm light, 530 nm light, and 447.5 nm light.
33. A microscope objective lens aligned with the optical axis,
The imaging system according to any one of 25 to 32 above, further comprising a lens tube aligned with the optical axis.
34. One of 25-33 above, further comprising an optical barrel aligned with the optical axis and positioned so as to surround the optical assembly, wherein the optical barrel has a light diffuser positioned therein. The imaging system described in the section.
35. 34. The imaging system according to 34 above, wherein the light barrel additionally comprises a second light diffuser that is located away from the light diffuser at a distance.
36. 35, wherein the light barrel additionally comprises a third light diffuser that is positioned adjacent to the second light diffuser and located a second distance away from the light diffuser. The imaging system described in.
37. 35. The imaging system according to 35, wherein the distance comprises about 10 mm to 30 mm, preferably about 15 mm to 25 mm, more preferably about 18 mm to 22 mm.
38. 25. The imaging system according to any one of 37 to 37.
39. The imaging system according to any one of 25 to 38 above, wherein the sequence comprises a series of steps, wherein each step selectively energizes light of a specific wavelength.
40. 25, wherein each video frame of the plurality of video frames comprises a composite color image of at least three monochrome images, and each composite color image shares at least two monochrome images with at least one other composite color image. The imaging system according to any one of 39 to 39.
41. The imaging system according to any one of 25 to 40 above, comprising a live color video, wherein the color video has a color video frame rate that matches the frame rate output of the monochrome camera.
42. The imaging system according to any one of 25 to 41 above, wherein the stage assembly is further configured to move the biological sample within the optical path of the optical assembly.
43. A system for generating color video from monochrome images,
With one or more processors
At least in the system
Receiving the first monochrome image corresponding to the first stage of the sequence,
Receiving a second monochrome image corresponding to the second stage of the sequence,
Receiving a third monochrome image corresponding to the third stage of the sequence,
Receiving a fourth monochrome image corresponding to the first step of repeating the sequence,
Receiving a fifth monochrome image corresponding to the second step of repeating the sequence,
Receiving a sixth monochrome image corresponding to the repeating third step of the sequence,
Compiling the first color video frame containing the first, second, and third monochrome images,
One or more having computer executable instructions stored therein that can be executed by the one or more processors to generate and execute a color video containing the first color video frame. A system, including computer-readable media.
44. The instruction additionally causes the system to compile a second color video frame containing the second, third, and fourth monochrome images, and the color video is the first and second colors. 43. The system according to 43 above, including a video frame.
45. The instruction additionally causes the system to compile a second color video frame containing the third, fourth, and fifth monochrome images, wherein the color video is the first and second colors. 43. The system according to 43 above, including a video frame.
46. The instruction additionally causes the system to compile a second color video frame containing the fourth, fifth, and sixth monochrome images, wherein the color video is the first and second colors. 43. The system according to 43 above, including a video frame.
47. The instruction additionally causes the system to determine the underlying offset for each color video frame in the color video and apply a correction offset for each monochrome image when compiling each color video frame. The system according to any one of 43 to 46 above.
48. 47. The system of 47, wherein determining the underlying offset causes the system to determine one or more of the vertical and / or horizontal offset amounts of each video frame in the color video.
49. A method for producing monochrome and color video with a monochrome camera.
To generate a color video, and to generate the color video,
The selective energization of each of a plurality of light sources in a sequence, wherein the sequence has a series of steps, each step of the sequence is the activity of light of different wavelengths from one or more light sources. In response to the change, irradiate the sample, energize it,
At each stage of the sequence, a monochrome camera captures a monochrome image of the irradiated sample.
Compiling a plurality of monochrome images into a series of color video frames containing the color video, including, generating a color video, including, and generating a color video.
In response to a request, the generation of a monochrome video of the sample is to generate the monochrome video of a plurality of monochrome images captured by the monochrome camera using a single light source. A method of producing a monochrome video, including compiling into a series of monochrome video frames containing the video.
50. 49. The method of 49, wherein producing the monochrome video further comprises energizing the single light source continuously to illuminate the sample.
51. Generating the monochrome video further comprises selectively receiving a monochrome image associated with a single stage of the sequence, wherein the single stage of the sequence is the single within the sequence. 49. The method according to 49 above, which corresponds to selectively energizing the light source of the above.
52. The method according to any one of 49 to 51 above, further comprising generating a second monochrome video in response to the second request.
53. Producing the second monochrome video brings the second plurality of monochrome images captured by the monochrome camera at the second light source into a second series of monochrome video frames including the second monochrome video. 52. The method of 52 above, comprising compiling.
54. The method of any one of 49-52 above, further comprising resuming the generation of the color video in response to a subsequent request.
55. A system for producing monochrome video and color video with a monochrome camera.
With one or more processors
At least in the system
Generating a color video is to generate the color video in the system.
The selective energization of each of a plurality of light sources in a sequence, wherein the sequence has a series of steps, each step of the sequence is the activity of light of different wavelengths from one or more light sources. In response to the change, irradiate the sample, energize it,
At each stage of the sequence, a monochrome camera captures a monochrome image of the irradiated sample.
Compiling multiple monochrome images into a series of color video frames containing the color video, and producing a color video to do the work.
Receiving the request for the sample monochrome video and
Generating a monochrome video in response to receiving the request is to generate the monochrome video in a plurality of monochrome captured by the monochrome camera using a single light source in the system. Computer executable stored therein, which can be executed by the one or more processors for producing and executing monochrome video, which compiles an image into a series of monochrome video frames containing said monochrome video. A system, including one or more computer-readable media with instructions.
56. 55. The system of 55, wherein producing the monochrome video further causes the system to continuously energize the single light source to illuminate the sample.
57. Generating the monochrome video further causes the system to selectively receive a monochrome image associated with a single step of the sequence, the single step of the sequence being said single within the sequence. 55. The system according to 55 above, which corresponds to selectively energizing one light source.
58. The system according to any one of 55 to 57 above, wherein the instruction additionally causes the system to generate a second monochrome video in response to the second request.
59. Producing the second monochrome video allows the system to capture a second plurality of monochrome images captured by the monochrome camera with the second light source in a second series including the second monochrome video. The system according to 58 above, which is compiled into a monochrome video frame.
60. The system according to any one of 55 to 59 above, wherein the instruction additionally causes the system to resume the generation of the color video in response to a subsequent request.
61. The method according to any one of 1 to 24 or 49 to 54 above, wherein the color video is a near real-time color video.
62. 61. The method of 61 above, wherein the near real-time color video has a time lag, the time lag being less than 5 seconds.
63. 62. The method of 62 above, wherein the time lag is less than 2 seconds.
64. 63. The method of 63 above, wherein the time lag is less than 1 second.
65. 64. The method of 64 above, wherein the time lag is less than 0.5 seconds.
66. The method according to any one of 1 to 24 or 49 to 54 above, wherein the color video is a real-time color video.
67. 66. The method of 66 above, wherein the real-time color video has no significant time lag.
68. 66. The method of 66 above, wherein the real-time color video does not include visual loss of image data.
69. 68. The method of 68 above, wherein the visual loss of the image data comprises a color banding artifact.
70. 68. The method of 68 above, wherein the visual loss of the image data comprises a lack of color balance.
71. The method according to any one of 1 to 24, 49 to 54 or 61 to 70, wherein the color video has a frame rate of at least 6 frames per second.
72. 70. The method of 70 above, wherein the color video has a frame rate of at least 12 frames per second.
73. 71. The method of 71 above, wherein the color video has a frame rate of at least 18 frames per second.
74. 72. The method of 72 above, wherein the color video has a frame rate of at least 24 frames per second.
75. The method according to any one of 1 to 24, 49 to 54, or 61 to 74, wherein the monochrome image is captured and the color video is generated while manipulating the sample.
76. 75. The method of 75, wherein the sample is manipulated by moving the stage assembly in which the sample is located.
77. The method according to 76 above, wherein the movement comprises a movement in two dimensions.
78. The method according to any one of 75 to 77 above, wherein the color video is additionally displayed on a user display device while the sample is being manipulated.
79. The method according to any one of 1 to 24, 49 to 54 or 61 to 74, wherein the monochrome image is captured and the color video is generated while the sample is in focus.
80. 79. The method of 79 above, wherein the sample is focused by the user.
81. 79. The method of 79, wherein the sample is automatically focused by a computing device.
82. The method according to any one of 79 to 81 above, wherein the color video is additionally displayed on the user display device while the sample is in focus.
83. The item according to any one of 1 to 24, 49 to 54 or 61 to 74, wherein the monochrome image is captured and the color video is generated while adjusting one or more irradiation conditions. Method.
84. Adjusting the one or more irradiation conditions means adjusting one or more lighting capacitors, adjusting one or more light diffusers, adjusting the wavelength of the one or more light sources, said. Adjusting the period during which one or more of the one or more light sources are energized, adjusting the blocking of light from one or more of the one or more light sources, or the one or more light sources. 83. The method of 83 above, comprising adjusting the exposure of light from one or more of the above.
85. 83 or 84, wherein the color video is additionally displayed on a user display device while adjusting the one or more irradiation conditions.
86. The method according to any one of 1 to 24, 49 to 54, or 61 to 74 above, wherein the color video is at least partially a z-stack video.
87. The method according to any one of 1 to 24, 49 to 54, or 61 to 74, wherein the color video is generated while the z-stack image is being acquired from the monochrome image.
88. The system according to any one of 25 to 42 above, wherein the color video is a near real-time color video.
89. 88. The system of 88, wherein the near real-time color video has a time lag, the time lag being less than 5 seconds.
90. The system according to 89 above, wherein the time lag is less than 2 seconds.
91. The system according to 90 above, wherein the time lag is less than 1 second.
92. The system according to 91 above, wherein the time lag is less than 0.5 seconds.
93. The system according to any one of 25 to 42 above, wherein the color video is a real-time color video.
94. 93. The system according to 93, wherein the real-time color video does not have a significant time lag.
95. 93. The system according to 93, wherein the real-time color video does not include visual loss of image data.
96. 95. The system of 95 above, wherein the visual loss of the image data comprises a color banding artifact.
97. 95. The system according to 95, wherein the visual loss of the image data comprises a lack of color balance.
98. The system according to any one of 25 to 42 above, wherein the color video has a frame rate of at least 6 frames per second.
99. The system according to 98 above, wherein the color video has a frame rate of at least 12 frames per second.
100. 99. The system according to 99, wherein the color video has a frame rate of at least 18 frames per second.
101. 100. The system of 100, wherein the color video has a frame rate of at least 24 frames per second.
102. 25-42 or 88-101, wherein the system is configured to generate the color video while producing the monochrome image and manipulating the biological sample. System.
103. 102. The system of 102 above, wherein the system is configured to manipulate the biological sample by moving the stage assembly in which the sample is located.
104. 10. The system of 103 above, wherein the movement comprises movement in two dimensions.
105. 102 or 103, wherein the color video is additionally displayed on a user display device while the biological sample is being manipulated.
106. 25-42 or 88-101, wherein the system is configured to generate the color video while producing the monochrome image and focusing the biological sample. The system described.
107. The system according to 106, wherein the system is configured to allow the user to focus the biological sample.
108. The system
With one or more processors
At least in the system
It has computer-executable instructions stored therein that can be executed by the one or more processors for performing the focusing of the biological sample while continuing to generate the color video. The system according to 106 above, including one or more computer-readable media.
109. Any of 106-108 above, wherein the system includes a user display device and the system is configured to display the color video on the user display device while the biological sample is in focus. Or the system according to item 1.
110. 25-42 or said system is configured to generate the monochrome image and generate the color video while the system adjusts one or more illumination conditions of the optical assembly. The system according to any one of 88 to 101.
111. The one or more irradiation conditions adjusted by the system include the adjustment of one or more illumination capacitors, the adjustment of one or more light diffusers, the adjustment of the wavelength of the one or more light sources, and the adjustment of one or more of the light sources. Adjusting how long one or more of the light sources are energized, adjusting the blocking of light from one or more of the one or more light sources, or from one or more of the one or more light sources. 110. The system according to 110 above, which comprises adjusting the exposure of light.
112. The system includes a user display device, the system is configured to display the color video on the user display device while the system adjusts the one or more irradiation conditions of the optical assembly. The system according to 111 above.
113. The system according to any one of 25 to 42 above, wherein the color video is at least partially a z-stack video.
114. The system according to any one of 25 to 42 above, wherein the system is configured to generate the color video while acquiring a z-stack image from the monochrome image.
Claims (40)
シーケンス内で複数の光源の各々に選択的に通電することであって、前記シーケンスが、一連の段階を有し、前記シーケンスの各段階が、１つ以上の光源からの異なる波長の光の活性化に対応して、サンプルを照射する、通電することと、
前記シーケンスの各段階で、モノクロカメラで、前記照射されたサンプルのモノクロ画像を捕捉することと、
前記モノクロ画像から、カラービデオを生成することと、を含む、方法。 A way to generate color video with a monochrome camera,
The selective energization of each of a plurality of light sources in a sequence, wherein the sequence has a series of steps, each step of the sequence is the activity of light of different wavelengths from one or more light sources. In response to the change, irradiate the sample, energize it,
At each stage of the sequence, a monochrome camera captures a monochrome image of the irradiated sample.
A method comprising generating a color video from the monochrome image.
前記シーケンスの第１の段階で捕捉された第１のモノクロ画像であって、前記第１の段階が、第１の波長の光と関連付けられている、第１のモノクロ画像と、
前記シーケンスの第２の段階で捕捉された第２のモノクロ画像であって、前記第２の段階が、第２の波長の光と関連付けられている、第２のモノクロ画像と、
前記シーケンスの第３の段階で捕捉された第３のモノクロ画像であって、前記第３の段階が、第３の波長の光と関連付けられている、第３のモノクロ画像と、の合成カラー画像を含む、請求項１～１３のいずれか１項に記載の方法。 Generating the color video involves compiling a sequence of video frames, where each video frame is
A first monochrome image captured in a first step of the sequence, wherein the first step is associated with light of a first wavelength.
A second monochrome image captured in a second step of the sequence, wherein the second step is associated with light of a second wavelength.
A composite color image of a third monochrome image captured in the third stage of the sequence, wherein the third stage is associated with light of a third wavelength. The method according to any one of claims 1 to 13, which comprises.
第１のビデオフレームをコンパイルすることであって、前記第１のビデオフレームの合成カラー画像が、前記シーケンスの第１のサイクルにおける第１の波長の光と関連付けられた第１のモノクロ画像と、前記シーケンスの前記第１のサイクルにおける第２の波長の光と関連付けられた第２のモノクロ画像と、前記シーケンスの前記第１のサイクルにおける第３の波長の光と関連付けられた第３のモノクロ画像と、を含む、第１のビデオフレームをコンパイルすることと、
第２のビデオフレームをコンパイルすることであって、前記第２のビデオフレームが、前記第１のビデオフレームの後に時系列的に存在し、前記第２のビデオフレームの合成カラー画像が、前記シーケンスの第２のサイクルにおける第１の波長の光と関連付けられた前記第２のモノクロ画像、前記第３のモノクロ画像、および第４のモノクロ画像を含む、第２のビデオフレームをコンパイルすることと、を含む、請求項１～１６のいずれか１項に記載の方法。 Generating the color video is
By compiling the first video frame, the composite color image of the first video frame is the first monochrome image associated with the light of the first wavelength in the first cycle of the sequence. A second monochrome image associated with the light of the second wavelength in the first cycle of the sequence and a third monochrome image associated with the light of the third wavelength in the first cycle of the sequence. And, including, compiling the first video frame,
By compiling the second video frame, the second video frame exists in chronological order after the first video frame, and the composite color image of the second video frame is the sequence. Compiling a second video frame containing the second monochrome image, the third monochrome image, and the fourth monochrome image associated with the light of the first wavelength in the second cycle of. The method according to any one of claims 1 to 16, which comprises.
１つ以上のプロセッサと、
前記システムに、少なくとも、
シーケンスの第１の段階に対応する第１のモノクロ画像を受信することと、
前記シーケンスの第２の段階に対応する第２のモノクロ画像を受信することと、
前記シーケンスの第３の段階に対応する第３のモノクロ画像を受信することと、
前記シーケンスの繰り返される第１の段階に対応する第４のモノクロ画像を受信することと、
前記シーケンスの繰り返される第２の段階に対応する第５のモノクロ画像を受信することと、
前記シーケンスの繰り返される第３の段階に対応する第６のモノクロ画像を受信することと、
前記第１、第２、および第３のモノクロ画像を含む第１のカラービデオフレームをコンパイルすることと、
前記第１のカラービデオフレームを含むカラービデオを生成することと、を実行させるための前記１つ以上のプロセッサによって実行可能である、そこに記憶されたコンピュータ実行可能命令を有する、１つ以上のコンピュータ可読媒体と、を含む、システム。 A system for generating color video from monochrome images,
With one or more processors
At least in the system
Receiving the first monochrome image corresponding to the first stage of the sequence,
Receiving a second monochrome image corresponding to the second stage of the sequence,
Receiving a third monochrome image corresponding to the third stage of the sequence,
Receiving a fourth monochrome image corresponding to the first step of repeating the sequence,
Receiving a fifth monochrome image corresponding to the second step of repeating the sequence,
Receiving a sixth monochrome image corresponding to the repeating third step of the sequence,
Compiling the first color video frame containing the first, second, and third monochrome images,
One or more having computer executable instructions stored therein that can be executed by the one or more processors to generate and execute a color video containing the first color video frame. A system, including computer-readable media.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2024029662A JP2024051137A (en) | 2018-04-12 | 2024-02-29 | Apparatus, system and method for generating color video with monochrome sensor |
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201862656720P | 2018-04-12 | 2018-04-12 | |
| US62/656,720 | 2018-04-12 | ||
| US201862701419P | 2018-07-20 | 2018-07-20 | |
| US62/701,419 | 2018-07-20 | ||
| PCT/US2019/027013 WO2019200116A1 (en) | 2018-04-12 | 2019-04-11 | Apparatuses, systems and methods for generating color video with a monochrome sensor |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2024029662A Division JP2024051137A (en) | 2018-04-12 | 2024-02-29 | Apparatus, system and method for generating color video with monochrome sensor |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2021521478A JP2021521478A (en) | 2021-08-26 |
| JPWO2019200116A5 true JPWO2019200116A5 (en) | 2022-04-19 |
Family
ID=66248881
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020555800A Pending JP2021521478A (en) | 2018-04-12 | 2019-04-11 | Devices, systems, and methods for producing color video with monochrome sensors |
| JP2024029662A Pending JP2024051137A (en) | 2018-04-12 | 2024-02-29 | Apparatus, system and method for generating color video with monochrome sensor |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2024029662A Pending JP2024051137A (en) | 2018-04-12 | 2024-02-29 | Apparatus, system and method for generating color video with monochrome sensor |
Country Status (5)
| Country | Link |
|---|---|
| US (3) | US10831015B2 (en) |
| EP (1) | EP3776055A1 (en) |
| JP (2) | JP2021521478A (en) |
| CN (2) | CN117979180A (en) |
| WO (1) | WO2019200116A1 (en) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117979180A (en) * | 2018-04-12 | 2024-05-03 | 生命科技股份有限公司 | Apparatus, system, and method for generating color video using monochrome sensor |
| WO2021124942A1 (en) * | 2019-12-20 | 2021-06-24 | ソニーグループ株式会社 | Imaging device, information processing method, and program |
| JP7454417B2 (en) * | 2020-03-18 | 2024-03-22 | ソニー・オリンパスメディカルソリューションズ株式会社 | Medical control device and medical observation system |
| CN115802183B (en) * | 2021-09-10 | 2023-10-20 | 荣耀终端有限公司 | Image processing method and related device |
Family Cites Families (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS61269481A (en) * | 1985-05-23 | 1986-11-28 | Toshiba Corp | Color image pickup device |
| JP2836158B2 (en) * | 1990-01-31 | 1998-12-14 | 富士写真光機株式会社 | Still image capturing device |
| JP2964715B2 (en) * | 1991-07-01 | 1999-10-18 | 富士写真光機株式会社 | Electronic endoscope system |
| US5332968A (en) * | 1992-04-21 | 1994-07-26 | University Of South Florida | Magnetic resonance imaging color composites |
| JP3228621B2 (en) * | 1993-12-17 | 2001-11-12 | オリンパス光学工業株式会社 | Electronic endoscope device |
| AU740638B2 (en) * | 1997-02-28 | 2001-11-08 | Electro-Optical Sciences, Inc. | Systems and methods for the multispectral imaging and characterization of skin tissue |
| US6956373B1 (en) * | 2002-01-02 | 2005-10-18 | Hugh Keith Brown | Opposed orthogonal fusion system and method for generating color segmented MRI voxel matrices |
| US20040102903A1 (en) * | 2002-11-27 | 2004-05-27 | Graessle Josef A. | Biological growth plate scanner |
| JP2005315574A (en) * | 2004-04-26 | 2005-11-10 | Crie Inc | Electronic camera |
| JP4746311B2 (en) * | 2004-12-08 | 2011-08-10 | 大倉インダストリー株式会社 | Color laser microscope |
| US20060226231A1 (en) * | 2005-03-29 | 2006-10-12 | University Of Washington | Methods and systems for creating sequential color images |
| JP2009526272A (en) * | 2006-02-10 | 2009-07-16 | モノジェン インコーポレイテッド | Method and apparatus and computer program product for collecting digital image data from a microscope media based specimen |
| US8810651B2 (en) | 2007-09-26 | 2014-08-19 | Honeywell International, Inc | Pseudo-color covert night vision security digital camera system |
| CA2762886A1 (en) * | 2009-05-22 | 2010-11-25 | British Columbia Cancer Agency Branch | Selective excitation light fluorescence imaging methods and apparatus |
| US20110184239A1 (en) * | 2009-12-22 | 2011-07-28 | Integrated Endoscopy, Inc. | Methods and systems for disabling an endoscope after use |
| US20120013726A1 (en) * | 2010-07-16 | 2012-01-19 | Thorburn Stanley B | Microscope Illumination Source |
| JP5677864B2 (en) * | 2011-01-17 | 2015-02-25 | オリンパス株式会社 | Microscope imaging apparatus and microscope observation method |
| ES2804300T3 (en) * | 2013-03-12 | 2021-02-05 | Ventana Med Syst Inc | Digitally Enhanced Microscopy for Multiplexed Histology |
| EP3143381B1 (en) * | 2014-05-12 | 2021-02-24 | Cellomics, Inc | Automated imaging of chromophore labeled samples |
| JP6654038B2 (en) * | 2015-12-22 | 2020-02-26 | 富士フイルム株式会社 | Endoscope system, processor device, and method of operating endoscope system |
| JP2016184948A (en) * | 2016-05-26 | 2016-10-20 | パイオニア株式会社 | Imaging apparatus, endoscope apparatus, and imaging apparatus control method |
| US10983325B2 (en) * | 2016-12-12 | 2021-04-20 | Molecular Devices, Llc | Trans-illumination imaging with an array of light sources |
| US10706258B2 (en) * | 2017-02-22 | 2020-07-07 | University Of Connecticut | Systems and methods for cell identification using lens-less imaging |
| CN117979180A (en) * | 2018-04-12 | 2024-05-03 | 生命科技股份有限公司 | Apparatus, system, and method for generating color video using monochrome sensor |
-
2019
- 2019-04-11 CN CN202410183541.6A patent/CN117979180A/en active Pending
- 2019-04-11 US US16/381,438 patent/US10831015B2/en active Active
- 2019-04-11 CN CN201980025093.4A patent/CN112005153B/en active Active
- 2019-04-11 EP EP19719151.3A patent/EP3776055A1/en active Pending
- 2019-04-11 WO PCT/US2019/027013 patent/WO2019200116A1/en unknown
- 2019-04-11 JP JP2020555800A patent/JP2021521478A/en active Pending
-
2020
- 2020-09-30 US US17/039,221 patent/US11340442B2/en active Active
-
2022
- 2022-05-06 US US17/738,884 patent/US11906724B2/en active Active
-
2024
- 2024-02-29 JP JP2024029662A patent/JP2024051137A/en active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5996287B2 (en) | Imaging device, microscope device, endoscope device | |
| JP4846042B2 (en) | Ophthalmic imaging apparatus, ophthalmic system, and program | |
| US20090180179A1 (en) | Microscope apparatus and focal-depth enlarged image generation method used therefor | |
| WO2006074812A3 (en) | Illumination sytsem for a microlithographic projection exposure apparatus | |
| JP7107308B2 (en) | Observation system and light source controller | |
| US10831015B2 (en) | Apparatuses, systems and methods for generating color video with a monochrome sensor | |
| CN107997737B (en) | Eye imaging system, method and device | |
| JP2013225118A5 (en) | ||
| JP2007209219A (en) | Biospecimen observation and measurement system and biospecimen observation and measurement method | |
| US20180049644A1 (en) | Observation apparatus and method for visual enhancement of an observed object | |
| JP5605995B2 (en) | Ophthalmic imaging equipment | |
| JP5268583B2 (en) | Ophthalmic imaging equipment | |
| JP2009072213A (en) | Endoscope light source unit and endoscope system | |
| WO2018003263A1 (en) | Observation device and control method for observation device | |
| JPWO2019200116A5 (en) | ||
| KR101450120B1 (en) | Fluorescence image acquisition apparatus for acquiring images by multiple light sources at once | |
| US20220133140A1 (en) | Light source apparatus, medical observation system, adjustment apparatus, illumination method, adjustment method, and program | |
| JP2021104229A (en) | Ocular fundus image processing device and ocular fundus image processing program | |
| JP5436030B2 (en) | Ophthalmic apparatus and control method | |
| JP2009247772A5 (en) | ||
| JP2016123576A (en) | Fluorescent observation apparatus | |
| JPH03109515A (en) | Automatic light control device | |
| JP2017000192A (en) | Fluorescence observation device | |
| JP2020054479A5 (en) | Image processing program for ophthalmology and fundus photography equipment | |
| JPH08299280A (en) | Fundus camera |