JP4118916B2 - マルチスペクトル画像撮影装置 - Google Patents
マルチスペクトル画像撮影装置 Download PDFInfo
- Publication number
- JP4118916B2 JP4118916B2 JP2005515360A JP2005515360A JP4118916B2 JP 4118916 B2 JP4118916 B2 JP 4118916B2 JP 2005515360 A JP2005515360 A JP 2005515360A JP 2005515360 A JP2005515360 A JP 2005515360A JP 4118916 B2 JP4118916 B2 JP 4118916B2
- Authority
- JP
- Japan
- Prior art keywords
- band
- image
- light
- color
- bands
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000701 chemical imaging Methods 0.000 title claims description 11
- 230000003595 spectral effect Effects 0.000 claims description 78
- 230000035945 sensitivity Effects 0.000 claims description 40
- 238000003384 imaging method Methods 0.000 claims description 31
- 230000005540 biological transmission Effects 0.000 claims description 17
- 239000011521 glass Substances 0.000 claims description 3
- 230000002194 synthesizing effect Effects 0.000 claims description 3
- 238000002834 transmittance Methods 0.000 description 35
- 238000010586 diagram Methods 0.000 description 27
- 238000000926 separation method Methods 0.000 description 12
- 230000000694 effects Effects 0.000 description 10
- 238000012986 modification Methods 0.000 description 10
- 230000004048 modification Effects 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 9
- 238000005286 illumination Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 239000003086 colorant Substances 0.000 description 5
- 238000012545 processing Methods 0.000 description 4
- 230000006866 deterioration Effects 0.000 description 3
- 238000000034 method Methods 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000000295 emission spectrum Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/30—Measuring the intensity of spectral lines directly on the spectrum itself
- G01J3/36—Investigating two or more bands of a spectrum by separate detectors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/843—Demosaicing, e.g. interpolating colour pixel values
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/2823—Imaging spectrometer
- G01J2003/2826—Multispectral imaging, e.g. filter imaging
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- General Physics & Mathematics (AREA)
- Color Television Image Signal Generators (AREA)
- Optical Elements Other Than Lenses (AREA)
- Optical Filters (AREA)
- Cameras In General (AREA)
- Blocking Light For Cameras (AREA)
Description
被写体のカラー画像を撮像する1枚のカラー撮像手段と、
上記カラー撮像手段に対向して配置され、6バンドの分光感度特性のうち、標準的なRGBの分光感度特性を有する主要な3バンドの画像を撮影するために上記被写体からの上記標準的なRGBの光を上記カラー撮像手段に所定のタイミングで入射させ、上記6バンドの分光感度特性のうちの上記主要な3バンドを除いた残りのバンドであって、上記RGBよりも狭帯域な分光感度特性を有する補助的な3バンドの画像を撮影するために上記補助的な3バンドの光を上記カラー撮像手段に上記所定のタイミングと異なるタイミングで入射させるフィルタと、
上記カラー撮像手段によって異なるタイミングで撮像された上記主要な3バンドの画像と上記補助的な3バンドの画像とを合成して6バンドの画像を生成する合成手段と、
上記カラー撮像手段によって撮像された上記主要な3バンドの画像を出力する出力手段と、
を具備することを特徴とするマルチスペクトル画像撮影装置が提供される。
本発明の第1実施例に係るマルチスペクトル画像撮影装置においては、図1に示すように、被写体Oからの光がレンズ10及びハーフミラー(HM)12を通して2枚のカラーCCD撮像素子14,16に結像される。このとき、ハーフミラー12は、透過率と反射率の比が異なり、それぞれの比が約3:1となるようなものを使用している。即ち、図2に示すように、ハーフミラー12は、透過率12Aが波長によらずに75%一定で、反射率12Bが同様に25%一定のものを使用している。
本発明の第2実施例に係るマルチスペクトル画像撮影装置は、図11に示すように、被写体Oからの光が、レンズ10及び回転フィルタ42を通して、1枚のカラーCCD撮像素子44に結像される。回転フィルタ42は、図12に示すように、透過率がほぼ100%である透明ガラス42Aと、前述した図5に示した分光透過率特性によるバンドパスフィルタ42Bとからなるもので、各々の面積比が約3:1となるように構成されている。上記回転フィルタ42を透過した光は、IR−CF18を通して近赤外の光が遮断され、カラーCCD撮像素子44に結像される。また、上記回転フィルタ42は、モータ46により回転速度一定で回転するように駆動され、カラーCCD撮像素子44は、上記回転フィルタ42が一回転する間に2回の露光を行なう。
本発明の第3実施例に係るマルチスペクトル画像撮影装置は、図14に示すように、被写体Oからの光を、IR−CF18を通して近赤外の光を遮断してから、1枚のカラーCCD撮像素子44に結像する。このとき、カラーCCD撮像素子44には、図15に示すように、1画素毎にR,G,B、及びR’,G’,B’のフィルタが周期的に配置されたモザイクフィルタ44Aが装着されている。各フィルタの分光透過率分布は、図16に示すようになっている。即ち、R,G,Bのフィルタは従来の3バンドカメラと同じ分光帯域を有するものであり、R’,G’,B’は従来のRGBよりも狭帯域な分光帯域を有するものとなっている。なお、上記モザイクフィルタ44Aは、図15に示すように、R’,G’,B’のフィルタがR,G,B各3画素に対して各1画素の割合で配置され、これが周期的に並んでいる。
本発明の第4実施例に係るマルチスペクトル画像撮影装置は、これまでの実施例において使用していた被写体Oの光を2分岐させるハーフミラー12の代わりに、図19に示すように、波長を選択して透過/反射を行なうダイクロイックミラー(DM)50を用いたものである。図20は、上記DM50の分光透過率分布は、図20に黒細線50Aで示すようになっており、また、分光反射率分布は黒点線50Bで示すようになっている。なお、図20において黒太線は、図19における色分解プリズムで各々分離されるRGBの分光特性を示している。この図20に示すように、上記DM50はそれぞれ櫛形の分光形状による透過率/反射率分布を有している。
本発明の第5実施例に係るマルチスペクトル画像撮影装置は、図23に示すように、狭帯域の3バンドの波長特性の光源を有するストロボ照明発光部58を備え、ストロボ無発光状態(外光照明)と、ストロボ発光状態(外光+ストロボ)の2種類の画像(各々3バンド)を撮像することにより、6バンドのマルチスペクトル画像を取得するものである。ここで、上記ストロボ照明発光部58の光源には、カラーCCD撮像素子44のRGB感度の各々の波長領域で鋭いピークを持つような櫛形分光分布の波長特性を有する白色LED、蛍光灯などの光源を使用する。或いは、狭帯減の波長特性を有する3種類のLED等が用いられても良い。上記ストロボ照明発光部58の光源の発光スペクトルの例は、図24に実線で示すようになっている。なお、同図において、破線はRGBの透過率特性を示している。
本発明の第6実施例に係るマルチスペクトル画像撮影装置は、2眼レンズによるマルチスペクトル画像撮影装置で、従来のRGB3バンド撮影用のカラー撮像部と、狭帯域の3バンドの櫛型の分光透過特性を有するバンドパスフィルタをレンズに備えた、狭帯域の3バンド撮影用のカラー撮像部とを備え、従来のRGB3バンド撮影用のカラー撮像部からの主要な3バンド画像と、狭帯域の3バンド撮影用のカラー撮像部からの補助的な3バンド画像とから、6バンドのマルチスペクトル画像を取得するものである。
前記の具体的実施例から、以下のような構成の発明を抽出することができる。
上記4バンド以上の分光感度特性のうち、主要な3バンドは、標準的なRGBの分光感度特性を有し、
上記4バンド以上の分光感度特性のうちの上記主要な3バンドを除いた残りのバンドのうち、少なくとも一つの補助的なバンドは、上記RGBよりも狭帯域な分光感度特性を有する、
ことを特徴とするマルチスペクトル画像撮影装置。
この(1)に記載のマルチスペクトル画像撮影装置に関する実施例は、第1乃至第4実施例が対応する。
この(1)に記載の構成によれば、マルチスペクトル撮影を行なう各バンドのうち、少なくとも3バンドは従来のRGBと同じ広帯域な分光感度特性とし、さらに、他の補助的な狭帯域のバンドに対しては、被写体の光を上記RGBのバンドよりも少ない比率の光量で割り当てることにより、光の損失を軽減し、これにより動きのある被写体でも精度よく色再現を行なえる。さらに、特殊な変換器を必要とすることなく通常のRGBモニタを用いて直接撮影画像の確認が可能となる。
この(2)に記載のマルチスペクトル画像撮影装置に関する実施例は、第1乃至第4実施例が対応する。
この(2)に記載の構成によれば、被写体からの入射光の大半を主要なRGB3バンドの取得に使用し、一方、残りの少量の光を狭帯域化して補助的なバンドに割り当てることで、その狭帯域化により生じる光量の損失をできるだけ少なくし、マルチスペクトル撮影における感度の劣化を防ぐことにより、色再現性のよい分光感度特性を実現できる。
上記ハーフミラーで分割された一方の光の分光特性を変調するバンドパスフィルタ(20)と、
上記バンドパスフィルタによって変調された光を受光して、被写体を撮像する撮像手段(16)と、
上記ハーフミラーで分割されたもう一方の光を、赤、青、緑の3色に分解して受光し、被写体のカラー画像を撮像するカラー撮像手段(14;32)と、
を具備することを特徴とするマルチスペクトル画像撮影装置。
この(3)に記載のマルチスペクトル画像撮影装置に関する実施例は、第1実施例及び第1実施例の第2の変形例が対応する。
この(3)に記載の構成によれば、ハーフミラーで分割された一方の光を、RGBと同じ赤、青、緑の3色に分解して撮像し、さらに、他方の光はバンドパスフィルタで狭帯域化して撮影することで、補助的な狭帯域のバンドに対しては被写体の光をRGBのバンドよりも少ない比率の光量で割り当てることにより、光の損失を軽減し、これにより動きのある被写体でも精度よく色再現を行なえる。さらに、特殊な変換器を必要とすることなく通常のRGBモニタを用いて直接撮影画像の確認が可能となる。
この(4)に記載のマルチスペクトル画像撮影装置に関する実施例は、第1実施例及び第1実施例の第2の変形例が対応する。
この(4)に記載の構成によれば、被写体からの入射光の大半をRGB3バンドの取得に使用し、一方、残りの少量の光をバンドパスフィルタにより狭帯域化して他のバンドに割り当てることで、バンドパスフィルタによる狭帯域化により生じる光量の損失をできるだけ少なくし、マルチスペクトル撮影における感度の劣化を防ぐことにより、色再現性のよい分光感度特性を実現できる。
上記バンドパスフィルタを通過した光を受光する上記撮像手段は、上記バンドパスフィルタにおける複数の透過波長帯域の光を各々分解して受光するカラー撮像手段(16)であることを特徴とする(3)または(4)に記載のマルチスペクトル画像撮影装置。
この(5)に記載のマルチスペクトル画像撮影装置に関する実施例は、第1実施例が対応する。
この(5)に記載の構成によれば、補助的な狭帯域のバンドについてもカラー撮像手段を用いることで、5バンド以上の多バンド化が可能となり、色再現性の良いマルチスペクトル画像取得が可能となる。
この(6)に記載のマルチスペクトル画像撮影装置に関する実施例は、第1実施例及び第1実施例の第2の変形例が対応する。
この(6)に記載の構成によれば、補助的なバンド画像の解像度が低くても、主要な3バンド画像における高周波成分を利用して、上記主要な3バンド画像とほぼ同等な解像度のマルチスペクトル画像を得ることができる。また、低解像度な撮像手段は高解像度な撮像手段と比べ感度が高いため、よりハーフミラーの反射率を落とし、透過率を高めることができるので、トータルの感度をさらに高めることが可能となる。
複数の波長帯域の光を透過し且つ上記複数の波長帯域以外の光を反射する櫛形の分光透過率及び分光反射率特性を有するダイクロイックミラー(50)と、
上記ダイクロイックミラーと略同一の透過波長帯域を有するバンドパスフィルタ(52)と、
上記ダイクロイックミラーの反射波長帯域と略同一の波長帯域を透過する分光透過率特性を有するバンドパスフィルタ(54)と、
を具備することを特徴とするマルチスペクトル画像撮影装置。
この(7)に記載のマルチスペクトル画像撮影装置に関する実施例は、第4実施例が対応する。
この(7)に記載の構成によれば、ダイクロイックミラーにより被写体の光をある程度波長分離しておくことで、バンドパスフィルタによる光の損失も最小限に抑えることができるので、光効率の良いマルチバンドカメラが実現できる。
Claims (4)
- 被写体のカラー画像を撮像する1枚のカラー撮像手段と、
上記カラー撮像手段に対向して配置され、6バンドの分光感度特性のうち、標準的なRGBの分光感度特性を有する主要な3バンドの画像を撮影するために上記被写体からの上記標準的なRGBの光を上記カラー撮像手段に所定のタイミングで入射させ、上記6バンドの分光感度特性のうちの上記主要な3バンドを除いた残りのバンドであって、上記RGBよりも狭帯域な分光感度特性を有する補助的な3バンドの画像を撮影するために上記補助的な3バンドの光を上記カラー撮像手段に上記所定のタイミングと異なるタイミングで入射させるフィルタと、
上記カラー撮像手段によって異なるタイミングで撮像された上記主要な3バンドの画像と上記補助的な3バンドの画像とを合成して6バンドの画像を生成する合成手段と、
上記カラー撮像手段によって撮像された上記主要な3バンドの画像を出力する出力手段と、
を具備することを特徴とするマルチスペクトル画像撮影装置。 - 上記フィルタは、上記カラー撮像手段に上記補助的な3バンドの光を入射させるために上記被写体からの光の分光感度特性を変調するバンドパスフィルタを備えることを特徴とする請求項1に記載のマルチスペクトル画像撮影装置。
- 上記フィルタは、上記標準的なRGBの光を入射させるための透明ガラスと、上記バンドパスフィルタと、が設けられた回転フィルタを備えることを特徴とする請求項2に記載のマルチスペクトル画像撮影装置。
- 上記バンドパスフィルタは、可視領域の波長範囲において複数の透過波長帯域と複数の非透過波長帯域とを有する櫛形の分光形状を持つバンドパスフィルタであることを特徴とする請求項2または3に記載のマルチスペクトル画像撮影装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003381419 | 2003-11-11 | ||
JP2003381419 | 2003-11-11 | ||
PCT/JP2004/016678 WO2005046248A1 (ja) | 2003-11-11 | 2004-11-10 | マルチスペクトル画像撮影装置 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008043506A Division JP4633129B2 (ja) | 2003-11-11 | 2008-02-25 | マルチスペクトル画像撮影装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2005046248A1 JPWO2005046248A1 (ja) | 2007-11-29 |
JP4118916B2 true JP4118916B2 (ja) | 2008-07-16 |
Family
ID=34567278
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005515360A Expired - Fee Related JP4118916B2 (ja) | 2003-11-11 | 2004-11-10 | マルチスペクトル画像撮影装置 |
JP2010219705A Expired - Fee Related JP5124003B2 (ja) | 2003-11-11 | 2010-09-29 | マルチスペクトル画像撮影装置 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010219705A Expired - Fee Related JP5124003B2 (ja) | 2003-11-11 | 2010-09-29 | マルチスペクトル画像撮影装置 |
Country Status (5)
Country | Link |
---|---|
US (3) | US7612822B2 (ja) |
EP (1) | EP1686810A4 (ja) |
JP (2) | JP4118916B2 (ja) |
CN (1) | CN1875638A (ja) |
WO (1) | WO2005046248A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014208188A1 (ja) * | 2013-06-26 | 2014-12-31 | オリンパス株式会社 | 画像処理装置及び画像処理方法 |
Families Citing this family (119)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3673845B2 (ja) * | 2002-11-19 | 2005-07-20 | コニカミノルタホールディングス株式会社 | 撮像装置 |
JP2007103401A (ja) * | 2005-09-30 | 2007-04-19 | Matsushita Electric Ind Co Ltd | 撮像装置及び画像処理装置 |
EP2284509B1 (en) * | 2005-11-04 | 2018-01-31 | George Themelis | System for multispectral imaging |
JP5086535B2 (ja) * | 2005-11-21 | 2012-11-28 | オリンパスメディカルシステムズ株式会社 | 2板撮像装置 |
JP4899149B2 (ja) * | 2006-02-13 | 2012-03-21 | 株式会社ジェイエイアイコーポレーション | 面順次方式カラーカメラシステム |
CN101420899B (zh) | 2006-04-12 | 2011-05-18 | 奥林巴斯医疗株式会社 | 内窥镜装置 |
US8242426B2 (en) * | 2006-12-12 | 2012-08-14 | Dolby Laboratories Licensing Corporation | Electronic camera having multiple sensors for capturing high dynamic range images and related methods |
US20080174691A1 (en) * | 2007-01-19 | 2008-07-24 | Quality Vision International Inc. | Strobed image acquisition guided by range sensor |
US8253824B2 (en) * | 2007-10-12 | 2012-08-28 | Microsoft Corporation | Multi-spectral imaging |
EP2057935B1 (en) * | 2007-11-09 | 2016-01-06 | FUJIFILM Corporation | Image capturing system, image capturing method, and program |
JP5034927B2 (ja) * | 2007-12-25 | 2012-09-26 | 凸版印刷株式会社 | 情報取得装置、情報取得方法および情報取得プログラム |
WO2009120928A2 (en) * | 2008-03-28 | 2009-10-01 | The Trustees Of Columbia University In The City Of New York | Generalized assorted pixel camera systems and methods |
JP2009260411A (ja) * | 2008-04-11 | 2009-11-05 | Olympus Corp | 撮像装置 |
KR101733443B1 (ko) | 2008-05-20 | 2017-05-10 | 펠리칸 이매징 코포레이션 | 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리 |
US8866920B2 (en) | 2008-05-20 | 2014-10-21 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
US11792538B2 (en) | 2008-05-20 | 2023-10-17 | Adeia Imaging Llc | Capturing and processing of images including occlusions focused on an image sensor by a lens stack array |
US7924312B2 (en) * | 2008-08-22 | 2011-04-12 | Fluke Corporation | Infrared and visible-light image registration |
JPWO2010044250A1 (ja) * | 2008-10-15 | 2012-03-15 | 日本電気株式会社 | パターン照合装置及びパターン照合方法 |
US8587681B2 (en) * | 2008-11-21 | 2013-11-19 | Omnivision Technologies, Inc. | Extended depth of field for image sensor |
JP5087529B2 (ja) * | 2008-12-01 | 2012-12-05 | オリンパス株式会社 | 識別処理装置、識別処理プログラム及び識別処理方法 |
WO2010089830A1 (ja) * | 2009-02-03 | 2010-08-12 | パナソニック株式会社 | 撮像装置 |
US8482652B2 (en) * | 2009-03-27 | 2013-07-09 | Radiant Imaging, Inc. | Imaging devices with components for reflecting optical data and associated methods of use and manufacture |
JP5546166B2 (ja) * | 2009-06-19 | 2014-07-09 | キヤノン株式会社 | 撮像装置、信号処理方法、及びプログラム |
WO2011053678A1 (en) | 2009-10-28 | 2011-05-05 | The Trustees Of Columbia University In The City Of New York | Methods and systems for coded rolling shutter |
US8514491B2 (en) | 2009-11-20 | 2013-08-20 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
JP2011112452A (ja) * | 2009-11-25 | 2011-06-09 | Olympus Corp | カラーセンサ |
JP5482199B2 (ja) * | 2009-12-28 | 2014-04-23 | ソニー株式会社 | 撮像装置 |
CN103004180A (zh) | 2010-05-12 | 2013-03-27 | 派力肯影像公司 | 成像器阵列和阵列照相机的架构 |
US20110285895A1 (en) * | 2010-05-21 | 2011-11-24 | Chung Shan Institute Of Science And Technology | Image Sensing Device and Processing System |
LV14207B (lv) * | 2010-06-29 | 2010-11-20 | Univ Latvijas | Metode un ierīce multispektrālu attēlu iegūšanai ar digitālo RGB sensoru |
JP5675215B2 (ja) * | 2010-08-20 | 2015-02-25 | オリンパス株式会社 | デジタルカメラ |
US8878950B2 (en) | 2010-12-14 | 2014-11-04 | Pelican Imaging Corporation | Systems and methods for synthesizing high resolution images using super-resolution processes |
CN102148999A (zh) * | 2011-01-10 | 2011-08-10 | 南京理工大学 | 宽波段大跨度调谐滤波单通道彩色微光夜视方法及装置 |
EP2781899B1 (en) * | 2011-03-03 | 2021-08-11 | Enchroma, Inc. | Multi-band color vision filters |
JP5713816B2 (ja) * | 2011-03-16 | 2015-05-07 | 株式会社東芝 | 固体撮像装置及びカメラモジュール |
KR101973822B1 (ko) | 2011-05-11 | 2019-04-29 | 포토네이션 케이맨 리미티드 | 어레이 카메라 이미지 데이터를 송신 및 수신하기 위한 시스템들 및 방법들 |
US20130070060A1 (en) | 2011-09-19 | 2013-03-21 | Pelican Imaging Corporation | Systems and methods for determining depth from multiple views of a scene that include aliasing using hypothesized fusion |
US8600227B2 (en) * | 2011-09-22 | 2013-12-03 | Xerox Corporation | Multi-filter array for a multi-resolution, multi-spectral camera |
JP5802516B2 (ja) * | 2011-10-20 | 2015-10-28 | 株式会社トプコン | 画像取得装置 |
CN103947194B (zh) | 2011-09-28 | 2016-06-22 | 株式会社拓普康 | 图像取得装置 |
JP6140709B2 (ja) | 2011-09-28 | 2017-05-31 | ペリカン イメージング コーポレイション | 明視野画像ファイルを符号化および復号するためのシステムおよび方法 |
JP5787695B2 (ja) | 2011-09-28 | 2015-09-30 | 株式会社トプコン | 画像取得装置 |
US9110293B2 (en) | 2011-10-17 | 2015-08-18 | Manufacturing Techniques, Inc. | Prismatic image replication for obtaining color data from a monochrome detector array |
JP5686376B2 (ja) * | 2011-10-25 | 2015-03-18 | 日本電信電話株式会社 | 画像処理装置、方法、及びプログラム |
WO2013079778A2 (en) * | 2011-12-02 | 2013-06-06 | Nokia Corporation | Method, apparatus and computer program product for capturing images |
US8836814B2 (en) * | 2012-01-18 | 2014-09-16 | Nokia Corporation | Method and apparatus for ambient light spectrum detection in digital photography |
US9258468B2 (en) * | 2012-02-15 | 2016-02-09 | Fluxdata, Inc. | Method and apparatus for separate spectral imaging and sensing |
US9412206B2 (en) | 2012-02-21 | 2016-08-09 | Pelican Imaging Corporation | Systems and methods for the manipulation of captured light field image data |
WO2013135311A1 (en) | 2012-03-13 | 2013-09-19 | Latvijas Universitate | Method and device for imaging of spectral reflectance at several wavelength bands |
US9173570B2 (en) * | 2012-04-12 | 2015-11-03 | Thomas Nathan Millikan | Viewing and processing multispectral images |
EP2677732B1 (en) | 2012-06-22 | 2019-08-28 | Nokia Technologies Oy | Method, apparatus and computer program product for capturing video content |
KR20150023907A (ko) | 2012-06-28 | 2015-03-05 | 펠리칸 이매징 코포레이션 | 결함있는 카메라 어레이들, 광학 어레이들 및 센서들을 검출하기 위한 시스템들 및 방법들 |
US20140002674A1 (en) | 2012-06-30 | 2014-01-02 | Pelican Imaging Corporation | Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors |
US9547178B2 (en) | 2012-08-15 | 2017-01-17 | Semrock. Inc. | Dichroic image splitter |
EP4296963A3 (en) | 2012-08-21 | 2024-03-27 | Adeia Imaging LLC | Method for depth detection in images captured using array cameras |
CN104685513B (zh) | 2012-08-23 | 2018-04-27 | 派力肯影像公司 | 根据使用阵列源捕捉的低分辨率图像的基于特征的高分辨率运动估计 |
US20140092281A1 (en) | 2012-09-28 | 2014-04-03 | Pelican Imaging Corporation | Generating Images from Light Fields Utilizing Virtual Viewpoints |
JP6017276B2 (ja) * | 2012-11-21 | 2016-10-26 | オリンパス株式会社 | 撮像装置 |
US9215433B2 (en) | 2014-02-11 | 2015-12-15 | Duelight Llc | Systems and methods for digital photography |
US9462164B2 (en) | 2013-02-21 | 2016-10-04 | Pelican Imaging Corporation | Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information |
US9253380B2 (en) | 2013-02-24 | 2016-02-02 | Pelican Imaging Corporation | Thin form factor computational array cameras and modular array cameras |
WO2014138697A1 (en) | 2013-03-08 | 2014-09-12 | Pelican Imaging Corporation | Systems and methods for high dynamic range imaging using array cameras |
US8866912B2 (en) | 2013-03-10 | 2014-10-21 | Pelican Imaging Corporation | System and methods for calibration of an array camera using a single captured image |
US9519972B2 (en) | 2013-03-13 | 2016-12-13 | Kip Peli P1 Lp | Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies |
WO2014164550A2 (en) | 2013-03-13 | 2014-10-09 | Pelican Imaging Corporation | System and methods for calibration of an array camera |
US9888194B2 (en) | 2013-03-13 | 2018-02-06 | Fotonation Cayman Limited | Array camera architecture implementing quantum film image sensors |
US9100586B2 (en) | 2013-03-14 | 2015-08-04 | Pelican Imaging Corporation | Systems and methods for photometric normalization in array cameras |
WO2014153057A1 (en) * | 2013-03-14 | 2014-09-25 | James Olson | Improved multi-channel camera system |
US9578259B2 (en) | 2013-03-14 | 2017-02-21 | Fotonation Cayman Limited | Systems and methods for reducing motion blur in images or video in ultra low light with array cameras |
US9445003B1 (en) | 2013-03-15 | 2016-09-13 | Pelican Imaging Corporation | Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information |
US9497429B2 (en) | 2013-03-15 | 2016-11-15 | Pelican Imaging Corporation | Extended color processing on pelican array cameras |
US10122993B2 (en) | 2013-03-15 | 2018-11-06 | Fotonation Limited | Autofocus system for a conventional camera that uses depth information from an array camera |
EP2973476A4 (en) | 2013-03-15 | 2017-01-18 | Pelican Imaging Corporation | Systems and methods for stereo imaging with camera arrays |
JP6197315B2 (ja) * | 2013-03-15 | 2017-09-20 | 凸版印刷株式会社 | 画像取得装置及び画像取得方法及び画像取得プログラム |
JP6173065B2 (ja) * | 2013-06-21 | 2017-08-02 | オリンパス株式会社 | 撮像装置、画像処理装置、撮像方法及び画像処理方法 |
WO2014207742A2 (en) | 2013-06-24 | 2014-12-31 | Technology Innovation Momentum Fund (Israel) Limited Partnership | A system and method for color image acquisition |
US9898856B2 (en) | 2013-09-27 | 2018-02-20 | Fotonation Cayman Limited | Systems and methods for depth-assisted perspective distortion correction |
WO2015070105A1 (en) | 2013-11-07 | 2015-05-14 | Pelican Imaging Corporation | Methods of manufacturing array camera modules incorporating independently aligned lens stacks |
WO2015074078A1 (en) | 2013-11-18 | 2015-05-21 | Pelican Imaging Corporation | Estimating depth from projected texture using camera arrays |
JP6390090B2 (ja) * | 2013-11-19 | 2018-09-19 | セイコーエプソン株式会社 | 光学フィルターデバイス、光学モジュール、及び電子機器 |
US9456134B2 (en) | 2013-11-26 | 2016-09-27 | Pelican Imaging Corporation | Array camera configurations incorporating constituent array cameras and constituent cameras |
US10089740B2 (en) | 2014-03-07 | 2018-10-02 | Fotonation Limited | System and methods for depth regularization and semiautomatic interactive matting using RGB-D images |
US10250871B2 (en) | 2014-09-29 | 2019-04-02 | Fotonation Limited | Systems and methods for dynamic calibration of array cameras |
JP6893877B2 (ja) | 2014-10-29 | 2021-06-23 | スペクトラル エムディー, インコーポレイテッドSpectral Md, Inc. | 組織を分類するための反射モードマルチスペクトル時間分解型光学イメージングの方法および装置 |
US9875524B2 (en) * | 2015-01-16 | 2018-01-23 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and computer-readable storage medium |
US9696470B2 (en) | 2015-03-04 | 2017-07-04 | Microsoft Technology Licensing, Llc | Sensing images and light sources via visible light filters |
US9942474B2 (en) | 2015-04-17 | 2018-04-10 | Fotonation Cayman Limited | Systems and methods for performing high speed video capture and depth estimation using array cameras |
EP3286914B1 (en) | 2015-04-19 | 2019-12-25 | FotoNation Limited | Multi-baseline camera array system architectures for depth augmentation in vr/ar applications |
KR20180054572A (ko) | 2015-07-15 | 2018-05-24 | 테크놀로지 이노베이션 모멘텀 펀드 (이스라엘) 리미티드 파트너쉽 | 튜너블 멤스 에탈론 |
EP3497415A4 (en) * | 2016-08-12 | 2020-06-03 | Spectral Insights Private Limited | SPECTRAL IMAGING SYSTEM |
CN110573066A (zh) | 2017-03-02 | 2019-12-13 | 光谱Md公司 | 用于多光谱截肢部位分析的机器学习***和技术 |
KR102362447B1 (ko) | 2017-05-23 | 2022-02-14 | 삼성전자 주식회사 | 듀얼 이미지 센서를 이용한 이미지 처리 방법 및 장치 |
US10482618B2 (en) | 2017-08-21 | 2019-11-19 | Fotonation Limited | Systems and methods for hybrid depth regularization |
CN112789495B (zh) * | 2018-08-01 | 2022-05-27 | 库塞尔专业公司 | 混合光谱成像仪 |
JP7211033B2 (ja) * | 2018-11-27 | 2023-01-24 | 株式会社島津製作所 | 原子吸光分光光度計 |
KR20210101285A (ko) | 2018-12-14 | 2021-08-18 | 스펙트랄 엠디, 인크. | 상처들의 평가, 치유 예측 및 치료를 위한 머신 학습 시스템들 및 방법들 |
US10783632B2 (en) | 2018-12-14 | 2020-09-22 | Spectral Md, Inc. | Machine learning systems and method for assessment, healing prediction, and treatment of wounds |
US10740884B2 (en) | 2018-12-14 | 2020-08-11 | Spectral Md, Inc. | System and method for high precision multi-aperture spectral imaging |
WO2020123722A1 (en) | 2018-12-14 | 2020-06-18 | Spectral Md, Inc. | System and method for high precision multi-aperture spectral imaging |
CN112087559B (zh) * | 2019-06-13 | 2021-11-30 | 华为技术有限公司 | 图像传感器、图像拍摄装置和方法 |
EP3779554B1 (en) * | 2019-08-14 | 2024-01-17 | Leica Instruments (Singapore) Pte. Ltd. | Optical beam splitter assembly, camera head, and microscope assembly |
WO2021055585A1 (en) | 2019-09-17 | 2021-03-25 | Boston Polarimetrics, Inc. | Systems and methods for surface modeling using polarization cues |
CN114514447B (zh) * | 2019-09-27 | 2024-07-16 | 富士胶片株式会社 | 光学元件、光学装置、摄像装置及光学元件的制造方法 |
US11525906B2 (en) | 2019-10-07 | 2022-12-13 | Intrinsic Innovation Llc | Systems and methods for augmentation of sensor systems and imaging systems with polarization |
JPWO2021085014A1 (ja) * | 2019-10-28 | 2021-05-06 | ||
CN110913101A (zh) * | 2019-11-14 | 2020-03-24 | 维沃移动通信有限公司 | 一种拍摄装置及电子设备 |
CN110868526A (zh) * | 2019-11-14 | 2020-03-06 | 维沃移动通信有限公司 | 一种拍摄模组、拍摄方法及电子设备 |
KR20230116068A (ko) | 2019-11-30 | 2023-08-03 | 보스턴 폴라리메트릭스, 인크. | 편광 신호를 이용한 투명 물체 분할을 위한 시스템및 방법 |
EP4109144A4 (en) * | 2019-12-27 | 2023-10-18 | JAI Ltd. | METHOD FOR PROVIDING A PRISM DEVICE AND PRISM DEVICE |
WO2021154386A1 (en) | 2020-01-29 | 2021-08-05 | Boston Polarimetrics, Inc. | Systems and methods for characterizing object pose detection and measurement systems |
US11797863B2 (en) | 2020-01-30 | 2023-10-24 | Intrinsic Innovation Llc | Systems and methods for synthesizing data for training statistical models on different imaging modalities including polarized images |
TW202137749A (zh) * | 2020-02-26 | 2021-10-01 | 日商索尼半導體解決方案公司 | 攝像裝置、攝像方法及電子機器 |
US11953700B2 (en) | 2020-05-27 | 2024-04-09 | Intrinsic Innovation Llc | Multi-aperture polarization optical systems using beam splitters |
JP2022016851A (ja) * | 2020-07-13 | 2022-01-25 | キヤノン株式会社 | 撮像装置、及び撮像システム |
US12020455B2 (en) | 2021-03-10 | 2024-06-25 | Intrinsic Innovation Llc | Systems and methods for high dynamic range image reconstruction |
US20220295038A1 (en) * | 2021-03-10 | 2022-09-15 | Intrinsic Innovation Llc | Multi-modal and multi-spectral stereo camera arrays |
US11290658B1 (en) | 2021-04-15 | 2022-03-29 | Boston Polarimetrics, Inc. | Systems and methods for camera exposure control |
US11954886B2 (en) | 2021-04-15 | 2024-04-09 | Intrinsic Innovation Llc | Systems and methods for six-degree of freedom pose estimation of deformable objects |
US11689813B2 (en) | 2021-07-01 | 2023-06-27 | Intrinsic Innovation Llc | Systems and methods for high dynamic range imaging using crossed polarizers |
Family Cites Families (39)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5821989A (ja) | 1981-07-31 | 1983-02-09 | Canon Inc | カラ−固体撮像装置 |
JP2872759B2 (ja) | 1989-06-08 | 1999-03-24 | 富士写真フイルム株式会社 | 固体撮像システム |
US6150930A (en) * | 1992-08-14 | 2000-11-21 | Texas Instruments Incorporated | Video equipment and method to assist motor vehicle operators |
JPH06202250A (ja) * | 1992-12-29 | 1994-07-22 | Konica Corp | カラー画像情報処理装置 |
JPH07203318A (ja) * | 1993-12-28 | 1995-08-04 | Nippon Telegr & Teleph Corp <Ntt> | 撮像装置 |
US5668597A (en) * | 1994-12-30 | 1997-09-16 | Eastman Kodak Company | Electronic camera with rapid automatic focus of an image upon a progressive scan image sensor |
JP3713321B2 (ja) | 1995-12-19 | 2005-11-09 | オリンパス株式会社 | カラー画像記録再生システム及び画像カラー画像記録再生方法 |
US7179222B2 (en) * | 1996-11-20 | 2007-02-20 | Olympus Corporation | Fluorescent endoscope system enabling simultaneous achievement of normal light observation based on reflected light and fluorescence observation based on light with wavelengths in infrared spectrum |
JP4076248B2 (ja) | 1997-09-09 | 2008-04-16 | オリンパス株式会社 | 色再現装置 |
US5982497A (en) * | 1998-07-09 | 1999-11-09 | Optical Insights, Llc | Multi-spectral two-dimensional imaging spectrometer |
JP2001016598A (ja) * | 1999-04-30 | 2001-01-19 | Olympus Optical Co Ltd | カラー撮像素子及び撮像装置 |
JP3925681B2 (ja) * | 1999-05-19 | 2007-06-06 | 富士フイルム株式会社 | マルチバンド画像出力方法および装置 |
US6215597B1 (en) * | 1999-11-17 | 2001-04-10 | Duncan Technologies, Inc. | Apparatus for forming a plurality of subimages having different characteristics |
US6515275B1 (en) * | 2000-04-24 | 2003-02-04 | Hewlett-Packard Company | Method and apparatus for determining the illumination type in a scene |
JP3607857B2 (ja) * | 2000-07-27 | 2005-01-05 | オリンパス株式会社 | 内視鏡装置 |
US7892169B2 (en) * | 2000-07-21 | 2011-02-22 | Olympus Corporation | Endoscope apparatus |
JP2002185974A (ja) * | 2000-12-12 | 2002-06-28 | Canon Inc | 画像処理装置およびその方法 |
JP2002300589A (ja) | 2001-01-29 | 2002-10-11 | Konica Corp | 撮影装置 |
GB2373943A (en) * | 2001-03-28 | 2002-10-02 | Hewlett Packard Co | Visible and infrared imaging camera |
JP2002296493A (ja) * | 2001-03-30 | 2002-10-09 | Fuji Photo Optical Co Ltd | ピント状態検出装置 |
JP2002296114A (ja) | 2001-03-30 | 2002-10-09 | Fuji Photo Film Co Ltd | 分光反射率画像の取得方法、撮影装置および分光反射率画像取得システム |
JP2002323375A (ja) * | 2001-04-24 | 2002-11-08 | Nippon Hoso Kyokai <Nhk> | 撮像装置 |
US6924841B2 (en) | 2001-05-02 | 2005-08-02 | Agilent Technologies, Inc. | System and method for capturing color images that extends the dynamic range of an image sensor using first and second groups of pixels |
JP2002345733A (ja) * | 2001-05-29 | 2002-12-03 | Fuji Photo Film Co Ltd | 撮像装置 |
JP2002365517A (ja) * | 2001-06-04 | 2002-12-18 | Fuji Photo Optical Co Ltd | 撮影レンズのピント状態検出装置 |
JP3862582B2 (ja) * | 2001-06-29 | 2006-12-27 | 富士フイルムホールディングス株式会社 | 蛍光画像取得方法および装置並びにプログラム |
JP3826174B2 (ja) | 2001-07-06 | 2006-09-27 | 独立行政法人情報通信研究機構 | 撮像装置 |
JP2003087806A (ja) | 2001-09-12 | 2003-03-20 | Fuji Photo Film Co Ltd | マルチバンドカメラ用フィルターとその形成方法並びにこの方法のプログラム及びこれを記録した記録媒体 |
JP2003134527A (ja) * | 2001-10-24 | 2003-05-09 | Telecommunication Advancement Organization Of Japan | カラー映像再現システム |
JP3975395B2 (ja) * | 2002-02-26 | 2007-09-12 | フジノン株式会社 | カメラシステム |
JP3950715B2 (ja) | 2002-03-05 | 2007-08-01 | 富士フイルム株式会社 | 固体撮像素子およびこれを用いた撮像装置 |
JP3673845B2 (ja) * | 2002-11-19 | 2005-07-20 | コニカミノルタホールディングス株式会社 | 撮像装置 |
JP4632645B2 (ja) * | 2002-12-12 | 2011-02-16 | オリンパス株式会社 | イメージング装置およびプロセッサ装置 |
US7633537B2 (en) * | 2002-12-18 | 2009-12-15 | Nikon Corporation | Color image sensor, color filter array and color imaging device |
JP4465958B2 (ja) * | 2002-12-18 | 2010-05-26 | 株式会社ニコン | カラー撮像装置 |
JP2004228662A (ja) * | 2003-01-20 | 2004-08-12 | Minolta Co Ltd | 撮像装置 |
JP2005033609A (ja) | 2003-07-08 | 2005-02-03 | Fuji Film Microdevices Co Ltd | 固体撮像装置及びデジタルカメラ |
US8139141B2 (en) * | 2004-01-28 | 2012-03-20 | Microsoft Corporation | Single chip red, green, blue, distance (RGB-Z) sensor |
JP4717363B2 (ja) * | 2004-03-10 | 2011-07-06 | オリンパス株式会社 | マルチスペクトル画像撮影装置及びアダプタレンズ |
-
2004
- 2004-11-10 EP EP04799576A patent/EP1686810A4/en not_active Withdrawn
- 2004-11-10 CN CNA2004800322669A patent/CN1875638A/zh active Pending
- 2004-11-10 JP JP2005515360A patent/JP4118916B2/ja not_active Expired - Fee Related
- 2004-11-10 WO PCT/JP2004/016678 patent/WO2005046248A1/ja active Application Filing
-
2006
- 2006-05-03 US US11/416,939 patent/US7612822B2/en not_active Expired - Fee Related
-
2009
- 2009-09-09 US US12/556,437 patent/US7868936B2/en not_active Expired - Fee Related
-
2010
- 2010-09-29 JP JP2010219705A patent/JP5124003B2/ja not_active Expired - Fee Related
- 2010-12-02 US US12/959,074 patent/US8134618B2/en not_active Expired - Fee Related
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014208188A1 (ja) * | 2013-06-26 | 2014-12-31 | オリンパス株式会社 | 画像処理装置及び画像処理方法 |
JP2015012319A (ja) * | 2013-06-26 | 2015-01-19 | オリンパス株式会社 | 画像処理装置及び画像処理方法 |
US9838659B2 (en) | 2013-06-26 | 2017-12-05 | Olympus Corporation | Image processing device and image processing method |
Also Published As
Publication number | Publication date |
---|---|
US8134618B2 (en) | 2012-03-13 |
EP1686810A1 (en) | 2006-08-02 |
US20060203100A1 (en) | 2006-09-14 |
US7612822B2 (en) | 2009-11-03 |
JPWO2005046248A1 (ja) | 2007-11-29 |
JP2011015439A (ja) | 2011-01-20 |
JP5124003B2 (ja) | 2013-01-23 |
US20100026876A1 (en) | 2010-02-04 |
EP1686810A4 (en) | 2009-06-03 |
CN1875638A (zh) | 2006-12-06 |
WO2005046248A1 (ja) | 2005-05-19 |
US20110074992A1 (en) | 2011-03-31 |
US7868936B2 (en) | 2011-01-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4118916B2 (ja) | マルチスペクトル画像撮影装置 | |
JP4633129B2 (ja) | マルチスペクトル画像撮影装置 | |
US11930994B2 (en) | Continuous video in a light deficient environment | |
US8259203B2 (en) | Method and apparatus for achieving panchromatic response from a color-mosaic imager | |
JP6939000B2 (ja) | 撮像装置及び撮像方法 | |
US10560671B2 (en) | Medical camera | |
US7948551B2 (en) | Field sequential color camera system | |
KR20070029141A (ko) | 멀티 스펙트럼 화상 촬영 장치 및 어댑터 렌즈 | |
JP5108013B2 (ja) | カラー撮像素子及びこれを用いた撮像装置及びフィルタ | |
EP0428884A1 (en) | Colour filter arrangement for a solid-state imaging apparatus | |
JP2007315808A (ja) | マルチスペクトル撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071105 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20071105 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20071105 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20071214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20071225 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080225 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080415 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080423 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4118916 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110502 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120502 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130502 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140502 Year of fee payment: 6 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |