JP5633891B2 - 色の鮮鋭度を改善する方法、画像の取込または再現を行う装置、デジタル画像取込デバイス、デジタル画像、デジタル画像取込装置用のセンサ - Google Patents
色の鮮鋭度を改善する方法、画像の取込または再現を行う装置、デジタル画像取込デバイス、デジタル画像、デジタル画像取込装置用のセンサ Download PDFInfo
- Publication number
- JP5633891B2 JP5633891B2 JP2013119919A JP2013119919A JP5633891B2 JP 5633891 B2 JP5633891 B2 JP 5633891B2 JP 2013119919 A JP2013119919 A JP 2013119919A JP 2013119919 A JP2013119919 A JP 2013119919A JP 5633891 B2 JP5633891 B2 JP 5633891B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- color
- sharpness
- digital image
- capture device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 134
- 239000003086 colorant Substances 0.000 claims description 98
- 230000003287 optical effect Effects 0.000 claims description 94
- 238000012545 processing Methods 0.000 claims description 79
- 230000000694 effects Effects 0.000 claims description 23
- 230000008569 process Effects 0.000 claims description 20
- 230000006872 improvement Effects 0.000 claims description 15
- 230000004913 activation Effects 0.000 claims description 8
- 238000004364 calculation method Methods 0.000 claims description 6
- 230000006870 function Effects 0.000 description 84
- 238000005259 measurement Methods 0.000 description 71
- 230000000875 corresponding effect Effects 0.000 description 43
- 238000010586 diagram Methods 0.000 description 26
- 230000008859 change Effects 0.000 description 25
- 230000003595 spectral effect Effects 0.000 description 24
- 230000004075 alteration Effects 0.000 description 14
- 230000006835 compression Effects 0.000 description 12
- 238000007906 compression Methods 0.000 description 12
- 238000012937 correction Methods 0.000 description 11
- 238000013461 design Methods 0.000 description 11
- 230000033001 locomotion Effects 0.000 description 11
- 230000007547 defect Effects 0.000 description 10
- 238000001514 detection method Methods 0.000 description 10
- 238000009432 framing Methods 0.000 description 9
- 238000005286 illumination Methods 0.000 description 9
- 230000004044 response Effects 0.000 description 9
- 230000006978 adaptation Effects 0.000 description 8
- 230000008901 benefit Effects 0.000 description 6
- 230000001419 dependent effect Effects 0.000 description 6
- 238000001914 filtration Methods 0.000 description 6
- 239000011159 matrix material Substances 0.000 description 6
- 230000007246 mechanism Effects 0.000 description 6
- 230000035945 sensitivity Effects 0.000 description 6
- 230000003213 activating effect Effects 0.000 description 5
- 230000007704 transition Effects 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 230000007423 decrease Effects 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 238000001429 visible spectrum Methods 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 3
- 238000005282 brightening Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 238000007639 printing Methods 0.000 description 3
- 238000005070 sampling Methods 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000001276 controlling effect Effects 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 230000000881 depressing effect Effects 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 238000011143 downstream manufacturing Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000006641 stabilisation Effects 0.000 description 2
- 238000011105 stabilization Methods 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 239000000126 substance Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241000579895 Chlorostilbon Species 0.000 description 1
- 208000035126 Facies Diseases 0.000 description 1
- 241000593989 Scardinius erythrophthalmus Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000005266 casting Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000005034 decoration Methods 0.000 description 1
- 230000005672 electromagnetic field Effects 0.000 description 1
- 229910052876 emerald Inorganic materials 0.000 description 1
- 239000010976 emerald Substances 0.000 description 1
- 238000005265 energy consumption Methods 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000004907 flux Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 238000000386 microscopy Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 229920006395 saturated elastomer Polymers 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- -1 silver halide Chemical class 0.000 description 1
- GGCZERPQGJTIQP-UHFFFAOYSA-N sodium;9,10-dioxoanthracene-2-sulfonic acid Chemical compound [Na+].C1=CC=C2C(=O)C3=CC(S(=O)(=O)O)=CC=C3C(=O)C2=C1 GGCZERPQGJTIQP-UHFFFAOYSA-N 0.000 description 1
- 238000010561 standard procedure Methods 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/958—Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging
- H04N23/959—Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging by adjusting depth of field during image capture, e.g. maximising or setting range based on scene characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
- H04N25/615—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4" involving a transfer function modelling the optical system, e.g. optical transfer function [OTF], phase transfer function [PhTF] or modulation transfer function [MTF]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
- H04N25/615—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4" involving a transfer function modelling the optical system, e.g. optical transfer function [OTF], phase transfer function [PhTF] or modulation transfer function [MTF]
- H04N25/6153—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4" involving a transfer function modelling the optical system, e.g. optical transfer function [OTF], phase transfer function [PhTF] or modulation transfer function [MTF] for colour signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Color Television Image Signal Generators (AREA)
- Studio Devices (AREA)
- Facsimile Image Signal Circuits (AREA)
- Paper (AREA)
Description
− 光学要素を移動し、画像が鋭くなる距離の変更された範囲を有することを可能にする光学焦点合わせデバイス(フォーカス)を使用することが可能である。そのようなデバイスは、手動であれ電動化されたものであれ、しばしば、情景内の物体の距離に依存する移動を選択することを可能にするサーボ制御系を含む。
− 特定の光学要素を光学系に追加し、したがって、より広い被写界深度を伴う鮮鋭度を計算することによる再構成を可能にする、wavefront codingタイプの解決策を使用することが可能である。
− 光学部品に関して固定された柔軟な液体レンズからなる特定の光学要素を追加する解決策を実施することが可能である。そのような方法は、情景内の物体の距離に依存して前記レンズの形状を選択することを可能にするサーボ制御系を表す。
− 「鮮鋭化」方法または任意の別の計算の方法を介して鮮鋭度を高めることによる輝度または色に対するぼけ除去アルゴリズム。
そのような方法の応用例(すべての写真撮影装置)は、鮮鋭度の限られた向上を有し、したがって、被写界深度のごくわずかな増加を有するという短所を表す。
− まず第1に、レンズの焦点3.2は、この波長λ2によって定義される色に直接に関係し、波長λ1によって定義される別の色に直接に関係する焦点3.1が、センサから上流に位置するようになっている。
その結果、この第2の色(λ1)によってセンサレベルで形成される画像は、第1の色(λ2)によって形成される画像ほど鮮鋭ではなく、したがって、このセンサによって形成される画像全体の鮮鋭度が下がる。
したがって、図1bに、表される物体が遠い距離(図1a)からより近い距離(図1b)に移動した時の、それぞれ波長λ1およびλ2に関連する焦点の新しい位置4.1および4.2を示す。
この後者の場合に、センサは、以前には鮮鋭な画像をもたらさなかった色(λ1)の焦点に位置すると思われる。
− 画像色の中から鮮鋭色と称する少なくとも1つの色を選択するステップと、
− 少なくとも1つの他の改善される色が高められた鮮鋭度を表すようにするために、改善される色に鮮鋭色の鮮鋭度を反映させるステップと
を含む方法に関する。
− 画像の知覚される鮮鋭度を高め、
− 取込装置の被写界深度を増やし、
− マクロ機能を作成し、
− 露出にかかわらず被写界深度を制御し、
− 画像を使用して、結像される情景の物体の距離を測定し、
− 露出および/または焦点合わせおよび/またはフラッシュのサーボ制御デバイスを改善し、
− 取込装置のコストを下げ、
− 等しい性能に関して、取込装置の寸法を縮小し、
− 例えばカメラ付き電話機の、固定焦点を有する同一のレンズを使用してなど、バーコードおよび/または名刺および/または書かれたテキストを読み取り、かつ/もしくは肖像画および/または風景画を撮影し、
− 特に開口および被写界深度に関する、装置の高められた仕様を与えるレンズを設計し、かつ/または選択し、
− 少なくとも2つの色の間の相対鮮鋭度および/または結像される情景の物体の距離に依存する画像効果を作成し、
− 少なくとも2つの色の間の相対鮮鋭度および/または結像される情景の物体の距離の画像焦点をユーザがデジタルに変更することを可能にし、
− 焦点合わせ用の光学系を除去するか単純にすることによって、取込の要求と実際の画像取込との間の時間を減らす。
取込装置の実施コストを最小にし、かつ/または取込装置の性能を最適化するために、デジタル手段を介して画像を処理する能力を使用して、ユーザが光学系および/またはセンサおよび/またはサーボ制御系のパラメータを決定しまたは選択する方法と
を含む取込装置の実施形態に関する。
− 被写界深度および/または開口および/またはすべての他の光学仕様が改善され、かつ/あるいは光学部品のコストが減らされるようにするために、
− 機械的焦点合わせをより少数の位置を使用することによって達成できるようにするために
少なくとも2つの事前に決定された距離を有する物体の画像が別個の鮮鋭色を表すようにする仕様を表す。
− 画像取込装置および/または画像再現装置の実施コストを最小にし、かつ/または画像取込装置および/または画像再現装置の性能を最適化するためにデジタル画像処理手段(28、28')によってその改善を考慮して処理され、
− その方法は、ユーザが、特に前の請求項のいずれか一項に記載の方法に従って別の色の鮮鋭度に依存する色の鮮鋭度の改善のために、デジタル手段を介して画像を処理する能力を使用して光学系および/またはセンサおよび/またはイメージジェネレータおよび/またはサーボ制御系のパラメータを決定するか選択するようになっている実施形態に関する。
下に、使用される様々な用語の意味を注記する。
− 画像取込装置は、例えば、使い捨てカメラ、デジタルカメラ、リフレックスカメラ(デジタルまたは非デジタル)、スキャナ、ファクシミリ機、内視鏡、映画用カメラ、ビデオカメラ、監視カメラ、ゲーム、電話機に、パーソナルアシスタントに、もしくはコンピュータに一体化されるかリンクされた映画用カメラまたは写真装置、熱カメラ、超音波装置、MRI(磁気共鳴画像)装置、およびX線撮影装置である。
− 変更された画像を作る画像取込装置、例えば一体化された画像処理手段を伴うデジタル写真装置。
− 変更された画像を表示しまたは印刷する画像再現装置、例えば画像処理手段を含むビデオプロジェクタまたはプリンタ。
− その要素の欠陥を補正するマルチファンクション装置、例えば、画像処理手段を含むスキャナ/プリンタ/ファクシミリ機。
− 変更された画像を作るプロフェッショナル画像取込装置、例えば、画像処理手段を含む内視鏡。
− デジタル画像処理手段は、光学系の幾何学的歪みと、光学系の色収差と、視差、被写界深度、光学系および/またはイメージセンサおよび/またはイメージジェネレータの口径食、光学系および/またはイメージセンサおよび/またはイメージジェネレータの鮮鋭度の欠如、雑音、モアレ現象、および/またはコントラストの補償とを含む群の少なくとも1つのパラメータを活動化することによって画像品質を改善する手段を含み、
− かつ/または、光学系の所与のまたは選択されたパラメータは、その系の光学要素の個数、光学系の光学要素を含む材料のタイプ、光学系の材料のコスト、光学表面の処理、組立公差、焦点距離による視差の値、開口仕様、開口機構、可能な焦点距離の範囲、焦点合わせ仕様、焦点合わせ機構、アンチエイリアシングフィルタ、全体的な寸法、被写界深度、焦点距離と焦点合わせとをリンクする仕様、幾何学的歪み、色収差、オフカンタリング(off−cantering)、口径食、鮮鋭度仕様を含む群の中から選択され、
− かつ/または、画像取込装置および/または画像生成装置の所与のまたは選択されたパラメータは、画素の品質、画素の表面積、画素数、マイクロレンズ行列、アンチエイリアシングフィルタ、画素の幾何形状、画素の配置を含む群の中から選択され、
− かつ/または、サーボ制御系の所与のまたは選択されたパラメータは、焦点合わせ測定値、露出測定値、白バランス測定値、焦点合わせ命令、開口命令、露出命令、センサ利得命令、フラッシュライト命令を含む群の中から選択される。
自動焦点合わせを可能にするサーボ制御系について、焦点合わせを、様々な形で、具体的には光学系の可動要素の位置を制御することによって、または柔軟な光学要素の幾何形状を制御することによって、実行できることを想起されたい。
− 取込装置の性能は、特に、そのコスト、その全体的寸法、発する又は受け取ることができる最小の光の量、画像品質すなわちその鮮鋭度、光学部品、センサ、およびサーボ制御の技術的仕様、ならびにその被写界深度である。
本発明は、少なくとも2つの色を有し、画像取込デバイスから発する少なくとも1つのデジタル画像に対して実行された測定を使用することによって機能を活動化する方法であって、
− 相対鮮鋭度が、画像の少なくとも1つの領域R内の少なくとも2つの色の間で測定され、
− 機能が、測定された相対鮮鋭度に依存して活動化される方法に関する。
− 最も鮮鋭な色を判定することができ、かつ/または、
− 「鮮鋭色」と称する少なくとも1つの色を、複数の色の中から選択することができ、かつ/または、
− 複数の色の間で鮮鋭度を比較することができ、かつ/または、
− 鮮鋭度の差を計算することができ、かつ/または、
− 相対鮮鋭度を直接に計算することができる。
− 情景の少なくとも1つの物体または対象の少なくとも一部の距離および/または方向および/または位置および/または寸法および/または方位および/または幾何学的形態の測定、ならびに/あるいは、
− 3次元の結像される情景の幾何形状に直接にまたは間接にリンクされたデータ、ならびに/あるいは、
− 物体検出、特に顔および/または1つもしくは複数の主題の検出、ならびに/あるいは、
− 物体の認識および/または認証、例えば顔の認識および/または認証、ならびに/あるいは、
− 装置の位置および/または移動の測定、ならびに/あるいは、
− 装置またはロボットなどの別のデバイスのサーボ制御、ならびに/あるいは、
− 主題の自動フレーミング、ならびに/あるいは、
− 装置の1つの調整変更、ならびに/あるいは、
− 信号の作成または活動化、ならびに/あるいは、
− デジタル画像または別のデジタル画像内の物体の追加、除去、または変更、ならびに/あるいは、
− 相対鮮鋭度測定値を直接にまたは間接に使用する任意の他の活動。
一実施形態によれば、活動は、次を実施する。
− デジタル画像、および/または、
− 別のデジタル画像、および/または、
− 装置のユーザによる選択、および/または、
− 写真撮影中の取込装置の少なくとも1つの仕様、および/または、
− 他のデータ。
− 少なくとも2つの色の間の相対鮮鋭度および/または結像される情景の物体の距離に依存する画像効果を作成すること、および/または、
− 画像の少なくとも1つの領域内の少なくとも1つの色の鮮鋭度を下げること、および/または、
− 画像の少なくとも1つの領域内の少なくとも1つの色の鮮鋭度を上げること、および/または、
− 圧縮を活動化すること、および/または、
− 本明細書に記載の任意の他の処理を使用すること。
機能を活動化するのに測定された相対鮮鋭度を使用することは、特に、結像される物体の少なくとも1つの部分と測定装置との間の距離に、ならびに/あるいは物体の少なくとも1つの部分の幾何形状に、ならびに/あるいは物体の少なくとも1つの部分の位置および/または寸法に、ならびに/あるいは物体の少なくとも1つの部分の方向にその機能を適合させることを可能にする。
− 取込装置とデジタル画像によって結像される少なくとも1つの物体との間の距離の判定、および/または2つの結像される物体の間の相対距離の判定、
− 前記距離および/または前記相対距離に依存する活動、
− デジタル画像および/または別のデジタル画像の少なくとも1つのゾーンZ'に対する処理、
− 取込装置のサーボ制御および/または別の装置のサーボ制御、
− ユーザへの表示および/またはアラームおよび/またはアラート信号の提供、
− 画像の一部の検出、
− 色鮮鋭度の変更、
− 取込装置の位置および/または移動の判定、
− 画像内の対象の位置の判定、
− 少なくとも1つの画像仕様の変更、
− 画像の全体または一部の変更、
− 特にサーボ制御信号を提供するための、画像の内部の関心ゾーン(zone of interest)の判定、
− 画像の全体または一部の解像度の変更、
− 画像に関係するデータの提供、
− 音声取込デバイスへのデータの提供、
− 圧縮のパラメータ設定、
− 画像の全体または一部の変更、
− 取込装置の少なくとも1つの調整。
別のデジタル画像のゾーンおよび/または別のデジタル画像全体に適用される処理の例として、上のビデオシーケンスの例が想起され、他方のデジタル画像は、例えば、あるビデオ画像に続く画像である。他方の画像は、例えば、写真装置の最高解像度で撮影されたデジタル画像でもあるが、測定が行われる画像は、低い解像度の画像である。
例えばビデオ会議の場合に、クローズアップの物体のコントラストは、高められ、背景物体のコントラストは、下げられる。逆に、ぼけ効果を減らすために、クローズアップの物体のコントラストを下げ、背景物体のコントラストを高めることができる。
この処理を、例えばビデオ会議について、クローズアップの物体を明るくし、背景を暗くするのに用いることができる。逆に、フラッシュライトを使用して撮影された画像について、明るさ処理は、フラッシュライト効果を補償するために、背景を明るくし、クローズアップの物体を暗くすることからなるものとしなければならない。
ビデオ会議について、背景物体の詳細を、主題の最高の品質を維持しながらそのような背景物体のより大きい圧縮を可能にするために減らすことができる。
領域の色に関する彩度は、時々「パープルフリンジング(purple fringing)」と称する過度な軸上色収差を除去するために下げられる、すなわち、相対鮮鋭度が閾値を超える場合である。
例えばビデオ会議について、クローズアップの主題の最高の品質を維持するために遠い物体を大幅に圧縮することを可能にするために、近い物体/遠い物体の区分が、コーデックMPEG−4に提供される。
上のビデオ会議の事例で述べたように、圧縮率を、主題よりも背景について高くすることができる。
この処理は、風景または装飾によって背景を置換することからなる。
一実施形態で、この処理は、各画素の所定の近傍内の画素に結び付けられた値を混合するフィルタによるゾーンZ'の各画素の鮮鋭度変更を含み、このフィルタのパラメータは、測定された相対鮮鋭度に依存する。
例えば、Z'ゾーンは、例えば前景と背景とを別々に処理することを可能にする、画像のうちで所与の範囲の距離の中に置かれた物体を含む部分に対応する所与の範囲に相対鮮鋭度が含まれる画像部分に対応する。
主題または関心ゾーンは、距離測定によって、鮮鋭度から検出することができ、したがって、主題または関心ゾーンは最も近いゾーンである。
焦点合わせサーボ制御に似て、露出調整は、主題に対して達成され、この主題は自動的に検出され、したがって、露出は、画像フレーム内の主題の位置がどこであっても正しいものにすることができる。言い換えると、焦点合わせに似て、ユーザは、もはや、対象をねらい、フレーミングを移動する前に半分押し下げる必要はない。
本発明は主題を判定することを可能にするので、明るくする機能を、主題に従って活動化することができるが、技術的現状に関して、フラッシュライトの強さは、主題すなわち特に最も近い対象の判定なしに焦点合わせに従って調整される。上で示したように、最も少ない光の中の対象を、明るくすることを介してデジタルに処理することができる。
可動ロボットが移動しなければならない時に、その可動ロボットに最も近い領域が、判定され、まったく妨害のない軌跡が、可動ロボットに最も近いものとして物体から判定される。
ぼけ表示信号は、対象を考慮に入れることもできる。例えば、バーコードの検出は、自然画像よりもぼけを許容する。
物体を監視するビデオ監視系では、写真撮影装置は、2つの領域をカバーするように調整される。これらの領域の第1領域は、対象が見つかる領域であり、第2領域は、写真撮影装置の全範囲である。したがって、写真撮影範囲内の物体が、監視される物体により近くなる場合に、アラームが活動化される。
実際に、活動化される機能は、測定された相対鮮鋭度に依存し、少なくとも2つの色の間のそのような相対鮮鋭度は、写真撮影装置の調整すなわち、焦点距離、開口、および焦点合わせ距離に依存する。
情景は、1つまたは複数の自然のまたは人工的な源によって、ならびにおそらくは本装置によって制御される1つ(または複数の)フラッシュライト(またはライト)によって照らされる。
一実施形態で、取込装置は、固定レンズすなわち、焦点合わせ用の機械的要素を欠くレンズを備える。
この条件の下で、焦点合わせは、デジタルに処理することができる。
例えば、各センサは、所与の色専用である。例えば、これらのセンサ上の共通結像レンズを有する3CCDタイプのセンサを使用することが可能である。
未満である少なくとも1つの色が存在するなど、大きい軸上色収差を表し、ここで、kは、0.7未満、好ましくは0.5未満の係数であり、fは、焦点距離であり、Oは、開口であり、Pは、無限遠に置かれた物体点のぼけスポットの最小の(画像のすべての色の中で)直径を有する。
M(P,C1)−M(P,C2)、
M(P,C1)/M(P,C2)、
または、この2つの測定値の間の比較に適合された任意の他の関数F(M(P,C1),M(P,C2)。
CA=CN+F(CO−CN)
というタイプの式に従うフィルタFを使用することによって、第2色に反映される。
したがって、2つの色の相対鮮鋭度に依存する異なる鮮鋭色に従って画像の領域を改善できることが重要であると思われる。
これから、領域11.2内の色を、鮮鋭色として色8.3を検討することによって改善し、領域11.1内の色を、鮮鋭色として色8.2を検討することによって改善する。
ゾーン 11.1 11.2
鮮鋭度 8.2>8.3 8.3>8.2
この場合に、色8.2が、領域11.1内の鮮鋭色として選択され、色8.3が、ゾーン11.2内の鮮鋭色として選択される。
これから、図5、6、および7を参照することによって、本発明による、既知の画像取込装置用の特定の機械的デバイスを必要としないマクロ機能の実施形態により特に適合された実施形態および系を説明する。マクロ機能は、装置上のマクロ距離の範囲9.1と称する事前に決定される距離の範囲内で取込装置の近くの物体の画像実施形態を可能にすることを予定されている。通常、取込装置は、マクロ機能を実施するためにレンズのすべてまたは一部を移動することを可能にする。本発明の方法または物体系は、そのような移動なしで済ませることを可能にする。
これから、図4、5、6、および7を参照することによって、既知の画像取込装置用の特定の機械的デバイスを必要としない被写界深度の拡張により特に適合された本発明による実施形態および系を説明する。被写界深度は、鮮鋭なデジタル画像を得ることを可能にする、情景の物体と画像取込装置との間の距離の範囲に対応する。通常、取込装置は、限られた被写界深度を有し、被写界深度が浅いほど、レンズ開口が大きくなる。
もう1つの例では、装置の開口と画像の被写界深度との両方を最適化することも可能である。
これから、図8を参照することによって、距離測定ハードウェア測定デバイスを必要とせずに、単一の画像を使用して情景の物体の距離を測定するようにより特に適合された、本発明による実施形態および系を説明する。したがって、この方法は、デジタル画像の各領域に存在する物体の距離の推定値を得ることを可能にする。
− 例えば、遠隔データは、ロボットを案内することを可能にする
− 可変焦点合わせまたは可変焦点距離を有する取込装置の焦点合わせを加速すること。
実際に、単一の画像を使用して、例えば中央の対象へのまたはユーザによって選択される焦点合わせゾーン内での所望の焦点合わせを得るために適用されなければならないサーボ制御命令を判定することが可能である。
− 特に焦点合わせゾーン内の主題または対象の、フラッシュライトの強さを調整するための情景の様々な物体の距離を考慮に入れること
− 例えば、肖像についてユーザによって選択された焦点合わせゾーン内の主題または対象の質を高めるために、取込装置の自動露出機能のために情景の様々な物体の距離を考慮に入れること
− 主題を定義するようにユーザに求める必要なしに主題を自動的に定義すること。
これから、図4、5、6、および7を参照することによって、既知の画像取込装置用の特定の機械的デバイスを必要としない被写界深度の制御により特に適合された、本発明による実施形態および系を説明する。したがって、この方法は、ある範囲の鮮鋭度および他の物体に関してぼけた画像に対応する、取込装置から離れて置かれた物体の鮮鋭な画像を得ることを可能にする。通常、取込装置は、限られた被写界深度を有し、被写界深度が浅いほど、レンズ開口が大きくなる。したがって、被写界深度および露出は、弱い照明の時に被写界深度と雑音と移動ぼけとの間で選択を行わなければならない形で関連付けられる。この実施形態によれば、露出および被写界深度を別々に制御することが可能である。
− 前に説明したように、各領域の少なくとも2つの色の鮮鋭度、または、
− 別のより正確な距離測定の方法またはデバイス
のいずれかを使用しなければならない。
その結果、例えばガウシアンフィルタを使用して、またはピンぼけをシミュレートするフィルタを使用して、所望の鮮鋭度の範囲を超える距離に置かれた物体を含む領域内および/またはフィールドの部分内で鮮鋭度を下げることが可能である。例えば、肖像について、ぼけた背景を得ることができ、したがって、大開口レンズを必要とせずに顔の質を高めることができる。例えば、風景について、おそらくは画像の理解を妨げる可能性がある分離された隅の物体を除いて、膨大な被写界深度を得ることができる。例えば、悪いフレーミングの結果として隅にクローズアップ物体を含む情景について、そのようなクローズアップ物体をぼかすことができる。例えば、被写界深度の選択は、装置内または後処理中のコンピュータ上のいずれかで、ユーザの裁量に委ねることができる。
通常は前に説明した諸態様とは別々に使用できる、その態様のうちの1つによれば、手段128および128'の能力を使用する本発明は、光学系122および122'ならびに/またはイメージセンサもしくはイメージジェネレータ124および124'ならびに/またはサーボ制御系126のパラメータを判定しまたは選択するデジタル画像処理からなる。
− 欧州特許出願第02751241.7号、名称「Method and system for producing formatted data related to defects of appliances in a series of appliances and formatted data destined for image−processing means」。
− 欧州特許出願第02743349.9号、名称「Method and system for modifying the qualities of at least one image originating from or destined to a series of appliances」。
− 欧州特許出願第02747504.5号、名称「Method and system for reducing the frequency of updates for image−processing means」。
− 欧州特許出願第02748934.3号、名称「Method and system for correcting chromatic aberrations of a colour image produced by an optical system」。
− 欧州特許出願第02743348.1号、名称「Method and system for producing formatted data related to geometric distortions」。
− 欧州特許出願第02748933.5号、名称「Method and system for providing,according to a standard format,formatted data to image−processing means」。
− 欧州特許出願第02747503.7号、名称「Method and system for calculating an image transformed using a digital image and formatted data relating to a geometric transformation」。
− 欧州特許出願第02747506.0号、名称「Method and system for producing formatted data related to defects of at least one apparatus in a series,notably to blur」。
− 欧州特許出願第02745485.9号、名称「Method and system for modifying a digital image taking into account its noise」。
− PCT特許出願第PCT/FR2004/050455号、名称「Method and system for differentially and regularly modifying a digital image by pixel」。
焦点合わせサーボ制御系を単純にするために、画像平面は、位置154(あるゾーン上で画像の縁の近くでの焦点合わせに対応する)と150(あるゾーン上で画像の中央での焦点合わせに対応する)との間の中間の位置158に置かれる。デジタル画像処理手段128を焦点合わせサーボ制御126と合体することによって、焦点合わせに関する平面158の移動を制限できるようになり、したがって、サーボ制御系のエネルギ消費が減り、その構成要素の体積を減らすことが可能になる。
標準的な装置は、2.8の開口を有し、本発明による方法を使用して得られる装置は、1.4の開口を有する。
図16dの図も、本発明による方法を使用して得られる装置の光学部品のぼけを表す。図16dの図では、画像のフィールドは、やはり横座標で表され、ぼけは、BXU単位で縦座標で表される。図16dのそのような図は、画像の中央でのぼけが約2.2であることを示す。したがって、このぼけは、図16cの図のぼけより大きい。しかし、縁では、ぼけは、補正アルゴリズム限度を考慮に入れて、3の領域内で選択されている。
図17bの図解によって表される光学部品は、画像スポット1100よりかなり大きい寸法を有する画像スポット1114を示し、そのMTFは、図17aの事例と同一のfcシャットオフ周波数を示す。しかし、空間周波数に依存するこのMTFの変動は、異なり、そのような周波数は、その原点からシャットオフ周波数に向かって相対的に均一な形で減る。
これから、センサおよび/または光学系が被写界深度の増加により明確に適合された、本方法の実施形態変形を説明する。
この方法の実施形態変形では、センサおよび/または光学系は、結像される物体の正確な距離表示をもたらすことを可能にする応用例により明確に適合される。
この実施形態変形では、バイエル画素モザイクを使用する。
図20.2に示されたもう1つの実施形態では、標準バイエルレイアウトから離れ、3つの画素R、G、BとUVスペクトル帯または赤外スペクトル帯に対応する1つの画素Uを設ける。赤外および/または紫外は、スペクトルのうちで可視スペクトルの上または下のすべての部分、特に700nmから800nmまでまたは700nmから900nmまでなどの近赤外あるいは400nm付近の近紫外を意味する。そのような画素Uは、図20.1の図に示されているように、可視色の鮮鋭度を改善するのに使用される。
本発明によれば、物体の距離に依存する2つの色の間の相対鮮鋭度の変動の存在が利用される。したがって、距離に依存する3つの非常に異なる色平面の間の相対鮮鋭度を表す光学部品を設計することができる。そのような光学部品は、高い軸上色収差を表すと言われる。
未満である少なくとも1つの色が存在する場合などの軸上色収差を有するレンズを使用することも可能であり、ここで、kは、0.7未満、好ましくは0.5未満の係数であり、fは、焦点距離であり、Oは、開口であり、Pは、無限遠に置かれた物体点のぼけスポットの最小の(画像のすべての色の中で)直径を有する。
これから、取込装置の被写界深度を超える撮影に関連付けられる可能なぼけに画像の解像度を自動的に適合させることを可能にする本発明の実施形態を説明する。
距離測定(図8)に関して、2つの色平面の間の相対鮮鋭度測定値を使用して、デジタル画像の各色から期待される鮮鋭度を抽出することが可能である。
本発明の実施形態によれば、この処理は、各画素の所定の近傍内の画素値を混合するフィルタによる、ゾーンZ'の各画素の鮮鋭度変更を含み、フィルタパラメータは、測定された相対鮮鋭度に依存する。
RA=RN+c_RG*M_RG(GN)+c_RR*M_RR(RN)+c_RB*M_RB(BN)
BA=BN+c_BG*M_BG(GN)+c_BR*M_BR(RN)+c_BB*M_BB(BN)
ただし、M_{R,G,B}{R,G,B}はフィルタを表し、このフィルタには、例えば高域周波数フィルタなど、零和を有する線形フィルタなどを選択することができる。c_{R,G,B}{R,G,B}は、各フィルタM_{R,G,B}{R,G,B}の影響のバランスをとる係数を表す。
そのような適合の実施形態の例は、所与の取込装置に由来するRGB画像の文脈で、次の通りである。
図19.1、19.2、および19.3の説明
図19.1、19.2、および19.3に、複数の実施形態態様による、本発明による方法のステップを示す。
変形では、この機能は、可視画像に対する処理を実施する。
本発明は、色の鮮鋭度に対する影響を有する、デジタル画像を取り込む時の可変パラメータを含む装置、特にズームならびに/あるいは可変焦点合わせおよび/または可変開口を有するレンズを有する取込装置に適用される。したがって、デジタル画像に従う可変パラメータの値に対応する鮮鋭度曲線8.2および8.3を使用しなければならない。
Claims (15)
- デジタル画像、特に画像取込デバイスに由来するデジタル画像の少なくとも1つの色の鮮鋭度を改善する方法であって、
少なくとも1つの他の改善される色が高められた鮮鋭度を表すようにするために、前記色の中から「鮮鋭色」と称する少なくとも1つの色を選択するステップと、前記改善される色に前記鮮鋭色の鮮鋭度を反映させるステップとを含む方法。 - 前記デジタル画像を領域(11.1、11.2)に分解するステップをさらに含み、前記鮮鋭色は領域ごとに選択される、請求項1に記載の方法。
- 前記デジタル画像は、取込装置に由来し、前記方法は、さらに、前記取込装置と取り込まれる情景の少なくとも1つの物体との間の距離を、前記物体の画像領域内の少なくとも2つの色の鮮鋭度を使用することによって判定するステップを含む、請求項2に記載の方法。
- 少なくとも1つの画像領域内の少なくとも1つの色の鮮鋭度を下げるステップをさらに含む、請求項3に記載の方法。
- 焦点合わせがより少ないステップで達成され加速されるようにするために、少なくとも2つの色の鮮鋭度を使用することによって前記取込装置のサーボ制御命令を判定するステップをさらに含む、請求項3または4に記載の方法。
- 前記鮮鋭色選択は、事前に決定された規則に従って最も鮮鋭な色を選択することである、請求項1から5のいずれか一項に記載の方法。
- 前記「鮮鋭色」選択は、事前に決定される、請求項1から5のいずれか一項に記載の方法。
- 前記デジタル画像は、取込装置に由来し、前記鮮鋭色選択は、前記取込装置と前記デジタル画像を得るために取り込まれる情景の少なくとも1つの物体との間の距離に依存する、請求項1から7のいずれか一項に記載の方法。
- 前記デジタル画像は、マクロモードを含み、前記鮮鋭色選択は、前記マクロモードの活動化に依存する、請求項1から8のいずれか一項に記載の方法。
- 前記デジタル画像は、レンズを含む取込装置に由来し、前記方法は、さらに、一連の事前に決定されたレンズの中からレンズを選択するステップを含み、前記レンズは、少なくとも2つの事前に決定された距離を有する物体の画像が別個の鮮鋭色を表し、したがって被写界深度を改善し、かつ/または前記レンズのコストを下げるようになる仕様を表す、請求項1から9のいずれか一項に記載の方法。
- 少なくとも1つの他の改善される色に対する前記鮮鋭色の鮮鋭度の影響は、タイプCA=CN+F(CO−CN)の計算を使用することによって実施され、ここで、CAは、改善された色を表し、COは、処理の前の前記改善された色を表し、CNは、前記鮮鋭色を表し、Fは、フィルタすなわち低域フィルタを表す、請求項1から10のいずれか一項に記載の方法。
- 前記デジタル画像は、レンズを含む取込装置に由来し、前記方法は、さらに、本発明による方法を考慮に入れることによってレンズを設計するステップを含み、前記レンズは、被写界深度および/または開口および/またはすべての他の光学仕様が改善され、かつ/あるいは光学部品のコストが減らされるようにするために、機械的焦点合わせをより少数の位置を使用することによって達成できるようにするために少なくとも2つの事前に決定された距離を有する物体の画像が別個の鮮鋭色を表すようにする仕様を表す、請求項1から11のいずれか一項に記載の方法。
- 画像を取り込み、かつ/または再現する光学系(22、22’)、イメージセンサ(24)および/またはイメージジェネレータ(24’)ならびに/あるいはサーボ制御系(26)を含む画像の取込または再現を行う装置(20)であって、
前記画像は、前記画像の取込または再現を行う装置の実施コストを最小にし、かつ/または画像の取込または再現を行う装置の性能を最適化するためにデジタル画像処理手段(28、28’)によってその改善を考慮して処理され、画像の取込または再現方法は、ユーザが、請求項1から12のいずれか一項に記載の方法に従って別の色の鮮鋭度に依存してある色の鮮鋭度を改善するために、デジタル手段を介して画像を処理する能力を使用して前記光学系および/または前記イメージセンサおよび/または前記イメージジェネレータおよび/または前記サーボ制御系のパラメータを決定するか選択するようになっている画像の取込または再現を行う装置。 - 請求項1から12のいずれか一項に記載の色改善方法を使用する、少なくとも2つの色を処理する手段を含んだ請求項13に記載の実施形態を介して得られる、画像の取込または再現を行う装置。
- 請求項1から12のいずれか一項に記載の方法を実施する画像品質を向上する手段を含んだデジタル画像取込デバイス。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR0550601A FR2880958B1 (fr) | 2005-01-19 | 2005-03-07 | Procede d'amelioration de la nettete d'au moins une couleur d'une image numerique |
FR0550601 | 2005-03-07 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008500243A Division JP5535476B2 (ja) | 2005-03-07 | 2006-03-06 | カラーデジタル画像を使用する、機能すなわち鮮鋭度の変更を活動化する方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014153695A Division JP6076300B2 (ja) | 2005-03-07 | 2014-07-29 | デジタル画像取込装置用のセンサおよびデジタル画像取込装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013214986A JP2013214986A (ja) | 2013-10-17 |
JP5633891B2 true JP5633891B2 (ja) | 2014-12-03 |
Family
ID=36632499
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008500243A Expired - Fee Related JP5535476B2 (ja) | 2005-03-07 | 2006-03-06 | カラーデジタル画像を使用する、機能すなわち鮮鋭度の変更を活動化する方法 |
JP2013119919A Expired - Fee Related JP5633891B2 (ja) | 2005-03-07 | 2013-06-06 | 色の鮮鋭度を改善する方法、画像の取込または再現を行う装置、デジタル画像取込デバイス、デジタル画像、デジタル画像取込装置用のセンサ |
JP2014153695A Expired - Fee Related JP6076300B2 (ja) | 2005-03-07 | 2014-07-29 | デジタル画像取込装置用のセンサおよびデジタル画像取込装置 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008500243A Expired - Fee Related JP5535476B2 (ja) | 2005-03-07 | 2006-03-06 | カラーデジタル画像を使用する、機能すなわち鮮鋭度の変更を活動化する方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014153695A Expired - Fee Related JP6076300B2 (ja) | 2005-03-07 | 2014-07-29 | デジタル画像取込装置用のセンサおよびデジタル画像取込装置 |
Country Status (7)
Country | Link |
---|---|
US (3) | US7920172B2 (ja) |
EP (1) | EP1856907A2 (ja) |
JP (3) | JP5535476B2 (ja) |
KR (1) | KR101265358B1 (ja) |
CN (2) | CN102984448B (ja) |
CA (4) | CA2835047C (ja) |
WO (1) | WO2006095110A2 (ja) |
Families Citing this family (126)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4969122B2 (ja) * | 2006-03-24 | 2012-07-04 | パナソニック株式会社 | 撮像装置 |
KR100776805B1 (ko) * | 2006-09-29 | 2007-11-19 | 한국전자통신연구원 | 스테레오 비전 처리를 통해 지능형 서비스 로봇 시스템에서효율적인 영상 정보의 전송을 위한 장치 및 그 방법 |
KR100834577B1 (ko) * | 2006-12-07 | 2008-06-02 | 한국전자통신연구원 | 스테레오 비전 처리를 통해 목표물 검색 및 추종 방법, 및이를 적용한 가정용 지능형 서비스 로봇 장치 |
US20090102924A1 (en) * | 2007-05-21 | 2009-04-23 | Masten Jr James W | Rapidly Deployable, Remotely Observable Video Monitoring System |
KR100976284B1 (ko) * | 2007-06-07 | 2010-08-16 | 가부시끼가이샤 도시바 | 촬상 장치 |
DE102007031230B3 (de) * | 2007-07-04 | 2008-10-30 | Bundesdruckerei Gmbh | Dokumentenerfassungssystem und Dokumentenerfassungsverfahren |
JP5032911B2 (ja) * | 2007-07-31 | 2012-09-26 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP5298507B2 (ja) | 2007-11-12 | 2013-09-25 | セイコーエプソン株式会社 | 画像表示装置及び画像表示方法 |
US8379115B2 (en) | 2007-11-20 | 2013-02-19 | Motorola Mobility Llc | Image capture device with electronic focus |
US8643748B2 (en) | 2007-11-20 | 2014-02-04 | Motorola Mobility Llc | Compact stationary lens optical zoom image capture system |
KR101412752B1 (ko) * | 2007-11-26 | 2014-07-01 | 삼성전기주식회사 | 디지털 자동 초점 영상 생성 장치 및 방법 |
JP5171361B2 (ja) * | 2008-04-07 | 2013-03-27 | 株式会社日立製作所 | 撮像装置 |
JP5132401B2 (ja) * | 2008-04-16 | 2013-01-30 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
US8160355B1 (en) * | 2008-05-18 | 2012-04-17 | Pixim Israel Ltd. | Method, device and computer program product for performing white balancing of a digital image |
JP4427097B2 (ja) * | 2008-06-18 | 2010-03-03 | パナソニック株式会社 | 画像処理装置、撮像装置、方法、およびプログラム |
GB2463480A (en) * | 2008-09-12 | 2010-03-17 | Sharp Kk | Camera Having Large Depth of Field |
JP5075795B2 (ja) | 2008-11-14 | 2012-11-21 | 株式会社東芝 | 固体撮像装置 |
JP5158713B2 (ja) * | 2008-11-26 | 2013-03-06 | 京セラ株式会社 | 撮像装置および車載カメラシステム |
JP5300133B2 (ja) * | 2008-12-18 | 2013-09-25 | 株式会社ザクティ | 画像表示装置及び撮像装置 |
JP5213688B2 (ja) * | 2008-12-19 | 2013-06-19 | 三洋電機株式会社 | 撮像装置 |
US8908995B2 (en) | 2009-01-12 | 2014-12-09 | Intermec Ip Corp. | Semi-automatic dimensioning with imager on a portable device |
US8379321B2 (en) * | 2009-03-05 | 2013-02-19 | Raytheon Canada Limited | Method and apparatus for accurate imaging with an extended depth of field |
WO2010108119A2 (en) | 2009-03-19 | 2010-09-23 | Flextronics Ap, Llc | Dual sensor camera |
JP2010257037A (ja) | 2009-04-22 | 2010-11-11 | Sony Corp | 情報処理装置および方法、並びにプログラム |
US8553106B2 (en) | 2009-05-04 | 2013-10-08 | Digitaloptics Corporation | Dual lens digital zoom |
JP2010288150A (ja) * | 2009-06-12 | 2010-12-24 | Toshiba Corp | 固体撮像装置 |
CN101938535B (zh) * | 2009-06-29 | 2014-01-15 | 鸿富锦精密工业(深圳)有限公司 | 电子设备 |
FR2949003B1 (fr) | 2009-08-10 | 2017-09-08 | Dxo Labs | Systeme et procede de capture d'images avec deux modes de fonctionnement |
TWI451357B (zh) * | 2009-09-09 | 2014-09-01 | Himax Tech Ltd | 字型反鋸齒方法 |
CN102257822B (zh) | 2009-10-27 | 2014-01-08 | 松下电器产业株式会社 | 摄像装置和使用它的测距装置 |
WO2011058236A1 (fr) | 2009-11-16 | 2011-05-19 | Dxo Labs | Systeme optique et procede de conception associe |
US20110149021A1 (en) * | 2009-12-17 | 2011-06-23 | Samir Hulyalkar | Method and system for sharpness processing for 3d video |
US20110188116A1 (en) * | 2010-02-02 | 2011-08-04 | Nikolay Ledentsov Ledentsov | Device for generation of three-demensional images |
JP5528173B2 (ja) | 2010-03-31 | 2014-06-25 | キヤノン株式会社 | 画像処理装置、撮像装置および画像処理プログラム |
TWI495335B (zh) * | 2010-04-21 | 2015-08-01 | Hon Hai Prec Ind Co Ltd | 取像模組及其運作方法 |
JP2011229603A (ja) * | 2010-04-26 | 2011-11-17 | Fujifilm Corp | 内視鏡装置 |
JP2011229625A (ja) * | 2010-04-26 | 2011-11-17 | Fujifilm Corp | 内視鏡装置 |
JP5811635B2 (ja) * | 2011-03-07 | 2015-11-11 | 株式会社ニコン | 画像処理装置、撮像装置および画像処理プログラム |
JP5630105B2 (ja) * | 2010-07-05 | 2014-11-26 | 株式会社ニコン | 画像処理装置、撮像装置および画像処理プログラム |
US8736722B2 (en) * | 2010-07-15 | 2014-05-27 | Apple Inc. | Enhanced image capture sharpening |
JP5576739B2 (ja) | 2010-08-04 | 2014-08-20 | オリンパス株式会社 | 画像処理装置、画像処理方法、撮像装置及びプログラム |
JP5582935B2 (ja) | 2010-09-22 | 2014-09-03 | 富士フイルム株式会社 | 撮像モジュール |
US9225766B2 (en) * | 2010-10-29 | 2015-12-29 | Sears Brands, L.L.C. | Systems and methods for providing smart appliances |
US9697588B2 (en) | 2010-11-15 | 2017-07-04 | Intuitive Surgical Operations, Inc. | System and method for multi-resolution sharpness transport across color channels |
JP5976676B2 (ja) * | 2011-01-14 | 2016-08-24 | ソニー株式会社 | レンズ部の縦の色収差を利用したイメージングシステム及びその操作方法 |
CN102158648B (zh) * | 2011-01-27 | 2014-09-10 | 明基电通有限公司 | 影像截取装置及影像处理方法 |
US8988590B2 (en) | 2011-03-28 | 2015-03-24 | Intermec Ip Corp. | Two-dimensional imager with solid-state auto-focus |
JP2012237693A (ja) * | 2011-05-13 | 2012-12-06 | Sony Corp | 画像処理装置、画像処理方法及び画像処理プログラム |
JP5806504B2 (ja) * | 2011-05-17 | 2015-11-10 | オリンパス株式会社 | 撮像装置およびこれを備える顕微鏡システム |
US8711275B2 (en) * | 2011-05-31 | 2014-04-29 | Apple Inc. | Estimating optical characteristics of a camera component using sharpness sweep data |
US8749892B2 (en) | 2011-06-17 | 2014-06-10 | DigitalOptics Corporation Europe Limited | Auto-focus actuator for field curvature correction of zoom lenses |
CN102959960B (zh) | 2011-06-23 | 2015-04-01 | 松下电器产业株式会社 | 摄像装置 |
US8953058B2 (en) * | 2011-06-29 | 2015-02-10 | Fotonation Limited | Axial chromatic aberration correction |
JP5847471B2 (ja) * | 2011-07-20 | 2016-01-20 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法および画像処理プログラム |
CN103313642B (zh) | 2011-09-29 | 2016-01-20 | 奥林巴斯株式会社 | 内窥镜装置 |
TWI528833B (zh) * | 2011-11-09 | 2016-04-01 | 鴻海精密工業股份有限公司 | 立體攝像裝置 |
FR2982678B1 (fr) * | 2011-11-14 | 2014-01-03 | Dxo Labs | Procede et systeme de capture de sequence d'images avec compensation des variations de grandissement |
JP5898481B2 (ja) * | 2011-12-13 | 2016-04-06 | キヤノン株式会社 | 撮像装置及び焦点検出方法 |
US9779546B2 (en) | 2012-05-04 | 2017-10-03 | Intermec Ip Corp. | Volume dimensioning systems and methods |
US9007368B2 (en) | 2012-05-07 | 2015-04-14 | Intermec Ip Corp. | Dimensioning system calibration systems and methods |
US10007858B2 (en) | 2012-05-15 | 2018-06-26 | Honeywell International Inc. | Terminals and methods for dimensioning objects |
EP2677363A1 (en) * | 2012-06-20 | 2013-12-25 | bioMérieux | An optical device including a camera, a diaphragm and illumination means |
US9733717B2 (en) * | 2012-07-12 | 2017-08-15 | Dual Aperture International Co. Ltd. | Gesture-based user interface |
US10321127B2 (en) | 2012-08-20 | 2019-06-11 | Intermec Ip Corp. | Volume dimensioning system calibration systems and methods |
TWI451344B (zh) * | 2012-08-27 | 2014-09-01 | Pixart Imaging Inc | 手勢辨識系統及手勢辨識方法 |
US9939259B2 (en) | 2012-10-04 | 2018-04-10 | Hand Held Products, Inc. | Measuring object dimensions using mobile computer |
US20140104413A1 (en) | 2012-10-16 | 2014-04-17 | Hand Held Products, Inc. | Integrated dimensioning and weighing system |
WO2014076836A1 (ja) * | 2012-11-19 | 2014-05-22 | 富士機械製造株式会社 | 部品実装機および実装検査機 |
JP5738904B2 (ja) * | 2013-01-28 | 2015-06-24 | オリンパス株式会社 | 画像処理装置、撮像装置、画像処理方法及びプログラム |
US9080856B2 (en) | 2013-03-13 | 2015-07-14 | Intermec Ip Corp. | Systems and methods for enhancing dimensioning, for example volume dimensioning |
US10228452B2 (en) | 2013-06-07 | 2019-03-12 | Hand Held Products, Inc. | Method of error correction for 3D imaging device |
JP6086829B2 (ja) * | 2013-06-26 | 2017-03-01 | オリンパス株式会社 | 画像処理装置及び画像処理方法 |
US9239950B2 (en) | 2013-07-01 | 2016-01-19 | Hand Held Products, Inc. | Dimensioning system |
US9464885B2 (en) | 2013-08-30 | 2016-10-11 | Hand Held Products, Inc. | System and method for package dimensioning |
WO2015059346A1 (en) * | 2013-10-25 | 2015-04-30 | Nokia Technologies Oy | An apparatus and a method for producing a depth-map |
JP6256132B2 (ja) | 2014-03-14 | 2018-01-10 | 株式会社リコー | 撮像システム |
CA2942921C (en) * | 2014-03-18 | 2019-07-30 | Integrated Medical Systems International, Inc. | Optically adaptive endoscope |
KR101591172B1 (ko) * | 2014-04-23 | 2016-02-03 | 주식회사 듀얼어퍼처인터네셔널 | 이미지 센서와 피사체 사이의 거리를 결정하는 방법 및 장치 |
EP2942940A1 (en) * | 2014-05-06 | 2015-11-11 | Nokia Technologies OY | Method and apparatus for defining the visible content of an image |
US9232132B1 (en) * | 2014-06-10 | 2016-01-05 | Gregory S. Tseytin | Light field image processing |
US9823059B2 (en) | 2014-08-06 | 2017-11-21 | Hand Held Products, Inc. | Dimensioning system with guided alignment |
US9779276B2 (en) | 2014-10-10 | 2017-10-03 | Hand Held Products, Inc. | Depth sensor based auto-focus system for an indicia scanner |
US10775165B2 (en) | 2014-10-10 | 2020-09-15 | Hand Held Products, Inc. | Methods for improving the accuracy of dimensioning-system measurements |
US10810715B2 (en) | 2014-10-10 | 2020-10-20 | Hand Held Products, Inc | System and method for picking validation |
US10060729B2 (en) | 2014-10-21 | 2018-08-28 | Hand Held Products, Inc. | Handheld dimensioner with data-quality indication |
US9762793B2 (en) | 2014-10-21 | 2017-09-12 | Hand Held Products, Inc. | System and method for dimensioning |
US9752864B2 (en) | 2014-10-21 | 2017-09-05 | Hand Held Products, Inc. | Handheld dimensioning system with feedback |
US9557166B2 (en) | 2014-10-21 | 2017-01-31 | Hand Held Products, Inc. | Dimensioning system with multipath interference mitigation |
US9897434B2 (en) | 2014-10-21 | 2018-02-20 | Hand Held Products, Inc. | Handheld dimensioning system with measurement-conformance feedback |
US10475361B2 (en) | 2015-02-02 | 2019-11-12 | Apple Inc. | Adjustable display illumination |
US20160225150A1 (en) * | 2015-02-02 | 2016-08-04 | Capso Vision, Inc. | Method and Apparatus for Object Distance and Size Estimation based on Calibration Data of Lens Focus |
US9786101B2 (en) | 2015-05-19 | 2017-10-10 | Hand Held Products, Inc. | Evaluating image values |
US10066982B2 (en) | 2015-06-16 | 2018-09-04 | Hand Held Products, Inc. | Calibrating a volume dimensioner |
US9857167B2 (en) | 2015-06-23 | 2018-01-02 | Hand Held Products, Inc. | Dual-projector three-dimensional scanner |
US20160377414A1 (en) | 2015-06-23 | 2016-12-29 | Hand Held Products, Inc. | Optical pattern projector |
US9835486B2 (en) | 2015-07-07 | 2017-12-05 | Hand Held Products, Inc. | Mobile dimensioner apparatus for use in commerce |
EP3118576B1 (en) | 2015-07-15 | 2018-09-12 | Hand Held Products, Inc. | Mobile dimensioning device with dynamic accuracy compatible with nist standard |
US20170017301A1 (en) | 2015-07-16 | 2017-01-19 | Hand Held Products, Inc. | Adjusting dimensioning results using augmented reality |
US10094650B2 (en) | 2015-07-16 | 2018-10-09 | Hand Held Products, Inc. | Dimensioning and imaging items |
US10624533B2 (en) | 2015-10-16 | 2020-04-21 | Capsovision Inc | Endoscope with images optimized based on depth map derived from structured light images |
US10943333B2 (en) * | 2015-10-16 | 2021-03-09 | Capsovision Inc. | Method and apparatus of sharpening of gastrointestinal images based on depth information |
US11354783B2 (en) | 2015-10-16 | 2022-06-07 | Capsovision Inc. | Method and apparatus of sharpening of gastrointestinal images based on depth information |
US10249030B2 (en) | 2015-10-30 | 2019-04-02 | Hand Held Products, Inc. | Image transformation for indicia reading |
US10225544B2 (en) | 2015-11-19 | 2019-03-05 | Hand Held Products, Inc. | High resolution dot pattern |
US9715721B2 (en) | 2015-12-18 | 2017-07-25 | Sony Corporation | Focus detection |
US10025314B2 (en) | 2016-01-27 | 2018-07-17 | Hand Held Products, Inc. | Vehicle positioning and object avoidance |
TWI588508B (zh) * | 2016-05-10 | 2017-06-21 | 國立中興大學 | 立體深度量測裝置 |
US10339352B2 (en) | 2016-06-03 | 2019-07-02 | Hand Held Products, Inc. | Wearable metrological apparatus |
US9940721B2 (en) | 2016-06-10 | 2018-04-10 | Hand Held Products, Inc. | Scene change detection in a dimensioner |
US10163216B2 (en) | 2016-06-15 | 2018-12-25 | Hand Held Products, Inc. | Automatic mode switching in a volume dimensioner |
US10277829B1 (en) * | 2016-08-12 | 2019-04-30 | Apple Inc. | Video capture in low-light conditions |
US10909708B2 (en) | 2016-12-09 | 2021-02-02 | Hand Held Products, Inc. | Calibrating a dimensioner using ratios of measurable parameters of optic ally-perceptible geometric elements |
JP6801434B2 (ja) * | 2016-12-20 | 2020-12-16 | 富士通株式会社 | 生体画像処理装置、生体画像処理方法および生体画像処理プログラム |
WO2018138720A1 (en) | 2017-01-25 | 2018-08-02 | Kornit Digital Ltd. | Inkjet printing on dyed synthetic fabrics |
US11047672B2 (en) | 2017-03-28 | 2021-06-29 | Hand Held Products, Inc. | System for optically dimensioning |
US10733748B2 (en) | 2017-07-24 | 2020-08-04 | Hand Held Products, Inc. | Dual-pattern optical 3D dimensioning |
WO2019048492A1 (en) * | 2017-09-08 | 2019-03-14 | Sony Corporation | IMAGING DEVICE, METHOD AND PROGRAM FOR PRODUCING IMAGES OF A SCENE |
CN107613284B (zh) * | 2017-10-31 | 2019-10-08 | 努比亚技术有限公司 | 一种图像处理方法、终端和计算机可读存储介质 |
US10584962B2 (en) | 2018-05-01 | 2020-03-10 | Hand Held Products, Inc | System and method for validating physical-item security |
CN108650462B (zh) * | 2018-05-14 | 2020-06-09 | Oppo广东移动通信有限公司 | 拍摄预览显示方法、装置、终端及存储介质 |
US10679024B2 (en) | 2018-07-24 | 2020-06-09 | Cognex Corporation | System and method for auto-focusing a vision system camera on barcodes |
US11639846B2 (en) | 2019-09-27 | 2023-05-02 | Honeywell International Inc. | Dual-pattern optical 3D dimensioning |
US11336840B2 (en) | 2020-09-02 | 2022-05-17 | Cisco Technology, Inc. | Matching foreground and virtual background during a video communication session |
CN114339187B (zh) * | 2020-09-30 | 2024-06-14 | 北京小米移动软件有限公司 | 图像处理方法、图像处理装置及存储介质 |
US11893668B2 (en) | 2021-03-31 | 2024-02-06 | Leica Camera Ag | Imaging system and method for generating a final digital image via applying a profile to image information |
CN114724000B (zh) * | 2022-06-09 | 2022-08-30 | 深圳精智达技术股份有限公司 | 一种屏拍图摩尔纹的处理方法、处理装置及处理设备 |
Family Cites Families (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
USH101H (en) * | 1984-10-01 | 1986-08-05 | The United States Of America As Represented By The Secretary Of The Army | Ultraviolet and infrared focal place array |
JPS63247680A (ja) * | 1987-04-02 | 1988-10-14 | Mitsubishi Electric Corp | 画像追尾装置 |
JPH01212981A (ja) * | 1988-02-20 | 1989-08-25 | Sanyo Electric Co Ltd | オートフォーカス装置 |
JPH01276884A (ja) * | 1988-04-27 | 1989-11-07 | Nec Corp | ビデオカメラの焦合装置 |
US5161107A (en) | 1990-10-25 | 1992-11-03 | Mestech Creation Corporation | Traffic surveillance system |
JPH06138362A (ja) * | 1991-02-06 | 1994-05-20 | Sony Corp | オートフォーカス装置 |
GB9125954D0 (en) | 1991-12-06 | 1992-02-05 | Vlsi Vision Ltd | Electronic camera |
US6292212B1 (en) * | 1994-12-23 | 2001-09-18 | Eastman Kodak Company | Electronic color infrared camera |
JP3960647B2 (ja) * | 1997-01-09 | 2007-08-15 | オリンパス株式会社 | 自動合焦装置 |
EP0878970A3 (en) * | 1997-05-16 | 1999-08-18 | Matsushita Electric Industrial Co., Ltd. | Imager registration error and chromatic aberration measurement system for a video camera |
US5973846A (en) * | 1998-11-30 | 1999-10-26 | Hewlett-Packard Company | Offset spectra lens system for a two spectra automatic focusing system |
JP2000299874A (ja) | 1999-04-12 | 2000-10-24 | Sony Corp | 信号処理装置及び方法並びに撮像装置及び方法 |
JP2000338385A (ja) * | 1999-05-28 | 2000-12-08 | Ricoh Co Ltd | 自動合焦装置およびその合焦方法 |
US6859229B1 (en) * | 1999-06-30 | 2005-02-22 | Canon Kabushiki Kaisha | Image pickup apparatus |
JP2001103358A (ja) * | 1999-09-30 | 2001-04-13 | Mitsubishi Electric Corp | 色収差補正装置 |
JP4696407B2 (ja) * | 2001-06-20 | 2011-06-08 | 株式会社ニコン | 商品推奨システムおよび商品推奨方法 |
JP2003018407A (ja) * | 2001-07-02 | 2003-01-17 | Konica Corp | 画像処理方法及び画像処理装置 |
US20030063185A1 (en) * | 2001-09-28 | 2003-04-03 | Bell Cynthia S. | Three-dimensional imaging with complementary color filter arrays |
JP4126938B2 (ja) * | 2002-03-22 | 2008-07-30 | セイコーエプソン株式会社 | 画像処理装置および画像出力装置 |
JP2004120487A (ja) * | 2002-09-27 | 2004-04-15 | Fuji Photo Film Co Ltd | 撮像装置 |
JP2004228662A (ja) * | 2003-01-20 | 2004-08-12 | Minolta Co Ltd | 撮像装置 |
JP4010254B2 (ja) * | 2003-02-06 | 2007-11-21 | ソニー株式会社 | 画像記録再生装置、画像撮影装置及び色収差補正方法 |
US20040165090A1 (en) * | 2003-02-13 | 2004-08-26 | Alex Ning | Auto-focus (AF) lens and process |
US20040169748A1 (en) * | 2003-02-28 | 2004-09-02 | Tinku Acharya | Sub-sampled infrared sensor for use in a digital image capture device |
US20040174446A1 (en) * | 2003-02-28 | 2004-09-09 | Tinku Acharya | Four-color mosaic pattern for depth and image capture |
JP4378994B2 (ja) * | 2003-04-30 | 2009-12-09 | ソニー株式会社 | 画像処理装置、画像処理方法ならびに撮像装置 |
FR2860089B1 (fr) * | 2003-09-23 | 2005-11-11 | Do Labs | Procede et systeme pour modifier une image numerique de maniere differenciee et quasi reguliere par pixel |
JP4665422B2 (ja) * | 2004-04-02 | 2011-04-06 | ソニー株式会社 | 撮像装置 |
JP4815807B2 (ja) * | 2004-05-31 | 2011-11-16 | 株式会社ニコン | Rawデータから倍率色収差を検出する画像処理装置、画像処理プログラム、および電子カメラ |
US20060093234A1 (en) * | 2004-11-04 | 2006-05-04 | Silverstein D A | Reduction of blur in multi-channel images |
-
2006
- 2006-03-06 US US11/817,977 patent/US7920172B2/en not_active Expired - Fee Related
- 2006-03-06 EP EP06726221A patent/EP1856907A2/fr not_active Withdrawn
- 2006-03-06 CA CA2835047A patent/CA2835047C/fr not_active Expired - Fee Related
- 2006-03-06 WO PCT/FR2006/050197 patent/WO2006095110A2/fr active Application Filing
- 2006-03-06 CN CN201210177544.6A patent/CN102984448B/zh not_active Expired - Fee Related
- 2006-03-06 CA CA2600185A patent/CA2600185C/fr not_active Expired - Fee Related
- 2006-03-06 CA CA2834963A patent/CA2834963C/fr not_active Expired - Fee Related
- 2006-03-06 KR KR1020077022875A patent/KR101265358B1/ko not_active IP Right Cessation
- 2006-03-06 CA CA2834883A patent/CA2834883C/fr not_active Expired - Fee Related
- 2006-03-06 CN CNA2006800123908A patent/CN101204083A/zh active Pending
- 2006-03-06 JP JP2008500243A patent/JP5535476B2/ja not_active Expired - Fee Related
-
2010
- 2010-06-22 US US12/820,951 patent/US8212889B2/en not_active Expired - Fee Related
- 2010-06-22 US US12/820,965 patent/US20110109749A1/en not_active Abandoned
-
2013
- 2013-06-06 JP JP2013119919A patent/JP5633891B2/ja not_active Expired - Fee Related
-
2014
- 2014-07-29 JP JP2014153695A patent/JP6076300B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US20110019065A1 (en) | 2011-01-27 |
KR101265358B1 (ko) | 2013-05-21 |
CA2600185C (fr) | 2016-04-26 |
CA2835047A1 (fr) | 2006-09-14 |
JP2008532449A (ja) | 2008-08-14 |
CN101204083A (zh) | 2008-06-18 |
CN102984448A (zh) | 2013-03-20 |
CA2834963C (fr) | 2017-04-18 |
EP1856907A2 (fr) | 2007-11-21 |
WO2006095110A3 (fr) | 2006-11-02 |
CA2835047C (fr) | 2017-04-18 |
JP2015019378A (ja) | 2015-01-29 |
CA2600185A1 (fr) | 2006-09-14 |
CN102984448B (zh) | 2016-05-25 |
WO2006095110A2 (fr) | 2006-09-14 |
US7920172B2 (en) | 2011-04-05 |
JP2013214986A (ja) | 2013-10-17 |
JP6076300B2 (ja) | 2017-02-08 |
KR20070121717A (ko) | 2007-12-27 |
CA2834963A1 (fr) | 2006-09-14 |
CA2834883A1 (fr) | 2006-09-14 |
US20080158377A1 (en) | 2008-07-03 |
CA2834883C (fr) | 2018-01-23 |
US20110109749A1 (en) | 2011-05-12 |
JP5535476B2 (ja) | 2014-07-02 |
US8212889B2 (en) | 2012-07-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6076300B2 (ja) | デジタル画像取込装置用のセンサおよびデジタル画像取込装置 | |
KR102266649B1 (ko) | 이미지 처리 방법 및 장치 | |
JP5460173B2 (ja) | 画像処理方法、画像処理装置、画像処理プログラム、撮像装置 | |
KR102293443B1 (ko) | 듀얼 카메라를 이용한 이미지 처리 방법 및 이동 단말기 | |
CN107959778B (zh) | 基于双摄像头的成像方法和装置 | |
JP6935587B2 (ja) | 画像処理のための方法および装置 | |
JP6838994B2 (ja) | 撮像装置、撮像装置の制御方法およびプログラム | |
JP5317891B2 (ja) | 画像処理装置、画像処理方法、及びコンピュータプログラム | |
JP2010020758A (ja) | 画像処理装置、撮像装置、画像処理方法及びプログラム | |
CN108156369B (zh) | 图像处理方法和装置 | |
JP2011166588A (ja) | 撮像装置および撮像方法、ならびに前記撮像装置のための画像処理方法 | |
JP2000156785A (ja) | 画像処理方法および画像処理装置 | |
JP2011239267A (ja) | 撮像装置及び画像処理装置 | |
JP5173664B2 (ja) | 画像処理装置及び画像処理方法 | |
FR2880958A1 (fr) | Procede d'amelioration de la nettete d'au moins une couleur d'une image numerique | |
JP5854801B2 (ja) | 画像処理装置、画像処理方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140224 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140401 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20140626 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20140704 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140729 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140909 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141007 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5633891 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R360 | Written notification for declining of transfer of rights |
Free format text: JAPANESE INTERMEDIATE CODE: R360 |
|
R371 | Transfer withdrawn |
Free format text: JAPANESE INTERMEDIATE CODE: R371 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |