JPWO2019155944A1 - 画像処理装置、画像処理方法、および撮像装置 - Google Patents
画像処理装置、画像処理方法、および撮像装置 Download PDFInfo
- Publication number
- JPWO2019155944A1 JPWO2019155944A1 JP2019570697A JP2019570697A JPWO2019155944A1 JP WO2019155944 A1 JPWO2019155944 A1 JP WO2019155944A1 JP 2019570697 A JP2019570697 A JP 2019570697A JP 2019570697 A JP2019570697 A JP 2019570697A JP WO2019155944 A1 JPWO2019155944 A1 JP WO2019155944A1
- Authority
- JP
- Japan
- Prior art keywords
- map data
- image
- pixel values
- processing unit
- interpolation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 735
- 238000003384 imaging method Methods 0.000 title claims description 145
- 238000003672 processing method Methods 0.000 title claims description 16
- 230000015572 biosynthetic process Effects 0.000 claims abstract description 94
- 238000003786 synthesis reaction Methods 0.000 claims abstract description 94
- 238000000034 method Methods 0.000 claims description 241
- 230000008569 process Effects 0.000 claims description 147
- 239000002131 composite material Substances 0.000 claims description 5
- 238000006243 chemical reaction Methods 0.000 description 88
- 239000000203 mixture Substances 0.000 description 55
- 238000010586 diagram Methods 0.000 description 43
- 230000004048 modification Effects 0.000 description 42
- 238000012986 modification Methods 0.000 description 42
- 101000964052 Rattus norvegicus 5-hydroxytryptamine receptor 5B Proteins 0.000 description 32
- 238000001514 detection method Methods 0.000 description 32
- 238000004891 communication Methods 0.000 description 26
- 210000003128 head Anatomy 0.000 description 25
- 238000000926 separation method Methods 0.000 description 19
- 230000006870 function Effects 0.000 description 15
- 238000002674 endoscopic surgery Methods 0.000 description 12
- 239000004065 semiconductor Substances 0.000 description 12
- 108091029067 miR-11 stem-loop Proteins 0.000 description 11
- 108091084079 miR-12 stem-loop Proteins 0.000 description 11
- 108091063445 miR-13 stem-loop Proteins 0.000 description 11
- 230000003287 optical effect Effects 0.000 description 11
- 239000000758 substrate Substances 0.000 description 11
- 108091008065 MIR21 Proteins 0.000 description 10
- 108091062170 Mir-22 Proteins 0.000 description 10
- 239000002775 capsule Substances 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 10
- 108091053008 miR-23 stem-loop Proteins 0.000 description 10
- 239000003086 colorant Substances 0.000 description 8
- VYPSYNLAJGMNEJ-UHFFFAOYSA-N Silicium dioxide Chemical compound O=[Si]=O VYPSYNLAJGMNEJ-UHFFFAOYSA-N 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 108091084679 miR-3 stem-loop Proteins 0.000 description 6
- 108091033354 miR-3-1 stem-loop Proteins 0.000 description 6
- 108091058771 miR-3-2 stem-loop Proteins 0.000 description 6
- 101000648503 Homo sapiens Tumor necrosis factor receptor superfamily member 11A Proteins 0.000 description 5
- 102100028787 Tumor necrosis factor receptor superfamily member 11A Human genes 0.000 description 5
- 101100433754 Arabidopsis thaliana ABCG30 gene Proteins 0.000 description 4
- 101100054291 Oryza sativa subsp. japonica ABCG35 gene Proteins 0.000 description 4
- 101100107595 Oryza sativa subsp. japonica ABCG41 gene Proteins 0.000 description 4
- 101150024488 PDR2 gene Proteins 0.000 description 4
- 101100321174 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) YRR1 gene Proteins 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 230000005284 excitation Effects 0.000 description 4
- 238000001727 in vivo Methods 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 238000001356 surgical procedure Methods 0.000 description 4
- 229910004298 SiO 2 Inorganic materials 0.000 description 3
- 238000010336 energy treatment Methods 0.000 description 3
- 239000010410 layer Substances 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 235000012239 silicon dioxide Nutrition 0.000 description 3
- 239000000377 silicon dioxide Substances 0.000 description 3
- 208000005646 Pneumoperitoneum Diseases 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 210000004204 blood vessel Anatomy 0.000 description 2
- 239000003153 chemical reaction reagent Substances 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- MOFVSTNWEDAEEK-UHFFFAOYSA-M indocyanine green Chemical compound [Na+].[O-]S(=O)(=O)CCCCN1C2=CC=C3C=CC=CC3=C2C(C)(C)C1=CC=CC=CC=CC1=[N+](CCCCS([O-])(=O)=O)C2=CC=C(C=CC=C3)C3=C2C1(C)C MOFVSTNWEDAEEK-UHFFFAOYSA-M 0.000 description 2
- 229960004657 indocyanine green Drugs 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 230000001678 irradiating effect Effects 0.000 description 2
- 230000031700 light absorption Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 210000000056 organ Anatomy 0.000 description 2
- 238000007639 printing Methods 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 240000004050 Pentaglottis sempervirens Species 0.000 description 1
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 1
- 230000003187 abdominal effect Effects 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000002583 angiography Methods 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 230000000740 bleeding effect Effects 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 238000002073 fluorescence micrograph Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 210000000936 intestine Anatomy 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000003595 mist Substances 0.000 description 1
- 230000000116 mitigating effect Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000002572 peristaltic effect Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000008929 regeneration Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 210000004761 scalp Anatomy 0.000 description 1
- 238000007789 sealing Methods 0.000 description 1
- 210000002784 stomach Anatomy 0.000 description 1
- 239000002344 surface layer Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4007—Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/843—Demosaicing, e.g. interpolating colour pixel values
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/131—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing infrared wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Image Processing (AREA)
- Color Television Image Signal Generators (AREA)
- Studio Devices (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
- Closed-Circuit Television Systems (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
Description
1.第1の実施の形態
2.第2の実施の形態
3.第3の実施の形態
4.第4の実施の形態
5.撮像装置の使用例
6.応用例
[構成例]
図1は、第1の実施の形態に係る画像処理装置を備えた撮像装置1の一構成例を表すものである。なお、本開示の実施の形態に係る画像処理方法は、本実施の形態により具現化されるので、併せて説明する。撮像装置1は、光学系9と、撮像部10と、画像処理部20とを備えている。
続いて、本実施の形態の撮像装置1の動作および作用について説明する。
まず、図1を参照して、撮像装置1の全体動作概要を説明する。撮像部10は、被写体を撮像することにより画像信号DTおよびゲイン信号SGAINを生成する。画像処理部20の切替部21は、ゲイン信号SGAINが示す変換ゲインGCに基づいて、画像信号DTを、画像分割処理部22または信号処理部25に選択的に供給する。画像分割処理部22は、撮像部10から切替部21を介して供給された画像信号DTに含まれる3つの画像マップデータMPG、MPB,MPRに基づいて、画像分割処理A1を行うことにより、6つのマップデータMG11,MG12,MB11,MB12,MR11,MR12を生成する。補間処理部23は、画像分割処理部22から供給された6つのマップデータMG11,MG12,MB11,MB12,MR11,MR12のそれぞれに対して補間処理A2を行うことにより、6つのマップデータMG21,MG22,MB21,MB22,MR21,MR22を生成する。合成処理部24は、補間処理部23から供給された6つのマップデータMG21,MG22,MB21,MB22,MR21,MR22に基づいて合成処理A3を行うことにより、3つのマップデータMG3,MB3,MR3を生成する。そして、合成処理部24は、これらの3つのマップデータMG3,MB3,MR3を、画像信号DT2として信号処理部25に供給する。信号処理部25は、合成処理部24から供給された画像信号DT2、または撮像部10から切替部21を介して供給された画像信号DTに基づいて、所定の信号処理を行うことにより画像信号DT3を生成する。
図5は、画像処理部20の一動作例を表すものである。画像処理部20は、ゲイン信号SGAINが示す変換ゲインGCに基づいて、画像分割処理A1、補間処理A2、および合成処理A3を行うかどうかを決定する。以下に、この動作について詳細に説明する。
画像分割処理部22は、撮像部10から供給された画像信号DTに含まれる3つの画像マップデータMPG、MPB,MPRに基づいて画像分割処理A1を行うことにより、6つのマップデータMG11,MG12,MB11,MB12,MR11,MR12を生成する。以下に、緑色(G)に係る画像マップデータMPGに対する画像分割処理A1を例に挙げて、詳細に説明する。
次に、補間処理部23は、画像分割処理A1により生成された6つのマップデータMG11,MR12,MB11,MB12,MR11,MR12のそれぞれに対して補間処理A2を行うことにより、6つのマップデータMG21,MG22,MB21,MB22,MR21,MR22を生成する。以下に、緑色(G)に係るマップデータMG11,MG12(図8A,8B)に対する補間処理A2を例に挙げて、詳細に説明する。
次に、合成処理部24は、補間処理A2により生成された6つのマップデータMG21,MG22,MB21,MB22,MR21,MR22に基づいて合成処理A3を行うことにより、3つのマップデータMG3,MB3,MR3を生成する。以下に、緑色(G)に係るマップデータMG21,MG22(図9A,図9B)に対する合成処理A3を例に挙げて、詳細に説明する。
以上のように本実施の形態では、画像分割処理、補間処理、および合成処理を行うようにしたので、撮像画像における信号雑音比を高めることができるので、撮像画像の画質を高めることができる。
上記実施の形態では、合成処理部24は、例えば、2つのマップデータMG21,MG22における互いに対応する位置の画素値を足し合わせることにより、マップデータMG3におけるその位置での画素値を生成したが、これに限定されるものではない。これに代えて、例えば図11に示す撮像装置1Aのように、2つのマップデータMG21,MG22における互いに対応する位置の画素値を足し合わせ、足し合わされた画素値を半分にすることにより、マップデータMG3におけるその位置での画素値を生成してもよい。これにより、マップデータMG3における画素値を、画像マップデータMPGにおける画素値と同程度にすることができる。マップデータMB3,MR3についても同様である。これにより、信号雑音比を維持したまま、マップデータMG3,MB3,MR3における画素値を示すデジタルコードのビット数を抑えることができる。その結果、信号処理部25におけるダイナミックレンジの設計を容易にすることができる。
上記の実施の形態では、画像分割処理A1における画素値の配置パターンPATを、1つの画素値を単位とした市松模様パターンにしたが、これに限定されるものではない。以下に、本変形例について、いくつか例を挙げて詳細に記載する。なお、以下では、緑色(G)に係るマップデータを例に説明するが、青色(B)に係るマップデータ、および赤色(R)に係るマップデータについても同様である。
図12A,12Bは、画素値の配置パターンPATを、2行2列に配置された4つの画素値を単位とした市松模様パターンにした場合における、マップデータMG11,MG12の一例を表すものである。この図12A,12Bに示した配置パターンPATにおける水平方向(横方向)のピッチは、図8A,8Bに示した配置パターンPATにおける垂直方向のピッチの2倍である。同様に、図12A,12Bに示した配置パターンPATにおける垂直方向(縦方向)のピッチは、図8A,8Bに示した配置パターンPATにおける垂直方向のピッチの2倍である。マップデータMG11,MG12における画素値の配置パターンPATは、互いに水平方向(横方向)および垂直方向(縦方向)に2画素分ずれている。
図14A,14Bは、画素値の配置パターンPATを、画素値が存在する位置と画素値が欠落した位置が水平方向(横方向)に交互に並ぶ縞模様パターンにした場合における、マップデータMG11,MG12の一例を表すものである。マップデータMG11,MG12における画素値の配置パターンPATは、互いに水平方向に1画素分ずれている。
以上の例では、画像分割処理部22は、例えば、1つの画像マップデータMPGに基づいて画像分割処理A1を行うことにより2つのマップデータMG11,MG12を生成し、補間処理部23は、この2つのマップデータMG11,MG12に対して補間処理A2を行うことにより2つのマップデータMG21,MG22を生成し、合成処理部24は、この2つのマップデータMG21,MG22に基づいて合成処理A3を行うことによりマップデータMG3を生成したが、これに限定されるものではない。これに代えて、例えば、画像分割処理部22は、例えば1つの画像マップデータMPGに基づいて画像分割処理A1を行うことにより3つのマップデータMG11,MG12,MG13を生成し、補間処理部23は、この3つのマップデータMG11,MG12,MG13に対して補間処理A2を行うことにより3つのマップデータMG21,MG22,MG23を生成し、合成処理部24は、この3つのマップデータMG21,MG22,MG23に基づいて合成処理A3を行うことによりマップデータMG3を生成してもよい。
上記の実施の形態では、補間処理部23が補間処理A2を行うようにしたが、この補間処理A2における補間方法を変更可能にしてもよい。以下に、本変形例について詳細に説明する。
上記実施の形態では、画像処理部20は、赤色(R)に係る画像マップデータMPR、緑色(G)に係る画像マップデータMPG、および青色(B)に係る画像マップデータMPBに基づいて、画像分割処理A1、補間処理A2、および合成処理A3を行うようにしたが、これに限定されるものではなく、これに代えて、例えば、輝度信号に基づいて、画像分割処理A1、補間処理A2、および合成処理A3を行うようにしてもよい。以下に、本変形例について詳細に説明する。
VY = VG×0.59 + VB×0.11 + VR×0.3
この式において、“VY”は輝度(Y)に係る画素値であり、“VG”は緑色(G)に係る画素値であり、“VB”は青色(B)に係る画素値であり、“VR”は赤色(R)に係る画素値である。
また、これらの変形例のうちの2以上を組み合わせてもよい。
次に、第2の実施の形態に係る撮像装置3について説明する。本実施の形態は、撮像部における青色および赤色の光電変換素子の構成が、上記第1の実施の形態の場合と異なるものである。なお、上記第1の実施の形態に係る撮像装置1と実質的に同一の構成部分には同一の符号を付し、適宜説明を省略する。
次に、第3の実施の形態に係る撮像装置4について説明する。本実施の形態は、撮像部における、青色(B)および赤色(R)の光を受光可能な光電変換素子の配置密度が、上記第1の実施の形態の場合と異なるものである。なお、上記第1の実施の形態に係る撮像装置1と実質的に同一の構成部分には同一の符号を付し、適宜説明を省略する。
上記実施の形態では、画像処理部70は、赤色(R)に係る画像マップデータMPR、緑色(G)に係る画像マップデータMPG、および青色(B)に係る画像マップデータMPBに基づいて、画像分割処理A1、補間処理A2、および合成処理A3を行うようにしたが、これに限定されるものではない。これに代えて、例えば、第1の実施の形態の変形例に係る撮像装置1Dの場合(図25)と同様に、輝度信号に基づいて、画像分割処理A1、補間処理A2、および合成処理A3を行うようにしてもよい。以下に、本変形例について詳細に説明する。
VY1 = VG1×0.59 + VB/4×0.11 + VR/4×0.3
VY2 = VG2×0.59 + VB/4×0.11 + VR/4×0.3
VY3 = VG3×0.59 + VB/4×0.11 + VR/4×0.3
VY4 = VG4×0.59 + VB/4×0.11 + VR/4×0.3
この式において、“VY1”〜“VY4”は輝度(Y)に係る画素値であり、“VG1”〜“VG4”は緑色(G)に係る画素値であり、“VB”は青色(B)に係る画素値であり、“VR”は赤色(R)に係る画素値である。“VY1”,“VG1”は、領域Xにおける左上の画素値を示し、“VY2”,“VG2”は、領域Xにおける右上の画素値を示し、“VY3”,“VG3”は、領域Xにおける左下の画素値を示し、“VY4”,“VG4”は、領域Xにおける右下の画素値を示す。
上記実施の形態に係る撮像装置4に、上記第1の実施の形態の各変形例を適用してもよい。具体的には、例えば、上記第1の実施の形態の変形例に係る撮像装置2(図21)と同様に、画像信号DT31に含まれる画像マップデータMPG,MPB,MPRに基づいて補間制御処理B1を行うことにより、補間処理部73における補間処理A2の補間方法を制御してもよい。
次に、第4の実施の形態に係る撮像装置5について説明する。本実施の形態は、撮像部に、緑色(G)、青色(B)、および赤色(R)の光を受光可能な光電変換素子に加え、赤外(IR)の光を受光可能の光電変換素子を設けたものである。なお、上記第1の実施の形態に係る撮像装置1と実質的に同一の構成部分には同一の符号を付し、適宜説明を省略する。
上記実施の形態に係る撮像装置5に、上記第1の実施の形態の各変形例を適用してもよい。具体的には、例えば、上記第1の実施の形態の変形例に係る撮像装置2(図21)と同様に、画像信号DT51に含まれる画像マップデータMPRGBに基づいて補間制御処理B1を行うことにより、補間処理部93における補間処理A2の補間方法を制御してもよい。
図41は、上記実施の形態に係る撮像装置1等の使用例を表すものである。上述した撮像装置1等は、例えば、以下のように、可視光や、赤外光、紫外光、X線等の光をセンシングする様々なケースに使用することができる。
・自動停止等の安全運転や、運転者の状態の認識等のために、自動車の前方や後方、周囲、車内等を撮影する車載用センサ、走行車両や道路を監視する監視カメラ、車両間等の測距を行う測距センサ等の、交通の用に供される装置
・ユーザのジェスチャを撮影して、そのジェスチャに従った機器操作を行うために、テレビジョンや、冷蔵庫、エアーコンディショナ等の家電に供される装置
・内視鏡や、赤外光の受光による血管撮影を行う装置等の、医療やヘルスケアの用に供される装置
・防犯用途の監視カメラや、人物認証用途のカメラ等の、セキュリティの用に供される装置
・肌を撮影する肌測定器や、頭皮を撮影するマイクロスコープ等の、美容の用に供される装置
・スポーツ用途等向けのアクションカメラやウェアラブルカメラ等の、スポーツの用に供される装置
・畑や作物の状態を監視するためのカメラ等の、農業の用に供される装置
<体内情報取得システムへの応用例>
更に、本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、内視鏡手術システムに適用されてもよい。
た画像信号に対して各種の信号処理を行う。画像処理部10113は、信号処理を施した画像信号を、RAWデータとして無線通信部10114に提供する。
本開示に係る技術(本技術)は、様々な製品へ応用することができる。例えば、本開示に係る技術は、内視鏡手術システムに適用されてもよい。
本開示に係る技術は、様々な製品へ応用することができる。例えば、本開示に係る技術は、自動車、電気自動車、ハイブリッド電気自動車、自動二輪車、自転車、パーソナルモビリティ、飛行機、ドローン、船舶、ロボット、建設機械、農業機械(トラクター)などのいずれかの種類の移動体に搭載される装置として実現されてもよい。
53が図示されている。
前記複数の第1のマップデータのそれぞれにおいて、補間処理を用いて、画素値が欠落した位置における画素値を求めることにより、前記複数の第1のマップデータに対応する複数の第2のマップデータを生成可能な補間処理部と、
前記複数の第2のマップデータにおける互いに対応する位置の画素値に基づいて、その位置での画素値を生成することにより第3のマップデータを生成可能な合成処理部と
を備えた画像処理装置。
(2)前記配置パターンは、市松模様パターンである
前記(1)に記載の画像処理装置。
(3)前記第1の画像マップデータに基づいて前記補間処理の処理方法を決定可能である補間制御部をさらに備えた
前記(1)または(2)に記載の画像処理装置。
(4)前記補間制御部は、前記第1の画像マップデータに基づいて、前記補間処理における補間方向を決定することにより、前記処理方法を決定可能である
前記(3)に記載の画像処理装置。
(5)前記補間制御部は、前記第1の画像マップデータに基づいて空間周波数情報を求め、この空間周波数情報に基づいて前記処理方法を決定することが可能である
前記(3)または(4)に記載の画像処理装置。
(6)前記補間制御部は、前記第1の画像マップデータ、第2の画像マップデータ、および第3の画像マップデータに基づいて合成マップデータを生成し、前記合成マップデータに基づいて前記補間処理の処理方法を決定可能することが可能である
前記(3)から(5)のいずれかに記載の画像処理装置。
(7)前記画像分割処理部は、さらに、複数の画素値を含む第2の画像マップデータに基づいて、画素値の配置パターンが互いに異なり、互いに異なる位置に画素値が配置された複数の第4のマップデータを生成可能であり、
前記補間処理部は、前記複数の第4のマップデータのそれぞれにおいて、前記補間処理を用いて、画素値が欠落した位置における画素値を求めることにより、前記複数の第4のマップデータに対応する複数の第5のマップデータを生成可能であり、
前記複数の第1のマップデータにおける画素値の前記配置パターンは、第1の配置パターンおよび第2の配置パターンを含み、
前記複数の第4のマップデータにおける画素値の前記配置パターンは、前記第1の配置パターンおよび前記第2の配置パターンを含む
前記(1)から(6)のいずれかに記載の画像処理装置。
(8)前記複数の第1のマップデータに対する前記補間処理の補間方法は、前記複数の第4のマップデータに対する前記補間処理の補間方法と同じである
前記(7)に記載の画像処理装置。
(9)前記第1の画像マップデータの前記複数の画素値は、第1の色の複数の画素値を含み、
前記第2の画像マップデータの前記複数の画素値は、第2の色の複数の画素値および第3の色の複数の画素値を含む
前記(7)または(8)に記載の画像処理装置。
(10)前記第1の画像マップデータの前記複数の画素値は、第1の色の複数の画素値を含み、
前記第2の画像マップデータの前記複数の画素値は、第2の色の複数の画素値、第3の色の複数の画素値、および第4の色の複数の画素値を含む
前記(7)または(8)に記載の画像処理装置。
(11)前記合成処理部は、前記複数の第5のマップデータにおける互いに対応する位置の画素値に基づいて、その位置での画素値を生成することにより第6のマップデータを生成可能であり、
前記画像分割処理部は、さらに、複数の画素値を含む第3の画像マップデータに基づいて、画素値の配置パターンが互いに異なり、互いに異なる位置に画素値が配置された複数の第7のマップデータを生成可能であり、
前記補間処理部は、前記複数の第7のマップデータのそれぞれにおいて、前記補間処理を用いて、画素値が欠落した位置における画素値を求めることにより、前記複数の第7のマップデータに対応する複数の第8のマップデータを生成可能であり、
前記合成処理部は、前記複数の第8のマップデータにおける互いに対応する位置の画素値に基づいて、その位置での画素値を生成することにより第9のマップデータを生成可能であり、
前記複数の第7のマップデータにおける画素値の前記配置パターンは、前記第1の配置パターンおよび前記第2の配置パターンを含む
前記(7)に記載の画像処理装置。
(12)前記複数の第1のマップデータに対する前記補間処理の補間方法は、前記複数の第4のマップデータに対する前記補間処理の補間方法、および前記複数の第7のマップデータに対する前記補間処理の補間方法と同じである
前記(11)に記載の画像処理装置。
(13)前記第1の画像マップデータの前記複数の画素値は、第1の色の複数の画素値を含み、
前記第2の画像マップデータの前記複数の画素値は、第2の色の複数の画素値を含み、
前記第3の画像マップデータの前記複数の画素値は、第3の色の複数の画素値を含む
前記(11)または(12)に記載の画像処理装置。
(14)前記第1の画像マップデータにおける前記複数の画素値の数は、前記第2の画像マップデータにおける前記複数の画素値の数と異なる
前記(11)から(13)のいずれかに記載の画像処理装置。
(15)前記第1の画像マップデータの前記複数の画素値は、緑色の複数の画素値を含み、
前記第1の画像マップデータにおける2以上の画素値は、前記第2の画像マップデータにおける1つの画素値と対応づけられている
前記(14)に記載の画像処理装置。
(16)画像信号に基づいて前記第1の画像マップデータを生成する生成部をさらに備え、
前記第1の画像マップデータは、輝度マップデータである
前記(1)から(5)に記載の画像処理装置。
(17)前記画像分割処理部、前記補間処理部、および前記合成処理部が処理を行うかどうかを制御可能な処理制御部をさらに備えた
前記(1)から(16)に記載の画像処理装置。
(18)前記第1の画像マップデータまたは前記第3のマップデータに基づいて所定の信号処理を行うことが可能な処理部をさらに備え、
前記処理制御部は、第1の動作モードにおいて、前記第1の画像マップデータに基づいて前記処理部に前記所定の信号処理を行わせ、第2の動作モードにおいて、前記第3のマップデータに基づいて前記処理部に前記所定の信号処理を行わせることが可能である
前記(17)に記載の画像処理装置。
(19)前記処理制御部は、パラメータに基づいて、前記画像分割処理部、前記補間処理部、および前記合成処理部が処理を行うかどうかを制御可能である
前記(18)に記載の画像処理装置。
(20)前記第1の画像マップデータは、撮像部から供給され、
前記パラメータは、前記撮像部におけるゲイン値であり、
前記処理制御部は、前記ゲイン値が所定のゲイン値よりも高い場合に、前記画像分割処理部、前記補間処理部、および前記合成処理部が処理を行うように制御する
前記(19)に記載の画像処理装置。
(21)複数の画素値を含む第1の画像マップデータに基づいて、画素値の配置パターンが互いに異なり、互いに異なる位置に画素値が配置された複数の第1のマップデータを生成する画像分割処理と、
前記複数の第1のマップデータのそれぞれにおいて、補間処理を用いて、画素値が欠落した位置における画素値を求めることにより、前記複数の第1のマップデータに対応する複数の第2のマップデータを生成する補間処理と、
前記複数の第2のマップデータにおける互いに対応する位置の画素値に基づいて、その位置での画素値を生成することにより第3のマップデータを生成する合成処理と
を含む画像処理方法。
(22)複数の画素値を含む第1の画像マップデータを生成する撮像部と、
前記第1の画像マップデータに基づいて、画素値の配置パターンが互いに異なり、互いに異なる位置に画素値が配置された複数の第1のマップデータを生成することが可能な画像分割処理部と、
前記複数の第1のマップデータのそれぞれにおいて、補間処理を用いて、画素値が欠落した位置における画素値を求めることにより、前記複数の第1のマップデータに対応する複数の第2のマップデータを生成することが可能な補間処理部と、
前記複数の第2のマップデータにおける互いに対応する位置の画素値に基づいて、その位置での画素値を生成することにより第3のマップデータを生成することが可能な合成処理部と
を備えた撮像装置。
(23)前記撮像部は、所定の色配列で配列された複数の画素を有し、
前記配置パターンは、前記色配列に対応するパターンを有する
前記(22)に記載の撮像装置。
Claims (20)
- 複数の画素値を含む第1の画像マップデータに基づいて、画素値の配置パターンが互いに異なり、互いに異なる位置に画素値が配置された複数の第1のマップデータを生成可能な画像分割処理部と、
前記複数の第1のマップデータのそれぞれにおいて、補間処理を用いて、画素値が欠落した位置における画素値を求めることにより、前記複数の第1のマップデータに対応する複数の第2のマップデータを生成可能な補間処理部と、
前記複数の第2のマップデータにおける互いに対応する位置の画素値に基づいて、その位置での画素値を生成することにより第3のマップデータを生成可能な合成処理部と
を備えた画像処理装置。 - 前記配置パターンは、市松模様パターンである
請求項1に記載の画像処理装置。 - 前記第1の画像マップデータに基づいて前記補間処理の処理方法を決定可能である補間制御部をさらに備えた
請求項1に記載の画像処理装置。 - 前記補間制御部は、前記第1の画像マップデータに基づいて、前記補間処理における補間方向を決定することにより、前記処理方法を決定可能である
請求項3に記載の画像処理装置。 - 前記補間制御部は、前記第1の画像マップデータに基づいて空間周波数情報を求め、この空間周波数情報に基づいて前記処理方法を決定することが可能である
請求項3に記載の画像処理装置。 - 前記補間制御部は、前記第1の画像マップデータ、第2の画像マップデータ、および第3の画像マップデータに基づいて合成マップデータを生成し、前記合成マップデータに基づいて前記補間処理の処理方法を決定可能することが可能である
請求項3に記載の画像処理装置。 - 前記画像分割処理部は、さらに、複数の画素値を含む第2の画像マップデータに基づいて、画素値の配置パターンが互いに異なり、互いに異なる位置に画素値が配置された複数の第4のマップデータを生成可能であり、
前記補間処理部は、前記複数の第4のマップデータのそれぞれにおいて、前記補間処理を用いて、画素値が欠落した位置における画素値を求めることにより、前記複数の第4のマップデータに対応する複数の第5のマップデータを生成可能であり、
前記複数の第1のマップデータにおける画素値の前記配置パターンは、第1の配置パターンおよび第2の配置パターンを含み、
前記複数の第4のマップデータにおける画素値の前記配置パターンは、前記第1の配置パターンおよび前記第2の配置パターンを含む
請求項1に記載の画像処理装置。 - 前記第1の画像マップデータの前記複数の画素値は、第1の色の複数の画素値を含み、
前記第2の画像マップデータの前記複数の画素値は、第2の色の複数の画素値および第3の色の複数の画素値を含む
請求項7に記載の画像処理装置。 - 前記第1の画像マップデータの前記複数の画素値は、第1の色の複数の画素値を含み、
前記第2の画像マップデータの前記複数の画素値は、第2の色の複数の画素値、第3の色の複数の画素値、および第4の色の複数の画素値を含む
請求項7に記載の画像処理装置。 - 前記合成処理部は、前記複数の第5のマップデータにおける互いに対応する位置の画素値に基づいて、その位置での画素値を生成することにより第6のマップデータを生成可能であり、
前記画像分割処理部は、さらに、複数の画素値を含む第3の画像マップデータに基づいて、画素値の配置パターンが互いに異なり、互いに異なる位置に画素値が配置された複数の第7のマップデータを生成可能であり、
前記補間処理部は、前記複数の第7のマップデータのそれぞれにおいて、前記補間処理を用いて、画素値が欠落した位置における画素値を求めることにより、前記複数の第7のマップデータに対応する複数の第8のマップデータを生成可能であり、
前記合成処理部は、前記複数の第8のマップデータにおける互いに対応する位置の画素値に基づいて、その位置での画素値を生成することにより第9のマップデータを生成可能であり、
前記複数の第7のマップデータにおける画素値の前記配置パターンは、前記第1の配置パターンおよび前記第2の配置パターンを含む
請求項7に記載の画像処理装置。 - 前記第1の画像マップデータの前記複数の画素値は、第1の色の複数の画素値を含み、
前記第2の画像マップデータの前記複数の画素値は、第2の色の複数の画素値を含み、
前記第3の画像マップデータの前記複数の画素値は、第3の色の複数の画素値を含む
請求項10に記載の画像処理装置。 - 前記第1の画像マップデータにおける前記複数の画素値の数は、前記第2の画像マップデータにおける前記複数の画素値の数と異なる
請求項10に記載の画像処理装置。 - 前記第1の画像マップデータの前記複数の画素値は、緑色の複数の画素値を含み、
前記第1の画像マップデータにおける2以上の画素値は、前記第2の画像マップデータにおける1つの画素値と対応づけられている
請求項12に記載の画像処理装置。 - 画像信号に基づいて前記第1の画像マップデータを生成する生成部をさらに備え、
前記第1の画像マップデータは、輝度マップデータである
請求項1に記載の画像処理装置。 - 前記画像分割処理部、前記補間処理部、および前記合成処理部が処理を行うかどうかを制御可能な処理制御部をさらに備えた
請求項1に記載の画像処理装置。 - 前記第1の画像マップデータまたは前記第3のマップデータに基づいて所定の信号処理を行うことが可能な処理部をさらに備え、
前記処理制御部は、第1の動作モードにおいて、前記第1の画像マップデータに基づいて前記処理部に前記所定の信号処理を行わせ、第2の動作モードにおいて、前記第3のマップデータに基づいて前記処理部に前記所定の信号処理を行わせることが可能である
請求項15に記載の画像処理装置。 - 前記処理制御部は、パラメータに基づいて、前記画像分割処理部、前記補間処理部、および前記合成処理部が処理を行うかどうかを制御可能である
請求項16に記載の画像処理装置。 - 前記第1の画像マップデータは、撮像部から供給され、
前記パラメータは、前記撮像部におけるゲイン値であり、
前記処理制御部は、前記ゲイン値が所定のゲイン値よりも高い場合に、前記画像分割処理部、前記補間処理部、および前記合成処理部が処理を行うように制御する
請求項17に記載の画像処理装置。 - 複数の画素値を含む第1の画像マップデータに基づいて、画素値の配置パターンが互いに異なり、互いに異なる位置に画素値が配置された複数の第1のマップデータを生成する画像分割処理と、
前記複数の第1のマップデータのそれぞれにおいて、補間処理を用いて、画素値が欠落した位置における画素値を求めることにより、前記複数の第1のマップデータに対応する複数の第2のマップデータを生成する補間処理と、
前記複数の第2のマップデータにおける互いに対応する位置の画素値に基づいて、その位置での画素値を生成することにより第3のマップデータを生成する合成処理と
を含む画像処理方法。 - 複数の画素値を含む第1の画像マップデータを生成する撮像部と、
前記第1の画像マップデータに基づいて、画素値の配置パターンが互いに異なり、互いに異なる位置に画素値が配置された複数の第1のマップデータを生成することが可能な画像分割処理部と、
前記複数の第1のマップデータのそれぞれにおいて、補間処理を用いて、画素値が欠落した位置における画素値を求めることにより、前記複数の第1のマップデータに対応する複数の第2のマップデータを生成することが可能な補間処理部と、
前記複数の第2のマップデータにおける互いに対応する位置の画素値に基づいて、その位置での画素値を生成することにより第3のマップデータを生成することが可能な合成処理部と
を備えた撮像装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2023014212A JP7521023B2 (ja) | 2018-02-09 | 2023-02-01 | 画像処理装置、画像処理方法、および撮像装置 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018022143 | 2018-02-09 | ||
JP2018022143 | 2018-02-09 | ||
PCT/JP2019/002984 WO2019155944A1 (ja) | 2018-02-09 | 2019-01-29 | 画像処理装置、画像処理方法、および撮像装置 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023014212A Division JP7521023B2 (ja) | 2018-02-09 | 2023-02-01 | 画像処理装置、画像処理方法、および撮像装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019155944A1 true JPWO2019155944A1 (ja) | 2021-01-28 |
JP7225131B2 JP7225131B2 (ja) | 2023-02-20 |
Family
ID=67549406
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019570697A Active JP7225131B2 (ja) | 2018-02-09 | 2019-01-29 | 画像処理装置、画像処理方法、および撮像装置 |
Country Status (7)
Country | Link |
---|---|
US (2) | US11665440B2 (ja) |
JP (1) | JP7225131B2 (ja) |
KR (1) | KR102666651B1 (ja) |
CN (4) | CN115460385A (ja) |
DE (1) | DE112019000735T5 (ja) |
TW (1) | TWI785193B (ja) |
WO (1) | WO2019155944A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI785193B (zh) * | 2018-02-09 | 2022-12-01 | 日商索尼半導體解決方案公司 | 圖像處理裝置、圖像處理方法、及攝像裝置 |
JP7437957B2 (ja) | 2020-02-06 | 2024-02-26 | ソニーセミコンダクタソリューションズ株式会社 | 受光素子、固体撮像装置及び電子機器 |
JP2023010159A (ja) * | 2021-07-09 | 2023-01-20 | 株式会社ソシオネクスト | 画像処理装置および画像処理方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007221423A (ja) * | 2006-02-16 | 2007-08-30 | Matsushita Electric Ind Co Ltd | 撮像装置 |
WO2011067850A1 (ja) * | 2009-12-04 | 2011-06-09 | キヤノン株式会社 | 画像処理装置 |
US20130242133A1 (en) * | 2012-03-08 | 2013-09-19 | Aptina Imaging Corporation | Systems and methods for generating interpolated high-dynamic-range images |
WO2014020970A1 (ja) * | 2012-07-31 | 2014-02-06 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
JP2015019293A (ja) * | 2013-07-11 | 2015-01-29 | ソニー株式会社 | 固体撮像装置および方法、並びに、電子機器 |
JP2017200157A (ja) * | 2016-05-01 | 2017-11-02 | 株式会社コンフォートビジョン研究所 | 高解像度立体撮像装置 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07111586A (ja) * | 1993-10-08 | 1995-04-25 | Fuji Xerox Co Ltd | 画像処理装置 |
JP2009182733A (ja) * | 2008-01-30 | 2009-08-13 | Kyocera Corp | 画像データ生成方法および画像データ生成装置、並びに情報コード読取装置 |
CN101369308B (zh) * | 2008-10-09 | 2011-06-22 | 上海交通大学 | 基于视觉选择注意和像素依赖的无监督变化检测方法 |
JP5509846B2 (ja) | 2009-12-28 | 2014-06-04 | ソニー株式会社 | 固体撮像装置とその製造方法、及び電子機器 |
CN102663719B (zh) * | 2012-03-19 | 2014-06-04 | 西安电子科技大学 | 基于非局部均值的Bayer型CFA图像去马赛克方法 |
CN104620572B (zh) * | 2012-09-19 | 2016-06-29 | 富士胶片株式会社 | 摄像装置及其控制方法 |
JP2014086889A (ja) * | 2012-10-24 | 2014-05-12 | Toshiba Corp | 固体撮像装置 |
CN103793904B (zh) * | 2012-10-29 | 2016-12-21 | 深圳先进技术研究院 | 图像配准装置及其图像配准的方法 |
CN105744256B (zh) * | 2016-03-31 | 2017-12-05 | 天津大学 | 基于图谱视觉显著的立体图像质量客观评价方法 |
TWI785193B (zh) * | 2018-02-09 | 2022-12-01 | 日商索尼半導體解決方案公司 | 圖像處理裝置、圖像處理方法、及攝像裝置 |
-
2019
- 2019-01-25 TW TW108102829A patent/TWI785193B/zh active
- 2019-01-29 KR KR1020207019007A patent/KR102666651B1/ko active IP Right Grant
- 2019-01-29 CN CN202210968148.9A patent/CN115460385A/zh active Pending
- 2019-01-29 CN CN202210966357.XA patent/CN115460384A/zh active Pending
- 2019-01-29 JP JP2019570697A patent/JP7225131B2/ja active Active
- 2019-01-29 US US16/966,138 patent/US11665440B2/en active Active
- 2019-01-29 WO PCT/JP2019/002984 patent/WO2019155944A1/ja active Application Filing
- 2019-01-29 CN CN202210968588.4A patent/CN115460387B/zh active Active
- 2019-01-29 CN CN201980007286.7A patent/CN111543053B/zh active Active
- 2019-01-29 DE DE112019000735.1T patent/DE112019000735T5/de active Pending
-
2023
- 2023-04-17 US US18/135,301 patent/US20230254596A1/en active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007221423A (ja) * | 2006-02-16 | 2007-08-30 | Matsushita Electric Ind Co Ltd | 撮像装置 |
WO2011067850A1 (ja) * | 2009-12-04 | 2011-06-09 | キヤノン株式会社 | 画像処理装置 |
US20130242133A1 (en) * | 2012-03-08 | 2013-09-19 | Aptina Imaging Corporation | Systems and methods for generating interpolated high-dynamic-range images |
WO2014020970A1 (ja) * | 2012-07-31 | 2014-02-06 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
JP2015019293A (ja) * | 2013-07-11 | 2015-01-29 | ソニー株式会社 | 固体撮像装置および方法、並びに、電子機器 |
JP2017200157A (ja) * | 2016-05-01 | 2017-11-02 | 株式会社コンフォートビジョン研究所 | 高解像度立体撮像装置 |
Also Published As
Publication number | Publication date |
---|---|
US20230254596A1 (en) | 2023-08-10 |
CN115460384A (zh) | 2022-12-09 |
US20210029331A1 (en) | 2021-01-28 |
JP2023061999A (ja) | 2023-05-02 |
CN115460387A (zh) | 2022-12-09 |
TW202310606A (zh) | 2023-03-01 |
TW201937916A (zh) | 2019-09-16 |
US11665440B2 (en) | 2023-05-30 |
CN115460385A (zh) | 2022-12-09 |
CN115460387B (zh) | 2024-04-19 |
TWI785193B (zh) | 2022-12-01 |
WO2019155944A1 (ja) | 2019-08-15 |
KR20200120608A (ko) | 2020-10-21 |
KR102666651B1 (ko) | 2024-05-20 |
JP7225131B2 (ja) | 2023-02-20 |
CN111543053A (zh) | 2020-08-14 |
DE112019000735T5 (de) | 2020-10-22 |
CN111543053B (zh) | 2022-09-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020050289A1 (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
WO2020230675A1 (ja) | 撮像素子および電子機器 | |
US20230254596A1 (en) | Image processor, image processing method, and imaging device | |
WO2018180569A1 (ja) | 固体撮像装置、および電子機器 | |
US11936979B2 (en) | Imaging device | |
US11750932B2 (en) | Image processing apparatus, image processing method, and electronic apparatus | |
JP2018113637A (ja) | 固体撮像素子および電子機器 | |
US10893224B2 (en) | Imaging element and electronic device | |
TWI847334B (zh) | 圖像處理裝置、圖像處理方法、及攝像裝置 | |
JP7034925B2 (ja) | 固体撮像装置および撮像方法 | |
JP2021064721A (ja) | 固体撮像装置及び電子機器 | |
WO2022196210A1 (ja) | 撮像装置、撮像方法及び電子機器 | |
WO2021090727A1 (ja) | 撮像装置及び電子機器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211210 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211210 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220823 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220902 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221108 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221220 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230110 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230208 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7225131 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |