JP6650309B2 - 距離計測装置 - Google Patents
距離計測装置 Download PDFInfo
- Publication number
- JP6650309B2 JP6650309B2 JP2016060249A JP2016060249A JP6650309B2 JP 6650309 B2 JP6650309 B2 JP 6650309B2 JP 2016060249 A JP2016060249 A JP 2016060249A JP 2016060249 A JP2016060249 A JP 2016060249A JP 6650309 B2 JP6650309 B2 JP 6650309B2
- Authority
- JP
- Japan
- Prior art keywords
- charge
- pixel
- sub
- row
- pixels
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000005259 measurement Methods 0.000 claims description 35
- 238000003384 imaging method Methods 0.000 claims description 23
- 238000001514 detection method Methods 0.000 claims description 11
- 230000003111 delayed effect Effects 0.000 claims description 4
- 238000000034 method Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000009825 accumulation Methods 0.000 description 6
- 238000002366 time-of-flight method Methods 0.000 description 3
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000004904 shortening Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005669 field effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/483—Details of pulse systems
- G01S7/486—Receivers
- G01S7/4861—Circuits for detection, sampling, integration or read-out
- G01S7/4863—Detector arrays, e.g. charge-transfer gates
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/08—Systems determining position data of a target for measuring distance only
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
- G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/42—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by switching between different modes of operation using different resolutions or aspect ratios, e.g. switching between interlaced and non-interlaced mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
- H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
- H04N25/75—Circuitry for providing, modifying or processing image signals from the pixel array
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
- H04N25/78—Readout circuits for addressed sensors, e.g. output amplifiers or A/D converters
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Radar, Positioning & Navigation (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Remote Sensing (AREA)
- Electromagnetism (AREA)
- Solid State Image Pick-Up Elements (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Measurement Of Optical Distance (AREA)
- Optical Radar Systems And Details Thereof (AREA)
Description
格子配列の複数の画素を有し、各画素ごとに入射光の強度に関係して生成した電荷の蓄積電荷量を外部から読出し可能にしている撮像素子と、
強度変調した変調光を前記撮像素子の撮像範囲に向けて出射する変調光出射部と、
前記変調光出射部が出射した出射変調光と該出射変調光が前記撮像範囲の測距対象に反射して前記撮像素子の画素に入射した反射変調光との位相差を、各画素について前記撮像素子から読出した前記蓄積電荷量に基づいて検出する位相差検出部と、
前記位相差検出部が検出した位相差に基づいて前記測距対象までの距離を測定する測距部とを備える距離計測装置であって、
各画素は、行方向に隣り合って配列された第1副画素及び第2副画素を有し、
期間の長さが前記出射変調光の1周期未満の等しい長さで、かつ期間の開始が前記出射変調光の周期の1/4ずつ順番に遅れる第1期間、第2期間、第3期間及び第4期間が設定され、
前記第1副画素は、入射光の強度に関係した電荷量の電荷を生成する第1電荷生成部と、該第1電荷生成部が前記第1期間に生成した電荷を蓄積する第1電荷蓄積部と、前記第1電荷生成部が前記第3期間に生成した電荷を蓄積する第3電荷蓄積部とを有し、
前記第2副画素は、入射光の強度に関係した電荷量の電荷を生成する第2電荷生成部と、該第2電荷生成部が前記第2期間に生成した電荷を蓄積する第2電荷蓄積部と、前記第2電荷生成部が前記第4期間に生成した電荷を蓄積する第4電荷蓄積部とを有し、
前記位相差検出部は、前記蓄積電荷量として、前記第1電荷蓄積部の蓄積電荷量、前記第2電荷蓄積部の蓄積電荷量、前記第3電荷蓄積部の蓄積電荷量、及び前記第4電荷蓄積部の蓄積電荷量を前記撮像素子から読出して、読み出した蓄積電荷量に基づいて前記位相差を検出し、
前記格子配列の各行には、2つの前記第1副画素が行方向に連続する第1行部分と2つの前記第2副画素が行方向に連続する第2行部分とが、行方向に交互に配列され、
各第1行部分における隣り合う第1副画素では、前記第1電荷蓄積部同士が接続状態及び非接続状態を切替可能の第1結線により接続されているとともに、前記第3電荷蓄積部同士が接続状態及び非接続状態を切替可能の第3結線により接続され、
前記第2行部分における隣り合う第2副画素では、前記第2電荷蓄積部同士が接続状態及び非接続状態を切替可能の第2結線により接続されているとともに、前記第4電荷蓄積部同士が接続状態及び非接続状態を切替可能の第4結線により接続されていることを特徴とする。
式(1):位相差φ=tan−1{(C1−C3)/(C2−C4)}
上式において、「tan」は正接(タンジェント)を意味し、「tan−1」とは逆正接(アークタンジェント)を意味する。C1〜C4の個々には、背景光由来の入射光に因る蓄積電荷量が含まれるが、差分C1−C3、及び差分C2−C4からは、背景光由来の入射光に因る影響が除去されている。
式(2):距離D=(光速×100ns×位相差φ(n,m))/(360°×2)
ただし、位相差φの単位は「°」とする。
Claims (3)
- 格子配列の複数の画素を有し、各画素ごとに入射光の強度に関係して生成した電荷の蓄積電荷量を外部から読出し可能にしている撮像素子と、
強度変調した変調光を前記撮像素子の撮像範囲に向けて出射する変調光出射部と、
前記変調光出射部が出射した出射変調光と該出射変調光が前記撮像範囲の測距対象に反射して前記撮像素子の画素に入射した反射変調光との位相差を、各画素について前記撮像素子から読出した前記蓄積電荷量に基づいて検出する位相差検出部と、
前記位相差検出部が検出した位相差に基づいて前記測距対象までの距離を測定する測距部とを備える距離計測装置であって、
各画素は、行方向に隣り合って配列された第1副画素及び第2副画素を有し、
期間の長さが前記出射変調光の1周期未満の等しい長さで、かつ期間の開始が前記出射変調光の周期の1/4ずつ順番に遅れる第1期間、第2期間、第3期間及び第4期間が設定され、
前記第1副画素は、入射光の強度に関係した電荷量の電荷を生成する第1電荷生成部と、該第1電荷生成部が前記第1期間に生成した電荷を蓄積する第1電荷蓄積部と、前記第1電荷生成部が前記第3期間に生成した電荷を蓄積する第3電荷蓄積部とを有し、
前記第2副画素は、入射光の強度に関係した電荷量の電荷を生成する第2電荷生成部と、該第2電荷生成部が前記第2期間に生成した電荷を蓄積する第2電荷蓄積部と、前記第2電荷生成部が前記第4期間に生成した電荷を蓄積する第4電荷蓄積部とを有し、
前記位相差検出部は、前記蓄積電荷量として、前記第1電荷蓄積部の蓄積電荷量、前記第2電荷蓄積部の蓄積電荷量、前記第3電荷蓄積部の蓄積電荷量、及び前記第4電荷蓄積部の蓄積電荷量を前記撮像素子から読出して、読み出した蓄積電荷量に基づいて前記位相差を検出し、
前記格子配列の各行には、2つの前記第1副画素が行方向に連続する第1行部分と2つの前記第2副画素が行方向に連続する第2行部分とが、行方向に交互に配列され、
各第1行部分における隣り合う第1副画素では、前記第1電荷蓄積部同士が接続状態及び非接続状態を切替可能の第1結線により接続されているとともに、前記第3電荷蓄積部同士が接続状態及び非接続状態を切替可能の第3結線により接続され、
前記第2行部分における隣り合う第2副画素では、前記第2電荷蓄積部同士が接続状態及び非接続状態を切替可能の第2結線により接続されているとともに、前記第4電荷蓄積部同士が接続状態及び非接続状態を切替可能の第4結線により接続されていることを特徴とする距離計測装置。 - 請求項1の距離計測装置において、
前記格子配列は、前記第1副画素のみの列と、前記第2副画素のみの列とから成り、
行方向に1つの前記第1行部分と1つの前記第2行部分とが隣り合っているものが列方向に2つ連続する副画素の集合が1つの副画素群として設定され、
各副画素群において、前記第1結線同士が接続状態及び非接続状態を切替可能の第5結線により接続され、前記第2結線同士が接続状態及び非接続状態を切替可能の第6結線により接続され、前記第3結線同士が接続状態及び非接続状態を切替可能の第7結線により接続され、前記第4結線同士が接続状態及び非接続状態を切替可能の第8結線により接続されていることを特徴とする距離計測装置。 - 請求項2の距離計測装置において、
各副画素は、前記第1電荷生成部又は前記第2電荷生成部が配置される第1領域と、前記第1電荷蓄積部及び前記第3電荷蓄積部と前記第2電荷蓄積部及び前記第4電荷蓄積部とのいずれかが配置される第2領域とに列方向に区分され、
各副画素群において、列方向に隣り合う副画素同士は、前記第2領域同士を列方向に隣り合わせていることを特徴とする距離計測装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016060249A JP6650309B2 (ja) | 2016-03-24 | 2016-03-24 | 距離計測装置 |
US15/434,550 US10101452B2 (en) | 2016-03-24 | 2017-02-16 | Distance measuring device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016060249A JP6650309B2 (ja) | 2016-03-24 | 2016-03-24 | 距離計測装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017173158A JP2017173158A (ja) | 2017-09-28 |
JP6650309B2 true JP6650309B2 (ja) | 2020-02-19 |
Family
ID=59898521
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016060249A Active JP6650309B2 (ja) | 2016-03-24 | 2016-03-24 | 距離計測装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10101452B2 (ja) |
JP (1) | JP6650309B2 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10698108B2 (en) * | 2017-05-25 | 2020-06-30 | Texas Instruments Incorporated | Receive signal beam steering and detector for an optical distance measurement system |
JP2019083266A (ja) * | 2017-10-31 | 2019-05-30 | スタンレー電気株式会社 | 撮像装置及び撮像素子 |
US10948596B2 (en) * | 2018-01-24 | 2021-03-16 | Sony Semiconductor Solutions Corporation | Time-of-flight image sensor with distance determination |
JP2019203741A (ja) | 2018-05-22 | 2019-11-28 | スタンレー電気株式会社 | Tof方式測距装置 |
US10791286B2 (en) | 2018-12-13 | 2020-09-29 | Facebook Technologies, Llc | Differentiated imaging using camera assembly with augmented pixels |
US10939089B1 (en) * | 2018-12-13 | 2021-03-02 | Facebook Technologies, Llc | Calibration apparatus for time of flight depth sensor |
US10791282B2 (en) | 2018-12-13 | 2020-09-29 | Fenwick & West LLP | High dynamic range camera assembly with augmented pixels |
US10855896B1 (en) * | 2018-12-13 | 2020-12-01 | Facebook Technologies, Llc | Depth determination using time-of-flight and camera assembly with augmented pixels |
US20220238579A1 (en) * | 2019-05-21 | 2022-07-28 | Sony Semiconductor Solutions Corporation | Simultaneous capture of multiple phases for imaging devices |
US10902623B1 (en) | 2019-11-19 | 2021-01-26 | Facebook Technologies, Llc | Three-dimensional imaging with spatial and temporal coding for depth camera assembly |
US11297270B2 (en) | 2019-12-26 | 2022-04-05 | Sony Corporation | Readout circuit and method for time-of-flight image sensor |
US11194160B1 (en) | 2020-01-21 | 2021-12-07 | Facebook Technologies, Llc | High frame rate reconstruction with N-tap camera sensor |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003051988A (ja) * | 2001-08-07 | 2003-02-21 | Inst Of Physical & Chemical Res | 固体撮像素子 |
JP5395323B2 (ja) | 2006-09-29 | 2014-01-22 | ブレインビジョン株式会社 | 固体撮像素子 |
EP2154879A1 (en) | 2008-08-13 | 2010-02-17 | Thomson Licensing | CMOS image sensor with selectable hard-wired binning |
JP2010219437A (ja) * | 2009-03-18 | 2010-09-30 | Canon Inc | 固体撮像装置 |
US8605177B2 (en) * | 2009-09-16 | 2013-12-10 | Altasens, Inc. | Image sensor with wide dynamic range |
KR101198249B1 (ko) | 2010-07-07 | 2012-11-07 | 에스케이하이닉스 주식회사 | 이미지센서의 컬럼 회로 및 픽셀 비닝 회로 |
JP5864990B2 (ja) * | 2011-10-03 | 2016-02-17 | キヤノン株式会社 | 固体撮像装置およびカメラ |
JP6026102B2 (ja) * | 2011-12-07 | 2016-11-16 | ソニーセミコンダクタソリューションズ株式会社 | 固体撮像素子および電子機器 |
JP2013157883A (ja) * | 2012-01-31 | 2013-08-15 | Sony Corp | 固体撮像素子およびカメラシステム |
US9686485B2 (en) | 2014-05-30 | 2017-06-20 | Apple Inc. | Pixel binning in an image sensor |
-
2016
- 2016-03-24 JP JP2016060249A patent/JP6650309B2/ja active Active
-
2017
- 2017-02-16 US US15/434,550 patent/US10101452B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US10101452B2 (en) | 2018-10-16 |
JP2017173158A (ja) | 2017-09-28 |
US20170276789A1 (en) | 2017-09-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6650309B2 (ja) | 距離計測装置 | |
US10690755B2 (en) | Solid-state imaging device having increased distance measurement accuracy and increased distance measurement range | |
US9787912B2 (en) | Image capture device | |
US11726185B2 (en) | Image sensor for determining a three-dimensional image and method for determining a three-dimensional image | |
US11378690B2 (en) | Time of flight sensor, a three-dimensional imaging device using the same, and a method for driving the three-dimensional imaging device | |
US9081095B2 (en) | Range image sensor | |
JP5395323B2 (ja) | 固体撮像素子 | |
US11276719B2 (en) | Solid-state imaging device and distance-measuring imaging device | |
WO2017022219A1 (ja) | 固体撮像装置の駆動方法 | |
JPWO2017006546A1 (ja) | 距離測定装置および距離画像合成方法 | |
KR20140138625A (ko) | 거리 센서 및 거리 화상 센서 | |
US9247126B2 (en) | Image pickup device and focus detection apparatus | |
US11054522B2 (en) | Distance measuring device | |
JP2013195344A (ja) | 飛行時間型距離センサ | |
JP7383542B2 (ja) | 光検出器及び距離計測装置 | |
US20150276922A1 (en) | Distance sensor and distance image sensor | |
US11950008B2 (en) | Image sensing device which outputs plural clock signals through respective plural output terminals | |
US9053998B2 (en) | Range sensor and range image sensor | |
JP6366325B2 (ja) | 撮像システム | |
US20110194006A1 (en) | Solid-state image pickup apparatus | |
JP7508822B2 (ja) | 距離計測装置及び距離計測方法 | |
JP2024041961A (ja) | 距離画像撮像装置、及び距離画像撮像方法 | |
JP2021148745A (ja) | 距離計測装置及び距離計測方法 | |
JP2013064647A (ja) | 空間情報検出装置 | |
JP2015201686A (ja) | 撮像システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200107 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191226 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200120 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6650309 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |