JP2017101934A - 処理装置、処理システム、撮像装置、処理方法、処理プログラムおよび記録媒体 - Google Patents
処理装置、処理システム、撮像装置、処理方法、処理プログラムおよび記録媒体 Download PDFInfo
- Publication number
- JP2017101934A JP2017101934A JP2015232849A JP2015232849A JP2017101934A JP 2017101934 A JP2017101934 A JP 2017101934A JP 2015232849 A JP2015232849 A JP 2015232849A JP 2015232849 A JP2015232849 A JP 2015232849A JP 2017101934 A JP2017101934 A JP 2017101934A
- Authority
- JP
- Japan
- Prior art keywords
- wavelength
- surface normal
- luminance information
- information
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/71—Circuitry for evaluating the brightness variation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/133—Equalising the characteristics of different image components, e.g. their average brightness or colour balance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/586—Depth or shape recovery from multiple images from multiple light sources, e.g. photometric stereo
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/15—Processing image signals for colour aspects of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/204—Image signal generators using stereoscopic image cameras
- H04N13/254—Image signal generators using stereoscopic image cameras in combination with electromagnetic radiation sources for illuminating objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/257—Colour aspects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10141—Special mode during image acquisition
- G06T2207/10152—Varying illumination
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N2013/0074—Stereoscopic image analysis
- H04N2013/0077—Colour aspects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Electromagnetism (AREA)
- Image Processing (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】被写体を照明する光源の配置を互いに異ならせて撮像された複数の撮像画像ごとに、波長ごとの輝度情報を取得する輝度情報取得部と、輝度情報に基づいて、撮像画像の領域ごとに面法線情報を取得する際に使用する波長を設定する波長設定部と、を有する。
【選択図】図3
Description
104b 波長設定部
Claims (18)
- 被写体を照明する光源の配置を互いに異ならせて撮像された複数の撮像画像ごとに、波長ごとの輝度情報を取得する輝度情報取得部と、
前記輝度情報に基づいて、撮像画像の領域ごとに面法線情報を取得する際に使用する波長を設定する波長設定部と、を有することを特徴とする処理装置。 - 前記使用する波長の輝度情報に基づいて前記面法線情報を取得する面法線取得部を更に有することを特徴とする請求項1に記載の処理装置。
- 前記波長設定部は、前記輝度情報の大きさに基づいて波長ごとの重みを設定し、
前記面法線取得部は、前記重みを用いて算出される波長ごとの輝度情報の線形和に基づいて前記面法線情報を取得することを特徴とする請求項2に記載の処理装置。 - 前記波長設定部は、前記輝度情報の大きさに基づいて、前記使用する波長を設定することを特徴とする請求項1から3のいずれか1項に記載の処理装置。
- 前記波長設定部は、前記領域内で前記輝度情報の大きさが最大である波長を前記使用する波長として設定することを特徴とする請求項4に記載の処理装置。
- 前記波長設定部は、前記領域内で前記輝度情報の大きさが所定値より大きい波長を前記使用する波長として設定することを特徴とする請求項4に記載の処理装置。
- 前記所定値は、ノイズ特性と光源数に基づいて決定されることを特徴とする請求項6に記載の処理装置。
- 被写体を照明する光源の配置を互いに異ならせて撮像された複数の撮像画像ごとに、波長ごとの輝度情報を取得する輝度情報取得部と、
前記輝度情報に基づいて、撮像画像の領域ごとに面法線情報を取得する際に使用する波長を設定する波長設定部と、
前記使用する波長の輝度情報に基づいて前記面法線情報を取得する面法線取得部と、を有することを特徴とする処理システム。 - 互いに位置の異なる3つ以上の光源を備える光源部を更に有することを特徴とする請求項8に記載の処理システム。
- 被写体を撮像する撮像部と、
前記撮像部により前記被写体を照明する光源の配置を互いに異ならせて撮像される複数の撮像画像ごとに、波長ごとの輝度情報を取得する輝度情報取得部と、
前記輝度情報に基づいて、撮像画像の領域ごとに面法線情報を取得する際に使用する波長を設定する波長設定部と、
前記使用する波長の輝度情報に基づいて前記面法線情報を取得する面法線取得部と、を有することを特徴とする撮像装置。 - 互いに位置の異なる3つ以上の光源を備える光源部を更に有することを特徴とする請求項10に記載の撮像装置。
- 前記撮像部は、ベイヤー配列の撮像素子を備えることを特徴とする請求項10または11に記載の撮像装置。
- 前記面法線取得部は、前記使用する波長と異なる波長に対応する第1画素の近傍に位置する単一または複数の第2画素における面法線情報に基づいて、前記第1画素の面法線情報を取得することを特徴とする請求項12に記載の撮像装置。
- 被写体を照明する光源の配置を互いに異ならせて撮像された複数の撮像画像ごとに、波長ごとの輝度情報を取得するステップと、
前記輝度情報に基づいて、撮像画像の領域ごとに面法線情報を取得する際に使用する波長を設定するステップと、を有することを特徴とする処理方法。 - 前記使用する波長の前記輝度情報に基づいて前記面法線情報を取得するステップを更に有することを特徴とする請求項14に記載の処理方法。
- 前記輝度情報に基づいて前記面法線情報を算出するステップと、
前記使用する波長に基づいて前記面法線情報から使用する面法線情報を取得するステップと、を更に有することを特徴とする請求項14に記載の処理方法。 - コンピュータを請求項1から7のいずれか1項に記載の処理装置として機能させるためのプログラム。
- 請求項17に記載のプログラムを記録したコンピュータが読み取り可能な記録媒体。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015232849A JP6679289B2 (ja) | 2015-11-30 | 2015-11-30 | 処理装置、処理システム、撮像装置、処理方法、処理プログラムおよび記録媒体 |
EP16002507.8A EP3174011B1 (en) | 2015-11-30 | 2016-11-24 | Processing apparatus, processing system, image pickup apparatus, processing method, and processing program |
CN201611059201.4A CN106817543B (zh) | 2015-11-30 | 2016-11-25 | 处理装置、处理***、图像拾取装置和处理方法 |
US15/361,684 US10321113B2 (en) | 2015-11-30 | 2016-11-28 | Processing apparatus, processing system, image pickup apparatus, processing method, and non-transitory computer-readable storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015232849A JP6679289B2 (ja) | 2015-11-30 | 2015-11-30 | 処理装置、処理システム、撮像装置、処理方法、処理プログラムおよび記録媒体 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2017101934A true JP2017101934A (ja) | 2017-06-08 |
JP2017101934A5 JP2017101934A5 (ja) | 2019-01-17 |
JP6679289B2 JP6679289B2 (ja) | 2020-04-15 |
Family
ID=57406026
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015232849A Active JP6679289B2 (ja) | 2015-11-30 | 2015-11-30 | 処理装置、処理システム、撮像装置、処理方法、処理プログラムおよび記録媒体 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10321113B2 (ja) |
EP (1) | EP3174011B1 (ja) |
JP (1) | JP6679289B2 (ja) |
CN (1) | CN106817543B (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021148520A (ja) * | 2020-03-18 | 2021-09-27 | 株式会社東芝 | 光学検査装置 |
WO2022113934A1 (ja) * | 2020-11-26 | 2022-06-02 | 株式会社堀場製作所 | 表面粗さ測定装置、及び、表面粗さ測定方法 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230342963A1 (en) * | 2019-12-13 | 2023-10-26 | Sony Group Corporation | Imaging device, information processing device, imaging method, and information processing method |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09166425A (ja) * | 1995-12-19 | 1997-06-24 | Oki Electric Ind Co Ltd | 被写体の傾き検出方法 |
WO2007108041A1 (ja) * | 2006-03-15 | 2007-09-27 | Matsushita Electric Industrial Co., Ltd. | 画像変換方法、画像変換装置、サーバークライアントシステム、携帯機器およびプログラム |
JP2014035261A (ja) * | 2012-08-08 | 2014-02-24 | Sony Corp | 情報処理方法、情報処理装置、プログラム、撮像装置、検査方法、検査装置、及び基板の製造方法 |
JP2015059849A (ja) * | 2013-09-19 | 2015-03-30 | 凸版印刷株式会社 | 色と三次元形状の計測方法及び装置 |
US9137511B1 (en) * | 2011-12-15 | 2015-09-15 | Rawles Llc | 3D modeling with depth camera and surface normals |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW200727193A (en) * | 2006-01-11 | 2007-07-16 | Benq Corp | Image processing device and image processing method thereof |
JP2009193429A (ja) * | 2008-02-15 | 2009-08-27 | Mitsubishi Electric Corp | 画像読取装置 |
US8107721B2 (en) * | 2008-05-29 | 2012-01-31 | Mitsubishi Electric Research Laboratories, Inc. | Method and system for determining poses of semi-specular objects |
JP2010122158A (ja) | 2008-11-21 | 2010-06-03 | Juki Corp | 物体表面法線ベクトルマップ作成方法 |
JP5635750B2 (ja) * | 2009-09-09 | 2014-12-03 | キヤノン株式会社 | 画像読取装置 |
WO2012011246A1 (ja) * | 2010-07-21 | 2012-01-26 | パナソニック株式会社 | 画像処理装置 |
JP5238098B2 (ja) * | 2010-11-30 | 2013-07-17 | パナソニック株式会社 | 画像処理装置および画像処理装置の作動方法 |
CN105023550B (zh) * | 2010-12-17 | 2017-07-11 | 杜比实验室特许公司 | 用于宽色域和高亮度的n 调制 |
WO2013031100A1 (ja) * | 2011-09-02 | 2013-03-07 | パナソニック株式会社 | 偏光撮像素子および内視鏡 |
-
2015
- 2015-11-30 JP JP2015232849A patent/JP6679289B2/ja active Active
-
2016
- 2016-11-24 EP EP16002507.8A patent/EP3174011B1/en active Active
- 2016-11-25 CN CN201611059201.4A patent/CN106817543B/zh active Active
- 2016-11-28 US US15/361,684 patent/US10321113B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09166425A (ja) * | 1995-12-19 | 1997-06-24 | Oki Electric Ind Co Ltd | 被写体の傾き検出方法 |
WO2007108041A1 (ja) * | 2006-03-15 | 2007-09-27 | Matsushita Electric Industrial Co., Ltd. | 画像変換方法、画像変換装置、サーバークライアントシステム、携帯機器およびプログラム |
US9137511B1 (en) * | 2011-12-15 | 2015-09-15 | Rawles Llc | 3D modeling with depth camera and surface normals |
JP2014035261A (ja) * | 2012-08-08 | 2014-02-24 | Sony Corp | 情報処理方法、情報処理装置、プログラム、撮像装置、検査方法、検査装置、及び基板の製造方法 |
JP2015059849A (ja) * | 2013-09-19 | 2015-03-30 | 凸版印刷株式会社 | 色と三次元形状の計測方法及び装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2021148520A (ja) * | 2020-03-18 | 2021-09-27 | 株式会社東芝 | 光学検査装置 |
JP7309640B2 (ja) | 2020-03-18 | 2023-07-18 | 株式会社東芝 | 光学検査装置 |
WO2022113934A1 (ja) * | 2020-11-26 | 2022-06-02 | 株式会社堀場製作所 | 表面粗さ測定装置、及び、表面粗さ測定方法 |
Also Published As
Publication number | Publication date |
---|---|
CN106817543B (zh) | 2020-03-27 |
CN106817543A (zh) | 2017-06-09 |
US20170155883A1 (en) | 2017-06-01 |
JP6679289B2 (ja) | 2020-04-15 |
EP3174011A2 (en) | 2017-05-31 |
US10321113B2 (en) | 2019-06-11 |
EP3174011B1 (en) | 2018-10-10 |
EP3174011A3 (en) | 2017-09-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9497397B1 (en) | Image sensor with auto-focus and color ratio cross-talk comparison | |
JP2020060599A (ja) | 撮像装置組立体、3次元形状測定装置及び動き検出装置、並びに、3次元形状の測定方法 | |
JP6556013B2 (ja) | 処理装置、処理システム、撮像装置、処理方法、プログラム、および記録媒体 | |
EP3270587A1 (en) | Image processing device, image processing method, and program | |
JP7179472B2 (ja) | 処理装置、処理システム、撮像装置、処理方法、プログラム、および、記録媒体 | |
JP2017150878A (ja) | 画像処理装置、撮像装置および画像処理プログラム | |
JP6679289B2 (ja) | 処理装置、処理システム、撮像装置、処理方法、処理プログラムおよび記録媒体 | |
JP6877936B2 (ja) | 処理装置、処理システム、撮像装置、処理方法、プログラム、および記録媒体 | |
JP2017102637A (ja) | 処理装置、処理システム、撮像装置、処理方法、プログラム、および記録媒体 | |
JP6671915B2 (ja) | 処理装置、処理システム、撮像装置、処理方法、プログラム、および記録媒体 | |
JP2017134561A (ja) | 画像処理装置、撮像装置および画像処理プログラム | |
JP2019200140A (ja) | 撮像装置、アクセサリ、処理装置、処理方法、および、プログラム | |
JP2020008687A (ja) | 制御装置、アクセサリ、撮像装置および撮像システム | |
JP7106259B2 (ja) | 画像処理装置、撮像装置、および画像処理方法 | |
JP2017161374A (ja) | 処理装置、処理システム、撮像装置、処理方法、プログラム、および記録媒体 | |
JP7118776B2 (ja) | 撮像装置、画像処理方法、画像処理プログラムおよび記録媒体 | |
JP2018054413A (ja) | 処理装置、処理システム、撮像装置、処理方法、プログラム、および記録媒体 | |
JP6862114B2 (ja) | 処理装置、処理システム、撮像装置、処理方法、プログラム、および記録媒体 | |
JP6910763B2 (ja) | 処理装置、処理システム、撮像装置、処理方法、プログラム、および記録媒体 | |
JP7309425B2 (ja) | 処理装置、処理システム、撮像装置、処理方法、および、プログラム | |
JP7490457B2 (ja) | 処理装置、処理システム、撮像装置、処理方法、およびプログラム | |
JP7508230B2 (ja) | 画像処理装置、画像処理システム、撮像装置および画像処理方法 | |
JP2020095454A (ja) | 処理装置、撮像装置、処理システム、処理方法、プログラム、および、記憶媒体 | |
JP2020173591A (ja) | 処理装置、処理システム、撮像装置、処理方法、および、プログラム | |
JP7210170B2 (ja) | 処理装置、処理システム、撮像装置、処理方法、プログラム、および、記録媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181127 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181127 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190925 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191001 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191128 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200218 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200318 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6679289 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |