JP2015119395A - 情報処理装置、情報処理方法およびプログラム - Google Patents
情報処理装置、情報処理方法およびプログラム Download PDFInfo
- Publication number
- JP2015119395A JP2015119395A JP2013262756A JP2013262756A JP2015119395A JP 2015119395 A JP2015119395 A JP 2015119395A JP 2013262756 A JP2013262756 A JP 2013262756A JP 2013262756 A JP2013262756 A JP 2013262756A JP 2015119395 A JP2015119395 A JP 2015119395A
- Authority
- JP
- Japan
- Prior art keywords
- information
- light ray
- unit
- data
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000010365 information processing Effects 0.000 title claims description 31
- 238000003672 processing method Methods 0.000 title claims 2
- 230000002194 synthesizing effect Effects 0.000 claims abstract description 8
- 238000006243 chemical reaction Methods 0.000 claims description 43
- 238000012545 processing Methods 0.000 claims description 26
- 230000009466 transformation Effects 0.000 claims description 13
- 229910052704 radon Inorganic materials 0.000 claims description 11
- SYUHGPGVQRZVTB-UHFFFAOYSA-N radon atom Chemical compound [Rn] SYUHGPGVQRZVTB-UHFFFAOYSA-N 0.000 claims description 11
- 238000009795 derivation Methods 0.000 claims description 3
- 238000003384 imaging method Methods 0.000 description 50
- 238000000034 method Methods 0.000 description 31
- 238000001514 detection method Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 13
- 239000013598 vector Substances 0.000 description 11
- 238000004364 calculation method Methods 0.000 description 10
- 238000005070 sampling Methods 0.000 description 9
- 230000015572 biosynthetic process Effects 0.000 description 6
- 230000010354 integration Effects 0.000 description 6
- 239000011159 matrix material Substances 0.000 description 6
- 238000003786 synthesis reaction Methods 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 5
- 238000013519 translation Methods 0.000 description 5
- 238000007796 conventional method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J1/00—Photometry, e.g. photographic exposure meter
- G01J1/42—Photometry, e.g. photographic exposure meter using electric radiation detectors
- G01J1/4257—Photometry, e.g. photographic exposure meter using electric radiation detectors applied to monitoring the characteristics of a beam, e.g. laser beam, headlamp beam
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J1/00—Photometry, e.g. photographic exposure meter
- G01J1/42—Photometry, e.g. photographic exposure meter using electric radiation detectors
- G01J1/4228—Photometry, e.g. photographic exposure meter using electric radiation detectors arrangements with two or more detectors, e.g. for sensitivity compensation
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Optics & Photonics (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
【解決手段】 情報処理装置が、複数の異なる視点位置にそれぞれ対応し、共通の被写体に関する情報を含む光線情報であって、被写体から対応する視点位置に入射される光線の方向と強度とを示す複数の光線情報を取得する取得手段と、前記複数の光線情報の少なくとも一つを座標変換し、前記座標変換した複数の光線情報を含む前記複数の光線情報を合成する合成手段とを有することを特徴とする情報処理装置。
【選択図】 図1
Description
本実施例では、LFデータを取得可能な撮像部を複数備えたカメラで取得されたLFデータを合成する場合について説明する。
本実施例では、上記の撮像部により複数のシーンについて得られたLFデータを、ライトフィールド座標(以下、LF座標とする)上で合成する。以下、その原理について説明する。まず、LF座標の定義について述べる。
次に、被写体のある1点から出た光線の集合が、LF座標上でどのようにマッピングされるのかを、図4を用いて説明する。平面401および平面402は三次元空間において仮想的に設置された互いに平行な仮想平面であり、それぞれu平面、x平面と呼ぶことにする。本来u平面401、x平面402は二次元平面であるが、ここでは図示の都合上一次元で表現する。
次に、同一の被写体を含む異なるシーンで取得されたLFデータを合成するにあたって、異なる2つのLFデータ間でマッチングを行う方法について説明する。図6は、視点の位置および向きが異なる二台のライトフィールドカメラ(LFカメラ)でLFデータを取得する例を示す図である。図6(a)はある被写体から射出される光線が、異なる二台のLFカメラにどのように入射されるかを示す図である。光線602および光線603は被写体601から射出された光線であり、光線602は、LFカメラ620の撮像面に平行なu平面604およびx平面605を通過する。また、光線603はLFカメラ621の撮像面に平行なu’平面606およびx’平面607を通過する。これらの光線をそれぞれ二次元のLF座標上にプロットしたものが図6(b)である。
以上が本実施例のカメラ100で行われるLFデータ合成処理の概要である。以下、本実施例の情報処理部110で行われる処理の詳細について、図7に示すフローチャートを参照して説明する。本実施例のROM113には図7のフローチャートに示すプログラムが格納されており、情報処理部110は、CPU111がそのプログラムを実行することで、以下のステップの処理を行う。
実施例1ではLFデータをスティッチする技術について説明したが、本実施例では、スティッチにより得られたLFデータを用いてリフォーカス画像を生成する処理について説明する。まず、LFデータからリフォーカス画像を生成する原理について述べる。
なお、本発明の実施形態は上記の実施例に限られるものではない。例えば実施例2のS1302で取得された直線の傾きから、式(11)に基づいて被写体の距離情報を求めるようにしてもよい。また、スティッチしたLFデータの画角内の全画素について距離情報を予め求めておき、その情報をリフォーカス処理に用いるようにするとより処理が高速化できる。また、リフォーカス画像を生成する方法は実施例2の方法に限られず、四次元のLFデータをフーリエ変換してそこからピント面に対応する二次元データを切り出して逆フーリエ変換する方法を用いてもよい。
103 取得部
107 座標変換部
108 合成部
110 情報処理部
Claims (13)
- 複数の異なる視点位置にそれぞれ対応し、共通の被写体に関する情報を含む光線情報であって、被写体から対応する視点位置に入射される光線の方向と強度とを示す複数の光線情報を取得する取得手段と、
前記複数の光線情報の少なくとも一つを座標変換し、前記座標変換した複数の光線情報を含む前記複数の光線情報を合成する合成手段とを有することを特徴とする情報処理装置。 - 前記複数の光線情報は、第一の視点位置に対応し、第一の座標系で定義される第一の光線情報と、前記第一の視点位置とは異なる第二の視点位置に対応し、前記第一の座標系とは異なる第二の座標系で定義される第二の光線情報とを含み、
前記合成手段は、前記第一の光線情報と前記第二の光線情報のうちの少なくとも一方を座標変換することで前記第一の光線情報と前記第二の光線情報の座標系を合わせ、前記座標系を合わせた前記第一の光線情報と前記第二の光線情報とを合成することを特徴とする請求項1に記載の情報処理装置。 - 前記座標変換で用いる変換パラメータを導出する導出手段を更に有し、
前記合成手段は、前記導出手段によって導出された変換パラメータに基づいて前記座標変換を行うことを特徴とする請求項2に記載の情報処理装置。 - 前記第一の光線情報および前記第二の光線情報の間で同一の被写体に対応する情報を特定する特定手段を更に有し、
前記導出手段は、前記特定された同一の被写体に対応する情報に基づいて、前記変換パラメータを導出することを特徴とする請求項3に記載の情報処理装置。 - 前記特定手段は、前記第一の座標系および前記第二の座標系において、同一の被写体に対応する直線を検出することで、前記同一の被写体に対応する情報を特定することを特徴とする請求項4に記載の情報処理装置。
- 前記特定手段は、前記第一の光線情報および前記第二の光線情報をラドン変換し、前記ラドン変換の結果に基づいて前記対応する直線を検出することを特徴とする請求項5に記載の情報処理装置。
- 前記座標変換された光線情報に補間処理を行う補間手段を更に有し、
前記合成手段は、前記補間手段により補間処理された光線情報を合成することを特徴とする請求項1乃至6のいずれか一項に記載の情報処理装置。 - 前記合成された光線情報から画像データを生成する生成手段を更に有することを特徴とする請求項1乃至7のいずれか一項に記載の情報処理装置。
- 前記生成手段は、前記合成手段により前記合成された光線情報を、所定の被写体に対応する直線に基づく方向に積分することで、前記画像データを生成することを特徴とする請求項8に記載の情報処理装置。
- 前記光線情報は、光線が通過する2つの平面において、前記光線が通過する点の座標を示した情報であることを特徴とする請求項1乃至9のいずれか一項に記載の画像処理装置。
- 前記光線情報は、光線が通過するある平面における前記光線の座標と、前記光線の方向を示した情報であることを特徴とする請求項1乃至10のいずれか一項に記載の画像処理装置。
- 共通の被写体を含む複数の異なるシーンにそれぞれ対応し、対応するシーンに含まれる被写体から入射される光線の方向と強度とを示す複数の光線情報を取得するステップと、
前記複数の光線情報の少なくとも一つを座標変換し、前記複数の光線情報を合成するステップとを含むことを特徴とする情報処理方法。 - コンピュータを請求項1乃至11のいずれか一項に記載の情報処理装置の各手段として機能させるプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013262756A JP6223169B2 (ja) | 2013-12-19 | 2013-12-19 | 情報処理装置、情報処理方法およびプログラム |
US14/571,696 US20150177062A1 (en) | 2013-12-19 | 2014-12-16 | Information processing apparatus, information processing method, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013262756A JP6223169B2 (ja) | 2013-12-19 | 2013-12-19 | 情報処理装置、情報処理方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015119395A true JP2015119395A (ja) | 2015-06-25 |
JP6223169B2 JP6223169B2 (ja) | 2017-11-01 |
Family
ID=53399681
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013262756A Active JP6223169B2 (ja) | 2013-12-19 | 2013-12-19 | 情報処理装置、情報処理方法およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US20150177062A1 (ja) |
JP (1) | JP6223169B2 (ja) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016116120A (ja) * | 2014-12-16 | 2016-06-23 | 日本電信電話株式会社 | 画像補正装置及びコンピュータプログラム |
JP2017063414A (ja) * | 2015-09-17 | 2017-03-30 | トムソン ライセンシングThomson Licensing | ライト・フィールドを表すデータを生成する方法および装置 |
KR20180053669A (ko) * | 2015-09-17 | 2018-05-23 | 톰슨 라이센싱 | 라이트 필드 데이터 표현 |
KR20180054737A (ko) * | 2015-09-17 | 2018-05-24 | 톰슨 라이센싱 | 픽셀 빔을 나타내는 데이터를 생성하기 위한 장치 및 방법 |
JP2018533066A (ja) * | 2015-10-09 | 2018-11-08 | ヴィスバイ カメラ コーポレイション | ホログラフィックライトフィールドイメージングデバイス及びその使用方法 |
JP2018537877A (ja) * | 2015-09-17 | 2018-12-20 | トムソン ライセンシングThomson Licensing | ライトフィールドコンテンツをエンコードする方法 |
JP2019511851A (ja) * | 2015-12-30 | 2019-04-25 | トムソン ライセンシングThomson Licensing | ピクセルビームを表すデータを生成する方法及び装置 |
JP7403163B2 (ja) | 2017-07-21 | 2023-12-22 | 无錫海斯凱尓医学技術有限公司 | 動き情報取得方法及び装置 |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3144885A1 (en) * | 2015-09-17 | 2017-03-22 | Thomson Licensing | Light field data representation |
EP3144887A1 (en) * | 2015-09-17 | 2017-03-22 | Thomson Licensing | A method and an apparatus for generating data representative of a pixel beam |
EP3144884A1 (en) * | 2015-09-17 | 2017-03-22 | Thomson Licensing | Light field data representation |
EP3188124A1 (en) * | 2015-12-30 | 2017-07-05 | Thomson Licensing | A method and an apparatus for generating data representative of a pixel beam |
EP3270589A1 (en) * | 2016-07-11 | 2018-01-17 | Thomson Licensing | An apparatus and a method for generating data representative of a pixel beam |
RU2651176C1 (ru) * | 2016-11-17 | 2018-04-18 | Федеральное государственное бюджетное образовательное учреждение высшего образования "Рязанский государственный радиотехнический университет" | Способ обработки сигналов для обнаружения и определения толщины прямых линий на изображении |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6665449B1 (en) * | 1999-09-03 | 2003-12-16 | Battelle Memorial Institute | Method and algorithm for image processing |
JP4752031B2 (ja) * | 2004-10-01 | 2011-08-17 | ボード オブ トラスティーズ オブ ザ レランド スタンフォード ジュニア ユニバーシティ | 撮像の装置と方法 |
WO2013180748A1 (en) * | 2012-06-01 | 2013-12-05 | Ostendo Technologies, Inc. | Spatio-temporal light field cameras |
US20140369594A1 (en) * | 2013-06-12 | 2014-12-18 | Vidinoti Sa | Method and apparatus for identifying local features |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6839081B1 (en) * | 1994-09-09 | 2005-01-04 | Canon Kabushiki Kaisha | Virtual image sensing and generating method and apparatus |
EP1037069A3 (en) * | 1999-03-17 | 2004-01-14 | Matsushita Electric Industrial Co., Ltd. | Rangefinder |
US7286803B2 (en) * | 2002-10-21 | 2007-10-23 | Matsushita Electric Industrial Co., Ltd. | Palm-sized mobile information terminal with finger-insertion hooking portion |
JP4706882B2 (ja) * | 2009-02-05 | 2011-06-22 | ソニー株式会社 | 撮像装置 |
JP5766034B2 (ja) * | 2011-06-08 | 2015-08-19 | キヤノン株式会社 | 画像処理方法、画像処理装置及びプログラム。 |
-
2013
- 2013-12-19 JP JP2013262756A patent/JP6223169B2/ja active Active
-
2014
- 2014-12-16 US US14/571,696 patent/US20150177062A1/en not_active Abandoned
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6665449B1 (en) * | 1999-09-03 | 2003-12-16 | Battelle Memorial Institute | Method and algorithm for image processing |
JP4752031B2 (ja) * | 2004-10-01 | 2011-08-17 | ボード オブ トラスティーズ オブ ザ レランド スタンフォード ジュニア ユニバーシティ | 撮像の装置と方法 |
WO2013180748A1 (en) * | 2012-06-01 | 2013-12-05 | Ostendo Technologies, Inc. | Spatio-temporal light field cameras |
US20140369594A1 (en) * | 2013-06-12 | 2014-12-18 | Vidinoti Sa | Method and apparatus for identifying local features |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016116120A (ja) * | 2014-12-16 | 2016-06-23 | 日本電信電話株式会社 | 画像補正装置及びコンピュータプログラム |
JP2017063414A (ja) * | 2015-09-17 | 2017-03-30 | トムソン ライセンシングThomson Licensing | ライト・フィールドを表すデータを生成する方法および装置 |
KR20180053669A (ko) * | 2015-09-17 | 2018-05-23 | 톰슨 라이센싱 | 라이트 필드 데이터 표현 |
KR20180054737A (ko) * | 2015-09-17 | 2018-05-24 | 톰슨 라이센싱 | 픽셀 빔을 나타내는 데이터를 생성하기 위한 장치 및 방법 |
JP2018536211A (ja) * | 2015-09-17 | 2018-12-06 | トムソン ライセンシングThomson Licensing | ライトフィールド・データ表現 |
JP2018537877A (ja) * | 2015-09-17 | 2018-12-20 | トムソン ライセンシングThomson Licensing | ライトフィールドコンテンツをエンコードする方法 |
JP2019502277A (ja) * | 2015-09-17 | 2019-01-24 | トムソン ライセンシングThomson Licensing | ピクセルビームを表すデータを生成する装置および方法 |
KR102585129B1 (ko) | 2015-09-17 | 2023-10-06 | 인터디지털 브이씨 홀딩스 인코포레이티드 | 픽셀 빔을 나타내는 데이터를 생성하기 위한 장치 및 방법 |
KR102635003B1 (ko) * | 2015-09-17 | 2024-02-07 | 인터디지털 브이씨 홀딩스 인코포레이티드 | 라이트 필드 데이터 표현 |
JP2018533066A (ja) * | 2015-10-09 | 2018-11-08 | ヴィスバイ カメラ コーポレイション | ホログラフィックライトフィールドイメージングデバイス及びその使用方法 |
JP2019511851A (ja) * | 2015-12-30 | 2019-04-25 | トムソン ライセンシングThomson Licensing | ピクセルビームを表すデータを生成する方法及び装置 |
JP7403163B2 (ja) | 2017-07-21 | 2023-12-22 | 无錫海斯凱尓医学技術有限公司 | 動き情報取得方法及び装置 |
Also Published As
Publication number | Publication date |
---|---|
US20150177062A1 (en) | 2015-06-25 |
JP6223169B2 (ja) | 2017-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6223169B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
US10949986B1 (en) | Methods and systems for imaging a scene, such as a medical scene, and tracking objects within the scene | |
JP6736471B2 (ja) | 画像処理方法および画像処理装置 | |
JP2017022694A (ja) | ユーザのデバイスに明視野ベースの画像を表示するための方法および装置ならびに対応するコンピュータプログラム製品 | |
JP2017112602A (ja) | パノラマ魚眼カメラの画像較正、スティッチ、および深さ再構成方法、ならびにそのシステム | |
US20110249117A1 (en) | Imaging device, distance measuring method, and non-transitory computer-readable recording medium storing a program | |
EP2504992A2 (en) | Image processing apparatus and method | |
JP6452360B2 (ja) | 画像処理装置、撮像装置、画像処理方法およびプログラム | |
KR20160116075A (ko) | 카메라로부터 획득한 영상에 대한 자동보정기능을 구비한 영상처리장치 및 그 방법 | |
JP7378219B2 (ja) | 撮像装置、画像処理装置、制御方法、及びプログラム | |
CN111108742A (zh) | 信息处理装置、信息处理方法、程序以及可互换透镜 | |
JP2014010783A (ja) | 画像処理装置、画像処理方法およびプログラム | |
TWI501193B (zh) | Computer graphics using AR technology. Image processing systems and methods | |
US8908012B2 (en) | Electronic device and method for creating three-dimensional image | |
WO2018079283A1 (ja) | 画像処理装置、画像処理方法、及び、プログラム | |
JP7014175B2 (ja) | 画像処理装置、画像処理方法、及び、プログラム | |
JP2013120435A (ja) | 画像処理装置および画像処理方法、プログラム | |
JP2020193820A (ja) | 計測装置、撮像装置、制御方法及びプログラム | |
JP6012396B2 (ja) | 画像処理装置、画像処理方法およびプログラム。 | |
JP5202448B2 (ja) | 画像処理システム及び方法 | |
JP2013175821A (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6263024B2 (ja) | 画像処理装置、画像処理方法および、プログラム、並びに画像再生装置 | |
JP6292785B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6120535B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
JP7200002B2 (ja) | 画像処理装置、撮像装置、画像処理方法、プログラム、および記憶媒体 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20161213 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170829 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171003 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6223169 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |