JP5734080B2 - 情報処理装置、その処理方法及びプログラム - Google Patents
情報処理装置、その処理方法及びプログラム Download PDFInfo
- Publication number
- JP5734080B2 JP5734080B2 JP2011105643A JP2011105643A JP5734080B2 JP 5734080 B2 JP5734080 B2 JP 5734080B2 JP 2011105643 A JP2011105643 A JP 2011105643A JP 2011105643 A JP2011105643 A JP 2011105643A JP 5734080 B2 JP5734080 B2 JP 5734080B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- region
- extraction
- area
- depth information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 56
- 238000003672 processing method Methods 0.000 title claims description 4
- 238000000605 extraction Methods 0.000 claims description 87
- 238000012937 correction Methods 0.000 claims description 41
- 238000003384 imaging method Methods 0.000 claims description 27
- 230000002194 synthesizing effect Effects 0.000 claims description 6
- 230000015572 biosynthetic process Effects 0.000 claims description 5
- 238000003786 synthesis reaction Methods 0.000 claims description 5
- 239000000284 extract Substances 0.000 claims description 3
- 238000000034 method Methods 0.000 description 60
- 238000012545 processing Methods 0.000 description 27
- 238000005259 measurement Methods 0.000 description 15
- 239000002131 composite material Substances 0.000 description 6
- 238000009877 rendering Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 229910052573 porcelain Inorganic materials 0.000 description 1
Landscapes
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
Description
。
図1は、本発明の一実施の形態に係わる情報処理装置10を配して構成した情報処理システムの構成の一例を示す図である。
次に、実施形態2について説明する。実施形態2に係わる情報処理装置10は、実施形態1を説明した図1と同様の構成となる。そのため、実施形態2に係わる情報処理装置10の構成については、図示を用いた説明を省略する。ここでは、相違する点について重点的に説明する。
また、実施形態1に係わる補正部37においては、第1の補正処理及び第2の補正処理を実施し、現実画像から抽出された抽出領域の範囲を補正していた。これに対して、実施形態2に係わる補正部37においては、現実画像ではなく、デプスマップから抽出された抽出領域に対して補正処理を行なう。補正処理としては、第1の補正処理及び第2の補正処理を行なわず、超解像度化処理を行なう。以下、この点についてより具体的に説明する。
本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(又はCPUやMPU等)がプログラムを読み出して実行する処理である。
Claims (8)
- 現実空間を撮影した現実画像に対して仮想画像を合成する情報処理装置であって、
前記現実空間における各部の奥行き情報を取得する取得手段と、
前記仮想画像における各部の奥行き情報を算出する奥行き情報算出手段と、
前記取得した奥行き情報と前記算出した奥行き情報とをそれぞれ対応する位置毎に比較し、それぞれの差が所定の閾値を越える領域を抽出領域として抽出する領域抽出手段と、
前記現実画像における色情報を用いて前記抽出領域を補正する補正手段と、
前記補正手段により補正された前記抽出領域を、前記仮想画像の描画を禁止する描画禁止領域として規定する規定手段と、
前記描画禁止領域に基づいて仮想画像を描画する描画手段と、
前記現実画像と前記描画された仮想画像とを合成する合成手段と
を具備することを特徴とする情報処理装置。 - 前記領域抽出手段は、
前記抽出領域として、前記現実画像から前記取得した奥行き情報と前記算出した奥行き情報との差が所定の閾値を越える領域を抽出し、
前記補正手段は、
前記現実画像における色情報を用いて前記抽出領域の範囲を補正し、
前記規定手段は、
前記補正手段により範囲が補正された前記抽出領域を、前記描画禁止領域として規定する
ことを特徴とする請求項1記載の情報処理装置。 - 前記補正手段は、
前記抽出領域を代表する色情報を決定する決定手段と、
前記決定手段により決定された代表色情報と、前記抽出領域の色情報とを画素毎に比較し、前記代表色情報と前記色情報とが所定の基準よりも類似している画素を前記抽出領域に含め、そうでない画素を前記抽出領域から排除する
ことを特徴とする請求項2記載の情報処理装置。 - 前記補正手段は、
前記抽出領域の色情報の変化量に基づいて、前記抽出領域とそれ以外の領域との境界を変更する
ことを特徴とする請求項2又は3記載の情報処理装置。 - 前記取得手段は、
前記取得した奥行き情報をデプス値としてデプスマップに保持し、
前記奥行き情報算出手段は、
前記算出した奥行き情報をZ値としてZバッファに保持し、
前記領域抽出手段は、
前記抽出領域として、前記デプスマップから前記デプス値と前記Z値との差が所定の閾値を越える領域を抽出し、
前記補正手段は、
前記抽出領域を、前記現実画像における対応する領域の色情報を用いて超解像度化し、
前記規定手段は、
前記現実画像における色情報を用いて、前記補正手段による補正により超解像度化された前記抽出領域を、前記描画禁止領域として規定する
ことを特徴とする請求項1記載の情報処理装置。 - 前記現実空間を撮影した撮像装置の位置及び姿勢を算出する位置姿勢算出手段
を更に具備し、
前記奥行き情報算出手段は、
前記位置姿勢算出手段により算出された前記撮像装置の位置及び姿勢の情報に基づいて奥行き情報を算出する
ことを特徴とする請求項1から5のいずれか1項に記載の情報処理装置。 - 現実空間を撮影した現実画像に対して仮想画像を合成する情報処理装置の処理方法であって、
取得手段が、前記現実空間における各部の奥行き情報を取得する工程と、
奥行き情報算出手段が、前記仮想画像における各部の奥行き情報を算出する工程と、
領域抽出手段が、前記取得した奥行き情報と前記算出した奥行き情報とをそれぞれ対応する位置毎に比較し、それぞれの差が所定の閾値を越える領域を抽出領域として抽出する工程と、
補正手段が、前記現実画像における色情報を用いて前記抽出領域を補正する工程と、
規定手段が、前記補正された前記抽出領域を、前記仮想画像の描画を禁止する描画禁止領域として規定する工程と、
描画手段が、前記描画禁止領域に基づいて仮想画像を描画する工程と、
合成手段が、前記現実画像と前記描画された仮想画像とを合成する工程と
を含むことを特徴とする処理方法。 - 現実空間を撮影した現実画像に対して仮想画像を合成する情報処理装置に内蔵されたコンピュータを、
前記現実空間における各部の奥行き情報を取得する取得手段、
前記仮想画像における各部の奥行き情報を算出する奥行き情報算出手段、
前記取得した奥行き情報と前記算出した奥行き情報とをそれぞれ対応する位置毎に比較し、それぞれの差が所定の閾値を越える領域を抽出領域として抽出する領域抽出手段、
前記現実画像における色情報を用いて前記抽出領域を補正する補正手段、
前記補正手段により補正された前記抽出領域を、前記仮想画像の描画を禁止する描画禁止領域として規定する規定手段、
前記描画禁止領域に基づいて仮想画像を描画する描画手段、
前記現実画像と前記描画された仮想画像とを合成する合成手段
として機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011105643A JP5734080B2 (ja) | 2011-05-10 | 2011-05-10 | 情報処理装置、その処理方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011105643A JP5734080B2 (ja) | 2011-05-10 | 2011-05-10 | 情報処理装置、その処理方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012238117A JP2012238117A (ja) | 2012-12-06 |
JP5734080B2 true JP5734080B2 (ja) | 2015-06-10 |
Family
ID=47460978
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011105643A Active JP5734080B2 (ja) | 2011-05-10 | 2011-05-10 | 情報処理装置、その処理方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5734080B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019087491A1 (ja) * | 2017-10-30 | 2019-05-09 | ソニー株式会社 | 情報処理装置、情報処理方法およびプログラム |
KR101881295B1 (ko) * | 2017-12-11 | 2018-07-24 | (주)진명아이앤씨 | 증강현실을 이용한 레이어 믹서 기반의 비디오 시스템 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4115117B2 (ja) * | 2001-10-31 | 2008-07-09 | キヤノン株式会社 | 情報処理装置および方法 |
JP2004234549A (ja) * | 2003-01-31 | 2004-08-19 | Canon Inc | 現実物体モデル作成方法 |
JP4227561B2 (ja) * | 2004-06-03 | 2009-02-18 | キヤノン株式会社 | 画像処理方法、画像処理装置 |
JP4324044B2 (ja) * | 2004-07-15 | 2009-09-02 | キヤノン株式会社 | 画像処理装置およびその方法 |
DE102005009437A1 (de) * | 2005-03-02 | 2006-09-07 | Kuka Roboter Gmbh | Verfahren und Vorrichtung zum Einblenden von AR-Objekten |
JP4909176B2 (ja) * | 2007-05-23 | 2012-04-04 | キヤノン株式会社 | 複合現実感提示装置及びその制御方法、コンピュータプログラム |
-
2011
- 2011-05-10 JP JP2011105643A patent/JP5734080B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012238117A (ja) | 2012-12-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102342668B1 (ko) | 화상 처리장치, 화상 처리방법 및 기억매체 | |
US8803918B2 (en) | Methods and apparatus for calibrating focused plenoptic camera data | |
US9020241B2 (en) | Image providing device, image providing method, and image providing program for providing past-experience images | |
WO2015146230A1 (ja) | 映像表示装置および映像表示システム | |
KR101932537B1 (ko) | 3차원 전자지도상에 촬영영상을 표시하는 방법 및 장치 | |
JP6452360B2 (ja) | 画像処理装置、撮像装置、画像処理方法およびプログラム | |
JP2015197745A (ja) | 画像処理装置、撮像装置、画像処理方法及びプログラム | |
JP2020129276A (ja) | 画像処理装置、画像処理方法、およびプログラム | |
EP2757789A1 (en) | Image processing system, image processing method, and image processing program | |
JP6610535B2 (ja) | 画像処理装置および画像処理方法 | |
JP5653104B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
US8633926B2 (en) | Mesoscopic geometry modulation | |
WO2012029658A1 (ja) | 撮像装置、画像処理装置、画像処理方法及び画像処理プログラム | |
JP5734080B2 (ja) | 情報処理装置、その処理方法及びプログラム | |
JP5820716B2 (ja) | 画像処理装置、画像処理方法、コンピュータプログラム、記録媒体、立体画像表示装置 | |
KR101566459B1 (ko) | 이미지 기반의 비주얼 헐에서의 오목 표면 모델링 | |
JP6756679B2 (ja) | 決定装置、画像処理装置、決定方法及び決定プログラム | |
JP6685814B2 (ja) | 撮像装置およびその制御方法 | |
JP5926626B2 (ja) | 画像処理装置及びその制御方法、プログラム | |
JP2014199508A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP6320165B2 (ja) | 画像処理装置及びその制御方法、並びにプログラム | |
JP2011053456A (ja) | 画像表示方法、プログラム、画像表示装置、及び、この画像表示装置を有する撮像装置 | |
JP5891751B2 (ja) | 画像間差分装置および画像間差分方法 | |
JP5281720B1 (ja) | 立体映像処理装置及び立体映像処理方法 | |
US20240161394A1 (en) | Information processing apparatus, information processing method, and computer-readable medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140509 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150311 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150316 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150414 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5734080 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |