JP7354185B2 - 表示制御装置、表示制御方法および表示制御プログラム - Google Patents
表示制御装置、表示制御方法および表示制御プログラム Download PDFInfo
- Publication number
- JP7354185B2 JP7354185B2 JP2021101919A JP2021101919A JP7354185B2 JP 7354185 B2 JP7354185 B2 JP 7354185B2 JP 2021101919 A JP2021101919 A JP 2021101919A JP 2021101919 A JP2021101919 A JP 2021101919A JP 7354185 B2 JP7354185 B2 JP 7354185B2
- Authority
- JP
- Japan
- Prior art keywords
- virtual object
- display control
- subject
- displayed
- captured image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 40
- 238000003384 imaging method Methods 0.000 claims description 9
- 230000008859 change Effects 0.000 claims description 7
- 238000012545 processing Methods 0.000 description 33
- 230000010365 information processing Effects 0.000 description 25
- 238000010586 diagram Methods 0.000 description 15
- 238000004891 communication Methods 0.000 description 14
- 230000008569 process Effects 0.000 description 10
- 230000007613 environmental effect Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000000873 masking effect Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
Description
〔1.表示制御処理〕
まず、図1を用いて、実施形態に係る表示制御処理の一例について説明する。図1は、実施形態に係る表示制御処理の一例を示す図である。
次に、図2を用いて、情報処理装置10の構成例について説明する。図2は、情報処理装置10の構成例を示すブロック図である。図2に示すように、情報処理装置10は、通信部20と、記憶部30と、制御部40とを備える。
次に、図4を用いて、実施形態に係る表示制御装置50の構成例について説明する。図4は、表示制御装置50の構成例を示すブロック図である。図4に示すように、表示制御装置50は、通信部60、外向きカメラ61、内向きカメラ62、センサ群63、表示部64、音声出力部65、記憶部70および制御部80を備える。なお、外向きカメラ61、内向きカメラ62、センサ群63、表示部64および音声出力部65については、表示制御装置50とは別の装置であってもよい。
次に、図7および図8を用いて、実施形態に係る情報処理装置10および表示制御装置50が実行する処理手順について説明する。まず、図7を用いて、情報処理装置10が実行する処理手順について説明する。図7は、情報処理装置10が実行する処理手順を示すフローチャートである。なお、以下に示す処理手順は、情報処理装置10の制御部40によって配信要求の取得毎に繰り返し実行される。
上述した表示システムSは、上記実施形態以外にも種々の異なる形態にて実施されてもよい。そこで、以下では、表示システムSの他の実施形態について説明する。
上述してきたように、実施形態に係る表示制御装置50は、周囲を撮像した撮像画像Gに映る被写体Gtの3次元形状を特定する特定部83と、特定部83によって特定される被写体Gtの3次元形状と、多視点画像の仮想オブジェクトOvを配置する配置位置Apとに応じて、撮像画像Gに重畳表示する仮想オブジェクトOvの表示態様を切り替えて表示する表示制御部84とを備える。したがって、実施形態に係る表示制御装置50によれば、多視点画像を適切にARコンテンツ100に表示することができる。
また、上述してきた実施形態に係る表示制御装置50は、例えば図9に示すような構成のコンピュータ1000によって実現される。図9は、実施形態に係る表示制御装置50の機能を実現するコンピュータの一例を示すハードウェア構成図である。コンピュータ1000は、CPU1100、RAM1200、ROM1300、HDD1400、通信インターフェイス(I/F)1500、入出力インターフェイス(I/F)1600、及びメディアインターフェイス(I/F)1700を有する。
また、上記実施形態及び変形例において説明した各処理のうち、自動的に行われるものとして説明した処理の全部または一部を手動的に行うこともでき、あるいは、手動的に行われるものとして説明した処理の全部または一部を公知の方法で自動的に行うこともできる。この他、上記文書中や図面中で示した処理手順、具体的名称、各種のデータやパラメータを含む情報については、特記する場合を除いて任意に変更することができる。例えば、各図に示した各種情報は、図示した情報に限られない。
20 通信部
30 記憶部
31 多視点映像データベース
40 制御部
41 選択部
42 配信部
50 表示制御装置
70 記憶部
71 マップ情報記憶部
80 制御部
81 自己位置推定部
82 表示面設定部
83 特定部
84 表示制御部
85 音声制御部
100 ARコンテンツ
G 撮像画像
Ov 仮想オブジェクト
Ap 配置位置
Gt 被写体
Claims (5)
- 周囲を撮像した撮像画像に映る被写体の3次元形状を特定する特定部と、
前記特定部によって特定される前記被写体の前記3次元形状と、実在するオブジェクトを多視点から撮影した多視点画像として表示される仮想オブジェクトを配置する配置位置とに応じて、前記撮像画像に重畳表示する前記仮想オブジェクトの表示態様を切り替えて表示する表示制御部と
を備え、
前記表示制御部は、
前記撮像画像の撮像位置の変化に応じた視点位置からみた前記仮想オブジェクトを表示するとともに、前記仮想オブジェクトが前記被写体よりも奥側に位置し、当該仮想オブジェクトが当該被写体と重なって表示される重なり領域が存在する場合には、当該仮想オブジェクトが当該被写体と重ならないように前記仮想オブジェクトの配置位置をずらして表示する
ことを特徴とする表示制御装置。 - 前記特定部は、
前記被写体の前記3次元形状の特定に測距センサを用いること
を特徴とする請求項1に記載の表示制御装置。 - 前記表示制御部は、
前記被写体の端と、前記仮想オブジェクトの端とを合わせるように前記表示態様を切り替えること
を特徴とする請求項1または2に記載の表示制御装置。 - コンピュータが実行する表示制御方法であって、
周囲を撮像した撮像画像に映る被写体の3次元形状を特定する特定工程と、
前記特定工程によって特定される前記被写体の前記3次元形状と、実在するオブジェクトを多視点から撮影した多視点画像として表示される仮想オブジェクトを配置する配置位置とに応じて、前記撮像画像に重畳表示する前記仮想オブジェクトの表示態様を切り替えて表示する表示制御工程と
を含み、
前記表示制御工程は、
前記撮像画像の撮像位置の変化に応じた視点位置からみた前記仮想オブジェクトを表示するとともに、前記仮想オブジェクトが前記被写体よりも奥側に位置し、当該仮想オブジェクトが当該被写体と重なって表示される重なり領域が存在する場合には、当該仮想オブジェクトが当該被写体と重ならないように前記仮想オブジェクトの配置位置をずらして表示する
ことを特徴とする表示制御方法。 - 周囲を撮像した撮像画像に映る被写体の3次元形状を特定する特定手順と、
前記特定手順によって特定される前記被写体の前記3次元形状と、実在するオブジェクトを多視点から撮影した多視点画像として表示される仮想オブジェクトを配置する配置位置とに応じて、前記撮像画像に重畳表示する前記仮想オブジェクトの表示態様を切り替えて表示する表示制御手順と
をコンピュータに実行させ、
前記表示制御手順は、
前記撮像画像の撮像位置の変化に応じた視点位置からみた前記仮想オブジェクトを表示するとともに、前記仮想オブジェクトが前記被写体よりも奥側に位置し、当該仮想オブジェクトが当該被写体と重なって表示される重なり領域が存在する場合には、当該仮想オブジェクトが当該被写体と重ならないように前記仮想オブジェクトの配置位置をずらして表示する
ことを特徴とする表示制御プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021101919A JP7354185B2 (ja) | 2021-06-18 | 2021-06-18 | 表示制御装置、表示制御方法および表示制御プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021101919A JP7354185B2 (ja) | 2021-06-18 | 2021-06-18 | 表示制御装置、表示制御方法および表示制御プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023000858A JP2023000858A (ja) | 2023-01-04 |
JP7354185B2 true JP7354185B2 (ja) | 2023-10-02 |
Family
ID=84687699
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021101919A Active JP7354185B2 (ja) | 2021-06-18 | 2021-06-18 | 表示制御装置、表示制御方法および表示制御プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7354185B2 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017104198A1 (ja) | 2015-12-14 | 2017-06-22 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
WO2020066682A1 (ja) | 2018-09-28 | 2020-04-02 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
WO2020115784A1 (ja) | 2018-12-03 | 2020-06-11 | マクセル株式会社 | 拡張現実表示装置及び拡張現実表示方法 |
WO2021117366A1 (ja) | 2019-12-10 | 2021-06-17 | ソニーグループ株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6982203B2 (ja) * | 2019-04-17 | 2021-12-17 | Kddi株式会社 | キャラクタ画像生成装置、キャラクタ画像生成方法及びプログラム |
JP7197451B2 (ja) * | 2019-09-27 | 2022-12-27 | Kddi株式会社 | 画像処理装置、方法及びプログラム |
-
2021
- 2021-06-18 JP JP2021101919A patent/JP7354185B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017104198A1 (ja) | 2015-12-14 | 2017-06-22 | ソニー株式会社 | 情報処理装置、情報処理方法、およびプログラム |
WO2020066682A1 (ja) | 2018-09-28 | 2020-04-02 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラム |
WO2020115784A1 (ja) | 2018-12-03 | 2020-06-11 | マクセル株式会社 | 拡張現実表示装置及び拡張現実表示方法 |
WO2021117366A1 (ja) | 2019-12-10 | 2021-06-17 | ソニーグループ株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
Non-Patent Citations (2)
Title |
---|
ROCKETNEWS24, ソニーの実写によるAR(拡張現実)技術に海外ネットユーザが苦笑い「ポルノの未来は明るいな」,[online], 2012年8月27日, https://rocketnews24.com/2012/08/27/243293/ |
Sony-Global, 3D実写AR "LiveAction AR", youtube[video][online], 2012年8月21日, https://www.youtube.com/watch?v=2rbTLrrgEaU, 特に0:43~1:37 |
Also Published As
Publication number | Publication date |
---|---|
JP2023000858A (ja) | 2023-01-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11010958B2 (en) | Method and system for generating an image of a subject in a scene | |
KR102359978B1 (ko) | 다중-소스 가상 콘텐츠 합성을 갖는 혼합 현실 시스템 및 이를 사용하여 가상 콘텐츠를 생성하는 방법 | |
US8933965B2 (en) | Method for calculating light source information and generating images combining real and virtual images | |
EP3321889A1 (en) | Device and method for generating and displaying 3d map | |
US20130120365A1 (en) | Content playback apparatus and method for providing interactive augmented space | |
WO2019111817A1 (ja) | 生成装置、生成方法及びプログラム | |
KR102036545B1 (ko) | 오디오, 비주얼 및 모션 분석 기능을 갖는 디지털 카메라 | |
JP7456034B2 (ja) | 複合現実表示装置および複合現実表示方法 | |
JP7150894B2 (ja) | Arシーン画像処理方法及び装置、電子機器並びに記憶媒体 | |
CN105611267B (zh) | 现实世界和虚拟世界图像基于深度和色度信息的合并 | |
JP2001022936A (ja) | 3次元形状生成装置 | |
US11385856B2 (en) | Synchronizing positioning systems and content sharing between multiple devices | |
WO2019034804A2 (en) | THREE-DIMENSIONAL VIDEO PROCESSING | |
JP2019103126A (ja) | カメラシステム、カメラ制御装置、カメラ制御方法及びプログラム | |
WO2019030427A1 (en) | THREE-DIMENSIONAL VIDEO PROCESSING | |
JP7354185B2 (ja) | 表示制御装置、表示制御方法および表示制御プログラム | |
JP7479793B2 (ja) | 画像処理装置、仮想視点映像を生成するシステム、画像処理装置の制御方法及びプログラム | |
JP7354186B2 (ja) | 表示制御装置、表示制御方法および表示制御プログラム | |
KR102228919B1 (ko) | 이미지에 동적 효과를 적용하는 방법 및 장치 | |
US11287658B2 (en) | Picture processing device, picture distribution system, and picture processing method | |
JP7118217B1 (ja) | 表示制御装置、表示制御方法および表示制御プログラム | |
JP7123222B1 (ja) | 表示制御装置、表示制御方法および表示制御プログラム | |
JP7072706B1 (ja) | 表示制御装置、表示制御方法および表示制御プログラム | |
US20240119668A1 (en) | Image processing apparatus, method for controlling the same, and storage medium | |
WO2023166794A1 (ja) | 情報処理装置、情報処理方法、画像生成装置、画像生成方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211217 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20211217 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220315 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220513 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220705 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220905 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20220920 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221220 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20221220 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20221227 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20230104 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20230127 |
|
C211 | Notice of termination of reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C211 Effective date: 20230131 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20230307 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20230418 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230718 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230920 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7354185 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |