JP2015210763A - 画像処理方法、及び画像処理プログラム - Google Patents
画像処理方法、及び画像処理プログラム Download PDFInfo
- Publication number
- JP2015210763A JP2015210763A JP2014093582A JP2014093582A JP2015210763A JP 2015210763 A JP2015210763 A JP 2015210763A JP 2014093582 A JP2014093582 A JP 2014093582A JP 2014093582 A JP2014093582 A JP 2014093582A JP 2015210763 A JP2015210763 A JP 2015210763A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- data
- real object
- arrangement
- imaging data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
前記第一合成ステップにおいて、前記第一検出ステップにより特定された前記実オブジェクトの配置位置及び配置姿勢に対応する位置及び姿勢で前記オブジェクト画像データの重畳を行うことを特徴とする。
ここで、撮像手段は一定の撮像位置及び撮像姿勢で撮像して撮像データa、bを生成するので、撮像データa、bは実オブジェクトの映像の有無を除けば同一の映像である。すなわち、表示手段には常に同一の背景映像が表示される。
また、第一合成データには実オブジェクトは表示されず、この代わりに実オブジェクトの配置位置及び配置姿勢に対応する位置及び姿勢で重畳された仮想オブジェクトが表示される。
よって、表示手段には、表示されていた実オブジェクトの映像のみが仮想オブジェクトに置き換えられたように表示される。そして、仮想オブジェクトのオブジェクト画像データには様々な画像データを採用できるので、本発明によれば、撮像シーンにおける実オブジェクトのみを様々な態様で表示できる。
(2)次に、図4(b)に示すように、バスの模型が配置されると、第一検出ステップs30により、その配置位置及び配置姿勢が特定される。なお、配置位置及び配置姿勢が特定されるまでの間は、撮像データ表示ステップs20により、机29aとその上に置かれているバスの模型(実オブジェクト15a)を含む撮像データ21bが表示手段3に表示される。
(3)第一検出ステップs30によりバスの模型の配置位置及び配置姿勢が特定されると、第一合成ステップs40により、バスの模型が配置される前の撮像データ21aに対して、バスのCGが移動する動画データが重畳されて第一合成データ27が生成される。そして、合成データ表示ステップs50により、図4(c)に示すように、表示手段3には、破線で図示されるバス画像から実線で図示されるバス画像までの動画が表示される。なお、撮像データ21aと第一合成データ27の切り換えを自然に演出するために、切り換え中にモーフィングやクロスフェード等の映像技術を用いるのが好ましい。
ここで、撮像手段5は一定の撮像位置及び撮像姿勢で撮像して撮像データ21a,21bを生成するので、撮像データ21a,21bは実オブジェクトの映像15aの有無を除けば同一の映像である。すなわち、表示手段3には常に同一の背景映像が表示される。
また、第一合成データ27には実オブジェクトの映像15aは表示されず、この代わりに仮想オブジェクト17が、撮像データ21b中の実オブジェクトの映像15aの表示位置及び表示姿勢で表示される。
よって、表示されていた実オブジェクトの映像15aのみが仮想オブジェクト17に置き換えられたように表示される。上記の例においては、オブジェクト画像データとして、実オブジェクト15と同じ形態のバスが走行する動画データを用いたため、机に置かれているバスがひとりでに走行し始めたように表示される。
そして、仮想オブジェクト17のオブジェクト画像データには様々な画像データを採用できるので、本発明によれば、撮像シーンにおける実オブジェクト15のみを様々な態様で表示できる。例えば、オブジェクト画像データとして、バスがロボットに変形するような動画データを採用してもよい。
また、上記の移動体監視ステップを含む監視ステップs60によれば、撮像範囲内に移動体が有る場合には第一検出ステップs30に進まない。よって、実オブジェクト15の配置中に生成された撮像データ21は記憶されず、第一合成データ27における背景映像の対象から自動的に除外される。
(ケース1)表示フラグが撮像データ21を示し、かつ撮像状況が変化している場合には、撮像データ表示ステップs20が実行されて、そのフレームの処理が終了する。
(ケース2)表示フラグが撮像データ21を示し、かつ撮像状況が変化していない場合には、第一検出ステップs30に進み、検出が失敗した場合(s31の矢印N)には、記憶ステップs32、撮像データ表示ステップs20の順に実行されて、そのフレームの処理が終了する。一方、検出が成功した場合(s31の矢印Y)には、表示フラグが操作され(s92)、次に説明する(ケース3)の第一合成ステップs40が実行される。表示フラグの操作(s92)は、表示手段に第一合成データ27を表示することを示すフラグが設定される。
(ケース3)表示フラグが第一合成データ27を示し、かつ撮像状況が変化していない場合には、第一合成ステップs40、第一合成データ表示s51の順に実行され、そのフレームの処理が終了する。
(ケース4)表示フラグが第一合成データ27を示し、かつ撮像状況が変化している場合、又は表示フラグが第二合成データを示す場合には、第二検出ステップs81、第二合成ステップs82、第二合成データ表示s83、表示フラグの操作s93の順に実行される。表示フラグの操作s93においては、仮想オブジェクト17の遷移中の場合には、表示手段3に第二合成データを表示することを示すフラグが設定される。仮想オブジェクト17の遷移が終了したときには、表示手段に撮像データ21を表示することを示すフラグが設定される。
3 … 表示手段
5 … 撮像手段
7 … 台
9 … 記憶手段
11,33 … 制御手段
13 … 実オブジェクトに表示されたマーカ
13a … 撮像データ中のマーカ
15 … 現実世界にある実オブジェクト
15a … 撮像データ中の実オブジェクト
17 … 仮想オブジェクト
19 … 検出部
21 … 撮像データ
21a … 実オブジェクトの配置前の撮像データ
21b … 実オブジェクトの配置後の撮像データ
23 … 表示切換部
25 … 合成部
27 … 第一合成データ
29 … 机
29a … 撮像データ中の机
35 … 監視部
Claims (10)
- 撮像手段が、略一定の撮像位置及び撮像姿勢で撮像し、撮像データを生成する撮像ステップと、
マーカを有する実オブジェクトの配置後に生成された前記撮像データに含まれる該マーカを検出して、前記撮像位置及び前記撮像姿勢に対する該実オブジェクトの配置位置及び配置姿勢を特定する第一検出ステップと、
前記マーカに対応付けて記憶手段に記憶された仮想オブジェクトのオブジェクト画像データを読み出して、該オブジェクト画像データを前記実オブジェクトの配置前に生成された前記撮像データに重畳して第一合成データを生成する第一合成ステップと、
表示手段に、前記実オブジェクトの配置位置及び配置姿勢が特定されるまで前記撮像データを表示し続け、該実オブジェクトの配置位置及び配置姿勢の特定後に前記第一合成データを表示する表示切換ステップと、
を含み、
前記第一合成ステップにおいて、前記第一検出ステップにより特定された前記実オブジェクトの配置位置及び配置姿勢に対応する位置及び姿勢で前記オブジェクト画像データの重畳を行うことを特徴とする画像処理方法。 - 撮像状況を監視する監視ステップと、
前記撮像状況が変化していない場合の前記撮像データを実オブジェクトの配置前の撮像データとして記憶する記憶ステップと、
を含む請求項1に記載の画像処理方法。 - 前記第一検出ステップによって前記マーカが検出される直前に記憶された前記撮像データを実オブジェクトの配置前の撮像データとして用いることを特徴とする請求項2に記載の画像処理方法。
- 撮像状況を監視する監視ステップを含み、
前記撮像状況が変化している場合に、前記表示切換ステップにおいて、前記撮像データを表示することを特徴とする請求項1に記載の画像処理方法。 - 前記撮像状況が変化した後に生成された前記撮像データに基づいて、前記撮像状況が変化した後の実オブジェクトの配置位置及び配置姿勢に対応する位置及び姿勢へと連続的に遷移する仮想オブジェクトのオブジェクト画像データを、該実オブジェクトの配置前の前記撮像データに重畳して第二合成データを生成する第二合成ステップを含み、
前記表示切換ステップにおいて、前記第二合成データから前記撮像データへと表示を切り換えることを特徴とする請求項4に記載の画像処理方法。 - コンピュータの記憶手段に、マーカに対応付けて仮想オブジェクトのオブジェクト画像データを記憶する記憶ステップ、
撮像手段に、略一定の撮像位置及び撮像姿勢で撮像し、撮像データを生成する撮像ステップ、
前記コンピュータの検出部に、前記マーカを有する実オブジェクトの配置後に生成された前記撮像データに含まれる該マーカを検出して、前記撮像位置及び前記撮像姿勢に対する該実オブジェクトの配置位置及び配置姿勢を特定する第一検出ステップ、
前記コンピュータの合成部に、前記オブジェクト画像データを読み出して、該オブジェクト画像データを前記実オブジェクトの配置前に生成された前記撮像データに重畳して第一合成データを生成する第一合成ステップ、
前記コンピュータの表示切換部に、前記実オブジェクトの配置位置及び配置姿勢が特定されるまで、表示手段に、前記撮像データを表示し続け、該実オブジェクトの配置位置及び配置姿勢の特定後に前記第一合成データを表示する表示切換ステップ、
を実行させ、
前記第一合成ステップにおいて、前記第一検出ステップにより特定された前記実オブジェクトの配置位置及び配置姿勢に対応する位置及び姿勢で前記オブジェクト画像データの重畳を行うことを特徴とする画像処理プログラム。 - 前記コンピュータの監視部に、撮像状況を監視する監視ステップ、
前記コンピュータの内部記憶に、前記撮像状況が変化していない場合の前記撮像データを実オブジェクトの配置前の撮像データとして記憶する記憶ステップ、
を実行させる請求項6に記載の画像処理プログラム。 - 前記第一検出ステップによって前記マーカが検出される直前に記憶された前記撮像データを実オブジェクトの配置前の撮像データとして用いることを特徴とする請求項7に記載の画像処理プログラム。
- 前記コンピュータの監視部に、撮像状況を監視する監視ステップを実行させ、
前記撮像状況が変化している場合に、前記表示切換ステップにおいて、前記撮像データを表示することを特徴とする請求項6に記載の画像処理プログラム。 - 前記コンピュータの合成部に、前記撮像状況が変化した後に生成された前記撮像データに基づいて、前記撮像状況が変化した後の実オブジェクトの配置位置及び配置姿勢に対応する位置及び姿勢へと連続的に遷移する仮想オブジェクトのオブジェクト画像データを、該実オブジェクトの配置前の前記撮像データに重畳して第二合成データを生成する第二合成ステップを実行させ、
前記表示切換ステップにおいて、前記第二合成データから前記撮像データへと表示を切り換えることを特徴とする請求項9に記載の画像処理プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014093582A JP6360348B2 (ja) | 2014-04-30 | 2014-04-30 | 画像処理方法、及び画像処理プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014093582A JP6360348B2 (ja) | 2014-04-30 | 2014-04-30 | 画像処理方法、及び画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015210763A true JP2015210763A (ja) | 2015-11-24 |
JP6360348B2 JP6360348B2 (ja) | 2018-07-18 |
Family
ID=54612866
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014093582A Active JP6360348B2 (ja) | 2014-04-30 | 2014-04-30 | 画像処理方法、及び画像処理プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6360348B2 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006260602A (ja) * | 2006-06-13 | 2006-09-28 | Sony Computer Entertainment Inc | 画像処理装置 |
JP2011095797A (ja) * | 2009-10-27 | 2011-05-12 | Sony Corp | 画像処理装置、画像処理方法及びプログラム |
JP2012174218A (ja) * | 2011-02-24 | 2012-09-10 | Ohbayashi Corp | 画像合成方法 |
JP2013105330A (ja) * | 2011-11-14 | 2013-05-30 | Konica Minolta Business Technologies Inc | 制御処理プログラム、画像表示装置、および画像表示方法 |
-
2014
- 2014-04-30 JP JP2014093582A patent/JP6360348B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006260602A (ja) * | 2006-06-13 | 2006-09-28 | Sony Computer Entertainment Inc | 画像処理装置 |
JP2011095797A (ja) * | 2009-10-27 | 2011-05-12 | Sony Corp | 画像処理装置、画像処理方法及びプログラム |
JP2012174218A (ja) * | 2011-02-24 | 2012-09-10 | Ohbayashi Corp | 画像合成方法 |
JP2013105330A (ja) * | 2011-11-14 | 2013-05-30 | Konica Minolta Business Technologies Inc | 制御処理プログラム、画像表示装置、および画像表示方法 |
Also Published As
Publication number | Publication date |
---|---|
JP6360348B2 (ja) | 2018-07-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11810226B2 (en) | Systems and methods for utilizing a living entity as a marker for augmented reality content | |
US20170083104A1 (en) | Information processing apparatus information processing method and storage medium | |
US20140118396A1 (en) | Image processing device, image processing method, and computer program product | |
JP6192483B2 (ja) | 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 | |
CN111667582A (zh) | 电子装置及增强现实的三维对象的尺寸调整方法 | |
US9424689B2 (en) | System,method,apparatus and computer readable non-transitory storage medium storing information processing program for providing an augmented reality technique | |
CN104574267A (zh) | 引导方法和信息处理设备 | |
JP2018049591A (ja) | 画像処理装置、画像生成方法及びプログラム | |
KR20170031733A (ko) | 디스플레이를 위한 캡처된 이미지의 시각을 조정하는 기술들 | |
US9779699B2 (en) | Image processing device, image processing method, computer readable medium | |
KR101248736B1 (ko) | 도서형 증강현실에서 페이지 전환에 따른 증강현실 방법 및 시스템, 이를 구현하기 위한 증강현실 처리장치 | |
JP6202981B2 (ja) | 情報処理プログラム、情報処理装置、情報処理システム、および、情報処理方法 | |
JP6318542B2 (ja) | 表示制御方法、表示制御プログラムおよび情報処理装置 | |
US20200402310A1 (en) | Virtual object display control device, virtual object display system, virtual object display control method, and storage medium storing virtual object display control program | |
JP2012165144A5 (ja) | ||
US20170046879A1 (en) | Augmented reality without a physical trigger | |
JP2014170483A5 (ja) | ||
US9478068B2 (en) | Computer-readable medium, image processing device, image processing system, and image processing method | |
TW201640280A (zh) | 物品導向的擴增實境運作方法、系統以及電腦可讀取儲存媒體 | |
US20220254123A1 (en) | Image processing apparatus, image processing method, and non-transitory computer-readable storage medium | |
JP2020042206A (ja) | 画像表示制御装置および画像表示制御用プログラム | |
US10540816B2 (en) | Information display system | |
US11941763B2 (en) | Viewing system, model creation apparatus, and control method | |
JP6632298B2 (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP6360348B2 (ja) | 画像処理方法、及び画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170417 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180405 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180410 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180521 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180531 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180622 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6360348 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |