JP2020088592A - Display device, display processing device, and display processing program - Google Patents

Display device, display processing device, and display processing program Download PDF

Info

Publication number
JP2020088592A
JP2020088592A JP2018219972A JP2018219972A JP2020088592A JP 2020088592 A JP2020088592 A JP 2020088592A JP 2018219972 A JP2018219972 A JP 2018219972A JP 2018219972 A JP2018219972 A JP 2018219972A JP 2020088592 A JP2020088592 A JP 2020088592A
Authority
JP
Japan
Prior art keywords
dimensional
display device
display
image
dimensional image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018219972A
Other languages
Japanese (ja)
Other versions
JP6562371B1 (en
Inventor
清和 河原田
Kiyokazu Kawarada
清和 河原田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honeycomb Lab Inc
Original Assignee
Honeycomb Lab Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honeycomb Lab Inc filed Critical Honeycomb Lab Inc
Priority to JP2018219972A priority Critical patent/JP6562371B1/en
Application granted granted Critical
Publication of JP6562371B1 publication Critical patent/JP6562371B1/en
Publication of JP2020088592A publication Critical patent/JP2020088592A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Diffracting Gratings Or Hologram Optical Elements (AREA)
  • Holo Graphy (AREA)
  • Processing Or Creating Images (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Abstract

To display an image having presence.SOLUTION: A display device comprises: a three-dimensional image display device 130; at least one two-dimensional image display device 120; and a display processing device 110 which continuously displays a three-dimensional display image 202 displayed by the three-dimensional image display device 130 and a two-dimensional display image 201 displayed by the two-dimensional image display device 120.SELECTED DRAWING: Figure 1

Description

本発明は、２次元画像、および３次元画像を表示し得る表示装置に関するものである。 The present invention relates to a display device capable of displaying a two-dimensional image and a three-dimensional image.

従来、２次元実写動画像に、動きを伴う３次元ＣＧを合成して、立体感、現実感のある動画像を作成し表示する画像合成表示方法が知られている。この表示方法では、視点情報と撮影物体の３次元情報とＣＧデータからＣＧ画像を作成し、選択されたＣＧに対応する部分以外の部分を実写画像で置き換えることにより、合成画像を作成するようになっている（例えば、特許文献１参照。）。 2. Description of the Related Art Conventionally, there is known an image composition display method of composing a three-dimensional CG that accompanies a motion with a two-dimensional actual moving image to create and display a moving image with a stereoscopic effect and a realistic feeling. In this display method, a CG image is created from the viewpoint information, the three-dimensional information of the photographed object, and the CG data, and a part other than the part corresponding to the selected CG is replaced with a real image to create a composite image. (For example, refer to Patent Document 1).

特開平０８−１５３２１３号公報JP, 08-153213, A

しかしながら上記のように２次元実写動画像に３次元ＣＧを合成したとしても、最終的な画像は２次元の画像表示装置の画面内に表示されるものであり、必ずしも臨場感のある画像を表示できるものではなかった。 However, even if the three-dimensional CG is combined with the two-dimensional actual moving image as described above, the final image is displayed on the screen of the two-dimensional image display device, and an image with a realistic feeling is not necessarily displayed. It wasn't possible.

本発明は、上記の点に鑑み、より臨場感のある画像を表示できるようにすることを目的としている。 The present invention has been made in view of the above points, and an object thereof is to be able to display a more realistic image.

上記の目的を達成するために、
本発明は、
表示装置であって、
３次元画像表示装置と、
少なくとも１つの２次元画像表示装置と、
上記３次元画像表示装置による３次元表示画像と上記２次元画像表示装置による２次元表示画像とを連続するように表示させる表示処理装置と、
を備えたことを特徴とする。 To achieve the above objectives,
The present invention is
A display device,
A three-dimensional image display device,
At least one two-dimensional image display device;
A display processing device for continuously displaying a three-dimensional display image by the three-dimensional image display device and a two-dimensional display image by the two-dimensional image display device;
It is characterized by having.

これにより、２次元表示画像が２次元画像表示装置内に見える一方、３次元表示画像が２次元画像表示装置から飛び出して、３次元空間内に立体的に存在するように見えるような表示を行わせるなど、臨場感を高められるような表示をさせることが容易にできる。 As a result, the two-dimensional display image is viewed in the two-dimensional image display device, while the three-dimensional display image is projected from the two-dimensional image display device and displayed so as to appear three-dimensionally in the three-dimensional space. It is possible to easily provide a display that enhances the sense of presence, such as by displaying.

本発明によれば、より臨場感のある画像を表示することができる。 According to the present invention, a more realistic image can be displayed.

実施形態１の表示装置の概略構成を示す説明図である。FIG. 3 is an explanatory diagram illustrating a schematic configuration of the display device of the first embodiment. 実施形態１の表示装置の機能的構成を示すブロック図である。3 is a block diagram showing a functional configuration of a display device of Embodiment 1. FIG. 実施形態２の表示装置の概略構成を示す説明図である。5 is an explanatory diagram showing a schematic configuration of a display device of Embodiment 2. FIG. 実施形態２の表示装置の機能的構成を示すブロック図である。7 is a block diagram showing a functional configuration of a display device of Embodiment 2. FIG. 実施形態３の表示装置の概略構成を示す説明図である。9 is an explanatory diagram showing a schematic configuration of a display device of Embodiment 3. FIG. 実施形態３の表示装置の機能的構成を示すブロック図である。7 is a block diagram showing a functional configuration of a display device of Embodiment 3. FIG.

以下、本発明の実施形態を図面に基づいて詳細に説明する。なお、以下の各実施形態において、他の実施形態と対応する機能を有する構成要素については同一の符号を付して説明を省略する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In each of the following embodiments, constituent elements having functions corresponding to those of the other embodiments are designated by the same reference numerals, and the description thereof will be omitted.

（実施形態１）
実施形態１の表示装置は、図１に示すように、表示処理装置１１０と、フラットパネルディスプレイなどの２次元画像表示装置１２０と、いわゆるシースルー型のヘッドマウントディスプレイなどの３次元画像表示装置１３０とを備えている。上記３次元画像表示装置１３０は、より詳しくは、例えばユーザの左右の目によって視認される画像を左画像表示部１３１および右画像表示部１３２に表示させるとともに、これらの左画像表示部１３１および右画像表示部１３２を透過する光によって２次元画像表示装置１２０等の背景を直視し得るようになっている。また、上記３次元画像表示装置１３０には、カメラ１４０が取り付けられ、３次元画像表示装置１３０の位置や姿勢、特に２次元画像表示装置１２０との相対的な位置や姿勢を検出し得るようになっている。 (Embodiment 1)
As shown in FIG. 1, the display device of the first embodiment includes a display processing device 110, a two-dimensional image display device 120 such as a flat panel display, and a three-dimensional image display device 130 such as a so-called see-through type head mounted display. Is equipped with. More specifically, the three-dimensional image display device 130 causes the left image display unit 131 and the right image display unit 132 to display an image visually recognized by the left and right eyes of the user, and the left image display unit 131 and the right image display unit 131, for example. The background of the two-dimensional image display device 120 or the like can be directly viewed by the light transmitted through the image display unit 132. A camera 140 is attached to the three-dimensional image display device 130 so that the position and the posture of the three-dimensional image display device 130, especially the relative position and the posture with respect to the two-dimensional image display device 120 can be detected. Is becoming

上記表示処理装置１１０は、例えばコンピュータに所定の表示処理プログラムを実行させることによって表示処理を行うように構成され、機能的には、例えば図２に示すように、オブジェクト３Ｄデータ出力部１１１と、オブジェクト位置データ出力部１１２と、３Ｄ／２Ｄ部分分割部１１３と、２Ｄ描画部１１４と、３Ｄ描画部１１５と、２次元画像表示装置空間位置検出部１１６とを備えて構成されている。 The display processing device 110 is configured to perform display processing by causing a computer to execute a predetermined display processing program, and functionally includes an object 3D data output unit 111, as shown in FIG. An object position data output unit 112, a 3D/2D partial division unit 113, a 2D drawing unit 114, a 3D drawing unit 115, and a two-dimensional image display device spatial position detecting unit 116 are provided.

オブジェクト３Ｄデータ出力部１１１は、２次元画像表示装置１２０や３次元画像表示装置１３０に表示させる表示対象であるオブジェクトの３次元画像データを出力するものである。 The object 3D data output unit 111 outputs 3D image data of an object which is a display target to be displayed on the 2D image display device 120 or the 3D image display device 130.

オブジェクト位置データ出力部１１２は、例えば上記２次元画像表示装置１２０の表示面を基準とした上記オブジェクトの３次元空間内での位置や姿勢を示す位置データを出力するものである。 The object position data output unit 112 outputs position data indicating the position and orientation of the object in the three-dimensional space with reference to the display surface of the two-dimensional image display device 120, for example.

３Ｄ／２Ｄ部分分割部１１３は、上記位置データに基づいて、上記オブジェクトの３次元画像データを、２次元画像表示装置１２０の表示面よりも奥に位置する２次元表示部分と、手前に位置する３次元表示部分とに分割するようになっている。 Based on the position data, the 3D/2D partial division unit 113 positions the three-dimensional image data of the object in front of the two-dimensional display part positioned behind the display surface of the two-dimensional image display device 120. It is designed to be divided into a three-dimensional display part.

２Ｄ描画部１１４は、上記２次元表示部分の２次元表示画像２０１の描画を行って、上記２次元表示画像２０１を２次元画像表示装置１２０に表示させるようになっている。 The 2D drawing unit 114 draws the two-dimensional display image 201 of the two-dimensional display portion and displays the two-dimensional display image 201 on the two-dimensional image display device 120.

２次元画像表示装置空間位置検出部１１６は、カメラ１４０によって撮像された２次元画像表示装置１２０の撮像画像に基づいて、２次元画像表示装置１２０の空間位置、具体的には例えば２次元画像表示装置１２０と３次元画像表示装置１３０との相対位置関係を検出するようになっている。 The two-dimensional image display device spatial position detection unit 116 displays the spatial position of the two-dimensional image display device 120, specifically, for example, a two-dimensional image display, based on the captured image of the two-dimensional image display device 120 captured by the camera 140. The relative positional relationship between the device 120 and the three-dimensional image display device 130 is detected.

３Ｄ描画部１１５は、上記２次元画像表示装置空間位置検出部１１６によって検出された２次元画像表示装置１２０の空間位置に応じて、上記２次元表示画像２０１と連続するように、上記３次元表示部分の３次元表示画像２０２の描画を行って、上記３次元表示画像２０２を３次元画像表示装置１３０の左画像表示部１３１および右画像表示部１３２に表示させるようになっている。 The 3D rendering unit 115 displays the 3D image so as to be continuous with the 2D image 201 according to the spatial position of the 2D image display device 120 detected by the 2D image device spatial position detection unit 116. The three-dimensional display image 202 of the portion is drawn, and the three-dimensional display image 202 is displayed on the left image display unit 131 and the right image display unit 132 of the three-dimensional image display device 130.

上記のような表示装置では、例えば、図１に示すような魚の画像を表示するための３次元画像データがオブジェクト３Ｄデータ出力部１１１から出力されるとともに、オブジェクト位置データ出力部１１２から上記魚の画像の３次元空間内での位置や姿勢を示す位置データが出力されると、３Ｄ／２Ｄ部分分割部１１３によって、上記オブジェクトの３次元画像データが、２次元画像表示装置１２０の表示面よりも奥に位置する２次元表示部分と、手前に位置する３次元表示部分とに分割される。すなわち、上記３次元画像データが、上記魚の画像の胴体部分の２次元表示画像２０１を表示させる画像データと、上記魚の画像の頭部分の３次元表示画像２０２を表示させる画像データとに分割される。 In the display device as described above, for example, three-dimensional image data for displaying a fish image as shown in FIG. 1 is output from the object 3D data output unit 111, and the fish image of the fish is output from the object position data output unit 112. When the position data indicating the position and orientation of the object in the three-dimensional space is output, the 3D/2D partial division unit 113 causes the three-dimensional image data of the object to be deeper than the display surface of the two-dimensional image display device 120. It is divided into a two-dimensional display portion located at and a three-dimensional display portion located at the front. That is, the three-dimensional image data is divided into image data for displaying the two-dimensional display image 201 of the body portion of the fish image and image data for displaying the three-dimensional display image 202 of the head portion of the fish image. ..

そこで、上記のように分割された各画像データに基づいて、２Ｄ描画部１１４、および３Ｄ描画部１１５によって２次元画像、および３次元画像が描画される。ここで、３Ｄ描画部１１５による描画においては、カメラ１４０によって撮像された画像に基づいて、２次元画像表示装置空間位置検出部１１６により２次元画像表示装置１２０の空間位置が検出され、上記２次元画像表示装置１２０の空間位置に応じて定まる表示面を基準とした３次元空間内の位置に３次元表示画像２０２が見えるように、３次元画像表示装置１３０への表示が行われるような描画が行われる。 Therefore, the 2D drawing unit 114 and the 3D drawing unit 115 draw the two-dimensional image and the three-dimensional image based on the image data divided as described above. Here, in the drawing by the 3D drawing unit 115, the spatial position of the two-dimensional image display device 120 is detected by the two-dimensional image display device spatial position detection unit 116 based on the image captured by the camera 140, and the two-dimensional image is displayed. Drawing is performed so that the three-dimensional image display device 130 is displayed so that the three-dimensional display image 202 can be seen at a position in the three-dimensional space based on the display surface determined according to the spatial position of the image display device 120. Done.

上記のような描画に基づいて、２次元画像表示装置１２０、および３次元画像表示装置１３０への表示が行われることにより、魚の胴体部分の２次元表示画像２０１が２次元画像表示装置１２０内に見える一方、魚の頭部分の３次元表示画像２０２が２次元画像表示装置１２０から飛び出して、３次元空間内に立体的に存在するように見える表示を行わせることができ、臨場感を高められるような表示をさせることが容易にできる。 By displaying on the two-dimensional image display device 120 and the three-dimensional image display device 130 based on the drawing as described above, the two-dimensional display image 201 of the body of the fish is displayed in the two-dimensional image display device 120. On the other hand, the three-dimensional display image 202 of the fish's head part pops out of the two-dimensional image display device 120, and a display that appears to be three-dimensionally present in the three-dimensional space can be displayed, thus enhancing the sense of presence. It can be easily displayed.

なお、２次元表示画像と３次元表示画像との連続性は、上記のように空間的な連続性に限るものではない。すなわち、上記のように２次元画像表示装置１２０および３次元画像表示装置１３０に同時に表示される２次元表示画像２０１と３次元表示画像２０２とが空間的に連続するように表示されるのに限らず、例えば２次元表示画像２０１の表示面より奥の方から表示面に向かって進んできたオブジェクトが２次元表示画像２０１の表示面から手前に飛び出して、その後は３次元表示画像だけが表示されて見えるなど、時間的な連続性があるような表示であっても、臨場感を高めることは容易にできる。 The continuity between the two-dimensional display image and the three-dimensional display image is not limited to the spatial continuity as described above. That is, as described above, the two-dimensional image display device 120 and the three-dimensional image display device 130 are simultaneously displayed on the two-dimensional display image 201 and the three-dimensional display image 202 so as to be spatially continuous. Instead, for example, an object that has proceeded from the back of the display surface of the two-dimensional display image 201 toward the display surface jumps out from the display surface of the two-dimensional display image 201 to the front, and only the three-dimensional display image is displayed thereafter. Even if the display has a temporal continuity, such as being visible, it is easy to enhance the sense of presence.

また、上記の例では、オブジェクト位置データ出力部１１２は、２次元画像表示装置１２０の表示面を基準とした、オブジェクトの３次元空間内での位置や姿勢を示す位置データを出力する例を示したが、これに限らず、３次元画像表示装置１３０によって表示される３次元空間内での位置や姿勢を示す位置データを出力するようにしてもよい。この場合には、３Ｄ／２Ｄ部分分割部１１３は、さらに、２次元画像表示装置空間位置検出部１１６によって検出された、上記３次元空間内における、２次元画像表示装置１２０の空間位置、より詳しくはその表示面の位置に応じて、オブジェクトの３次元画像データを、２次元画像表示装置１２０の表示面よりも奥に位置する２次元表示部分と、手前に位置する３次元表示部分とに分割するようにすればよい。 Also, in the above example, the object position data output unit 112 outputs the position data indicating the position and orientation of the object in the three-dimensional space with reference to the display surface of the two-dimensional image display device 120. However, the present invention is not limited to this, and position data indicating the position and orientation in the three-dimensional space displayed by the three-dimensional image display device 130 may be output. In this case, the 3D/2D partial division unit 113 further detects the spatial position of the two-dimensional image display device 120 in the three-dimensional space, which is detected by the two-dimensional image display device spatial position detection unit 116, more specifically. Divides the three-dimensional image data of the object into a two-dimensional display portion located deeper than the display surface of the two-dimensional image display device 120 and a three-dimensional display portion located in front of the two-dimensional image display device 120 according to the position of the display surface. You can do it.

また、２次元画像表示装置１２０は、１台に限らず、複数台が設けられても、同様の表示を行わせることができる。 Further, the two-dimensional image display device 120 is not limited to one unit, and the same display can be performed even when a plurality of units are provided.

また、２次元画像表示装置空間位置検出部１１６による２次元画像表示装置１２０の空間位置の検出を容易にするために、２次元画像表示装置１２０に種々のマーカを設けたりしてもよい。 Further, various markers may be provided on the two-dimensional image display device 120 to facilitate detection of the spatial position of the two-dimensional image display device 120 by the two-dimensional image display device spatial position detection unit 116.

また、３次元画像表示装置１３０への３次元表示画像２０２の表示位置の決定は、カメラ１４０の撮像画像だけに基づいて行われるのに限らず、例えばユーザが３次元表示画像２０２を摘まんで移動させるジェスチャーをすることなどによって微調整したりできるようにしてもよい。 Further, the determination of the display position of the three-dimensional display image 202 on the three-dimensional image display device 130 is not limited to the determination based on only the image captured by the camera 140. For example, the user picks the three-dimensional display image 202 and moves. Fine adjustment may be performed by making a gesture that causes it.

また、２次元画像表示装置空間位置検出部１１６による位置検出や、３Ｄ描画部１１５による３次元表示画像２０２の表示位置の制御などは、３次元画像表示装置１３０が有する機能によって行われるようにしてもよい。 Further, the position detection by the two-dimensional image display device spatial position detection unit 116 and the control of the display position of the three-dimensional display image 202 by the 3D drawing unit 115 are performed by the functions of the three-dimensional image display device 130. Good.

（実施形態２）
実施形態２の表示装置は、上記実施形態１と比べて、図３に示すように、３次元画像表示装置１３０の左画像表示部１３１および右画像表示部１３２に、３次元表示画像２０２の部分に加えて、２次元表示画像２０１が表示された２次元画像表示装置１２０自体も表示されるように構成されている点が主に異なっている。なお、３次元画像表示装置１３０としては、２次元画像表示装置１２０を除く背景部分は、実施形態１と同様に３次元画像表示装置１３０を透過して直視されるようにされてもよいし、２次元画像表示装置１２０を含む背景部分全体が、カメラ１４０による撮像画像を用いて３次元画像表示装置１３０に表示されるようにしてもよい。 (Embodiment 2)
The display device according to the second embodiment is different from the display device according to the first embodiment in that the left image display unit 131 and the right image display unit 132 of the three-dimensional image display device 130 have the three-dimensional display image 202 as shown in FIG. In addition to this, the difference is mainly that the two-dimensional image display device 120 itself on which the two-dimensional display image 201 is displayed is also configured to be displayed. As for the three-dimensional image display device 130, the background portion excluding the two-dimensional image display device 120 may be directly seen through the three-dimensional image display device 130 as in the first embodiment. The entire background portion including the two-dimensional image display device 120 may be displayed on the three-dimensional image display device 130 using the image captured by the camera 140.

上記のような表示が行われるようにするために、表示処理装置１１０は、図４に示すように、カメラ１４０による撮像画像と、３Ｄ描画部１１５によって描画された３次元画像とが画像合成部１１７によって合成されるようになっている。 In order to perform the above-described display, the display processing device 110, as shown in FIG. 4, the image combining unit of the image captured by the camera 140 and the three-dimensional image drawn by the 3D drawing unit 115. It is designed to be synthesized by 117.

上記のような表示が行われる場合でも、やはり、２次元画像表示装置１２０への表示と３次元画像表示装置１３０への表示とが連続するようにして、臨場感を高められるような表示をさせることが容易にできる。また、上記のような合成が行われる場合には、例えば３次元表示画像によって隠れる部分の２次元画像表示装置１２０自体やその表示画像を確実にマスクすることなども容易にできる。 Even when the above-described display is performed, the display on the two-dimensional image display device 120 and the display on the three-dimensional image display device 130 are made continuous so that the display can be enhanced. Can be done easily. When the above-described composition is performed, for example, it is possible to easily surely mask the two-dimensional image display device 120 itself and the display image which are hidden by the three-dimensional display image.

なお、上記のような表示が行われるようにするためには、３次元表示画像２０２への表示位置が、２次元画像表示装置空間位置検出部１１６の検出結果に基づいて３Ｄ描画部１１５で描画される際に決定されるのに限らず、画像合成部１１７で画像合成される際に決定されるようにしてもよい。 In order to perform the above-described display, the display position on the three-dimensional display image 202 is drawn by the 3D drawing unit 115 based on the detection result of the two-dimensional image display device spatial position detection unit 116. The image synthesizing unit 117 may determine the image synthesizing unit 117 when synthesizing the images.

また、カメラ１４０によって撮像された２次元画像表示装置１２０や、その表示画像が３次元画像表示装置１３０に表示されるのに限らず、２次元画像表示装置１２０への仮想的な表示画像が画像合成部１１７により合成されて３次元画像表示装置１３０に表示されるようにしたり、２次元画像表示装置１２０自体が仮想的なものとして、画像合成部１１７により合成されて３次元画像表示装置１３０に表示されるようにしてもよい。 Further, the two-dimensional image display device 120 captured by the camera 140 and the display image thereof are not limited to being displayed on the three-dimensional image display device 130, and a virtual display image on the two-dimensional image display device 120 is an image. The two-dimensional image display device 120 is synthesized by the synthesizing unit 117 so as to be displayed on the three-dimensional image display device 130, or the two-dimensional image display device 120 itself is virtual and is synthesized by the image synthesizing unit 117 to be displayed on the three-dimensional image display device 130. It may be displayed.

（実施形態３）
実施形態３の表示装置は、図５に示すように、３次元画像表示装置１３０に代えて、ホログラム表示装置１５０によるホログラム画像によって３次元画像の表示が行われる点が主に異なる。上記ホログラム表示装置１５０は、例えば連結部材１５１によって、２次元画像表示装置１２０との位置関係が固定されるように設けられている。すなわち、ホログラム表示装置１５０によって表示される３次元画像は、３次元画像表示装置１３０のような表示装置と異なり、ユーザが視認する位置や方向が変わっても、２次元画像表示装置１２０によって表示される２次元画像との相対的な位置を変化させる必要はなく、３次元画像表示装置１３０とホログラム表示装置１５０との相対位置関係が固定されてさえいればよい。 (Embodiment 3)
The display device of the third embodiment mainly differs in that, as shown in FIG. 5, a hologram image is displayed by a hologram image by the hologram display device 150 instead of the three-dimensional image display device 130. The hologram display device 150 is provided so that the positional relationship with the two-dimensional image display device 120 is fixed by, for example, the connecting member 151. That is, unlike the display device such as the three-dimensional image display device 130, the three-dimensional image displayed by the hologram display device 150 is displayed by the two-dimensional image display device 120 even if the position or direction viewed by the user changes. It is not necessary to change the relative position of the three-dimensional image display device 130 and the hologram display device 150 relative to the two-dimensional image.

そこで、表示処理装置１１０は、図６に示すように、特に２次元画像表示装置空間位置検出部１１６などを設けたりしなくても、連結部材１５１によって定まるホログラム表示装置１５０と２次元画像表示装置１２０との位置に応じて、ホログラム表示装置１５０によって表示される３次元画像の位置と２次元画像表示装置１２０によって表示される２次元画像の位置とがあらかじめ設定されることにより、これらの画像の表示が連続するようにして、臨場感を高められるような表示をさせることが容易にできる。 Therefore, as shown in FIG. 6, the display processing device 110 does not particularly need to provide the two-dimensional image display device spatial position detection unit 116 or the like, and the hologram display device 150 and the two-dimensional image display device defined by the connecting member 151. The position of the three-dimensional image displayed by the hologram display device 150 and the position of the two-dimensional image displayed by the two-dimensional image display device 120 are set in advance in accordance with the position with respect to 120, thereby It is easy to make the display continuous so that the display can be enhanced.

なお、上記各実施形態や変形例で説明した構成要素は、論理的に矛盾しない限り、種々組み合わせてもよい。 The constituent elements described in each of the above embodiments and modifications may be combined in various ways as long as there is no logical contradiction.

１１０ 表示処理装置
１１１ データ出力部
１１２ オブジェクト位置データ出力部
１１３ ３Ｄ／２Ｄ部分分割部
１１４ ２Ｄ描画部
１１５ ３Ｄ描画部
１１６ ２次元画像表示装置空間位置検出部
１１７ 画像合成部
１２０ ２次元画像表示装置
１３０ ３次元画像表示装置
１３１ 左画像表示部
１３２ 右画像表示部
１４０ カメラ
１５０ ホログラム表示装置
１５１ 連結部材
２０１ ２次元表示画像
２０２ ３次元表示画像 110 display processing device 111 data output unit 112 object position data output unit 113 3D/2D partial division unit 114 2D drawing unit 115 3D drawing unit 116 two-dimensional image display device spatial position detection unit 117 image combining unit 120 two-dimensional image display device 130 3D image display device 131 Left image display part 132 Right image display part 140 Camera 150 Hologram display device 151 Connecting member 201 2D display image 202 3D display image

Claims (9)

３次元画像表示装置と、
少なくとも１つの２次元画像表示装置と、
上記３次元画像表示装置による３次元表示画像と上記２次元画像表示装置による２次元表示画像とを連続するように表示させる表示処理装置と、
を備えたことを特徴とする表示装置。 A three-dimensional image display device,
At least one two-dimensional image display device;
A display processing device for continuously displaying a three-dimensional display image by the three-dimensional image display device and a two-dimensional display image by the two-dimensional image display device;
A display device comprising: 請求項１の表示装置であって、
上記表示処理装置は、
３次元オブジェクトにおける上記２次元画像表示装置の表示面よりも奥に位置する部分を上記２次元画像表示装置に表示させる一方、上記２次元画像表示装置の表示面よりも手前に位置する部分を上記３次元画像表示装置に表示させることを特徴とする表示装置。 The display device according to claim 1, wherein
The display processing device,
A part of the three-dimensional object located deeper than the display surface of the two-dimensional image display device is displayed on the two-dimensional image display device, while a part located in front of the display surface of the two-dimensional image display device is displayed. A display device for displaying on a three-dimensional image display device. 請求項２の表示装置であって、
上記表示処理装置は、
ユーザによって直視される上記２次元画像表示装置の上記２次元表示画像に連続する上記３次元表示画像を上記３次元画像表示装置に表示させることを特徴とする表示装置。 The display device according to claim 2, wherein
The display processing device,
A display device for displaying the three-dimensional display image continuous to the two-dimensional display image of the two-dimensional image display device directly viewed by a user on the three-dimensional image display device. 請求項３の表示装置であって、
上記３次元画像表示装置は、ユーザの左右の目によって視認される画像を表示するとともに、上記２次元画像表示装置を直視可能に構成されていることを特徴とする表示装置。 The display device according to claim 3, wherein
The three-dimensional image display device is configured to display an image visually recognized by the left and right eyes of a user and to be able to directly see the two-dimensional image display device. 請求項３の表示装置であって、
上記３次元画像表示装置は、ホログラム画像を表示することを特徴とする表示装置。 The display device according to claim 3, wherein
The three-dimensional image display device displays a hologram image. 請求項２の表示装置であって、
上記表示処理装置は、上記３次元表示画像中に上記２次元画像表示装置および上記２次元表示画像を表示させることを特徴とする表示装置。 The display device according to claim 2, wherein
The display processing device displays the two-dimensional image display device and the two-dimensional display image in the three-dimensional display image. 請求項２の表示装置であって、
さらに、ユーザの視野における上記２次元画像表示装置の空間位置を検出する空間位置検出部を備え、
上記表示処理装置は、上記空間位置検出部の検出結果に応じた上記３次元オブジェクトの描画を行うことを特徴とする表示装置。 The display device according to claim 2, wherein
Furthermore, a spatial position detection unit that detects a spatial position of the two-dimensional image display device in the visual field of the user is provided,
The display device is characterized in that the three-dimensional object is drawn according to the detection result of the spatial position detection unit. ３次元画像表示装置、および少なくとも１つの２次元画像表示装置に、それぞれ３次元表示画像または２次元表示画像を表示させる表示処理装置であって、
上記３次元表示画像と上記２次元表示画像とを連続するように表示させることを特徴とする表示処理装置。 A three-dimensional image display device and a display processing device for displaying a three-dimensional display image or a two-dimensional display image on at least one two-dimensional image display device, respectively.
A display processing device for displaying the three-dimensional display image and the two-dimensional display image so as to be continuous. ３次元画像表示装置、および少なくとも１つの２次元画像表示装置に、それぞれ３次元表示画像または２次元表示画像を表示させる処理をコンピュータに行わせる表示処理プログラムであって、
上記３次元表示画像と上記２次元表示画像とを連続するように表示させることを特徴とする表示処理プログラム。 A display processing program for causing a computer to display a three-dimensional display image or a two-dimensional display image on a three-dimensional image display device and at least one two-dimensional image display device, respectively.
A display processing program for displaying the three-dimensional display image and the two-dimensional display image in a continuous manner.
JP2018219972A 2018-11-26 2018-11-26 Display device, display processing device, and display processing program Active JP6562371B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018219972A JP6562371B1 (en) 2018-11-26 2018-11-26 Display device, display processing device, and display processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018219972A JP6562371B1 (en) 2018-11-26 2018-11-26 Display device, display processing device, and display processing program

Publications (2)

Publication Number Publication Date
JP6562371B1 JP6562371B1 (en) 2019-08-21
JP2020088592A true JP2020088592A (en) 2020-06-04

Family

ID=67690483

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018219972A Active JP6562371B1 (en) 2018-11-26 2018-11-26 Display device, display processing device, and display processing program

Country Status (1)

Country Link
JP (1) JP6562371B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0944141A (en) * 1995-07-27 1997-02-14 Sony Corp Three-dimensional stereoscopic vision device
JPH1164783A (en) * 1997-08-18 1999-03-05 Ishikawa Kogaku Zokei Kenkyusho:Kk Method and device for composing and displaying reproduced image of hologram and projected two-dimensional video
JP2008089985A (en) * 2006-10-02 2008-04-17 Pioneer Electronic Corp Image display device
JP2012105200A (en) * 2010-11-12 2012-05-31 Sharp Corp Three-dimensional content display device and three-dimensional content display method
WO2016152300A1 (en) * 2015-03-25 2016-09-29 京セラドキュメントソリューションズ株式会社 Information processing device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0944141A (en) * 1995-07-27 1997-02-14 Sony Corp Three-dimensional stereoscopic vision device
JPH1164783A (en) * 1997-08-18 1999-03-05 Ishikawa Kogaku Zokei Kenkyusho:Kk Method and device for composing and displaying reproduced image of hologram and projected two-dimensional video
JP2008089985A (en) * 2006-10-02 2008-04-17 Pioneer Electronic Corp Image display device
JP2012105200A (en) * 2010-11-12 2012-05-31 Sharp Corp Three-dimensional content display device and three-dimensional content display method
WO2016152300A1 (en) * 2015-03-25 2016-09-29 京セラドキュメントソリューションズ株式会社 Information processing device

Also Published As

Publication number Publication date
JP6562371B1 (en) 2019-08-21

Similar Documents

Publication Publication Date Title
US10204452B2 (en) Apparatus and method for providing augmented reality-based realistic experience
US11010958B2 (en) Method and system for generating an image of a subject in a scene
JP7304934B2 (en) Mixed reality system with virtual content warping and method of using it to generate virtual content
US20160307374A1 (en) Method and system for providing information associated with a view of a real environment superimposed with a virtual object
WO2017183346A1 (en) Information processing device, information processing method, and program
JP6742701B2 (en) Information processing apparatus, control method thereof, and program
US20060050070A1 (en) Information processing apparatus and method for presenting image combined with virtual image
JPWO2015098807A1 (en) An imaging system that synthesizes a subject and a three-dimensional virtual space in real time
JP2007042055A (en) Image processing method and image processor
US10672311B2 (en) Head tracking based depth fusion
WO2018084087A1 (en) Image display system, image display device, control method therefor, and program
JP2022058753A (en) Information processing apparatus, information processing method, and program
TW201919393A (en) Displaying system and display method
JP2018157331A (en) Program, recording medium, image generating apparatus, image generation method
US20140049540A1 (en) Image Processing Device, Method, Computer Program Product, and Stereoscopic Image Display Device
JP6562371B1 (en) Display device, display processing device, and display processing program
CN116325720A (en) Dynamic resolution of depth conflicts in telepresence
WO2022239297A1 (en) Information processing device, information processing method, and recording medium
JPH09181972A (en) Image composition device
JP2019179542A (en) Information processing system and program
JP2000029589A (en) Information display device
JP2018142273A (en) Information processing apparatus, method for controlling information processing apparatus, and program
JP6814686B2 (en) Stereoscopic image display control device, stereoscopic image display control method and stereoscopic image display control program
JP2005063004A (en) Mixed reality sense system
JP2023007233A5 (en)

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181127

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20181127

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7426

Effective date: 20181217

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20181217

A80 Written request to apply exceptions to lack of novelty of invention

Free format text: JAPANESE INTERMEDIATE CODE: A80

Effective date: 20181225

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190304

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190312

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190419

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190422

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190625

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190712

R150 Certificate of patent or registration of utility model

Ref document number: 6562371

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250