JP2017068269A - Virtual image display device - Google Patents

Virtual image display device Download PDF

Info

Publication number
JP2017068269A
JP2017068269A JP2016211343A JP2016211343A JP2017068269A JP 2017068269 A JP2017068269 A JP 2017068269A JP 2016211343 A JP2016211343 A JP 2016211343A JP 2016211343 A JP2016211343 A JP 2016211343A JP 2017068269 A JP2017068269 A JP 2017068269A
Authority
JP
Japan
Prior art keywords
video
virtual image
image
region
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016211343A
Other languages
Japanese (ja)
Other versions
JP6217827B2 (en
Inventor
武田　高司
Takashi Takeda
高司 武田
貴洋 戸谷
Takahiro Totani
貴洋 戸谷
将行 ▲高▼木
将行 ▲高▼木
Masayuki Takagi
小松　朗
Akira Komatsu
朗 小松
敏明 宮尾
Toshiaki Miyao
敏明 宮尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2016211343A priority Critical patent/JP6217827B2/en
Publication of JP2017068269A publication Critical patent/JP2017068269A/en
Application granted granted Critical
Publication of JP6217827B2 publication Critical patent/JP6217827B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Mechanical Optical Scanning Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a virtual image display device capable of widening a video region effectively available as a non-distorted image by reducing a correction amount of trapezoidal correction and avoiding generation of a useless region which may be left without being used, as much as possible when performing the trapezoidal correction in an image projection.SOLUTION: A trapezoidal correction processing section 53 performs trapezoidal correction (distortion correction) on video regions RR and LL being divided video regions divided into a plurality of regions, individually in accordance with respective divided video regions RR1, RR2, LL1, LL2. In such a case, each of the video regions RR and LL is divided into a plurality of regions. Further, trapezoidal correction in a pair of right and left virtual image forming sections 20 is performed in mirror symmetry and in the virtual image forming section 20, and central positions (centers EX1 and EX2) of eyes of a wearing person are adjusted so as to be matched to a non-distorted image with a little correction amount.SELECTED DRAWING: Figure 7

Description

本発明は、頭部に装着して使用するヘッドマウントディスプレイ等の虚像表示装置に関する。   The present invention relates to a virtual image display device such as a head mounted display that is used by being mounted on a head.

近年、ヘッドマウントディスプレイのように虚像の形成及び観察を可能にする虚像表示装置として、例えば、画像光を走査させて眼の網膜に画像を投影するものが提案されており、虚像を形成する画像光と外界からの光である外界光とを重畳させるために、シースルーにしたものが提案されている（特許文献１参照）。   In recent years, as a virtual image display device that enables formation and observation of a virtual image, such as a head-mounted display, for example, a device that scans image light and projects an image on the retina of an eye has been proposed. In order to superimpose light and external light which is light from the outside world, a see-through light is proposed (see Patent Document 1).

ところで、画像となるべき光を斜め方向から投射する場合、例えば投射画像に生じる歪みを台形補正等する歪補正処理が必要となる。これに対して、ヘッドマウントディスプレイではないが、光走査を行って画像投射を行う走査型画像表示装置に関する技術として、画像投射の際に偏向振幅を変化させることで台形歪みを補正するものが知られている（特許文献２参照）。ヘッドマウントディスプレイにおいても、例えば耳側から或いは鼻側から斜め方向に画像投射をするといった場合には、通常の画像表示装置の場合と同様に画像の歪みを是正するために何らかの補正処理が必要となる。ここで、台形補正のように画像を生成する装置内部での信号処理によって画像についての補正処理をすることも考えられる。   By the way, when projecting light to be an image from an oblique direction, for example, a distortion correction process for correcting a distortion generated in the projected image, for example, a trapezoidal correction is necessary. On the other hand, a technique for correcting a trapezoidal distortion by changing the deflection amplitude at the time of image projection is known as a technique related to a scanning image display device that is not a head mounted display but performs image projection by performing optical scanning. (See Patent Document 2). Even in a head-mounted display, for example, when image projection is performed obliquely from the ear side or the nose side, some correction processing is required to correct image distortion as in the case of a normal image display device. Become. Here, it is also conceivable to perform correction processing on the image by signal processing inside the apparatus that generates the image, such as keystone correction.

投射画像に対して台形補正等を行う場合、一般的に補正量が大きくなるほど映し出される画像が小さくなって解像度が下がり、また、使われないままとなる無駄な領域も増えることになる。従って、例えば高精細な画像を得るには、より高解像度の画像形成ができることが必要となるが、ヘッドマウントディスプレイの場合においては、特に装置の小型化・軽量化が要求されるため、画像を生成する側において確保できる解像度には限界がある。さらに、ヘッドマウントディスプレイの場合、装置の小型化・軽量化の要請から、できるだけ各部の装置を簡易な構造とすることが望ましく、例えば光走査を行って画像投射を行う場合であっても、特許文献２のような複雑な光走査の制御が可能なものではなく、装置の構造が簡易であることが好ましい。   When performing keystone correction or the like on a projected image, generally, the larger the correction amount, the smaller the projected image, the lower the resolution, and the more useless areas that remain unused. Therefore, for example, in order to obtain a high-definition image, it is necessary to be able to form a higher-resolution image. However, in the case of a head-mounted display, the size and weight of the device are particularly required. There is a limit to the resolution that can be secured on the generation side. Furthermore, in the case of a head-mounted display, it is desirable to make the device of each part as simple as possible in order to reduce the size and weight of the device. For example, even when performing image projection by performing optical scanning, It is not possible to control complicated optical scanning as in Document 2, and it is preferable that the structure of the apparatus is simple.

特開２００７−１７８９４１号公報JP 2007-178941 A 特開２００７−１９９２５１号公報JP 2007-199251 A

本発明は、画像投射において台形補正を行う場合において、当該台形補正による補正量を低減し、使われないままとなる無駄な領域の発生を極力回避し、歪みのない画像として有効に使える映像領域を広くとることを可能とする虚像表示装置を提供することを目的とする。   The present invention reduces the amount of correction by trapezoidal correction when performing trapezoidal correction in image projection, avoids the generation of useless areas that are not used as much as possible, and effectively uses a video area as a distortion-free image An object of the present invention is to provide a virtual image display device that can take a wide range of images.

上記目的を達成するため、本発明の第１の虚像表示装置は、（ａ）入力信号に応じて使用者に虚像を視認させるための画像信号の処理を行う画像処理部と、（ｂ）画像処理部からの画像信号に応じて虚像を視認させるための光を生成する映像生成部と、（ｃ）映像生成部からの光を仮想的な映像領域に表示された虚像として視認させる虚像形成部と、を備え、（ｄ）映像生成部において光を生成し映像生成部からの光を虚像形成部によって虚像として認識させるまでの過程で、少なくとも縦横のうち一方向についての台形歪を発生する虚像表示装置であって、（ｅ）画像処理部は、使用者に認識させるべき虚像の台形補正の処理を行う台形補正処理部を有し、（ｆ）画像処理部は、虚像形成部によって視認させる映像領域を、複数に分割した分割映像領域で構成させるとともに、分割映像領域にそれぞれ対応して台形補正処理部による台形補正の処理を含む処理を行う。   In order to achieve the above object, a first virtual image display device of the present invention includes (a) an image processing unit that processes an image signal for allowing a user to visually recognize a virtual image according to an input signal, and (b) an image. A video generation unit that generates light for visually recognizing a virtual image according to an image signal from the processing unit; and (c) a virtual image formation unit that visually recognizes the light from the video generation unit as a virtual image displayed in a virtual video region. (D) a virtual image that generates trapezoidal distortion in at least one of vertical and horizontal directions in a process from generation of light in the video generation unit to recognition of light from the video generation unit as a virtual image by the virtual image formation unit (E) The image processing unit includes a trapezoidal correction processing unit that performs a trapezoidal correction process of a virtual image to be recognized by the user, and (f) the image processing unit is visually recognized by the virtual image forming unit. Divided video area into multiple Causes consists split image area, performs a process including the process of keystone correction by the trapezoidal correction processing unit to correspond to the divided image area.

上記虚像表示装置では、虚像形成部において複数に分割された分割映像領域の状態にある映像領域に対して台形補正処理部による台形補正を含む画像処理が各分割映像領域に応じて個別になされるものとすることができる。この場合、映像領域を複数に分割することで、例えば使われないままとなる無駄な領域が少なくなるようにして、使用する映像領域を広くとることができる。また、この場合、映像領域において分割された各分割映像領域のうち台形補正がなされる領域での補正量を、例えば映像領域を１つの矩形領域とする台形補正の場合における補正量と比較して少なくすることができる。結果的に、歪みの補正に伴う解像度の低下を抑制できる。さらに、複数の映像領域を有することで、多種多様な情報表示が可能となる。   In the virtual image display device, image processing including trapezoid correction by the trapezoid correction processing unit is individually performed for each divided video region with respect to a video region in a divided video region divided into a plurality of portions in the virtual image forming unit. Can be. In this case, by dividing the video area into a plurality of areas, for example, a useless area that remains unused can be reduced, and a wide video area can be used. Further, in this case, the correction amount in the region where the trapezoid correction is performed among the divided video regions divided in the video region is compared with the correction amount in the case of the trapezoid correction in which the video region is one rectangular region, for example. Can be reduced. As a result, it is possible to suppress a decrease in resolution accompanying distortion correction. Furthermore, by having a plurality of video areas, a wide variety of information can be displayed.

本発明の具体的な側面では、台形補正処理部は、分割映像領域にそれぞれ対応して個別の台形補正の処理を行う。この場合、映像領域において分割された各分割映像領域で歪みの補正された画像を形成でき、この際、補正量を、映像領域を１つの矩形領域とする台形補正の場合における補正量と比較して少なくできる。   In a specific aspect of the present invention, the trapezoidal correction processing unit performs individual trapezoidal correction processing corresponding to each divided video area. In this case, a distortion-corrected image can be formed in each divided video area divided in the video area. At this time, the correction amount is compared with the correction amount in the case of trapezoidal correction in which the video area is one rectangular area. Can be less.

本発明の別の側面では、画像処理部は、分割映像領域として、内側に位置する第１映像領域と外側に位置する第２映像領域とを含むように処理を行う。ここで、内側に位置するとは、装着時において他方に比べ使用者（装着者）の鼻側に位置することを意味し、外側に位置するとは、装着時において他方に比べ使用者の耳側に位置することを意味する。この場合、投射される方向が内側からであるか外側からであるかによって、内側と外側とで画像の歪の発生度合に差が出ることがあるが、例えば歪の少ない側の映像領域において主たる映像を形成させ、他方の映像領域に主たる映像を補助する情報を表示する従たる映像を形成させるといったことができる。   In another aspect of the present invention, the image processing unit performs processing so as to include a first video region located inside and a second video region located outside as the divided video regions. Here, “inside” means that it is located closer to the user's (wearer) nose side than the other when worn, and “outside” means closer to the user's ear side than the other when worn. Means to be located. In this case, depending on whether the direction of projection is from the inside or the outside, there may be a difference in the degree of distortion of the image between the inside and the outside. A video can be formed, and a sub video that displays information for assisting the main video in the other video area can be formed.

本発明のさらに別の側面では、使用者からの指示を受け付ける入力受付部をさらに備え、画像処理部は、虚像形成部によって視認させる第２映像領域に、入力受付部で受け付ける動作に関するアイコン表示を行わせる。この場合、例えば第２映像領域に表示される情報に基づいて操作を行うことで、第１映像領域に映し出す映像等を使用者の意思を反映して選択することができる。   In still another aspect of the present invention, the image processing unit further includes an input receiving unit that receives an instruction from the user, and the image processing unit displays an icon display related to the operation received by the input receiving unit in the second video region that is visually recognized by the virtual image forming unit. Let it be done. In this case, for example, by performing an operation based on information displayed in the second video area, it is possible to select a video or the like to be displayed in the first video area, reflecting the user's intention.

本発明のさらに別の側面では、虚像形成部は、左右の眼にそれぞれ対応する右眼側虚像形成部と左眼側虚像形成部との一対で構成され、画像処理部は、右眼側虚像形成部によって視認させる映像領域の第１映像領域として右眼側第１映像領域を含むとともに、映像領域の第２映像領域として右眼側第２映像領域を含むように処理を行い、画像処理部は、左眼側虚像形成部によって視認させる映像領域の第１映像領域として左眼側第１映像領域を含むとともに、映像領域の第２映像領域として左眼側第２映像領域を含むように処理を行い、画像処理部は、右眼側第１映像領域と左眼側第１映像領域とにおいて、左右に共通する映像を表示させる。この場合、右眼側第１映像領域の映像と左眼側第１映像領域の映像とを共通する一つの画像として使用者に認識させることができ、さらに、右眼側第２映像領域及び左眼側第２映像領域において別個の映像を映し出して認識させることができる。   In still another aspect of the present invention, the virtual image forming unit includes a pair of a right eye side virtual image forming unit and a left eye side virtual image forming unit corresponding to the left and right eyes, and the image processing unit is a right eye side virtual image. The image processing unit performs processing so as to include the right eye side first video region as the first video region of the video region visually recognized by the forming unit and include the right eye side second video region as the second video region of the video region. Includes processing the left eye side first video region as the first video region of the video region visually recognized by the left eye side virtual image forming unit and the left eye side second video region as the second video region of the video region. And the image processing unit displays a common video to the left and right in the right eye side first video region and the left eye side first video region. In this case, the video of the right eye side first video area and the video of the left eye side first video area can be recognized by the user as one common image, and the right eye side second video area and the left eye A separate image can be projected and recognized in the eye-side second image area.

本発明のさらに別の側面では、画像処理部は、右眼側第２映像領域に形成される独立な映像を表示させ、左眼側第２映像領域に形成される別の独立な映像を表示させる。この場合、映像のうち中央部の画像として、左右の眼で認識可能な共通する一つの画像を形成させるとともに、映像のうち周辺部として認識される画像に関して、右側には右眼でのみ認識可能な独立の画像を形成させ、左側には左眼でのみ認識可能な別個独立の画像をそれぞれ形成させることができる。   In yet another aspect of the present invention, the image processing unit displays an independent video formed in the right eye side second video region and displays another independent video formed in the left eye side second video region. Let In this case, a common image that can be recognized by the left and right eyes is formed as an image in the center of the video, and an image that is recognized as a peripheral part of the video can be recognized only by the right eye on the right side. Separate independent images can be formed, and separate independent images that can be recognized only by the left eye can be formed on the left side.

本発明のさらに別の側面では、台形補正処理部は、左右に共通する映像が表示される右眼側第１映像領域及び左眼側第１映像領域に対してのみ台形補正を行う。この場合、認識される映像のうち中央部の映像については、補正によって画素合わせを可能にすることで、左右で共通のものとして認識させることができる。一方、周辺部の映像については、実質的な補正を要しないことで、画像処理の負担を減らすことができる。   In yet another aspect of the present invention, the trapezoidal correction processing unit performs trapezoidal correction only on the right eye side first video region and the left eye side first video region in which images common to the left and right are displayed. In this case, the center image among the recognized images can be recognized as common to the left and right by enabling pixel alignment by correction. On the other hand, the image processing in the peripheral portion is not required to be substantially corrected, so that the burden of image processing can be reduced.

本発明のさらに別の側面では、画像処理部は、右眼側虚像形成部によって視認させる右眼側第２映像領域を、使用者が視線を左側に向けた場合に視界から外れる範囲に形成し、左眼側虚像形成部によって視認させる左眼側第２映像領域を、使用者が視線を右側に向けた場合に視界から外れる範囲に形成する。この場合、使用者は、必要な画像情報を必要な時に認識し、不要な情報を視界から排除できる。   In still another aspect of the present invention, the image processing unit forms the right-eye-side second video region to be visually recognized by the right-eye-side virtual image forming unit in a range out of the field of view when the user turns his / her line of sight toward the left side. The left-eye-side second video region that is visually recognized by the left-eye-side virtual image forming unit is formed in a range that is out of the field of view when the user turns his / her line of sight to the right side. In this case, the user can recognize necessary image information when necessary and can exclude unnecessary information from view.

上記目的を達成するため、本発明の第２の虚像表示装置は、（ａ）入力信号に応じて使用者に虚像を視認させるための画像信号の処理を行う画像処理部と、（ｂ）画像処理部からの画像信号に応じて虚像を視認させための光を生成する映像生成部と、（ｃ）映像生成部からの光を仮想的な映像領域に表示された虚像として視認させる虚像形成部と、を備え、（ｄ）映像生成部において光を生成し映像生成部からの光を虚像形成部によって虚像として視認させるまでの過程で、少なくとも縦横のうち一方向についての台形歪を発生させる虚像表示装置であって、（ｅ）画像処理部は、使用者に認識させるべき虚像の台形補正の処理を行う台形補正処理部を有し、（ｆ）虚像形成部は、左右の眼にそれぞれ対応する右眼側虚像形成部と左眼側虚像形成部との一対で構成され、（ｇ）台形補正処理部は、右眼側虚像形成部側に対する台形補正と左眼側虚像形成部側に対する台形補正とを左右方向に関する対称軸を基準としてミラー対称に行う。   In order to achieve the above object, a second virtual image display device of the present invention includes (a) an image processing unit that processes an image signal for allowing a user to visually recognize a virtual image according to an input signal, and (b) an image. A video generation unit that generates light for visually recognizing a virtual image according to an image signal from the processing unit; and (c) a virtual image formation unit that visually recognizes the light from the video generation unit as a virtual image displayed in a virtual video region. (D) a virtual image that generates a trapezoidal distortion in at least one of the vertical and horizontal directions in the process from the generation of light in the video generation unit until the light from the video generation unit is visually recognized as a virtual image by the virtual image formation unit (E) The image processing unit includes a trapezoidal correction processing unit that performs a trapezoidal correction process of a virtual image to be recognized by the user, and (f) the virtual image forming unit corresponds to the left and right eyes, respectively. Right-eye virtual image forming part and left-eye virtual image (G) The trapezoidal correction processing unit mirrors the trapezoidal correction for the right eye side virtual image forming unit side and the trapezoidal correction for the left eye side virtual image forming unit side with respect to the symmetry axis in the left-right direction. Do it symmetrically.

上記虚像表示装置では、虚像形成部が右眼側虚像形成部と左眼側虚像形成部との一対で構成されており、かつ、台形補正処理部での台形補正が、両虚像形成部に関してミラー対称に行う左右バランスのとれたものとなっており、左右で個別に補正を行うのに比べて、補正処理の負担を軽減できる。また、この場合、左右が揃っていることで、補正量について、例えば右側と左側とで個別に補正をし、かつ、右左の映像領域を共通のものと認識できるように画素を合わせる、といった場合よりも低減できる。   In the virtual image display device, the virtual image forming unit includes a pair of a right eye side virtual image forming unit and a left eye side virtual image forming unit, and the trapezoidal correction in the trapezoidal correction processing unit is mirrored with respect to both virtual image forming units. The left and right balance is symmetrically performed, and the burden of the correction process can be reduced as compared with the case where correction is performed separately on the left and right. Also, in this case, when the left and right are aligned, the correction amount is corrected separately for the right and left sides, for example, and the pixels are aligned so that the right and left video areas can be recognized as common. Can be reduced.

本発明の具体的な側面では、画像処理部は、虚像形成部によって視認させる映像領域を、複数に分割した分割映像領域で構成させ、分割映像領域として、内側に位置する第１映像領域と外側に位置する第２映像領域とを含むように処理を行い、画像処理部は、右眼側虚像形成部によって視認させる映像領域の第１映像領域として右眼側第１映像領域を含むとともに、映像領域の第２映像領域として右眼側第２映像領域を含むように処理を行い、画像処理部は、左眼側虚像形成部によって視認させる映像領域の第１映像領域として左眼側第１映像領域を含むとともに、映像領域の第２映像領域として左眼側第２映像領域を含むように処理を行い、画像処理部は、右眼側第１映像領域と左眼側第１映像領域とにおいて、左右に共通する映像を表示させる。この場合、映像のうち中央部の画像として、左右の眼で認識可能な共通する一つの画像を形成させることができる一方、右眼側第２映像領域と左眼側第２映像領域とにおいて、上記共通する一つの画像とは異なる表示をそれぞれ行うことができる。   In a specific aspect of the present invention, the image processing unit includes a divided video region divided into a plurality of video regions to be visually recognized by the virtual image forming unit, and the first video region located on the inner side and the outer side as the divided video regions. And the image processing unit includes a right eye side first video region as a first video region of the video region visually recognized by the right eye side virtual image forming unit and a video image. Processing is performed so as to include the right-eye-side second video region as the second video region of the region, and the image processing unit performs the left-eye-side first video as the first video region to be visually recognized by the left-eye-side virtual image forming unit. The image processing unit performs processing so as to include the left-eye-side second video region as the second video region of the video region, and the image processing unit performs processing in the right-eye-side first video region and the left-eye-side first video region. , Display common video on left and right To. In this case, one common image that can be recognized by the left and right eyes can be formed as an image in the center of the video, while the right eye side second video region and the left eye side second video region Different displays from the one common image can be performed.

上記目的を達成するため、本発明の第３の虚像表示装置は、（ａ）入力信号に応じて使用者に虚像を視認させるための画像信号の処理を行う画像処理部と、（ｂ）画像処理部からの画像信号に応じて虚像を視認させるための光を生成する映像生成部と、（ｃ）映像生成部からの光を仮想的な映像領域に表示された虚像として視認させる虚像形成部と、を備え、（ｄ）映像生成部において光を生成し映像生成部からの光を虚像形成部によって虚像として視認させるまでの過程で、少なくとも縦横のうち一方向についての台形歪を発生させる虚像表示装置であって、（ｅ）画像処理部は、使用者に認識させるべき虚像の台形補正の処理を行う台形補正処理部を有し、（ｆ）虚像形成部において、映像領域の中心位置は、装着時における使用者の眼の中心位置からずれている。   In order to achieve the above object, a third virtual image display device of the present invention includes (a) an image processing unit for processing an image signal for allowing a user to visually recognize a virtual image according to an input signal, and (b) an image. A video generation unit that generates light for visually recognizing a virtual image according to an image signal from the processing unit; and (c) a virtual image formation unit that visually recognizes the light from the video generation unit as a virtual image displayed in a virtual video region. (D) a virtual image that generates a trapezoidal distortion in at least one of the vertical and horizontal directions in the process from the generation of light in the video generation unit until the light from the video generation unit is visually recognized as a virtual image by the virtual image formation unit In the display device, (e) the image processing unit includes a trapezoidal correction processing unit that performs a trapezoidal correction process of a virtual image to be recognized by the user. (F) In the virtual image forming unit, the center position of the video area is , User's eyes when wearing It is offset from the center position.

上記虚像表示装置では、虚像形成部での映像領域の中心位置が、装着時における使用者の眼の中心位置からずれている。この場合、例えば、少ない補正量で歪みのない画像が形成できる領域の中心位置に眼の中心位置が一致するようにずらすことが可能となる。この結果として、使用者が注目しやすい領域において、使われないままとなる無駄な領域を少なくして、使用する映像領域を広くとることができる。また、使用者が注目しやすい領域以外の領域についても映像を提供する部分として利用できる。   In the virtual image display device, the center position of the video area in the virtual image forming unit is deviated from the center position of the user's eye when worn. In this case, for example, it is possible to shift the eye so that the center position of the eye coincides with the center position of an area where an image without distortion can be formed with a small correction amount. As a result, it is possible to reduce a useless area that is not used in an area that is easily noticed by the user and to increase a video area to be used. Further, an area other than an area that is easily noticed by the user can be used as a part for providing video.

本発明の具体的な側面では、画像処理部は、虚像形成部によって視認させる映像領域を、複数に分割した分割映像領域で構成させ、分割映像領域として、内側に位置する第１映像領域と外側に位置する第２映像領域とを含むように処理を行い、映像領域のうち第１映像領域の中心位置は、装着時における使用者の眼の中心位置に一致している。この場合、第１映像領域の映像を中心視すべき中心側にあるものとして認識させる一方、第２映像領域の映像を周辺側にあるものとして認識させることができる。   In a specific aspect of the present invention, the image processing unit includes a divided video region divided into a plurality of video regions to be visually recognized by the virtual image forming unit, and the first video region located on the inner side and the outer side as the divided video regions. And the center position of the first video area in the video area coincides with the center position of the user's eye when worn. In this case, the video in the first video area can be recognized as being on the central side to be viewed centrally, while the video in the second video area can be recognized as being on the peripheral side.

本発明のさらに別の側面では、映像生成部及び／又は虚像形成部は、少なくとも横台形歪を発生させる。この場合、例えば装着時において、使用者の鼻側或いは耳側から横方向に光を斜め投射して虚像を形成させる場合に横台形歪が発生するものとなるが、当該横台形歪みについて、歪みの補正された画像形成が可能となる。   In still another aspect of the present invention, the video generation unit and / or the virtual image forming unit generates at least horizontal trapezoidal distortion. In this case, for example, at the time of wearing, when a virtual image is formed by obliquely projecting light laterally from the user's nose side or ear side, horizontal trapezoidal distortion occurs. The corrected image can be formed.

本発明のさらに別の側面では、映像生成部は、画像に対応して変調された信号光を射出する信号光変調部と、信号光変調部から入射した信号光を走査させることにより、走査光として射出させる走査光学系と、を有する。この場合、例えば映像生成部の小型化を図ることができる。   In still another aspect of the present invention, the video generation unit scans the signal light modulation unit that emits the signal light modulated corresponding to the image, and the signal light incident from the signal light modulation unit, thereby scanning light. A scanning optical system. In this case, for example, the video generation unit can be downsized.

第１実施形態に係る虚像表示装置を示す図である。It is a figure which shows the virtual image display apparatus which concerns on 1st Embodiment. 虚像表示装置を装着した状態を模式的に示す正面図である。It is a front view which shows typically the state which mounted | wore with the virtual image display apparatus. （Ａ）は、光射出装置の構造の一例について説明するための図であり、（Ｂ）は、（Ａ）に示す光射出装置を別方向から見た図である。(A) is a figure for demonstrating an example of the structure of a light emission apparatus, (B) is the figure which looked at the light emission apparatus shown to (A) from another direction. 虚像表示装置の制御部の構造を説明するブロック図である。It is a block diagram explaining the structure of the control part of a virtual image display apparatus. 画像光の入射によって視認される映像領域について示す概念図である。It is a conceptual diagram shown about the image | video area | region visually recognized by incidence | injection of image light. （Ａ）は、右眼側における映像領域について示す図であり、（Ｂ）は（Ａ）の状態とする際の台形補正について説明するための図である。(A) is a figure shown about the image | video area | region in the right eye side, (B) is a figure for demonstrating the trapezoid correction at the time of setting it to the state of (A). （Ａ）は、左右一対の各映像領域について示す図であり、（Ｂ）は、使用者に認識される画像の様子を概念的に示す図である。(A) is a figure shown about each left-right paired video area | region, (B) is a figure which shows notionally the mode of the image recognized by a user. （Ａ）は、使用者が眼を右に向けた時に認識できる映像の範囲を示す図であり、（Ｂ）は、使用者が眼を左に向けた時に認識できる映像の範囲を示す図である。(A) is a figure which shows the range of the image | video which can be recognized when a user turns his eyes to the right, (B) is a figure which shows the range of the image | video which can be recognized when a user turns his eyes to the left. is there. 第２実施形態に係る虚像表示装置での各映像領域について示す図である。It is a figure shown about each video area | region in the virtual image display apparatus which concerns on 2nd Embodiment. 第３実施形態に係る虚像表示装置の平面図である。It is a top view of the virtual image display device concerning a 3rd embodiment.

〔第１実施形態〕
以下、図面を参照しつつ、本発明の第１実施形態に係る虚像表示装置について詳細に説明する。 [First Embodiment]
Hereinafter, a virtual image display device according to a first embodiment of the present invention will be described in detail with reference to the drawings.

図１に示す実施形態の虚像表示装置１００は、眼鏡のような外観を有するヘッドマウントディスプレイであり、この虚像表示装置１００を装着した観察者となるべき装着者（使用者）に対して虚像に対応する画像光を認識させることができるとともに、虚像表示装置１００の使用者である装着者に外界像をシースルーで観察させることができる。図１では、装着者が虚像表示装置１００を装着した状態を一部拡大して示しており、虚像表示装置１００は一部省略したものとなっている。具体的には、第１表示装置１００Ａは、虚像表示装置１００のうち右眼側の虚像を形成する部分である。なお、例えば図２に模式的に示すように、虚像表示装置１００は、右眼側の第１表示装置１００Ａと左眼側の第２表示装置１００Ｂとを一対とするものであるが、第２表示装置１００Ｂは、第１表示装置１００Ａと同様の構造を有し左右を反転させただけであるので、詳しい説明を省略する。なお、第１表示装置１００Ａは、単独でも虚像表示装置として機能する。   A virtual image display device 100 according to the embodiment shown in FIG. 1 is a head-mounted display having an appearance like glasses, and is a virtual image for a wearer (user) who should be an observer wearing the virtual image display device 100. The corresponding image light can be recognized, and the wearer who is the user of the virtual image display device 100 can see the outside image through the see-through. In FIG. 1, a state in which the wearer wears the virtual image display device 100 is partially enlarged, and the virtual image display device 100 is partially omitted. Specifically, the first display device 100 </ b> A is a portion that forms a virtual image on the right eye side of the virtual image display device 100. For example, as schematically illustrated in FIG. 2, the virtual image display device 100 includes a pair of a first display device 100 </ b> A on the right eye side and a second display device 100 </ b> B on the left eye side. The display device 100B has the same structure as that of the first display device 100A and is simply reversed left and right, and thus detailed description thereof is omitted. Note that the first display device 100A alone functions as a virtual image display device.

ここで、図１等に示す状態において、装着者にとって真正面の方向が光軸ＯＡの方向であり、光軸ＯＡが虚像表示装置１００側から装着者側に向かう方向を＋Ｘ方向とし、装着者にとっての上下方向を±Ｙ方向とし、左右方向を±Ｚ方向とする。   Here, in the state shown in FIG. 1 and the like, the direction in front of the wearer is the direction of the optical axis OA, and the direction of the optical axis OA from the virtual image display device 100 side to the wearer side is the + X direction. The vertical direction is defined as ± Y direction, and the horizontal direction is defined as ± Z direction.

以下、第１表示装置１００Ａの構造の一例について説明することで、虚像表示装置１００の構造の一例を説明する。図１に示すように、第１表示装置１００Ａは、信号光を形成するとともに当該信号光を走査光ＳＬとして射出するための光射出装置１０と、光射出装置１０からの走査光ＳＬを受けて画像光ＰＬを形成する被照射部材である虚像形成部２０とを備える。光射出装置１０は、装着者の鼻ＮＳ周辺に配置され、虚像形成部２０は、光射出装置１０の前方側（−Ｘ側）において装着者の眼ＥＹの前方を覆うように配置されている。   Hereinafter, an example of the structure of the virtual image display device 100 will be described by describing an example of the structure of the first display device 100A. As shown in FIG. 1, the first display device 100 </ b> A receives the light emitting device 10 for forming the signal light and emitting the signal light as the scanning light SL, and the scanning light SL from the light emitting device 10. A virtual image forming unit 20 that is an irradiated member that forms the image light PL. The light emitting device 10 is arranged around the nose NS of the wearer, and the virtual image forming unit 20 is arranged to cover the front of the wearer's eye EY on the front side (−X side) of the light emitting device 10. .

なお、図２において、虚像表示装置１００を装着した状態を正面から見た様子を模式的に示すように、光射出装置１０は、フレームＦＬから延びる支持体ＳＳによって支持されることで、上述したような鼻ＮＳ周辺であって虚像形成部２０よりも＋Ｘ側の位置に配置されている。なお、図示の例では、フレームＦＬの中央部から延びて虚像形成部２０を側方から支持する支柱部ＰＰを有し、支柱部ＰＰの先端側には、装着時に虚像表示装置１００を鼻ＮＳで支持可能にするための鼻パッド部ＮＰを有している。なお、図示のように、光射出装置１０について、右眼用のものを光射出装置１０Ｒとし、左眼用のものを光射出装置１０Ｌとする。   In FIG. 2, the light emitting device 10 is supported by the support SS extending from the frame FL as described above so that the state in which the virtual image display device 100 is mounted is schematically shown from the front. It is arranged around the nose NS and at a position closer to the + X side than the virtual image forming unit 20. In the illustrated example, there is a support column PP that extends from the center of the frame FL and supports the virtual image forming unit 20 from the side, and the virtual image display device 100 is attached to the nose NS at the distal end of the support column PP at the time of wearing. It has a nose pad portion NP for enabling support. As shown in the figure, for the light emitting device 10, the right eye device is the light emitting device 10R, and the left eye device is the light emitting device 10L.

光射出装置１０は、図３（Ａ）及び３（Ｂ）に示すように、信号光形成部である信号光変調部１１と、走査光学系１２と、駆動制御回路１３とを有する映像生成部である。なお、図３（Ａ）に示すように、虚像表示装置１００は、画像形成の制御を行うための制御部５０を備える。制御部５０は、ケーブルＣＢを介して光射出装置１０に接続されている。制御部５０について詳しくは後述する。   As shown in FIGS. 3A and 3B, the light emitting device 10 includes a signal light modulation unit 11 that is a signal light forming unit, a scanning optical system 12, and a drive control circuit 13. It is. As shown in FIG. 3A, the virtual image display device 100 includes a control unit 50 for controlling image formation. The control unit 50 is connected to the light emitting device 10 via the cable CB. Details of the control unit 50 will be described later.

光射出装置１０は、制御部５０からの各種信号のうち、画像信号に従って画像形成のための光射出を行うことで、虚像を形成するための光を生成する映像生成部として機能する。光射出装置１０のうち、駆動制御回路１３は、制御部５０から送信される画像信号や駆動信号に応じて、光射出装置１０の駆動制御を行う。すなわち、駆動制御回路１３は、各種信号に従って、信号光変調部１１と走査光学系１２とを同期して駆動させるための制御回路である。   The light emitting device 10 functions as a video generation unit that generates light for forming a virtual image by performing light emission for image formation in accordance with an image signal among various signals from the control unit 50. In the light emitting device 10, the drive control circuit 13 performs drive control of the light emitting device 10 according to the image signal and the drive signal transmitted from the control unit 50. That is, the drive control circuit 13 is a control circuit for driving the signal light modulator 11 and the scanning optical system 12 in synchronization with each other according to various signals.

以下、光射出装置１０の構成及び動作の詳細について説明する。信号光変調部１１は、合成光形成部１１ａと、コリメートレンズＭＬとを有する。合成光形成部１１ａは、画像光ＰＬ（図１参照）となるべき信号光ＧＬである合成光を形成する。このため、合成光形成部１１ａは、赤（Ｒ光）、緑（Ｇ光）、及び青（Ｂ光）の各色光を発生させる色光源１１ｒ，１１ｇ，１１ｂと、色光源１１ｒ，１１ｇ，１１ｂを経た各色光を合成するための第１及び第２ダイクロイックミラーＤＭ１，ＤＭ２とを有する。コリメートレンズＭＬは、合成光形成部１１ａから射出された合成光である信号光ＧＬの光束状態を調整することで変調して走査光学系１２に向けて射出するレンズであり、例えば信号光ＧＬを略平行化させる。また、走査光学系１２は、コリメートレンズＭＬを経た信号光ＧＬを虚像形成部２０において２次元走査させるスキャン部であるＭＥＭＳミラー部１２ｂを有する。   Hereinafter, the configuration and operation of the light emitting device 10 will be described in detail. The signal light modulating unit 11 includes a combined light forming unit 11a and a collimating lens ML. The combined light forming unit 11a forms combined light that is signal light GL to be the image light PL (see FIG. 1). Therefore, the combined light forming unit 11a includes color light sources 11r, 11g, and 11b that generate red (R light), green (G light), and blue (B light) color lights, and color light sources 11r, 11g, and 11b. The first and second dichroic mirrors DM1 and DM2 for synthesizing the respective color lights having passed through. The collimating lens ML is a lens that modulates the light beam of the signal light GL, which is the combined light emitted from the combined light forming unit 11a, and emits the light toward the scanning optical system 12, for example, the signal light GL. Make parallel. Further, the scanning optical system 12 includes a MEMS mirror unit 12 b that is a scanning unit that causes the signal light GL that has passed through the collimating lens ML to be two-dimensionally scanned in the virtual image forming unit 20.

光射出装置１０のうち、信号光変調部１１において、各色光源１１ｒ，１１ｇ，１１ｂは、ダイオードレーザ光源又はＬＥＤ光源であり、赤色光源１１ｒは、赤色光を発生させる特定波長帯域の光を射出し、緑色光源１１ｇは、緑色光を発生させる特定波長帯域の光を射出し、青色光源１１ｂは、青色光を発生させる特定波長帯域の光を射出する。なお、各色光源１１ｒ，１１ｇ，１１ｂは、例えば各色のＬＥＤ発光素子で構成されている。各色光源１１ｒ，１１ｇ，１１ｂは、第１ダイクロイックミラーＤＭ１又は第２ダイクロイックミラーＤＭ２の方向に向かうように光束の方向を調整して各色光を射出する。   In the signal light modulator 11 of the light emitting device 10, the color light sources 11r, 11g, and 11b are diode laser light sources or LED light sources, and the red light source 11r emits light in a specific wavelength band that generates red light. The green light source 11g emits light of a specific wavelength band that generates green light, and the blue light source 11b emits light of a specific wavelength band that generates blue light. In addition, each color light source 11r, 11g, 11b is comprised by the LED light emitting element of each color, for example. Each color light source 11r, 11g, 11b emits each color light by adjusting the direction of the light flux so as to be directed toward the first dichroic mirror DM1 or the second dichroic mirror DM2.

第１ダイクロイックミラーＤＭ１は、赤色光を発生させる特定波長帯域にある光を透過させるとともに他の特定波長帯域にある光を反射し、第２ダイクロイックミラーＤＭ２は、赤色光及び緑色光を発生させる特定波長帯域にある光を透過させるとともに他の特定波長帯域にある光を反射する。これにより、赤色光、緑色光、及び青色光の３色の色光を合成した合成光がカラー画像を構成する信号光ＧＬとして形成される。なお、図示の場合、各色光源１１ｒ，１１ｇ，１１ｂの位置をそれぞれ調整して、合成される３色の色光の光路長が等しくなるようにしている。すなわち各色光は、等価な位置となっている。また、光束の形状に応じて第１ダイクロイックミラーＤＭ１に対する第２ダイクロイックミラーＤＭ２の大きさも調整されている。   The first dichroic mirror DM1 transmits light in a specific wavelength band for generating red light and reflects light in other specific wavelength bands, and the second dichroic mirror DM2 is specified for generating red light and green light It transmits light in the wavelength band and reflects light in other specific wavelength bands. As a result, combined light obtained by combining the three color lights of red light, green light, and blue light is formed as signal light GL constituting the color image. In the case shown in the figure, the positions of the color light sources 11r, 11g, and 11b are respectively adjusted so that the optical path lengths of the three color lights to be combined are equal. That is, each color light is in an equivalent position. Further, the size of the second dichroic mirror DM2 with respect to the first dichroic mirror DM1 is also adjusted according to the shape of the light beam.

以上のような構成の合成光形成部１１ａで合成光形成を行う場合、赤（Ｒ光）、緑（Ｇ光）、及び青（Ｂ光）の色ごとに対応した色光源１１ｒ，１１ｇ，１１ｂを用いるので、光の利用効率を高いものとなる。   When synthetic light formation is performed by the synthetic light forming unit 11a configured as described above, color light sources 11r, 11g, and 11b corresponding to the colors of red (R light), green (G light), and blue (B light). Therefore, the light utilization efficiency is increased.

コリメートレンズＭＬは、合成光形成部１１ａで形成された合成光である信号光ＧＬの発散角を調整し、例えば光束を若干集光ぎみにさせた略平行の状態にして走査光学系１２のうちスキャン部であるＭＥＭＳミラー部１２ｂに向けて射出する。   The collimating lens ML adjusts the divergence angle of the signal light GL, which is the combined light formed by the combined light forming unit 11a, so that, for example, the light beam is slightly collimated so as to be in a substantially parallel state. The light is emitted toward the MEMS mirror unit 12b which is a scanning unit.

図３（Ｂ）に示すように、走査光学系１２は、ＭＥＭＳミラー部１２ｂと、周辺部材１２ｃとを有する。ＭＥＭＳミラー部１２ｂは、コリメートレンズＭＬを経た信号光ＧＬを走査光ＳＬとして用いることで被照射部材である虚像形成部２０（図１参照）の被照射領域上に照射することで、虚像としての画像を視認させることを可能にする。つまり、ＭＥＭＳミラー部１２ｂは、走査光学系１２の中核部分である。周辺部材１２ｃは、ＭＥＭＳミラー部１２ｂを周辺から取り囲んでＭＥＭＳミラー部１２ｂを収納する孔ＨＬを形成する。言い換えると、ＭＥＭＳミラー部１２ｂは、走査光学系１２の中央部に設けた矩形の孔ＨＬに収められている。ＭＥＭＳミラー部１２ｂは、任意の方向に傾斜可能となっている。   As shown in FIG. 3B, the scanning optical system 12 includes a MEMS mirror portion 12b and a peripheral member 12c. The MEMS mirror unit 12b irradiates the irradiated region of the virtual image forming unit 20 (see FIG. 1), which is an irradiated member, by using the signal light GL that has passed through the collimating lens ML as the scanning light SL. It is possible to make an image visible. That is, the MEMS mirror unit 12 b is a core part of the scanning optical system 12. The peripheral member 12c surrounds the MEMS mirror portion 12b from the periphery, and forms a hole HL that accommodates the MEMS mirror portion 12b. In other words, the MEMS mirror portion 12 b is accommodated in a rectangular hole HL provided in the center portion of the scanning optical system 12. The MEMS mirror part 12b can be inclined in an arbitrary direction.

以下、ＭＥＭＳミラー部１２ｂについて詳しく説明する。ＭＥＭＳミラー部１２ｂは、信号光変調部１１で形成された合成光である信号光ＧＬを虚像形成部２０（図１参照）において２次元走査させて虚像形成部２０（図１参照）を照射する走査光ＳＬとして射出するスキャン部である。ＭＥＭＳミラー部１２ｂは、２次元走査を可能とするために、一軸方向について回転可能なＭＥＭＳミラー本体部１２ｘと、ＭＥＭＳミラー本体部１２ｘを囲む枠であるとともに当該一軸方向に垂直な軸方向について回転可能なミラー枠体１２ｙとで構成されている。まず、ＭＥＭＳミラー本体部１２ｘは、ミラー枠体１２ｙに接続する一対の第１軸ＳＨ１を有し、第１軸ＳＨ１のまわりに回転可能となっている。また、ミラー枠体１２ｙは、ＭＥＭＳミラー部１２ｂの周辺部材１２ｃに接続する一対の第２軸ＳＨ２を有し、第２軸ＳＨ２のまわりに回転可能となっている。第１軸ＳＨ１の軸方向と第２軸ＳＨ２の軸方向とが互いに垂直であることにより、ＭＥＭＳミラー部１２ｂは、ＭＥＭＳミラー本体部１２ｘを互いに垂直な２軸方向について回転可能としている。以上により、ＭＥＭＳミラー部１２ｂは、任意の方向に傾斜可能であり、射出するビームである走査光ＳＬの２次元走査を可能にしている。つまり、ＭＥＭＳミラー部１２ｂは、走査光ＳＬを虚像形成部２０に向けて照射させるＭＥＭＳスキャナーである。   Hereinafter, the MEMS mirror unit 12b will be described in detail. The MEMS mirror unit 12b irradiates the virtual image forming unit 20 (see FIG. 1) by causing the signal light GL, which is the combined light formed by the signal light modulating unit 11, to scan two-dimensionally in the virtual image forming unit 20 (see FIG. 1). It is a scanning part which inject | emits as scanning light SL. The MEMS mirror section 12b is a MEMS mirror main body section 12x that is rotatable in one axial direction and a frame that surrounds the MEMS mirror main body section 12x and that rotates in an axial direction perpendicular to the one axial direction in order to enable two-dimensional scanning. And a possible mirror frame 12y. First, the MEMS mirror main body 12x has a pair of first axes SH1 connected to the mirror frame 12y, and is rotatable around the first axis SH1. The mirror frame 12y has a pair of second axes SH2 connected to the peripheral member 12c of the MEMS mirror portion 12b, and is rotatable around the second axis SH2. Since the axial direction of the first axis SH1 and the axial direction of the second axis SH2 are perpendicular to each other, the MEMS mirror portion 12b can rotate the MEMS mirror main body portion 12x in two perpendicular directions. As described above, the MEMS mirror unit 12b can be tilted in an arbitrary direction, and enables two-dimensional scanning of the scanning light SL that is an emitted beam. That is, the MEMS mirror unit 12 b is a MEMS scanner that irradiates the scanning light SL toward the virtual image forming unit 20.

なお、ＭＥＭＳミラー部１２ｂの光射出側において、光束の発散角を調整するためのリレーレンズを配置することが可能である。   Note that a relay lens for adjusting the divergence angle of the light beam can be disposed on the light exit side of the MEMS mirror portion 12b.

図１に戻って、虚像形成部２０は、樹脂製の透明基板上に半透過反射膜を有して構成される透明基材である。つまり、虚像形成部２０は、ハーフミラーである。虚像形成部２０は、フレームＦＬに組み付けられており、装着者の眼ＥＹの前方であって光射出装置１０よりも装着者に対して遠方側に位置するように配置されている。言い換えると、光軸ＯＡに沿った方向に関して装着者の眼ＥＹと虚像形成部２０との間に光射出装置１０が配置されている。虚像形成部２０は、装着者の眼ＥＹを前方から覆うのに十分な大きさを有しており、光射出装置１０の走査光学系１２から−Ｘ方向に傾いて照射された走査光ＳＬを受け、これを反射することで虚像を形成し、装着者に認識させるものとなっている。この際、虚像形成部２０は、虚像表示装置１００の外観に応じたものとなっており、図１の例では、フレームＦＬに合わせて曲がった形状を有している。   Returning to FIG. 1, the virtual image forming unit 20 is a transparent base material configured to have a transflective film on a resin transparent substrate. That is, the virtual image forming unit 20 is a half mirror. The virtual image forming unit 20 is assembled to the frame FL, and is disposed in front of the wearer's eye EY and further to the far side of the wearer than the light emitting device 10. In other words, the light emitting device 10 is disposed between the wearer's eye EY and the virtual image forming unit 20 in the direction along the optical axis OA. The virtual image forming unit 20 is large enough to cover the wearer's eye EY from the front, and receives the scanning light SL that is irradiated from the scanning optical system 12 of the light emitting device 10 with an inclination in the −X direction. A virtual image is formed by receiving and reflecting this, and is made to be recognized by the wearer. At this time, the virtual image forming unit 20 corresponds to the external appearance of the virtual image display device 100, and in the example of FIG. 1, has a shape bent in accordance with the frame FL.

また、ハーフミラーである虚像形成部２０は、厚さの略均一な板状の部材であり、上記のようにして虚像を形成し視認させるだけでなく、外界光ＯＬを通過させるものとなっている。つまり、装着者の眼ＥＹには、虚像のみならず、外界からの光も入ることになり、虚像表示装置１００は、シースルーの構成となっている。   Further, the virtual image forming unit 20 which is a half mirror is a plate-like member having a substantially uniform thickness, and not only forms and visually recognizes a virtual image as described above but also allows the external light OL to pass through. Yes. That is, not only a virtual image but also light from the outside enters the wearer's eye EY, and the virtual image display device 100 has a see-through configuration.

以上のような構成の場合、光射出装置１０から虚像形成部２０に対する光射出が斜め投射の状態となっている。このため、形成される画像については、仮に何ら補正がなされていないものとすると、横台形歪等によって画像の歪が発生することになる。より具体的に説明すると、虚像形成部２０に対して横方向（Ｚ方向）についての斜めの投射であり、縦方向（Ｙ方向）及び横方向（Ｚ方向）のうち少なくとも横方向について歪を発生させるものとなる。また、光射出装置１０の走査のさせ方や、虚像形成部２０が虚像表示装置１００の外観に応じて曲がった形状であること等も歪の発生要因となる。本実施形態では、発生する画像の歪に応じて制御部５０に備えられている画像処理の台形補正処理において、予め歪補正（台形補正）の処理を行うことで、画像を補正している。   In the case of the above configuration, the light emission from the light emitting device 10 to the virtual image forming unit 20 is in an oblique projection state. For this reason, if an image to be formed is not corrected at all, image distortion occurs due to horizontal trapezoidal distortion or the like. More specifically, it is an oblique projection in the horizontal direction (Z direction) with respect to the virtual image forming unit 20, and distortion occurs at least in the horizontal direction (Y direction) and the horizontal direction (Z direction). To be In addition, the scanning method of the light emitting device 10 and the fact that the virtual image forming unit 20 has a bent shape according to the appearance of the virtual image display device 100 also cause distortion. In the present embodiment, in the trapezoidal correction processing of the image processing provided in the control unit 50 according to the generated image distortion, the image is corrected by performing distortion correction (trapezoid correction) processing in advance.

また、一般に、台形補正等の歪補正を行う場合、補正量が大きくなるほど、映し出される画像は小さくなり、解像度が下がり、また、使われないままとなる無駄な領域も増えることになる。従って、特に装置の小型化・軽量化の要請から解像度の制限が厳しくなる傾向にある虚像表示装置１００のようなヘッドマウントディスプレイの場合においては、補正量が少ないことが望ましい。これに対して、本実施形態では、歪補正をするにあたって、画像を複数の領域に分割することにより、分割された個々の画像における補正量を低減し、使われないままとなる無駄な領域の発生を極力回避し、歪みのない画像として有効に使える映像領域を広くとることを可能としている。   In general, when distortion correction such as trapezoidal correction is performed, the larger the correction amount, the smaller the projected image, the lower the resolution, and the more useless areas that remain unused. Accordingly, in the case of a head-mounted display such as the virtual image display device 100, in which the resolution limit tends to be strict due to the demand for smaller and lighter devices, it is desirable that the correction amount is small. On the other hand, in the present embodiment, when performing distortion correction, an image is divided into a plurality of regions, thereby reducing the correction amount in each divided image, and wasteful regions that remain unused. It is possible to avoid the generation as much as possible and to widen the video area that can be effectively used as an image without distortion.

以下、図４を参照して、台形補正処理部を含む制御部５０の構造を説明し、画像処理の動作について説明する。制御部５０は、動作を統括的に制御する主制御回路５１と、例えばビデオ信号等の外部から入力される画像信号に基づいて画像処理を行う画像処理部５２と、装着者（オペレーター）からの指令等の外部信号を受け付ける入力受付部６０と、アイコン等の固定的な内容の映像に関する各種データを保存する内部メモリー８０とを備える。なお、制御部５０は、例えば図２に示すフレームＦＬや支持体ＳＳ等の内部にケーブルＣＢを収納し、このケーブルＣＢを延長することによって、視界を妨げない位置に配置されている。   Hereinafter, the structure of the control unit 50 including the trapezoidal correction processing unit will be described with reference to FIG. 4, and the image processing operation will be described. The control unit 50 includes a main control circuit 51 that comprehensively controls the operation, an image processing unit 52 that performs image processing based on an image signal that is input from the outside, such as a video signal, and the like from a wearer (operator). An input receiving unit 60 that receives an external signal such as a command, and an internal memory 80 that stores various data related to images with fixed contents such as icons. The control unit 50 is disposed at a position that does not obstruct the field of view by accommodating the cable CB in the frame FL, the support SS, etc. shown in FIG. 2, for example, and extending the cable CB.

画像処理部５２は、例えば外部から入力された入力信号に基づいて画像や音声に関する各種信号を作成し、ケーブルＣＢを介して光射出装置１０（１０Ｒ，１０Ｌ）に送信する。つまり、画像や音声に関する各種信号は、画像処理部５２から光射出装置１０の駆動制御回路１３（図３参照）に伝達される。認識されるべき虚像としての画像の形成のため、画像処理部５２は、第１画像処理部５２Ｒと、第２画像処理部５２Ｌと、台形補正の処理を行うための台形補正処理部５３とを備える。特に、画像処理部５２は、台形補正の処理を行うための台形補正処理部５３を有することで、補正に関する各種処理を可能としている。   For example, the image processing unit 52 creates various signals related to an image and sound based on an input signal input from the outside, and transmits the signal to the light emitting device 10 (10R, 10L) via the cable CB. That is, various signals related to images and sound are transmitted from the image processing unit 52 to the drive control circuit 13 (see FIG. 3) of the light emitting device 10. In order to form an image as a virtual image to be recognized, the image processing unit 52 includes a first image processing unit 52R, a second image processing unit 52L, and a keystone correction processing unit 53 for performing keystone correction processing. Prepare. In particular, the image processing unit 52 includes a trapezoidal correction processing unit 53 for performing trapezoidal correction processing, thereby enabling various processes related to correction.

画像処理部５２のうち第１画像処理部５２Ｒは、右眼側の画像として視認されるべき画像の処理を行う。一方、第２画像処理部５２Ｌは、左眼側の画像として視認されるべき画像の処理を行う。本実施形態では、第１画像処理部５２Ｒ側と第２画像処理部５２Ｌ側とで別個に画像処理がなされるものとなっている。これにより、右眼側の画像と左眼側とで、異なる投影範囲や内容の画像を表示可能となっている（詳細については図７（Ａ）等により後述する。）。また、右眼側の画像と、左眼側の画像とは、内側（鼻側）と外側（耳側）とにそれぞれ分割された複数の画像を形成している。第１画像処理部５２Ｒ及び第２画像処理部５２Ｌは、これら分割された画像にそれぞれ対応した分割画像を形成するものとなっている。つまり、第１（右眼側）画像処理部５２Ｒは、内側画像処理部５２Ｒａと外側画像処理部５２Ｒｂとで構成され、第２（左眼側）画像処理部５２Ｌは、内側画像処理部５２Ｌａと外側画像処理部５２Ｌｂとで構成されている。   Of the image processing units 52, the first image processing unit 52R performs processing of an image to be visually recognized as an image on the right eye side. On the other hand, the second image processing unit 52L performs processing of an image to be visually recognized as an image on the left eye side. In the present embodiment, image processing is performed separately on the first image processing unit 52R side and the second image processing unit 52L side. Thereby, images with different projection ranges and contents can be displayed on the right eye side image and the left eye side (details will be described later with reference to FIG. 7A). Further, the right eye side image and the left eye side image form a plurality of images divided into the inner side (nose side) and the outer side (ear side), respectively. The first image processing unit 52R and the second image processing unit 52L form divided images respectively corresponding to the divided images. In other words, the first (right eye side) image processing unit 52R includes an inner image processing unit 52Ra and an outer image processing unit 52Rb, and the second (left eye side) image processing unit 52L includes the inner image processing unit 52La. The outer image processing unit 52Lb.

台形補正処理部５３は、右眼側の画像と左眼側の画像との双方に対して、一括して台形補正の処理を行っている。   The trapezoidal correction processing unit 53 collectively performs trapezoidal correction processing on both the right eye side image and the left eye side image.

入力受付部６０は、入力操作部７０を介して装着者（オペレーター）からの外部信号を受け付ける。   The input receiving unit 60 receives an external signal from the wearer (operator) via the input operation unit 70.

内部メモリー８０は、投影される画像の内容のうち、アイコンや日付、時計等の固定的な内容の映像に関する各種データを格納している。   The internal memory 80 stores various types of data related to images having fixed contents such as icons, dates, and clocks among the contents of the projected image.

主制御回路５１は、動作の統括的な制御の１つとして、例えば入力受付部６０で受け付けた信号に応じた各種処理を行うが、例えば各種信号のうち画像処理に関する信号を認識すると、画像処理部５２へ伝達する。また、主制御回路５１は、必要に応じて、各画像処理部５２Ｒ，５２Ｌから送信される画像信号となるべき情報のうち、内部メモリー８０に各種データに格納されているものを適宜読み出して画像処理部５２へ伝達する。   The main control circuit 51 performs various processes according to signals received by the input receiving unit 60, for example, as one of the overall controls of the operation. For example, when a signal related to image processing is recognized among the various signals, the image processing is performed. To the unit 52. Further, the main control circuit 51 appropriately reads out information stored in various data in the internal memory 80 from among information to be image signals transmitted from the image processing units 52R and 52L as necessary. This is transmitted to the processing unit 52.

ここで、図５を参照して、第１表示装置１００Ａの虚像形成部２０から射出される画像光ＰＬが装着者の眼ＥＹに入射することによって視認される画像に関して説明する。図５は、眼ＥＹの網膜ＲＥへ入射する画像光ＰＬと画像光ＰＬによって装着者に視認される仮想面ＩＭ上の画像として視認される虚像の範囲を画定した仮想的な領域である映像領域ＲＲとの関係について説明するための概念的な図である。特に、図示において、画像光ＰＬは、分かりやすくするために概念的に示されている。   Here, with reference to FIG. 5, the image visually recognized when the image light PL emitted from the virtual image forming unit 20 of the first display device 100A enters the eye EY of the wearer will be described. FIG. 5 is a video region that is a virtual region that defines the range of the image light PL that is incident on the retina RE of the eye EY and the range of the virtual image that is visually recognized as an image on the virtual surface IM that is visually recognized by the wearer. It is a conceptual diagram for demonstrating the relationship with RR. In particular, in the drawing, the image light PL is conceptually shown for easy understanding.

図示において、仮想面ＩＭ上は仮想的な面であり無限遠にあるものとし、装着者の眼ＥＹの網膜ＲＥのうち画像光ＰＬが入射する範囲を領域ＲＥａとする。ここで、領域ＲＥａは、結像面に相当し、仮想面ＩＭ上の映像領域ＲＲは、領域ＲＥａと共役な関係になっている。このような関係にあることで、網膜ＲＥのうち領域ＲＥａ上の結像面と映像領域ＲＲ上の面とは１対１に対応しており、装着者は、虚像形成部２０から射出された画像光ＰＬを網膜ＲＥの領域ＲＥａで受けると、この光路を逆行させた延長上である映像領域ＲＲにおいて虚像としての画像が存在していると認識（視認）する。言い換えると、第１表示装置１００Ａは、画像光ＰＬによって装着者に映像領域ＲＲ上に画像が形成されているかのように視認させることができる。すなわち、第１表示装置１００Ａは、虚像形成部２０から射出される画像光ＰＬを画像形成側での処理等によって制御することで、視認される映像領域ＲＲを所望の状態に調整し、虚像表示装置としての機能を果たしている。   In the figure, it is assumed that the virtual surface IM is a virtual surface and is at infinity, and a range in which the image light PL is incident on the retina RE of the wearer's eye EY is a region REa. Here, the region REa corresponds to the imaging plane, and the video region RR on the virtual surface IM has a conjugate relationship with the region REa. Because of this relationship, the image formation surface on the region REa and the surface on the video region RR in the retina RE have a one-to-one correspondence, and the wearer is ejected from the virtual image forming unit 20. When the image light PL is received in the region REa of the retina RE, it is recognized (visually recognized) that an image as a virtual image exists in the video region RR that is an extension obtained by reversing the optical path. In other words, the first display device 100A can cause the wearer to visually recognize the image light PL as if an image is formed on the video area RR. That is, the first display device 100A adjusts the visually recognized video region RR to a desired state by controlling the image light PL emitted from the virtual image forming unit 20 by processing on the image forming side, and displays a virtual image. It functions as a device.

以下、図６（Ａ）等を参照して、画像処理部５２による画像領域の分割や歪補正の処理の一例について説明する。以下において、映像領域ＲＲや映像領域ＲＲを分割した部分（例えば図６（Ａ）の第１映像領域ＲＲ１等）については、現実には、図５の網膜ＲＥの領域ＲＥａ上で結像される画像光ＰＬである。しかし、上記のように、画像光ＰＬによる画像は、映像領域ＲＲの画像として装着者に捉えられるものであり、領域ＲＥａと映像領域ＲＲとが共役な関係にある。従って、以下では、領域ＲＥａ上で結像され装着者に視認される画像を、映像領域ＲＲの画像であるものとして説明する。   Hereinafter, an example of image region division and distortion correction processing by the image processing unit 52 will be described with reference to FIG. In the following, the video region RR and the portion obtained by dividing the video region RR (for example, the first video region RR1 in FIG. 6A) are actually imaged on the region REa of the retina RE in FIG. Image light PL. However, as described above, the image by the image light PL is captured by the wearer as an image of the video region RR, and the region REa and the video region RR are in a conjugate relationship. Therefore, hereinafter, an image formed on the region REa and viewed by the wearer will be described as an image of the video region RR.

まず、図６（Ａ）は、左右のうち、右眼側すなわち第１表示装置１００Ａ側において形成される映像領域ＲＲについて概念的に示す図であり、図６（Ｂ）は、図６（Ａ）の状態とする際の台形補正処理部５３（図３（Ａ）参照）による画像の歪補正（台形補正）について説明するための図である。ここで、図示のように、映像領域ＲＲは、第１映像領域ＲＲ１と、第２映像領域ＲＲ２との分割された２つの矩形の領域で構成されているものとする。   First, FIG. 6 (A) is a diagram conceptually showing the video region RR formed on the right eye side, that is, the first display device 100A side of the left and right, and FIG. 6 (B) is a diagram showing FIG. FIG. 6 is a diagram for explaining image distortion correction (trapezoid correction) by the trapezoid correction processing unit 53 (see FIG. 3A) in the state of FIG. Here, as shown in the figure, the video area RR is assumed to be composed of two rectangular areas divided into a first video area RR1 and a second video area RR2.

図中において、領域Ｘ１は、画像処理部５２（第１画像処理部５２Ｒ）を含む制御部５０側において認識される元の画像データに基づく矩形領域の画像を模式的に示すものである。これに対して、領域Ｄ１は、仮に歪補正が無いとした場合に、虚像形成部２０上において表示可能な領域（眼ＥＹへの入射領域）の全体を示している。つまり、元の画像データとしては、画素がマトリクス状に並んだ状態で矩形形状を形成していた画像が、補正をしないまま投影すると、虚像形成部２０上において領域Ｄ１のような外側に広がる扇のような形状となる。本実施形態では、領域Ｄ１に示される範囲に対して、台形補正処理部５３により歪みを補正する処理をして一部の領域を使わなくすることで、複数の矩形の領域で構成され映像領域ＲＲを構成する複数の分割映像領域である映像領域ＲＲ１，ＲＲ２を矩形の領域となるように形成している。   In the drawing, an area X1 schematically shows an image of a rectangular area based on original image data recognized on the control unit 50 side including the image processing unit 52 (first image processing unit 52R). On the other hand, the region D1 indicates the entire region (incident region on the eye EY) that can be displayed on the virtual image forming unit 20 if there is no distortion correction. That is, as the original image data, when an image having a rectangular shape with pixels arranged in a matrix is projected without correction, a fan that spreads outward on the virtual image forming unit 20 like the region D1 is projected. It becomes the shape like this. In the present embodiment, the trapezoidal correction processing unit 53 corrects the distortion for the range indicated by the area D1 so that a part of the area is not used, so that the video area includes a plurality of rectangular areas. The video areas RR1 and RR2, which are a plurality of divided video areas constituting the RR, are formed to be rectangular areas.

また、図示のように、映像領域ＲＲのうち、第１映像領域ＲＲ１は、相対的に内側（鼻側）に配置され、第２映像領域ＲＲ２は、相対的に外側（耳側）に配置されるものとなっている。言い換えると、各映像領域ＲＲ１，ＲＲ２は、横方向（Ｚ方向）に並んでいる。ここで、本実施形態のように、鼻側から画像投射を行う投射の場合（図２参照）、領域Ｄ１は、特に横方向（Ｚ方向）に関して、相対的に内側（鼻側）については歪が小さく、相対的に外側（耳側）に歪が大きいものとなっている。このため、全体としての歪補正を減らすべく相対的に歪の大きくなる外側の第２映像領域ＲＲ２については、横に短く縦に長い矩形形状としている。一方、相対的に歪の少ない内側の第１映像領域ＲＲ１については、１６：９の比率の横長の矩形形状となっている。以上のように、第１映像領域ＲＲ１と第２映像領域ＲＲ２とで矩形形状が異なることに対応して、台形補正処理部５３は、それぞれ異なる補正処理を行っている。   Further, as shown in the figure, among the video regions RR, the first video region RR1 is disposed relatively on the inner side (nose side), and the second video region RR2 is disposed on the relatively outer side (ear side). Has become. In other words, the video regions RR1 and RR2 are arranged in the horizontal direction (Z direction). Here, as in the present embodiment, in the case of projection in which image projection is performed from the nose side (see FIG. 2), the region D1 is distorted relatively on the inner side (nose side), particularly in the lateral direction (Z direction). And the distortion is relatively large on the outer side (ear side). For this reason, the outer second video region RR2 in which the distortion becomes relatively large in order to reduce the distortion correction as a whole has a rectangular shape that is short horizontally and long vertically. On the other hand, the inner first video region RR1 with relatively little distortion has a horizontally long rectangular shape with a ratio of 16: 9. As described above, the trapezoidal correction processing unit 53 performs different correction processes in response to the different rectangular shapes in the first video area RR1 and the second video area RR2.

以下、図６（Ｂ）を参照して、分割される各画像についての台形補正による映像の歪みの補正処理について説明するが、ここでは、矩形領域を規定する元の画像データのうち四隅の画素についての座標変換について説明することで、全体の歪補正を説明するものとする。具体的には、元の画像データに対応する領域Ｘ１の四隅の画素を画素Ｐ１〜Ｐ４とし、これらにそれぞれ対応する領域Ｄ１の画素を画素Ｑ１〜Ｑ４とする。また、映像領域ＲＲのうち、第１映像領域ＲＲ１の四隅の画素を画素Ａ１〜Ａ４とし、第２映像領域ＲＲ２の四隅の画素を画素Ｂ１〜Ｂ４とする。この場合、第１映像領域ＲＲ１で形成させる映像については、例えば、領域Ｘ１の画素のうち左上隅の画素Ｐ１は、領域Ｄ１の画素Ｑ１に対応し、さらに、領域Ｄ１の画素Ｑ１は、第１映像領域ＲＲ１の画素Ａ１に対応する。つまり、画素Ｐ１の位置座標にある画像データを画素Ａ１の位置座標に変換するように補正処理を行えば所望の変換ができる。同様に、座標変換によって左下隅の画素Ｐ２の情報を画素Ａ２の位置に対応させればよい。また、第１映像領域ＲＲ１のうち右下隅の画素Ａ３については、領域Ｘ１のうち画素Ｐ２と画素Ｐ３とを結んだ線分上にある画素ＰＰ３を対応させ、右上隅の画素Ａ４については、領域Ｘ１のうち画素Ｐ１と画素Ｐ４とを結んだ線分上にある画素ＰＰ４を対応させればよい。   Hereinafter, with reference to FIG. 6B, a description will be given of correction processing of video distortion by trapezoidal correction for each divided image. Here, four corner pixels of original image data defining a rectangular area are described. The overall distortion correction will be explained by explaining the coordinate transformation for. Specifically, the four corner pixels of the region X1 corresponding to the original image data are pixels P1 to P4, and the pixels of the region D1 corresponding to these pixels are pixels Q1 to Q4, respectively. Further, in the video area RR, the pixels at the four corners of the first video area RR1 are pixels A1 to A4, and the pixels at the four corners of the second video area RR2 are pixels B1 to B4. In this case, for the image formed in the first video region RR1, for example, the pixel P1 in the upper left corner of the pixels in the region X1 corresponds to the pixel Q1 in the region D1, and further, the pixel Q1 in the region D1 This corresponds to the pixel A1 of the video area RR1. That is, a desired conversion can be performed by performing correction processing so that the image data at the position coordinates of the pixel P1 is converted into the position coordinates of the pixel A1. Similarly, the information of the pixel P2 at the lower left corner may be made to correspond to the position of the pixel A2 by coordinate conversion. The pixel A3 in the lower right corner of the first video area RR1 is associated with the pixel PP3 on the line segment connecting the pixel P2 and the pixel P3 in the area X1, and the pixel A4 in the upper right corner is The pixel PP4 on the line segment connecting the pixel P1 and the pixel P4 in X1 may be associated.

同様に、第２映像領域ＲＲ２の四隅の画素を画素Ｂ１〜Ｂ４についても、上記と同様に座標変換することで歪補正が可能である。具体的には、左上隅の画素Ｂ１については、領域Ｘ１のうち画素Ｐ１と画素Ｐ４とを結んだ線分上にある画素ＰＰ１を対応させ、左下隅の画素Ｂ２については、領域Ｘ１のうち画素Ｐ２と画素Ｐ３とを結んだ線分上にある画素ＰＰ２を対応させればよい。また、右下隅の画素Ｂ３については、領域Ｘ１の画素のうち画素Ｐ３を対応させ、右上隅の画素Ｂ４については、領域Ｘ１の画素のうち画素Ｐ４を対応させればよい。   Similarly, distortion correction is possible by converting the coordinates of the pixels B1 to B4 in the four corners of the second video region RR2 in the same manner as described above. Specifically, the pixel B1 in the upper left corner is associated with the pixel PP1 on the line segment connecting the pixel P1 and the pixel P4 in the region X1, and the pixel B2 in the lower left corner is the pixel in the region X1. The pixel PP2 on the line segment connecting P2 and the pixel P3 may be associated. Further, the pixel B3 in the lower right corner may correspond to the pixel P3 among the pixels in the region X1, and the pixel B4 in the upper right corner may correspond to the pixel P4 in the pixels in the region X1.

以上のように、台形補正処理部５３によって、第１映像領域ＲＲ１についての補正と第２映像領域ＲＲ２についての補正とが、それぞれ個別になされることにより、矩形の領域である第１映像領域ＲＲ１及び第２映像領域ＲＲ２において歪みのない画像を形成させることができる。   As described above, the correction for the first video area RR1 and the correction for the second video area RR2 are individually performed by the trapezoidal correction processing unit 53, whereby the first video area RR1 that is a rectangular area. In addition, an image without distortion can be formed in the second video region RR2.

また、既述のように、領域Ｄ１は、元の矩形の領域Ｘ１と比較して、横長になって外側（耳側）に向かって広がる扇のような形状となっており、少なくとも横方向について外側に行くほど大きな歪みが発生している。見方を変えると、領域Ｄ１のうち内側（鼻側）の領域は、比較的矩形の状態に近い。すなわち、映像領域ＲＲのうち相対的に内側に位置する第１映像領域ＲＲ１は、横長にしても比較的少ない補正量で所望の歪補正を達成することができるものとなっており、比較的大きな領域をとっても補正量を抑えることができる。ここでは、第１映像領域ＲＲ１を横長の主たる映像を形成させる領域とし、第２映像領域ＲＲ２を縦長の従たる映像を形成させる領域とする。   In addition, as described above, the region D1 has a fan-like shape that is horizontally long and spreads outward (ear side) as compared to the original rectangular region X1, and at least in the lateral direction. Larger distortion occurs as it goes outward. In other words, the inner (nose side) region of the region D1 is relatively close to a rectangular state. In other words, the first video area RR1 positioned relatively inside of the video area RR can achieve a desired distortion correction with a relatively small correction amount even when it is horizontally long. Even if the area is taken, the correction amount can be suppressed. Here, the first video region RR1 is a region where a horizontally long main image is formed, and the second video region RR2 is a region where a vertically long sub image is formed.

仮に、図示の場合において、映像領域ＲＲを上記のような２つの映像領域ＲＲ１，ＲＲ２に分割せずに１つの領域を全画面として領域Ｄ１から第１映像領域ＲＲ１のような横長の矩形領域を形成させようとする場合、例えば縦方向（Ｙ方向）の解像度が７２０画素になる画像を形成するには、外側の解像度の圧縮に対応すべく補正前の状態である元の画像データの解像度が１３００画素程度必要となる。なお、必要となる解像度は、歪みが少なく最も細かくなる内側の領域においても外側と同じになる。これに対して、第１映像領域ＲＲ１のように、相対的に内側に位置する領域のみで、補正を行うものとすれば、補正量を少なくすることができるので、元の画像データの解像度が８２０画素程度で解像度を７２０画素の映像を形成させることができる。なお、歪補正の補正量については、全画面を１つの画像に対して行うと１．５倍から２倍程度の補正量が必要になるのに対して、上記のように分割した補正を行うことで、全体としての補正量を１．２倍程度に抑えることができる。   In the case shown in the figure, the video area RR is not divided into the two video areas RR1 and RR2 as described above, and one area is taken as a full screen to form a horizontally long rectangular area such as the first video area RR1 from the area D1. In the case of forming the image, for example, in order to form an image having a resolution of 720 pixels in the vertical direction (Y direction), the resolution of the original image data in a state before correction is required to cope with compression of the outer resolution. About 1300 pixels are required. Note that the required resolution is the same as the outer side in the inner region where distortion is the smallest and the smallest. On the other hand, if the correction is performed only in the relatively inner region such as the first video region RR1, the correction amount can be reduced, so that the resolution of the original image data is reduced. An image having a resolution of about 820 pixels and a resolution of 720 pixels can be formed. As for the correction amount of the distortion correction, when the entire screen is performed on one image, a correction amount of about 1.5 to 2 times is required, but the divided correction is performed as described above. Thus, the correction amount as a whole can be suppressed to about 1.2 times.

また、上記のように、第２映像領域ＲＲ２は、第１映像領域ＲＲ１として使用されない残りのエリアをできるだけ有効に使うことで補正量を抑え、また、第２映像領域ＲＲ２での歪補正は、この領域のみで行えばよいので、補正量を少なくすることができる。   Further, as described above, the second video area RR2 suppresses the correction amount by using the remaining area that is not used as the first video area RR1 as effectively as possible, and the distortion correction in the second video area RR2 is as follows. Since it suffices to perform only in this region, the correction amount can be reduced.

また、第２映像領域ＲＲ２は、第１映像領域ＲＲ１によって画定される表示エリアの映像の内容と異なる表示ができる。表示内容については、種々のものが考えられるが、例えば、第１映像領域ＲＲ１では映画やビデオ撮影した録画といった動画を映し出す一方、第２映像領域ＲＲ２では、写した画像の字幕や音量、一時停止、早送り等の指示といった各種情報を表示させることができる。また、例えば第２映像領域ＲＲ２において、動作に関するアイコン表示を行わせ、表示される情報に基づいて装着者が入力操作部７０（図４参照）の操作を行うことで、画像処理部が入力受付部６０で受け付けた入力操作部７０からの入力信号に基づいて、第１映像領域ＲＲ１に映し出す映像等を装着者の意思を反映して選択できるようにしてもよい。つまり、本来表示させたい画像を第１映像領域ＲＲ１において形成し、付加的情報を第２映像領域ＲＲ２において形成することで、有効に画素を使って、表示させる情報量を増やすことができる。   Further, the second video area RR2 can be displayed differently from the content of the video in the display area defined by the first video area RR1. Various display contents can be considered. For example, the first video area RR1 displays a movie such as a movie or video recording, while the second video area RR2 displays subtitles, volume, and pause of the captured image. Various information such as an instruction for fast-forwarding can be displayed. Further, for example, in the second video region RR2, an icon related to the operation is displayed, and the wearer operates the input operation unit 70 (see FIG. 4) based on the displayed information, so that the image processing unit accepts input. Based on the input signal from the input operation unit 70 received by the unit 60, a video or the like to be displayed in the first video region RR1 may be selected reflecting the intention of the wearer. That is, the amount of information to be displayed can be effectively increased by using pixels by forming an image to be originally displayed in the first video region RR1 and forming additional information in the second video region RR2.

ここで、映像領域ＲＲに関して、装着者の眼ＥＹの位置に対する分割された第１映像領域ＲＲ１の位置と、第２映像領域ＲＲ２の位置とについては、種々の態様が考えられるが、ここでは、図示のように、装着者の眼ＥＹの中心ＥＸ１は、映像領域ＲＲ全体としての中心ＡＸ１ではなく、第１映像領域ＲＲ１の中心ＣＸ１に一致するものとする。つまり、この場合、装着者は、第１映像領域ＲＲ１によって表示される映像を中心側に表示される主たる映像と認識し、第２映像領域ＲＲ２によって表示される映像を周辺側に表示される従たる映像と認識するものとなる。   Here, regarding the video region RR, various modes can be considered for the position of the first video region RR1 and the position of the second video region RR2 with respect to the position of the wearer's eye EY. As illustrated, the center EX1 of the wearer's eye EY is not the center AX1 of the entire video region RR, but coincides with the center CX1 of the first video region RR1. That is, in this case, the wearer recognizes the video displayed in the first video area RR1 as the main video displayed on the center side, and the video displayed in the second video area RR2 on the peripheral side. It will be recognized as a video.

見方を変えると、以上のように映像の中心を全映像領域の中心ＡＸからずらすようにして分割された２つの映像領域Ｒ１，Ｒ２を形成することで、歪みの補正における補正量を少なくすることができるものとなっている。   In other words, the amount of correction in distortion correction is reduced by forming the two video regions R1 and R2 that are divided so that the center of the video is shifted from the center AX of the entire video region as described above. It is possible to do.

なお、以上のような眼ＥＹの中心ＥＸ１と第１映像領域ＲＲ１の中心ＣＸ１との位置合わせが可能となるように、虚像表示装置１００は、眼幅調整機構等の位置調整機構（不図示）を有するものとしてもよい。   Note that the virtual image display device 100 includes a position adjustment mechanism (not shown) such as an eye width adjustment mechanism so that the center EX1 of the eye EY and the center CX1 of the first video region RR1 can be aligned as described above. It is good also as what has.

図７（Ａ）は、左右一対の各映像領域ＲＲ，ＬＬについて示す図である。上記のように、虚像表示装置１００において、第１表示装置１００Ａと第２表示装置１００Ｂとは、左右を反転させた同じ構造を有するものであるので、扇形状の領域Ｄ１，Ｄ２は、左右方向（Ｚ方向）に関する対称軸ＸＸを基準としてミラー対称となっている。これに応じて、台形補正処理部５３は、右眼側虚像形成部２０Ｒによって視認されるべき映像領域の台形補正と左眼側虚像形成部２０Ｌによって視認されるべき映像領域の台形補正とを対称軸ＸＸを基準としてミラー対称に行うものとなっている。なお、ここでは、右眼側の映像領域ＲＲを構成する第１映像領域ＲＲ１は、右眼側第１映像領域であり、第２映像領域ＲＲ２は、右眼側第２映像領域であるものとする。同様に、左眼側の映像領域ＬＬを構成する第１映像領域ＬＬ１は、左眼側第１映像領域であり、第２映像領域ＬＬ２は、左眼側第２映像領域であるものとする。   FIG. 7A is a diagram showing a pair of left and right video regions RR and LL. As described above, in the virtual image display device 100, the first display device 100 </ b> A and the second display device 100 </ b> B have the same structure in which left and right are reversed, and therefore the fan-shaped regions D <b> 1 and D <b> 2 The mirror is symmetrical with respect to the axis of symmetry XX with respect to (Z direction). In response to this, the trapezoidal correction processing unit 53 symmetrically performs trapezoidal correction of the video region to be viewed by the right eye side virtual image forming unit 20R and trapezoidal correction of the video region to be viewed by the left eye side virtual image forming unit 20L. This is performed symmetrically with respect to the axis XX. Here, the first video area RR1 constituting the right-eye video area RR is the right-eye first video area, and the second video area RR2 is the right-eye second video area. To do. Similarly, it is assumed that the first video area LL1 constituting the left-eye side video area LL is the left-eye side first video area, and the second video area LL2 is the left-eye side second video area.

以上において、台形補正処理部５３による台形補正の処理は、ミラー対称であることから、左右個別に行うことなく実質的に一括して行うことができる。具体的に説明すると、例えば右眼側の第１映像領域ＲＲ１での補正と左眼側の第１映像領域ＬＬ１での補正とでは、画像処理としては左右で異なるが、矩形形状の領域としての補正すなわち図４（Ｂ）で説明した座標変換の処理としては左右について反転対称であるため、実質的に一括して行うことができる。これは、第２映像領域ＲＲ２と第２映像領域ＬＬ２との関係においても同様である。複数の分割された第１映像領域と第２映像領域とでの映像の内容については、個別の画像処理が必要であるが、右眼側と左眼側という観点では、一括して台形補正の処理が可能である。このため、画像処理については左右で第１画像処理部５２Ｒと第２画像処理部５２Ｌとの２つに分けられているのに対して、台形補正処理については１つの台形補正処理部５３で処理可能となっている。台形補正処理部５３は、上述のようにして決定される各画素での座標変換に関する情報を第１及び第２画像処理部５２Ｒ，５２Ｌに送信し、第１及び第２画像処理部５２Ｒ，５２Ｌは、個々の画像処理に加え、台形補正処理部５３からの座標変換すなわち台形補正量を加味した上で画像信号を決定し、駆動制御回路１３（図３（Ａ）参照）へ送信している。   In the above, since the trapezoid correction processing by the trapezoid correction processing unit 53 is mirror-symmetric, it can be performed substantially collectively without performing right and left separately. More specifically, for example, the correction in the first video region RR1 on the right eye side and the correction in the first video region LL1 on the left eye side differ in the left and right image processing, but as a rectangular region, for example. Since the correction, that is, the coordinate conversion process described with reference to FIG. 4B is inversion symmetrical with respect to the left and right, it can be performed substantially collectively. The same applies to the relationship between the second video area RR2 and the second video area LL2. For the content of the video in the plurality of divided first video areas and second video areas, individual image processing is necessary, but from the viewpoint of the right eye side and the left eye side, trapezoidal correction is performed collectively. Processing is possible. For this reason, the image processing is divided into two parts, the first image processing unit 52R and the second image processing unit 52L, on the left and right, whereas the trapezoid correction processing is performed by one trapezoid correction processing unit 53. It is possible. The trapezoidal correction processing unit 53 transmits information relating to coordinate conversion at each pixel determined as described above to the first and second image processing units 52R and 52L, and the first and second image processing units 52R and 52L. In addition to individual image processing, the image signal is determined in consideration of the coordinate conversion from the trapezoid correction processing unit 53, that is, the trapezoid correction amount, and is transmitted to the drive control circuit 13 (see FIG. 3A). .

ここで、以上のようにして形成される虚像に対応する画像に関して、各映像領域ＲＲ，ＬＬでの眼ＥＹの中心ＥＸ１，ＥＸ２は、第１映像領域ＲＲ１，ＬＬ１の中心ＣＸ１，ＣＸ２にそれぞれ一致するように調整されている。この際、第１映像領域ＲＲ１と第１映像領域ＬＬ１とは、画素数が一致している。この場合、第１映像領域ＲＲ１の映像と第１映像領域ＬＬ１の映像を共通させると、装着者は、左右の画像を１つの共通した画像として認識することになる。一方、第２映像領域ＲＲ２と第２映像領域ＬＬ２とに映し出される映像については、第２映像領域ＲＲ２の映像は右眼のみで認識され、第２映像領域ＬＬ２の映像は左眼のみで認識されるものとなる。つまり、図７（Ｂ）に概念的に示すように、装着者は両眼で各画像を捉えた結果、中央側に主たる映像として第１映像領域ＲＲ１と第１映像領域ＬＬ１に共通する映像があるものと認識し、周辺側に従たる映像として第２映像領域ＲＲ２における右側の映像と第２映像領域ＬＬ２における左側の映像とがあるものとそれぞれ認識する。   Here, regarding the image corresponding to the virtual image formed as described above, the centers EX1 and EX2 of the eye EY in each of the video regions RR and LL respectively coincide with the centers CX1 and CX2 of the first video regions RR1 and LL1. Has been adjusted to. At this time, the first video area RR1 and the first video area LL1 have the same number of pixels. In this case, when the video in the first video area RR1 and the video in the first video area LL1 are made common, the wearer recognizes the left and right images as one common image. On the other hand, for the images projected in the second image area RR2 and the second image area LL2, the image in the second image area RR2 is recognized only by the right eye, and the image in the second image area LL2 is recognized only by the left eye. Will be. That is, as conceptually shown in FIG. 7B, as a result of the wearer capturing each image with both eyes, a video common to the first video region RR1 and the first video region LL1 is displayed as a main video on the center side. Recognize that there is a certain video, and recognize that there are a video on the right side in the second video area RR2 and a video on the left side in the second video area LL2 as videos following the peripheral side.

この場合、例えば共通する映像には、主たる映像として動画等を映し出す一方、第２映像領域ＲＲ２，ＬＬ２では、各種情報を表示させることができる。特に、この場合、第２映像領域ＲＲ２と第２映像領域ＬＬ２とで別個独立な画像を形成させることができる。また、第１映像領域ＲＲ１と第１映像領域ＬＬ１において映し出される共通する映像については、画素単位で完全に一致させた２Ｄの画像を表示させるだけでなく、共通した画像でありながら左右の視差に応じて画像をずらすことで、３Ｄの画像を表示させることも可能である。   In this case, for example, a video or the like is displayed as a main video on the common video, while various information can be displayed in the second video regions RR2 and LL2. In particular, in this case, separate and independent images can be formed in the second video area RR2 and the second video area LL2. In addition, for the common video displayed in the first video region RR1 and the first video region LL1, not only a 2D image that is completely matched in pixel units is displayed, but also the left and right parallax while being a common image. It is also possible to display a 3D image by shifting the image accordingly.

なお、以上の画像形成については、第１画像処理部５２Ｒ及び第２画像処理部５２Ｌ（図４参照）で画像処理がそれぞれ適宜なされることで実現される。具体的には、まず、中央側（内側）に主たる映像として映し出される第１映像領域ＲＲ１，ＬＬ１に関しては、各画像処理部５２Ｒ，５２Ｌのうち内側画像処理部５２Ｒａ，５２Ｌａによって画像処理がなされる。この場合、例えば動画等の画像データについて、画像処理部５２がビデオ信号等の外部から入力される画像信号を受け、この信号に基づいて内側画像処理部５２Ｒａ，５２Ｌａが画像処理を行う。次に、周辺側（外側）に従たる映像として映し出される第２映像領域ＲＲ２，ＬＬ２に関しては、各画像処理部５２Ｒ，５２Ｌのうち外側画像処理部５２Ｒｂ，５２Ｌｂによって画像処理がなされる。この場合、内部メモリー８０に格納された各種データに関する信号が適宜読み出されて画像処理部５２へ伝達され、当該信号に基づいて、外側画像処理部５２Ｒｂ，５２Ｌｂが画像処理を行う。   The above image formation is realized by appropriately performing image processing in the first image processing unit 52R and the second image processing unit 52L (see FIG. 4). Specifically, first, regarding the first video regions RR1 and LL1 projected as the main video on the center side (inner side), the image processing is performed by the inner image processing units 52Ra and 52La among the image processing units 52R and 52L. . In this case, for example, for image data such as a moving image, the image processing unit 52 receives an image signal input from the outside such as a video signal, and the inner image processing units 52Ra and 52La perform image processing based on this signal. Next, regarding the second video regions RR2 and LL2 projected as the video on the peripheral side (outside), the image processing is performed by the outer image processing units 52Rb and 52Lb among the image processing units 52R and 52L. In this case, signals relating to various data stored in the internal memory 80 are appropriately read and transmitted to the image processing unit 52, and the outer image processing units 52Rb and 52Lb perform image processing based on the signals.

また、図８（Ａ）及び８（Ｂ）に示すように、装着者が眼ＥＹ（ＥＹ１，ＥＹ２）を右左に視線を向けた時に認識できる映像の範囲を制限することも可能である。具体的には、図８（Ａ）に示すように両眼ＥＹの視線を右側（−Ｚ側）に向けた場合には、両眼ＥＹのうち、右眼ＥＹ１については、第２映像領域ＲＲ２の全体と第１映像領域ＲＲ１の一部又は全部が視界に入るものとする一方、左眼ＥＹ２については、第１映像領域ＬＬ１の全部が視界に入るが第２映像領域ＬＬ２については視界から外れるように映像領域の範囲を調整するものとしてもよい。また、この場合、逆に、図８（Ｂ）に示すように両眼ＥＹの視線を左側（＋Ｚ側）に向けた場合には、左眼ＥＹ２については、第２映像領域ＬＬ２の全体と第１映像領域ＬＬ１の一部又は全部が視界に入り、右眼ＥＹ１については、第１映像領域ＲＲ１の全部が視界に入るが第２映像領域ＲＲ２については視界から外れるように映像領域の範囲を調整されるものとしてもよい。   Further, as shown in FIGS. 8A and 8B, it is also possible to limit the range of images that can be recognized when the wearer turns his / her eyes on the eyes EY (EY1, EY2). Specifically, when the line of sight of both eyes EY is directed to the right side (−Z side) as shown in FIG. 8A, the second video region RR2 for the right eye EY1 out of both eyes EY. , And part or all of the first video area RR1 enter the field of view, while for the left eye EY2, the entire first video area LL1 enters the field of view, but the second video area LL2 is out of the field of view. As described above, the range of the video area may be adjusted. In this case, conversely, when the line of sight of both eyes EY is directed to the left side (+ Z side) as shown in FIG. 8B, for the left eye EY2, the entire second video region LL2 and the second The range of the video area is adjusted so that a part or all of one video area LL1 enters the field of view, and for the right eye EY1, the entire first video area RR1 enters the field of view, but the second video area RR2 deviates from the field of view. It is good also as what is done.

また、台形補正処理部５３は、左右に共通する映像が表示される右眼側第１映像領域ＲＲ１及び左眼側第１映像領域ＬＬ１に対してのみ台形補正を行い、右眼側第２映像領域ＲＲ２及び左眼側第２映像領域ＬＬ２に対応する台形補正の補正量をゼロとするものであってもよい。例えば右眼側第２映像領域ＲＲ２及び左眼側第２映像領域ＬＬ２に表示させる情報がアイコン表示のようなものであれば、矩形形状とする必要がなく、多少歪んでいても認識させることが可能である。従って、画像補正は、主たる映像を映し出す右眼側第１映像領域ＲＲ１及び左眼側第１映像領域ＬＬ１に対してのみ行うものとしてもよい。これにより、画像処理の負担を軽減させることができる。   Further, the keystone correction processing unit 53 performs keystone correction only on the right eye side first video region RR1 and the left eye side first video region LL1 in which images common to the left and right are displayed, and the right eye side second video. The trapezoidal correction amount corresponding to the region RR2 and the left eye side second video region LL2 may be zero. For example, if the information displayed in the right-eye-side second video area RR2 and the left-eye-side second video area LL2 is an icon display, the information need not be rectangular and can be recognized even if it is slightly distorted. Is possible. Accordingly, the image correction may be performed only for the right eye side first video region RR1 and the left eye side first video region LL1 in which the main video is displayed. Thereby, the burden of image processing can be reduced.

以上のように、本実施形態に係る虚像表示装置１００では、複数に分割された分割映像領域となっている映像領域ＲＲ，ＬＬに対して台形補正処理部５３による台形補正（歪補正）が各分割映像領域ＲＲ１，ＲＲ２，ＬＬ１，ＬＬ２に応じて個別になされる。この場合、映像領域ＲＲ，ＬＬをそれぞれ複数に分割することで、例えば使われないままとなる無駄な領域が少なくなるようにして、使用する映像領域ＲＲ，ＬＬを広くとることができる。また、この場合、映像領域ＲＲ，ＬＬにおいて分割された各分割映像領域ＲＲ１，ＲＲ２，ＬＬ１，ＬＬ２での補正量を、例えば映像領域を１つの矩形領域とする台形補正の場合における補正量と比較して少なくすることができる。結果的に、各分割映像において、歪みの補正に伴う解像度の低下を抑制できる。   As described above, in the virtual image display device 100 according to the present embodiment, each of the keystone correction (distortion correction) by the keystone correction processing unit 53 is performed on the video regions RR and LL which are divided video regions. It is made individually according to the divided video regions RR1, RR2, LL1, LL2. In this case, by dividing the video areas RR and LL into a plurality of parts, for example, useless areas that remain unused can be reduced, and the video areas RR and LL to be used can be widened. In this case, the correction amount in each of the divided video regions RR1, RR2, LL1, and LL2 divided in the video regions RR and LL is compared with the correction amount in the case of trapezoidal correction in which the video region is one rectangular region, for example. Can be reduced. As a result, in each divided video, it is possible to suppress a decrease in resolution accompanying distortion correction.

また、虚像形成部２０が右眼側虚像形成部２０Ｒと左眼側虚像形成部２０Ｌとの一対で構成されており、かつ、台形補正処理部５３での台形補正が、両虚像形成部に関してミラー対称に行うことで、左右方向（Ｚ方向）についての補正のバランスがとれたものとなっている。これにより、左右で個別に補正を行うのに比べて、左右での画素合わせをより正確なものとすることができ、左右の眼でそれぞれ認識される画像を共通する一つの画像として認識させることをより確実にできる。   Further, the virtual image forming unit 20 is composed of a pair of a right eye side virtual image forming unit 20R and a left eye side virtual image forming unit 20L, and the trapezoidal correction in the trapezoidal correction processing unit 53 is mirrored with respect to both virtual image forming units. By performing symmetrically, the correction in the left-right direction (Z direction) is balanced. As a result, the pixel alignment on the left and right sides can be made more accurate than when the left and right are individually corrected, and the images recognized by the left and right eyes can be recognized as one common image. Can be more sure.

さらに、映像領域ＲＲ，ＬＬの中心位置（中心ＡＸ１，ＡＸ２）が、装着時における装着者の眼の中心位置（中心ＥＸ１，ＥＸ２）からずれている。この場合、例えば、少ない補正量で歪みのない画像が形成できる領域の中心位置に眼の中心位置が一致するように、ずらすことが可能となる。   Furthermore, the center positions (centers AX1, AX2) of the video regions RR, LL are deviated from the center positions (centers EX1, EX2) of the wearer's eyes at the time of wearing. In this case, for example, it is possible to shift the eye so that the center position of the eye coincides with the center position of a region where an image without distortion can be formed with a small correction amount.

なお、ＭＥＭＳにおいて、走査における振幅の範囲や速度を変化させることで、歪みの内容に調整することも考えられるが、その場合、ＭＥＭＳ側の駆動装置を複雑にする必要が生じる可能性があり、装置の小型化に困難を生じる可能性がある。本実施形態では、ＭＥＭＳ側においては、装置の軽量化小型化を図るために比較的単純な動作のみを行うものを適用する場合であっても、補正の少ない高品質な画像を提供できる。   In MEMS, it may be possible to adjust the content of distortion by changing the amplitude range or speed in scanning, but in that case, it may be necessary to complicate the driving device on the MEMS side. There is a possibility of difficulty in downsizing the device. In the present embodiment, on the MEMS side, a high-quality image with little correction can be provided even when a device that performs only a relatively simple operation in order to reduce the weight and size of the device is applied.

なお、以上では、虚像表示装置１００のうち光射出装置１０は、光軸ＯＡに垂直な横方向に関して装着時に装着者の眼ＥＹよりも鼻ＮＳ側に位置するような配置となっている。この場合、光射出装置１０は、装着者の側方側すなわちＺ方向について出っ張ることのない構成となる。また、既述のように、光射出装置１０は、装着者の眼ＥＹと虚像形成部２０との間に配置されている。この場合、光射出装置１０は虚像形成部２０よりも前方側には配置されないことになる。   In the above, in the virtual image display device 100, the light emitting device 10 is arranged so as to be positioned closer to the nose NS side than the wearer's eye EY when worn in the lateral direction perpendicular to the optical axis OA. In this case, the light emitting device 10 has a configuration that does not protrude in the side of the wearer, that is, in the Z direction. Further, as described above, the light emitting device 10 is disposed between the eye EY of the wearer and the virtual image forming unit 20. In this case, the light emitting device 10 is not disposed in front of the virtual image forming unit 20.

〔第２実施形態〕
以下、第２実施形態に係る虚像表示装置について説明する。なお、本実施形態に係る虚像表示装置は、第１実施形態に係る虚像表示装置１００の変形例であり、特に説明しない場合、第１実施形態の虚像表示装置１００と同様であるものとする。また、右眼側と左眼側とでは左右を反転させただけであるので、右眼側についてのみ説明し、左側については、説明を省略している。また、本実施形態においても、第１表示装置のみの単独でも虚像表示装置として機能する。 [Second Embodiment]
The virtual image display device according to the second embodiment will be described below. The virtual image display device according to the present embodiment is a modification of the virtual image display device 100 according to the first embodiment, and is the same as the virtual image display device 100 according to the first embodiment unless otherwise described. In addition, since the right eye side and the left eye side are only reversed left and right, only the right eye side will be described, and the description on the left side will be omitted. Also in this embodiment, the first display device alone functions as a virtual image display device.

図９に示すように、本実施形態に係る虚像表示装置は、映像領域ＲＲは、第１映像領域ＲＲ１と、第２映像領域ＲＲ２と、第３映像領域ＲＲ３との３つの領域に分割されている。この場合、第３映像領域ＲＲ３において、第１映像領域ＲＲ１や第２映像領域ＲＲ２によって画定される表示エリアの映像の内容とさらに異なる表示ができる。表示内容については、種々のものが考えられるが、例えば、図示のように、第２映像領域ＲＲ２では、アイコン表示による各種指令のための情報を表示させ、第３映像領域ＲＲ３では、各種指令によって得た情報を表示させることができる。この場合、第１実施形態と同様に第２映像領域ＲＲ２での複数のアイコン表示のうちから指の形状で示すポインターを移動させて一のアイコン表示を選択（タップ）して第１映像領域ＲＲ１に移すべき内容を選択することができるというだけでなく、例えば図示のように、外界像ＳＰにおける道路情報について、第２映像領域ＲＲ２でアイコン表示から適宜選択することで呼び出し、得られた道路の情報に関して、第３映像領域ＲＲ３において表示させることができる。   As shown in FIG. 9, in the virtual image display device according to the present embodiment, the video area RR is divided into three areas of a first video area RR1, a second video area RR2, and a third video area RR3. Yes. In this case, in the third video region RR3, display different from the content of the video in the display area defined by the first video region RR1 and the second video region RR2 can be performed. Various display contents can be considered. For example, as shown in the figure, in the second video area RR2, information for various commands by icon display is displayed, and in the third video area RR3, various commands are displayed. The obtained information can be displayed. In this case, as in the first embodiment, the pointer indicated by the shape of the finger is moved from among the plurality of icon displays in the second video area RR2, and one icon display is selected (tapped) to select the first video area RR1. In addition to being able to select the contents to be transferred to, for example, as shown in the figure, the road information in the external image SP is called by appropriately selecting from the icon display in the second video area RR2, and the obtained road information Information can be displayed in the third video region RR3.

〔第３実施形態〕
以下、第３実施形態に係る虚像表示装置について説明する。なお、本実施形態に係る虚像表示装置は、第１実施形態に係る虚像表示装置１００の変形例であり、特に説明しない場合、第１実施形態の虚像表示装置１００と同様であるものとする。 [Third Embodiment]
The virtual image display device according to the third embodiment will be described below. The virtual image display device according to the present embodiment is a modification of the virtual image display device 100 according to the first embodiment, and is the same as the virtual image display device 100 according to the first embodiment unless otherwise described.

図１０は、本実施形態に係る虚像表示装置の平面図である。図示のように、本実施形態に係る虚像表示装置２００の第１表示装置２００Ａは、映像生成部を含む光射出装置１０と虚像形成部である導光部材２２０と、光透過部材２５０とを備える。導光部材２２０と光透過部材２５０とは、それぞれ光透過性のプリズム部材であり、接合によって一体化されている。なお、虚像表示装置２００は、画像処理部を含む制御部５０を備え、制御部５０は、ケーブルＣＢを介して光射出装置１０に接続されている。   FIG. 10 is a plan view of the virtual image display device according to the present embodiment. As illustrated, the first display device 200 </ b> A of the virtual image display device 200 according to the present embodiment includes a light emitting device 10 including a video generation unit, a light guide member 220 that is a virtual image forming unit, and a light transmission member 250. . The light guide member 220 and the light transmitting member 250 are light transmitting prism members, respectively, and are integrated by bonding. The virtual image display device 200 includes a control unit 50 including an image processing unit, and the control unit 50 is connected to the light emitting device 10 via a cable CB.

導光部材２２０は、平面視において顔面に沿うように湾曲した円弧状の部材であり、光学的な機能を有する側面として、光射出側から順に第１〜第６面Ｓ１１〜Ｓ１６を有する。このうち、第１面Ｓ１１と第４面Ｓ１４とが隣接し、第３面Ｓ１３と第５面Ｓ１５とが隣接し、第１面Ｓ１１と第３面Ｓ１３との間に第２面Ｓ１２が配置され、第４面Ｓ１４と第５面Ｓ１５との間に第６面Ｓ１６が配置されている。各面Ｓ１１〜Ｓ１６は自由曲面であり、ミラーによる全反射や空気層との屈折率差を利用した内面側での全反射により、光射出装置１０から射出された走査光ＳＬを導光部材２２０内に導くとともに、走査光ＳＬの光路を調整して所望の虚像を形成する画像光ＰＬとして射出する。つまり、導光部材２２０は、虚像形成部として機能するプリズム部材である。なお、この導光に際して、第３面Ｓ１３を通過する前後において、像面ＩＩとして示される位置に中間像を形成する。   The light guide member 220 is an arcuate member that is curved along the face in plan view, and has first to sixth surfaces S11 to S16 in order from the light exit side as side surfaces having optical functions. Among these, the first surface S11 and the fourth surface S14 are adjacent to each other, the third surface S13 and the fifth surface S15 are adjacent to each other, and the second surface S12 is disposed between the first surface S11 and the third surface S13. The sixth surface S16 is disposed between the fourth surface S14 and the fifth surface S15. Each of the surfaces S11 to S16 is a free-form surface, and the scanning light SL emitted from the light emitting device 10 is guided by the light guide member 220 by total reflection by a mirror or total reflection on the inner surface side using a refractive index difference from the air layer. In addition, the light is emitted as image light PL that forms a desired virtual image by adjusting the optical path of the scanning light SL. That is, the light guide member 220 is a prism member that functions as a virtual image forming unit. In this light guide, an intermediate image is formed at a position indicated as the image plane II before and after passing through the third surface S13.

光透過部材２５０は、導光部材２２０の透視機能を補助する部材（補助プリズム）であり、導光部材２２０と同一の材料で形成され、光学的な機能を有する側面として、第１透過面Ｓ５１と、第２透過面Ｓ５２と、第３透過面Ｓ５３とを有する。ここで、第１透過面Ｓ５１と第３透過面Ｓ５３との間に第２透過面Ｓ５２が配置されている。第１透過面Ｓ５１は、導光部材２２０の第１面Ｓ１１を延長した曲面上にあり、第２透過面Ｓ５２は、当該第２面Ｓ１２に対して接着層によって接合され一体化されている曲面であり、第３透過面Ｓ５３は、導光部材２２０の第３面Ｓ１３を延長した曲面上にある。このうち第２透過面Ｓ５２と導光部材２２０の第２面Ｓ１２とは、接合によって一体化するため、略同じ曲率の形状を有する。   The light transmission member 250 is a member (auxiliary prism) that assists the see-through function of the light guide member 220, and is formed of the same material as the light guide member 220, and has a first transmission surface S51 as a side surface having an optical function. And a second transmission surface S52 and a third transmission surface S53. Here, the second transmission surface S52 is disposed between the first transmission surface S51 and the third transmission surface S53. The first transmission surface S51 is on a curved surface obtained by extending the first surface S11 of the light guide member 220, and the second transmission surface S52 is a curved surface joined and integrated with the second surface S12 by an adhesive layer. The third transmission surface S53 is on a curved surface obtained by extending the third surface S13 of the light guide member 220. Among these, since 2nd transmissive surface S52 and 2nd surface S12 of the light guide member 220 are integrated by joining, they have the shape of the substantially same curvature.

なお、導光部材２２０において、第１面Ｓ１１と第３面Ｓ１３とは、ともに眼ＥＹの正面に配され、かつ、観察者（使用者）に対し凹面形状を成しているものであり、これらを通過させて外界光を見たときに、視度が略０になっている。また、光透過部材２５０において、第１面Ｓ１１と第３面Ｓ１３とをそれぞれ延長した第１透過面Ｓ５１と第３透過面Ｓ５３とは、視度を略０にしている。つまり、導光部材２２０と光透過部材２５０とを一体化した全体としても、視度を略０にしている。   In the light guide member 220, the first surface S11 and the third surface S13 are both disposed in front of the eye EY and have a concave shape with respect to the observer (user). The diopter is substantially zero when these lights are passed through and external light is viewed. In the light transmission member 250, the first transmission surface S51 and the third transmission surface S53 obtained by extending the first surface S11 and the third surface S13, respectively, have a diopter of approximately zero. That is, the diopter is set to approximately 0 even when the light guide member 220 and the light transmission member 250 are integrated as a whole.

本実施形態においても、画像処理部を含む制御部５０での制御に基づいて、映像領域を複数に分割することで、使用する映像領域を広くとることができ、また、分割された各分割映像領域での補正量を少なくすることができ、各分割映像において、歪みの補正に伴う解像度の低下を抑制できる。   Also in the present embodiment, the video area to be used can be widened by dividing the video area into a plurality of parts based on the control by the control unit 50 including the image processing unit, and each divided video is divided. The amount of correction in the area can be reduced, and a reduction in resolution accompanying distortion correction can be suppressed in each divided image.

この発明は、上記の各実施形態に限られるものではなく、その要旨を逸脱しない範囲において種々の態様で実施することが可能である。   The present invention is not limited to the above embodiments, and can be implemented in various modes without departing from the scope of the invention.

上記では、映像生成部として、ＭＥＭＳミラー等で構成される光射出装置１０で構成されるものとしているが、画像投射の方式はこれに限らず、例えば液晶パネルや有機ＥＬ等を用いて画像を形成するタイプのものにおいて、上記と同様に補正の処理を行うものとしてもよい。   In the above description, the image generation unit is configured by the light emitting device 10 configured by a MEMS mirror or the like. However, the image projection method is not limited to this, and an image is displayed using, for example, a liquid crystal panel or an organic EL. In the type to be formed, correction processing may be performed in the same manner as described above.

また、例えば、矩形領域である第１映像領域ＲＲ１のアスペクト比については、動画に合せて１６：９であるものとしているが、第１映像領域ＲＲ１の形状はこれ以外に種々の物であってもよい。つまり、映し出す映像対象によって対応するアスペクト比に適宜変換するものとしてもよい。また、第１映像領域ＲＲ１と第２映像領域ＲＲ２との大きさを変化させてもよい。例えば第１映像領域ＲＲ１のアスペクト比の変換によって第１映像領域ＲＲ１で使用されない範囲が変わる。従って、この変換に伴って第２映像領域ＲＲ２の形状を異なるものとしてもよい。   For example, the aspect ratio of the first video area RR1 that is a rectangular area is 16: 9 in accordance with the moving image, but the shape of the first video area RR1 is various in addition to this. Also good. That is, it may be appropriately converted into a corresponding aspect ratio depending on the video object to be projected. Further, the sizes of the first video area RR1 and the second video area RR2 may be changed. For example, the range not used in the first video area RR1 changes due to the conversion of the aspect ratio of the first video area RR1. Therefore, the shape of the second video area RR2 may be different along with this conversion.

また、上記では、画像処理部５２において、右眼用と左眼用との２つの画像処理部５２Ｒ，５２Ｌで構成するものとしているが、これらを１つの画像処理において行うことも可能である。また、光射出装置１０についても、光射出装置１０Ｒ及び光射出装置１０Ｌの２つで構成しているが、例えば１つのＭＥＭＳミラーを左右の双方に振り分けることで、２つの映像領域ＲＲ，ＬＬにおいて映像をそれぞれ形成させるものとしてもよい。逆に、上記では、台形補正処理部５３を１つで構成しているが、右眼用と左眼用との２つの台形補正処理部を有するものとしてもよい。   In the above description, the image processing unit 52 is configured by two image processing units 52R and 52L for the right eye and for the left eye. However, these can be performed in one image processing. The light emitting device 10 is also composed of two light emitting devices 10R and 10L. For example, in one video region RR and LL, one MEMS mirror is distributed to both the left and right. Each image may be formed. Conversely, in the above description, the single keystone correction processing unit 53 is configured, but two trapezoidal correction processing units for the right eye and for the left eye may be provided.

また、上述した図３（Ａ）等に示す信号光変調部１１の構造では、合成光形成部１１ａでの信号光ＧＬの形成において各色光源１１ｒ，１１ｇ，１１ｂからの光を合成するものとしているが、これは、本実施形態の信号光形成における一例であり、他の構成によって信号光ＧＬを形成することもできる。   Further, in the structure of the signal light modulation unit 11 shown in FIG. 3A and the like described above, the light from the color light sources 11r, 11g, and 11b is combined in the formation of the signal light GL in the combined light forming unit 11a. However, this is an example in the signal light formation of the present embodiment, and the signal light GL can be formed by another configuration.

上記では、光源として、ダイオードレーザ光源又はＬＥＤ光源を用いるものとしているが、光源は、例えば有機ＥＬ等の上記以外のものであってもよい。   In the above description, a diode laser light source or an LED light source is used as the light source, but the light source may be other than the above, such as an organic EL.

また、上記各実施形態の虚像表示装置１００等では、右眼及び左眼の双方に対応して設ける構成としているが、右眼又は左眼のいずれか一方に対してのみ光射出装置１０等を設け画像を片眼視する構成にしてもよい。   Further, in the virtual image display device 100 and the like of each of the embodiments described above, the light emitting device 10 and the like are provided only for either the right eye or the left eye. The provided image may be configured to be viewed with one eye.

また、上記第１実施形態の虚像形成部２０は、走査光学系１２から照射された走査光ＳＬを受け、これを反射して装着者に認識させるものとしているが、虚像形成部２０に膜状の部材であるホログラム素子を設けることにより画像を形成するものとしてもよい。つまり、ホログラム素子における回折を利用して特定の波長帯域にある画像光によって虚像を形成するとともに、広範囲な波長帯域にある外界光を通過可能とすることで、シースルーの構成にできる。   Further, the virtual image forming unit 20 of the first embodiment receives the scanning light SL irradiated from the scanning optical system 12 and reflects it to make the wearer recognize it. An image may be formed by providing a hologram element as a member. That is, a see-through configuration can be achieved by forming a virtual image with image light in a specific wavelength band using diffraction in the hologram element and allowing external light in a wide wavelength band to pass through.

１０，１０Ｒ，１０Ｌ…光射出装置（映像生成部）、 １１…信号光変調部、 １１ｒ，１１ｇ，１１ｂ…色光源、 ＤＭ１，ＤＭ２…ダイクロイックミラー、 １２…走査光学系、 ＭＬ…コリメートレンズ、 １２ｂ…ＭＥＭＳミラー、 ２０，２０Ｒ，２０Ｌ…虚像形成部、 ５０…制御部、 ５１…主制御回路、 ５２…画像処理部、 ５２Ｒ…第１画像処理部、 ５２Ｌ…第２画像処理部、 ５３…台形補正処理部、 ６０…入力受付部、 ７０…入力操作部、 １００…虚像表示装置、 １００Ａ，１００Ｂ…表示装置、 ＯＡ…光軸、 ＮＰ…鼻パッド、 ＮＳ…鼻、 ＥＹ…眼、 ＥＡ…耳、 ＧＬ…信号光、 ＳＬ…走査光、 ＰＬ…画像光、 ＲＲ，ＬＬ…映像領域、 ＲＲ１，ＲＲ２，ＲＲ３，ＬＬ１，ＬＬ２…映像領域（分割映像領域）、 ＸＸ…対称軸   DESCRIPTION OF SYMBOLS 10,10R, 10L ... Light emission apparatus (image production | generation part), 11 ... Signal light modulation part, 11r, 11g, 11b ... Color light source, DM1, DM2 ... Dichroic mirror, 12 ... Scanning optical system, ML ... Collimating lens, 12b ... MEMS mirror, 20, 20R, 20L ... Virtual image forming unit, 50 ... Control unit, 51 ... Main control circuit, 52 ... Image processing unit, 52R ... First image processing unit, 52L ... Second image processing unit, 53 ... Trapezoid Correction processing unit, 60 ... Input reception unit, 70 ... Input operation unit, 100 ... Virtual image display device, 100A, 100B ... Display device, OA ... Optical axis, NP ... Nose pad, NS ... Nose, EY ... Eye, EA ... Ear GL: Signal light, SL: Scanning light, PL: Image light, RR, LL: Video area, RR1, RR2, RR3, LL1, LL2 ... Video area (divided video area) , XX ... the axis of symmetry

Claims (14)

入力信号に応じて使用者に虚像を視認させるための画像信号の処理を行う画像処理部と、
前記画像処理部からの画像信号に応じて前記虚像を視認させるための光を生成する映像生成部と、
前記映像生成部からの光を仮想的な映像領域に表示された前記虚像として視認させる虚像形成部と、を備え、
前記映像生成部において光を生成し前記映像生成部からの光を前記虚像形成部によって前記虚像として視認させるまでの過程で、少なくとも縦横のうち一方向についての台形歪を発生する虚像表示装置であって、
前記画像処理部は、使用者に認識させるべき前記虚像の台形補正の処理を行う台形補正処理部を有し、
前記画像処理部は、前記虚像形成部によって視認させる前記映像領域を、複数に分割した分割映像領域で構成させるとともに、前記分割映像領域にそれぞれ対応して前記台形補正処理部による台形補正の処理を含む処理を行う、虚像表示装置。 An image processing unit for processing an image signal for allowing a user to visually recognize a virtual image according to an input signal;
A video generation unit that generates light for visually recognizing the virtual image according to an image signal from the image processing unit;
A virtual image forming unit that visually recognizes the light from the video generation unit as the virtual image displayed in a virtual video region,
A virtual image display device that generates trapezoidal distortion in at least one of vertical and horizontal directions in a process from generation of light in the video generation unit to visual recognition of light from the video generation unit as the virtual image by the virtual image formation unit. And
The image processing unit has a trapezoidal correction processing unit that performs trapezoidal correction processing of the virtual image to be recognized by a user,
The image processing unit is configured to divide the video region to be visually recognized by the virtual image forming unit into a plurality of divided video regions, and to perform a trapezoid correction process by the trapezoid correction processing unit corresponding to each of the divided video regions. A virtual image display device that performs processing including: 前記台形補正処理部は、前記分割映像領域にそれぞれ対応して個別の台形補正の処理を行う、請求項１に記載の虚像表示装置。   The virtual image display device according to claim 1, wherein the trapezoidal correction processing unit performs individual trapezoidal correction processing corresponding to each of the divided video regions. 前記画像処理部は、前記分割映像領域として、内側に位置する第１映像領域と外側に位置する第２映像領域とを含むように処理を行う、請求項１及び２のいずれか一項に記載の虚像表示装置。   The said image processing part performs a process so that the 1st video area located inside and the 2nd video area located outside as the said division | segmentation video area may be included. Virtual image display device. 使用者からの指示を受け付ける入力受付部をさらに備え、
前記画像処理部は、前記虚像形成部によって視認させる前記第２映像領域に、前記入力受付部で受け付ける動作に関するアイコン表示を行わせる、請求項３に記載の虚像表示装置。 An input receiving unit for receiving instructions from the user;
The virtual image display device according to claim 3, wherein the image processing unit causes the second video region to be visually recognized by the virtual image forming unit to display an icon related to an operation received by the input receiving unit. 前記虚像形成部は、左右の眼にそれぞれ対応する右眼側虚像形成部と左眼側虚像形成部との一対で構成され、
前記画像処理部は、前記右眼側虚像形成部によって視認させる前記映像領域の前記第１映像領域として右眼側第１映像領域を含むとともに、前記映像領域の前記第２映像領域として右眼側第２映像領域を含むように処理を行い、
前記画像処理部は、前記左眼側虚像形成部によって視認させる前記映像領域の前記第１映像領域として左眼側第１映像領域を含むとともに、前記映像領域の前記第２映像領域として左眼側第２映像領域を含むように処理を行い、
前記画像処理部は、前記右眼側第１映像領域と前記左眼側第１映像領域とにおいて、左右に共通する映像を表示させる、請求項３及び４のいずれか一項に記載の虚像表示装置。 The virtual image forming unit is composed of a pair of a right eye side virtual image forming unit and a left eye side virtual image forming unit corresponding to the left and right eyes, respectively.
The image processing unit includes a right eye side first video region as the first video region of the video region to be visually recognized by the right eye side virtual image forming unit, and a right eye side as the second video region of the video region. Process to include the second video area,
The image processing unit includes a left eye side first video region as the first video region of the video region to be visually recognized by the left eye side virtual image forming unit, and a left eye side as the second video region of the video region. Process to include the second video area,
5. The virtual image display according to claim 3, wherein the image processing unit displays an image common to left and right in the right eye side first video region and the left eye side first video region. 6. apparatus. 前記画像処理部は、前記右眼側第２映像領域に形成される独立な映像を表示させ、前記左眼側第２映像領域に形成される別の独立な映像を表示させる、請求項５に記載の虚像表示装置。   The said image processing part displays the independent image | video formed in the said right-eye side 2nd image | video area | region, and displays another independent image | video formed in the said left-eye side 2nd image | video area | region. The virtual image display device described. 前記台形補正処理部は、左右に共通する映像が表示される前記右眼側第１映像領域及び前記左眼側第１映像領域に対してのみ台形補正を行う、請求項５及び６のいずれか一項に記載の虚像表示装置。   The trapezoid correction processing unit performs trapezoid correction only for the right eye side first video region and the left eye side first video region in which video images common to left and right are displayed. The virtual image display device according to one item. 前記画像処理部は、前記右眼側虚像形成部によって視認させる前記右眼側第２映像領域を、使用者が視線を左側に向けた場合に視界から外れる範囲に形成し、前記左眼側虚像形成部によって視認させる前記左眼側第２映像領域を、使用者が視線を右側に向けた場合に視界から外れる範囲に形成する、請求項５から７までのいずれか一項に記載の虚像表示装置。   The image processing unit forms the right-eye-side second video region to be visually recognized by the right-eye-side virtual image forming unit in a range that is out of view when the user turns his / her line of sight toward the left side, and the left-eye-side virtual image The virtual image display according to any one of claims 5 to 7, wherein the left-eye-side second video region to be visually recognized by the forming unit is formed in a range that is out of view when the user turns his / her line of sight toward the right side. apparatus. 入力信号に応じて使用者に虚像を視認させるための画像信号の処理を行う画像処理部と、
前記画像処理部からの画像信号に応じて前記虚像を視認させるための光を生成する映像生成部と、
前記映像生成部からの光を仮想的な映像領域に表示された前記虚像として視認させる虚像形成部と、を備え、
前記映像生成部において光を生成し前記映像生成部からの光を前記虚像形成部によって前記虚像として視認させるまでの過程で、少なくとも縦横のうち一方向についての台形歪を発生させる虚像表示装置であって、
前記画像処理部は、使用者に認識させるべき前記虚像の台形補正の処理を行う台形補正処理部を有し、
前記虚像形成部は、左右の眼にそれぞれ対応する右眼側虚像形成部と左眼側虚像形成部との一対で構成され、
前記台形補正処理部は、前記右眼側虚像形成部側に対する台形補正と前記左眼側虚像形成部側に対する台形補正とを左右方向に関する対称軸を基準としてミラー対称に行う、虚像表示装置。 An image processing unit for processing an image signal for allowing a user to visually recognize a virtual image according to an input signal;
A video generation unit that generates light for visually recognizing the virtual image according to an image signal from the image processing unit;
A virtual image forming unit that visually recognizes the light from the video generation unit as the virtual image displayed in a virtual video region,
A virtual image display device that generates trapezoidal distortion in at least one of vertical and horizontal directions in a process from generation of light in the video generation unit to visual recognition of light from the video generation unit as the virtual image by the virtual image formation unit. And
The image processing unit has a trapezoidal correction processing unit that performs trapezoidal correction processing of the virtual image to be recognized by a user,
The virtual image forming unit is composed of a pair of a right eye side virtual image forming unit and a left eye side virtual image forming unit corresponding to the left and right eyes, respectively.
The trapezoidal correction processing unit is a virtual image display device that performs trapezoidal correction on the right eye side virtual image forming unit side and trapezoidal correction on the left eye side virtual image forming unit side in a mirror symmetry with respect to a symmetry axis in the horizontal direction. 前記画像処理部は、前記虚像形成部によって視認させる前記映像領域を、複数に分割した分割映像領域で構成させ、前記分割映像領域として、内側に位置する第１映像領域と外側に位置する第２映像領域とを含むように処理を行い、
前記画像処理部は、前記右眼側虚像形成部によって視認させる前記映像領域の前記第１映像領域として右眼側第１映像領域を含むとともに、前記映像領域の前記第２映像領域として右眼側第２映像領域を含むように処理を行い、
前記画像処理部は、前記左眼側虚像形成部によって視認させる前記映像領域の前記第１映像領域として左眼側第１映像領域を含むとともに、前記映像領域の前記第２映像領域として左眼側第２映像領域を含むように処理を行い、
前記画像処理部は、前記右眼側第１映像領域と前記左眼側第１映像領域とにおいて、左右に共通する映像を表示させる、請求項９に記載の虚像表示装置。 The image processing unit is configured to configure the video region to be visually recognized by the virtual image forming unit as a divided video region divided into a plurality, and as the divided video region, a first video region located inside and a second located outside. Process to include the video area,
The image processing unit includes a right eye side first video region as the first video region of the video region to be visually recognized by the right eye side virtual image forming unit, and a right eye side as the second video region of the video region. Process to include the second video area,
The image processing unit includes a left eye side first video region as the first video region of the video region to be visually recognized by the left eye side virtual image forming unit, and a left eye side as the second video region of the video region. Process to include the second video area,
The virtual image display device according to claim 9, wherein the image processing unit displays a video that is common to the left and right sides in the first video region on the right eye side and the first video region on the left eye side. 入力信号に応じて使用者に虚像を視認させるための画像信号に関する処理を行う画像処理部と、
前記画像処理部からの画像信号に応じて前記虚像を視認させるための光を生成する映像生成部と、
前記映像生成部からの光を仮想的な映像領域に表示された前記虚像として視認させる虚像形成部と、を備え、
前記映像生成部において光を生成し前記映像生成部からの光を前記虚像形成部によって前記虚像として視認させるまでの過程で、少なくとも縦横のうち一方向についての台形歪を発生させる虚像表示装置であって、
前記画像処理部は、使用者に認識させるべき前記虚像の台形補正の処理を行う台形補正処理部を有し、
前記虚像形成部において、前記映像領域の中心位置は、装着時における使用者の眼の中心位置からずれている、虚像表示装置。 An image processing unit that performs processing related to an image signal for allowing a user to visually recognize a virtual image according to an input signal;
A video generation unit that generates light for visually recognizing the virtual image according to an image signal from the image processing unit;
A virtual image forming unit that visually recognizes the light from the video generation unit as the virtual image displayed in a virtual video region,
A virtual image display device that generates trapezoidal distortion in at least one of vertical and horizontal directions in a process from generation of light in the video generation unit to visual recognition of light from the video generation unit as the virtual image by the virtual image formation unit. And
The image processing unit has a trapezoidal correction processing unit that performs trapezoidal correction processing of the virtual image to be recognized by a user,
In the virtual image forming unit, the center position of the video area is deviated from the center position of the user's eye when worn. 前記画像処理部は、前記虚像形成部によって視認させる前記映像領域を、複数に分割した分割映像領域で構成させ、前記分割映像領域として、内側に位置する第１映像領域と外側に位置する第２映像領域とを含むように処理を行い、
前記映像領域のうち前記第１映像領域の中心位置は、装着時における使用者の眼の中心位置に一致している、請求項１１に記載の虚像表示装置。 The image processing unit is configured to configure the video region to be visually recognized by the virtual image forming unit as a divided video region divided into a plurality, and as the divided video region, a first video region located inside and a second located outside. Process to include the video area,
The virtual image display device according to claim 11, wherein a center position of the first image area in the image area coincides with a center position of a user's eye at the time of wearing. 前記映像生成部及び／又は前記虚像形成部は、少なくとも横台形歪を発生させる、請求項１から１２までのいずれか一項に記載の前記虚像表示装置。   The virtual image display device according to any one of claims 1 to 12, wherein the video generation unit and / or the virtual image formation unit generates at least horizontal trapezoidal distortion. 前記映像生成部は、画像に対応して変調された信号光を射出する信号光変調部と、前記信号光変調部から入射した信号光を走査させることにより、走査光として射出させる走査光学系と、を有する、請求項１から１３までのいずれか一項に記載の前記虚像表示装置。   The video generation unit includes: a signal light modulation unit that emits signal light that is modulated corresponding to an image; and a scanning optical system that emits scanning light by scanning the signal light incident from the signal light modulation unit. The virtual image display device according to claim 1, comprising:
JP2016211343A 2016-10-28 2016-10-28 Virtual image display device Active JP6217827B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016211343A JP6217827B2 (en) 2016-10-28 2016-10-28 Virtual image display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016211343A JP6217827B2 (en) 2016-10-28 2016-10-28 Virtual image display device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2012252967A Division JP6036209B2 (en) 2012-11-19 2012-11-19 Virtual image display device

Publications (2)

Publication Number Publication Date
JP2017068269A true JP2017068269A (en) 2017-04-06
JP6217827B2 JP6217827B2 (en) 2017-10-25

Family

ID=58492473

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016211343A Active JP6217827B2 (en) 2016-10-28 2016-10-28 Virtual image display device

Country Status (1)

Country Link
JP (1) JP6217827B2 (en)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06194598A (en) * 1992-12-25 1994-07-15 Olympus Optical Co Ltd Display device of head mounting type
JP2001154637A (en) * 1999-11-24 2001-06-08 Olympus Optical Co Ltd Head mount type display device
JP2003287707A (en) * 2002-03-27 2003-10-10 Denso Corp Image conversion method, image processor, headup display and program
WO2009066465A1 (en) * 2007-11-20 2009-05-28 Panasonic Corporation Image display device, display method thereof, program, integrated circuit, glasses type head mounted display, automobile, binoculars, and desktop type display
WO2009133698A1 (en) * 2008-04-30 2009-11-05 パナソニック株式会社 Scanning image display device, eyeglasses-style head-mount display, and automobile
JP2010096864A (en) * 2008-10-14 2010-04-30 Canon Inc Aberration correction method, image processing apparatus and image processing system
WO2010095347A1 (en) * 2009-02-20 2010-08-26 ブラザー工業株式会社 Head mounted display
JP2011002660A (en) * 2009-06-18 2011-01-06 Honda Motor Co Ltd Image display apparatus for vehicle
JP2011203446A (en) * 2010-03-25 2011-10-13 Fujifilm Corp Head-mounted display device

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06194598A (en) * 1992-12-25 1994-07-15 Olympus Optical Co Ltd Display device of head mounting type
JP2001154637A (en) * 1999-11-24 2001-06-08 Olympus Optical Co Ltd Head mount type display device
JP2003287707A (en) * 2002-03-27 2003-10-10 Denso Corp Image conversion method, image processor, headup display and program
WO2009066465A1 (en) * 2007-11-20 2009-05-28 Panasonic Corporation Image display device, display method thereof, program, integrated circuit, glasses type head mounted display, automobile, binoculars, and desktop type display
WO2009133698A1 (en) * 2008-04-30 2009-11-05 パナソニック株式会社 Scanning image display device, eyeglasses-style head-mount display, and automobile
JP2010096864A (en) * 2008-10-14 2010-04-30 Canon Inc Aberration correction method, image processing apparatus and image processing system
WO2010095347A1 (en) * 2009-02-20 2010-08-26 ブラザー工業株式会社 Head mounted display
JP2011002660A (en) * 2009-06-18 2011-01-06 Honda Motor Co Ltd Image display apparatus for vehicle
JP2011203446A (en) * 2010-03-25 2011-10-13 Fujifilm Corp Head-mounted display device

Also Published As

Publication number Publication date
JP6217827B2 (en) 2017-10-25

Similar Documents

Publication Publication Date Title
JP6036209B2 (en) Virtual image display device
US11714284B2 (en) Display device including foveal and peripheral projectors
CN105929535B (en) Image display device
US9709809B2 (en) Head mounted display and optical position adjustment method of the same
JP6229260B2 (en) Virtual image display device
US10495883B2 (en) Image display device with optical systems to guide light to a pupil
JP5373892B2 (en) Beam scanning display device
US8398242B2 (en) Display apparatus
EP3062139A1 (en) Image display device
CN107407813B (en) Image display device
TW201621395A (en) Image display apparatus
JP4639721B2 (en) 3D image display device
JP2019061198A (en) Virtual image display unit
JP2007333952A (en) Video display apparatus and head mount display
US12038680B2 (en) Image projection device
WO2020261830A1 (en) Head-up display device
JP2006276319A (en) Image display device
JP6217827B2 (en) Virtual image display device
CN114578559A (en) Virtual image display device, method of adjusting the same, method of manufacturing the same, and optical unit
JP7111070B2 (en) head-up display device
JP2006276405A (en) Image display device
JP2010266775A (en) Video display apparatus and head mounted display

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170823

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170829

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170911

R150 Certificate of patent or registration of utility model

Ref document number: 6217827

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150