WO2012157666A1 - 視差画像表示装置、視差画像生成方法、及び視差画像プリント - Google Patents

視差画像表示装置、視差画像生成方法、及び視差画像プリント Download PDF

Info

Publication number
WO2012157666A1
WO2012157666A1 PCT/JP2012/062489 JP2012062489W WO2012157666A1 WO 2012157666 A1 WO2012157666 A1 WO 2012157666A1 JP 2012062489 W JP2012062489 W JP 2012062489W WO 2012157666 A1 WO2012157666 A1 WO 2012157666A1
Authority
WO
WIPO (PCT)
Prior art keywords
eye
image
parallax image
parallax
region
Prior art date
Application number
PCT/JP2012/062489
Other languages
English (en)
French (fr)
Inventor
小野 修司
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2011109217A external-priority patent/JP5753439B2/ja
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to CN201280023213.5A priority Critical patent/CN103535030B/zh
Priority to EP12786395.9A priority patent/EP2712197B1/en
Priority to KR1020137030279A priority patent/KR101592304B1/ko
Publication of WO2012157666A1 publication Critical patent/WO2012157666A1/ja
Priority to US14/081,333 priority patent/US10171799B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/317Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using slanted parallax optics
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/22Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type
    • G02B30/25Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the stereoscopic type using polarisation techniques
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/27Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/30Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00Stereoscopic photography
    • G03B35/18Stereoscopic photography by simultaneous viewing
    • G03B35/26Stereoscopic photography by simultaneous viewing using polarised or coloured light separating different viewpoint images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/128Adjusting depth or disparity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/337Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using polarisation multiplexing

Definitions

  • the present invention relates to a parallax image display device, a parallax image generation method, and a parallax image print for performing stereoscopic viewing using a right-eye image and a left-eye image.
  • a parallax image display device that performs stereoscopic viewing by displaying a parallax image based on a right-eye image and a left-eye image by spatially dividing a display screen by a predetermined arrangement such as a staggered arrangement or a stripe lattice arrangement, A parallax image generation method is known.
  • Patent Document 1 discloses an apparatus that displays left and right parallax images by spatially dividing a display screen by a staggered arrangement or a stripe lattice arrangement.
  • Patent Document 2 discloses an apparatus that displays left and right parallax images by spatially dividing a display screen by a stripe lattice arrangement.
  • Patent Document 3 when a three-dimensional image is displayed and observed using a polarization control plate, a stereoscopic view region with less crosstalk is obtained by using a parallax barrier or a lenticular lens having a long opening in a predetermined direction appropriately set. Has been disclosed.
  • Patent Document 4 using a parallax barrier method (parallax barrier method), image display on a display and display of an opening pattern on a spatial light modulation element are performed for each corresponding image or each corresponding scanning line.
  • An apparatus is disclosed in which the crosstalk between the left and right parallax images is reduced and the flicker and moire fringes are also reduced by switching in synchronization with each other.
  • a general parallax image display device divides a left-eye image and a right-eye image into a stripe grid having the same width, , A parallax image is generated so that a right-eye image is displayed in the right-eye region and a left-eye image is displayed in the left-eye region, and is displayed on the parallax image display unit.
  • polarizing filters having different polarization states are installed in the right-eye image (right-eye region) and the left-eye image (left-eye region).
  • the right-eye image is recognized by the right eye
  • the left-eye image is recognized by the left eye, so that the brain recognizes the stereoscopic display from the right-eye image and the left-eye image having parallax. be able to.
  • the above-mentioned stripe-shaped grid composed of the right-eye area and the left-eye area is almost always designed with the same pitch as the pixels to be displayed from the viewpoint of resolution, that is, expressive ability. There is no need to have a one-to-one relationship between the width and the fineness of the pixel represented in it, and humans will recognize it better if there are finer pixels in a coarse striped grid. Can do.
  • the right-eye image and the left-eye image in the predetermined region and the image information of each region are equally allocated to the stripe-shaped grid without determining the importance. That's not true.
  • the image signal often includes a signal component similar to the stripe grid, and the observed image often has moire.
  • a stereoscopic display device that divides the display screen into a space by a predetermined arrangement and uses a polarization control plate corresponding to the space, an optimum observation height for stereoscopic vision is generated in the vertical direction of the screen, and the position is higher or lower than that.
  • the crosstalk gradually increases, and finally the state of the reverse stereoscopic view is entered, and the performance of the stereoscopic display is significantly deteriorated.
  • the width of the opening of the parallax barrier is narrowed, the amount of light is reduced and the image is darkened, or the information amount of the image that can be displayed is reduced by using the lenticular lens (stretched by the lenticular lens). Therefore, the pixel density in the lens power direction is reduced). Further, there is a problem that the cost is increased by the amount of the lenticular lens. Further, the apparatus of Patent Document 4 requires a means for performing interlaced scanning in correspondence with the display and the spatial light modulation element, and there is a problem that the cost is greatly increased.
  • An object of the present invention is a parallax image display device that performs stereoscopic viewing by spatially dividing a display screen according to a predetermined arrangement, and does not impair the information amount of images included in each of the right-eye image and the left-eye image, and has high quality.
  • a parallax image display device that generates and displays a parallax image, a parallax image generation method, and a parallax image print.
  • the division size to be an optimal fineness based on the local information amount of the image to be displayed, high-quality stereoscopic viewing that does not easily generate crosstalk signals without impairing transmission of image information is possible.
  • a parallax image display device that enables display, a parallax image generation method, and a parallax image print.
  • the first aspect of the present invention provides an image acquisition unit that acquires a right-eye image and a left-eye image for generating a stereoscopically viewable parallax image, and information on the right-eye image
  • An information amount distribution calculating unit that calculates an amount distribution and an information amount distribution of the left-eye image, and the right-eye image based on the information amount distribution of the right-eye image and the information amount distribution of the left-eye image.
  • a parallax image display device comprising a parallax image generation unit that generates the parallax image from an image and the left-eye image.
  • a parallax image display area configured by arranging a square reference area having at least one of a right-eye area for displaying the right-eye image and a left-eye area for displaying the left-eye image in a grid pattern.
  • a first parallax image display unit wherein the parallax image generation unit includes the right-eye region for each reference region based on the information amount distribution of the right-eye image and the information amount distribution of the left-eye image. It is preferable that the parallax image is generated by assigning at least one of the left eye region and the left eye region and displaying the right eye image and the left eye image.
  • the parallax image generation unit includes an information amount comparison unit, a reference area allocation unit, and an image reflection unit, and the information amount comparison unit includes the information amount distribution of the right-eye image and the left-eye image. Based on the information amount distribution, for each reference region, the information amount of the right-eye image corresponding to the reference region is compared with the information amount of the left-eye image, and a comparison result is output.
  • the right eye region or the left eye region is assigned to the reference region, if any one of the information amount is larger than the other, the right eye region or the left eye region, whichever one of the information amount is larger, is assigned to the reference region,
  • the right eye area and the left eye area are allocated to the reference area in half, and the image reflecting means assigns the right eye image to the right eye area and the left eye area.
  • the left eye It is preferred to generate the parallax image by reflecting an image respectively.
  • the parallax image generation unit includes an information amount comparison unit, a reference area allocation unit, and an image reflection unit, and the information amount comparison unit includes the information amount distribution of the right-eye image and the left-eye image. Based on the information amount distribution, for each reference region, the information amount of the right-eye image corresponding to the reference region is compared with the information amount of the left-eye image, and a comparison result is output. Assigns the right eye region and the left eye region having an area corresponding to the amount of information based on the comparison result to the reference region, and the image reflecting means assigns the right eye region to the right eye region. It is preferable that the parallax image is generated by reflecting the left-eye image in the left-eye region.
  • the parallax image generation unit includes a luminance adjustment unit, and the luminance adjustment unit increases the luminance of the reference region as the allocated areas of the right eye region and the left eye region are smaller. The larger the value, the lower the brightness.
  • the information amount in the reference area is the amount of harmonic signal components of the right-eye image and the left-eye image corresponding to the reference area, the right-eye image and the left-eye image corresponding to the reference area.
  • the variance value of the luminance distribution of the right-eye image and the left-eye image corresponding to the reference region, and the difference amount between the pixel values of the right-eye image and the left-eye image corresponding to the reference region At least one is preferred.
  • the reference area is composed of at least four pixels.
  • a polarization filter is provided on the front surface of the first parallax image display unit and can be operated based on the parallax image so that the polarization state of the left-eye region and the polarization state of the right-eye region are different. It is preferable.
  • the first parallax image display unit is installed in front of the first parallax image display unit, and based on the parallax image, with respect to an observer away from the first parallax image display unit by a predetermined interval, It is preferable to provide a two-layer parallax barrier operable to transmit only light from the left-eye region and transmit only light from the right-eye region in the right eye direction of the observer.
  • the present invention calculates the information distribution of the right-eye image and the left-eye image used for stereoscopic display, respectively, and in the parallax image display area configured by arranging square reference areas in a grid pattern, Based on the information amount distribution of the right eye image and the information amount distribution of the left eye image, a right eye region for displaying the right eye image and a left eye region for displaying the left eye image for each reference region. And a parallax image is generated by reflecting the right-eye image in the right-eye region and the left-eye image in the left-eye region. .
  • the information amount in the reference region is compared for each reference region, and the right eye image and the left eye image are compared.
  • the larger one of the right eye region and the left eye region is assigned to the reference region, and the information amount is substantially the same.
  • the right eye region and the left eye region are allocated in half each.
  • the information amount in the reference region is compared for each reference region, and the right eye image and the left eye image are compared.
  • the right eye region and the left eye region are respectively assigned to the reference region according to the size of the information amount, and when the information amount is substantially the same, the right eye region and the left eye region Are preferably assigned to the reference area in half.
  • the luminance is increased as the allocated areas of the right eye area and the left eye area are smaller, and the luminance is decreased as the area is larger.
  • the present invention also provides a parallax image print characterized in that the parallax image generated by the above-described parallax image generation method is printed.
  • polarizing films having different polarization states are attached to the right eye region and the left eye region.
  • the light from the left eye region is placed in the direction of the left eye of the observer based on the parallax image with respect to an observer installed in front of the parallax image print and separated from the parallax image print by a predetermined interval. It is preferable to provide a two-layer parallax barrier film that transmits and transmits only the light from the right eye region in the right eye direction of the observer.
  • the second aspect of the present invention further includes a second parallax image having a parallax image display area including a right-eye area for displaying the right-eye image and a left-eye area for displaying the left-eye image.
  • a display unit wherein the parallax image generation unit includes a parallax image display region classification unit and a region division unit, and the parallax image display region classification unit displays the parallax image display region based on the information amount distribution.
  • the area dividing means divides the partial display area into unit area sets each having the same shape of right-eye unit area and left-eye unit area having different sizes for each classification
  • the parallax image generation unit displays the right-eye image in the right-eye region configured by the right-eye unit region, and the left-eye image is displayed in the left-eye region configured by the left-eye unit region. It is to provide a parallax image display device and generates the parallax image by displaying.
  • the information amount of the information amount distribution includes the fineness of the image (the amount of change in the pixel value), the amount of the high-frequency signal component that the image has, the maximum frequency value that the image has, the variance value of the luminance distribution, It is preferable that the difference amount is at least one pixel value between the image and the left-eye image.
  • the area dividing means divides the partial display area by a smaller unit area set as the information amount is larger, and as a smaller unit area set as the information amount is smaller.
  • the unit area set is preferably in a stripe lattice shape.
  • the area dividing unit determines a division direction of the partial display area according to a shape of the partial display area.
  • a polarization filter is provided on the front surface of the second parallax image display unit and operable to change the polarization state of the left-eye region and the polarization state of the right-eye region based on the parallax image. It is preferable.
  • a parallax barrier that can be operated so as to transmit only light from the left-eye region and transmit only light from the right-eye region in the right eye direction of the observer.
  • the present invention calculates the information amount distribution of the right-eye image and the left-eye image for generating a stereoscopically viewable parallax image, and displays the parallax image based on the information amount distribution.
  • the display area is classified into a plurality of partial display areas, and each of the partial display areas is divided into unit area sets each including a right-eye unit area and a left-eye unit area having different sizes for each classification,
  • a parallax image generation method is provided, wherein a parallax image is generated by displaying the right-eye image and the left-eye image in the right-eye unit region and the left-eye unit region, respectively.
  • the information amount of the information amount distribution includes the fineness of the image (the amount of change in the pixel value), the amount of the high-frequency signal component that the image has, the maximum frequency value that the image has, the variance value of the luminance distribution, It is preferable that the difference amount is at least one between the image and the left-eye image.
  • the partial display area is divided into smaller unit area sets as the information amount is larger, and is divided into larger unit area sets as the information amount is smaller.
  • the unit area set preferably has a stripe lattice shape.
  • the division direction of the partial display area is determined according to the shape of the partial display area.
  • the present invention also provides a parallax image print characterized in that the parallax image generated by the above-described parallax image generation method is printed.
  • polarizing films having different polarization states are attached to the right eye region and the left eye region.
  • the light from the left eye region is placed in the direction of the left eye of the observer based on the parallax image with respect to an observer installed in front of the parallax image print and separated from the parallax image print by a predetermined interval. It is preferable to provide a parallax barrier film that transmits and transmits only light from the right eye region in the right eye direction of the observer.
  • a parallax image display device a parallax image generation method, and a parallax image that generate and display a high-quality parallax image that maximizes the amount of information transmitted between the right-eye image and the left-eye image.
  • Prints can be provided.
  • FIG. 1 It is an external view which shows one Example of the parallax image display apparatus which concerns on the 1st aspect of this invention.
  • FIG. 1 It is a block diagram which shows the detailed structure of one Example of the parallax image display apparatus of FIG. (A) is an example of a right-eye image and a left-eye image
  • (B) is a case where the dotted line position shown in (A) is the horizontal axis and the information amount of the right-eye image and the left-eye image is the vertical axis.
  • FIG. 6C is an explanatory diagram of a two-layer parallax barrier according to the present invention.
  • FIG. 2 is an external view illustrating an example of a first parallax image display unit when a parallax barrier method is used in the parallax image display device illustrated in FIG. 1.
  • FIG. 5 is an explanatory diagram when a stripe direction is set to a vertical direction in a space-divided parallax image display including a right-eye image and a left-eye image shown in FIG.
  • FIG. 20 is an explanatory diagram when the partial display area in FIG. 19 is divided into unit area sets having different sizes (vertical stripe lattices having different widths) according to classification in the parallax barrier method.
  • a parallax image display device, a parallax image generation method, and a parallax image print according to the present invention will be described below in detail based on preferred embodiments shown in the accompanying drawings.
  • FIG. 1 is an external view of an embodiment showing a configuration of a parallax image display device according to a first aspect of the present invention.
  • the parallax image display device 10 of the present invention includes a first parallax image display unit 12, polarized glasses 14, an operation input unit 16, a console 20, and an image server 32.
  • the first parallax image display unit 12 that displays a space-divided parallax image has a parallax image display region 18 configured by a square reference region 18U.
  • the reference area 18U includes at least one of a right-eye unit area 18UR that displays a right-eye image and a left-eye unit area 18UL that displays a left-eye image. Therefore, the first parallax image display unit 12 includes a left-eye region (left-eye image display) configured by a right-eye region (right-eye image display region) 18R configured by the right-eye unit region 18UR and a left-eye unit region 18UL.
  • a parallax image display area 18 composed of a reference area 18U.
  • the first parallax image display unit 12 includes a polarizing filter 48 that can manipulate the polarization state of an arbitrary region, and a right-eye image is displayed in the parallax image display region 18 of the first parallax image display unit 12.
  • the polarizing filter 48 is operated so that the polarization state of the portion (right eye region 18R) and the portion where the left eye image is displayed (left eye region 18L) is different.
  • a liquid crystal panel that independently operates the polarization state of the parallax image, which is different from the liquid crystal display for displaying the parallax image, can be considered.
  • a polarization filter using a liquid crystal panel is installed in front of a liquid crystal display that displays a parallax image, and operates the polarization states of the left-eye region 18L and the right-eye region 18R of the parallax image using information on the parallax image, respectively. be able to.
  • the observer views the parallax image displayed on the first parallax image display unit 12 using the polarizing glasses 14 so that the left eye recognizes only the image for the left eye through the polarizing lens 14L, and the right eye has the polarizing lens. Only the image for the right eye is recognized through 14R. Thereby, the observer's brain can perform stereoscopic viewing based on the left-eye image recognized by the left eye and the right-eye image recognized by the right eye.
  • the operation input unit 16 issues various instructions to the control unit 26 (to be described later) of the console 20. For example, an instruction to acquire a right-eye image and a left-eye image from the image server 32, switching between stereoscopic display and planar display in the first parallax image display unit 12, storage of the generated parallax image in the image server 32, etc. Instructions are given.
  • FIG. 2 is a block diagram showing the detailed configuration of the parallax image display device of the present invention, and particularly shows the detailed configuration of the console 20.
  • the console 20 includes an image acquisition unit 22, a parallax image generation unit 24, a control unit 26, a display control unit 28, a polarization filter control unit 30, a storage unit 34, and an information amount.
  • the above-described parallax image generation unit 24 includes an information amount comparison unit 37, a reference area allocation unit 38, a luminance value adjustment unit 40, and an image reflection unit 46.
  • the console 20 is specifically configured by a computer including a CPU (Central Processing Unit), a RAM (Main Storage Device), a hard disk, and the like. In practice, the above-described CPU (Central Processing Unit), RAM The (main storage device), the hard disk, and the like are linked to constitute the above-described units and units in the console 20.
  • the image acquisition unit 22 is controlled through the control unit 26 according to an instruction from the instruction input unit 16 and acquires the right-eye image and the left-eye image that are stereoscopically stored and stored in the image server 32.
  • the information amount distribution calculation unit 36 calculates the information amount distribution of each image in the right eye image and the left eye image acquired by the image acquisition unit 22, and calculates the calculated information amount distribution of the right eye image and the left eye image. Is output to the parallax image generation unit 24.
  • the information amount is, for example, (1) the amount of harmonic signal components of the image, (2) the value of the maximum frequency of the image, (3) the variance value of the luminance distribution of the image in the local region, (4 ) The amount of difference between the pixel values of the left and right original images.
  • the parallax image generation unit 24 reflects the right-eye image and the left-eye image in the right-eye region 18R and the left-eye region 18L, and generates the above-described parallax image.
  • the parallax image generation unit 24 compares the information amount of the corresponding right-eye image and the information amount of the left-eye image for each reference region 18U constituting the parallax image display region 18 by the information amount comparison unit 37.
  • the reference region 18U may be composed of, for example, 4 ⁇ 4 16 pixels or 6 ⁇ 6 36 pixels.
  • the size of the reference area is the size of the display image (number of pixels) or the parallax image display area 18 (corresponding to the parallax image display area 18 on a one-to-one basis). It may be changed according to the size (resolution).
  • information in the reference area 18U is calculated based on the information amount distribution of the right eye image and the information amount distribution of the left eye image calculated by the information amount distribution calculating unit 36. Compare the amount.
  • the reference area assigning means 38 assigns the right-eye unit area 18UR and the left-eye unit area 18UL to the reference area 18 based on the amount of information. For example, one of the right-eye unit area 18UR and the left-eye unit area 18UL having a large information amount may be assigned. When the information amount is approximately the same, the right-eye unit area 18UR and the left-eye unit area 18UL are allocated. Both of them may be assigned in half. Further, the area areas of the right-eye unit area 18UR and the left-eye unit area 18UL may be changed and assigned according to the amount of information.
  • the reference area 18U when the reference area 18U is 4 ⁇ 4 16 pixels, it may be allocated as 12 pixels of the right eye unit area 18UR4 ⁇ 3 and 4 pixels of the left eye area 18UR4 ⁇ 1 depending on the amount of information.
  • the luminance value may be adjusted according to the area area. The smaller the area, the darker the area will be if the brightness value is not changed, so the brightness value needs to be increased. For the opposite reason, the luminance value needs to be lowered as the area of the region increases.
  • the image reflecting means 46 combines the right-eye image and the left-eye image so that the right-eye image is displayed in the right-eye unit region 18UR and the left-eye image is displayed in the left-eye unit region 18UL for each reference region 18U.
  • a parallax image is generated by reflecting.
  • the control unit 26 receives an instruction from the instruction input unit 16 and controls the operation of each unit of the parallax image display device 10.
  • the image acquisition unit 22 acquires the left-eye image and the right-eye image
  • the parallax image generation unit 24 generates the parallax image
  • the first parallax image display unit 12 performs the display control unit 28 described later.
  • a parallax image is displayed, and the polarization filter control unit 30 (to be described later) controls the polarization state of the polarization filter 48 installed on the first parallax image display unit 12 (not shown) according to the parallax image.
  • the generated parallax image may be stored in the storage unit 34 described later, and the generated parallax image may be stored in the image server through the storage unit 34.
  • the display control unit 28 displays the left-eye image and the right eye on the first parallax image display unit 12 according to an instruction from the instruction input unit 16. The image is displayed in plane.
  • the polarization filter control unit 30 controls the polarization filter 48 so that the left-eye region 18L and the right-eye region 18R are filtered with different polarization states. To do.
  • the storage unit 34 temporarily stores the parallax image generated by the parallax image generation unit 24 together with the left-eye image and the right-eye image, and stores image data of these images in the image server 32 according to an instruction from the instruction input unit 16. save.
  • the console 20 generates a parallax image based on the left-eye image and the right-eye image that can be stereoscopically viewed as described above.
  • the generated parallax image is displayed on the first parallax image display unit 12 having the parallax image display area 18 including the left-eye area 18L and the right-eye area 18R, and is stored in the image server 32 as necessary.
  • the image server 32 only needs to be able to store a left-eye image and a right-eye image that can be stereoscopically viewed as image data.
  • the image server 32 is not limited to the image server, and instead, the image data of the left-eye image and the right-eye image is stored.
  • Various stored recording media and recording medium reading means can be used.
  • the image acquisition unit 22 Upon receiving an instruction from the instruction input unit 16, the image acquisition unit 22 acquires a right-eye image R and a left-eye image L that are stereoscopically viewable as shown in FIG.
  • the acquired right-eye image R and left-eye image L are output to the information amount distribution calculation unit 36, and the information amount distribution of the right-eye image R and the information amount distribution of the left-eye image L are calculated.
  • the information amount for example, the amount of the harmonic signal component of (1) image described above is used.
  • the information amount distribution of the right-eye image R and the information amount distribution of the left-eye image L calculated by the information amount distribution calculation unit 36 are obtained by the information amount comparison unit 37 of the parallax image generation unit 24 as shown in FIG.
  • the amount of information is compared for each corresponding reference area 18U, and the comparison result is output.
  • the information amount of the right eye image R or the information amount of the left eye image L is larger in the corresponding reference area 18U, and how much is larger.
  • the reference area allocating means 38 allocates the right-eye unit area 18UR and the left-eye unit area 18UL to the reference area 18U based on the comparison result described above, as shown in FIG.
  • the allocation of the right-eye unit area 18UR and the left-eye unit area 18UL as shown in FIG. 6A, either the right-eye unit area 18UR or the left-eye unit area 18UL may be allocated. If they are about the same, half may be allocated. Further, as shown in FIG. 6B, the area areas of the right-eye unit area 18UR and the left-eye unit area 18UL may be changed according to the amount of information.
  • the luminance value may be adjusted by using the luminance value adjusting means 40 in accordance with the allocated area area. If the area of the area is small, the luminance value is increased (lightened), and if the area of the area is large, the luminance value is decreased (darkened).
  • the image reflecting means 46 generates a parallax image by reflecting the right-eye image R in the right-eye unit region 18UR and reflecting the left-eye image L in the left-eye unit region 18UL.
  • the parallax image generated by the parallax image generation unit 24 is displayed on the first parallax image display unit 12 through the display control unit 28, temporarily stored in the storage unit 34, and from the instruction input unit 16. May be stored in the image server 32.
  • the polarization filter control unit 30 obtains information on the parallax image display region 18 in which the right-eye unit region 18UR and the left-eye region 18UL are allocated for each reference region and the luminance value is adjusted, and controls the polarization filter 48. .
  • the polarization filter 48 is controlled so that the polarization state is different between the right eye region 18R and the left eye region 18L of the parallax image display region 18, and corresponds to the filter portion corresponding to the right eye region 18R and the left eye region 18L. Light having a different polarization state is transmitted from the filter portion.
  • the observer can perform a stereoscopic view by observing the parallax image displayed on the first parallax image display unit 12 through the polarizing glasses 14 by the parallax image display device 10 of the present invention.
  • the above is the operation of the parallax image display device 10 according to the first aspect of the present invention.
  • the parallax image generation unit 24 generates a parallax image using the parallax image generation method of the present invention, and displays the parallax image on the first parallax image display unit 12.
  • 3A and 3B show that the edge portions on the circular dotted line represented by the right-eye image R and the left-eye image L are R1 and R2, and L1 and L2.
  • the parallax image generation method in order to generate the parallax image so as not to impair image information of the right-eye image and the left-eye image as much as possible, the right-eye image R in FIG.
  • the right-eye image R and the left-eye image for those edge portions that is, the portions R1, R2, and L1, L2 in FIG. L only needs to be emphasized.
  • the information on the right-eye image R is prioritized, and the right-eye image R is preferentially displayed in the reference area 18U. It is preferred that Further, in the parallax image, in the area where the edge portions L1 and L2 of the left-eye image L are displayed, the information on the left-eye image L is given priority, and the left-eye image L is displayed in the reference area 18U with priority. Is preferred.
  • the right-eye image R, the left-eye image L, and the information amount distribution of the image are calculated by the information amount distribution calculating unit 36, and the right-eye image R is calculated from the calculated information amount distribution as shown in FIG.
  • the information amount comparison means 37 By calculating the information amount in the same region (the same reference region 18U) of the image R and the left-eye image L and comparing them by the information amount comparison means 37, the image with the larger information amount in the parallax image is given priority. Display.
  • the information amount is, for example, as described above, (1) the amount of harmonic signal components of the image, (2) the value of the maximum frequency of the image, and (3) the distribution of the luminance distribution of the image within the local region. Value, and (4) the difference between the pixel values of the left and right original images.
  • the right eye image R and the left eye image L are compared in the same reference area 18U, and the information amount is larger.
  • either one of the image R for the right eye and the image L for the left eye may be displayed as a parallax image in the reference area 18U. They may be displayed side by side.
  • the reference area allocating unit 38 increases the allocation area of the image having the larger information amount, thereby reducing the information amount.
  • the allocated area of the image may be reduced. For example, if the right eye image R and the left eye image L have a large amount of information in the right eye image R, the allocated area of the left eye image L is increased accordingly.
  • FIG. 6B there is no case where the image information is not reflected in the parallax image as in FIG. 6A, but the allocated area of one image is reduced, so that one image is viewed through the polarizing glasses. In this case, a portion where the image is displayed darkly is formed. Therefore, even if the allocated area is reduced, it is necessary to adjust the parallax image so that the image does not become dark.
  • the right eye image R and the left eye image L are assigned to the reference area 18U as shown in FIG. 6C, so that each reference area 18U of the right eye image and the left eye image is assigned.
  • the light amounts of the right eye unit region 18UR and the left eye unit region 18UL in the reference region 18U can be made uniform, and the light amounts of the right eye image R and the left eye image L can be kept constant. Can be aligned.
  • the reference region 18U shown in FIG. 5A is obtained by the information amount comparing means 37 between the right eye image R and the left eye image L.
  • the amounts are compared, priority is given to the right-eye image R in which the edge portion of the circular figure enters the reference region 18U.
  • the reference area allocating unit 38 determines the amount of information.
  • the right-eye unit area 18UR is assigned 12 squares to display the right-eye image R having a large size
  • the left-eye unit area 18UL is assigned 4 squares to display the left-eye image L having a small information amount.
  • the edge portion of the circular figure, which is the right eye image R is displayed with the brightness value slightly lowered by the brightness value adjusting means 40
  • the left eye image area L is displayed in the left eye unit area 18UL. Is displayed with the brightness increased.
  • the reference area 18U shown in FIG. 5B displays nothing in both images when the information amount of the right eye image R and the left eye image L is compared. Therefore, the right eye image R and the left eye image L are equally allocated.
  • the parallax image display device 10 acquires the right-eye image R and the left-eye image L taken for stereoscopic display through the parallax image generation unit 24 from an image server (not shown) or the like (step S1).
  • the parallax image generation unit 24 calculates the information amount distribution in each of the right-eye image R and the left-eye image L (step S3). For example, (1) the amount of harmonic signal components of the image, (2) the value of the maximum frequency of the image, (3) the variance value of the luminance distribution of the image within the local area, and (4) the pixels of the left and right original images
  • the information amount distribution is calculated using at least one of the difference amounts of values as the information amount.
  • the parallax image generation unit 24 divides the parallax image display area into square local areas, for example, and compares any of the information amounts (1) to (4) within these local areas. Then, as shown in FIG. 6C, the display ratio of the reference region 18U between the right-eye image R and the left-eye image L is determined based on the comparison result (step S5).
  • the right-eye image R may be displayed at 4 and the left-eye image L may be displayed at 1 ⁇ 4 from the bottom.
  • the left-eye image L that is 1 ⁇ 4 from the bottom is displayed with an increased luminance value
  • the right-eye image R that is 3 ⁇ 4 from the top is displayed with a decreased luminance value.
  • the amount of information is compared for all the reference areas 18U on the parallax image display area 18, and a parallax image is generated (step S7).
  • the displayed space-divided parallax image can be said to be a parallax image in which the information amount of each of the right-eye image and the left-eye image is kept to the maximum.
  • the generated parallax image is displayed on the first parallax image display unit 12 having the parallax image display region 18 (the parallax image display region 18 and the display screen correspond one-to-one).
  • Step S9 the parallax images may be displayed not only on the first parallax image display unit 12 but also by an output device such as a printer. This is because the present invention is a space division type stereoscopic display and does not require electrical drive.
  • parallax image print As described above, the parallax image generated by the parallax image generation method is not only displayed on the first parallax image display unit 12 of the parallax image display device 10 described above, but also printed on paper by a printer or the like (not shown). Also, it can be a parallax image print.
  • a polarizing film corresponding to the left-eye region 18L and the right-eye region 18R of the parallax image is further pasted on the parallax image.
  • a polarizing film corresponding to the left-eye region 18L and the right-eye region 18R of the parallax image is further pasted on the parallax image.
  • an elliptically polarizing plate described in JP 2009-193014 A can be used as the polarizing film. Since the above-described elliptically polarizing plate can be manufactured by arbitrarily changing the polarization pattern, the above-described elliptically polarizing plate whose polarization pattern corresponds to the left-eye region 18L and the right-eye region 18R is manufactured and parallax is used as a polarizing film. Just paste it on the image.
  • the observer uses the polarizing glasses 14 to see the parallax image print to which the above-described polarizing film is attached, so that the right eye recognizes only the right-eye image through the polarizing lens 14R and the left eye through the polarizing lens 14L. Since only the left-eye image is recognized, stereoscopic viewing can be performed based on these as described above.
  • the dividing direction of the striped lattice of the parallax image is not limited to the horizontal (horizontal) direction shown in FIGS. 1, 4, 6, and 7. Since the left eye image is recognized by the observer's left eye and the right eye image is recognized by the observer's right eye, the observer displays stereoscopically in any direction such as the vertical (vertical) direction and the oblique direction. be able to.
  • the first parallax image display unit 12 may include a two-layer parallax barrier 49 described later instead of the polarizing filter 48.
  • the parallax image is limited to the parallax image divided in a stripe lattice shape in the vertical direction shown in FIG. 9B (direction perpendicular to the eyes of the observer).
  • a parallax barrier control unit 31 that controls the two-layer parallax barrier 49 according to the parallax image (parallax image display region 18) generated by the parallax image generation unit 24 is provided.
  • the polarizing glasses 14 are not necessary, and stereoscopic vision can be performed with the naked eye.
  • the parallax barrier As the parallax barrier, a switch liquid crystal or the like that can electrically switch the presence or absence of light transmission in an arbitrary area in pixel units is considered, and the two-layer parallax barrier 49 is also configured by stacking two layers of switch liquid crystals.
  • the parallax barrier control unit 31 controls the two-layer parallax barrier 49 by electrically controlling the two layers of switch liquid crystal.
  • the conventional parallax barrier 50 is arranged at a certain distance from the front surface of the first parallax image display unit 12 so that the right-eye image is observed by the right eye, as shown in FIG. Since the left-eye image is observed, the observer can perform a stereoscopic view using the right-eye image and the left-eye image. In this case, as shown in FIG. 10A, the display area (information amount) of the right-eye image and the display area of the left-eye image are substantially the same.
  • the shape of the observed right-eye area 18R is changed when the space division interval of the parallax image is changed for each predetermined area.
  • the shape of the left eye region 18L is different from that of the left eye region 18L, it is necessary to change the thickness and shape of the parallax barrier as shown in FIG.
  • the two-layer parallax barrier 49 according to the present invention combines two layers of the conventional parallax barrier 50 shown in FIG.
  • the same effect as a parallax barrier having a complicated shape can be obtained, and a parallax barrier having an arbitrary shape can be formed according to a parallax image (parallax image display region 18).
  • the two-layer parallax barrier 49 includes a first layer 49A and a second layer 49B.
  • the right eye unit in the reference region 18U according to the present invention is limited by the first layer 49A and the second layer 49B restricting light from a part of the right eye image R1 to R5 (right eye unit region 18UR).
  • the display area (area observed by the observer) of the area 18UR and the left-eye unit area 18UL can be arbitrarily changed.
  • the parallax image display device 10 of the present invention includes the above-described two-layer parallax barrier 49 on the front surface of the first parallax image display unit 12, and stripes in the vertical direction by the parallax image generation unit 24.
  • the parallax image divided in a lattice shape is generated, the right eye image of the parallax image is observed by the right eye of the observer with respect to the observer away from the first parallax image display unit 12 by the observer.
  • the two-layer parallax barrier 49 is operated so that the left-eye image of the parallax image is observed by the left eye. Therefore, the observer can perform autostereoscopic vision based on the left-eye image and the right-eye image by recognizing the right-eye image with the right eye and the left-eye image with the left eye.
  • the parallax image is limited to the vertical stripe grid as described above, and thus is not a parallax image divided into the horizontal stripe grid shown in FIG. As shown in FIG. 12, a parallax image divided into vertical stripe lattices is generated.
  • the parallax images are classified as shown in FIG. 13 corresponding to FIG. 6 by comparing the amount of information, specifically, FIG. 14 (A) corresponding to FIG. 7 (A) and FIG. 7 (B). ) And (B).
  • the difference in display area between the right-eye unit area 18UR and the left-eye unit area 18UL in the reference area 18U in FIG. 14A is created by the above-described two-layer parallax barrier 49.
  • a two-layer parallax barrier film can be used instead of the polarizing film. Similar to the two-layer parallax barrier described above, the two-layer parallax barrier film is formed by stacking two layers of parallax barrier films. In this case as well, the polarizing glasses 14 are not necessary, and stereoscopic vision can be performed with the naked eye, as described above.
  • the parallax barrier film for example, a combination of a light-impermeable film that does not transmit light and a light-transmitting film that transmits light can be considered.
  • a two-layer parallax barrier film configured according to the parallax image is installed (pasted) on the front surface of the parallax image print (that is, two parallax barrier films configured according to the parallax image are spaced at a predetermined interval).
  • the right eye image is observed by the observer's right eye
  • the left eye image is observed by the observer's left eye.
  • the autostereoscopic viewing can be performed based on the right-eye image and the left-eye image.
  • FIG. 15 is an external view of an embodiment showing a configuration of a parallax image display device according to a second aspect of the present invention.
  • the parallax image display device 110 of the present invention includes a second parallax image display unit 112, polarized glasses 14, an operation input unit 16, a console 120, and an image server 32.
  • the polarized glasses 14, the operation input unit 16, and the image server 32 described above have the same configurations as those in the first aspect, and thus description thereof is omitted.
  • the second parallax image display unit 112 that displays a space-divided parallax image displays a right-eye region (right-eye image display region) 118 ⁇ / b> R that displays a right-eye image and a left-eye image.
  • the right eye region 118R is constituted by a right eye unit region 118UR
  • the left eye region 118L is constituted by a left eye unit region 118UL.
  • the pair of right eye unit areas 118UR and left eye unit areas 118UL constitutes a unit area set 118U.
  • As the unit region set 118U for example, a stripe lattice shape can be considered as shown in FIG. Of course, various shapes such as a staggered lattice and a square lattice may be used.
  • the second parallax image display unit 112 includes a polarizing filter 48 that can manipulate the polarization state of an arbitrary region as in the first mode.
  • a polarizing filter 48 that can manipulate the polarization state of an arbitrary region as in the first mode.
  • the parallax image as in the first mode, the right-eye image is displayed.
  • the polarizing filter 48 is operated so that the polarization state is different between the portion (right-eye region 118R) where is displayed and the portion (left-eye region 118L) where the left-eye image is displayed.
  • FIG. 16 is a block diagram showing a detailed configuration of the parallax image display device according to the second aspect of the present invention, and particularly shows a detailed configuration of the console 120.
  • the console 120 described above includes an image acquisition unit 22, a parallax image generation unit 124, a control unit 26, a display control unit 28, a polarization filter control unit 30, a storage unit 34, and an information amount.
  • the parallax image generation unit 124 includes a parallax image display region classification unit 142, a region division unit 144, and an image reflection unit 46.
  • the console 120 is specifically configured by a computer including a CPU (Central Processing Unit), a RAM (Main Storage Device), a hard disk, and the like.
  • a CPU central processing unit
  • a RAM main storage device
  • a hard disk and the like are linked to constitute the above-described units and units in the console 120.
  • the information amount distribution calculation unit 136 calculates the information amount distribution of each image in the right eye image and the left eye image acquired by the image acquisition unit 22, and calculates the calculated information amount distribution of the right eye image and the left eye image. Is output to the parallax image generation unit 124.
  • the information amount is, for example, (1) the amount of harmonic signal components of the image, (2) the value of the maximum frequency of the image, (3) the variance value of the luminance distribution of the image in the local region, (4 ) The amount of difference between the pixel values of the left and right original images.
  • the information amount distribution is calculated by the information amount distribution calculating unit 136 in the right-eye image in FIG. 17A and the left-eye image in FIG. 17B.
  • the information amount for example, the information amount distribution is calculated on the basis of the amount of the harmonic signal component of the above-mentioned (1) image.
  • the right-eye image and the left-eye image are composed of, for example, (a) sky, (b) clouds, (c) mountains, (d) trees, and the like.
  • the parallax image generation unit 124 reflects the right-eye image and the left-eye image in the right-eye region 118R and the left-eye region 118L, and generates the above-described parallax image.
  • the parallax image generation unit 124 uses the parallax image display region classification unit 142 based on the information amount distribution of the right-eye image and the information amount distribution of the left-eye image calculated by the information amount distribution calculation unit 136 described above.
  • the parallax images are classified into a plurality of partial display areas 118D.
  • the parallax image is an image in which the right-eye image and the left-eye image are displayed so as to overlap each other (displayed by being divided into spaces). There are parts that differ greatly from each other and parts that are substantially similar.
  • the information on the edge portions (a) to (d) is important for performing highly accurate stereoscopic viewing.
  • the parallax image display area classification unit 142 classifies the parallax image into a plurality of partial display areas 118D based on the information amount distribution of the right-eye image and the information amount distribution of the left-eye image. For example, as shown in FIG. 19, the parallax image display region classification unit 142 (N), (b) clouds and (d) tree portions around the edge portions (a) to (d) (M), (A) Sky and (c) mountains are classified into three partial display areas 118D (118DN, 118DM, 118DW) of (W).
  • the periphery of the edge portion refers to, for example, a region that is separated from the pixels constituting the edge by a fixed pixel (for example, a radius of 10 pixels).
  • the area dividing unit 144 sets the partial display areas 118D of (N), (M), and (W) classified as described above to a unit area set including a right-eye unit area 118UR and a left-eye unit area 118UL. Divide into 118U.
  • the size of the unit region set 118U is the information amount for each partial display region 118D of the parallax image calculated by the information amount distribution calculating unit 142 and the information amount difference (the information amount of the right-eye image and the information amount of the left-eye image). And the difference).
  • the partial display area 118DW shown in FIG. 19 is an image part that does not change so much, such as (a) sky or (c) mountain, and these partial display areas 118DW are included in a large (coarse) unit area set 118UW. It may be divided. Further, when the image itself of the partial display area 118DM is fine to some extent, such as (b) clouds or (d) trees of the partial display area 118DM, it is divided into unit area sets 118UM having an intermediate size between them. May be.
  • the area dividing means 144 divides the parallax image display area 118 classified as shown in FIG. 19 by the display area classification means 142 into unit area sets 118U having different sizes for each partial display area 118D.
  • the unit region set 118U has the shape of the above-described stripe lattice, the unit region set 118UW having the larger width, the unit region set 118UN having the smaller width, and the intermediate size of the unit region set 118UN. Is a unit area set 118UM.
  • the image reflecting unit 146 displays the right eye image in the right eye unit region 118UR and the left eye image in the left eye unit region 118UL for each unit region set 118U (118UN, 118UM, 118UW).
  • the image for the left eye and the image for the left eye are reflected.
  • the parallax image generation unit 124 generates a parallax image based on the right-eye image and the left-eye image.
  • the image acquisition unit 22 Upon receiving an instruction from the instruction input unit 16, the image acquisition unit 22 acquires a right-eye image and a left-eye image that can be stereoscopically viewed as shown in FIGS.
  • the acquired right-eye image and left-eye image are output to the information amount distribution calculation unit 136, and the information amount distribution of the right-eye image and the information amount distribution of the left-eye image are calculated and output to the parallax image generation unit 124. Is done.
  • the parallax image display area classification unit 142 of the parallax image generation unit 124 may display, for example, a parallax image display based on the information amount distribution of the right eye image and the information amount distribution of the left eye image calculated by the information amount distribution calculation unit 136.
  • the areas are classified into three partial display areas 118D (N), (M), and (W) as shown in FIG.
  • the area dividing means 144 divides the partial display area 118D classified as described above into unit area sets 118U having different sizes for each classification. For example, as shown in FIG. 19, the partial display area 118DN considered to have a large amount of information is divided into as small unit area sets 118UN as possible, and the partial display area 118DW considered to have a small amount of information has a unit area set as large as possible.
  • the partial display area 118DM in the middle thereof is divided into unit area sets 118UM having an intermediate size.
  • the image reflecting means 146 reflects the right-eye image in the right-eye unit region 118UR of the unit region set 118U (118UN, 118UM, 118UW), reflects the left-eye image in the left-eye unit region 118UL, and performs parallax. Generate an image.
  • the subsequent operation is the same as in the first mode.
  • the above is the operation of the parallax image display device 110 according to the second aspect of the present invention.
  • parallax image generation method a parallax image generation method according to the second aspect of the present invention.
  • the parallax image generation unit 124 generates a parallax image using the parallax image generation method of the present invention, and displays the parallax image on the second parallax image display unit 112.
  • the parallax image generation unit 124 of the present invention includes an information amount distribution calculation unit 136 that calculates the information amount distribution of each of the right eye image and the left eye image.
  • the information amount is, for example, (1) the amount of harmonic signal components of the image, (2) the value of the maximum frequency of the image, (3) the variance value of the luminance distribution of the image in the local region, (4 ) The amount of difference between the pixel values of the left and right original images.
  • the information amount distribution of the right-eye image and the left-eye image is, for example, (1) the harmonics of the image among the information amounts described above.
  • the amount of the wave signal component, that is, the fineness of the image is used as a reference.
  • the right-eye image and the left-eye image are composed of, for example, (a) sky, (b) clouds, (c) mountains, (d) trees, and the like.
  • the parallax image is an image in which the image for the right eye and the image for the left eye are displayed so as to overlap each other (displayed in a space-divided manner), and (a) to (d) of the edge portions.
  • Information is important for performing highly accurate stereoscopic viewing.
  • the parallax image display area 118 is displayed in the parallax image display area classification unit 142 by, for example, (N), (M), ( W) is divided into three partial display areas 118D (118DN, 118DM, 118DW).
  • the parallax image generation unit 124 of the present invention divides the three different partial display areas 118D (N), (M), and (W) by the area dividing unit 144 by the unit area sets 118U having different sizes for each classification. To do. Note that the size of information in three different partial display areas 118D shown in FIG. 19 is in the order of (N)>(M)> (W), that is, the size of division of the partial display area 118D (that is, , Roughness) is in the order of (N) ⁇ (M) ⁇ (W).
  • the unit region set 118U is a stripe lattice composed of a right-eye unit region 118UR and a left-eye unit region 118UL.
  • M is intermediate and classification (W) is rough)
  • W classification
  • the stripe width of the unit region set 118U is, for example, a classification with a small amount of information (that is, a classification with a large stripe width) W for a stripe width of 16 pixels, an intermediate classification M with a stripe width of 8 pixels, and a classification with a large amount of information ( In other words, the stripe width of N) may be 4 pixels.
  • the stripe width may be changed according to the pixel size of the parallax image, or may be changed according to the size or shape of the partial display region 118D.
  • the area dividing means 144 of the present invention may change the dividing direction, that is, the stripe direction for each shape of the classified partial display area 118D. For example, when the partial display area 118D is long in the horizontal direction, the area dividing unit 144 may divide the partial display area 118D into vertical stripe lattices (unit area set 118U). This is to prevent interference (moire) between the dividing direction, that is, the stripe direction of the stripe grating and the spatial frequency of the image.
  • the parallax image generation unit 124 In the parallax image display area 118, the parallax image generation unit 124 generates a parallax image by reflecting the right-eye image in the right-eye area 118R and the left-eye image in the left-eye area 118L, and the generated parallax image Are displayed on the second parallax image display unit 112 having the parallax image display area 118 (corresponding to the parallax image table area 118 on a one-to-one basis).
  • the parallax image display device 110 acquires the right-eye image and the left-eye image taken for stereoscopic display through the parallax image generation unit 124 from an image server (not shown) or the like (step S101).
  • the parallax image generation unit 124 calculates the information amount distribution in each of the right eye image and the left eye image (step S103). As described above, for example, (1) the amount of harmonic signal components of the image, (2) the value of the maximum frequency of the image, (3) the variance value of the luminance distribution of the image within the local region, (4) the left and right The information amount distribution is calculated using at least one of the difference amounts of the pixel values of the original image as the information amount.
  • the parallax image generation unit 124 classifies the parallax image display region 118 into a plurality of partial display regions 118D from the information amount distribution of the right-eye image and the information amount distribution of the left-eye image.
  • the parallax image display region 118 is classified by the parallax image display region classification unit of the parallax image generation unit 124, for example, from the difference amount between the information amount distribution of the right-eye image and the information amount distribution of the left-eye image, This is performed based on image edge information and the like (step S105).
  • the parallax image display area 118 is classified into, for example, three partial display areas 118D (N), (M), and (W) as shown in FIG. There are three parts: an edge peripheral part (N), a cloud and tree part (M) with a large amount of information in the original image, and a sky and mountain part (W) with a small amount of information.
  • the parallax image generation unit 124 divides the partial display region 118D into unit region sets 118U (right-eye unit region 118UR and left-eye unit region 118UL) having different sizes according to the classification by the region dividing unit. (Step S107). For example, assuming that the right-eye unit region 118UR and the left-eye unit region 118UL are stripe lattices, the stripe widths in the classifications (N), (M), and (W) of the partial display region 118D are small, medium, Divide from large.
  • the parallax image display area 118 is displayed as shown in FIG. 21 by the right-eye unit area 118UR and the left-eye unit area 118UL which are stripe lattices. Further, the direction of the stripe lattice may be changed to a direction in which moiré is unlikely to occur, such as vertical, horizontal, or diagonal, according to the shape of the partial display region 118D (118DN, 118DM, 118DW).
  • the parallax image generation unit 124 the parallax image is generated by reflecting the left-eye image and the right-eye image on all the right-eye regions 118R and the left-eye regions 118L on the parallax image display region 118 (step S109).
  • the displayed space-divided parallax image is a parallax image that hardly causes crosstalk and does not impair the transmission of image information.
  • the generated parallax image is displayed on the second parallax image display unit 112 in which the display screen has a one-to-one correspondence with the parallax image display region 118 (step S111).
  • these parallax images may be displayed not only on the second parallax image display unit 112 but also by an output device such as a printer. This is because the present invention is a space-divided stereoscopic display and does not require electrical driving.
  • parallax image print> As described above, the parallax image generated by the parallax image generation method is not only displayed on the second parallax image display unit 112 of the parallax image display device 110 described above, but also a printer (not shown), as in the first mode.
  • the parallax image can be printed by printing on a sheet of paper.
  • a polarizing film corresponding to the left-eye region 118L and the right-eye region 118R of the parallax image is further pasted on the parallax image.
  • the left eye image is recognized by the observer's left eye
  • the right eye image is recognized by the observer's right eye, so that the observer can perform stereoscopic display.
  • the second parallax image display unit 112 may include a parallax barrier 50 described later instead of the polarizing filter 48.
  • the parallax image is limited to the parallax image divided in a stripe lattice shape in the vertical direction shown in FIG. 9B (direction perpendicular to the direction in which the eyes of the observer are lined up).
  • a parallax barrier control unit 31 that controls the parallax barrier in accordance with the parallax image (parallax image display region 118) generated by the parallax image generation unit 124 is provided.
  • the polarizing glasses 14 are not necessary, and stereoscopic vision can be performed with the naked eye.
  • the parallax barrier 50 is configured by a switch liquid crystal or the like that can electrically switch the presence / absence of light transmission in an arbitrary region in units of pixels. Further, the parallax barrier control unit 31 controls the parallax barrier 50 by electrically controlling the switch liquid crystal.
  • the parallax barrier 50 is arranged at a predetermined interval distance in front of the second parallax image display unit 112, so that the right-eye image is observed by the right eye and the left eye is observed by the left eye, as shown in FIG. Since the work image is observed, the observer can perform a stereoscopic view using the right eye image and the left eye image.
  • the display area (information amount) of the right-eye image and the display area of the left-eye image are substantially the same.
  • the parallax image display device 110 includes the above-described parallax barrier 50 on the front surface of the second parallax image display unit 112, and is vertically striped by the parallax image generation unit 124.
  • the parallax barrier 50 is operated so that the left-eye image of the parallax image is observed.
  • the parallax image is limited to the vertical stripe grid as described above, and therefore the partial display region 118D classified as shown in FIG. Instead of the horizontal stripe lattice shown in FIG. 20, the image is divided into the vertical stripe lattice shown in FIG. 23 to generate a parallax image.
  • the observer recognizes the image for the right eye with the right eye and the image for the left eye with the left eye. It is possible to perform autostereoscopic viewing based on the right-eye image.
  • a parallax barrier film can be used instead of the polarizing film.
  • the polarizing glasses 14 are not necessary, and stereoscopic vision can be performed with the naked eye, as described above.
  • the parallax barrier film for example, a combination of a light-impermeable film that does not transmit light and a light-transmitting film that transmits light can be considered.
  • a parallax barrier film configured according to the parallax image is placed (pasted) at a predetermined interval on the front surface of the parallax image print to observe an observer away from the parallax image print by a predetermined interval. Since the right eye image is observed by the right eye of the viewer and the left eye image is observed by the left eye of the viewer, the viewer can perform autostereoscopic viewing based on the right eye image and the left eye image.
  • the parallax image display device As described above, the parallax image display device, the parallax image generation method, and the parallax image print of the present invention have been described in detail. However, the present invention is not limited to the above-described embodiments and does not depart from the gist of the present invention. In the above, various improvements and changes may be made.
  • Parallax image display device First parallax image display unit (parallax image display means) 112 2nd parallax image display part (parallax image display means) 14 Polarized Glasses 16 Operation Input Unit 18, 118 Parallax Image Display Area 18R, 118R Right Eye Area (Right Eye Image Display Area) 18L, 118L Left eye area (left eye image display area) 118D Partial display area 18U Reference area 118U Unit area set 18UR, 118UR Right eye unit area 18UL, 118UL Left eye unit area 20, 120 Console 22 Image acquisition unit 24, 124 Parallax image generation unit 26 Control unit 28 Display control unit 30 Polarization filter Control unit 31, 131 Parallax barrier control unit 34 Storage unit 36, 136 Information amount distribution calculation unit 37 Information amount comparison unit 38 Reference region allocation unit 40 Luminance value adjustment unit 142 Parallax image display region classification unit 144 Region division unit 46, 146 Image Reflecting means 48 Polarizing filter 49 Two-layer parallax barrier 50 Parallax barrier

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

 立体視可能な視差画像を生成するための右目用画像と左目用画像とを取得する画像取得部22と、右目用画像及び左目用画像の情報量分布をそれぞれ算出する情報量分布算出部36と、右目用画像及び左目用画像の情報量分布に基づいて、右目用画像と左目用画像とから視差画像を生成する視差画像生成部24とを備える。

Description

視差画像表示装置、視差画像生成方法、及び視差画像プリント
 本発明は、右目用画像及び左目用画像を用いて立体視を行うための視差画像表示装置、視差画像生成方法、及び視差画像プリントに関するものである。
 従来より、千鳥配列やストライプ格子配列などの所定の配列によって、表示画面を空間分割して、右目用画像及び左目用画像に基づく視差画像を表示することで、立体視を行う視差画像表示装置や視差画像生成方法が知られている。
 特許文献1では、千鳥配列またはストライプ格子配列によって、表示画面を空間分割して、左右の視差画像を表示する装置が開示されている。また、特許文献2では、ストライプ格子配列によって、表示画面を空間分割して、左右の視差画像を表示する装置が開示されている。
 特許文献3では、偏光制御板を用いて3次元画像を表示し観察する際、適切に設定した所定方向に長い開口を有する視差バリア又はレンチキュラレンズ等を用いることによってクロストークの少ない立体視の領域を上下方向に拡大できる装置が開示されている。
 また、特許文献4では、パララックスバリア方式(視差バリア方式)を用いて、ディスプレイへの画像表示と空間光変調素子への開口パターンの表示を、それぞれ対応する画像ごと、あるいは対応する走査線ごとに同期して切り替えることにより、左右の視差画像のクロストークを低減し、しかもフリッカー及びモアレ縞も低減する装置が開示されている。
 一般的な視差画像表示装置は、例えば、図9(A)~(C)に示すように、左目用画像と右目用画像とを同一幅のストライプ格子状に空間分割し、視差画像表示部上において、右目用領域に右目用画像が、左目用領域に左目用画像がそれぞれ表示されるように視差画像を生成し、視差画像表示部において表示する。
 視差画像表示部上には、右目用画像(右目用領域)と左目用画像(左目用領域)とにおいて、偏光状態がそれぞれ異なる偏光フィルタが設置されており、偏光メガネを通して、視差画像表示部に表示された視差画像を見ることで、右目用画像が右目によって認識され、左目用画像が左目によって認識されるため、脳が視差のある右目用画像と左目用画像とから立体視表示を認識することができる。
特開平07-307959号公報 特開2005-215326号公報 特開平10-221643号公報 特開平9-265056号公報
 前述の右目用領域と左目用領域とからなるストライプ状格子は、解像度、つまり表現能力の観点から一般的に表示する画素と等ピッチで設計されることがほとんどであるが、ストライプ状格子のストライプ幅と、そこに表現される画素の細かさとは1対1である必要は全く無く、粗めのストライプ状格子の中に更に細かい画素が入っていれば、人間はそれをよりよく認識することができる。
 さらに、所定領域における右目用画像と左目用画像と各領域の画像情報の重要度を判断することなく、ストライプ状格子に均等に割り当てるのは、画像の伝達情報量の観点から考えても好ましい方法とはいえない。
 特許文献1に記載のように、所定の配列によって、表示画面を空間分割する場合、画像信号に類似の信号成分が含まれると、空間信号同士の干渉が発生し、観察画像には干渉信号(モアレ)が発生するため、画像品質を著しく損なってしまっていた。
 また、特許文献2に記載のように、特に、ストライプ格子配列では、画像信号にストライプ格子に類似の信号成分が含まれる場合が多く、観察画像にはモアレが発生することが多々あった。
 また、所定の配列によって、表示画面を空間分割し、それに応じた偏光制御板を用いる立体表示装置では、画面の上下方向に立体視に最適な観察高さが生じ、それよりも高い位置又は低い位置から画面を見るにつれて、次第にクロストークが多くなり、ついには、逆立体視の状態となり、立体視表示の性能が著しく劣化してしまっていた。
 また、立体視するには観察者が最適な観察高さに目を保持する必要があり、観察者の負担が増大し、疲労の原因になるという欠点があった。
 特許文献3の装置では、視差バリアの開口の幅が狭くなり、光量が低下して画像が暗くなる、あるいは、レンチキュラレンズを用いることで表示できる画像の情報量が低下する(レンチキュラレンズによって引きのばすため、レンズパワー方向の画素密度が減る)。また、レンチキュラレンズの分、コストが増大するという問題点がある。
 また、特許文献4の装置では、ディスプレイと前記空間光変調素子とを対応させてインターレース走査する手段が必要であり、コストが大きく増大するという問題点がある。
 上述のような、偏光制御板を用いて立体視を行う従来型の視差画像表示装置においては、想定された幾何光学的な位置関係が崩れることで、クロストーク信号が観察者に伝達する。
 そして、幾何光学的な位置関係の崩れが同程度であっても、空間分割を細かく設定すると、クロストーク信号量は大きく発生する。
 すなわち、幾何光学的な位置関係の崩れによるクロストーク信号を抑えるには、無用に空間分割を細かく設定しないことが肝要である。
 一方で、空間分割を粗くしてしまうと、立体感を感じるために不可欠な視差画像の情報を十分に観察者に提供できない。
 本発明の目的は、所定の配列によって表示画面を空間分割して立体視を行う視差画像表示装置において、右目用画像と左目用画像とがそれぞれ備える画像の情報量を損なうことなく、高品質な視差画像を生成・表示する視差画像表示装置、視差画像生成方法、及び視差画像プリントを提供することにある。
 また、表示する画像の局所的な情報量に基づき分割サイズを可変として最適な細かさに設定することで、画像情報の伝達を損なうことなく、更に、クロストーク信号の生じにくい高品質な立体視表示を可能とする視差画像表示装置、視差画像生成方法、及び視差画像プリントを提供することにある。
 上記課題を解決するために、本発明の第1の態様は、立体視可能な視差画像を生成するための右目用画像と左目用画像とを取得する画像取得部と、前記右目用画像の情報量分布と前記左目用画像の情報量分布とをそれぞれ算出する情報量分布算出部と、前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布とに基づいて、前記右目用画像と前記左目用画像とから前記視差画像を生成する視差画像生成部とを備えることを特徴とする視差画像表示装置を提供する。
 さらに、前記右目用画像を表示する右目用領域と前記左目用画像を表示する左目用領域との少なくとも一方を備える正方の基準領域を格子状に配列することで構成される視差画像表示領域を有する第1の視差画像表示部を備え、前記視差画像生成部は、前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布とに基づいて、前記基準領域ごとに前記右目用領域と前記左目用領域との少なくとも一方を割り当て、前記右目用画像及び前記左目用画像を表示することで前記視差画像を生成することが好ましい。
 また、前記視差画像生成部は、情報量比較手段と、基準領域割当手段と、画像反映手段とを備え、前記情報量比較手段は、前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布と基づいて、前記基準領域ごとに前記基準領域に対応する前記右目用画像の情報量と前記左目用画像の情報量とを比較して比較結果を出力し、前記基準領域割当手段は、比較結果に基づいて、いずれか一方の前記情報量が他方より大きい場合には、前記右目用領域及び前記左目用領域いずれか前記情報量の大きい方を前記基準領域に割り当て、それぞれの前記情報量が略同じ場合には、前記右目用領域と前記左目用領域とを半分ずつ前記基準領域に割り当て、前記画像反映手段は、前記右目用領域に前記右目用画像を、前記左目用領域に前記左目用画像をそれぞれ反映させることで前記視差画像を生成することが好ましい。
 また、前記視差画像生成部は、情報量比較手段と、基準領域割当手段と、画像反映手段とを備え、前記情報量比較手段は、前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布と基づいて、前記基準領域ごとに前記基準領域に対応する前記右目用画像の情報量と前記左目用画像の情報量とを比較して比較結果を出力し、前記基準領域割当手段は、比較結果に基づいて、前記情報量の大きさに応じた面積の前記右目用領域と前記左目用領域とをそれぞれ前記基準領域に割り当て、前記画像反映手段は、前記右目用領域に前記右目用画像を、前記左目用領域に前記左目用画像をそれぞれ反映させることで前記視差画像を生成することが好ましい。
 また、前記視差画像生成部は、輝度調整手段を備え、前記輝度調整手段は、前記基準領域において、前記右目用領域及び前記左目用領域の前記割り当てられた面積が小さければ小さい程その輝度を上げ、大きければ大きい程その輝度を下げることが好ましい。
 また、前記基準領域における情報量とは、前記基準領域に対応する前記右目用画像及び前記左目用画像の持つ高調波信号成分の量、前記基準領域に対応する前記右目用画像及び前記左目用画像の最大周波数の値、前記基準領域に対応する前記右目用画像及び前記左目用画像の輝度分布の分散値、前記基準領域に対応する前記右目用画像及び前記左目用画像の画素値の差分量の少なくとも1つであることが好ましい。
 また、前記基準領域は、少なくとも4画素で構成されることが好ましい。
 さらに、前記第1の視差画像表示部の前面に設置され、前記視差画像に基づいて、前記左目用領域の偏光状態と前記右目用領域の偏光状態とが異なるように操作可能な偏光フィルタを備えることが好ましい。
 さらに、前記第1の視差画像表示部の前面に設置され、前記視差画像に基づいて、前記第1の視差画像表示部から所定間隔離れた観察者に対して、前記観察者の左目方向に前記左目用領域からの光のみを透過させ、前記観察者の右目方向に前記右目用領域からの光のみを透過させるように操作可能な2層式視差バリアを備えることが好ましい。
 また、本発明は、立体視表示に用いられる右目用画像と左目用画像との情報量分布をそれぞれ算出し、正方の基準領域を格子状に配列することで構成される視差画像表示領域において、前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布とに基づいて、前記基準領域ごとに前記右目用画像を表示する右目用領域と前記左目用画像を表示する左目用領域との少なくとも一方を割り当て、前記右目用領域に前記右目用画像を、前記左目用領域に前記左目用画像をそれぞれ反映させることで視差画像を生成することを特徴とする視差画像生成方法を提供する。
 また、前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布と基づいて、前記基準領域ごとに前記基準領域における情報量を比較して、前記右目用画像と前記左目用画像とにおいて、いずれか一方の前記情報量が他方より大きい場合には、前記右目用領域及び前記左目用領域いずれか前記情報量の大きい方を前記基準領域に割り当て、前記情報量が略同じ場合には、前記右目用領域と前記左目用領域とを半分ずつを割り当てることが好ましい。
 また、前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布と基づいて、前記基準領域ごとに前記基準領域における情報量を比較して、前記右目用画像と前記左目用画像とにおいて、前記情報量の大きさに応じて前記右目用領域と前記左目用領域をとそれぞれ前記基準領域に割り当て、前記情報量が略同じ場合には、前記右目用領域と前記左目用領域とを半分ずつを前記基準領域に割り当てることが好ましい。
 また、前記基準領域において、前記右目用領域及び前記左目用領域の前記割り当てられた面積が小さければ小さい程その輝度を上げ、大きければ大きい程その輝度を下げることが好ましい。
 また、本発明は、上述の視差画像生成方法によって生成された視差画像が印刷されたことを特徴とする視差画像プリントを提供する。
 さらに、前記右目用領域と前記左目用領域とに偏光状態のそれぞれ異なる偏光フィルムを貼り付けたことが好ましい。
 さらに、前記視差画像プリントの前面に設置され、前記視差画像プリントから所定間隔離れた観察者に対して、前記視差画像に基づいて、前記観察者の左目方向に前記左目用領域からの光のみを透過させ、前記観察者の右目方向に前記右目用領域からの光のみを透過させる2層式視差バリアフィルムを設けたことが好ましい。
 また、本発明の第2の態様は、さらに、前記右目用画像を表示する右目用領域と前記左目用画像を表示する左目用領域とで構成される視差画像表示領域を有する第2の視差画像表示部を備え、前記視差画像生成部は、視差画像表示領域分類手段と、領域分割手段とを有し、前記視差画像表示領域分類手段は、前記情報量分布に基づいて前記視差画像表示領域を複数の部分表示領域に分類し、前記領域分割手段は、前記部分表示領域を前記分類ごとに大きさの異なる、互いに同形の右目用単位領域及び左目用単位領域からなる単位領域セットに分割し、前記視差画像生成部は、前記右目用単位領域によって構成される前記右目用領域に前記右目用画像を表示し、前記左目用単位領域によって構成される前記左目用領域に前記左目用画像をそれぞれ表示することで前記視差画像を生成することを特徴とする視差画像表示装置を提供する。
 また、前記情報量分布の情報量は、前記画像の細かさ(画素値の変化量)、画像の持つ高周波信号成分の量、画像の持つ最大周波数の値、輝度分布の分散値、前記右目用画像と前記左目用画像との画素値の差分量の少なくとも1つであることが好ましい。
 また、前記領域分割手段は、前記部分表示領域を、前記情報量が大きければ大きい程小さい単位領域セットで分割し、前記情報量が小さければ小さい程大きい単位領域セットで分割することが好ましい。
 また、前記単位領域セットは、ストライプ格子形状であることが好ましい。
 また、前記領域分割手段は、前記部分表示領域の形状に応じて前記部分表示領域の分割方向を決定することが好ましい。
 さらに、前記第2の視差画像表示部の前面に設置され、前記視差画像に基づいて、前記左目用領域の偏光状態と前記右目用領域の偏光状態とが異なるように操作可能な偏光フィルタを備えることが好ましい。
 さらに、前記第2の視差画像表示部の前面に設置され、前記視差画像に基づいて、前記第2の視差画像表示部から所定間隔離れた観察者に対して、前記観察者の左目方向に前記左目用領域からの光のみを透過させ、前記観察者の右目方向に前記右目用領域からの光のみを透過させるように操作可能な視差バリアを備えることが好ましい。
 また、本発明は、立体視可能な視差画像を生成するための右目用画像と左目用画像との情報量分布をそれぞれ算出し、前記情報量分布に基づいて、前記視差画像を表示する視差画像表示領域を複数の部分表示領域に分類し、それぞれの前記部分表示領域を、前記分類ごとに大きさの異なる、互いに同形の右目用単位領域及び左目用単位領域からなる単位領域セットに分割し、前記右目用単位領域及び前記左目用単位領域に前記右目用画像及び前記左目用画像をそれぞれ表示させることで視差画像を生成することを特徴とする視差画像生成方法を提供する。
 また、前記情報量分布の情報量は、前記画像の細かさ(画素値の変化量)、画像の持つ高周波信号成分の量、画像の持つ最大周波数の値、輝度分布の分散値、前記右目用画像と前記左目用画像との差分量の少なくとも1つであることが好ましい。
 また、前記部分表示領域は、前記情報量が大きければ大きい程小さい単位領域セットで分割され、前記情報量が小さければ小さい程前大きい単位領域セットで分割されることが好ましい。
 前記単位領域セットは、ストライプ格子形状であることが好ましい。
 前記部分表示領域の形状に応じて前記部分表示領域の分割方向を決定することが好ましい。
 また、本発明は、上述の視差画像生成方法によって生成された視差画像が印刷されたことを特徴とする視差画像プリントを提供する。
 さらに、前記右目用領域と前記左目用領域とに偏光状態のそれぞれ異なる偏光フィルムを貼り付けたことが好ましい。
 さらに、前記視差画像プリントの前面に設置され、前記視差画像プリントから所定間隔離れた観察者に対して、前記視差画像に基づいて、前記観察者の左目方向に前記左目用領域からの光のみを透過させ、前記観察者の右目方向に前記右目用領域からの光のみを透過させる視差バリアフィルムを設けたことが好ましい。
 本発明の第1の態様によれば、右目用画像と左目用画像との伝達情報量を最大とした高品質な視差画像を生成・表示する視差画像表示装置、視差画像生成方法、及び視差画像プリントを提供することができる。
 また、本発明の第2の態様によれば、クロストークによる画質の劣化を感じることの少ない高品質な視差画像を提供することができ、また、本視差画像は、電気的な駆動が不要であるため、印刷や写真プリントのような視差画像表示手段にも適用することができる。
本発明第1の態様に係る視差画像表示装置の一実施例を示す外観図である。 図1の視差画像表示装置の一実施例の詳細構成を示すブロック図である。 (A)は、右目用画像及び左目用画像の一例であり、(B)は、(A)に示す点線位置を横軸とし、右目用画像及び左目用画像の情報量を縦軸とした場合のグラフである。 図3に示す右目用画像及び左目用画像からなる空間分割型視差画像表示の説明図である。 本発明の第1の態様に係る視差画像の生成方法の説明図である。 本発明の第1の態様に係る情報量分布の比較結果と視差画像表示の基準領域との対応関係の説明図である。 (A)及び(B)は、本発明の第1の態様に係る視差画像表示の基準領域の一例を示す詳細説明図である。 本発明の第1の態様に係る視差画像生成のフローを示すフローチャートである。 (A)~(C)は、一般的な視差画像の説明図である。 (A)は、従来の視差バリアの説明図であり、(B)は、左目用画像と右目用画像との表示面積に差を設けるためにその厚み及び形状を変えた視差バリアの説明図であり、(C)は、本発明に係る2層式視差バリアの説明図である。 図1に示す視差画像表示装置において、視差バリア方式を用いた場合の第1の視差画像表示部の一実施例を示す外観図である。 図4に示す右目用画像及び左目用画像からなる空間分割型視差画像表示において、ストライプの方向を縦方向とした場合の説明図である。 基準領域を縦方向に分割する場合の情報量分布の比較結果と基準領域との対応関係の説明図である。 (A)及び(B)は、図7に示す基準領域を縦方向に分割した場合の一例を示す詳細説明図である。 本発明の第2の態様に係る視差画像表示装置の一実施例を示す外観図である。 図15の視差画像表示装置の一実施例の詳細構成を示すブロック図である。 (A)及び(B)は、視差画像表示のための右目用画像及び左目用画像の一例である。 図17の右目用画像及び左目用画像から生成される視差画像の一例である。 図18の視差画像を部分表示領域に分類した場合の説明図である。 図19の部分表示領域を分類に応じて大きさの異なる単位領域セット(幅の異なる水平ストライプ格子)に分割した場合の説明図である。 本発明の第2の態様に係る視差画像生成のフローを示すフローチャートである。 視差バリア方式における本発明の視差画像表示装置の一実施例を示す外観図である。 視差バリア方式において、図19の部分表示領域を分類に応じて大きさの異なる単位領域セット(幅の異なる鉛直ストライプ格子)に分割した場合の説明図である。
 本発明に係る視差画像表示装置、視差画像生成方法、及び視差画像プリントを、添付の図面に示す好適実施例に基づいて以下に詳細に説明する。
第1の態様
<視差画像表示装置>
 図1は、本発明の第1の態様の視差画像表示装置の構成を表す一実施形態の外観図である。図1に示すとおり、本発明の視差画像表示装置10は、第1の視差画像表示部12と、偏光メガネ14と、操作入力部16と、コンソール20と、画像サーバ32とを備える。
 図1に示すように、空間分割型の視差画像を表示する第1の視差画像表示部12は、正方の基準領域18Uによって構成される視差画像表示領域18を有する。また、基準領域18Uは、右目用画像を表示する右目用単位領域18UR及び左目用画像を表示する左目用単位領域18ULの少なくとも一方を有する。
 よって、第1の視差画像表示部12は、右目用単位領域18URによって構成される右目用領域(右目用画像表示領域)18Rと左目用単位領域18ULによって構成される左目用領域(左目用画像表示領域)18Lとからなる視差画像表示領域18、つまり、基準領域18Uによって構成される、視差画像表示領域18を有する。
 また、第1の視差画像表示部12は、任意の領域の偏光状態を操作可能な偏光フィルタ48を備え、第1の視差画像表示部12の視差画像表示領域18において、右目用画像が表示されている部分(右目用領域18R)と左目用画像が表示されている部分(左目用領域18L)との偏光状態が異なるように、偏光フィルタ48を操作する。
 前述の偏光フィルタ48の具体例としては、視差画像表示用の液晶ディスプレイとは別の、視差画像の偏光状態を独立して操作する液晶パネルなどが考えられる。
 液晶パネルを利用した偏光フィルタは、視差画像を表示する液晶ディスプレイの前面に設置され、視差画像の情報を用いて、視差画像の左目用領域18Lと右目用領域18Rとの偏光状態をそれぞれ操作することができる。
 観察者は、第1の視差画像表示部12に表示された視差画像を、偏光メガネ14を用いて見ることで、左目では、偏光レンズ14Lを通して左目用画像のみを認識し、右目では、偏光レンズ14Rを通して右目用画像のみを認識する。
 これにより、観察者の脳は、左目によって認識した左目用画像と、右目によって認識した右目用画像とに基づいて立体視を行うことが可能となる。
 操作入力部16は、コンソール20の後述する制御部26に各種指示を出す。例えば、画像サーバ32からの右目用画像及び左目用画像の取得の指示、第1の視差画像表示部12における立体視表示及び平面表示の切替、生成した視差画像の画像サーバ32への保存などの指示が挙げられる。
<コンソール>
 また、図2は、本発明の視差画像表示装置の詳細構成を示すブロック図であり、特にコンソール20の詳細構成を示す。
 図2に示すとおり、前述のコンソール20は、画像取得部22と、視差画像生成部24と、制御部26と、表示制御部28と、偏光フィルタ制御部30と、記憶部34と、情報量分布算出部36と、を備え、前述の視差画像生成部24は、情報量比較手段37と、基準領域割当手段38と、輝度値調整手段40と、画像反映手段46とを有する。
 なお、コンソール20は、具体的には、CPU(中央処理装置)、RAM(主記憶装置)、ハードディスク等で構成されるコンピュータによって構成され、実際には、上述のCPU(中央処理装置)、RAM(主記憶装置)、ハードディスク等が連動して、コンソール20内の上述の各部及び各手段を構成する。
 画像取得部22は、指示入力部16からの指示により、制御部26を通じて制御され、画像サーバ32に保存された立体視可能な右目用画像と左目用画像とを取得する。
 情報量分布算出部36は、画像取得部22が取得した右目用画像と左目用画像とにおいて、それぞれの画像の情報量分布を算出し、算出された右目用画像の情報量分布と左目用画像の情報量分布を視差画像生成部24へ出力する。
 ここで情報量とは、例えば、(1)画像の持つ高調波信号成分の量、(2)画像の最大周波数の値、(3)局所領域内での画像の輝度分布の分散値、(4)左右の原画像の画素値の差分量などが挙げられる。
 視差画像生成部24は、前述のとおり、右目用領域18R及び左目用領域18Lに右目用画像及び左目用画像を反映させて、前述の視差画像を生成する。
 まず、視差画像生成部24は、情報量比較手段37によって、視差画像表示領域18を構成する基準領域18Uごとに、対応する右目用画像の情報量と左目用画像の情報量とを比較する。
 基準領域18Uは、例えば、4×4の16画素から構成されてもよく、6×6の36画素から構成されてもよい。また、基準領域の大きさは、表示画像の大きさ(ピクセル数)や、視差画像表示領域18を有する(視差画像表示領域18と1対1に対応する)第1の視差画像表示部12の大きさ(解像度)に応じて変更されてもよい。
 視差画像表示領域18を構成する正方の基準領域18Uにおいて、情報量分布算出部36において算出された右目用画像の情報量分布と左目用画像の情報量分布とに基づいて、基準領域18Uにおける情報量の大小を比較する。
 基準領域割当手段38は、情報量の大小に基づいて、基準領域18に右目用単位領域18URと左目用単位領域18ULとを割り当てる。
 割り当ては、例えば、情報量の大きい右目用単位領域18UR及び左目用単位領域18ULのいずれか一方を割り当ててもよく、情報量が同じぐらいの場合は、右目用単位領域18UR及び左目用単位領域18ULの両方を半分ずつ割り当ててもよい。また、情報量の大小に応じて右目用単位領域18UR及び左目用単位領域18ULの領域面積を変えて割り当ててもよい。
 例えば、基準領域18Uが4×4の16ピクセルである場合、情報量の大小に応じて、右目用単位領域18UR4×3の12ピクセル、左目用領域18UR4×1の4ピクセルとして割り当ててもよい。
 上述のように、基準領域18Uにおいて、右目用単位領域18URと左目用単位領域18ULとの領域面積が異なる場合、領域面積に応じて輝度値を調整してもよい。
 領域面積が小さくなればなるほど、輝度値を変えないと、その領域は暗く見えるため、輝度値を上げる必要がある。また、逆の理由で、領域面積が大きくなればなるほど、輝度値を下げる必要がある。
 画像反映手段46は、基準領域18Uごとに、右目用単位領域18URに右目用画像が表示され、左目用単位領域18ULに左目用画像が表示されるように、右目用画像と左目用画像とを反映させることで視差画像を生成する。
 制御部26は、指示入力部16からの指示を受け、視差画像表示装置10の各部の動作を制御する。上述のように、画像取得部22に左目用画像及び右目用画像を取得させ、視差画像生成部24に視差画像を生成させ、後述する表示制御部28を通じて、第1の視差画像表示部12に視差画像を表示させ、後述する偏光フィルタ制御部30に視差画像に合わせて図示しない第1の視差画像表示部12上に設置された偏光フィルタ48の偏光状態を制御する。また、後述する記憶部34に生成した視差画像を記憶させ、また、記憶部34を通じて、画像サーバに生成した視差画像を保存してもよい。
 表示制御部28は、上述のとおり第1の視差画像表示部12において視差画像を表示する他、指示入力部16からの指示により、第1の視差画像表示部12上で、左目用画像及び右目用画像を平面表示する。
 偏光フィルタ制御部30は、視差画像生成部24からの視差画像の情報に基づいて、左目用領域18Lと右目用領域18Rとにそれぞれ異なる偏光状態のフィルタが掛かるにように、偏光フィルタ48を制御する。
 記憶部34は、視差画像生成部24によって生成された視差画像を左目用画像及び右目用画像と共に一時的に記憶し、指示入力部16からの指示により、これら画像の画像データを画像サーバ32に保存する。
 コンソール20は、上述のとおり立体視可能な左目用画像と右目用画像とに基づいて視差画像を生成する。生成された視差画像は、左目用領域18Lと右目用領域18Rとからなる視差画像表示領域18を有する第1の視差画像表示部12において表示され、また、必要に応じて画像サーバ32に記憶される。
 また、画像サーバ32は、立体視可能な左目用画像及び右目用画像を画像データとして記憶できるものであればよく、画像サーバに限らずその代わりとして、左目用画像及び右目用画像の画像データが記憶された各種記録媒体及び記録媒体読み取り手段を用いることができる。
 以上が、本発明の第1の態様に係る視差画像表示装置10の構成の説明である。
 次に本発明の第1の態様に係る視差画像表示装置10の動作について簡単に説明する。
 指示入力部16からの指示を受け、画像取得部22は、図3(A)に示すような、立体視可能な右目用画像Rと左目用画像Lとを取得する。取得された右目用画像Rと左目用画像Lとは、情報量分布算出部36へ出力され、右目用画像Rの情報量分布と左目用画像Lの情報量分布とが算出される。情報量としては、例えば、上述の(1)画像の持つ高調波信号成分の量が用いられる。
 情報量分布算出部36で算出された、右目用画像Rの情報量分布と左目用画像Lの情報量分布とは、視差画像生成部24の情報量比較手段37において、図4に示すように、対応する基準領域18Uごとにその情報量が比較され、比較結果が出力される。
 比較結果としては、対応する基準領域18Uにおいて、右目用画像Rの情報量と左目用画像Lの情報量とどちらが大きいか、また、どの程度大きいか等が出力される。
 基準領域割当手段38は、上述の比較結果に基づいて、上述の図5に示すように、基準領域18Uに右目用単位領域18URと左目用単位領域18ULと割り当てる。
 右目用単位領域18UR及び左目用単位領域18ULの割り当ては、図6(a)のように、右目用単位領域18UR及び左目用単位領域18ULのどちらか一方を割り当ててもよく、また、情報量が同じぐらいである場合には、半分ずつ割り当ててもよい。
 また、図6(b)のように情報量に応じて右目用単位領域18UR及び左目用単位領域18ULの領域面積を変えて割り当ててもよい。
 また、図6(c)に示すように、輝度値調整手段40を用いて、割り当てられた領域面積に応じて、輝度値を調整してもよい。領域面積が小さければ、輝度値を大きく(明るく)し、領域面積が大きければ、輝度値を小さく(暗く)する。
 画像反映手段46において、右目用単位領域18URに、右目用画像Rを反映させ、左目用単位領域18ULに、左目用画像Lを反映させて、視差画像を生成する。
 上述のとおり、視差画像生成部24で生成された視差画像は、表示制御部28を通して、第1の視差画像表示部12に表示され、また、記憶部34に一時記憶され、指示入力部16からの指示により、画像サーバ32に記憶されてもよい。
 また、偏光フィルタ制御部30は、右目用単位領域18UR及び左目用領域18ULが基準領域ごとに割り当てられ、輝度値を調整された視差画像表示領域18の情報を得て、偏光フィルタ48を制御する。
 偏光フィルタ48は、視差画像表示領域18の右目用領域18Rと左目用領域18Lとにおいて、それぞれ偏光状態が異なるように制御され、右目用領域18Rに対応するフィルタ部分と左目用領域18Lに対応するフィルタ部分とからそれぞれ偏光状態の異なる光を透過させる。
 こうして、観察者は、本発明の視差画像表示装置10により、偏光メガネ14を通して第1の視差画像表示部12に表示された視差画像を観察することで、立体視を行うことができる。
 以上が、本発明の第1の態様に係る視差画像表示装置10の動作である。
<視差画像生成方法>
 次に、本発明の第1の態様に係る視差画像生成方法について説明する。本発明の視差画像表示装置10は、視差画像生成部24において、本発明の視差画像生成方法を用いて視差画像を生成し、第1の視差画像表示部12に視差画像を表示する。
 図3(A)に示すように、立体視可能なように、視点をずらして撮影された右目用画像Rと左目用画像Lとにおいて、右目用画像Rと左目用画像Lとの点線部分の画素値(情報量)を測定したグラフを、図3(B)に示す。
 図3(A)及び(B)より、右目用画像Rと左目用画像Lとで表される円形の点線上のエッジ部分は、R1及びR2と、L1及びL2と、であることがわかる。
 本発明の第1の態様に係る視差画像生成方法では、なるべく右目用画像と左目用画像との画像情報を損なわないように視差画像を生成するため、図3(A)の右目用画像Rと左目用画像Lとの点線部分で視差画像を考えた場合、それらのエッジ部分、つまり、図3(B)のR1、R2、及び、L1、L2の部分について、右目用画像Rと左目用画像Lとが、それぞれ強調されていればよい。
 つまり、図4に示すように、右目用画像Rのエッジ部分R1、R2を表示する領域においては、右目用画像Rの情報が優先され、基準領域18Uにおいて、右目用画像Rが優先的に表示されることが好ましい。また、視差画像において、左目用画像Lのエッジ部分L1、L2を表示する領域においては、左目用画像Lの情報が優先され、基準領域18Uにおいて、左目用画像Lが優先的に表示されることが好ましい。
 より具体的には、情報量分布算出手段36により、右目用画像Rと左目用画像Lと画像の情報量分布を算出し、図5に示すように、算出された情報量分布から、右目用画像Rと左目用画像Lとの同一領域(同一基準領域18U)における情報量を算出し、情報量比較手段37により比較することで、視差画像において、情報量が多い方の画像を優先的に表示させる。
 ここで情報量とは、例えば、上述のとおり、(1)画像の持つ高調波信号成分の量、(2)画像の最大周波数の値、(3)局所領域内での画像の輝度分布の分散値、(4)左右の原画像の画素値の差分量などが挙げられる。
 また、情報量の比較結果の使い方としては、例えば、図6(a)に示すように、同一基準領域18Uにおいて、右目用画像Rと左目用画像Lとを比較してより情報量が多い方を採用し、右目用画像R及び左目用画像Lのいずれか一方を基準領域18Uにおける視差画像として表示してもよく、また、略同一であれば、基準領域18Uにおいて、両画像を同一面積だけ並べて表示してもよい。
 また、図6(a)のように単純に表示すると、所定の領域において、片方の画像情報が全く表示されず、都合が悪い場合も考えられる。
 そこで、情報量の比較結果の使い方として、図6(b)のように、基準領域18Uにおいて、基準領域割当手段38により、情報量の大きい方の画像の割り当て面積を大きくし、情報量の小さい方の画像の割り当て面積を小さくしてもよい。例えば、右目用画像Rと左目用画像Lとで、右目用画像Rの情報量が大きければ、その分だけ左目用画像Lの割り当て面積を大きくするなどである。
 図6(b)の場合、図6(a)のように視差画像に全く画像情報が反映されないという場合は無くなるが、片方の画像の割り当て面積が小さくなるため、偏光メガネを通して片方の画像を見た場合、画像が暗く表示される部分ができてしまう。
 よって、たとえ割り当て面積が小さくなったとしても、そのために画像が暗くなるようなことの無いように視差画像を調整する必要がある。
 そこで、情報量の比較結果の使い方として、図6(c)に示すとおり、情報量の比較結果からから、視差画像の基準領域18Uにおいて、輝度値調整手段40により、割り当て面積が小さくなった場合には、その分明るさ(輝度値)を上げ、割り当て面積が大きくなった場合には、明るさを下げればよい。
 情報量の比較結果を使って、図6(c)に示すとおり基準領域18Uに対して右目用画像Rと左目用画像Lとを割り当てることで、右目用画像及び左目用画像の基準領域18Uごとの光量(基準領域18Uにおける右目用単位領域18URと左目用単位領域18ULの光量)を揃えることができ、なおかつ右目用画像R及び左目用画像L全体で見た場合にもそれらの光量を一定に揃えることができる。
 よって、基準領域18Uにおいて割り当て面積と明るさとを関連づけて視差画像を生成することで、局所的にも、また全体的にも、右目用画像Rと左目用画像Lとのどちらか一方が必要以上に暗くなったりすることがなく、バランスのとれた立体視表示を行うことができる。
<基準領域の具体例>
 情報量の比較結果の使い方として、図6(c)の方法を用いた場合、図5のAに示す基準領域18Uは、情報量比較手段37により右目用画像Rと左目用画像Lとの情報量の比較した場合、基準領域18Uに円形の図形のエッジ部分が入る右目用画像Rが優先される。
 よって、図6(c)のR>Lの場合に該当し、例えば、図7(A)に示すように、基準領域18Uが4×4の16マスの場合、基準領域割当手段38により情報量の大きい右目用画像Rを表示するために、右目用単位領域18URが12マス割り当てられ、情報量の小さい左目用画像Lを表示するために、左目用単位領域18ULが4マス割り当てられる。
 そして、右目用単位領域18URには、輝度値調整手段40により右目用画像Rである円形の図形のエッジ部分が若干輝度値を下げて表示され、左目用単位領域18ULには、左目用画像Lが輝度値を上げて表示される。
 また、図6(c)の方法を用いた場合、図5のBに示す基準領域18Uは、右目用画像Rと左目用画像Lとの情報量の比較した場合、両画像とも何も表示されていないため、右目用画像Rと左目用画像Lとが均等に割り当てられる。
 よって、図6(c)のR≒Lの場合に該当し、例えば、図7(B)に示すように、基準領域18Uが4×4の16マスの場合、右目用画像Rと左目用画像Lとにおいて情報量が略等しいため、右目用単位領域18URに8マス、左目用単位領域18ULに8マス、均等に割り当てられる。
 そして、画像反映手段46により、右目用単位領域18URには右目用画像Rが、左目用単位領域18ULには左目用画像Lが、それぞれそのまま反映され、視差画像が生成される。生成された視差画像は、第1の視差画像表示部12に表示される。
<視差画像生成のフロー>
 次に、視差画像生成部24における視差画像生成の方法について、図8のフローチャートに基づいて簡単に説明する。
 視差画像表示装置10は、視差画像生成部24を通じて立体視表示のために撮影された右目用画像Rと左目用画像Lとを図示しない画像サーバ等から取得する(ステップS1)。
 視差画像生成部24は、右目用画像R及び左目用画像Lのそれぞれにおいて、情報量分布の算出を行う(ステップS3)。
 例えば、(1)画像の持つ高調波信号成分の量、(2)画像の最大周波数の値、(3)局所領域内での画像の輝度分布の分散値、(4)左右の原画像の画素値の差分量などの少なくとも1つを情報量として、情報量分布を算出する。
 また、視差画像生成部24は、例えば、視差画像表示領域を正方の局所領域に分割し、それら局所領域内で(1)~(4)のいずれかの情報量について比較を行う。
 そして、図6(c)に示すように、比較結果に基づいて、右目用画像Rと左目用画像Lとの基準領域18Uの表示割合を決定する(ステップS5)。
 例えば、図7(A)に示すように、4×4の16画素からなる局所領域の場合であって、右目用画像Rの情報量が多い場合には、例えば、局所領域の上から3/4において右目用画像Rを表示し、下から1/4において左目用画像Lを表示してもよい。この場合、下から1/4の左目用画像Lは輝度値を上げて表示され、上から3/4の右目用画像Rは輝度値を下げて表示される。
 視差画像表示領域18上の全ての基準領域18Uに対して、情報量の比較がなされ、視差画像が生成される(ステップS7)。表示される空間分割型の視差画像は、右目用画像及び左目用画像のそれぞれの情報量を最大限保った視差画像といえる。
 視差画像生成部24において、生成された視差画像は、視差画像表示領域18を有する(視差画像表示領域18と表示画面が1対1に対応する)第1の視差画像表示部12において表示される(ステップS9)。
 なお、これら視差画像は第1の視差画像表示部12において、表示されるだけでなく、プリンタ等の出力装置によって出力されてもよい。本発明は空間分割型の立体視表示であり、電気的駆動を必要としないからである。
<視差画像プリント>
 上述のとおり、視差画像生成方法で生成された視差画像は、前述の視差画像表示装置10の第1の視差画像表示部12で表示するだけでなく、図示しないプリンタ等によって紙面に印刷することで、視差画像プリントとすることもできる。
 この場合、視差画像を視差画像プリントとして紙面に印刷した後、更に、視差画像の左目用領域18Lと右目用領域18Rとに対応する偏光フィルムを視差画像上に貼り付ける。
 この場合、視差画像を視差画像プリントとして紙面に印刷した後、更に、視差画像の左目用領域18Lと右目用領域18Rとに対応する偏光フィルムを視差画像上に貼り付ける。
 偏光フィルムとしては、例えば、特開2009-193014号公報に記載の楕円偏光板を用いることができる。
 上述の楕円偏光板は、偏光パターンを任意に変更して製造することができるため、偏光パターンが左目用領域18L及び右目用領域18Rに対応する上述の楕円偏光板を製造し、偏光フィルムとして視差画像上に張り付ければよい。
 観察者は、偏光メガネ14を用いて、上述の偏光フィルムが貼り付けられた視差画像プリントを見ることで、右目では、偏光レンズ14Rを通して右目用画像のみを認識し、左目では、偏光レンズ14Lを通して左目用画像のみを認識するため、前述と同様、これらに基づいて立体視を行うことが可能となる。
 なお、上述のとおり、偏光を用いて視差画像を観察する場合には、視差画像のストライプ状格子の分割方向を図1、図4、図6及び図7に示す横(水平)方向のみならず、縦(鉛直)方向及び斜め方向等、いずれの方向としても、観察者の左目によって左目用画像が認識され、観察者右目によって右目用画像が認識されるため、観察者は立体視表示をすることができる。
 <視差バリア(パララックスバリア)方式>
 また、本発明の第1の態様に係る視差画像表示装置10において、第1の視差画像表示部12は、偏光フィルタ48の代わりに後述する2層式視差バリア49を備えても良い。なお、この場合、視差画像は、図9(B)に示す鉛直方向(観察者の目の並ぶに対して垂直な方向)にストライプ格子状に分割された視差画像に限られ、コンソール20は、偏光フィルタ制御部30の代わりに、視差画像生成部24によって生成された視差画像(視差画像表示領域18)に合わせて2層式視差バリア49を制御する視差バリア制御部31を備える。
 また、偏光メガネ14は不要となり、裸眼で立体視を行うことができる。
 視差バリアとしては、画素単位で任意の領域における光の透過の有無を電気的に切り替えることができるスイッチ液晶等が考えられ、2層式視差バリア49も、スイッチ液晶を2層重ねることで構成される。
 また、視差バリア制御部31は、2層のスイッチ液晶をそれぞれ電気的に制御することで、2層式視差バリア49を制御する。
 従来の視差バリア50は、第1の視差画像表示部12の前面に一定間隔距離を開けて配置されることで、図10(A)に示すように、右目によって右目用画像が観察され、左目によって左目用画像が観察されるため、観察者は右目用画像と左目用画像とによって立体視をすることが可能となる。
 この場合、図10(A)に示すとおり、右目用画像の表示面積(情報量)と左目用画像の表示面積とは略同じとなる。
 また、観察される右目用画像の表示面積と左目用画像の表示面積とに差を設ける場合、所定領域ごとに視差画像の空間分割の間隔を変更する場合、観察される右目用領域18Rの形状と左目用領域18Lの形状とを異ならせる場合などは、視差バリアの厚みや形状を図10(B)に示すとおり変更する必要がある。
 本発明に係る2層式視差バリア49は、図10(C)に示すとおり、図10(A)に示す従来型の視差バリア50を2層組み合わせることで、図10(B)に示す厚みや形状が複雑な視差バリアと同様の効果を奏することができ、また、視差画像(視差画像表示領域18)に応じて任意の形状の視差バリアを形成することができる。
 図10(C)に示すとおり、2層式視差バリア49は、第1層49Aと第2層49Bとからなる。例えば、右目用画像の一部R1~R5(右目用単位領域18UR)からの光を、第1層49Aと第2層49Bとによって、制限することで、本発明の基準領域18Uにおける右目用単位領域18URと左目用単位領域18ULとの表示面積(観察者によって観察される面積)を任意に変更することができる。
 図11に示すように、本発明の視差画像表示装置10は、第1の視差画像表示部12の前面に、上述の2層式視差バリア49を備え、視差画像生成部24によって鉛直方向にストライプ格子状に分割された視差画像が生成されると、第1の視差画像表示部12から所定間隔離れた観察者に対して、観察者の右目によって視差画像の右目用画像が観察され、観察者の左目によって視差画像の左目用画像が観察されるように、2層式視差バリア49が操作される。
 よって、観察者は、右目によって右目用画像を認識し、左目によって左目用画像を認識することで、左目用画像と右目用画像とに基づいて、裸眼立体視を行うことが可能となる。
 なお、視差バリア方式の立体視表示装置においては、上述のとおり視差画像は鉛直方向のストライプ格子に限られるため、上述の図4に示す水平方向のストライプ格子に分割された視差画像ではなく、図12のように鉛直方向のストライプ格子に分割された視差画像が生成される。なお、視差画像は、情報量の比較によって、基準領域は図6に対応して図13のように分類され、具体的には図7(A)及び(B)に対応して図14(A)及び(B)のように表示される。
 なお、図14(A)の基準領域18Uにおける右目用単位領域18URと左目用単位領域18ULとの表示面積の差は、上述の2層式視差バリア49によってつくられる。
 また、前述の視差画像プリントにおいても、偏光フィルムの代わりに、2層式視差バリアフィルムを用いることができる。前述の2層式視差バリアと同様、2層式視差バリアフィルムは、視差バリアフィルムを2層重ねることで構成される。この場合も、前述と同様、偏光メガネ14は不要となり、裸眼で立体視を行うことができる。
 なお、視差バリアフィルムとしては、例えば、電気的駆動を必要とせず、光を通さない光不透過性のフィルムと光を通す光透過性フィルムとの組合せが考えられる。
 視差画像プリントの前面に、視差画像に応じて構成された2層式視差バリアフィルムを設置する(貼り付ける)ことで(つまり、視差画像に応じて構成された2枚の視差バリアフィルムを所定間隔で設置することで)、視差画像プリントから所定間隔離れた観察者に対して、観察者の右目によって右目用画像が観察され、観察者の左目によって左目用画像が観察されるため、観察者は、これら右目用画像と左目用画像とに基づいて裸眼立体視を行うことができる。
第2の態様
 図15は、本発明の第2の態様に係る視差画像表示装置の構成を表す一実施形態の外観図である。図15に示すとおり、本発明の視差画像表示装置110は、第2の視差画像表示部112と、偏光メガネ14と、操作入力部16と、コンソール120と、画像サーバ32とを備える。なお、上述の偏光メガネ14、操作入力部16、および画像サーバ32は、第1の態様と同様の構成であるため説明を省略する。
 図15に示すように、空間分割型の視差画像を表示する第2の視差画像表示部112は、右目用画像を表示する右目用領域(右目用画像表示領域)118R及び左目用画像を表示する左目用領域(左目用画像表示領域)118Lとからなる。
 右目用領域118Rは、右目用単位領域118URによって構成され、また、左目用領域118Lは、左目用単位領域118ULによって構成される。また、一対の右目用単位領域118UR及び左目用単位領域118ULは、単位領域セット118Uを構成する。
 単位領域セット118Uとしては、例えば、図15に示すとおり、ストライプ格子の形状が考えられる。もちろん、千鳥格子や、正方格子などの種々の形状が用いられてもよい。
 また、第2の視差画像表示部112は、第1の態様と同様に任意の領域の偏光状態を操作可能な偏光フィルタ48を備え、視差画像において、第1の態様と同様に、右目用画像が表示されている部分(右目用領域118R)と左目用画像が表示されている部分(左目用領域118L)との偏光状態が異なるように、偏光フィルタ48が操作される。
<コンソール>
 また、図16は、本発明の第2の態様に係る視差画像表示装置の詳細構成を示すブロック図であり、特にコンソール120の詳細構成を示す。
 図16に示すとおり、前述のコンソール120は、画像取得部22と、視差画像生成部124と、制御部26と、表示制御部28と、偏光フィルタ制御部30と、記憶部34と、情報量分布算出部136と、を備え、前述の視差画像生成部124は、視差画像表示領域分類手段142と、領域分割手段144と、画像反映手段46とを有する。なお、上述の画像取得部22、制御部26、表示制御部28、偏光フィルタ制御部30、記憶部34、および画像反映手段46は、第1の態様と同様の構成であるため説明を省略する。
 なお、コンソール120は、第1の態様と同様に、具体的には、CPU(中央処理装置)、RAM(主記憶装置)、ハードディスク等で構成されるコンピュータによって構成され、実際には、上述のCPU(中央処理装置)、RAM(主記憶装置)、ハードディスク等が連動して、コンソール120内の上述の各部及び各手段を構成する。
 情報量分布算出部136は、画像取得部22が取得した右目用画像と左目用画像とにおいて、それぞれの画像の情報量分布を算出し、算出された右目用画像の情報量分布と左目用画像の情報量分布を視差画像生成部124へ出力する。
 ここで情報量とは、例えば、(1)画像の持つ高調波信号成分の量、(2)画像の最大周波数の値、(3)局所領域内での画像の輝度分布の分散値、(4)左右の原画像の画素値の差分量などが挙げられる。
 例えば、図17(A)の右目用画像と図17(B)の左目用画像とにおいて、情報量分布算出部136により情報量分布を算出する。情報量としては、例えば、上述の(1)画像の持つ高調波信号成分の量を基準に情報量分布を算出する。
 図17(A)及び(B)に示すように、右目用画像及び左目用画像は、例えば、(a)空、(b)雲、(c)山、(d)木などから構成される。
 視差画像生成部124は、前述のとおり、右目用領域118R及び左目用領域118Lに右目用画像及び左目用画像を反映させて、前述の視差画像を生成する。
 まず、視差画像生成部124は、前述の情報量分布算出部136で算出された右目用画像の情報量分布と左目用画像の情報量分布とに基づいて、視差画像表示領域分類手段142において、視差画像を複数の部分表示領域118Dに分類する。
 図18に示すように、視差画像は右目用画像と左目用画像とが重なって表示されたもの(互いに空間分割されて表示されたもの)であるため、右目用画像と左目用画像とで画像が大きく異なる部分と、略同様の部分とがある。
 特に、右目用画像と左目用画像とにおいて、(a)~(d)のエッジ部分の情報は、精度の高い立体視を行うために重要である。
 視差画像表示領域分類手段142は、上述のとおり、右目用画像の情報量分布と左目用画像の情報量分布とに基づいて、視差画像を複数の部分表示領域118Dに分類する。
 視差画像表示領域分類手段142は、例えば、図19に示すように、(a)~(d)のエッジ部分周辺を(N)、(b)雲及び(d)木の部分を(M)、(a)空及び(c)山を(W)の3つの部分表示領域118D(118DN、118DM、118DW)に分類する。
 なお、エッジ部分周辺とは、例えば、エッジを構成する画素から、一定画素分(例えば、半径10画素分)だけ離れた領域をいう。
 次に、領域分割手段144は、上述のとおり分類された(N)、(M)、(W)の部分表示領域118Dを、右目用単位領域118URと左目用単位領域118ULとからなる単位領域セット118Uに分割する。
 単位領域セット118Uの大きさは、上述の情報量分布算出部142が算出した視差画像の部分表示領域118Dごとの情報量、及び情報量差(右目用画像の情報量と左目用画像の情報量との差)によって異なる。
 例えば、図19の部分表示領域118DNのように、左目用画像及び右目用画像のエッジ部分の情報が載るような場合には、これら部分表示領域118DNをなるべく細かい単位領域セット118UNに分割する必要がある。
 また、図19に示す部分表示領域118DWは、(a)空や、(c)山など、それ程大きな変化の無い画像部分であり、これら部分表示領域118DWは、大きな(粗い)単位領域セット118UWに分割してもよい。
 また、部分表示領域118DMの(b)雲や、(d)木などのように、部分表示領域118DMの画像自体がある程度細かい場合には、これらの中間の大きさの単位領域セット118UMに分割してもよい。
 領域分割手段144は、表示領域分類手段142によって図19のように分類した視差画像表示領域118を、部分表示領域118Dごとに大きさの異なる単位領域セット118Uに分割する。
 ここでは、図20に示すように、単位領域セット118Uを上述のストライプ格子の形状とし、幅の大きいものを単位領域セット118UW、幅の小さいものを単位領域セット118UN、その中間の大きさのものを単位領域セット118UMとしている。
 画像反映手段146は、単位領域セット118U(118UN、118UM、118UW)ごとに、右目用単位領域118URに右目用画像が表示され、左目用単位領域118ULに左目用画像が表示されるように、右目用画像と左目用画像とを反映させる。
 以上のように、視差画像生成部124は、右目用画像及び左目用画像に基づいて、視差画像を生成する。
 以上が、本発明の第2実施形態に係る視差画像表示装置110の構成の説明である。
 次に、本発明の第2実施形態に係る視差画像表示装置110の動作について簡単に説明する。
 指示入力部16からの指示を受け、画像取得部22は、図17(A)及び(B)に示すような、立体視可能な右目用画像と左目用画像とを取得する。取得された右目用画像と左目用画像とは、情報量分布算出部136へ出力され、右目用画像の情報量分布と左目用画像の情報量分布とが算出され、視差画像生成部124へ出力される。
 視差画像生成部124の視差画像表示領域分類手段142は、情報量分布算出部136で算出された右目用画像の情報量分布と左目用画像の情報量分布とに基づいて、例えば、視差画像表示領域を、図19に示すように(N)、(M)、(W)の3つの部分表示領域118Dに分類する。
 領域分割手段144は、上述のように分類された部分表示領域118Dを分類ごとに大きさの異なる単位領域セット118Uに分割する。
 例えば、図19に示すように、情報量が多いと考えられる部分表示領域118DNは、なるべく小さな単位領域セット118UNに分割され、情報量が少ないと考えられる部分表示領域118DWは、なるべく大きな単位領域セット118UWに分割され、その中間の部分表示領域118DMは、それらの中間の大きさの単位領域セット118UMに分割される。
 そして、画像反映手段146において、単位領域セット118U(118UN、118UM、118UW)の右目用単位領域118URに、右目用画像を反映させ、左目用単位領域118ULに、左目用画像を反映させて、視差画像を生成する。
 これ以降の動作は第1の態様と同様である。
 以上が、本発明の第2の態様に係る視差画像表示装置110の動作である。
<視差画像生成方法>
 次に、本発明の第2の態様に係る視差画像生成方法について説明する。本発明の視差画像表示装置110は、視差画像生成部124において、本発明の視差画像生成方法を用いて視差画像を生成し、第2の視差画像表示部112に視差画像を表示する。
 本発明の視差画像生成部124は、右目用画像と左目用画像とのそれぞれの情報量分布を算出する情報量分布算出部136を備える。
 ここで情報量とは、例えば、(1)画像の持つ高調波信号成分の量、(2)画像の最大周波数の値、(3)局所領域内での画像の輝度分布の分散値、(4)左右の原画像の画素値の差分量などが挙げられる。
<視差画像表示領域の分類>
 図17(A)及び(B)に示す右目用画像と左目用画像とにおいて、それぞれの画像の情報量分布を算出し、算出された情報量分布から、視差画像表示領域118を、複数の部分表示領域118Dに分類する。
 右目用画像及び左目用画像は、視点をずらして撮影された画像であるため、右目用画像及び左目用画像の情報量分布は、例えば、前述の情報量のうち、(1)画像の持つ高調波信号成分の量、つまり画像の細かさを基準とする。
 図17(A)及び(B)に示すように、右目用画像及び左目用画像は、例えば、(a)空、(b)雲、(c)山、(d)木などから構成される。
 図18に示すように、視差画像は右目用画像と左目用画像とが重なって表示されたもの(互いに空間分割されて表示されたもの)であり、(a)~(d)のエッジ部分の情報は、精度の高い立体視を行うために重要である。
 算出された左目用画像及び右目用画像の情報量分布から、視差画像表示領域118は、視差画像表示領域分類手段142により、例えば、図19に示すように、(N)、(M)、(W)の3つの部分表示領域118D(118DN、118DM、118DW)に分類される。
<部分表示領域の分割>
 本発明の視差画像生成部124は、領域分割手段144により、(N)、(M)、(W)の3つの異なる部分表示領域118Dを、分類ごとに大きさの異なる単位領域セット118Uによって分割する。
 なお、図19に示す3つの異なる部分表示領域118Dの情報量の大きさは、(N)>(M)>(W)の順であるとすると、部分表示領域118Dの分割の大きさ(つまり、粗さ)は、(N)<(M)<(W)の順となる。
 単位領域セット118Uを右目用単位領域118UR及び左目用単位領域118ULからなるストライプ格子とし、分類(N)、(M)、(W)において、そのストライプ幅が異なる(分類(N)は細かく、分類(M)は中間、分類(W)は粗く)とすると、部分表示領域118Dを領域分割手段で単位領域セット118Uに分割した視差表示領域118は、図20に示す表示となる。
 情報量が大きい視差画像のエッジ部分118DN、元の画像の情報量が大きい雲や木の部分118DM、情報量の小さい、空や山の部分118DWに対して、それぞれストライプ幅の異なる単位領域セット118Uが割りつけられる。
 単位領域セット118Uのストライプ幅は、例えば、情報量が小さい分類(つまり、ストライプ幅が大きい分類)Wのストライプ幅を16ピクセル、中間の分類Mのストライプ幅を8ピクセル、情報量が大きい分類(つまり、ストライプ幅が小さい分類)Nのストライプ幅を4ピクセルとしてもよい。また、もちろん、視差画像のピクセルサイズに応じてストライプ幅を変更してもよく、部分表示領域118Dの大きさや形状に応じて変更してもよい。
 また、本発明の領域分割手段144は、分類された部分表示領域118Dの形状ごとに、その分割方向、つまりストライプの方向を変更してもよい。
 例えば、部分表示領域118Dが横方向に長い場合には、領域分割手段144は、その部分表示領域118Dを縦方向のストライプ格子(単位領域セット118U)に分割してもよい。
 分割の方向、つまりストライプ格子のストライプ方向と、画像の空間周波数との間で干渉(モアレ)が発生するのを防止するためである。
 視差画像生成部124は、視差画像表示領域118において、右目用画像を右目用領域118Rに、左目用画像を左目用領域118Lに、それぞれ反映させることで視差画像を生成し、生成された視差画像は、視差画像表示領域118を有する(視差画像表領域118と1対1に対応する)第2の視差画像表示部112において表示される。
<視差画像生成のフロー>
 次に、視差画像生成部124における視差画像生成の方法について、図21のフローチャートに基づいて簡単に説明する。
 視差画像表示装置110は、視差画像生成部124を通じて立体視表示のために撮影された右目用画像と左目用画像とを図示しない画像サーバ等から取得する(ステップS101)。
 視差画像生成部124は、右目用画像及び左目用画像のそれぞれにおいて、情報量分布の算出を行う(ステップS103)。
 上述のとおり、例えば、(1)画像の持つ高調波信号成分の量、(2)画像の最大周波数の値、(3)局所領域内での画像の輝度分布の分散値、(4)左右の原画像の画素値の差分量などの少なくとも1つを情報量として、情報量分布を算出する。
 また、視差画像生成部124は、右目用画像の情報量分布と左目用画像の情報量分布とから、視差画像表示領域118を複数の部分表示領域118Dに分類する。
 視差画像表示領域118の分類は、視差画像生成部124の視差画像表示領域分類手段によって、例えば、右目用画像の情報量分布と左目用画像の情報量分布との差分量から、画像の変化や画像のエッジ情報等に基づいて行う(ステップS105)。
 視差画像表示領域118は、例えば、図19に示すように(N)、(M)、(W)の3つの部分表示領域118Dに分類される。エッジ周辺部分(N)、元の画像の情報量が大きい雲や木の部分(M)、情報量の小さい、空や山の部分(W)の3つの部分である。
 次に、視差画像生成部124は、領域分割手段によって、部分表示領域118Dをその分類に応じて大きさの異なる、単位領域セット118U(右目用単位領域118UR及び左目用単位領域118UL)に分割する(ステップS107)。
 例えば、右目用単位領域118UR及び左目用単位領域118ULがストライプ格子であるとすると、上述の部分表示領域118Dの分類(N)、(M)、(W)において、そのストライプ幅を小、中、大と分ける。
 視差画像表示領域118は、ストライプ格子である右目用単位領域118UR及び左目用単位領域118ULによって、図21に示すように表示される。
 また、部分表示領域118D(118DN、118DM、118DW)の形状に応じて、ストライプ格子の方向を、縦、横、斜め等、モアレが起きにくい方向に変更してもよい。
 視差画像生成部124において、視差画像表示領域118上の全ての右目用領域118R及び左目用領域118Lに対して、左目用画像及び右目用画像を反映させることで、視差画像が生成される(ステップS109)。表示される空間分割型の視差画像は、クロストークが生じにくく、かつ画像情報の伝達を損なうことのない視差画像である。
 視差画像生成部124において、生成された視差画像は、視差画像表示領域118と表示画面が1対1に対応する第2の視差画像表示部112において表示される(ステップS111)。
 なお、これら視差画像は第2の視差画像表示部112において、表示されるだけでなく、プリンタ等の出力装置によって出力されてもよい。本発明は空間分割型の立体視表示であり、電気的駆動を必要としないためである。
<視差画像プリント>
 上述のとおり、視差画像生成方法で生成された視差画像は、第1の態様と同様に、前述の視差画像表示装置110の第2の視差画像表示部112で表示するだけでなく、図示しないプリンタ等によって紙面に印刷することで、視差画像プリントとすることもできる。
 この場合、視差画像を視差画像プリントとして紙面に印刷した後、更に、視差画像の左目用領域118Lと右目用領域118Rとに対応する偏光フィルムを視差画像上に貼り付ける。
 なお、上述のとおり、偏光を用いて視差画像を観察する場合には、視差画像のストライプ状格子の分割方向を図15及び図20に示す横(水平)方向のみならず、縦(鉛直)方向及び斜め方向等、いずれの方向としても、観察者の左目によって左目用画像が認識され、観察者右目によって右目用画像が認識されるため、観察者は立体視表示をすることができる。
 <視差バリア(パララックスバリア)方式>
 また、本発明の第2の態様に係る視差画像表示装置110において、第2の視差画像表示部112は、偏光フィルタ48の代わりに後述する視差バリア50を備えても良い。なお、この場合、視差画像は、図9(B)に示す鉛直方向(観察者の目の並ぶ方向に対して垂直な方向)にストライプ格子状に分割された視差画像に限られ、コンソール120は、偏光フィルタ制御部30の代わりに、視差画像生成部124によって生成された視差画像(視差画像表示領域118)に合わせて視差バリアを制御する視差バリア制御部31を備える。
 また、偏光メガネ14は不要となり、裸眼で立体視を行うことができる。
 視差バリア50としては、画素単位で任意の領域における光の透過の有無を電気的に切り替えることができるスイッチ液晶等によって構成される。
 また、視差バリア制御部31は、スイッチ液晶をそれぞれ電気的に制御することで、視差バリア50を制御する。
 視差バリア50は、第2の視差画像表示部112の前面に一定間隔距離を空けて配置されることで、図10(A)に示すように、右目によって右目用画像が観察され、左目によって左目用画像が観察されるため、観察者は右目用画像と左目用画像とによって立体視をすることが可能となる。
 この場合、図10(A)に示すとおり、右目用画像の表示面積(情報量)と左目用画像の表示面積とは略同じとなる。
 図22に示すように、本発明の視差画像表示装置110は、第2の視差画像表示部112の前面に、上述の視差バリア50を備え、視差画像生成部124によって鉛直方向にストライプ格子状に分割された視差画像が生成されると、第2の視差画像表示部112から所定間隔離れた観察者に対して、観察者の右目によって視差画像の右目用画像が観察され、観察者の左目によって視差画像の左目用画像が観察されるように、視差バリア50が操作される。
 なお、視差バリア方式の立体視表示装置110においては、上述のとおり視差画像は鉛直方向のストライプ格子に限られるため、情報量の比較によって、図19のとおり分類された部分表示領域118Dは、図20に示す水平方向のストライプ格子ではなく、図23に示す鉛直方向のストライプ格子に分割され、視差画像が生成される。
 以上より、視差バリア50を通して上述のように生成された視差画像を観察することで、観察者は、右目によって右目用画像を認識し、左目によって左目用画像を認識することで、左目用画像と右目用画像とに基づいて、裸眼立体視を行うことが可能となる。
 また、前述の視差画像プリントにおいても、偏光フィルムの代わりに、視差バリアフィルムを用いることができる。この場合も、前述と同様、偏光メガネ14は不要となり、裸眼で立体視を行うことができる。
 なお、視差バリアフィルムとしては、例えば、電気的駆動を必要とせず、光を通さない光不透過性のフィルムと光を通す光透過性フィルムとの組合せが考えられる。
 視差画像プリントの前面に、視差画像に応じて構成された視差バリアフィルムを、一定間隔距離を空けて設置する(貼り付ける)ことで、視差画像プリントから所定間隔離れた観察者に対して、観察者の右目によって右目用画像が観察され、観察者の左目によって左目用画像が観察されるため、観察者は、これら右目用画像と左目用画像とに基づいて裸眼立体視を行うことができる。
 以上、本発明の視差画像表示装置、視差画像生成方法、及び視差画像プリントについて詳細に説明したが、本発明は、上記実施の態様に限定されるものではなく、本発明の要旨を逸脱しない範囲において、各種の改良や変更を行ってもよい。
 10、110 視差画像表示装置
 12 第1の視差画像表示部(視差画像表示手段)
 112 第2の視差画像表示部(視差画像表示手段)
 14 偏光メガネ
 16 操作入力部
 18、118 視差画像表示領域
 18R、118R 右目用領域(右目用画像表示領域)
 18L、118L 左目用領域(左目用画像表示領域)
 118D 部分表示領域
 18U 基準領域
 118U 単位領域セット
 18UR、118UR 右目用単位領域
 18UL、118UL 左目用単位領域
 20、120 コンソール
 22 画像取得部
 24、124 視差画像生成部
 26 制御部
 28 表示制御部
 30 偏光フィルタ制御部
 31、131 視差バリア制御部
 34 記憶部
 36、136 情報量分布算出部
 37 情報量比較手段
 38 基準領域割当手段
 40 輝度値調整手段
 142 視差画像表示領域分類手段
 144 領域分割手段
 46、146 画像反映手段
 48 偏光フィルタ
 49 2層式視差バリア
 50 視差バリア
 

Claims (20)

  1.  立体視可能な視差画像を生成するための右目用画像と左目用画像とを取得する画像取得部と、
     前記右目用画像の情報量分布と前記左目用画像の情報量分布とをそれぞれ算出する情報量分布算出部と、
     前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布とに基づいて、前記右目用画像と前記左目用画像とから前記視差画像を生成する視差画像生成部とを備えることを特徴とする視差画像表示装置。
  2.  さらに、前記右目用画像を表示する右目用領域と前記左目用画像を表示する左目用領域との少なくとも一方を備える正方の基準領域を格子状に配列することで構成される視差画像表示領域を有する第1の視差画像表示部を備え、
     前記視差画像生成部は、前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布とに基づいて、前記基準領域ごとに前記右目用領域と前記左目用領域との少なくとも一方を割り当て、前記右目用画像及び前記左目用画像を表示することで前記視差画像を生成することを特徴とする請求項1に記載の視差画像表示装置。
  3.  前記視差画像生成部は、情報量比較手段と、基準領域割当手段と、画像反映手段とを備え、
     前記情報量比較手段は、前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布と基づいて、前記基準領域ごとに前記基準領域に対応する前記右目用画像の情報量と前記左目用画像の情報量とを比較して比較結果を出力し、
     前記基準領域割当手段は、比較結果に基づいて、前記情報量の大きさに応じた面積の前記右目用領域と前記左目用領域とをそれぞれ前記基準領域に割り当て、
     前記画像反映手段は、前記右目用領域に前記右目用画像を、前記左目用領域に前記左目用画像をそれぞれ反映させることで前記視差画像を生成することを特徴とする請求項2に記載の視差画像表示装置。
  4.  前記視差画像生成部は、輝度調整手段を備え、
     前記輝度調整手段は、前記基準領域において、前記右目用領域及び前記左目用領域の前記割り当てられた面積が小さければ小さい程その輝度を上げ、大きければ大きい程その輝度を下げることを特徴とする請求項3に記載の視差画像表示装置。
  5.  前記基準領域における情報量とは、前記基準領域に対応する前記右目用画像及び前記左目用画像の持つ高調波信号成分の量、前記基準領域に対応する前記右目用画像及び前記左目用画像の最大周波数の値、前記基準領域に対応する前記右目用画像及び前記左目用画像の輝度分布の分散値、前記基準領域に対応する前記右目用画像及び前記左目用画像の画素値の差分量の少なくとも1つであることを特徴とする請求項2~4のいずれかに記載の視差画像表示装置。
  6.  前記基準領域は、少なくとも4画素で構成されることを特徴とする請求項2~5のいずれかに記載の視差画像表示装置。
  7.  さらに、前記第1の視差画像表示部の前面に設置され、前記視差画像に基づいて、前記左目用領域の偏光状態と前記右目用領域の偏光状態とが異なるように操作可能な偏光フィルタを備えることを特徴とする請求項2~6のいずれかに記載の視差画像表示装置。
  8.  さらに、前記第1の視差画像表示部の前面に設置され、前記第1の視差画像表示部から所定間隔離れた観察者に対して、前記視差画像に基づいて、前記観察者の左目方向に前記左目用領域からの光のみを透過させ、前記観察者の右目方向に前記右目用領域からの光のみを透過させるように操作可能な2層式視差バリアを備えることを特徴とする請求項2~6のいずれかに記載の視差画像表示装置。
  9.  立体視表示に用いられる右目用画像と左目用画像との情報量分布をそれぞれ算出し、
     正方の基準領域を格子状に配列することで構成される視差画像表示領域において、前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布とに基づいて、前記基準領域ごとに前記右目用画像を表示する右目用領域と前記左目用画像を表示する左目用領域との少なくとも一方を割り当て、前記右目用領域に前記右目用画像を、前記左目用領域に前記左目用画像をそれぞれ反映させることで視差画像を生成することを特徴とする視差画像生成方法。
  10.  前記右目用画像の前記情報量分布と前記左目用画像の前記情報量分布と基づいて、前記基準領域ごとに前記基準領域における情報量を比較して、
     前記右目用画像と前記左目用画像とにおいて、前記情報量の大きさに応じて前記右目用領域と前記左目用領域とをそれぞれ前記基準領域に割り当て、前記情報量が略同じ場合には、前記右目用領域と前記左目用領域とを半分ずつを前記基準領域に割り当てることを特徴とする請求項9に記載の視差画像生成方法。
  11.  前記基準領域において、前記右目用領域及び前記左目用領域の前記割り当てられた面積が小さければ小さい程その輝度を上げ、大きければ大きい程その輝度を下げることを特徴とする請求項10に記載の視差画像生成方法。
  12.  請求項9~11のいずれかに記載の視差画像生成方法によって生成された視差画像が印刷されたことを特徴とする視差画像プリント。
  13.  さらに、前記右目用領域と前記左目用領域とに偏光状態のそれぞれ異なる偏光フィルムを貼り付けたことを特徴とする請求項12に記載の視差画像プリント。
  14.  さらに、前記視差画像プリントの前面に設置され、前記視差画像プリントから所定間隔離れた観察者に対して、前記視差画像に基づいて、前記観察者の左目方向に前記左目用領域からの光のみを透過させ、前記観察者の右目方向に前記右目用領域からの光のみを透過させる2層式視差バリアフィルムを設けたことを特徴とする請求項12に記載の視差画像プリント。
  15.  さらに、前記右目用画像を表示する右目用領域と前記左目用画像を表示する左目用領域とで構成される視差画像表示領域を有する第2の視差画像表示部を備え、
     前記視差画像生成部は、視差画像表示領域分類手段と、領域分割手段とを有し、
     前記視差画像表示領域分類手段は、前記情報量分布に基づいて前記視差画像表示領域を複数の部分表示領域に分類し、
     前記領域分割手段は、前記部分表示領域を前記分類ごとに大きさの異なる、互いに同形の右目用単位領域及び左目用単位領域からなる単位領域セットに分割し、
     前記視差画像生成部は、前記右目用単位領域によって構成される前記右目用領域に前記右目用画像を表示し、前記左目用単位領域によって構成される前記左目用領域に前記左目用画像をそれぞれ表示することで前記視差画像を生成することを特徴とする請求項1に記載の視差画像表示装置。
  16.  前記情報量分布の情報量は、前記画像の細かさである画素値の変化量、画像の持つ高周波信号成分の量、画像の持つ最大周波数の値、輝度分布の分散値、前記右目用画像と前記左目用画像との画素値の差分量の少なくとも1つであることを特徴とする請求項15に記載の視差画像表示装置。
  17.  前記領域分割手段は、前記部分表示領域を、前記情報量が大きければ大きい程小さい単位領域セットで分割し、前記情報量が小さければ小さい程前大きい単位領域セットで分割することを特徴とする請求項15又は16に記載の視差画像表示装置。
  18.  前記単位領域セットは、ストライプ格子形状であることを特徴とする請求項15~17のいずれかに記載の視差画像表示装置。
  19.  前記領域分割手段は、前記部分表示領域の形状に応じて前記部分表示領域の分割方向を決定することを特徴とする請求項15~18のいずれかに記載の視差画像表示装置。
  20.  さらに、前記第2の視差画像表示部の前面に設置され、前記視差画像に基づいて、前記左目用領域の偏光状態と前記右目用領域の偏光状態とが異なるように操作可能な偏光フィルタを備えることを特徴とする請求項15~19のいずれかに記載の視差画像表示装置。
PCT/JP2012/062489 2011-05-16 2012-05-16 視差画像表示装置、視差画像生成方法、及び視差画像プリント WO2012157666A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201280023213.5A CN103535030B (zh) 2011-05-16 2012-05-16 视差图像显示装置、视差图像生成方法、视差图像打印
EP12786395.9A EP2712197B1 (en) 2011-05-16 2012-05-16 Parallax image display device, parallax image generation method, parallax image print
KR1020137030279A KR101592304B1 (ko) 2011-05-16 2012-05-16 시차 화상 표시 장치, 시차 화상 생성 방법, 및 시차 화상 프린트
US14/081,333 US10171799B2 (en) 2011-05-16 2013-11-15 Parallax image display device, parallax image generation method, parallax image print

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2011-109217 2011-05-16
JP2011109217A JP5753439B2 (ja) 2011-05-16 2011-05-16 視差画像表示装置、視差画像生成方法、及び視差画像プリント
JP2011-109452 2011-05-16
JP2011109452 2011-05-16

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US14/081,333 Continuation US10171799B2 (en) 2011-05-16 2013-11-15 Parallax image display device, parallax image generation method, parallax image print

Publications (1)

Publication Number Publication Date
WO2012157666A1 true WO2012157666A1 (ja) 2012-11-22

Family

ID=47176983

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/062489 WO2012157666A1 (ja) 2011-05-16 2012-05-16 視差画像表示装置、視差画像生成方法、及び視差画像プリント

Country Status (5)

Country Link
US (1) US10171799B2 (ja)
EP (1) EP2712197B1 (ja)
KR (1) KR101592304B1 (ja)
CN (1) CN103535030B (ja)
WO (1) WO2012157666A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2012172888A1 (ja) * 2011-06-16 2015-02-23 シャープ株式会社 画像生成装置、画像生成方法、画像生成プログラム、及び記録媒体

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180042880A (ko) * 2016-10-18 2018-04-27 삼성디스플레이 주식회사 표시 패널, 이를 포함하는 머리 부착형 표시 장치, 및 머리 부착형 표시 장치의 영상 표시 방법
CN108196376A (zh) * 2018-01-22 2018-06-22 成都工业学院 一种3d显示器
EP3765890A4 (en) * 2018-03-14 2022-01-12 Magic Leap, Inc. DISPLAY SYSTEMS AND CONTENT CROPPING METHODS TO INCREASE VIEWING COMFORT
US11619829B2 (en) * 2020-12-10 2023-04-04 Lumileds Llc Line pattern projections for three dimension display
KR20220152434A (ko) 2021-05-06 2022-11-16 삼성디스플레이 주식회사 표시 장치 및 이의 구동 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06194602A (ja) * 1992-12-24 1994-07-15 Nippon Telegr & Teleph Corp <Ntt> 両眼立体視装置
JPH07307959A (ja) 1994-05-12 1995-11-21 Nippon Hoso Kyokai <Nhk> 立体映像装置
JPH09265056A (ja) 1995-07-14 1997-10-07 Pioneer Electron Corp 立体画像表示装置
JPH10221643A (ja) 1997-01-31 1998-08-21 Canon Inc 立体画像表示装置
JP2005215326A (ja) 2004-01-29 2005-08-11 Arisawa Mfg Co Ltd 偏光透過スクリーン、及び当該偏光透過スクリーンを用いた立体画像表示装置
JP2009193014A (ja) 2008-02-18 2009-08-27 Fujifilm Corp パターニング楕円偏光板

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2309609A (en) * 1996-01-26 1997-07-30 Sharp Kk Observer tracking autostereoscopic directional display
JP3235776B2 (ja) 1996-08-07 2001-12-04 三洋電機株式会社 立体感調整方法および立体感調整装置
US6445833B1 (en) * 1996-07-18 2002-09-03 Sanyo Electric Co., Ltd Device and method for converting two-dimensional video into three-dimensional video
JP2005353047A (ja) * 2004-05-13 2005-12-22 Sanyo Electric Co Ltd 立体画像処理方法および立体画像処理装置
JP4652727B2 (ja) * 2004-06-14 2011-03-16 キヤノン株式会社 立体画像生成システムおよびその制御方法
JP2007065067A (ja) * 2005-08-29 2007-03-15 Seijiro Tomita 立体映像表示装置
JP4476905B2 (ja) * 2005-08-31 2010-06-09 株式会社東芝 立体表示画像データの構造、立体表示画像データの記録方法、表示再生方法、記録プログラム、および表示再生プログラム
US8487982B2 (en) 2007-06-07 2013-07-16 Reald Inc. Stereoplexing for film and video applications
US8749615B2 (en) * 2007-06-07 2014-06-10 Reald Inc. Demultiplexing for stereoplexed film and video applications
JP5127633B2 (ja) * 2008-08-25 2013-01-23 三菱電機株式会社 コンテンツ再生装置および方法
US8854531B2 (en) * 2009-12-31 2014-10-07 Broadcom Corporation Multiple remote controllers that each simultaneously controls a different visual presentation of a 2D/3D display

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06194602A (ja) * 1992-12-24 1994-07-15 Nippon Telegr & Teleph Corp <Ntt> 両眼立体視装置
JPH07307959A (ja) 1994-05-12 1995-11-21 Nippon Hoso Kyokai <Nhk> 立体映像装置
JPH09265056A (ja) 1995-07-14 1997-10-07 Pioneer Electron Corp 立体画像表示装置
JPH10221643A (ja) 1997-01-31 1998-08-21 Canon Inc 立体画像表示装置
JP2005215326A (ja) 2004-01-29 2005-08-11 Arisawa Mfg Co Ltd 偏光透過スクリーン、及び当該偏光透過スクリーンを用いた立体画像表示装置
JP2009193014A (ja) 2008-02-18 2009-08-27 Fujifilm Corp パターニング楕円偏光板

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2712197A4

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2012172888A1 (ja) * 2011-06-16 2015-02-23 シャープ株式会社 画像生成装置、画像生成方法、画像生成プログラム、及び記録媒体

Also Published As

Publication number Publication date
US10171799B2 (en) 2019-01-01
CN103535030B (zh) 2016-04-13
KR101592304B1 (ko) 2016-02-05
EP2712197A1 (en) 2014-03-26
CN103535030A (zh) 2014-01-22
EP2712197B1 (en) 2017-11-08
EP2712197A4 (en) 2015-04-01
KR20140022899A (ko) 2014-02-25
US20140085442A1 (en) 2014-03-27

Similar Documents

Publication Publication Date Title
JP5364666B2 (ja) 立体画像表示装置、方法およびプログラム
WO2012157666A1 (ja) 視差画像表示装置、視差画像生成方法、及び視差画像プリント
JP5643160B2 (ja) 表示装置
JP3979604B2 (ja) ディスプレイ
EP1708010A1 (en) Image display apparatus
US20100046069A1 (en) Method and arrangement for three-dimensional representation
JP5107564B2 (ja) 画像ディスプレイ装置
KR20120109303A (ko) 표시 장치
TW200900736A (en) Hybrid multiplexed 3D display and a displaying method thereof
CN105393162A (zh) 具有条纹背光和两个双凸透镜状透镜阵列的自动立体显示设备
Kakeya et al. Time-division quadruplexing parallax barrier with subpixel-based slit control
US20080158671A1 (en) Three-Dimensional Image Display Apparatus Using Flat Panel Display
US10499032B2 (en) Naked-eye stereoscopic display and method of displaying a stereoscopic image
Kakeya 21‐3: A Full‐HD Super‐Multiview Display with Time‐Division Multiplexing Parallax Barrier
JP4660769B2 (ja) 多視点立体ディスプレイ装置
JP5603370B2 (ja) 視差画像表示装置、視差画像生成方法、及び視差画像プリント
JP5753439B2 (ja) 視差画像表示装置、視差画像生成方法、及び視差画像プリント
KR101957148B1 (ko) 3차원 영상 표시장치
US9110297B2 (en) Image display device
JP5749974B2 (ja) 視差画像表示装置、視差画像生成方法、及び視差画像プリント
JP2011033819A (ja) 3次元画像表示装置
KR20110136323A (ko) 패럴랙스 배리어 패널 및 그의 구동 방법
WO2015183218A1 (en) A super multi-view image display system

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12786395

Country of ref document: EP

Kind code of ref document: A1

REEP Request for entry into the european phase

Ref document number: 2012786395

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2012786395

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 20137030279

Country of ref document: KR

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE