WO2012108406A1 - 立体画像印画装置及び立体画像印画方法 - Google Patents

立体画像印画装置及び立体画像印画方法 Download PDF

Info

Publication number
WO2012108406A1
WO2012108406A1 PCT/JP2012/052677 JP2012052677W WO2012108406A1 WO 2012108406 A1 WO2012108406 A1 WO 2012108406A1 JP 2012052677 W JP2012052677 W JP 2012052677W WO 2012108406 A1 WO2012108406 A1 WO 2012108406A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
viewpoint
sheet
lenticular lens
parallax
Prior art date
Application number
PCT/JP2012/052677
Other languages
English (en)
French (fr)
Inventor
渡辺　幹夫
Original Assignee
富士フイルム株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 富士フイルム株式会社 filed Critical 富士フイルム株式会社
Priority to CN2012800082123A priority Critical patent/CN103348688A/zh
Priority to JP2012556888A priority patent/JP5492311B2/ja
Publication of WO2012108406A1 publication Critical patent/WO2012108406A1/ja
Priority to US13/960,299 priority patent/US8896879B2/en
Priority to US14/519,811 priority patent/US9097964B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B25/00—Viewers, other than projection viewers, giving motion-picture effects by persistence of vision, e.g. zoetrope
    • G03B25/02—Viewers, other than projection viewers, giving motion-picture effects by persistence of vision, e.g. zoetrope with interposed lenticular or line screen
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00—Stereoscopic photography
    • G03B35/14—Printing apparatus specially adapted for conversion between different types of record
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B35/00—Stereoscopic photography
    • G03B35/18—Stereoscopic photography by simultaneous viewing
    • G03B35/24—Stereoscopic photography by simultaneous viewing using apertured or refractive resolving means on screens or between screen and eye
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
    • G09F19/00—Advertising or display means not otherwise provided for
    • G09F19/12—Advertising or display means not otherwise provided for using special optical effects
    • G09F19/14—Advertising or display means not otherwise provided for using special optical effects displaying different signs depending upon the view-point of the observer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/282—Image signal generators for generating image signals corresponding to three or more geometrical viewpoints, e.g. multi-view systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/302—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/305—Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/349—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • H04N13/351—Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking for displaying simultaneously

Definitions

  • the present invention relates to a stereoscopic image printing apparatus and a stereoscopic image printing method capable of forming a stereoscopic image suitable for parallax of an input image on a lenticular lens sheet.
  • Patent Document 1 discloses that the user selects the type of the lenticular sheet or selects it according to the lens resolution.
  • Patent Document 2 discloses a technique for converting a stereo image into multiple viewpoints based on a parallax map.
  • Patent Document 1 only selects data suitable for the type of medium (lenticular lens sheet), and cannot select a medium suitable for the parallax of the input stereoscopic image. In addition, it is impossible to confirm in advance what the image will look like after printing.
  • Patent Document 2 discloses a technique for automatically performing multi-viewpoints, but does not disclose forming a stereoscopic image suitable for parallax of an input image on a lenticular lens sheet.
  • the present invention has been made in view of such circumstances, and an object thereof is to provide a stereoscopic image printing apparatus and a stereoscopic image printing method capable of forming a stereoscopic image suitable for parallax of an input image on a lenticular lens sheet. To do.
  • one aspect of the present invention provides an image input unit that inputs multi-viewpoint images of two or more viewpoints, and an information acquisition unit that acquires information on the parallax distribution of the input multi-viewpoint images.
  • a viewpoint number determining means for determining the number of viewpoints of a stereoscopic image to be printed on the lenticular lens sheet based on the information on the parallax distribution acquired by the information acquiring means, and a multi-viewpoint input via the image input means
  • Comparison means for comparing the number of viewpoints of an image with the number of viewpoints determined by the viewpoint number determination means, and a stereoscopic image in which the number of viewpoints of a multi-viewpoint image input via the image input means is printed on the lenticular lens sheet.
  • viewpoint image generation means for generating a shortage of viewpoint images from the input multi-viewpoint image and input via the image input means.
  • the information acquisition means exceeds the frequency of the parallax amount exceeding the first threshold value on the near side or the second threshold value on the far side of the parallax amounts of the input multi-viewpoint images.
  • the information indicating the frequency of at least one of the frequencies of the parallax amount is acquired, and the viewpoint number determination unit, when the frequency of the parallax amount exceeding the acquired first threshold exceeds a third threshold, or When the acquired frequency of the parallax amount exceeding the second threshold exceeds the fourth threshold, the stereoscopic image to be printed on the lenticular lens sheet, compared to the third threshold or within the fourth threshold.
  • the number of viewpoints may be increased.
  • the information acquisition unit acquires information indicating a maximum parallax amount of at least one of the near-side and far-side maximum parallax amounts of the parallax amounts of the input multi-viewpoint images
  • the viewpoint number determination means increases the number of viewpoints of the stereoscopic image to be printed on the lenticular lens sheet when the acquired maximum parallax amount exceeds a predetermined threshold value as compared with a case where the acquired maximum parallax amount is within the predetermined threshold value. May be.
  • the above problem can be solved by increasing the number of viewpoints according to the maximum amount of parallax.
  • the information acquisition unit acquires a parallax range indicating a difference between a near-side maximum parallax amount and a far-side maximum parallax amount of the input multi-viewpoint image, and the viewpoint number determination unit
  • the viewpoint number determination unit When the acquired parallax range exceeds a predetermined threshold, the number of viewpoints of a stereoscopic image to be printed on the lenticular lens sheet may be increased as compared with a case where the acquired parallax range is within a predetermined threshold.
  • the problem can be solved by increasing the number of viewpoints according to the parallax range (parallax amount range).
  • sheet selection means for selecting one lenticular lens sheet from a plurality of sheet-type lenticular lens sheets having different lens intervals, wherein 1 is selected based on the number of viewpoints determined by the viewpoint number determination means.
  • sheet selecting means for selecting two lenticular lens sheets.
  • a plurality of image input units that input multi-viewpoint images of two or more viewpoints
  • an information acquisition unit that acquires information on the parallax distribution of the input multi-viewpoint images
  • a plurality of lenses having different lens intervals.
  • Sheet selecting means for selecting one lenticular lens sheet from the sheet type lenticular lens sheets, and a sheet selecting means for selecting one lenticular lens sheet based on information on the parallax distribution acquired by the information acquiring means;
  • a stereoscopic image printing apparatus comprising: a printing unit that prints a stereoscopic image including the input multi-viewpoint image on the lenticular lens sheet selected by the sheet selection unit.
  • a lenticular lens sheet corresponding to the parallax distribution of the input multi-viewpoint image is selected from a plurality of sheet type lenticular lens sheets having different lens intervals.
  • the information acquisition means exceeds the frequency of the parallax amount exceeding the first threshold value on the near side or the second threshold value on the far side of the parallax amounts of the input multi-viewpoint images.
  • the information indicating the frequency of at least one of the frequencies of the parallax amount is acquired, and the sheet selecting unit determines that the frequency of the parallax amount exceeding the acquired first threshold exceeds a third threshold or the acquiring
  • the lens type lenticular lens sheet has a larger lens interval than the third threshold or within the fourth threshold. May be selected.
  • the problem can be solved by appropriately selecting a sheet according to the frequency of the amount of parallax.
  • the information acquisition unit acquires information indicating a maximum parallax amount of at least one of the near-side and far-side maximum parallax amounts of the parallax amounts of the input multi-viewpoint images
  • the sheet selecting means may select a sheet-type lenticular lens sheet having a larger lens interval than the case where the acquired maximum parallax amount exceeds a predetermined threshold value and is within the predetermined threshold value.
  • the problem can be solved by appropriately selecting a sheet according to the maximum amount of parallax.
  • the information acquisition unit acquires a parallax range indicating a difference between a near-side maximum parallax amount and a far-side maximum parallax amount of the input multi-viewpoint image
  • the sheet selection unit includes When the acquired parallax range exceeds a predetermined threshold, a sheet-type lenticular lens sheet having a larger lens interval than that when the acquired parallax range is within the predetermined threshold may be selected.
  • the problem can be solved by appropriately selecting a sheet according to the parallax range (range of parallax amount).
  • the input is performed.
  • viewpoint image generation means for generating insufficient viewpoint images from the multi-viewpoint images.
  • the insufficient viewpoint images are generated so as to be interpolated between the viewpoint images of the input multi-viewpoint images, and are generated so as to be extrapolated between the viewpoint images of the input multi-viewpoint images. There are cases.
  • the information acquisition unit includes a corresponding point detection unit configured to detect a corresponding point where features of a left end viewpoint image and a right end viewpoint image of the input multi-viewpoint images match, A parallax amount calculating unit that calculates a parallax amount between the left end viewpoint image and the right end viewpoint image from the corresponding point detected by the corresponding point detecting unit, and based on the parallax amount calculated by the parallax amount calculating unit Information regarding the parallax distribution of the input multi-viewpoint image may be acquired.
  • the image input unit acquires an image file in which attached information is recorded together with the multi-view image
  • the information acquiring unit receives the input multi-view image from the attached information of the image file.
  • Information regarding the distribution of the parallax may be acquired.
  • the printing means prints a stereoscopic image on the lenticular lens sheet at the highest resolution of the printing means, and the stereoscopic image having the number of viewpoints proportional to the lens interval of the lenticular lens sheet. You may make it print.
  • the resolution of each viewpoint image of the stereoscopic image printed on the lenticular lens sheet is converted according to the display means for displaying a planar image and the lens interval of the lenticular lens sheet, or each viewpoint image is converted to Image processing means for performing distortion processing, and display control means for displaying a moving image by displaying each viewpoint image processed by the image processing means in order and repeatedly on the display means may be further provided.
  • a virtual viewpoint is obtained from a display unit that displays a planar image, and two adjacent viewpoint images among three-dimensional images of the viewpoint number n (n is an integer of 3 or more) printed on the lenticular lens sheet.
  • display control means for displaying moving images by displaying each viewpoint image processed by the image processing means in order and repeatedly on the display means.
  • the image processing means is configured so that the lenticular lens has a peak portion that is bright and a valley portion that is dark according to the lens interval and the lens shape of the lenticular lens sheet. You may make it image-process an image.
  • the image processing means may decrease the resolution of each viewpoint image as the lens interval of the lenticular lens sheet increases.
  • the display control unit may set the display size of each viewpoint image displayed on the display unit to the same size as the print size of the stereoscopic image printed on the lenticular lens sheet. .
  • the image processing apparatus further includes a type changing unit that manually changes a sheet type of the lenticular lens sheet, and the printing unit is configured to change the sheet type of the lenticular lens sheet after the change by the type changing unit.
  • the stereoscopic image may be printed on the lenticular lens sheet.
  • a stereoscopic image suitable for the parallax of the input image can be formed on the lenticular lens sheet.
  • Block diagram showing the overall configuration of an example of a stereoscopic image printing apparatus
  • Explanatory drawing used to explain sheet selection (4 viewpoints) The flowchart which shows the flow of 1st Example of a three-dimensional image printing process.
  • Explanatory drawing used for explanation of parallax amount frequency information Explanatory drawing used for explanation of parallax amount frequency information
  • generation / display process of the confirmation image in 1st Embodiment Explanatory drawing used to describe an example of image processing for simulating display of how a stereoscopic image looks The flowchart which shows the other example of the production
  • FIG. 1 is a block diagram illustrating an overall configuration of an example of a stereoscopic image printing apparatus according to the first embodiment.
  • a unit 26 includes an image reading unit 12, an attached information acquisition unit 14, an image analysis unit 16, an angle of view correction unit 18, a multi-viewpoint conversion unit 20, a sheet selection unit 22, a print image conversion unit 24, and a display.
  • a unit 26 includes an image reading unit 12, an attached information acquisition unit 14, an image analysis unit 16, an angle of view correction unit 18, a multi-viewpoint conversion unit 20, a sheet selection unit 22, a print image conversion unit 24, and a display.
  • the image reading unit 12 inputs a stereoscopic image consisting of multi-viewpoint images.
  • a multi-view image is an image (a plurality of viewpoint images) viewed from a plurality of viewpoints of two or more viewpoints, and may be a plurality of captured images captured from a plurality of real viewpoints, or a plurality of images viewed from a plurality of virtual viewpoints. Or a combination of a captured image and a virtual image.
  • the image reading unit 12 of this example acquires an image file in which attached information is recorded together with a stereoscopic image by reading it from a recording medium such as a memory card.
  • the acquisition mode of the image file is not limited, and may be acquired by communication, for example.
  • the accessory information acquisition unit 14 acquires the accessory information of the stereoscopic image input via the image reading unit 12.
  • the image analysis unit 16 analyzes the multi-viewpoint image (stereoscopic image) input via the image reading unit 12 to obtain information on the parallax distribution of the input multi-viewpoint image (hereinafter referred to as “parallax distribution information”). get.
  • the image analysis unit 16 of this example includes a corresponding point detection unit 62, a parallax amount calculation unit 64, and a parallax distribution acquisition unit 66, as shown in FIG.
  • the corresponding point detection unit 62 includes a left end viewpoint image (in this example, a left eye image) and a right end viewpoint image among stereoscopic images (in this example, two viewpoint images) input via the image reading unit 12. Corresponding points whose features coincide with each other (in this example, the right eye image) are detected.
  • the parallax amount calculation unit 64 calculates the parallax amount for each corresponding point (or each pixel) between the leftmost viewpoint image and the rightmost viewpoint image from the corresponding points detected by the corresponding point detection unit 62.
  • the parallax distribution acquisition unit 66 calculates (acquires) parallax distribution information indicating the distribution of the parallax amount in the stereoscopic image based on the parallax amount for each corresponding point (or each pixel) calculated by the parallax amount calculation unit 64. .
  • the parallax amount calculation unit 64 of this example calculates the parallax amount for the entire stereoscopic image, only the parallax amount of some pixels of the stereoscopic image may be calculated. Further, the parallax amount may be calculated for each of a plurality of pixels (for each pixel group).
  • the parallax distribution information calculated by the parallax distribution acquisition unit 66 of the image analysis unit 16 includes parallax amount frequency information, maximum parallax amount information, a parallax range, and the like.
  • the parallax amount frequency information includes the frequency of the parallax amount exceeding the near-side parallax amount threshold and the frequency of the parallax amount exceeding the far-side parallax amount threshold among the parallax amounts of the input stereoscopic image.
  • the maximum parallax amount information includes the near-side maximum parallax amount and the far-side maximum parallax amount among the parallax amounts of the input stereoscopic image.
  • the parallax range indicates the difference (the size of the parallax amount range) between the near-side maximum parallax amount and the far-side maximum parallax amount of the input stereoscopic image.
  • the angle-of-view correcting unit 18 corrects the angle of view of the stereoscopic image input via the image reading unit 12.
  • the angle-of-view correction unit 18 determines the number of viewpoints of the three-dimensional image for printing that is printed by the printing unit 32 on a lenticular lens sheet (hereinafter also simply referred to as “lens sheet”).
  • the number of viewpoints of the angle of view correction unit 18 There are various ways of determining the number of viewpoints of the angle of view correction unit 18. First, based on the parallax distribution information acquired by the image analysis unit 16 (or the attached information acquisition unit 14), the number of viewpoints of the three-dimensional image for printing to be printed on the lens sheet is determined. Second, when a sheet type of a lens sheet is selected based on the parallax distribution information by a sheet selection unit 22 described later, printing is performed on the lens sheet according to the lens interval of the sheet type selected by the sheet selection unit 22. The number of viewpoints of the stereoscopic image to be printed is determined. That is, the number of viewpoints of the stereoscopic image for printing may be determined indirectly based on the parallax distribution information.
  • the multi-viewpoint conversion unit 20 compares the number of viewpoints of the multi-viewpoint image (stereoscopic image) input via the image reading unit 12 with the number of viewpoints of the stereoscopic image for printing determined by the angle-of-view correction unit 18. If the number of viewpoints of the input multi-viewpoint image is smaller, insufficient viewpoint images (printing supplementary viewpoint images) are generated from the input multi-viewpoint image. Note that the shortage viewpoint images are generated so as to be interpolated between the viewpoint images constituting the input stereoscopic image, and are extrapolated outside between the viewpoint images constituting the input stereoscopic image. It may be generated.
  • the sheet selection unit 22 selects one lens sheet from a plurality of lens types having different lens intervals based on the parallax distribution information acquired by the image analysis unit 16 or the attached information acquisition unit 14.
  • the view angle correction unit 18 determines the number of viewpoints of the print stereoscopic image based on the parallax distribution information, based on the number of viewpoints of the print stereoscopic image determined by the view angle correction unit 18. It has a function of selecting a lens sheet.
  • the resolution of the printing unit 32 is constant (for example, the highest resolution of the printing unit 32)
  • the sheet selection unit 22 selects a lens sheet having a lens interval proportional to the number of viewpoints.
  • a lens sheet having a lens interval corresponding to the number of viewpoints and the resolution of the print is selected.
  • the sheet selecting unit 22 determines whether the frequency of the parallax amount exceeding the near-side parallax amount threshold exceeds a predetermined threshold (the near-side frequency threshold) or the frequency of the parallax amount exceeding the far-side parallax amount threshold.
  • a predetermined threshold the near-side frequency threshold
  • the lens type has a function of selecting a sheet type lens sheet having a large lens interval compared to the case where the frequency of the parallax amount is within the frequency threshold value.
  • the sheet selection unit 22 of the present example when the maximum parallax amount on the near side or the maximum parallax amount on the far side exceeds a predetermined threshold (maximum parallax amount threshold), compared to the case where the maximum parallax amount is within the threshold. It has a function of selecting a sheet type lens sheet having a large lens interval.
  • the sheet selection unit 22 of this example determines that the parallax range is the parallax range when the parallax range indicating the difference between the maximum parallax amount on the near side and the maximum parallax amount on the far side exceeds a predetermined threshold (parallax range threshold). Compared with the case where the distance is within the range threshold, the sheet type lenticular lens sheet having a large lens interval is selected.
  • the lens sheet of the sheet type A shown in FIG. 3A is selected in the case of a stereoscopic image for short-distance shooting, and the lens sheet of the sheet type B shown in FIG. Select.
  • the lens interval (pitch) is 50 LPI (Line per inch) and 8 viewpoints.
  • the lens interval (pitch) is 100 LPI and 4 viewpoints.
  • the number of sheet types and the lens interval are not particularly limited.
  • the display unit 26 is configured by a display device (for example, a liquid crystal display device) that displays a planar image.
  • a display device for example, a liquid crystal display device
  • the display conversion unit 28 converts the resolution of the printing viewpoint image to be printed on the lens sheet according to the lens interval of the lens sheet selected by the sheet selection unit 22, and generates a stereoscopic image for display. Specifically, when the lens sheet having a large lens interval is selected by the sheet selection unit 22, the display conversion unit 28 has a resolution of each viewpoint image for printing compared to a case where a lens sheet having a small lens interval is selected. Reduce.
  • the display conversion unit 28 performs distortion processing on each display viewpoint image according to the lens interval of the lens sheet selected by the sheet selection unit 22.
  • the display conversion unit 28 for example, brightens the portion printed on the peak of the lenticular lens of each display viewpoint image according to the lens interval and the lens shape of the lens sheet selected by the sheet selection unit 22, and is printed in the valley.
  • the image processing is performed on the display viewpoint image so that the portion to be darkened.
  • a vertical stripe image corresponding to the lens interval may be inserted into each display viewpoint image.
  • the display control unit 30 displays the display viewpoint image (confirmation image) generated from the print viewpoint image by the image processing of the display conversion unit 28 on the display unit 26 in order and repeatedly, thereby causing the display unit 26 to display a moving image. Display.
  • the display control unit 30 sets the display size of each display viewpoint image to the same size as the print size of the three-dimensional image for printing printed on the lens sheet.
  • the printing unit 32 prints a stereoscopic image for printing including the multi-viewpoint image input by the image reading unit 12 on the lens sheet selected by the sheet selection unit 22.
  • the print unit 32 of the present embodiment and the multi-viewpoint image input by the image reading unit 12 are converted.
  • the three-dimensional image for printing composed of the supplementary viewpoint image for printing generated by the unit 20 is printed on the lens sheet.
  • the printing unit 32 of this example prints a three-dimensional image for printing on the selected lens sheet at the highest resolution of the printing unit 32, and the number of viewpoints for printing is proportional to the lens interval of the selected lens sheet. Print an image.
  • the operation unit 34 receives an instruction input from the operator.
  • the setting unit 36 (type changing unit) changes the sheet type of the lens sheet selected by the sheet selection unit 22 in accordance with the instruction input received by the operation unit 34.
  • the printing unit 32 prints the input three-dimensional image for printing on the changed lens sheet.
  • FIG. 4 is a flowchart showing an example of the flow of the stereoscopic image printing process (first embodiment).
  • the image reading unit 12 obtains an image file in which attached information is recorded together with a stereoscopic image composed of multi-viewpoint images (two or more viewpoint images) from a recording medium or the like (step S2).
  • a stereoscopic image composed of two viewpoint images left eye image and right eye image
  • the left end viewpoint image left eye image in this example
  • the right end viewpoint image right in this example
  • Corresponding points whose features coincide with each other are detected (step S4).
  • the parallax distribution information of the input multi-viewpoint image is acquired by the parallax amount calculation unit 64 of the image analysis unit 16 (step S5).
  • a parallax amount is calculated for each corresponding point (or each pixel) between the left end viewpoint image and the right end viewpoint image based on the corresponding point detected in step S4, and based on the calculated parallax amount.
  • the parallax distribution information of the stereoscopic image is calculated.
  • At least parallax amount frequency information as shown in FIGS. 5A and 5B is calculated as the parallax distribution information.
  • the parallax amount is signed
  • Tf is a near-side parallax amount threshold
  • Tr is a far-side parallax amount threshold.
  • the amount of parallax indicates the position of the stereoscopic direction of the subject on the near side (the foreground side closer to the point with zero parallax) when the sign is positive, and the far side (parallax amount when the sign is negative)
  • the position of the stereoscopic direction of the subject on the background side far from the zero point) is shown.
  • the parallax distribution acquisition unit 66 of this example calculates “ ⁇ (frequency exceeding Tf)” on the near side and “ ⁇ (frequency exceeding Tr)” on the far side. A region corresponding to the sum of frequencies is indicated by hatching in FIGS. 5A and 5B.
  • “ ⁇ (frequency exceeding Tf)” is the total sum of the frequencies of parallax amounts exceeding the near-side parallax amount threshold value Tf (that is, near-side parallax amounts having an absolute value larger than Tf).
  • ⁇ (frequency exceeding Tr) is the sum of the frequencies of the parallax amount exceeding the far-side parallax amount threshold Tr (that is, the far-side parallax amount having a larger absolute value than Tr).
  • ⁇ (frequency exceeding Tf) is referred to as “ ⁇ Tf”
  • “ ⁇ (frequency exceeding Tr)” is referred to as “ ⁇ Tr”.
  • one lens sheet is selected from lens sheets of a plurality of sheet types having different lens intervals (steps S6 to S14).
  • step S6 it is determined whether or not ⁇ Tf exceeds the frequency threshold value V1
  • step S8 it is determined whether or not ⁇ Tr exceeds the frequency threshold value V2.
  • step S12 If ⁇ Tf exceeds the frequency threshold value V1 in step S6, or if ⁇ Tr exceeds the frequency threshold value V2 in step S8, a lens sheet of sheet type A having a large lens interval (pitch) is selected (step S12). On the other hand, if ⁇ Tf is equal to or less than the frequency threshold V1 and ⁇ Tr is equal to or less than the frequency threshold V2, a lens sheet of the sheet type B having a small lens interval (pitch) is selected (step S14).
  • the number of viewpoints of the stereoscopic image for printing is set to “8” (step S16), and when a lens sheet of sheet type B is selected, printing is performed.
  • the number of viewpoints of the stereoscopic image for use is set to “4” (step S18). That is, the number of viewpoints of the stereoscopic image for printing is set to a value proportional to the lens interval of the lens sheet.
  • the multi-viewpoint conversion unit 20 multi-views the stereoscopic image input in step S2.
  • the number of viewpoints of the stereoscopic image is smaller than the number of viewpoints of the stereoscopic image for printing to be printed on the lens sheet selected in steps S6 to S14, a shortage of viewpoint images (replenishment for printing) from the input stereoscopic image.
  • (Viewpoint image) is generated (step S20). For example, when a two-viewpoint image is input and an eight-viewpoint image is printed as shown in FIG. 6A, a supplementary viewpoint image for six-viewpoint printing is obtained by interpolating (interpolating or extrapolating) six viewpoints. Are generated to obtain a total of eight stereoscopic images for printing.
  • a supplementary viewpoint image for two-viewpoint printing is generated by interpolating (interpolating or extrapolating) two insufficient viewpoints, thereby printing a total of four viewpoints.
  • a stereoscopic image is obtained.
  • a display viewpoint image (confirmation image) is generated by the display control unit 30 and displayed on the display unit 26 (step S22). It is determined whether or not the operator's confirmation input has been received by the operation unit 34 (step S24). When the sheet type of the selected lens sheet is manually changed, the lens unit sheet type is received by the operation unit 34. The sheet type is changed (step S26), and the process proceeds to step S22.
  • step S24 If an operator's confirmation input is received in step S24, a three-dimensional image for printing composed of multi-viewpoint images is printed on the lens sheet selected in steps S6 to S14 (step S28). That is, if the sheet type has not been changed in step S26, a three-dimensional image for printing is printed on the lens sheet selected by the sheet selection unit 22 in steps S6 to S14, and the sheet type is manually changed in step S26. Then, the three-dimensional image for printing is printed on the lens sheet after the change.
  • FIG. 7 is a flowchart illustrating an example of a confirmation image generation / display process (step S22 in FIG. 4) according to the first embodiment.
  • the confirmation image is an image displayed on the display unit 26 in order to confirm the appearance of the stereoscopic image on the lens sheet in a simulated manner.
  • the confirmation image is generated by converting the stereoscopic image for printing into a moving image composed of a planar image by image processing in the display conversion unit 28.
  • This conversion process includes a moving-image process for confirming a multi-viewpoint image constituting a three-dimensional image for printing by planar display and a simulated conversion process for simulating a difference in appearance due to different sheet types.
  • the display conversion unit 28 acquires the number of viewpoints of the three-dimensional image for printing set in steps S16 to S18 based on the sheet type (step S30). In this example, if the sheet type is B, the number of viewpoints is “4”, and if the sheet type is A, the number of viewpoints is “8”.
  • the display control unit 30 sets the display time t of each display viewpoint image (step S32). If the display repetition period during animation is 240 msec, the display time t is set to 60 msec for 4 viewpoints, and the display time t is set to 30 msec for 8 viewpoints. As a result, in the sheet type A with a large lens interval, the display time of each display viewpoint image is made shorter than in the sheet type B with a small lens interval, and the display time required for displaying the display viewpoint images for all viewpoints is the same. To do.
  • the display conversion unit 28 performs predetermined image processing on the print viewpoint image to generate a display viewpoint image.
  • distortion processing is performed on each print viewpoint image (step S34).
  • P (x, y) is a pixel at coordinates (x, y) of the display image and M (n, x, y) is a transmittance mask for each sheet type n
  • P (x, y) P ( x, y) ⁇ M (n, x, y) is calculated. For example, as shown in FIG.
  • the peak portion of the lenticular lens of each display viewpoint image is bright and the valley portion is Image processing (transparency conversion) is performed so that the image becomes dark.
  • Image processing transparency conversion
  • image processing is performed to display a stereoscopic image on the display unit 26 in a simulated manner through the lenticular lens.
  • the display control unit 30 causes each display viewpoint image generated by the distortion processing to be displayed on the display unit 26 in order and repeatedly, thereby displaying a moving image (step S36).
  • the images are displayed while switching in the order of the first viewpoint to the eighth viewpoint at 30 msec per viewpoint image, and then in the order of the seventh viewpoint to the first viewpoint. Displayed while switching at 30 msec per viewpoint image, and then repeatedly displayed in the same manner.
  • the lens sheet of the sheet type B shown in FIG. 6B after switching and displaying at 60 msec per viewpoint image in the order of the first viewpoint to the fourth viewpoint, the one viewpoint image in the order of the third viewpoint to the first viewpoint. Displayed while switching at 60 msec, and then repeatedly displayed in the same manner.
  • FIG. 9 is a flowchart showing another example of confirmation image generation / display processing (step S22 in FIG. 4) in the first embodiment.
  • Steps S40 to S42 are the same as steps S30 to S32 in FIG.
  • the display conversion unit 28 performs predetermined image processing on the print viewpoint image to generate a display viewpoint image.
  • the resolution of each viewpoint image printed on the lens sheet is converted according to the lens interval of the lens sheet selected in steps S6 to S14 (step S44). For example, the number of horizontal pixels is set to 1280 for four viewpoints and 640 for the eight viewpoints. Thereby, when the sheet type A with a large lens interval is selected, the resolution of each viewpoint image is reduced as compared with the case where the sheet type B with a small lens interval is selected.
  • the display conversion unit 28 enlarges each viewpoint image according to the display size of the display unit 26 (step S46). That is, each viewpoint image is resized so that the display sizes on the display unit 26 are the same.
  • the display conversion unit 28 resizes the display size of each viewpoint image displayed on the display unit 26 to the same size as the print size (print output size) of the stereoscopic image printed on the lens sheet. It is displayed (step S48). That is, the multi-viewpoint image is resized so that the display size of the stereoscopic image displayed on the display unit 26 is the same as the size of the stereoscopic image printed on the lens sheet. As a result, a display viewpoint image is generated. Then, the display control unit 30 causes each display viewpoint image to be displayed on the display unit 26 in order and repeatedly to display a moving image.
  • the lens sheet is selected according to the parallax amount frequency information (first embodiment)
  • first embodiment the lens sheet is selected according to the parallax amount frequency information
  • second embodiment a case where a sheet is selected according to maximum parallax amount information
  • third embodiment a case where a sheet is selected according to a parallax range
  • FIG. 10 is a flowchart illustrating an example of the flow of a stereoscopic image printing process for performing sheet selection according to the second embodiment.
  • Steps S2 to S5 are the same as those in the first embodiment of FIG. In this example, at least maximum parallax amount information is calculated as the parallax distribution information in step S5.
  • step S12 when the near-side maximum parallax amount (the maximum value of the foreground-side parallax amount in FIGS. 5A and 5B) exceeds a predetermined threshold M1 in step S6m, or the far-side maximum parallax in step S8m.
  • a lens sheet of sheet type A having a large lens interval (pitch) is selected (step S12).
  • Step S14 a lens sheet of sheet type B having a small lens interval (pitch) is selected.
  • FIG. 11 is a flowchart illustrating an example of the flow of a stereoscopic image printing process for performing sheet selection according to the third embodiment.
  • Steps S2 to S5 are the same as those in the first embodiment of FIG.
  • at least a parallax range is calculated as parallax distribution information in step S5.
  • step S6r when the parallax range (Mfr in FIGS. 5A and 5B) indicating the difference between the maximum parallax amount on the near side and the maximum parallax amount on the far side of the stereoscopic image exceeds the predetermined threshold R in step S6r.
  • a lens sheet of sheet type A having a large lens interval (pitch) is selected (step S12).
  • a lens sheet of the sheet type B having a small lens interval (pitch) is selected (step S14).
  • Steps S16 to S28 are the same as in the first embodiment of FIG.
  • FIG. 12 shows a stereoscopic image composed of images of viewpoints 1 and 2 (left-eye image and right-eye image), ancillary information (header 1) of the image of viewpoint 1 and ancillary information (header 2) of the image of viewpoint 2.
  • An example of an image file is shown.
  • the image file 50 of FIG. 12 is acquired by the image reading unit 12
  • the parallax amount information in the auxiliary information is acquired by the auxiliary information acquisition unit 14.
  • the disparity amount information in this example includes information (disparity distribution information) related to the disparity distribution between the viewpoint 1 image and the viewpoint 2 image.
  • FIG. 13 is a flowchart illustrating an example of the flow of a stereoscopic image printing process for performing sheet selection according to the fourth embodiment.
  • the image reading unit 12 obtains the image file shown in FIG. 12 by reading it from a recording medium (step S102).
  • the accessory information acquisition unit 14 acquires the accessory information (header part) from the image file (step S104).
  • step S102 at least the near-side maximum parallax amount and the far-side maximum parallax amount are acquired from the attached information.
  • step S12 when the near-side maximum parallax amount (the maximum value of the foreground-side parallax amount in FIGS. 5A and 5B) exceeds a predetermined threshold M1 in step S6m, or the far-side maximum parallax in step S8m.
  • a lens sheet of sheet type A having a large lens interval (pitch) is selected (step S12).
  • Step S14 a lens sheet of sheet type B having a small lens interval (pitch) is selected.
  • FIG. 14 is a flowchart illustrating an example of the flow of a stereoscopic image printing process for performing sheet selection according to the fifth embodiment.
  • Steps S102 to S104 are the same as those in the fourth embodiment of FIG.
  • step S104 at least a parallax range indicating a difference between the near-side maximum parallax amount and the far-side maximum parallax amount is acquired from the attached information.
  • step S6r when the parallax range (Mfr in FIGS. 5A and 5B) exceeds a predetermined threshold R in step S6r, a lens sheet of sheet type A having a large lens interval (pitch) is selected (step S6r). S12).
  • the parallax range Mfr is equal to or less than the threshold value R, a lens sheet of the sheet type B having a small lens interval (pitch) is selected (step S14).
  • Steps S16 to S28 are the same as in the first embodiment of FIG.
  • the overall configuration of the stereoscopic image printing apparatus according to the present embodiment includes the same components as those of the stereoscopic image printing apparatus according to the first embodiment described with reference to FIG.
  • the display conversion unit 28 according to the present embodiment includes two adjacent two-dimensional images for printing of a plurality of viewpoints n (n is an integer of 3 or more) printed on the lens sheet selected by the sheet selection unit 22.
  • a viewpoint image of a virtual viewpoint is generated from viewpoint images for viewpoint printing (two viewpoint images of one viewpoint difference).
  • the display conversion unit 28 of the present embodiment performs image processing for converting or distorting the resolution of a multi-viewpoint image including the two-viewpoint viewpoint image for printing and the generated viewpoint image for the virtual viewpoint.
  • a stereoscopic image for display is generated.
  • the display control unit 30 displays a moving image by causing the display unit 26 to sequentially and repeatedly display each display viewpoint image that has been subjected to image processing and generation by the display conversion unit 28. As described above, by inserting the viewpoint image of the virtual viewpoint, the motion of the moving image observed by the user becomes smooth.
  • FIG. 15 is a flowchart showing an example of a display stereoscopic image (confirmation image) generation / display process (step S22 in FIG. 4) according to the second embodiment.
  • Step S50 is the same as step S30 in FIG.
  • the display conversion unit 28 generates a virtual viewpoint image from two adjacent viewpoint images for printing among the three-dimensional images for printing printed on the lens sheet selected in steps S6 to S14 in FIG. (Step S52).
  • an additional 56 viewpoint virtual viewpoint images are generated from the 8 viewpoints of the stereoscopic image for printing printed on the lens sheet.
  • 8 viewpoint virtual viewpoint images for example, the first viewpoint and the second viewpoint, the second viewpoint and the third viewpoint,..., The seventh viewpoint and the eighth viewpoint. From each set of images (a total of 7 sets), 8 viewpoints are generated for each viewpoint. As a result, a total of 64 viewpoint images for display can be generated.
  • an additional 28 viewpoint virtual viewpoint images are generated from the 4 viewpoint printing stereoscopic images printed on the lens sheet.
  • viewpoint images of the first viewpoint and the second viewpoint, the second viewpoint and the third viewpoint, and the third viewpoint and the fourth viewpoint are displayed. From each set (total 3 sets), virtual viewpoint images are generated for each of the eight viewpoints, and two viewpoints are extrapolated from the viewpoint images of the first viewpoint and the fourth viewpoint. Thereby, a total of 32 viewpoint images for display can be generated.
  • the method of inserting viewpoint images is not limited to the above.
  • Step S56 is the same as step S34 in FIG.
  • a display stereoscopic image including a viewpoint image for printing and a viewpoint image of a virtual viewpoint generated from the viewpoint image for printing according to the lens interval (for example, 50 LPI). Apply. Thereby, a stereoscopic image for display is generated.
  • each viewpoint image subjected to the image processing in step S56 is displayed on the display unit 26 in order and repeatedly to display a moving image (step S58).
  • the first viewpoint (eight virtual viewpoint images generated from the first viewpoint and the second viewpoint), the second viewpoint, (the second viewpoint) And 8 virtual viewpoint images generated from the third viewpoint), 3rd viewpoint, (8 virtual viewpoint images generated from the 3rd viewpoint and 4th viewpoint), 4th viewpoint, (generated from 4th viewpoint and 5th viewpoint) 8 virtual viewpoint images), 5th viewpoint, (8 virtual viewpoint images generated from 5th viewpoint and 6th viewpoint), 6th viewpoint, 8 virtual viewpoint images generated from 6th viewpoint and 7th viewpoint ), 7th viewpoint, (8 virtual viewpoint images generated from the 7th viewpoint and 8th viewpoint), displayed in the order of the 8th viewpoint, and then displayed in the reverse order of the above, and thereafter Repeat the display.
  • the first viewpoint (generated from the first viewpoint and the second viewpoint) 8 virtual viewpoint images), 2nd viewpoint, (8 virtual viewpoint images generated from 2nd viewpoint and 3rd viewpoint), 3rd viewpoint, (8 virtual viewpoint images generated from 3rd viewpoint and 4th viewpoint)
  • 2nd viewpoint (8 virtual viewpoint images generated from 2nd viewpoint and 3rd viewpoint
  • 3rd viewpoint (8 virtual viewpoint images generated from 3rd viewpoint and 4th viewpoint)
  • the resolution of the multi-viewpoint image may be converted according to the lens interval.
  • lens sheet selection modes there are various lens sheet selection modes.
  • a mode in which the lens sheet of the selected sheet type is directly selected for example, a mode in which a container such as a cassette that stores a lens sheet of the selected sheet type is selected, a printer that prints a lens sheet of the selected sheet type ( It is possible to apply a mode for selecting the printing means).
  • the present invention is not particularly limited to such a case.
  • S6 frequency determination on the near side
  • S8 frequency determination on the far side
  • S6m near side maximum parallax amount determination
  • S8m far side maximum parallax amount determination
  • the number of viewpoints of the input stereoscopic image is not limited to two viewpoints.
  • the viewpoint images for printing are generated by interpolation
  • the number of viewpoint images closest to the number of viewpoints of the printing viewpoint image is generated.
  • select the adjacent viewpoint images corresponding to the number of viewpoints from the viewpoint images obtained by interpolation is obtained. To do. Thereby, it is possible to obtain printing viewpoint images for the number of viewpoints.
  • the information acquisition step of acquiring information on the parallax distribution of the input multi-viewpoint images, and the information on the acquired parallax distribution A viewpoint number determination step for determining the number of viewpoints of a stereoscopic image to be printed on a lens sheet, and a comparison between the number of viewpoints of the multi-viewpoint image input in the image input step and the number of viewpoints determined in the viewpoint number determination step.
  • the viewpoint image generation step for generating a shortage viewpoint image from the input multi-viewpoint image and the input in the image input step
  • the frequency of the parallax amount exceeding the first threshold on the near side among the parallax amounts of the input multi-viewpoint image, or the far side first Information indicating the frequency of at least one of the frequencies of the parallax amount exceeding the threshold value of 2 is acquired, and in the step of determining the number of viewpoints, the frequency of the parallax amount exceeding the acquired first threshold value is set to a third threshold value. If the frequency exceeds the fourth threshold, or if the frequency of the parallax amount exceeding the acquired second threshold exceeds the fourth threshold, the lenticular lens sheet is compared with the third threshold or within the fourth threshold. Increase the number of viewpoints of stereoscopic images to be printed on.
  • the maximum parallax amount of at least one of the near-side and far-side maximum parallax amounts of the parallax amounts of the input multi-viewpoint image is calculated.
  • the step of determining the number of viewpoints when the acquired maximum parallax amount exceeds a predetermined threshold, the stereoscopic image to be printed on the lenticular lens sheet is compared with a case where the acquired maximum parallax amount exceeds a predetermined threshold. Increase the number of viewpoints.
  • a parallax range indicating a difference between a near-side maximum parallax amount and a far-side maximum parallax amount of the input multi-viewpoint image is acquired;
  • the viewpoint number determination step when the acquired parallax range exceeds a predetermined threshold value, the viewpoint number of the stereoscopic image to be printed on the lenticular lens sheet is increased as compared with a case where the acquired parallax range is within the predetermined threshold value.
  • One aspect of the first method invention described above is a sheet selection step of selecting one lenticular lens sheet from a plurality of sheet type lenticular lens sheets having different lens intervals, and is determined in the viewpoint number determination step.
  • the method further includes a sheet selection step of selecting one lenticular lens sheet based on the number of viewpoints.
  • an image input step for inputting a stereoscopic image composed of multi-view images of two or more viewpoints, an information acquisition step for acquiring information on the parallax distribution of the input multi-view image, and a plurality of sheet types having different lens intervals
  • a second method invention including a printing step of printing a stereoscopic image including the input multi-viewpoint image on the lenticular lens sheet selected in the selection step.
  • the frequency of the parallax amount exceeding the first threshold value on the near side among the parallax amounts of the input stereoscopic image, or the second side on the far side is acquired, and the frequency of the parallax amount exceeding the acquired first threshold value exceeds the third threshold value in the sheet selection step Or when the frequency of the parallax amount exceeding the acquired second threshold exceeds the fourth threshold, the sheet type with a larger lens interval than the third threshold or within the fourth threshold Select a lenticular lens sheet.
  • the maximum parallax amount of at least one of the near-side and far-side maximum parallax amounts of the parallax amounts of the input multi-viewpoint image is calculated.
  • the sheet selection step when the acquired maximum parallax amount exceeds a predetermined threshold, a sheet-type lenticular lens sheet having a larger lens interval than that within the predetermined threshold is selected. To do.
  • a parallax range indicating a difference between a near-side maximum parallax amount and a far-side maximum parallax amount of the input multi-viewpoint image is acquired;
  • the sheet selection step when the acquired parallax range exceeds a predetermined threshold value, a sheet type lenticular lens sheet having a larger lens interval than that in the case of being within the predetermined threshold value is selected.
  • One aspect of the second method invention described above is that when the number of viewpoints of the input multi-viewpoint image is smaller than the number of viewpoints of a stereoscopic image to be printed on the selected lenticular lens sheet, the input It further includes a viewpoint image generation step of generating a short viewpoint image from the multi-viewpoint image.
  • the information acquisition step detects a corresponding point in which the features of the left end viewpoint image and the right end viewpoint image of the input multi-viewpoint images match.
  • Information on the magnitude of the parallax amount of the input multi-viewpoint image is acquired based on the calculated parallax amount.
  • an image file in which attached information is recorded together with the multi-viewpoint image is obtained, and in the information obtaining step, attached information of the image file is obtained. To obtain information on the distribution of the parallax.
  • the printing step prints a stereoscopic image on the selected lenticular lens sheet at the highest resolution of the printing step, and the selected lenticular lens A stereoscopic image having the number of viewpoints proportional to the lens interval of the lens sheet is printed.
  • the resolution of a stereoscopic image to be printed on the lenticular lens sheet is converted according to the lens interval of the lenticular lens sheet selected in the sheet selection step, or each An image processing step for distortion processing of the viewpoint image; and a display control step for displaying each viewpoint image processed by the image processing step on a display unit for displaying a planar image in order and repeatedly to display a moving image.
  • One aspect of the first and second method inventions described above is a multi-viewpoint image of a plurality of viewpoints n (n is an integer of 3 or more) printed on the lenticular lens sheet selected in the sheet selection step.
  • An image processing step for distortion processing of the viewpoint image, and a display control step for displaying the moving image by sequentially and repeatedly displaying each viewpoint image processed in the image processing step on a display means for displaying a planar image.
  • a lenticular lens peak of each viewpoint image is selected according to the lens interval and lens shape of the lenticular lens sheet selected in the sheet selection step.
  • Each viewpoint image is image-processed so that the portion is bright and the valley portion is dark.
  • a lenticular lens sheet having a large lens interval is selected in the sheet selecting step, a lenticular lens sheet having a small lens interval is selected. Compared to the case, the resolution of each viewpoint image is lowered.
  • the display size of each viewpoint image displayed on the display means is the same as the print size of the stereoscopic image printed on the lenticular lens sheet. To size.
  • One aspect of the first and second method inventions further includes a type changing step of manually changing a sheet type of the lenticular lens sheet, and the printing step includes a sheet type of the lenticular lens sheet by the type changing step. Is changed, the input stereoscopic image is printed on the changed lenticular lens sheet.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Marketing (AREA)
  • Accounting & Taxation (AREA)
  • Business, Economics & Management (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Processing Or Creating Images (AREA)
  • Accessory Devices And Overall Control Thereof (AREA)

Abstract

　本発明の一態様に係る立体画像印画方法は、２視点以上の多視点画像の視差の分布に関する情報を取得し、前記視差の分布に関する情報に基づいて、レンチキュラーレンズシートに印画する立体画像の視点数を決定し、前記決定された視点数よりも前記多視点画像の視点数の方が少ない場合には、前記多視点画像から不足分の視点画像を生成し、前記多視点画像と前記生成された視点画像とからなる立体画像を印画する。

Description

立体画像印画装置及び立体画像印画方法
　本発明は、入力画像の視差に適した立体画像をレンチキュラーレンズシートに形成することができる立体画像印画装置及び立体画像印画方法に関する。
　複数視点から撮影した画像を、レンズ状のシートを介して立体表示する技術が知られている。
　特許文献１には、レンチキュラーシートのタイプをユーザが選択し、又はレンズ解像度により選択することが開示されている。
　特許文献２には、ステレオ画像を視差マップに基づいて多視点化する技術が開示されている。
特開２００７－９８８３０号公報 特開２００１－３４６２２６号公報
　複数視点から撮影した画像を、レンズ状のシート（レンチキュラーレンズシート）を介して立体表示する場合、画像の立体視の上での条件が様々ある（特に視差量である）にも関わらず、これを同一形状のシートで表示することになる。このため、立体感が不足したり、逆に視差量が表示の許容範囲を越えて、映像がボケたり多重に見えるなどの問題があった。
　特許文献１に記載の技術は、媒体（レンチキュラーレンズシート）の種別に合ったデータを選択するのみであり、入力された立体画像の視差に適した媒体を選択することができない。また、印刷後にどのような見え方になるのかを事前に確認することもできない。
　特許文献２には、多視点化を自動的に行う技術が開示されているが、入力画像の視差に適した立体画像をレンチキュラーレンズシートに形成することについて開示がない。
　本発明はこのような事情に鑑みてなされたもので、入力画像の視差に適した立体画像をレンチキュラーレンズシートに形成することができる立体画像印画装置及び立体画像印画方法を提供することを目的とする。
　前記目的を達成するために、本発明の一態様は、２視点以上の多視点画像を入力する画像入力手段と、前記入力された多視点画像の視差の分布に関する情報を取得する情報取得手段と、前記情報取得手段により取得された視差の分布に関する情報に基づいて、レンチキュラーレンズシートに印画する立体画像の視点数を決定する視点数決定手段と、前記画像入力手段を介して入力された多視点画像の視点数と前記視点数決定手段により決定された視点数とを比較する比較手段と、前記画像入力手段を介して入力された多視点画像の視点数が、前記レンチキュラーレンズシートに印画する立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成手段と、前記画像入力手段を介して入力された多視点画像と前記視点画像生成手段により生成された視点画像とからなる立体画像をレンチキュラーレンズシートに印画する印画手段とを備える立体画像印画装置を提供する。
　本発明の一態様では、前記情報取得手段は、前記入力された多視点画像の視差量のうちの近側の第１の閾値を越える視差量の頻度、又は遠側の第２の閾値を越える視差量の頻度のうちの少なくとも一方の頻度を示す情報を取得し、前記視点数決定手段は、前記取得された第１の閾値を越える視差量の頻度が第３の閾値を越える場合、又は前記取得された第２の閾値を越える視差量の頻度が第４の閾値を越える場合には、前記第３の閾値又は第４の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くするようにしてもよい。
　即ち、従来は、近距離撮影された被写体像や遠距離の副被写体像は視差量が表示能力に対して過大になるため、画像のぼけや割れなどの破綻が発生するという問題があった。本態様では、視差量の頻度に応じて視点数を多くすることで、前記問題を解決することが可能になる。
　本発明の一態様では、前記情報取得手段は、前記入力された多視点画像の視差量のうちの近側及び遠側の最大視差量の少なくとも一方の最大視差量を示す情報を取得し、前記視点数決定手段は、前記取得された最大視差量が所定の閾値を越える場合には、所定の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くするようにしてもよい。
　即ち、従来は、近距離撮影された被写体像や遠距離の副被写体像は視差量が表示能力に対して過大になるため、画像のぼけや割れなどの破綻が発生するという問題があった。本態様では、最大視差量に応じて視点数を多くすることで、前記問題を解決することが可能になる。
　本発明の一態様では、前記情報取得手段は、前記入力された多視点画像の近側の最大視差量と遠側の最大視差量との差を示す視差範囲を取得し、前記視点数決定手段は、前記取得された視差範囲が所定の閾値を越える場合には、所定の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くするようにしてもよい。
　即ち、従来は、近距離撮影された被写体像や遠距離の副被写体像は視差量が表示能力に対して過大になるため、画像のぼけや割れなどの破綻が発生するという問題があった。本態様では、視差範囲（視差量のレンジ）に応じて視点数を多くすることで、前記問題を解決することが可能になる。
　本発明の一態様では、レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから１つのレンチキュラーレンズシートを選択するシート選択手段であって、前記視点数決定手段により決定された視点数に基づいて１つのレンチキュラーレンズシートを選択するシート選択手段を更に備えていてもよい。
　また、本発明の一態様は、２視点以上の多視点画像を入力する画像入力手段と、前記入力された多視点画像の視差の分布に関する情報を取得する情報取得手段と、レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから１つのレンチキュラーレンズシートを選択するシート選択手段であって、前記情報取得手段により取得した視差の分布に関する情報に基づいて１つのレンチキュラーレンズシートを選択するシート選択手段と、前記シート選択手段により選択されたレンチキュラーレンズシートに前記入力された多視点画像を含む立体画像を印画する印画手段とを備える立体画像印画装置を提供する。
　即ち、レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから、入力された多視点画像の視差分布に応じたレンチキュラーレンズシートが選択される。
　本発明の一態様では、前記情報取得手段は、前記入力された多視点画像の視差量のうちの近側の第１の閾値を越える視差量の頻度、又は遠側の第２の閾値を越える視差量の頻度のうちの少なくとも一方の頻度を示す情報を取得し、前記シート選択手段は、前記取得された第１の閾値を越える視差量の頻度が第３の閾値を越える場合、又は前記取得された第２の閾値を越える視差量の頻度が第４の閾値を越える場合には、前記第３の閾値又は第４の閾値以内である場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択するようにしてもよい。
　即ち、従来は、近距離撮影された被写体像や遠距離の副被写体像は視差量が表示能力に対して過大になるため、画像のぼけや割れなどの破綻が発生するという問題があった。本態様では、視差量の頻度に応じて適切にシートを選択することで、前記問題を解決することが可能になる。
　本発明の一態様では、前記情報取得手段は、前記入力された多視点画像の視差量のうちの近側及び遠側の最大視差量の少なくとも一方の最大視差量を示す情報を取得し、前記シート選択手段は、前記取得された最大視差量が所定の閾値を越える場合には、所定の閾値以内である場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択するようにしてもよい。
　即ち、従来は、近距離撮影された被写体像や遠距離の副被写体像は視差量が表示能力に対して過大になるため、画像のぼけや割れなどの破綻が発生するという問題があった。本態様では、最大視差量に応じて適切にシートを選択することで、前記問題を解決することが可能になる。
　本発明の一態様では、前記情報取得手段は、前記入力された多視点画像の近側の最大視差量と遠側の最大視差量との差を示す視差範囲を取得し、前記シート選択手段は、前記取得された視差範囲が所定の閾値を越える場合には、所定の閾値以内である場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択するようにしてもよい。
　即ち、従来は、近距離撮影された被写体像や遠距離の副被写体像は視差量が表示能力に対して過大になるため、画像のぼけや割れなどの破綻が発生するという問題があった。本態様では、視差範囲（視差量のレンジ）に応じて適切にシートを選択することで、前記問題を解決することが可能になる。
　本発明の一態様では、前記画像入力手段を介して入力された多視点画像の視点数が、前記選択されたレンチキュラーレンズシートに印画する立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成手段を備えていてもよい。
　なお、不足分の視点画像は、入力された多視点画像の視点画像間に内挿するように生成する場合と、入力された多視点画像の視点画像間の外側に外挿するように生成する場合とがある。
　本発明の一態様では、前記情報取得手段は、前記入力された多視点画像のうちの左端の視点画像と右端の視点画像との特徴が一致する対応点を検出する対応点検出手段と、前記対応点検出手段により検出された対応点から左端の視点画像と右端の視点画像との視差量を算出する視差量算出手段とを有し、前記視差量算出手段により算出された視差量に基づいて前記入力された多視点画像の視差の分布に関する情報を取得するようにしてもよい。
　即ち、入力された多視点画像から視差の分布に関する情報が取得される。このため、特別な情報が予め立体画像とともに記録されていなくても、入力画像の視差の分布に適したレンズシートが選択されることになる。
　本発明の一態様では、前記画像入力手段は、前記多視点画像とともに付属情報が記録された画像ファイルを取得し、前記情報取得手段は、前記画像ファイルの付属情報から前記入力された多視点画像の視差の分布に関する情報を取得するようにしてもよい。
　本発明の一態様では、前記印画手段は、前記レンチキュラーレンズシートに該印画手段の最高解像度で立体画像を印画するものであって、前記レンチキュラーレンズシートのレンズ間隔に比例した視点数の立体画像を印画するようにしてもよい。
　即ち、レンズ間隔に比例した視点数で印画される。このため、視差量に応じてシートタイプを異ならせても、常に見易い立体画像を印画することができる。
　本発明の一態様では、平面画像を表示する表示手段と、前記レンチキュラーレンズシートのレンズ間隔に応じて該レンチキュラーレンズシートに印画する立体画像の各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理手段と、前記画像処理手段により処理された各視点画像を前記表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御手段とを更に備えていてもよい。
　本発明の一態様では、平面画像を表示する表示手段と、前記レンチキュラーレンズシートに印画される視点数ｎ（ｎは３以上の整数）の立体画像のうちの隣接する２視点画像から仮想視点の視点画像を生成する手段と、前記２視点画像及び前記生成された仮想視点の視点画像からなる表示用の立体画像における各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理手段と、前記画像処理手段により処理された各視点画像を前記表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御手段とを更に備えていてもよい。
　本発明の一態様では、前記画像処理手段は、前記レンチキュラーレンズシートのレンズ間隔及びレンズ形状に応じて、各視点画像のレンチキュラーレンズの山の部分は明るく、谷の部分は暗くなるように各視点画像を画像処理するようにしてもよい。
　即ち、レンズ間隔及びレンズ形状に応じて異なる立体画像の見え方を印画前に予め模擬表示で確認することができる。
　本発明の一態様では、前記画像処理手段は、前記レンチキュラーレンズシートのレンズ間隔が大きいほど各視点画像の解像度を低下させるようにしてもよい。
　本発明の一態様では、前記表示制御手段は、前記表示手段に表示させる各視点画像の表示サイズを、前記レンチキュラーレンズシートに印画される立体画像の印画サイズと同じサイズにするようにしてもよい。
　本発明の一態様では、前記レンチキュラーレンズシートのシートタイプを手動により変更するタイプ変更手段を更に備え、前記印画手段は、前記タイプ変更手段によりレンチキュラーレンズシートのシートタイプが変更されると、変更後のレンチキュラーレンズシートに前記立体画像を印画するようにしてもよい。
　本発明によれば、入力画像の視差に適した立体画像をレンチキュラーレンズシートに形成することができる。
立体画像印画装置の一例の全体構成を示すブロック図 画像解析部の詳細ブロック図 シート選択の説明に用いる説明図（８視点化） シート選択の説明に用いる説明図（４視点化） 立体画像印画処理の第１実施例の流れを示すフローチャート 視差量頻度情報の説明に用いる説明図 視差量頻度情報の説明に用いる説明図 レンズ間隔及び多視点化の説明に用いる説明図（タイプＡ） レンズ間隔及び多視点化の説明に用いる説明図（タイプＢ） 第１実施形態における確認画像の生成・表示処理の一例を示すフローチャート 立体画像の見え方を模擬表示するための画像処理例の説明に用いる説明図 第１実施形態における確認画像の生成・表示処理の他の例を示すフローチャート 立体画像印画処理の第２実施例の流れを示すフローチャート 立体画像印画処理の第３実施例の流れを示すフローチャート 立体画像の付属情報の一例を示す説明図 立体画像印画処理の第４実施例の流れを示すフローチャート 立体画像印画処理の第５実施例の流れを示すフローチャート 第２実施形態における確認画像の生成・表示処理の一例を示すフローチャート 第２実施形態における確認画像の生成処理の説明に用いる説明図（タイプＡ） 第２実施形態における確認画像の生成処理の説明に用いる説明図（タイプＢ）
　以下、添付図面に従って、本発明の実施形態について、詳細に説明する。
　＜第１実施形態＞
　図１は、第１実施形態における立体画像印画装置の一例の全体構成を示すブロック図である。
　図１の立体画像印画装置１０は、画像読取り部１２、付属情報取得部１４、画像解析部１６、画角補正部１８、多視点変換部２０、シート選択部２２、印画イメージ変換部２４、表示部２６、表示変換部２８、表示制御部３０、印画部３２、操作部３４、設定部（印画種別設定部）３６を備えている。
　画像読取り部１２（画像入力手段）は、多視点画像からなる立体画像を入力する。多視点画像は、２視点以上の複数の視点から見た画像（複数の視点画像）であり、複数の実視点から撮像した複数の撮像画像でもよいし、複数の仮想視点から見た場合の複数の仮想画像でもよいし、撮像画像と仮想画像との組み合わせでもよい。本例の画像読取り部１２は、立体画像とともに付属情報が記録された画像ファイルを、メモリカードなどの記録媒体から読み取ることで取得する。もっとも画像ファイルの取得態様は限定されず、例えば、通信により取得してもよい。
　付属情報取得部１４は、画像読取り部１２を介して入力された立体画像の付属情報を取得する。
　画像解析部１６は、画像読取り部１２を介して入力された多視点画像（立体画像）を解析することで、入力した多視点画像の視差の分布に関する情報（以下「視差分布情報」という）を取得する。
　本例の画像解析部１６は、図２に示すように、対応点検出部６２、視差量算出部６４、及び視差分布取得部６６を有する。対応点検出部６２は、画像読取り部１２を介して入力された立体画像（本例では２視点画像である）のうち左端の視点画像（本例では左眼画像である）と右端の視点画像（本例では右眼画像である）との間で特徴が一致する対応点を検出する。視差量算出部６４は、対応点検出部６２により検出された対応点から左端の視点画像と右端の視点画像との各対応点（又は各画素）ごとの視差量を算出する。視差分布取得部６６は、視差量算出部６４により算出された各対応点（又は各画素）ごとの視差量に基づいて、立体画像における視差量の分布を示す視差分布情報を算出（取得）する。なお、本例の視差量算出部６４は立体画像全体で視差量を算出するが、立体画像の一部の画素の視差量のみを算出するようにしてもよい。また、複数の画素ごと（画素群ごと）に視差量を算出するようにしてもよい。
　画像解析部１６の視差分布取得部６６により算出される視差分布情報（多視点画像の視差量の分布に関する情報）として、視差量頻度情報、最大視差量情報、視差範囲などが挙げられる。視差量頻度情報は、入力された立体画像の視差量のうち近側の視差量閾値を越える視差量の頻度及び遠側の視差量閾値を越える視差量の頻度を含む。最大視差量情報は、入力された立体画像の視差量のうち近側の最大視差量及び遠側の最大視差量を含む。視差範囲は、入力された立体画像の近側の最大視差量と遠側の最大視差量との差（視差量の範囲の大きさ）を示す。
　画角補正部１８は、画像読取り部１２を介して入力された立体画像の画角を補正する。この画角補正部１８は、レンチキュラーレンズシート（以下単に「レンズシート」ともいう）に印画部３２により印画する印画用立体画像の視点数を決定する。
　画角補正部１８の視点数決定の態様には各種ある。第１に、画像解析部１６（または付属情報取得部１４）により取得された視差分布情報に基づいて、レンズシートに印画する印画用立体画像の視点数を決定する。第２に、後述のシート選択部２２により視差分布情報に基づいてレンズシートのシートタイプが選択される場合に、シート選択部２２により選択されたシートタイプのレンズ間隔に応じて、レンズシートに印画する印画用立体画像の視点数を決定する。即ち、視差分布情報に基づいて間接的に印画用立体画像の視点数を決定してもよい。
　多視点変換部２０は、画像読取り部１２を介して入力された多視点画像（立体画像）の視点数と、画角補正部１８により決定された印画用立体画像の視点数とを比較して、入力された多視点画像の視点数の方が少ない場合には、入力された多視点画像から不足分の視点画像（印画用補充視点画像）を生成する。なお、不足分の視点画像は、入力された立体画像を構成する視点画像間に内挿するように生成する場合と、入力された立体画像を構成する視点画像間の外側に外挿するように生成する場合とがある。
　シート選択部２２は、画像解析部１６又は付属情報取得部１４により取得された視差分布情報に基づいて、レンズ間隔が異なる複数のシートタイプのレンズシートから１つのレンズシートを選択する。
　シート選択部２２のシート選択態様には各種ある。
　第１に、画角補正部１８にて視差分布情報に基づいて印画用立体画像の視点数が決定される場合に、画角補正部１８により決定された印画用立体画像の視点数に基づいてレンズシートを選択する機能を有する。シート選択部２２は、印画部３２の解像度が一定（例えば、印画部３２の最高解像度）である場合、視点数に比例したレンズ間隔のレンズシートを選択する。印画用立体画像の視点数に応じて印画の解像度を変更する場合には、該視点数と印画の解像度とに応じたレンズ間隔のレンズシートを選択する。
　第２に、視差分布情報に基づいてレンズシートを選択する機能を有する。本例のシート選択部２２は、近側の視差量閾値を越える視差量の頻度が所定の閾値（近側の頻度閾値）を越える場合、又は遠側の視差量閾値を越える視差量の頻度が所定の閾値（遠側の頻度閾値）を越える場合には、視差量の頻度がその頻度閾値以内である場合に比べて、レンズ間隔が大きいシートタイプのレンズシートを選択する機能を有する。また、本例のシート選択部２２は、近側の最大視差量、又は遠側の最大視差量が所定の閾値（最大視差量閾値）を越える場合には、その閾値以内である場合に比べてレンズ間隔が大きいシートタイプのレンズシートを選択する機能を有する。また、本例のシート選択部２２は、近側の最大視差量と遠側の最大視差量との差を示す視差範囲が所定の閾値（視差範囲閾値）を越える場合には、視差範囲が視差範囲閾値以内である場合に比べて、レンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する機能を有する。
　本例では、近距離撮影の立体画像の場合には図３Ａに示すシートタイプＡのレンズシートを選択し、中～遠距離撮影の立体画像の場合には図３Ｂに示すシートタイプＢのレンズシートを選択する。シートタイプＡでは、レンズ間隔（ピッチ）が５０ＬＰＩ（Ｌｉｎｅ　ｐｅｒ　ｉｎｃｈ）、８視点である。シートタイプＢでは、レンズ間隔（ピッチ）が１００ＬＰＩ、４視点である。もっとも、シートタイプの数やレンズ間隔は特に限定されない。
　表示部２６は、平面画像を表示する表示デバイス（例えば、液晶表示デバイス）によって構成されている。
　表示変換部２８は、シート選択部２２により選択されたレンズシートのレンズ間隔に応じて、そのレンズシートに印画する印画用視点画像の解像度を変換し、表示用の立体画像を生成する。表示変換部２８は、具体的には、シート選択部２２によりレンズ間隔の大きいレンズシートが選択されると、レンズ間隔の小さいレンズシートが選択された場合に比べて、各印画用視点画像の解像度を低下させる。
　また、表示変換部２８は、シート選択部２２により選択されたレンズシートのレンズ間隔に応じて、各表示用視点画像に対して歪み処理を行う。
　表示変換部２８は、例えば、シート選択部２２により選択されたレンズシートのレンズ間隔及びレンズ形状に応じて、各表示用視点画像のレンチキュラーレンズの山に印画される部分は明るく、谷に印画される部分は暗くなるように、表示用視点画像に対して画像処理を行う。各表示用視点画像に、レンズ間隔に応じた縦筋像を挿入するようにしてもよい。
　表示制御部３０は、表示変換部２８の画像処理により印画用視点画像から生成された表示用視点画像（確認画像）を、表示部２６に順番にかつ繰り返し表示させることにより、表示部２６に動画表示させる。
　また、表示制御部３０は、表示部２６により表示を行う際に、各表示用視点画像の表示サイズを、レンズシートに印画される印画用立体画像の印画サイズと同じサイズにする。
　印画部３２は、シート選択部２２により選択されたレンズシートに、画像読取り部１２により入力された多視点画像を含む印画用立体画像を印画する。
　本実施形態の印画部３２は、多視点変換部２０により不足分の視点画像（印画用補充視点画像）が生成された場合には、画像読取り部１２により入力された多視点画像と多視点変換部２０により生成された印画用補充視点画像とからなる印画用立体画像をレンズシートに印画する。本例の印画部３２は、選択されたレンズシートに印画部３２の最高解像度で印画用立体画像を印画するものであって、選択されたレンズシートのレンズ間隔に比例した視点数の印画用視点画像を印画する。
　操作部３４は、操作者の指示入力を受け付ける。
　設定部３６（タイプ変更手段）は、シート選択部２２により選択されたレンズシートのシートタイプを、操作部３４で受け付けた指示入力に従って変更する。設定部３６によりレンズシートのシートタイプが変更されると、印画部３２は、変更後のレンズシートに、入力した印画用立体画像を印画する。
　図４は、立体画像印画処理の流れの一例（第１実施例）を示すフローチャートである。
　まず、画像読取り部１２により、多視点画像（２視点以上の視点画像）からなる立体画像とともに付属情報が記録された画像ファイルを、記録媒体などから読み取ることで取得する（ステップＳ２）。本例では、２視点の視点画像（左眼画像及び右眼画像）からなる立体画像を入力する。
　次に、画像解析部１６の対応点検出部６２により、入力された多視点画像（立体画像）のうちの左端の視点画像（本例では左眼画像）と右端の視点画像（本例では右眼画像）との間で特徴が一致する対応点を検出する（ステップＳ４）。
　次に、画像解析部１６の視差量算出部６４により、入力された多視点画像の視差分布情報を取得する（ステップＳ５）。このステップＳ５では、ステップＳ４で検出された対応点に基づいて左端の視点画像と右端の視点画像との各対応点（または各画素）ごとの視差量を算出し、算出された視差量に基づいて立体画像の視差分布情報を算出する。
　本例では、視差分布情報として、少なくとも図５Ａ及び図５Ｂに示すような視差量頻度情報を算出する。図５Ａ及び図５Ｂ中、視差量は符号付きであり、Ｔｆは近側の視差量閾値、Ｔｒは遠側の視差量閾値である。視差量は、符号が正の場合に、近側（視差量ゼロの点より近い前景側）における被写体の立体像の奧行き方向の位置を示し、符号が負の場合に、遠側（視差量ゼロの点より遠い背景側）における被写体の立体像の奧行き方向の位置を示す。本例の視差分布取得部６６は、近側の「Σ（Ｔｆを越える頻度）」及び遠側の「Σ（Ｔｒを越える頻度）」を算出する。頻度の総和に相当する領域を図５Ａ及び図５Ｂでは斜線で示した。「Σ（Ｔｆを越える頻度）」は、近側の視差量閾値Ｔｆを越える視差量（つまり近側であってＴｆよりも絶対値が大きな視差量）の頻度の総和である。「Σ（Ｔｒを越える頻度）」は、遠側の視差量閾値Ｔｒを超える視差量（つまり遠側であってＴｒよりも絶対値が大きな視差量）の頻度の総和である。以下では、「Σ（Ｔｆを越える頻度）」を「ΣＴｆ」と称し、「Σ（Ｔｒを越える頻度）」を「ΣＴｒ」と称する。
　次に、ステップＳ５にて算出された視差分布情報に基づいて、レンズ間隔が異なる複数のシートタイプのレンズシートから１つのレンズシートを選択する（ステップＳ６～Ｓ１４）。
　ステップＳ６ではΣＴｆが頻度閾値Ｖ１を越えるか否かを判定し、ステップＳ８ではΣＴｒが頻度閾値Ｖ２を越えるか否かを判定する。
　ステップＳ６にてΣＴｆが頻度閾値Ｖ１を越える場合、又はステップＳ８にてΣＴｒが頻度閾値Ｖ２を越える場合には、レンズ間隔（ピッチ）が大きいシートタイプＡのレンズシートを選択する（ステップＳ１２）。その一方で、ΣＴｆが頻度閾値Ｖ１以下であり、且つ、ΣＴｒが頻度閾値Ｖ２以下である場合には、レンズ間隔（ピッチ）が小さいシートタイプＢのレンズシートを選択する（ステップＳ１４）。
　本例では、シートタイプＡのレンズシートを選択した場合には、印画用立体画像の視点数を「８」に設定し（ステップＳ１６）、シートタイプＢのレンズシートを選択した場合には、印画用立体画像の視点数を「４」に設定する（ステップＳ１８）。即ち、印画用立体画像の視点数は、レンズシートのレンズ間隔に比例した値に設定される。
　なお、まず、視差の分布に関する情報に基づいてシート選択を行い、次に、選択されたレンズシートのレンズ間隔に基づいて印画用立体画像の視点数を決定する例について説明したが、この順序は逆でもよい。即ち、まず、視差の分布に関する情報に基づいて印画用立体画像の視点数を決定し、次に、決定された視点数に基づいてシート選択を行ってもよい。
　次に、多視点変換部２０により、ステップＳ２で入力された立体画像の多視点化を行う。即ち、立体画像の視点数が、ステップＳ６～Ｓ１４で選択されたレンズシートに印画する印画用立体画像の視点数よりも少ない場合には、入力した立体画像から不足分の視点画像（印画用補充視点画像）を生成する（ステップＳ２０）。例えば、２視点画像が入力されて、図６Ａに示すように、８視点画像を印画する場合には不足分の６視点を補間（内挿又は外挿）して６視点の印画用補充視点画像を生成することで合計８視点の印画用立体画像を得る。図６Ｂに示すように、４視点画像を印画する場合には不足分の２視点を補間（内挿又は外挿）して２視点の印画用補充視点画像を生成することで合計４視点の印画用立体画像を得る。
　以上のように、近距離撮影の場合には、視差量が過大となる可能性があるため、通常よりもレンズ間隔の大きなレンズシート（本例ではシートタイプＡ）が選択されて、より多くの視点数（本例では８視点）の印画用立体画像が生成される。一方、中～遠距離の場合には、視差量が過大となる可能性が低いため、通常のレンズシート（本例ではシートタイプＢ）が選択されて、より少ない視点数（本例では４視点）の印画用立体画像が生成される。
　次に、表示制御部３０により、表示用視点画像（確認画像）を生成して表示部２６に表示させる（ステップＳ２２）。操作部３４により操作者の確認入力を受け付けたか否かを判定し（ステップＳ２４）、選択されたレンズシートのシートタイプを手動により変更する場合には、レンズシートのシートタイプを操作部３４で受け付けたシートタイプに変更し（ステップＳ２６）、ステップＳ２２に進む。
　ステップＳ２４で操作者の確認入力を受け付けた場合には、ステップＳ６～Ｓ１４で選択されたレンズシートに多視点画像からなる印画用立体画像を印画する（ステップＳ２８）。即ち、ステップＳ２６でシートタイプが変更されなかった場合には、ステップＳ６～Ｓ１４でシート選択部２２により選択されたレンズシートに、印画用立体画像を印画し、ステップＳ２６でシートタイプが手動で変更されると、変更後のレンズシートに、印画用立体画像を印画する。
　図７は、第１実施形態における確認画像の生成・表示処理（図４のステップＳ２２）の一例を示すフローチャートである。確認画像は、レンズシートでの立体画像の見え方を模擬的に確認するために表示部２６に表示される画像である。確認画像は、表示変換部２８における画像処理により、印画用立体画像を平面画像からなる動画像に変換処理して生成される。この変換処理は、印画用立体画像を構成する多視点画像を平面表示で確認するための動画化処理と、シートタイプが異なることによる見え方の違いを模擬するための模擬変換処理を含む。
　まず、表示変換部２８により、シートタイプに基づいて、ステップＳ１６～Ｓ１８で設定した印画用立体画像の視点数を取得する（ステップＳ３０）。本例では、シートタイプがＢであれば上記視点数を「４」とし、シートタイプがＡであれば上記視点数を「８」とする。
　次に、表示制御部３０により、各表示用視点画像の表示時間ｔを設定する（ステップＳ３２）。動画化時の表示繰り返し周期を２４０ｍｓｅｃとした場合、４視点であれば表示時間ｔを６０ｍｓｅｃとし、８視点であれば表示時間ｔを３０ｍｓｅｃに設定する。これにより、レンズ間隔が大きいシートタイプＡでは、レンズ間隔が小さいシートタイプＢよりも各表示用視点画像の表示時間を短くして、全視点の表示用視点画像の表示に要する表示時間を同じにする。
　次に、表示変換部２８により、印画用視点画像に対して所定の画像処理を施して、表示用視点画像を生成する。ステップＳ６～Ｓ１４にて選択されたレンズシートのレンズ間隔に応じて、各印画用視点画像に対して歪み処理を施す（ステップＳ３４）。Ｐ（ｘ，ｙ）を表示用画像の座標（ｘ，ｙ）の画素、Ｍ（ｎ，ｘ，ｙ）をシートタイプｎごとの透過率マスクとした場合、Ｐ（ｘ，ｙ）＝Ｐ（ｘ，ｙ）×Ｍ（ｎ，ｘ，ｙ）を演算する。例えば、図８に示すように、選択されたレンズシートのレンズ間隔及びレンズ形状に応じて、透過率マスクを用いて、各表示用視点画像のレンチキュラーレンズの山の部分は明るく、谷の部分は暗くなるように画像処理（透過率変換）を行う。これにより、レンチキュラーレンズの谷の部分を視覚的に確認できるようにする。即ち、レンチキュラーレンズを介した立体画像の見え方を表示部２６で模擬表示するための画像処理（歪処理）を施している。
　次に、表示制御部３０により、歪み処理により生成された各表示用視点画像を、表示部２６に順番にかつ繰り返し表示させることにより、動画表示させる（ステップＳ３６）。例えば、図６Ａに示したシートタイプＡのレンズシートの場合、第１視点～第８視点の順番に、一視点画像あたり３０ｍｓｅｃで切り替えながら表示した後、第７視点～第１視点の順番に一視点画像あたり３０ｍｓｅｃで切り替えながら表示し、その後、同様に繰り返して表示する。図６Ｂに示したシートタイプＢのレンズシートの場合、第１視点～第４視点の順番に、一視点画像あたり６０ｍｓｅｃで切り替えながら表示した後、第３視点～第１視点の順番に一視点画像あたり６０ｍｓｅｃで切り替えながら表示し、その後、同様に繰り返して表示する。
　図９は、第１実施形態における確認画像の生成・表示処理（図４のステップＳ２２）のほかの例を示すフローチャートである。
　ステップＳ４０～４２は、図７のステップＳ３０～３２と同様である。
　次に、表示変換部２８により、印画用視点画像に対して所定の画像処理を施して、表示用視点画像を生成する。まず、ステップＳ６～Ｓ１４にて選択されたレンズシートのレンズ間隔に応じて、そのレンズシートに印画する各視点画像の解像度を変換する（ステップＳ４４）。例えば、４視点であれば水平画素数を１２８０、８視点であれば水平画素数を６４０に設定する。これにより、レンズ間隔の大きいシートタイプＡが選択された場合、レンズ間隔の小さいシートタイプＢが選択された場合に比べて、各視点画像の解像度を低下させる。
　次に、表示変換部２８により、最大視点（本例では８視点）の場合には、表示部２６の表示サイズに合わせて各視点画像を拡大する（ステップＳ４６）。即ち、表示部２６における表示サイズが同一となるように、各視点画像をリサイズする。
　次に、表示変換部２８により、表示部２６に表示させる各視点画像の表示サイズを、レンズシートに印画される立体画像の印画サイズ（プリント出力サイズ）と同じサイズにリサイズし、表示部２６に表示する（ステップＳ４８）。即ち、表示部２６に表示される立体画像の表示サイズがレンズシートに印画される立体画像のサイズと同じサイズとなるように多視点画像をリサイズする。これにより、表示用視点画像が生成される。そして、表示制御部３０により、各表示用視点画像を表示部２６に順番にかつ繰り返し表示させることにより、動画表示させる。
　なお、レンズシートを視差量頻度情報に応じてシート選択する場合（第１実施例）を例に説明したが、本発明はこのような場合に限定されない。以下では、最大視差量情報に応じてシート選択する場合（第２実施例）、及び、視差範囲に応じてシート選択する場合（第３実施例）について、説明する。
　図１０は、第２実施例のシート選択を行う立体画像印画処理の流れの一例を示すフローチャートである。
　ステップＳ２～Ｓ５は、図４の第１実施例と同様である。本例では、ステップＳ５にて、視差分布情報として、少なくとも最大視差量情報が算出される。
　第２実施例では、ステップＳ６ｍにて近側の最大視差量（図５Ａ及び図５Ｂで前景側の視差量の最大値）が所定の閾値Ｍ１を越える場合、又はステップＳ８ｍにて遠側の最大視差量（図５Ａ及び図５Ｂで背景側の視差量の最大値）が所定の閾値Ｍ２を越える場合には、レンズ間隔（ピッチ）が大きいシートタイプＡのレンズシートを選択する（ステップＳ１２）。その一方で、近側の最大視差量がＭ１以下であり、且つ、遠側の最大視差量が閾値Ｍ２以下である場合には、レンズ間隔（ピッチ）が小さいシートタイプＢのレンズシートを選択する（ステップＳ１４）。ステップＳ１６～Ｓ２８は、図４の第１実施例と同様である。
　図１１は、第３実施例のシート選択を行う立体画像印画処理の流れの一例を示すフローチャートである。
　ステップＳ２～Ｓ５は、図４の第１実施例と同様である。本例では、ステップＳ５にて、視差分布情報として、少なくとも視差範囲が算出される。
　第３実施例では、ステップＳ６ｒにて立体画像の近側の最大視差量と遠側の最大視差量との差を示す視差範囲（図５Ａ及び図５ＢのＭｆｒ）が所定の閾値Ｒを越える場合には、レンズ間隔（ピッチ）が大きいシートタイプＡのレンズシートを選択する（ステップＳ１２）。その一方で、視差範囲Ｍｆｒが閾値Ｒ以下である場合には、レンズ間隔（ピッチ）が小さいシートタイプＢのレンズシートを選択する
（ステップＳ１４）。ステップＳ１６～Ｓ２８は、図４の第１実施例と同様である。
　以下では、画像ファイルの付属情報から最大視差量情報を取得して、その最大視差量情報その応じてシート選択する場合（第４実施例）、及び、画像ファイルの付属情報から視差範囲を取得して、その視差範囲に応じてシート選択する場合（第５実施例）について、説明する。
　図１２は、視点１、２の画像（左眼画像及び右眼画像）からなる立体画像と、視点１の画像の付属情報（ヘッダ１）及び視点２の画像の付属情報（ヘッダ２）とを有する画像ファイルの一例を示す。画像読取り部１２により図１２の画像ファイル５０が取得されると、付属情報取得部１４により付属情報内の視差量情報が取得される。本例の視差量情報には、視点１の画像と視点２の画像との視差分布に関する情報（視差分布情報）が含まれている。
　図１３は、第４実施例のシート選択を行う立体画像印画処理の流れの一例を示すフローチャートである。
　まず、画像読取り部１２により、図１２の画像ファイルを、記録媒体などから読み取ることで取得する（ステップＳ１０２）。
　次に、付属情報取得部１４により、画像ファイルから付属情報（ヘッダ部）を取得する（ステップＳ１０４）。本例では、ステップＳ１０２にて、付属情報から、少なくとも、近側の最大視差量及び遠側の最大視差量が取得される。
　第４実施例では、ステップＳ６ｍにて近側の最大視差量（図５Ａ及び図５Ｂで前景側の視差量の最大値）が所定の閾値Ｍ１を越える場合、又はステップＳ８ｍにて遠側の最大視差量（図５Ａ及び図５Ｂで背景側の視差量の最大値）が所定の閾値Ｍ２を越える場合には、レンズ間隔（ピッチ）が大きいシートタイプＡのレンズシートを選択する（ステップＳ１２）。その一方で、近側の最大視差量がＭ１以下であり、且つ、遠側の最大視差量が閾値Ｍ２以下である場合には、レンズ間隔（ピッチ）が小さいシートタイプＢのレンズシートを選択する（ステップＳ１４）。ステップＳ１６～Ｓ２８は、図４の第１実施例と同様である。
　図１４は、第５実施例のシート選択を行う立体画像印画処理の流れの一例を示すフローチャートである。
　ステップＳ１０２～Ｓ１０４は、図１３の第４実施例と同様である。本例では、ステップＳ１０４にて、付属情報から、少なくとも、近側の最大視差量と遠側の最大視差量との差を示す視差範囲が取得される。
　第５実施例では、ステップＳ６ｒにて視差範囲（図５Ａ及び図５ＢのＭｆｒ）が所定の閾値Ｒを越える場合には、レンズ間隔（ピッチ）が大きいシートタイプＡのレンズシートを選択する（ステップＳ１２）。その一方で、視差範囲Ｍｆｒが閾値Ｒ以下である場合には、レンズ間隔（ピッチ）が小さいシートタイプＢのレンズシートを選択する（ステップＳ１４）。ステップＳ１６～Ｓ２８は、図４の第１実施例と同様である。
　＜第２実施形態＞
　次に、第２実施形態における立体画像印画装置について説明する。以下では、第１実施形態と異なる点のみ説明する。
　本実施形態の立体画像印画装置の全体構成は、図１を用いて説明した第１実施形態の立体画像印画装置と同様の構成要素を備えている。ただし、本実施形態における表示変換部２８は、シート選択部２２により選択されたレンズシートに印画される複数の視点数ｎ（ｎは３以上の整数）の印画用立体画像のうちの隣接する２視点の印画用視点画像（一視点差分の２つの視点画像）から、仮想視点の視点画像を生成する。また、本実施形態の表示変換部２８は、前記２視点の印画用視点画像及び前記生成された仮想視点の視点画像からなる多視点画像の解像度を変換し又は歪み処理する画像処理を行うことにより、表示用立体画像を生成する。表示制御部３０は、表示変換部２８で画像処理・生成された各表示用視点画像を表示部２６に順番にかつ繰り返し表示させることにより動画表示させる。上記のように、仮想視点の視点画像を挿入することにより、ユーザが観察する動画の動きが滑らかになる。
　図１５は、第２実施形態における表示用立体画像（確認画像）の生成・表示処理（図４のステップＳ２２）の一例を示すフローチャートである。
　ステップＳ５０は、図７のステップＳ３０と同様である。
　次に、表示変換部２８により、図４のステップＳ６～Ｓ１４にて選択されたレンズシートに印画される印画用立体画像のうちの隣接する２視点の印画用視点画像から仮想視点の画像を生成する（ステップＳ５２）。
　例えば、図１６Ａに示すシートタイプＡの場合には、レンズシートに印画される８視点の印画用立体画像から、追加の５６視点の仮想視点画像を生成する。８視点の印画用視点画像から５６視点の仮想視点画像を生成する際には、例えば、第１視点と第２視点、第２視点と第３視点、…、第７視点と第８視点の視点画像の各組（合計７組）から、それぞれ８視点ずつ仮想視点画像を生成する。これにより、合計６４視点の表示用視点画像を生成することができる。例えば、図１６Ｂに示すシートタイプＢの場合には、レンズシートに印画される４視点の印画用立体画像から、追加の２８視点の仮想視点画像を生成する。４視点の印画用視点画像から２８視点の仮想視点画像を生成する際には、例えば、第１視点と第２視点、第２視点と第３視点、第３視点と第４視点の視点画像の各組（合計３組）から、それぞれ８視点ずつ仮想視点画像を生成し、第１視点および第４視点の視点画像に対してそれぞれ２視点ずつ外挿する。これにより、合計３２視点の表示用視点画像を生成することができる。なお、視点画像の挿入の仕方（内挿および外挿、挿入視点数）は上記に限定されるものではない。
　次に、表示制御部３０により、各表示用視点画像の表示時間ｔを設定する（ステップＳ５４）。例えば、２視点分の動画化時の表示繰り返し周期を２４０ｍｓｅｃとした場合、表示用立体画像が６４視点の場合（印画用立体画像が８視点の場合）、視点画像１枚当たりの表示時間は、ｔ＝３．７５ｍｓｅｃに設定される。一方、表示用立体画像が３２視点の場合（印画用立体画像が４視点の場合）、視点画像１枚当たりの表示時間は、ｔ＝７．５ｍｓｅｃに設定される。
　ステップＳ５６は、図７のステップＳ３４と同様である。例えば、シートタイプの場合、そのレンズ間隔（例えば５０ＬＰＩ）に応じて、印画用視点画像と、該印画用視点画像から生成された仮想視点の視点画像からなる表示用立体画像に対して歪み処理を施す。これにより、表示用立体画像が生成される。
　次に、ステップＳ５６により画像処理された各視点画像を、表示部２６に順番にかつ繰り返し表示させることにより動画表示させる（ステップＳ５８）。
　例えば、図１６Ａに示すようにシートタイプＡに対応する確認画像表示の場合、第１視点、（第１視点と第２視点から生成した仮想視点画像８枚）、第２視点、（第２視点と第３視点から生成した仮想視点画像８枚）、第３視点、（第３視点と第４視点から生成した仮想視点画像８枚）、第４視点、（第４視点と第５視点から生成した仮想視点画像８枚）、第５視点、（第５視点と第６視点から生成した仮想視点画像８枚）、第６視点、（第６視点と第７視点から生成した仮想視点画像８枚）、第７視点、（第７視点と第８視点から生成した仮想視点画像８枚）、第８視点の順番に表示した後、上記と逆の順番で折り返すように表示し、以後、同様な表示を繰り返す。例えば、図１６Ｂに示すようにシートタイプＢに対応する確認画像表示の場合、（第１視点から外挿した仮想視点画像２枚）、第１視点、（第１視点と第２視点から生成した仮想視点画像８枚）、第２視点、（第２視点と第３視点から生成した仮想視点画像８枚）、第３視点、（第３視点と第４視点から生成した仮想視点画像８枚）、第４視点、（第４視点から外挿した仮想視点画像２枚）の順番に表示した後、上記と逆の順番で折り返すように表示し、以後、同様な表示を繰り返す。
　なお、図１５では、レンズ間隔に応じて歪処理を行う場合を例に説明したが、本発明はこのような場合に限定されない。第１実施形態にて説明したように、レンズ間隔に応じて多視点画像の解像度を変換するようにしてもよい。
　なお、前述の第１実施形態及び第２実施形態にて、レンズシートの選択の態様は各種ある。選択したシートタイプのレンズシート自体を直接選択する態様のほか、例えば、選択したシートタイプのレンズシートを収納したカセット等の収容体を選択する態様、選択したシートタイプのレンズシートをプリントするプリンタ（印画手段）を選択する態様などを適用することが可能である。
　また、輻輳点（クロスポイント）の近側及び遠側の両方の視差量に基づいてシート選択する場合を例に説明したが、本発明はこのような場合に特に限定されない。例えば、図４のフローチャートにおいて、Ｓ６（近側の頻度判定）又はＳ８（遠側の頻度判定）のうちいずれか一方のみ行うようにしてもよい。また、例えば、図１０、図１３のフローチャートにおいて、Ｓ６ｍ（近側の最大視差量判定）又はＳ８ｍ（遠側の最大視差量判定）のうちいずれか一方のみ行うようにしてもよい。
　なお、本発明において、入力される立体画像（多視点画像）の視点数は２視点に限定されるものでない。例えば、３視点の入力多視点画像（視点番号＝１，２，３）から８視点の印画用視点画像を生成する場合には、まず、入力視点画像（視点番号＝１）と入力視点画像（視点番号＝２）の間に３視点分の仮想視点画像を挿入し、入力視点画像（視点番号＝２）と入力視点画像（視点番号＝３）の間に３視点分の仮想視点画像を挿入する。これにより、合計９視点分の視点画像（視点番号＝１，Ａ１，Ａ２，Ａ３，２，Ｂ１，Ｂ２，Ｂ３，３）を得ることができる。次に、上記９視点分の視点画像のうち、片側８視点分（例えば、視点番号＝１，Ａ１，Ａ２，Ａ３，２，Ｂ１，Ｂ２，Ｂ３の８視点、視点番号＝Ａ１，Ａ２，Ａ３，２，Ｂ１，Ｂ２，Ｂ３，３の８視点）を選択することにより、８視点の印画用視点画像を得ることができる。
　上記のように、印画用視点画像を内挿により生成する場合には、まず、入力される視点画像の間にそれぞれ略同数の仮想視点画像を挿入することにより、印画用視点画像の視点数以上で、印画用視点画像の視点数に最も近い数の視点画像を生成する。次に、内挿により得られた視点画像の視点数が、印画用視点画像の視点数より大きい場合には、内挿により得られた視点画像から、上記視点数分の隣り合う視点画像を選択する。これにより、上記視点数分の印画用視点画像を得ることができる。
　前述の第１及び第２実施形態に記載したように、課題を解決するための手段の欄に記載の装置発明のほか、以下の方法発明が提供される。
　２視点以上の多視点画像を入力する画像入力ステップと、前記入力された多視点画像の視差の分布に関する情報を取得する情報取得ステップと、前記取得された視差の分布に関する情報に基づいて、レンチキュラーレンズシートに印画する立体画像の視点数を決定する視点数決定ステップと、前記画像入力ステップにて入力された多視点画像の視点数と前記視点数決定ステップにて決定された視点数とを比較して、前記入力された多視点画像の視点数の方が少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成ステップと、前記画像入力ステップにて入力された多視点画像と前記視点画像生成ステップにて生成された視点画像とからなる立体画像をレンチキュラーレンズシートに印画する印画ステップとを備える第１の方法発明が提供される。
　前述の第１の方法発明の一態様では、前記情報取得ステップでは、前記入力された多視点画像の視差量のうちの近側の第１の閾値を越える視差量の頻度、又は遠側の第２の閾値を越える視差量の頻度のうちの少なくとも一方の頻度を示す情報を取得し、前記視点数決定ステップでは、前記取得された第１の閾値を越える視差量の頻度が第３の閾値を越える場合、又は前記取得された第２の閾値を越える視差量の頻度が第４の閾値を越える場合には、前記第３の閾値又は第４の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くする。
　前述の第１の方法発明の一態様では、前記情報取得ステップでは、前記入力された多視点画像の視差量のうちの近側及び遠側の最大視差量のうちの少なくとも一方の最大視差量を示す情報を取得し、前記視点数決定ステップでは、前記取得された最大視差量が所定の閾値を越える場合には、所定の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くする。
　前述の第１の方法発明の一態様では、前記情報取得ステップでは、前記入力された多視点画像の近側の最大視差量と遠側の最大視差量との差を示す視差範囲を取得し、前記視点数決定ステップでは、前記取得された視差範囲が所定の閾値を越える場合には、所定の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くする。
　前述の第１の方法発明の一態様は、レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから１つのレンチキュラーレンズシートを選択するシート選択ステップであって、前記視点数決定ステップにて決定された視点数に基づいて１つのレンチキュラーレンズシートを選択するシート選択ステップを更に備える。
　また、２視点以上の多視点画像からなる立体画像を入力する画像入力ステップと、前記入力された多視点画像の視差の分布に関する情報を取得する情報取得ステップと、レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから１つのレンチキュラーレンズシートを選択するシート選択ステップであって、前記情報取得ステップで取得した視差の分布に関する情報に基づいて１つのレンチキュラーレンズシートを選択するシート選択ステップと、前記シート選択ステップにて選択されたレンチキュラーレンズシートに前記入力された多視点画像を含む立体画像を印画する印画ステップとを含む第２の方法発明が提供される。
　前述の第２の方法発明の一態様では、前記情報取得ステップでは、前記入力された立体画像の視差量のうちの近側の第１の閾値を越える視差量の頻度、又は遠側の第２の閾値を越える視差量の頻度のうちの少なくとも一方の頻度を示す情報を取得し、前記シート選択ステップでは、前記取得された第１の閾値を越える視差量の頻度が第３の閾値を越える場合、又は前記取得された第２の閾値を越える視差量の頻度が第４の閾値を越える場合には、前記第３の閾値又は第４の閾値以内の場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する。
　前述の第２の方法発明の一態様では、前記情報取得ステップでは、前記入力された多視点画像の視差量のうちの近側及び遠側の最大視差量のうちの少なくとも一方の最大視差量を示す情報を取得し、前記シート選択ステップでは、前記取得された最大視差量が所定の閾値を越える場合には、所定の閾値以内の場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する。
　前述の第２の方法発明の一態様では、前記情報取得ステップでは、前記入力された多視点画像の近側の最大視差量と遠側の最大視差量との差を示す視差範囲を取得し、前記シート選択ステップでは、前記取得された視差範囲が所定の閾値を越える場合には、所定の閾値以内の場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する。
　前述の第２の方法発明の一態様は、前記入力された多視点画像の視点数が、前記選択されたレンチキュラーレンズシートに印画する立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成ステップを更に含む。
　前述の第１及び第２の方法発明の一態様では、前記情報取得ステップは、前記入力された多視点画像のうちの左端の視点画像と右端の視点画像との特徴が一致する対応点を検出する対応点検出ステップと、前記対応点検出ステップにより検出された対応点から左端の視点画像と右端の視点画像との視差量を算出する視差量算出ステップとを有し、前記視差量算出ステップにより算出された視差量に基づいて前記入力された多視点画像の視差量の大きさに関する情報を取得する。
　前述の第１及び第２の方法発明の一態様では、前記画像入力ステップでは、前記多視点画像とともに付属情報が記録された画像ファイルを取得し、前記情報取得ステップでは、前記画像ファイルの付属情報から前記視差の分布に関する情報を取得する。
　前述の第１及び第２の方法発明の一態様では、前記印画ステップは、前記選択されたレンチキュラーレンズシートに該印画ステップの最高解像度で立体画像を印画するものであって、前記選択されたレンチキュラーレンズシートのレンズ間隔に比例した視点数の立体画像を印画する。
　前述の第１及び第２の方法発明の一態様は、前記シート選択ステップにて選択されたレンチキュラーレンズシートのレンズ間隔に応じて該レンチキュラーレンズシートに印画する立体画像の解像度を変換し、又は各視点画像を歪み処理する画像処理ステップと、前記画像処理ステップにより処理された各視点画像を、平面画像を表示する表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御ステップとを更に含む。
　前述の第１及び第２の方法発明の一態様は、前記シート選択ステップにて選択されたレンチキュラーレンズシートに印画される複数の視点数ｎ（ｎは３以上の整数）の多視点画像のうちの隣接する２視点画像から仮想視点の画像を生成するステップと、前記２視点画像及び前記生成された仮想視点の視点画像からなる表示用の立体画像における各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理ステップと、前記画像処理ステップにて処理された各視点画像を平面画像を表示する表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御ステップとを更に含む。
　前述の第１及び第２の方法発明の一態様では、前記画像処理ステップでは、前記シート選択ステップにより選択されたレンチキュラーレンズシートのレンズ間隔及びレンズ形状に応じて、各視点画像のレンチキュラーレンズの山の部分は明るく、谷の部分は暗くなるように各視点画像を画像処理する。
　前述の第１及び第２の方法発明の一態様では、前記画像処理ステップでは、前記シート選択ステップによりレンズ間隔の大きいレンチキュラーレンズシートが選択されると、レンズ間隔の小さいレンチキュラーレンズシートが選択された場合に比べて各視点画像の解像度を低下させる。
　前述の第１及び第２の方法発明の一態様では、前記表示制御ステップでは、前記表示手段に表示させる各視点画像の表示サイズを、前記レンチキュラーレンズシートに印画される立体画像の印画サイズと同じサイズにする。
　前述の第１及び第２の方法発明の一態様は、前記レンチキュラーレンズシートのシートタイプを手動により変更するタイプ変更ステップを更に含み、前記印画ステップは、前記タイプ変更ステップによりレンチキュラーレンズシートのシートタイプが変更されると、変更後のレンチキュラーレンズシートに前記入力した立体画像を印画する。
　本発明は、本明細書において説明した例や図面に図示された例には限定されず、本発明の要旨を逸脱しない範囲において、各種の設計変更や改良を行ってよいのはもちろんである。
　１２…画像読取り部、１４…付属情報取得部、１６…画像解析部、１８…画角補正部、２０…多視点変換部、２２…シート選択部、２４…印画イメージ変換部、２６…表示部、２８…表示変換部、３０…表示制御部、３２…印画部、３４…操作部、３６…設定部（印画種別設定部）

Claims (38)

  1. 　２視点以上の多視点画像を入力する画像入力手段と、
    　前記入力された多視点画像の視差の分布に関する情報を取得する情報取得手段と、
    　前記情報取得手段により取得された視差の分布に関する情報に基づいて、レンチキュラーレンズシートに印画する立体画像の視点数を決定する視点数決定手段と、
    　前記画像入力手段を介して入力された多視点画像の視点数と前記視点数決定手段により決定された視点数とを比較する比較手段と、
    　前記画像入力手段を介して入力された多視点画像の視点数が、前記レンチキュラーレンズシートに印画する立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成手段と、
    　前記画像入力手段を介して入力された多視点画像と前記視点画像生成手段により生成された視点画像とからなる立体画像をレンチキュラーレンズシートに印画する印画手段と、
    　を備える立体画像印画装置。
  2. 　前記情報取得手段は、前記入力された多視点画像の視差量のうちの近側の第１の閾値を越える視差量の頻度、又は遠側の第２の閾値を越える視差量の頻度のうちの少なくとも一方の頻度を示す情報を取得し、
    　前記視点数決定手段は、前記取得された第１の閾値を越える視差量の頻度が第３の閾値を越える場合、又は前記取得された第２の閾値を越える視差量の頻度が第４の閾値を越える場合には、前記第３の閾値又は第４の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くする、請求項１に記載の立体画像印画装置。
  3. 　前記情報取得手段は、前記入力された多視点画像の視差量のうちの近側及び遠側の最大視差量の少なくとも一方の最大視差量を示す情報を取得し、
    　前記視点数決定手段は、前記取得された最大視差量が所定の閾値を越える場合には、所定の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くする、請求項１に記載の立体画像印画装置。
  4. 　前記情報取得手段は、前記入力された多視点画像の近側の最大視差量と遠側の最大視差量との差を示す視差範囲を取得し、
    　前記視点数決定手段は、前記取得された視差範囲が所定の閾値を越える場合には、所定の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くする、請求項１に記載の立体画像印画装置。
  5. 　レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから１つのレンチキュラーレンズシートを選択するシート選択手段であって、前記視点数決定手段により決定された視点数に基づいて１つのレンチキュラーレンズシートを選択するシート選択手段を更に備える請求項１から４のうちいずれか１項に記載の立体画像印画装置。
  6. 　２視点以上の多視点画像を入力する画像入力手段と、
    　前記入力された多視点画像の視差の分布に関する情報を取得する情報取得手段と、
    　レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから１つのレンチキュラーレンズシートを選択するシート選択手段であって、前記情報取得手段により取得した視差の分布に関する情報に基づいて１つのレンチキュラーレンズシートを選択するシート選択手段と、
    　前記シート選択手段により選択されたレンチキュラーレンズシートに前記入力された多視点画像を含む立体画像を印画する印画手段と、
    　を備える立体画像印画装置。
  7. 　前記情報取得手段は、前記入力された多視点画像の視差量のうちの近側の第１の閾値を越える視差量の頻度、又は遠側の第２の閾値を越える視差量の頻度のうちの少なくとも一方の頻度を示す情報を取得し、
    　前記シート選択手段は、前記取得された第１の閾値を越える視差量の頻度が第３の閾値を越える場合、又は前記取得された第２の閾値を越える視差量の頻度が第４の閾値を越える場合には、前記第３の閾値又は第４の閾値以内である場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する、請求項６に記載の立体画像印画装置。
  8. 　前記情報取得手段は、前記入力された多視点画像の視差量のうちの近側及び遠側の最大視差量の少なくとも一方の最大視差量を示す情報を取得し、
    　前記シート選択手段は、前記取得された最大視差量が所定の閾値を越える場合には、所定の閾値以内である場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する、請求項６に記載の立体画像印画装置。
  9. 　前記情報取得手段は、前記入力された多視点画像の近側の最大視差量と遠側の最大視差量との差を示す視差範囲を取得し、
    　前記シート選択手段は、前記取得された視差範囲が所定の閾値を越える場合には、所定の閾値以内である場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する、請求項６に記載の立体画像印画装置。
  10. 　前記画像入力手段を介して入力された多視点画像の視点数が、前記選択されたレンチキュラーレンズシートに印画する立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成手段を更に備える請求項６から９のいずれか１項に記載の立体画像印画装置。
  11. 　前記情報取得手段は、
    　前記入力された多視点画像のうちの左端の視点画像と右端の視点画像との特徴が一致する対応点を検出する対応点検出手段と、
    　前記対応点検出手段により検出された対応点から左端の視点画像と右端の視点画像との視差量を算出する視差量算出手段とを有し、
    　前記視差量算出手段により算出された視差量に基づいて前記入力された多視点画像の視差の分布に関する情報を取得する、請求項１から１０のうちいずれか１項に記載の立体画像印画装置。
  12. 　前記画像入力手段は、前記多視点画像とともに付属情報が記録された画像ファイルを取得し、
    　前記情報取得手段は、前記画像ファイルの付属情報から前記入力された多視点画像の視差の分布に関する情報を取得する、請求項１から１０のうちいずれか１項に記載の立体画像印画装置。
  13. 　前記印画手段は、前記レンチキュラーレンズシートに該印画手段の最高解像度で立体画像を印画するものであって、前記レンチキュラーレンズシートのレンズ間隔に比例した視点数の立体画像を印画する、請求項１から１２のいずれか１項に記載の立体画像印画装置。
  14. 　平面画像を表示する表示手段と、
    　前記レンチキュラーレンズシートのレンズ間隔に応じて該レンチキュラーレンズシートに印画する立体画像の各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理手段と、
    　前記画像処理手段により処理された各視点画像を前記表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御手段と、
    　を更に備える請求項１から１３のいずれか１項に記載の立体画像印画装置。
  15. 　平面画像を表示する表示手段と、
    　前記レンチキュラーレンズシートに印画される視点数ｎ（ｎは３以上の整数）の立体画像のうちの隣接する２視点画像から仮想視点の視点画像を生成する仮想視点画像生成手段と、
    　前記２視点画像及び前記生成された仮想視点の視点画像からなる表示用の立体画像における各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理手段と、
    　前記画像処理手段により処理された各視点画像を前記表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御手段と、
    　を更に備える請求項１から１３のいずれか１項に記載の立体画像印画装置。
  16. 　前記画像処理手段は、前記レンチキュラーレンズシートのレンズ間隔及びレンズ形状に応じて、各視点画像のレンチキュラーレンズの山の部分は明るく、谷の部分は暗くなるように各視点画像を画像処理する、請求項１４又は１５に記載の立体画像印画装置。
  17. 　前記画像処理手段は、前記レンチキュラーレンズシートのレンズ間隔が大きいほど各視点画像の解像度を低下させる、請求項１４又は１５に記載の立体画像印画装置。
  18. 　前記表示制御手段は、前記表示手段に表示させる各視点画像の表示サイズを、前記レンチキュラーレンズシートに印画される立体画像の印画サイズと同じサイズにする、請求項１４から１７のいずれか１項に記載の立体画像印画装置。
  19. 　前記レンチキュラーレンズシートのシートタイプを手動により変更するタイプ変更手段を更に備え、
    　前記印画手段は、前記タイプ変更手段によりレンチキュラーレンズシートのシートタイプが変更されると、変更後のレンチキュラーレンズシートに前記立体画像を印画する、請求項１から１８のうちいずれか１項に記載の立体画像印画装置。
  20. 　２視点以上の多視点画像を入力する画像入力ステップと、
    　前記入力された多視点画像の視差の分布に関する情報を取得する情報取得ステップと、
    　前記取得された視差の分布に関する情報に基づいて、レンチキュラーレンズシートに印画する立体画像の視点数を決定する視点数決定ステップと、
    　前記画像入力ステップにて入力された多視点画像の視点数と前記視点数決定ステップにて決定された視点数とを比較して、前記入力された多視点画像の視点数の方が少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成ステップと、
    　前記画像入力ステップにて入力された多視点画像と前記視点画像生成ステップにて生成された視点画像とからなる立体画像をレンチキュラーレンズシートに印画する印画ステップと、
    　を備える立体画像印画方法。
  21. 　前記情報取得ステップでは、前記入力された多視点画像の視差量のうちの近側の第１の閾値を越える視差量の頻度、又は遠側の第２の閾値を越える視差量の頻度のうちの少なくとも一方の頻度を示す情報を取得し、
    　前記視点数決定ステップでは、前記取得された第１の閾値を越える視差量の頻度が第３の閾値を越える場合、又は前記取得された第２の閾値を越える視差量の頻度が第４の閾値を越える場合には、前記第３の閾値又は第４の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くする、請求項２０に記載の立体画像印画方法。
  22. 　前記情報取得ステップでは、前記入力された多視点画像の視差量のうちの近側及び遠側の最大視差量のうちの少なくとも一方の最大視差量を示す情報を取得し、
    　前記視点数決定ステップでは、前記取得された最大視差量が所定の閾値を越える場合には、所定の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くする、請求項２０に記載の立体画像印画方法。
  23. 　前記情報取得ステップでは、前記入力された多視点画像の近側の最大視差量と遠側の最大視差量との差を示す視差範囲を取得し、
    　前記視点数決定ステップでは、前記取得された視差範囲が所定の閾値を越える場合には、所定の閾値以内の場合に比べて、前記レンチキュラーレンズシートに印画する立体画像の視点数を多くする、請求項２０に記載の立体画像印画方法。
  24. 　レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから１つのレンチキュラーレンズシートを選択するシート選択ステップであって、前記視点数決定ステップにて決定された視点数に基づいて１つのレンチキュラーレンズシートを選択するシート選択ステップを更に備える請求項２０から２３のうちいずれか１項に記載の立体画像印画方法。
  25. 　２視点以上の多視点画像からなる立体画像を入力する画像入力ステップと、
    　前記入力された多視点画像の視差の分布に関する情報を取得する情報取得ステップと、
    　レンズ間隔が異なる複数のシートタイプのレンチキュラーレンズシートから１つのレンチキュラーレンズシートを選択するシート選択ステップであって、前記情報取得ステップで取得した視差の分布に関する情報に基づいて１つのレンチキュラーレンズシートを選択するシート選択ステップと、
    　前記シート選択ステップにて選択されたレンチキュラーレンズシートに前記入力された多視点画像を含む立体画像を印画する印画ステップと、
    　を含む立体画像印画方法。
  26. 　前記情報取得ステップでは、前記入力された立体画像の視差量のうちの近側の第１の閾値を越える視差量の頻度、又は遠側の第２の閾値を越える視差量の頻度のうちの少なくとも一方の頻度を示す情報を取得し、
    　前記シート選択ステップでは、前記取得された第１の閾値を越える視差量の頻度が第３の閾値を越える場合、又は前記取得された第２の閾値を越える視差量の頻度が第４の閾値を越える場合には、前記第３の閾値又は第４の閾値以内の場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する、請求項２５に記載の立体画像印画方法。
  27. 　前記情報取得ステップでは、前記入力された多視点画像の視差量のうちの近側及び遠側の最大視差量のうちの少なくとも一方の最大視差量を示す情報を取得し、
    　前記シート選択ステップでは、前記取得された最大視差量が所定の閾値を越える場合には、所定の閾値以内の場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する、請求項２５に記載の立体画像印画方法。
  28. 　前記情報取得ステップでは、前記入力された多視点画像の近側の最大視差量と遠側の最大視差量との差を示す視差範囲を取得し、
    　前記シート選択ステップでは、前記取得された視差範囲が所定の閾値を越える場合には、所定の閾値以内の場合に比べてレンズ間隔が大きいシートタイプのレンチキュラーレンズシートを選択する、請求項２５に記載の立体画像印画方法。
  29. 　前記入力された多視点画像の視点数が、前記選択されたレンチキュラーレンズシートに印画する立体画像の視点数よりも少ない場合には、前記入力された多視点画像から不足分の視点画像を生成する視点画像生成ステップを更に含む請求項２５から２８のいずれか１項に記載の立体画像印画方法。
  30. 　前記情報取得ステップは、
    　前記入力された多視点画像のうちの左端の視点画像と右端の視点画像との特徴が一致する対応点を検出する対応点検出ステップと、
    　前記対応点検出ステップにより検出された対応点から左端の視点画像と右端の視点画像との視差量を算出する視差量算出ステップとを有し、
    　前記視差量算出ステップにより算出された視差量に基づいて前記入力された多視点画像の視差量の大きさに関する情報を取得する、請求項２０から２９のいずれか１項に記載の立体画像印画方法。
  31. 　前記画像入力ステップでは、前記多視点画像とともに付属情報が記録された画像ファイルを取得し、
    　前記情報取得ステップでは、前記画像ファイルの付属情報から前記視差の分布に関する情報を取得する、請求項２０から３０のうちいずれか１項に記載の立体画像印画方法。
  32. 　前記印画ステップは、前記選択されたレンチキュラーレンズシートに該印画ステップの最高解像度で立体画像を印画するものであって、前記選択されたレンチキュラーレンズシートのレンズ間隔に比例した視点数の立体画像を印画する、請求項２０から３１のいずれか１項に記載の立体画像印画方法。
  33. 　前記シート選択ステップにて選択されたレンチキュラーレンズシートのレンズ間隔に応じて該レンチキュラーレンズシートに印画する立体画像の解像度を変換し、又は各視点画像を歪み処理する画像処理ステップと、
    　前記画像処理ステップにより処理された各視点画像を、平面画像を表示する表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御ステップと、
    　を更に含む請求項２０から３２のいずれか１項に記載の立体画像印画方法。
  34. 　前記シート選択ステップにて選択されたレンチキュラーレンズシートに印画される複数の視点数ｎ（ｎは３以上の整数）の多視点画像のうちの隣接する２視点画像から仮想視点の画像を生成する仮想視点画像生成ステップと、
    　前記２視点画像及び前記生成された仮想視点の視点画像からなる表示用の立体画像における各視点画像の解像度を変換し、又は各視点画像を歪み処理する画像処理ステップと、
    　前記画像処理ステップにて処理された各視点画像を平面画像を表示する表示手段に順番にかつ繰り返し表示させることにより動画表示させる表示制御ステップと、
    　を更に含む請求項２０から３２のいずれか１項に記載の立体画像印画方法。
  35. 　前記画像処理ステップでは、前記シート選択ステップにより選択されたレンチキュラーレンズシートのレンズ間隔及びレンズ形状に応じて、各視点画像のレンチキュラーレンズの山の部分は明るく、谷の部分は暗くなるように各視点画像を画像処理する、請求項３３又は３４に記載の立体画像印画方法。
  36. 　前記画像処理ステップでは、前記シート選択ステップによりレンズ間隔の大きいレンチキュラーレンズシートが選択されると、レンズ間隔の小さいレンチキュラーレンズシートが選択された場合に比べて各視点画像の解像度を低下させる、請求項３３又は３４に記載の立体画像印画方法。
  37. 　前記表示制御ステップでは、前記表示手段に表示させる各視点画像の表示サイズを、前記レンチキュラーレンズシートに印画される立体画像の印画サイズと同じサイズにする、請求項３３から３６のいずれか１項に記載の立体画像印画方法。
  38. 　前記レンチキュラーレンズシートのシートタイプを手動により変更するタイプ変更ステップを更に含み、
    　前記印画ステップでは、前記タイプ変更ステップによりレンチキュラーレンズシートのシートタイプが変更されると、変更後のレンチキュラーレンズシートに前記入力した立体画像を印画する、請求項２０から３７のいずれか１項に記載の立体画像印画方法。
PCT/JP2012/052677 2011-02-08 2012-02-07 立体画像印画装置及び立体画像印画方法 WO2012108406A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN2012800082123A CN103348688A (zh) 2011-02-08 2012-02-07 立体图像打印装置和立体图像打印方法
JP2012556888A JP5492311B2 (ja) 2011-02-08 2012-02-07 視点画像生成装置、視点画像生成方法及び立体画像印画装置
US13/960,299 US8896879B2 (en) 2011-02-08 2013-08-06 Device and method for stereoscopic image printing
US14/519,811 US9097964B2 (en) 2011-02-08 2014-10-21 Device and method for stereoscopic image printing

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011-025197 2011-02-08
JP2011025197 2011-02-08

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/960,299 Continuation US8896879B2 (en) 2011-02-08 2013-08-06 Device and method for stereoscopic image printing

Publications (1)

Publication Number Publication Date
WO2012108406A1 true WO2012108406A1 (ja) 2012-08-16

Family

ID=46638620

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/052677 WO2012108406A1 (ja) 2011-02-08 2012-02-07 立体画像印画装置及び立体画像印画方法

Country Status (4)

Country Link
US (2) US8896879B2 (ja)
JP (1) JP5492311B2 (ja)
CN (1) CN103348688A (ja)
WO (1) WO2012108406A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106291952B (zh) * 2015-05-28 2019-09-17 深圳市Tcl高新技术开发有限公司 一种裸眼3d图像的显示方法、装置及液晶显示屏

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006212056A (ja) * 2005-02-01 2006-08-17 Canon Inc 撮影装置及び立体画像生成装置
JP2011081272A (ja) * 2009-10-08 2011-04-21 Nikon Corp 画像表示装置および画像表示方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001346226A (ja) * 2000-06-02 2001-12-14 Canon Inc 画像処理装置、立体写真プリントシステム、画像処理方法、立体写真プリント方法、及び処理プログラムを記録した媒体
JP2003018619A (ja) * 2001-07-03 2003-01-17 Olympus Optical Co Ltd 立体映像評価装置およびそれを用いた表示装置
JP2003209858A (ja) * 2002-01-17 2003-07-25 Canon Inc 立体画像生成方法及び記録媒体
JP4440066B2 (ja) * 2004-10-14 2010-03-24 キヤノン株式会社 立体画像生成プログラム、立体画像生成システムおよび立体画像生成方法
JP4440067B2 (ja) * 2004-10-15 2010-03-24 キヤノン株式会社 立体表示のための画像処理プログラム、画像処理装置および立体表示システム
JP2006163547A (ja) * 2004-12-03 2006-06-22 Canon Inc 立体画像生成プログラム、立体画像生成システム及び立体画像生成装置。
JP4477521B2 (ja) * 2005-02-21 2010-06-09 シャープ株式会社 立体画像表示装置
JP2007098830A (ja) 2005-10-06 2007-04-19 Seiko Epson Corp 印刷装置および印刷方法ならびに印刷用プログラム
JP5249149B2 (ja) * 2009-07-17 2013-07-31 富士フイルム株式会社 立体画像記録装置及び方法、立体画像出力装置及び方法、並びに立体画像記録出力システム
JP5068391B2 (ja) * 2009-10-30 2012-11-07 富士フイルム株式会社 画像処理装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006212056A (ja) * 2005-02-01 2006-08-17 Canon Inc 撮影装置及び立体画像生成装置
JP2011081272A (ja) * 2009-10-08 2011-04-21 Nikon Corp 画像表示装置および画像表示方法

Also Published As

Publication number Publication date
JP5492311B2 (ja) 2014-05-14
JPWO2012108406A1 (ja) 2014-07-03
CN103348688A (zh) 2013-10-09
US9097964B2 (en) 2015-08-04
US20130314678A1 (en) 2013-11-28
US8896879B2 (en) 2014-11-25
US20150036151A1 (en) 2015-02-05

Similar Documents

Publication Publication Date Title
JP5202546B2 (ja) マルチ画像表示を較正および／または視覚化しかつゴーストアーチファクトを低減するためのするための方法およびシステム
JP5426785B2 (ja) 画像処理装置および画像処理方法
JP5068391B2 (ja) 画像処理装置
US9398289B2 (en) Method and apparatus for converting an overlay area into a 3D image
EP3350989B1 (en) 3d display apparatus and control method thereof
KR20110049039A (ko) 능동 부화소 렌더링 방식 고밀도 다시점 영상 표시 시스템 및 방법
US9172939B2 (en) System and method for adjusting perceived depth of stereoscopic images
KR20110124473A (ko) 다중시점 영상을 위한 3차원 영상 생성 장치 및 방법
KR20110015452A (ko) 입체 이미지의 블러 향상
US20120069004A1 (en) Image processing device and method, and stereoscopic image display device
JP2012169759A (ja) 表示装置および表示方法
KR20120053536A (ko) 화상 표시 장치 및 화상 표시 방법
EP2498501A2 (en) 3D image display method and apparatus thereof
EP2490173B1 (en) Method for processing a stereoscopic image comprising a black band and corresponding device
US9088774B2 (en) Image processing apparatus, image processing method and program
CN103369331A (zh) 图像空洞的填补方法和装置及视频图像的处理方法和装置
WO2013054632A1 (ja) 画像処理装置、および画像処理方法、並びにプログラム
JP5931062B2 (ja) 立体画像処理装置、立体画像処理方法、及びプログラム
JP2014506768A (ja) 三次元シーンの深さデータの処理
JP6113411B2 (ja) 画像処理装置
JP2011211551A (ja) 画像処理装置および画像処理方法
KR102180068B1 (ko) 해상도 스케일링 기능을 갖는 멀티뷰 이미지 생성 방법 및 장치
JP5492311B2 (ja) 視点画像生成装置、視点画像生成方法及び立体画像印画装置
JP2013090129A (ja) 画像処理装置、および画像処理方法、並びにプログラム
KR101329069B1 (ko) 깊이 추정 데이터 생성 장치, 깊이 추정 데이터 생성 프로그램이 기록된 컴퓨터 판독 가능한 기록 매체 및, 의사 입체 화상 표시 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12744577

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2012556888

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12744577

Country of ref document: EP

Kind code of ref document: A1