JP4688590B2 - Stereoscopic image processing method, stereoscopic image processing apparatus, program, and recording medium storing program - Google Patents
Stereoscopic image processing method, stereoscopic image processing apparatus, program, and recording medium storing program Download PDFInfo
- Publication number
- JP4688590B2 JP4688590B2 JP2005196459A JP2005196459A JP4688590B2 JP 4688590 B2 JP4688590 B2 JP 4688590B2 JP 2005196459 A JP2005196459 A JP 2005196459A JP 2005196459 A JP2005196459 A JP 2005196459A JP 4688590 B2 JP4688590 B2 JP 4688590B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- stereoscopic
- image processing
- processing apparatus
- integrated
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Stereoscopic And Panoramic Photography (AREA)
- Processing Or Creating Images (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
Description
この発明は、立体画像処理方法及び立体画像処理装置及びプログラム及びプログラムが格納された記録媒体に関する。 The present invention relates to a stereoscopic image processing method, a stereoscopic image processing apparatus, a program, and a recording medium storing the program.
従来より、いわゆる平行法や交差法といった手法に基づく二枚の視差画像(右視点画像と左視点画像)を横方向に並べて一枚の立体視用統合画像を生成することが行われている。ディスプレイに表示した前記立体視用統合画像、或いはプリントアウトした前記立体視用統合画像を両眼で観察することで立体視が行える(特許文献1参照)。 Conventionally, two parallax images (a right viewpoint image and a left viewpoint image) based on a method such as a so-called parallel method or intersection method are arranged in the horizontal direction to generate a single integrated image for stereoscopic viewing. Stereoscopic viewing can be performed by observing the integrated image for stereoscopic viewing displayed on the display or the integrated image for stereoscopic viewing printed out with both eyes (see Patent Document 1).
ところで、前記二枚の視差画像のそれぞれが例えば4(横):3(縦)のアスペクト比を有するとすると、立体視用統合画像におけるアスペクト比は8:3となる。このようなアスペクト比を有する立体視用統合画像を例えば4:3のプリント台紙にプリントアウトしたり、4:3のディスプレイに表示すると、立体視を行う上で不所望な画像となって表示或いはプリントアウトされることになる。 By the way, if each of the two parallax images has an aspect ratio of 4 (horizontal): 3 (vertical), for example, the aspect ratio of the stereoscopic integrated image is 8: 3. When an integrated image for stereoscopic viewing having such an aspect ratio is printed out on a 4: 3 print mount or displayed on a 4: 3 display, for example, it is displayed as an undesired image for stereoscopic viewing. It will be printed out.
具体的には、図4に示すように、プリント範囲が4:3(1.33:1)であり、二枚の視差画像から成る立体視用統合画像の横幅が前記プリント範囲からはみ出している場合、右視点画像の領域について見ると、プリント範囲から実際にはみ出した領域(結果的にトリミングされた領域)と、プリント範囲内ではあるが左視点画像がプリント範囲から実際にはみ出したために立体視に利用できなくなった領域とが生じてしまう。同様のことは左視点画像の領域についても生じ、立体視に利用できる範囲はとても狭くなる。 Specifically, as shown in FIG. 4, the print range is 4: 3 (1.33: 1), and the horizontal width of the stereoscopic integrated image composed of two parallax images protrudes from the print range. In this case, when viewing the area of the right viewpoint image, the area that actually protrudes from the print range (as a result of the trimmed area) and the left viewpoint image that actually protrudes from the print area but within the print area are stereoscopically viewed. Will result in an area that can no longer be used. The same thing occurs for the area of the left viewpoint image, and the range that can be used for stereoscopic viewing becomes very narrow.
この発明は、上記の事情に鑑み、立体視用統合画像がプリントアウト等される場合に不所望な画像カットがなされる事態を極力防止することなどができる立体画像処理方法及び立体画像処理装置及びプログラム及びプログラムが格納された記録媒体を提供することを目的とする。 In view of the above circumstances, the present invention provides a stereoscopic image processing method, a stereoscopic image processing apparatus, and the like that can prevent a situation in which an undesired image cut is made when a stereoscopic integrated image is printed out. It is an object to provide a program and a recording medium storing the program.
この発明の立体画像処理方法は、上記の課題を解決するために、複数の視点画像が並んだ一枚の立体視用統合画像を生成する立体画像処理方法であって、オリジナルの立体視用統合画像の水平サイズ及び垂直サイズをそれぞれH及びVとし、前記立体視用統合画像を内包する加工画像の水平サイズ及び垂直サイズをそれぞれH1及びV1とすると、V1>Vの条件を満足し、且つV1とH1との比率が所定比率の範囲内となる条件を満足するように、前記オリジナルの立体視用統合画像に任意色及び/又は任意模様のパディング領域を付加することを特徴とする。 In order to solve the above-described problem, the stereoscopic image processing method of the present invention is a stereoscopic image processing method for generating a single stereoscopic integrated image in which a plurality of viewpoint images are arranged, and the original stereoscopic integrated If the horizontal size and vertical size of the image are H and V, respectively, and the horizontal size and vertical size of the processed image containing the stereoscopic integrated image are H1 and V1, respectively, the condition of V1> V is satisfied, and V1 A padding area having an arbitrary color and / or an arbitrary pattern is added to the original stereoscopic integrated image so as to satisfy the condition that the ratio between H and H1 falls within a predetermined ratio.
また、この発明の立体画像処理方法は、複数の視点画像が並んだ一枚の立体視用統合画像を生成する立体画像処理方法であって、オリジナルの立体視用統合画像の水平サイズ及び垂直サイズをそれぞれH及びVとし、前記立体視用統合画像を内包する加工画像の水平サイズ及び垂直サイズをそれぞれH1及びV1とすると、V1とH1との比率が所定比率となるように、前記オリジナルの立体視用統合画像に任意色及び/又は任意模様のパディング領域を付加することを特徴とする。 Further, the stereoscopic image processing method of the present invention is a stereoscopic image processing method for generating a single integrated image for stereoscopic viewing in which a plurality of viewpoint images are arranged, and the horizontal size and the vertical size of the original integrated image for stereoscopic viewing. Are H and V, respectively, and H1 and V1 are the horizontal size and vertical size of the processed image including the stereoscopic integrated image, respectively, and the original three-dimensional image is set so that the ratio of V1 and H1 becomes a predetermined ratio. A padding area having an arbitrary color and / or an arbitrary pattern is added to the visual integrated image.
前記複数の視点画像が並んだ一枚の立体視用統合画像は、1組の右視点画像と左視点画像とが互いに横方向に並んだ一枚の立体視用統合画像であってもよい。これらの立体画像処理方法において、VとHとの比率が規定比率を満たさない場合に、前記パディング領域を付加する処理を行うこととしてもよい。 The single integrated image for stereoscopic viewing in which the plurality of viewpoint images are arranged may be a single integrated image for stereoscopic viewing in which a set of right viewpoint images and left viewpoint images are aligned in the horizontal direction. In these stereoscopic image processing methods, when the ratio of V and H does not satisfy the specified ratio, the process of adding the padding area may be performed.
これらの立体画像処理方法において、前記所定比率は、プリント台紙の縦横比率と同一又は略同一であるのがよい。また、これらの立体画像処理方法において、前記所定比率は、ディスプレイの縦横比率と同一又は略同一であるのがよい。 In these three-dimensional image processing methods, the predetermined ratio may be the same as or substantially the same as the aspect ratio of the print mount. In these stereoscopic image processing methods, the predetermined ratio may be the same as or substantially the same as the aspect ratio of the display.
また、この発明の立体画像処理装置は、複数の視点画像が並んだ一枚の立体視用統合画像を生成する立体画像処理装置であって、オリジナルの立体視用統合画像の水平サイズ及び垂直サイズをそれぞれH及びVとし、前記立体視用統合画像を内包する加工画像の水平サイズ及び垂直サイズをそれぞれH1及びV1とすると、V1>Vの条件を満足し、且つV1とH1との比率が所定比率の範囲内となる条件を満足するように、前記オリジナルの立体視用統合画像に任意色及び/又は任意模様のパディング領域を付加する手段を備えたことを特徴とする。 The stereoscopic image processing apparatus of the present invention is a stereoscopic image processing apparatus that generates a single integrated image for stereoscopic viewing in which a plurality of viewpoint images are arranged, and is a horizontal size and a vertical size of the original integrated image for stereoscopic viewing. Are H and V respectively, and the horizontal size and vertical size of the processed image including the integrated image for stereoscopic viewing are H1 and V1, respectively, the condition of V1> V is satisfied, and the ratio of V1 to H1 is predetermined. Means for adding a padding area of an arbitrary color and / or an arbitrary pattern to the original stereoscopic integrated image so as to satisfy a condition within the range of the ratio is provided.
また、この発明の立体画像処理装置は、複数の視点画像が並んだ一枚の立体視用統合画像を生成する立体画像処理装置であって、オリジナルの立体視用統合画像の水平サイズ及び垂直サイズをそれぞれH及びVとし、前記立体視用統合画像を内包する加工画像の水平サイズ及び垂直サイズをそれぞれH1及びV1とすると、V1とH1との比率が所定比率となるように、前記オリジナルの立体視用統合画像に任意色及び/又は任意模様のパディング領域を付加する手段を備えたことを特徴とする。 The stereoscopic image processing apparatus of the present invention is a stereoscopic image processing apparatus that generates a single integrated image for stereoscopic viewing in which a plurality of viewpoint images are arranged, and is a horizontal size and a vertical size of the original integrated image for stereoscopic viewing. Are H and V, respectively, and H1 and V1 are the horizontal size and vertical size of the processed image including the stereoscopic integrated image, respectively, and the original three-dimensional image is set so that the ratio of V1 and H1 becomes a predetermined ratio. Means for adding a padding area of an arbitrary color and / or an arbitrary pattern to the visual integrated image is provided.
前記複数の視点画像が並んだ一枚の立体視用統合画像は、1組の右視点画像と左視点画像とが互いに横方向に並んだ一枚の立体視用統合画像であってもよい。これらの立体画像処理装置において、VとHとの比率が規定比率を満たさない場合に、前記パディング領域を付加する処理を行うこととしてもよい。かかる構成の立体画像処理装置において、前記規定比率を満たさない場合とは、V/H≧2/3を満たさない場合であることとしてもよい。 The single integrated image for stereoscopic viewing in which the plurality of viewpoint images are arranged may be a single integrated image for stereoscopic viewing in which a set of right viewpoint images and left viewpoint images are aligned in the horizontal direction. In these stereoscopic image processing apparatuses, when the ratio of V and H does not satisfy the specified ratio, the process of adding the padding area may be performed. In the stereoscopic image processing apparatus having such a configuration, the case where the prescribed ratio is not satisfied may be a case where V / H ≧ 2/3 is not satisfied.
これら構成の立体画像処理装置において、前記所定比率は、プリント台紙の縦横比率と同一又は略同一であるのがよい。また、これら構成の立体画像処理装置において、前記所定比率は、ディスプレイの縦横比率と同一又は略同一であるのがよい。 In the stereoscopic image processing apparatus having these configurations, the predetermined ratio may be the same as or substantially the same as the aspect ratio of the print mount. In the stereoscopic image processing apparatus having these configurations, the predetermined ratio may be the same as or substantially the same as the aspect ratio of the display.
また、この発明のプログラムは、コンピュータを、上述した立体画像処理装置における前記手段として機能させるものである。また、この発明の記録媒体は、上記プログラムが記録された、コンピュータが読み取り可能な記録媒体である。 Moreover, the program of this invention makes a computer function as the said means in the three-dimensional image processing apparatus mentioned above. The recording medium of the present invention is a computer-readable recording medium on which the program is recorded.
以上説明したように、この発明によれば、立体視用統合画像がプリントアウト等される場合に不所望な画像カットがなされる事態を極力防止することができるなどの効果を奏する。 As described above, according to the present invention, it is possible to prevent as much as possible a situation in which an undesired image cut is made when a stereoscopic integrated image is printed out.
以下、この発明の実施形態を図1乃至図3に基づいて説明していく。 Hereinafter, embodiments of the present invention will be described with reference to FIGS. 1 to 3.
図1はディジタルスチルカメラ1を例示した説明図である。ディジタルスチルカメラ1におけるレンズ機構11は、レンズ群11a、絞り調節を行なう絞り部11b等を備える。撮像素子駆動回路18は撮像素子(例えば、CCD)12を駆動する。撮像素子12は、前記レンズ機構11を経た被写体の映像光を受け、電気信号に変換して出力する。撮像素子12のアスペクト比は例えば4:3である。信号処理回路14は、撮像素子12から出力されてAGC(オートゲインコントローラ)アンプ13にて利得調整された映像信号に対して各種の信号処理を実行し、図示しないカメラモニタに出力する。また、信号処理回路14は、図示しないシャッタが押されたタイミングでの前記映像信号を画像データに変換する。この画像データはマイクロコンピュータ16によってメモリ17に格納される。絞り制御回路15は撮像素子12が出力する信号を入力しており、撮像素子12の映像信号レベルが所定レベルになるように絞り部11bにフィードバックをかける。
FIG. 1 is an explanatory diagram illustrating a digital
上記のディジタルスチルカメラ1を用いて立体視用統合画像を生成し記録することができる。この立体視用統合画像は、複数の視点画像が並んだ一枚の画像としたものである。例えば、ユーザーはメニュー項目のなかの「3D撮影」を選択した後、所望の被写体を撮影する。この1枚目の撮影による被写体のデータは例えば左視点画像データとしてメモリ17に格納される。ディジタルスチルカメラ1は、例えば、「カメラを右側に少し移動させて同じ被写体を撮影してください」といったメッセージをカメラモニタ上に表示する。このメッセージに促されてユーザーは同じ被写体を撮影する。この2枚目の撮影による被写体のデータは右視点画像データとしてメモリ17に格納される。
A stereoscopic integrated image can be generated and recorded using the digital
上記処理により、図2の(a)に示すように、左視点画像データと右視点画像データとがメモリ17に格納されたことになる。ここで、それぞれの画像のアスペクト比をH/2:Vとする(H/2:Vは例えば撮像素子12のアスペクト比である(例えば、4:3である))。そして、これら2枚の画像データが「3D撮影」のモードで得られたものであることを認識しているマイクロコンピュータ16は、左視点画像データと右視点画像データとを横方向に並べて一枚の画像とする。この処理により、図2の(b)に示すように、オリジナルの立体視用統合画像データが得られる。このオリジナルの立体視用統合画像データのアスペクト比はH:Vとなる。なお、カメラに立体画像撮影用のアダプタを取り付けて左右画像を同時に撮影する手法によっても、図2の(b)に示す統合画像を得ることができる。
With the above processing, the left viewpoint image data and the right viewpoint image data are stored in the
次に、マイクロコンピュータ16は、前記オリジナルの立体視用統合画像データの上側及び下側にパディング領域(ダミー領域)を付加する。すなわち、図2の(c)に示すように、前記オリジナルの立体視用統合画像を内包する加工画像を生成する。この加工画像のアスペクト比(H1:V1)は、例えば、4:3である。
Next, the
すなわち、オリジナルの立体視用統合画像の水平サイズ及び垂直サイズをそれぞれH及びVとし、前記立体視用統合画像を内包する加工画像の水平サイズ及び垂直サイズをそれぞれH1及びV1とすると、V1とH1との比率が所定比率となるように、前記オリジナルの立体視用統合画像に任意色のパディング領域を付加する。上記の例では、パディング領域は灰色データで構成しているが、他の色データを用いることもできる。 That is, if the horizontal and vertical sizes of the original stereoscopic integrated image are H and V, respectively, and the horizontal and vertical sizes of the processed image containing the stereoscopic integrated image are H1 and V1, respectively, V1 and H1 A padding region of an arbitrary color is added to the original stereoscopic integrated image so that the ratio to the predetermined ratio becomes a predetermined ratio. In the above example, the padding area is composed of gray data, but other color data can also be used.
上記の例では、オリジナルの立体視用統合画像データのアスペクト比の値がどのような値であろうと関係無しに加工画像のアスペクト比(H1:V1)を所定のアスペクト比とする処理を行ったが、これに限らず、オリジナルの立体視用統合画像データのアスペクト比の値が所定の値を満たさない場合に加工画像を生成する(前記所定アスペクト比とする)こととしてもよい。例えば、図3のフローチャートに示すように、まず、左視点画像データと右視点画像データとを横方向に並べてオリジナルの立体視用統合画像データを得る(ステップS1)。次に、オリジナルの立体視用統合画像データの水平サイズHと垂直サイズVを算出する(ステップS2)。水平サイズH及び垂直サイズVの単位は画素数でよい。次に、V/H≧2/3の条件を満たすかどうかを判断する(ステップS3)。この条件を満たす場合には加工画像の生成は行わない。一方、上記条件を満たさない場合には、ΔV=2×H/3−Vの演算処理を行う(ステップS4)。そして、前記オリジナルの立体視用統合画像データの上側及び下側にそれぞれΔV/2の幅でパディング領域を付加する(ステップS5)。 In the above example, the processing is performed so that the aspect ratio (H1: V1) of the processed image is a predetermined aspect ratio regardless of the aspect ratio of the original stereoscopic integrated image data. However, the present invention is not limited to this, and the processed image may be generated (the predetermined aspect ratio is used) when the aspect ratio value of the original stereoscopic integrated image data does not satisfy the predetermined value. For example, as shown in the flowchart of FIG. 3, first, the left viewpoint image data and the right viewpoint image data are arranged in the horizontal direction to obtain original integrated image data for stereoscopic viewing (step S1). Next, the horizontal size H and vertical size V of the original stereoscopic integrated image data are calculated (step S2). The unit of the horizontal size H and the vertical size V may be the number of pixels. Next, it is determined whether or not the condition of V / H ≧ 2/3 is satisfied (step S3). When this condition is satisfied, the processed image is not generated. On the other hand, if the above condition is not satisfied, a calculation process of ΔV = 2 × H / 3−V is performed (step S4). Then, padding areas are added to the upper and lower sides of the original stereoscopic integrated image data with a width of ΔV / 2, respectively (step S5).
すなわち、オリジナルの立体視用統合画像の水平サイズ及び垂直サイズをそれぞれH及びVとし、前記立体視用統合画像を内包する加工画像の水平サイズ及び垂直サイズをそれぞれH1及びV1とすると、VとHとの比率が規定比率を満たさない場合に、V1とH1との比率が所定比率となるように、前記オリジナルの立体視用統合画像に任意色で任意模様のパディング領域を付加する。前記任意色には無彩色を含み、上記の例では、パディング領域は一様な灰色データで構成しているが、他の色データを用いることもできるし、模様が入ったデータであってもよい。 That is, assuming that the horizontal size and vertical size of the original stereoscopic integrated image are H and V, respectively, and the horizontal size and vertical size of the processed image containing the stereoscopic integrated image are H1 and V1, respectively, V and H When the ratio of “1” and “1” does not satisfy the specified ratio, a padding area having an arbitrary color and an arbitrary pattern is added to the original integrated image for stereoscopic viewing so that the ratio of V1 and H1 becomes a predetermined ratio. The arbitrary color includes an achromatic color, and in the above example, the padding area is composed of uniform gray data. However, other color data can be used, and even data with a pattern can be used. Good.
これらの処理例では、加工画像のアスペクト比が所定比率となるようにパディング領域を付加したが、これに限らず、上記所定比率に一致しなくてもパディング領域をオリジナルの立体視用統合画像データの上下に少しでも付加すればその付加した分だけ立体視用統合画像の立体視領域を増大させることに役立つ。すなわち、オリジナルの立体視用統合画像の水平サイズ及び垂直サイズをそれぞれH及びVとし、前記立体視用統合画像を内包する加工画像の水平サイズ及び垂直サイズをそれぞれH1及びV1とすると、V1>Vの条件を満足し、且つV1とH1との比率が所定比率の範囲内となる条件を満足するように、前記オリジナルの立体視用統合画像に任意色のパディング領域を付加することとしてもよい。かかる処理においても、VとHとの比率が規定比率を満たさない場合に、前記パディング領域を付加することとしてもよい。 In these processing examples, the padding area is added so that the aspect ratio of the processed image becomes a predetermined ratio. However, the present invention is not limited to this, and the padding area can be replaced with the original integrated image data for stereoscopic viewing even if it does not match the predetermined ratio. If a little is added above and below, it is useful to increase the stereoscopic region of the integrated image for stereoscopic viewing by the added amount. That is, if the horizontal size and vertical size of the original stereoscopic integrated image are H and V, respectively, and the horizontal size and vertical size of the processed image containing the stereoscopic integrated image are H1 and V1, respectively, V1> V An arbitrary color padding region may be added to the original integrated image for stereoscopic viewing so as to satisfy the above condition and satisfy the condition that the ratio between V1 and H1 is within a predetermined range. Even in such processing, the padding region may be added when the ratio of V and H does not satisfy the specified ratio.
図4を用いて更に説明を行っていく。市井のプリントサービスでは、例えば、横×縦=119×89(アスペクト比4:3=1.33:1)や127×89(同1.43:1)などのサイズの用紙が使用されており、オリジナル画像のアスペクト比が用紙と異なる場合には、用紙上に画像の「切れ」が生じないように縦横のうちオリジナル画像の長さが相対的に短い方向を基準にサイズを合わせてプリントする処理が採用されていることが多い。このため、オリジナル画像の長さが相対的に長い方向については画像が用紙からはみ出るため、結果的にトリミングを受けることになる。なお、ホームプリンターでも、用紙に合わせるモードを指定した場合に同様の処理を行う例がある。立体視を行う上で所望な画像を得るためには、上記立体視用統合画像を構成する左視点画像データと右視点画像データの共通視野領域(立体視野領域)が多いほどよい。ところが、上記のように立体視用統合画像(オリジナル画像)がトリミングを受けることによって、左視点画像内もしくは右視点画像内に利用できない領域が生じ、その結果、共通視野領域が十分確保できなかった場合、立体視が困難な利用価値のないプリント結果となる可能性がある。 Further explanation will be given with reference to FIG. In Ichii's print service, for example, paper of a size such as horizontal × vertical = 119 × 89 (aspect ratio 4: 3 = 1.33: 1) or 127 × 89 (1.43: 1) is used. When the aspect ratio of the original image is different from that of the paper, the original image is printed with the size adjusted based on the direction in which the length of the original image is relatively short in the vertical and horizontal directions so that the image is not cut off. Processing is often adopted. For this reason, since the image protrudes from the sheet in the direction in which the length of the original image is relatively long, trimming results. Even in the home printer, there is an example in which similar processing is performed when a mode for matching paper is designated. In order to obtain a desired image in performing stereoscopic viewing, it is better that the common visual field region (stereoscopic visual field region) of the left viewpoint image data and the right viewpoint image data constituting the integrated image for stereoscopic viewing is larger. However, as a result of the trimming of the stereoscopic integrated image (original image) as described above, an area that cannot be used in the left viewpoint image or the right viewpoint image is generated, and as a result, the common visual field area cannot be sufficiently secured. In such a case, there is a possibility that a stereoscopic print will be difficult and a print result having no utility value may be obtained.
上述したごとく、オリジナルの立体視用統合画像データに対してパディング領域を付加することにより(すなわち、加工画像を生成することにより)、この加工画像がプリントラボ等に持ち込まれても、上記のような処理によって画像のトリミングが行われるのを極力防止できることになる。すなわち、立体視が困難な利用価値のないプリントが行われるのを防止できる。 As described above, by adding a padding area to the original integrated image data for stereoscopic viewing (that is, by generating a processed image), even if this processed image is brought into a print laboratory or the like, as described above Therefore, it is possible to prevent image trimming as much as possible. That is, it is possible to prevent a print having no utility value that is difficult to be stereoscopically viewed.
立体視を行う上で所望の画像を得るためには、上記トリミングが全く生じない、すなわち両視点画像の共通視野領域(立体視野領域)が100%であるのが望ましいのであるが、必ずしも100%である必要はない。両視点画像の共通視野領域(立体視野領域)がある程度確保されているならば、図3のフローチャートに示したごとく、加工画像の生成は行わなくてもよいとする処理を採用できる。そして、上記図3のフローチャートにおいて示した、「V/H≧2/3」は、いわば最悪のケース(用紙の長い方の辺が短い方の辺に対して1.33の場合)であっても、共通視野領域(立体視野領域)を77%とすることを可能にするための判定条件である。勿論、共通視野領域(立体視野領域)を77%とすることは一実施例であって、これに限定されるものではない。なお、上記実施形態においては、視点数が2である場合を例にとり説明した。2視点画像の場合、ディスプレイやプリンタで出力された画像は、これを直接用いる形での利用(公知のステレオビューアー、平行法、交差法といわれる直視観察技法を用いての立体画像鑑賞)が普及しているため、本発明の課題とそれに対する効果が極めて大きいことは言うまでもないが、任意のn(n>2)視点画像の場合も、本発明は効果を発揮するものである。一例を示せば、n視点の統合画像をそのまま出力して、その立体画像全体の撮影状況(例えば、多眼式カメラでの撮影において、撮影時に一部の視点だけ手や衣服で遮られたりしていないかなど)を確認するという利用方法を考えた場合、統合画像のアスペクト比が出力機器のそれに適合していないと、一部の視点の画像が欠落して確認不能になったりするという問題を生じること、およびこの問題に対して本発明が有効であることは明らかである。 In order to obtain a desired image in stereoscopic viewing, it is desirable that the above trimming does not occur at all, that is, the common visual field area (stereoscopic visual field area) of both viewpoint images is 100%, but it is not necessarily 100%. Need not be. If a common visual field area (stereoscopic visual field area) for both viewpoint images is secured to some extent, a process can be adopted in which a processed image need not be generated as shown in the flowchart of FIG. The “V / H ≧ 2/3” shown in the flowchart of FIG. 3 is the worst case (when the longer side of the sheet is 1.33 with respect to the shorter side). This is also a determination condition for enabling the common visual field region (stereoscopic visual field region) to be 77%. Of course, setting the common visual field area (stereoscopic visual field area) to 77% is an example, and the present invention is not limited to this. In the above embodiment, the case where the number of viewpoints is 2 has been described as an example. In the case of two-viewpoint images, the images output by a display or printer are used in a form that uses them directly (viewing stereoscopic images using the known direct-viewing technique called the stereo viewer, parallel method, and intersection method). Therefore, it goes without saying that the subject of the present invention and the effect on the subject are extremely large, but the present invention is also effective in the case of any n (n> 2) viewpoint images. As an example, an integrated image of n viewpoints is output as it is, and the entire stereoscopic image is captured (for example, when shooting with a multi-lens camera, only a part of the viewpoint is blocked by hands or clothes during shooting). If the aspect ratio of the integrated image is not compatible with that of the output device, some viewpoint images may be missing and cannot be confirmed. It is obvious that the present invention is effective against this problem.
また、上記の実施例では、立体画像処理装置としてディジタルスチルカメラを例示したが、これに限るものではない。例えば、スキャナが接続されたパーソナルコンピュータが立体画像処理装置となる。前記パーソナルコンピュータには前記スキャナのドライバソフトウェアがインストールされている。そして、例えば、前記スキャナのソフトウェアの起動画面上に「3D」といったボタンを設けておく。ユーザーは前記「3D」ボタンを操作した後、例えば左視点画像である写真をセットしてスキャナを動作させる。この1回目の動作の後、ユーザーは右視点画像である写真をセットしてスキャナを動作させる。上記2回のスキャニングによって得られた二つの画像データは、左視点画像データ及び右視点画像データとしてパーソナルコンピュータのメモリに格納される。かかる処理により、図2の(a)に示すように、左視点画像データと右視点画像データとがメモリに格納されたことになり、その後に図2の(b)(c)に示した処理をパーソナルコンピュータが行うこととしてもよい。この処理による加工画像をパーソナルコンピュータのモニタ上に表示してもよいし、或いは、前記加工画像を図示しないプリンタに供給してもよい。 In the above embodiment, a digital still camera is exemplified as the stereoscopic image processing apparatus, but the present invention is not limited to this. For example, a personal computer to which a scanner is connected becomes a stereoscopic image processing apparatus. The driver software for the scanner is installed in the personal computer. For example, a button such as “3D” is provided on the startup screen of the scanner software. After the user operates the “3D” button, for example, a photograph as a left viewpoint image is set and the scanner is operated. After the first operation, the user sets a photograph as a right viewpoint image and operates the scanner. The two image data obtained by the above two scanning operations are stored in the memory of the personal computer as left viewpoint image data and right viewpoint image data. With this process, as shown in FIG. 2A, the left viewpoint image data and the right viewpoint image data are stored in the memory, and thereafter, the processes shown in FIGS. 2B and 2C. May be performed by a personal computer. The processed image by this processing may be displayed on a monitor of a personal computer, or the processed image may be supplied to a printer (not shown).
パーソナルコンピュータがネットワーク接続可能な環境におかれている場合、或るサーバー(サイト)から左視点画像データと右視点画像データとをダウンロードすることが可能である。このようなダウンロードを行うと、図2の(a)に示すように、左視点画像データと右視点画像データとがパーソナルコンピュータのメモリに格納されたことになり、その後に図2の(b)(c)に示した処理をパーソナルコンピュータが行うこととしてもよい。この処理による加工画像をパーソナルコンピュータのモニタ上に表示してもよいし、或いは、前記加工画像を図示しないプリンタに供給してもよい。 When the personal computer is in an environment that can be connected to a network, it is possible to download the left viewpoint image data and the right viewpoint image data from a certain server (site). When such download is performed, as shown in FIG. 2A, the left viewpoint image data and the right viewpoint image data are stored in the memory of the personal computer, and thereafter, FIG. The processing shown in (c) may be performed by a personal computer. The processed image by this processing may be displayed on a monitor of a personal computer, or the processed image may be supplied to a printer (not shown).
図2の(b)(c)に示した処理をパーソナルコンピュータが行うためのプログラム(ソフトウェア)は、ネットワークを介してダウンロードしてもよいし、或いは前記プログラムが格納されたCD−ROMからパーソナルコンピュータが読み取ることとしてもよい。 A program (software) for the personal computer to perform the processing shown in FIGS. 2B and 2C may be downloaded via a network, or may be downloaded from a CD-ROM storing the program. May be read.
また、サムネイル画像のようなファイルの中身を示す縮小画像においても、トリミングされない状態で中身が正確に分かるとともに、それ自体で立体視できることが望ましい。このような縮小画像はアスペクト比が1対1となっていることが多く、これを満たすようにパディングを施すとよい。 In addition, it is desirable that a reduced image showing the contents of a file such as a thumbnail image can be accurately understood without trimming and can be stereoscopically viewed by itself. Such reduced images often have an aspect ratio of 1: 1, and padding is preferably performed so as to satisfy this.
1 ディジタルスチルカメラ
16 マイクロコンピュータ
17 メモリ
1 Digital still
Claims (12)
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005196459A JP4688590B2 (en) | 2005-07-05 | 2005-07-05 | Stereoscopic image processing method, stereoscopic image processing apparatus, program, and recording medium storing program |
CN2006800239995A CN101238490B (en) | 2005-07-05 | 2006-07-04 | Stereoscopic image processing method, stereoscopic image processor |
PCT/JP2006/313281 WO2007004633A1 (en) | 2005-07-05 | 2006-07-04 | 3-d image processing method and 3-d image processing device and program and program-stored recording medium |
KR1020087000300A KR101005998B1 (en) | 2005-07-05 | 2006-07-04 | 3-d image processing method and 3-d image processing device and program-stored recording medium |
EP06767812A EP1901236A4 (en) | 2005-07-05 | 2006-07-04 | 3-d image processing method and 3-d image processing device and program and program-stored recording medium |
US11/988,032 US8217991B2 (en) | 2005-07-05 | 2006-07-04 | Method, device and program for processing stereoscopic images and recording medium storing the program |
CN2010105415544A CN102005063B (en) | 2005-07-05 | 2006-07-04 | 3-D image processing method and 3-D image processing device and program and program-stored recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005196459A JP4688590B2 (en) | 2005-07-05 | 2005-07-05 | Stereoscopic image processing method, stereoscopic image processing apparatus, program, and recording medium storing program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007019629A JP2007019629A (en) | 2007-01-25 |
JP4688590B2 true JP4688590B2 (en) | 2011-05-25 |
Family
ID=37756426
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005196459A Expired - Fee Related JP4688590B2 (en) | 2005-07-05 | 2005-07-05 | Stereoscopic image processing method, stereoscopic image processing apparatus, program, and recording medium storing program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4688590B2 (en) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002218501A (en) * | 2001-01-18 | 2002-08-02 | Olympus Optical Co Ltd | Image pickup device |
JP2004274253A (en) * | 2003-03-06 | 2004-09-30 | Sharp Corp | Video recorder and video transmitter |
JP2004343549A (en) * | 2003-05-16 | 2004-12-02 | Sharp Corp | Image recorder and image recording method |
JP2004356997A (en) * | 2003-05-29 | 2004-12-16 | Fuji Photo Film Co Ltd | Device, method and program for managing stereoscopic view image |
JP2005311985A (en) * | 2004-04-26 | 2005-11-04 | Olympus Corp | Apparatus and method for image processing, image modification/editing, and image file reproducing |
JP2006303937A (en) * | 2005-04-21 | 2006-11-02 | Matsushita Electric Ind Co Ltd | Image display, image displaying method and program for executng the same |
-
2005
- 2005-07-05 JP JP2005196459A patent/JP4688590B2/en not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002218501A (en) * | 2001-01-18 | 2002-08-02 | Olympus Optical Co Ltd | Image pickup device |
JP2004274253A (en) * | 2003-03-06 | 2004-09-30 | Sharp Corp | Video recorder and video transmitter |
JP2004343549A (en) * | 2003-05-16 | 2004-12-02 | Sharp Corp | Image recorder and image recording method |
JP2004356997A (en) * | 2003-05-29 | 2004-12-16 | Fuji Photo Film Co Ltd | Device, method and program for managing stereoscopic view image |
JP2005311985A (en) * | 2004-04-26 | 2005-11-04 | Olympus Corp | Apparatus and method for image processing, image modification/editing, and image file reproducing |
JP2006303937A (en) * | 2005-04-21 | 2006-11-02 | Matsushita Electric Ind Co Ltd | Image display, image displaying method and program for executng the same |
Also Published As
Publication number | Publication date |
---|---|
JP2007019629A (en) | 2007-01-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101005998B1 (en) | 3-d image processing method and 3-d image processing device and program-stored recording medium | |
JP4427515B2 (en) | Target image detection display control apparatus and control method thereof | |
US7308158B2 (en) | Imaging method and system | |
US20120320163A1 (en) | Three-dimensional imaging device and method, as well as program | |
JP6322099B2 (en) | Image processing apparatus and image processing method | |
US20120263372A1 (en) | Method And Apparatus For Processing 3D Image | |
US20130162764A1 (en) | Image processing apparatus, image processing method, and non-transitory computer-readable medium | |
EP2285126B1 (en) | 3D image display apparatus and 3D image display method | |
JP5425305B2 (en) | Stereoscopic image control apparatus, operation control method thereof, and operation control program thereof | |
JP2011024122A (en) | Three-dimensional image recording apparatus and method, three-dimensional image output apparatus and method, and three-dimensional image recording output system | |
JP2003264851A (en) | Stereoscopic imaging apparatus | |
JP2007228224A (en) | Image generating device, image extracting device, control method of image generating device, image extracting method and program, and recording medium with image extracting program recorded thereon | |
JP4989788B2 (en) | Stereoscopic image display control apparatus and operation control method thereof | |
JP2006013759A (en) | Electronic equipment for generating image file for stereoscopic vision, electronic equipment for generating three-dimensional image data, image file generating method, three-dimensional image data generating method, and file structure of image file | |
US9532034B2 (en) | Three-dimensional imaging apparatus and three-dimensional image display method | |
JP6643854B2 (en) | Information processing apparatus, information processing method, and computer program | |
JP4698307B2 (en) | Stereoscopic image processing method, stereoscopic image processing apparatus, program, and recording medium storing program | |
JP4688590B2 (en) | Stereoscopic image processing method, stereoscopic image processing apparatus, program, and recording medium storing program | |
JP2010278511A (en) | Electronic equipment | |
JP2011044828A (en) | Stereoscopic image generator, stereoscopic image printing device, and stereoscopic image generation method | |
JP4605400B2 (en) | Image output system, image generation apparatus, and image generation method | |
US10475233B2 (en) | System, method and software for converting images captured by a light field camera into three-dimensional images that appear to extend vertically above or in front of a display medium | |
JP2005072674A (en) | Three-dimensional image generating apparatus and three-dimensional image generating system | |
JP2010268492A (en) | Image output system, image generating apparatus and image generating method | |
JP2012165247A (en) | Image processing device, imaging device, and image processing program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20071207 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100817 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101015 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101124 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110124 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110208 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110215 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4688590 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140225 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |