JP2004510272A

JP2004510272A - Automatic 2D and 3D conversion method

Info

Publication number: JP2004510272A
Application number: JP2002531371A
Authority: JP
Inventors: カーツェス　ウィリアム　エム; ニムス　ジェリー　シー; ピーターズ　ポール　エフ; ブリンガム　トム
Original assignee: オラシー　コーポレイション
Priority date: 2000-09-14
Filing date: 2001-09-14
Publication date: 2004-04-02
Also published as: CN1524249A; WO2002027667A1; EP1323135A1; RU2003110175A; AU2001290838A1

Abstract

本発明は、単一マスター像（１）を複数の像へと変換し、視差シフト（１．１ − １．４）を実行し、そして像を単一のマスター像（１．５）へと相互整相するために既知の光学的原理を制御する方法を提供する。マスター像は、ＭＯＭ（２．３）を経て見たときに、三次元、フリップ、形態、ズーム及びアクションを含む（これに限定されない）多数の種々の視覚用途及び使用目的を有する。The present invention converts a single master image (1) into multiple images, performs a parallax shift (1.1-1.4), and converts the images to a single master image (1.5). A method is provided for controlling known optical principles for mutual phasing. The master image has a number of different visual and intended uses when viewed via MOM (2.3), including but not limited to three-dimensional, flip, form, zoom and action.

Description

【０００１】
【発明の背景】
本出願の優先権は、参考としてここに援用する２０００年９月１４日に出願された米国プロビジョナル特許出願第６０／２３２，４１０号に基づく。
【０００２】
【発明の分野】
本発明は、像処理及び定着に係り、より詳細には、二次元像を多数の像に変換しそして単一像へと相互整相（ｉｎｔｅｒｐｈａｓｉｎｇ）して戻し、三次元像として定着及び表示するための方法に係る。
【０００３】
【関連技術の説明】
三次元写真は、良く知られているが、特殊なカメラ、特殊な処理、及び訓練を受けた人間を必要とすることで問題がある。三次元の見掛けを有する像を表示するために多数のレンズのオーバーレイが使用されているが、これらも同じ問題があり、即ち特殊な装置、及び特別に訓練された人間を必要とする。
【０００４】
従って、本出願人は、既存の二次元像を容易に且つ経済的に三次元的に見られるようにすると同時に、最低限の熟練度があれば、高質の像を発生できるという要望があることを認めている。この方法は、ハードウェアに何ら変更を伴わずに従来のプログラム可能な汎用コンピュータ（ＰＣ）を使用するのが好ましい。
【０００５】
【発明の開示】
本発明の実施形態は、複数のオブジェクトを反映するピクセルデータを有する二次元ピクセル像データファイルをデータ記憶装置に受け取る段階と、この二次元ピクセル像データファイルを検索する段階と、その像ファイルに対応する像をビデオディスプレイに表示する段階とを備えている。その次の段階は、少なくとも１つのオブジェクトに対する初期境界線を指示するセグメント化コマンドを受け取る。その次の段階は、少なくとも１つのオブジェクトに対する最終境界線を発生するためのパラメータを有する境界線精錬コマンドを受け取り、上記パラメータは、色、ノイズ周波数及び縁のなだらかさの１つ以上より成るグループから選択される。
【０００６】
第１の実施形態の次の段階は、像ファイルを、上記セグメント化コマンド及び境界線精錬コマンドに基づいて複数の像へとセグメント化する。次いで、上記複数の像の少なくとも１つのイン・ペインティングを実行し、これは、少なくとも１つの像の一部分に、少なくとも１つの像ファイルで表わされたオブジェクト内のピクセルに基づいて発生されたピクセルを充填する。その後の段階は、上記複数の像の少なくとも第１及び第２に対し第１深さデータ及び第２深さデータを受け取る。次いで、視差シフト段階において、上記複数の像の少なくとも第１及び第２の各々に対し少なくとも２つの位相シフトされた像を発生し、これら２つの位相シフトされた像は、互いに且つ上記複数の像の少なくとも１つの他の像に対して視差シフトを有し、該視差シフトは、その像に対する深さデータに基づくものである。次いで、複数の位相シフトされた像が、出力及び印刷のために単一の相互整相された像ファイルへと相互整相される。
【０００７】
本発明による方法の更に別の特徴は、複数の二次元像ファイルを受け取り、そしてそれらをセグメント化段階のために単一の二次元像ファイルへとオーバーレイするという更に別の段階を備えている。
光学及び三次元写真の原理をコンピュータプログラムアルゴリズムに応用するときには、上記要望を満足しなければならない。このプログラムの支脈は、多数の枝葉、例えば、薬品、広告、写真、新製品、仮想現実ハードコピー等へと拡張される。
本発明は、単一のデジタル入力像を多数の像へ変換し、そして単一のマスター像へと相互整相して戻すために光学的な原理によって制御されるソフトウェアパッケージを提供する。新たな像が形成されると、プログラムは、増強された情報を有する。この像は、光学的材料を通して見たときに、三次元、フリップ、形態、ズーム及びアクションを含む（これに限定されない）種々様々な用途及び使用目的を有する。
【０００８】
更に、本発明のソフトウェアプログラムでは、多数の像が入力されたときに、同じ相互整相セグメントを使用して、多数の像カメラから三次元像を形成することができ、或いは異なる即ち逐次像の場合には、フリップ、形態、ズーム及びアクション像が形成される。
【０００９】
【発明を実施するための最良の形態】
パーソナルコンピュータ及び大記憶容量の出現に伴い、単一の像を多数の像に変換し、次いで、それらの像をマスターファイルへと相互整相（ｉｎｔｅｒｐｈａｓｅ）して戻すことができるようになった。このファイルは、ＭＯＭと組み合わされた特殊な写真原理を使用することによって写真として出力され、多像出力、及び／又は増強視覚データを伴う多層出力を形成することができる。図１．１ないし４．４を参照されたい。
【００１０】
本発明の１つのソフトウェアパッケージ（図示せず）は、単一のデジタル入力即ち図１の二次元像を、図１．１−１．４の多数の像に変換し、次いで、それらの像１．１−１．４を、情報が増強された図１．５の単一マスターの三次元像へ相互整相（ｉｎｔｅｒｐｈａｓｅ）して戻す。この像１．５は、特殊な写真プリンターを使用して写真として出力することもできるし、或いは標準的なＰＣプリンターでマスターに直接プリントして、図１．１−１．４の４つの入力像の各々を明確に見ることもできる。
【００１１】
以下に述べるように、図２．０において、ＭＯＭ（図２．３）を経てオブジェクト２．１及び２．２を表示するときには、それにより得られる像（図２．４）は、観察者（図２．５）にとって、三次元、アクション、フリップ又はズームを有するように見える。
【００１２】
図１．５において、次の手順を実行するのが好ましい。最初は、二次元像１であり、次いで、準備段階を受け、即ち像がセグメント化を受け、これは、像の各オブジェクト（図２．１−２．２）に縁検出方法、例えば、「インテリジェント・シザーズ」によりマスキングすることを含む。これは、図３．１−３．４のマグネチック・ラッソー（ＭａｇｎｅｔｉｃＬａｓｓｏ）である。それにより得られるオブジェクト（図３．５）は、別々の層にセグメント化される。
【００１３】
セグメント化は、単一の２Ｄ像をシーンにおける深さに基づいて層に分離するプロセスである。これは、視差を模擬するように層を異なる量だけシフトできるようにする。
【００１４】
セグメント化プロセスを開始するために、ユーザは、先ず、分離されるべきオブジェクトの周りにおおよその境界線を引く（図３．１−３．４）。次いで、セグメント化アルゴリズムに対してスレッシュホールドパラメータを調整することにより、ユーザは、手でペイントする必要なくそのエリアを動的に精錬することができる。これらの調整は、像全体に対して精錬することもできるし、或いは更に正確なセグメント化を許すように特定の領域のみに対して精錬することもできる。パラメータは、色（色合い、飽和度及び輝度）、ノイズ周波数及び縁のなだらかさである。ユーザは、ユーザが「焼く」ことのできるおおよその点を調整するか又はパラメータをおおよその境界線に適用することができ、その結果、新たな更に正確なおおよその縁境界線が得られ、これは、調整可能なパラメータを使用するか、又はパースペクティブにおけるハンドペインティング及び像を生じる移動により更に精錬される（図１．１−１．４）。次いで、像は、「イン・ペインティング（ｉｎ−ｐａｉｎｔｉｎｇ）」を受ける（図４．１−４．４）（ペインティングと、セグメント化段階中に形成された穴の除去とを含む）。
【００１５】
視差を模擬するように層がシフトされるときには、下の層にブランクエリアが生じることが考えられる。本発明のソフトウェアは、これらのブランクに「イン・ペインティング」スペースを自動的に充填する。
【００１６】
アルゴリズムは、充填を必要とするピクセルを計算する。これは、現在層の上の層のマスク又はアルファチャンネルにおける交差点及び減算計算によって行われる。
【００１７】
次いで、ソフトウェアは、走査線アルゴリズムを使用し、エリアが充填されるまで１ピクセル／交差点／走査線のみを充填する。各ピクセルの色は、オリジナル像から又はこのアルゴリズムの初期の実行から既に色を有している周囲のピクセルの重み付けされた平均値をベースとする。各ピクセルの重みは、最初の実行に対しては上／下及び左／右ピクセルに均一に依存し、そしてオリジナルピクセルへの距離が増加するにつれて左／右ピクセルに大きく依存するように、各実行後に調整される。
【００１８】
各層に対し、ユーザは、与えられたＧＵＩ編集フィールドに値を入力することにより深さを選択する。前景から始めて、ソフトウェアは、層をそれらが選択された順序で取り出すことにより層の順序を指定する。次いで、ソフトウェアは、相互整相段階に必要なフレームを正確に発生する。図１．１−１．４を参照されたい。
【００１９】
多数の像が入力されるときには、多数の像カメラから三次元像を形成するように使用することができ、異なる即ち逐次像の場合には、フリップ、形態、ズーム又はアクション像が形成される。
【００２０】
上述した変換工程を実行するために、本発明のソフトウェアパッケージは、三次元写真に使用される同じ光学的原理により制御される。このような原理は、例えば、参考としてここに援用する米国特許第３，８５２，７８７号；第３，８９５，８６７号；及び第３，９６０，５６３号に開示されている。
【００２１】
添付図面に示して説明した特定の実施形態は、本発明を単に例示するものに過ぎず、本発明を何ら限定するものではない。
【図面の簡単な説明】
【図１】
ピクセル像ファイルに対応する第１の例示的２オブジェクトの斜視図である。
【図１．１】
図１の像の本発明による視差シフト段階に対応する第１の視差シフト像を示す図である。
【図１．２】
図１の像の本発明による視差シフト段階に対応する第２の視差シフト像を示す図である。
【図１．３】
図１の像の本発明による視差シフト段階に対応する第３の視差シフト像を示す図である。
【図１．４】
図１の像の本発明による視差シフト段階に対応する第４の視差シフト像を示す図である。
【図１．５】
図１．１ないし図１．４の像の本発明による相互整相処理に基づいて相互整相された像を示す図である。
【図１．６】
図１．５に示された相互整相された像の一部分のクローズアップである。
【図２】
媒体に定着された図１．５の像を示す図である。
【図２．１】
図２．０の像内に定着された図１に示す像内からの前景オブジェクトを例示する図である。
【図２．２】
図２．０の像内に定着された図１に示す像内からの背景オブジェクトを例示する図である。
【図２．３】
図２．０の定着された像にオーバーレイするための薄膜多レンズシートを例示する図である。
【図２．４】
観察者が図２．３の多レンズオーバーレイを通して図２．０の像を見たときの像を例示する図である。
【図２．５】
図２．４における観察者の目を示す図である。
【図３．１】
二次元像を複数のオブジェクトにセグメント化するための本発明の方法のセグメント化及び境界線精錬段階を例示する図である。
【図３．２】
二次元像を複数のオブジェクトにセグメント化するための本発明の方法のセグメント化及び境界線精錬段階を例示する図である。
【図３．３】
二次元像を複数のオブジェクトにセグメント化するための本発明の方法のセグメント化及び境界線精錬段階を例示する図である。
【図３．４】
二次元像を複数のオブジェクトにセグメント化するための本発明の方法のセグメント化及び境界線精錬段階を例示する図である。
【図３．５】
二次元像を複数のオブジェクトにセグメント化するための本発明の方法のセグメント化及び境界線精錬段階を例示する図である。
【図４．１】
本発明の方法による複数の視差シフトに対応する背景オブジェクト像のギャップを示す図である。
【図４．２】
本発明の方法による複数の視差シフトに対応する背景オブジェクト像のギャップを示す図である。
【図４．３】
本発明の方法による複数の視差シフトに対応する背景オブジェクト像のギャップを示す図である。
【図４．４】
本発明の方法による複数の視差シフトに対応する背景オブジェクト像のギャップを示す図である。
【図５．１】
図４．１に示されたギャップを本発明による溶接マウントダブルクリップで充填するための本発明の方法により実行されるイン・ペインティング段階を示す図である。
【図５．２】
図４．２に示されたギャップを本発明による溶接マウントダブルクリップで充填するための本発明の方法により実行されるイン・ペインティング段階を示す図である。
【図５．３】
図４．３に示されたギャップを本発明による溶接マウントダブルクリップで充填するための本発明の方法により実行されるイン・ペインティング段階を示す図である。
【図５．４】
図４．４に示されたギャップを本発明による溶接マウントダブルクリップで充填するための本発明の方法により実行されるイン・ペインティング段階を示す図である。[0001]
BACKGROUND OF THE INVENTION
The priority of this application is based on US Provisional Patent Application No. 60 / 232,410, filed Sep. 14, 2000, which is incorporated herein by reference.
[0002]
FIELD OF THE INVENTION
The present invention relates to image processing and fusing, and more particularly, to transforming a two-dimensional image into multiple images and interphasing back into a single image for fusing and displaying as a three-dimensional image. Pertaining to the method.
[0003]
[Description of Related Technology]
Three-dimensional photography is well known, but is problematic in that it requires specialized cameras, specialized processing, and trained people. Numerous lens overlays have been used to display images having a three-dimensional appearance, but they also have the same problem, ie, require specialized equipment and specially trained humans.
[0004]
Accordingly, the Applicant has a desire to be able to easily and economically view existing two-dimensional images in three dimensions, while at the same time producing high quality images with minimum skill. Admit that. The method preferably uses a conventional programmable general purpose computer (PC) without any changes to the hardware.
[0005]
DISCLOSURE OF THE INVENTION
An embodiment of the present invention includes receiving a two-dimensional pixel image data file having pixel data reflecting a plurality of objects into a data storage device, retrieving the two-dimensional pixel image data file, and corresponding to the image file. Displaying an image to be displayed on a video display. The next step receives a segmentation command indicating an initial boundary for at least one object. The next step receives a border refinement command having parameters for generating a final border for at least one object, the parameters comprising a group consisting of one or more of color, noise frequency and edge smoothness. Selected.
[0006]
The next step in the first embodiment is to segment the image file into a plurality of images based on the segmentation command and the boundary refinement command. Then, performing at least one in-painting of the plurality of images, wherein the pixels generated based on the pixels in the object represented by the at least one image file in a portion of the at least one image Is filled. Subsequent steps include receiving first and second depth data for at least a first and a second of the plurality of images. Then, in a parallax shifting step, at least two phase-shifted images are generated for at least a first and a second of the plurality of images, respectively, and the two phase-shifted images are combined with each other and the plurality of images. Has a parallax shift with respect to at least one other image of the image, wherein the parallax shift is based on depth data for that image. The plurality of phase-shifted images are then cross-phased into a single cross-phased image file for output and printing.
[0007]
Yet another feature of the method according to the invention comprises the further step of receiving a plurality of two-dimensional image files and overlaying them onto a single two-dimensional image file for a segmentation step.
The above needs must be satisfied when applying the principles of optics and three-dimensional photography to computer program algorithms. The branch of the program extends to a large number of branches and leaves, such as drugs, advertisements, photographs, new products, virtual reality hard copies, and the like.
The present invention provides a software package that is controlled by optical principles to convert a single digital input image into multiple images, and to phase back to a single master image. When a new image is formed, the program has the augmented information. This image has a variety of uses and uses when viewed through optical materials, including but not limited to three-dimensional, flip, form, zoom and action.
[0008]
In addition, the software program of the present invention can use the same mutual phasing segment to form a three-dimensional image from multiple image cameras when multiple images are input, or to create different or sequential images. In that case, flip, form, zoom and action images are formed.
[0009]
BEST MODE FOR CARRYING OUT THE INVENTION
With the advent of personal computers and large storage capacities, it has become possible to convert a single image into a number of images and then interphase those images back into a master file. This file can be output as a photograph by using special photographic principles combined with MOM to form a multi-image output and / or a multilayer output with enhanced visual data. Please refer to FIGS. 1.1 to 4.4.
[0010]
One software package (not shown) of the present invention converts a single digital input, the two-dimensional image of FIG. 1, into a number of images of FIGS. .1-1-1.4 are interphased back to the three-dimensional image of the single master of FIG. 1.5 with enhanced information. This image 1.5 can be output as a photograph using a special photo printer, or printed directly on the master with a standard PC printer, and the four inputs shown in FIGS. Each of the images can also be seen clearly.
[0011]
As described below, in FIG. 2.0, when the objects 2.1 and 2.2 are displayed via the MOM (FIG. 2.3), the images (FIG. 2.4) obtained by the observers (FIG. For Figure 2.5), it appears to have three dimensions, action, flip or zoom.
[0012]
In FIG. 1.5, the following procedure is preferably performed. The first is a two-dimensional image 1 and then undergoes a preparatory stage, ie the image undergoes a segmentation, which is applied to each object of the image (FIGS. Includes masking with "Intelligent Scissors". This is the Magnetic Lasso in FIGS. 3.1-3.4. The resulting object (FIG. 3.5) is segmented into separate layers.
[0013]
Segmentation is the process of separating a single 2D image into layers based on depth in the scene. This allows the layers to be shifted by different amounts to simulate parallax.
[0014]
To begin the segmentation process, the user first draws a rough border around the object to be separated (FIGS. 3.1-3.4). Then, by adjusting the threshold parameters to the segmentation algorithm, the user can dynamically refine the area without having to paint by hand. These adjustments can be refined for the entire image, or can be refined only for specific regions to allow for more accurate segmentation. The parameters are color (hue, saturation and brightness), noise frequency and edge smoothness. The user can adjust the approximate point at which the user can "bake" or apply parameters to the approximate border, resulting in a new, more accurate approximate edge border, Can be further refined using adjustable parameters or by hand painting in the perspective and movement resulting in the image (FIGS. 1.1-1.4). The image then undergoes "in-painting" (FIGS. 4.1-4.4) (including painting and removal of holes formed during the segmentation step).
[0015]
When the layers are shifted to simulate parallax, it is possible that a blank area occurs in the layer below. The software of the present invention automatically fills these blanks with "in-painting" space.
[0016]
The algorithm calculates the pixels that need filling. This is done by intersection and subtraction calculations in the mask or alpha channel of the layer above the current layer.
[0017]
The software then uses a scan line algorithm to fill only one pixel / intersection / scan line until the area is filled. The color of each pixel is based on a weighted average of surrounding pixels that already have a color from the original image or from an earlier run of the algorithm. The weight of each pixel is uniformly dependent on the top / bottom and left / right pixels for the first run, and each run is such that it is heavily dependent on the left / right pixels as the distance to the original pixel increases. Will be adjusted later.
[0018]
For each layer, the user selects the depth by entering a value in the provided GUI edit field. Starting from the foreground, the software specifies the order of the layers by retrieving the layers in the order in which they were selected. The software then generates exactly the frames needed for the mutual phasing phase. See FIGS. 1.1-1.4.
[0019]
When multiple images are input, they can be used to form a three-dimensional image from multiple image cameras, and in the case of different or sequential images, a flip, form, zoom or action image is formed.
[0020]
In order to carry out the conversion process described above, the software package of the present invention is controlled by the same optical principles used for 3D photography. Such principles are disclosed, for example, in U.S. Patent Nos. 3,852,787; 3,895,867; and 3,960,563, which are incorporated herein by reference.
[0021]
The specific embodiments illustrated and described in the accompanying drawings are merely illustrative of the invention and do not limit the invention in any way.
[Brief description of the drawings]
FIG.
FIG. 3 is a perspective view of a first exemplary two objects corresponding to a pixel image file.
FIG. 1.1
FIG. 2 shows a first parallax shift image of the image of FIG. 1 corresponding to a parallax shift stage according to the invention.
FIG. 1.2
FIG. 2 shows a second parallax shift image of the image of FIG. 1 corresponding to a parallax shift stage according to the invention.
[Figure 1.3]
FIG. 3 shows a third parallax shift image of the image of FIG. 1 corresponding to a parallax shift stage according to the invention.
[Figure 1.4]
FIG. 4 shows a fourth parallax shift image of the image of FIG. 1 corresponding to a parallax shift stage according to the invention.
FIG. 1.5
FIG. 4 shows the images of FIG. 1.1 to FIG. 1.4 which have been mutually phased based on the mutual phase adjustment process according to the invention.
[Figure 1.6]
FIG. 4 is a close-up of a portion of the mutually phased image shown in FIG. 1.5.
FIG. 2
FIG. 16 is a diagram showing the image of FIG. 1.5 fixed on a medium.
FIG. 2.1
FIG. 2 is a diagram exemplifying a foreground object from within the image shown in FIG. 1 fixed within the image of FIG. 2.0.
[Fig. 2.2]
FIG. 2 illustrates a background object from within the image shown in FIG. 1 fixed within the image of FIG. 2.0.
[Figure 2.3]
FIG. 2 illustrates a thin film multi-lens sheet for overlaying the fixed image of FIG. 2.0.
[Fig. 2.4]
FIG. 12 is a diagram illustrating an image when an observer views the image of FIG. 2.0 through the multi-lens overlay of FIG. 2.3.
[Figure 2.5]
FIG. 5 shows the observer's eyes in FIG. 2.4.
[Fig. 3.1]
FIG. 3 illustrates the segmentation and boundary refining steps of the method of the present invention for segmenting a two-dimensional image into a plurality of objects.
[Fig. 3.2]
FIG. 3 illustrates the segmentation and boundary refining steps of the method of the present invention for segmenting a two-dimensional image into a plurality of objects.
[Fig. 3.3]
FIG. 3 illustrates the segmentation and boundary refinement steps of the method of the present invention for segmenting a two-dimensional image into a plurality of objects.
[Fig. 3.4]
FIG. 3 illustrates the segmentation and boundary refining steps of the method of the present invention for segmenting a two-dimensional image into a plurality of objects.
[Fig. 3.5]
FIG. 3 illustrates the segmentation and boundary refinement steps of the method of the present invention for segmenting a two-dimensional image into a plurality of objects.
[Fig. 4.1]
FIG. 4 is a diagram illustrating gaps of a background object image corresponding to a plurality of parallax shifts according to the method of the present invention.
[Fig. 4.2]
FIG. 4 is a diagram illustrating gaps of a background object image corresponding to a plurality of parallax shifts according to the method of the present invention.
[Fig. 4.3]
FIG. 7 is a diagram illustrating gaps of a background object image corresponding to a plurality of parallax shifts according to the method of the present invention.
[Fig. 4.4]
FIG. 7 is a diagram illustrating gaps of a background object image corresponding to a plurality of parallax shifts according to the method of the present invention.
[Figure 5.1]
FIG. 4 shows the in-painting step performed by the method of the invention for filling the gap shown in FIG. 4.1 with a weld mount double clip according to the invention.
FIG. 5.2
FIG. 4 shows an in-painting step performed by the method according to the invention for filling the gap shown in FIG. 4.2 with a welding mount double clip according to the invention.
[Fig. 5.3]
FIG. 4 shows an in-painting step performed by the method of the invention for filling the gap shown in FIG. 4.3 with a weld mount double clip according to the invention.
FIG. 5.4
FIG. 5 shows an in-painting step performed by the method of the invention for filling the gap shown in FIG. 4.4 with a weld mount double clip according to the invention.

Claims

二次元像ファイルを三次元像ファイルへ変換するための方法において、
複数のオブジェクトを反映するピクセルデータを有する二次元ピクセル像データファイルをデータ記憶装置に受け取り、
この二次元ピクセル像データファイルを上記記憶装置から検索し、
その像ファイルに対応する像をビデオディスプレイに表示し、
少なくとも１つのオブジェクトに対する初期境界線を指示するセグメント化コマンドを受け取り、
上記セグメント化コマンドに基づいて上記少なくとも１つのオブジェクトに対する境界線を表示し、
上記像ファイルを、上記セグメント化コマンドに基づいて複数の像へとセグメント化し、
上記複数の像の少なくとも１つをイン・ペインティングして、上記複数の像の少なくとも１つの一部分に充填ピクセルを充填し、これら充填ピクセルは、上記少なくとも１つの像ファイルで表わされたオブジェクト内のピクセルに基づいて発生され、
上記複数の像の少なくとも第１及び第２に対して第１深さデータ及び第２深さデータを受け取り、
上記複数の像の上記少なくとも第１及び第２の各々に対して少なくとも２つの位相シフトされた像を発生し、これら２つの位相シフトされた像は、互いに且つ上記複数の像の少なくとも１つの他の像に対して視差シフトを有し、該視差シフトは、その像に対する深さデータに基づくものであり、そして
上記位相シフトされた像を、出力及び印刷のために単一の相互整相された像ファイルへと相互整相する、
という段階を備えた方法。In a method for converting a two-dimensional image file to a three-dimensional image file,
Receiving a two-dimensional pixel image data file having pixel data reflecting a plurality of objects into a data storage device;
Retrieving the two-dimensional pixel image data file from the storage device,
Display the image corresponding to the image file on the video display,
Receiving a segmentation command indicating an initial boundary for at least one object;
Displaying a boundary line for the at least one object based on the segmentation command;
Segmenting the image file into a plurality of images based on the segmentation command;
Inpainting at least one of the plurality of images to fill at least a portion of the plurality of images with fill pixels, wherein the fill pixels are within an object represented by the at least one image file. Is generated based on the pixels of
Receiving first depth data and second depth data for at least first and second of the plurality of images;
Generating at least two phase-shifted images for each of the at least first and second of the plurality of images, wherein the two phase-shifted images are mutually and at least one other of the plurality of images; Have a parallax shift, which is based on depth data for that image, and the phase-shifted image is single-phased for output and printing. Phasing into image files,
A method with a stage.

少なくとも１つのオブジェクトに対する最終境界線を発生するためのパラメータを有する境界線精錬コマンドを受け取る段階を更に備え、それらパラメータは、色、ノイズ周波数及び縁のなだらかさの１つ以上より成るグループから選択され、そして上記セグメント化は、少なくとも一部分は上記境界線精錬コマンドにおいて実行される請求項１に記載の方法。Receiving a boundary refinement command having parameters for generating a final boundary for at least one object, wherein the parameters are selected from a group consisting of one or more of color, noise frequency, and edge smoothness. The method of claim 1, wherein the segmenting is performed at least in part in the boundary refinement command.