TWI518603B - 影像編輯方法與電子裝置 - Google Patents

Description

影像編輯方法與電子裝置

本發明是有關於一種影像方法，且特別是有關於一種移動物體的影像編輯方法與使用此方法的電子裝置。

隨著製作感光元件與鏡頭的技術越來越進步，市面上許多裝置都能夠擷取影像或者是視訊。例如，除了照相機以外，一般的使用者也習慣用智慧型手機來拍照。然而，在拍照時，使用者可能會需要一些增加畫面品質或是能帶來趣味的功能。例如，使用者可能會希望能夠調整亮度、在臉上加上刀疤、把彩色照片轉換為黑白照片等。然而，這些功能有時需要後置的影像處理，並不能在拍照的當下調整影像。因此，如何在拍照的當下提供一個互動式的介面，讓使用者可以拍攝出不同效果的照片，為此領域技術人員所關心的議題。

本發明的實施例提供一種影像編輯方法與電子裝置，可 以在拍照的當下提供一個互動式的介面，讓使用者拍出物體被移動的照片。

本發明提出一種影像編輯方法，用於包括顯示單元的電子裝置。此影像編輯方法包括：擷取第一影像，並且將第一影像顯示在顯示單元上；從第一影像中取出第一物體；偵測第一影像中的第二物體；擷取第二影像，並且偵測第二影像中的第二物體；根據第一影像與第二影像取得第二物體的移動；以及隨著第二物體的移動在顯示單元上移動第一物體。

在一範例實施例中，上述從第一影像中取出第一物體的步驟包括：偵測使用者的操作，該操作定義第一影像上的一區域；以及在該區域內取出第一物體。

在一範例實施例中，上述的影像編輯方法更包括：判斷第二物體是否接觸第一物體；若判斷第二物體接觸第一物體，執行所述隨著第二物體的移動在顯示單元上移動第一物體的步驟。

在一範例實施例中，上述判斷第二物體是否接觸第一物體的步驟包括：選擇第一物體上的一接觸區域；判斷第二物體是否重疊於接觸區域；以及若第二物體重疊於接觸區域，判斷第二物體接觸第一物體。

在一範例實施例中，上述隨著第二物體的移動來移動第一物體的步驟更包括：修補在第一影像中，移動第一物體後所產生的一空白部分。

在一範例實施例中，上述修補空白部分的步驟包括：透 過一網路取得關於第一物體的影像；以及根據該影像修補空白部分。

在一範例實施例中，上述的第一物體佔據第一影像的全部，並且上述隨著第二物體的移動來移動第一物體的步驟包括：隨著第二物體的移動來旋轉第一物體。

在一範例實施例中，上述的影像編輯方法更包括：根據第一影像與第二影像判斷一景色是否改變；以及若該景色已改變，將第一物體與改變後的景色結合，並將結合後的影像顯示在顯示單元上。

本發明一範例實施例提出一種電子裝置，包括影像擷取單元、顯示單元以及處理器。處理器是耦接至顯示單元與影像擷取單元，用以透過影像擷取單元擷取第一影像，並且顯示單元用以顯示第一影像。處理器也用以從第一影像中取出第一物體，並且偵測第一影像中的第二物體。處理器還用以透過影像擷取單元擷取第二影像，並且偵測第二影像中的第二物體。處理器用以根據第一影像與第二影像取得第二物體的一移動，並且隨著第二物體的移動在顯示單元上移動第一物體。

在一範例實施例中，上述的處理器更用以偵測使用者的操作，該操作定義第一影像上的一區域。處理器更用以在區域內取出第一物體。

在一範例實施例中，上述的處理器更用以判斷第二物體是否接觸第一物體。若判斷第二物體接觸第一物體，處理器隨著 第二物體的移動在顯示單元上移動第一物體。

在一範例實施例中，上述的處理器更用以選擇第一物體上的一接觸區域，並且判斷第二物體是否重疊於該接觸區域。若第二物體重疊於接觸區域，處理器更判斷第二物體接觸第一物體。

在一範例實施例中，上述的處理器更用以修補在第一影像中，移動第一物體後所產生的空白部分。

在一範例實施例中，上述的處理器更用以透過一網路取得關於第一物體的影像，並且根據該影像修補空白部分。

在一範例實施例中，上述的第一物體佔據第一影像的全部，處理器用以隨著第二物體的移動來旋轉第一物體。

在一範例實施例中，上述的處理器更用以根據第一影像與第二影像判斷一景色是否改變。若景色已改變，處理器用以將第一物體與改變後的景色結合，並將結合後的影像顯示在顯示單元上。

基於上述，本發明實施例所提出的影像編輯方法與電子裝置，可以在擷取影像時讓使用者能移動第一影像中的物體。如此一來，在擷取到的影像中看起來會是一個真實的物體被移動了。

為讓本發明的上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式作詳細說明如下。

100‧‧‧電子裝置

110‧‧‧影像擷取單元

120‧‧‧處理器

130‧‧‧顯示單元

140‧‧‧記憶體

200‧‧‧鐵塔

300、301、400‧‧‧影像

310、320、410、420‧‧‧物體

312‧‧‧區域

330‧‧‧空白部分

430‧‧‧接觸區域

S502、S504、S506、S508、S510、S512、S514、S602、S604、S701~S706‧‧‧步驟

圖1是根據一實施例繪示一電子裝置的部份方塊圖。

圖2是根據一實施例繪示擷取影像的示意圖。

圖3A~3D是根據一實施例繪示移動物體的示意圖。

圖4A~4C是根據一實施例繪示旋轉物體的示意圖。

圖5是根據第一實施例繪示移動物體的流程圖。

圖6是根據第二實施例繪示結合改變後的景色與物體的流程圖。

圖7是根據一實施例繪示影像編輯方法的流程圖。

[第一實施例]

圖1是根據一實施例繪示一電子裝置的部份方塊圖。

請參照圖1，電子裝置100包括影像擷取單元110、處理器、顯示單元130與記憶體140。電子裝置100可實作為智慧型手機、平板電腦、數位相機、數位攝影機、或是任意形式的嵌入式系統。此外，電子裝置100也可以包括通訊模組或電源供應器等其他元件，本發明並不在此限。

影像擷取單元110是用以擷取影像。例如，影像擷取單元110包含光學定焦鏡頭或光學變焦鏡頭，以及電荷耦合元件(Charge Coupled Device，CCD)或互補金氧半導體(Complementary Metal-Oxide Semiconductor，CMOS)元件等感光元件。

處理器120例如為中央處理單元(Central Processing Unit， CPU)、微處理器(Microprocessor)、數位訊號處理器(Digital Signal Processor，DSP)或是圖像處理器(graphics processing unit，GPU)。

顯示單元130是用以顯示多個像素。例如，顯示單元130可包括液晶顯示器(Liquid Crystal Display，LCD)、發光二極體顯示器(Light-Emitting Diode，LED)、場發射顯示器(Field Emission Display，FED)或其他類型的顯示器。在此實施例中，顯示單元130還包括電阻式或電容式等觸控面板，以同時提供顯示及觸碰的操作功能。然而，顯示單元130也可不包括觸控面板，本發明並不在此限。

記憶體140中儲存了多個指令，並且處理器120會執行這些指令。記憶體140可以是隨機存取記憶體或是快閃記憶體，本發明並不在此限。

圖2是根據一實施例繪示擷取影像的示意圖。

請參照圖2，當使用者要拍照時，影像擷取單元110會持續的擷取影像(亦稱為預覽影像)，並且把這些影像顯示在顯示單元130上。使用者可以根據所顯示的影像來判斷拍攝的角度與時間點。特別的是，使用者可以移動影像中的一個物體，藉此產生使用者想要的效果。例如，使用者可以將手放在電子裝置100與鐵塔200之間，並且用手去”推”鐵塔200，藉此在顯示單元130上會顯示鐵塔200被推倒的影像。最後，使用者可以取得鐵塔200被推倒的照片。

圖3A~3D是根據一實施例繪示移動物體的示意圖。

請參照圖3A，影像擷取單元110擷取了影像300，並且 影像300會被顯示在顯示單元120上。處理器120會先從影像300中取出(extract)物體310(亦稱第一物體)。例如，顯示單元130可以偵測使用者的觸碰操作，而使用者可以在顯示單元130上圈選物體310，藉此定義出預覽影像300上的區域312。處理器120會在區域312內取得物體310。在一實施例中，處理器120會採用影像切割(image segmentation)的演算法來取出物體310；然而，處理器也可以用邊緣偵測，或是物件偵測等演算法來取出物體310，本發明並不在此限。在另一實施例中，處理器120也可以將區域312內所有的像素當做物體310。或者，處理器120可以不透過使用者的觸碰操作，直接執行影像切割演算法、物件偵測演算法或是前景擷取(foreground extraction)的演算法來取得物體310。處理器120也可以自動地辨識預覽影像300中的一個地標、建築物、招牌、車輛以作為要被移動的物體。本發明並不限制如何取出物體310也不限制物體310的內容。

請參照圖3B，接下來，影像擷取單元110會擷取第一影像301，其中第一影像301也會被顯示在顯示單元120上。同樣地，處理器120會取得第一影像301中的物體310。此外，處理器120會偵測第一影像301中的物體320(亦稱第二物體)。在此實施例中，物體320是使用者的手，而處理器120可根據膚色或是手的形狀來偵測物體320。然而，在另一實施例中，處理器120也可以偵測一隻筆或是任意一個事先定義的物體，本發明並不在此限。

在一實施例中，影像擷取單元110會再擷取一第二影像，此第二影像並不一定會被顯示在顯示單元130上。處理器120會 偵測此第二影像中的物體320，並且處理器120會根據第一影像301與第二影像取得物體320的移動。接著，處理器120會根據物體320的移動在顯示單元120上移動物體310。藉此，使用者可以在顯示單元120上看到鐵塔被移動了。

在一實施例中，上述移動物體310的步驟會被一個預設條件所觸發。例如，此預設條件是判斷物體320是否接觸到物體310。若物體320接觸到物體310，則物體310會被移動。反之，若物體320並沒有接觸到物體310，則不論物體320怎麼移動，物體310都會留在原地。然而，本發明並不限制上述預設條件的內容。處理器120可以根據物體310與320的位置或其中一個特定的部份來判斷物體320是否接觸到物體310。例如，處理器120會選擇物體310上的一個接觸區域，此接觸區域可以是物體310上的一個點、一條線、邊緣或是輪廓。處理器120會判斷物體320是否重疊於該接觸區域，若是，則處理器120會判斷物體320接觸於物體310。在圖3B的實施例中，上述的接觸區域佔據了物體310的全部，但在另一實施例中，此接觸區域可以是物體310的頂端或是任意的部份，本發明並不在此限。在另一實施例中，處理器120也可以選擇物體320上的一個接觸區域(例如，指尖的部分或是一隻筆的筆尖)，並且在物體320的接觸區域重疊於物體310的接觸區域時，處理器120會判斷物體320接觸了物體310。值得注意的是，影像擷取單元110是不斷地擷取影像作為預覽影像。也就是說，處理器120會不斷地偵測物體320並且判斷物體320是否接觸物體 310。在另一實施例中，處理器120也可以追蹤物體320的位置，並且根據物體310與320的位置來判斷這兩個物體是否彼此接觸。在此假設物體310已接觸了物體320。

請參照圖3C，接下來影像擷取單元110持續的擷取第二影像，並且處理器120會偵測第二影像中的物體320。在此實施例中，當物體310與物體320接觸以後，第一影像301會成為一個靜止影像，並且第一影像301會持續的顯示在顯示單元130上。處理器120會根據上述的第二影像來更新物體320，但不會更新背景。此外，處理器120會根據第一影像301與第二影像取得物體320的移動，並且隨著物體320的移動來移動物體310。在圖3C中，物體310會隨著物體320往右傾斜。然而，在另一實施例中，處理器120也可以讓物體310隨著物體320的移動而水平移動、垂直移動、改變尺寸、旋轉、彎曲、複製、或是切割成多個子物體。在此，”移動物體310”的描述包括了上述各種態樣，本發明並不在此限。

值得注意的是，當物體310被移動以後，第一影像301上會產生一個空白部分330。在此實施例中，處理器120會修補空白部分330(如圖3D所示)，但處理器120也可以不修補空白部分330，本發明並不在此限。處理器120可以採用任意的影像修補(image inpainting)演算法來修補空白部分330。或者，處理器120也可以透過電子裝置100上的一個通訊模組(未繪示)來從網路上取得關於物體310的一或多張影像，並且根據這些影像來修補空 白部分330。舉例來說，物體310是一個有名的地標，因此處理器120可以在網路上搜尋此地標的影像。這些影像中會包括物體310的前景與背景的部份，並且處理器120可以根據背景的部份來修補空白區域330。

在移動完物體310以後，使用者可以按下一個擷取按鈕，接下來處理器120會儲存當下的第一影像301在電子裝置100中(例如，記憶體140或是一個安全數位(secure digital，SD)卡)。值得注意的是，此擷取按鈕可以是電子裝置100上的一個實體按鈕(未繪示)，也可以是顯示單元130上顯示的一個圖形介面，本發明並不在此限。在另一實施例中，處理器120也可以自動地儲存當下的第一影像301，本發明並不限制何時儲存第一影像301。

在上述的實施例中，當物體310與物體320接觸以後，第一影像301會成為一個靜止影像。但在其他實施例中，當物體310與物體320接觸以後，影像擷取單元110也可以根據第二影像來更新第一影像301中除了物體310以外的部分。或者，處理器120也可以根據這些第二新影像來更新物體310，本發明並不在此限。

圖4A~4C是根據一實施例繪示旋轉物體的示意圖。

請參照圖4A，在圖4A的實施例中，使用者選擇的物體410佔據了影像400的全部。因此，在物體420接觸到物體410以後，整個影像400會隨著物體420移動。例如，在圖4B中，處理器120會判斷物體420已離開了一個接觸區域430，因此處理器 120會隨著物體420的移動來旋轉物體410(如圖4C所示)，以更新影像400。在旋轉物體410以後，處理器120會切除部分的物體410以產生能顯示於顯示單元130上的影像。或者，處理器120可以縮小物體410並修補空白部分，本發明並不在此限。

圖5是根據第一實施例繪示移動物體的流程圖。

請參照圖5，在步驟S502中，處理器120會顯示一個影像在顯示單元130上。在步驟S504中，由使用者定義一個區域，並且處理器120會從此區域中取出一個第一物體。在步驟S506中，處理器120會判斷第一物體與第二物體是否重疊。

若步驟S506的結果為是，處理器120會隨著第二物體移動第一物體(步驟S508)，並且修補空白部分(步驟S510)。

在步驟S512中，處理器120會判斷一個擷取按鈕是否被按下。若步驟S5112的結果為是，在步驟S514中，處理器120會儲存目前的影像。

然而，圖5中各步驟已詳細說明如上，在此便不再贅述。

[第二實施例]

第二實施例與第一實施例類似，在此僅說明不同之處。

請參照回圖3D，在第二實施例當中，使用者也可以移動電子裝置100，以改變目前的景色。例如，當處理器120移動完物體310以後，使用者可以移動電子裝置100，此時影像擷取單元110會持續的擷取新影像。處理器120會從這些新影像中，取出不同時間點的至少兩張新影像。處理器120會判斷這兩張新影像之 間的一差距是否大於一個臨界值。當此差距大於一個臨界值時，處理器120會判斷景色已被改變。或者，電子裝置100上配置有一個重力感測器，處理器120會根據此重力感測器判斷電子裝置100是否被移動超過一個預設距離。若電子裝置100被移動超過預設距離，則處理器120會判斷景色已被改變。當景色已改變，則處理器120會將物體310與改變後的景色(例如，當下的背景影像)結合，並將結合後的影像顯示在顯示單元130上。如此一來，使用者可以將物體310”移動”到至別的地方(例如，一條河上)，產生另一種影像效果。

圖6是根據第二實施例繪示結合改變後的景色與物體的流程圖。

請參照圖6，其中步驟S502、S504、S506、S508、S510、S512、S514已說明如上，在此並不在重覆。

在步驟S602中，處理器120會判斷目前的景色是否改變。若步驟S602的結果為是，則處理器120會結合第一物體與改變後的景色，並將結合後的影像顯示在顯示單元130上。

圖7是根據一實施例繪示影像編輯方法的流程圖。

請參照圖7，在步驟S701中，擷取第一影像，並且將第一影像顯示在顯示單元上。在步驟S702中，從第一影像中取出第一物體。在步驟S703中，偵測第一影像中的第二物體。在步驟S704中，擷取一第二影像，並且偵測第二影像中的第二物體。在步驟S705中，根據第一影像與第二影像取得第二物體的移動。在 步驟S706中，隨著第二物體的移動在顯示單元上移動第一物體。

然而，圖7中各步驟已詳細說明如上，在此便不再贅述。值得注意的是，圖7中各步驟可以實作為多個程式碼或是電路，本發明並不在此限。此外，圖7的方法可以搭配以上第一與第二實施例使用，也可以單獨使用，本發明並不在此限。

綜上所述，本發明實施例所提出的影像編輯方法與電子裝置，可以提供一個互動式的介面，讓使用者可以在拍照時移動一個物體，藉此產生不同的影像效果。

雖然本發明已以實施例揭露如上，然其並非用以限定本發明，任何所屬技術領域中具有通常知識者，在不脫離本發明的精神和範圍內，當可作些許的更動與潤飾，故本發明的保護範圍當視後附的申請專利範圍所界定者為準。

S701~S706‧‧‧步驟

Claims (16)

1. 一種影像編輯方法，用於一電子裝置，其中該電子裝置包括一顯示單元，該影像編輯方法包括：擷取一第一影像，並且將該第一影像顯示在該顯示單元上；從該第一影像中取出一第一物體；偵測該第一影像中的一第二物體；擷取一第二影像，並且偵測該第二影像中的該第二物體；根據該第一影像與該第二影像取得該第二物體的一移動；以及隨著該第二物體的該移動在該顯示單元上移動該第一物體，其中該第一影像以及該第二影像為該電子裝置在執行一拍照功能時所擷取的多個預覽影像。
2. 如申請專利範圍第1項所述的影像編輯方法，其中從該第一影像中取出該第一物體的步驟包括：偵測一使用者的一操作，其中該操作定義該第一影像上的一區域；以及在該區域內取出該第一物體。
3. 如申請專利範圍第1項所述的影像編輯方法，更包括：判斷該第二物體是否接觸該第一物體；若判斷該第二物體接觸該第一物體，執行所述隨著該第二物體的該移動在該顯示單元上移動該第一物體的步驟。
4. 如申請專利範圍第1項所述的影像編輯方法，其中判斷該 第二物體是否接觸該第一物體的步驟包括：選擇該第一物體上的一接觸區域；判斷該第二物體是否重疊於該接觸區域；以及若該第二物體重疊於該接觸區域，判斷該第二物體接觸該第一物體。
5. 如申請專利範圍第1項所述的影像編輯方法，其中隨著該第二物體的該移動來移動該第一物體的步驟更包括：修補在該第一影像中，移動該第一物體後所產生的一空白部分。
6. 如申請專利範圍第5項所述的影像編輯方法，其中修補該空白部分的步驟包括：透過一網路取得關於該第一物體的一影像；以及根據該影像修補該空白部分。
7. 如申請專利範圍第1項所述的影像編輯方法，其中該第一物體佔據該第一影像的全部，上述隨著該第二物體的該移動來移動該第一物體的步驟包括：隨著該第二物體的該移動來旋轉該第一物體。
8. 如申請專利範圍第1項所述的影像編輯方法，更包括：根據該第一影像與該第二影像判斷一景色是否改變；以及若該景色已改變，將該第一物體與改變後的該景色結合，並將結合後的影像顯示在該顯示單元上。
9. 一種電子裝置，包括： 一影像擷取單元；一顯示單元；以及一處理器，耦接至該顯示單元與該影像擷取單元，用以透過該影像擷取單元擷取一第一影像，並且該顯示單元用以顯示該第一影像，其中，該處理器用以從該第一影像中取出一第一物體，並且偵測該第一影像中的一第二物體，其中，該處理器用以透過該影像擷取單元擷取一第二影像，並且偵測該第二影像中的該第二物體，其中，該處理器用以根據該第一影像與該第二影像取得該第二物體的一移動，並且隨著該第二物體的該移動在該顯示單元上移動該第一物體，其中，該第一影像以及該第二影像為該電子裝置的該處理器在執行一拍照功能時所擷取的多個預覽影像。
10. 如申請專利範圍第9項所述的電子裝置，其中該處理器更用以偵測一使用者的一操作，其中該操作定義該第一影像上的一區域，其中該處理器更用以在該區域內取出該第一物體。
11. 如申請專利範圍第9項所述的電子裝置，其中該處理器更用以判斷該第二物體是否接觸該第一物體，若判斷該第二物體接觸該第一物體，該處理器隨著該第二物體的該移動在該顯示單元上移動該第一物體。
12. 如申請專利範圍第9項所述的電子裝置，其中該處理器更用以選擇該第一物體上的一接觸區域，並且判斷該第二物體是否重疊於該接觸區域，若該第二物體重疊於該接觸區域，該處理器更判斷該第二物體接觸該第一物體。
13. 如申請專利範圍第9項所述的電子裝置，其中該處理器更用以修補在該第一影像中，移動該第一物體後所產生的一空白部分。
14. 如申請專利範圍第13項所述的電子裝置，其中該處理器更用以透過一網路取得關於該第一物體的一影像，並且根據該影像修補該空白部分。
15. 如申請專利範圍第9項所述的電子裝置，其中該第一物體佔據該第一影像的全部，該處理器用以隨著該第二物體的該移動來旋轉該第一物體。
16. 如申請專利範圍第9項所述的電子裝置，其中該處理器更用以根據該第一影像與該第二影像判斷一景色是否改變，若該景色已改變，該處理器用以將該第一物體與改變後的該景色結合，並將結合後的影像顯示在該顯示單元上。