TWI469085B - 影像處理裝置、影像處理方法及電腦可讀取記憶媒體 - Google Patents

影像處理裝置、影像處理方法及電腦可讀取記憶媒體 Download PDF

Info

Publication number
TWI469085B
TWI469085B TW99129026A TW99129026A TWI469085B TW I469085 B TWI469085 B TW I469085B TW 99129026 A TW99129026 A TW 99129026A TW 99129026 A TW99129026 A TW 99129026A TW I469085 B TWI469085 B TW I469085B
Authority
TW
Taiwan
Prior art keywords
pixel
image
pixels
tracking
value
Prior art date
Application number
TW99129026A
Other languages
English (en)
Other versions
TW201129943A (en
Inventor
Kouichi Nakagomi
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of TW201129943A publication Critical patent/TW201129943A/zh
Application granted granted Critical
Publication of TWI469085B publication Critical patent/TWI469085B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/25Determination of region of interest [ROI] or a volume of interest [VOI]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Description

影像處理裝置、影像處理方法及電腦可讀取記憶媒體 [交叉引用相關申請案]
本申請案依2009年8月31日提出之日本專利申請案第2009-199675號而主張優先權,其全部內容以引用方式併入本文。
本發明係關於一種影像處理裝置、影像處理方法及電腦可讀取記憶媒體。
在影像處理之領域中,習知有一種技術,其係生成顯示從影像取得之複數個物理性特徵的特徵圖,並藉由統合此等特徵圖,從處理對象之影像檢測出特定之區域,作為關注區域。
作為更具體之方法,例如Treisman之特徵統合理論係統合複數個特徵圖而取得顯著性圖。此外,Itti及Koch等人之理論係將各特徵圖以與各平均值之平方誤差標準化,並藉由線性結合統合全部之特徵圖後,藉由高斯差濾波器(Difference of Gaussian Filter)將統合特徵圖回歸地濾波,並抽出最後取得之濾波結果的局部峰值作為關注區域(例如參照非專利文獻1)。
此外,作為在上述理論所使用之複數個特徵圖,通常係利用高亮度、特定色彩或強反差等在人類視覺處理之初期階段會優先關注到在知覺上顯著之物體的性質而取得。
[非專利文獻1]Laurent Itti、Christof Koch and Ernst Niebur,「A Model of Saliency-Based Visual Attention for Rapid Scene Analysis」,IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE,(美國),IEEE Computer Society,1998年11月,第20卷,第11號,p.1254-1259
但是,利用上述理論檢測關注區域之方法時,雖然有效檢測出處理對象影像中各個影像區域的特徵,不過並未探討有關在考慮到此處理對象影像作為影像全體所具有之資訊(例如構圖等)之情況下而檢測出各個影像區域之特徵。
本發明之典型具體實施例處理以上缺點及以上未敘述之其他缺點。然而,本發明無須克服以上所述之缺點,因此本發明之一典型具體實施例可能不會克服上述任何一個缺點。
因此,本發明之具體態樣係提供一種影像處理裝置、影像處理方法及電腦可讀取記憶媒體,可在考慮到構圖之情況下,從影像檢測出關注區域。
依據本發明一個以上之具體態樣提供一種影像處理裝置。前述影像處理裝置具備:取得手段(單元),係以取得影像的方式構成;指定手段(單元),係以在前述影像之端部指定至少一個像素的方式構成;追蹤手段(單元),係以追蹤前述至少一個像素之周邊之周邊像素中與前述至少一個像素類似之像素的方式構成;及估計手段(單元),係以估計由藉前述追蹤手段所追蹤之像素所構成的區域以外之區域作為關注區域的方式構成。
依據本發明一個以上之具體態樣提供一種影像處理方法。前述影像處理方法具有以下步驟:(a)取得影像;(b)在前述影像之端部指定至少一個像素;(c)追蹤前述至少一個像素之周邊之周邊區域中,與前述至少一個像素類似之像素;及(d)估計由前述所追蹤之像素所構成的區域以外之區域作為關注區域。
依據本發明一個以上之具體態樣提供一種電腦可讀取記憶媒體。前述電腦可讀取記憶媒體記憶使電腦執行以下動作用之程式:(a)取得影像;(b)在前述影像之端部指定至少一個像素;(c)追蹤前述至少一個像素之周邊之周邊區域中,與前述至少一個像素類似之像素;及(d)估計由前述所追蹤之像素所構成的區域以外之區域作為關注區域。
以下,就本發明使用圖式說明典型之實施例。但是,發明之範圍不限定於圖示之例。第1圖係顯示本發明一實施形態之攝影裝置100的概略構成的區塊圖。
依據本發明之實施例,攝影裝置100具備:取得手段(單元),係以取得影像的方式構成;指定手段(單元),係以在前述影像之端部指定至少一個像素的方式構成;追蹤手段(單元),係以追蹤前述至少一個像素之周邊之周邊像素中與前述至少一個像素類似之像素的方式構成;及估計手段(單元),係以估計由藉前述追蹤手段所追蹤之像素而構成的區域以外之區域作為關注區域的方式構成。
具體而言,如第1圖所示,攝影裝置100具備:攝影部1、攝影控制部2、影像資料生成部3、記憶體4、影像處理部5、顯示控制部6、顯示部7、記錄媒體8、操作輸入部9及中央控制部10。
攝影部1拍攝被攝體而生成影像幀。具體而言,圖示雖省略,攝影部1具備:透鏡部,由變焦透鏡及聚焦透鏡等複數個透鏡所構成;光圈,調整通過透鏡部之光的量;及電子攝影部,由CCD(Charge Coupled Device)及CMOS(Complementary Metal-oxide Semiconductor)等影像感測器而構成,並將通過透鏡部之各種透鏡的光學影像變換成二維影像信號。
圖示雖省略,攝影控制部2具備時序產生器及驅動器等。然後,攝影控制部2藉由時序產生器及驅動器驅動電子攝影部掃描,以按既定周期使光學影像藉由電子攝影部變換成二維之影像信號,並從該電子攝影部之攝影區域,一次一畫面讀出影像幀而輸出至影像資料生成部3。
此外,攝影控制部2作為攝影條件之調整控制,進行AE(自動曝光處理)、AF(自動聚焦處理)、AWB(自動白平衡)等。
影像資料生成部3對於從電子攝影部轉送來之影像資料的類比值之信號,按RGB各色彩成分適當調整增益後,以抽樣保持電路(省略圖示)抽樣保持,以A/D變換器(省略圖示)變換成數位資料,並以色彩加工電路(省略圖示)進行包含像素插補處理及γ修正處理之色彩加工處理後,生成數位值之亮度信號Y及色差信號Cb、Cr(YUV色彩空間之影像資料)。
從色彩加工電路輸出之亮度信號Y及色差信號Cb、Cr經由未圖示之DMA控制器,DMA轉送至用作緩衝記憶體之記憶體4。
記憶體4例如由DRAM等所構成,暫時記憶由影像處理部5或中央控制部10等所處理之資料等。
影像處理部5具備一影像取得部(取得手段)5a,此影像取得部5a係取得藉由攝影部1所拍攝之影像F1作為處理對象影像。
具體而言,影像取得部5a例如在實景(live view)影像或記錄用影像之攝影時,取得藉由影像資料生成部3所生成之影像F1的YUV資料。
此外,影像處理部5具備一影像縮小部5b,此影像縮小部5b係基於藉由影像取得部5a所取得之影像F1的YUV資料,生成在水平(x軸)及垂直(y軸)均以既定之比率縮小的縮小影像F2。
影像縮小部5b例如藉由對所取得之影像F1的YUV資料,實施使用既定之濾波器(例如高斯濾波器)的濾波處理,生成水平(x軸)及垂直(y軸)由既定像素(例如x軸×y軸:40×30像素等)構成之縮小影像F2。另外,在第3A圖、第3B圖與第5A圖、第5B圖中雖例示由x軸×y軸:54×40像素構成之縮小影像F2,不過此僅為一例,並非限於此者。
在此,影像縮小部5b係構成一影像縮小手段,此影像縮小手段係生成藉由影像取得部5a所取得之影像F1的縮小影像F2。
此外,影像處理部5具備一像素指定部5c,此像素指定部5c係指定藉由影像縮小部5b所生成之縮小影像F2之端部側的至少一個像素。
具體而言,像素指定部5c係指定縮小影像F2之四個角落的各像素Pix(0,0)、Pix(x,0)、Pix(0,y)、Pix(x,y)作為周邊像素Pix(i,j)(x,y;依縮小影像F2之像素數而規定之實數)。
另外,雖指定縮小影像F2之四個角落的像素作為周邊像素Pix(i,j),不過並非限於此者,只要是縮小影像F2之端部側之像素,可為任何位置之像素。此外,無須指定縮小影像F2全部四個角落之像素作為周邊像素Pix(i,j),只要指定至少一個角落之像素作為周邊像素Pix(i,j)即可。
在此,像素指定部5c係構成一指定手段,此指定手段係指定藉由影像取得部5a所取得之影像F1之端部側之至少一個像素。
此外,影像處理部5具備一像素追蹤部5d,此像素追蹤部5d係就藉由像素指定部5c所指定之縮小影像F2的四個角落之像素中至少一個角落之像素(周邊像素Pix(i,j))的周邊區域,追蹤與該周邊像素Pix(i,j)類似之像素。
亦即,像素追蹤部5d具有一判定部(判定手段)5e,此判定部係判定藉由像素指定部5c指定為周邊像素Pix(i,j)之一個像素的像素值與此一個像素之周邊之像素的像素值之一致度是否為既定值以上。在此,所謂像素值,例如係以RGB色彩空間、HSV色彩空間、YUV色彩空間等之既定之色彩空間所表現的各像素之色彩資訊(各成分之值)。並且,像素追蹤部5d作為與周邊像素Pix(i,j)類似之像素而追蹤藉由判定部5e判定為一致度為既定值以上之像素。
具體而言,像素追蹤部5d將藉由像素指定部5c所指定之周邊像素Pix(i,j)的8個相鄰像素Pix(i-1,j-1)、Pix(i,j-1)、Pix(i+1,j-1)、Pix(i-1,j)、Pix(i+1,j)、Pix(i-1,j+1)、Pix(i,j+1)、Pix(i+1,j+1)作為追蹤範圍(參照第4圖)。並且,像素追蹤部5d將該追蹤範圍之各像素作為像素值之比較判定的對象像素,例如將像素彼此之L2範數(norm)等作為一致度算出,並藉由判定部5e判定像素值是否接近。
例如,如第3B圖所示,將左上角落部之像素Pix(0,0)作為周邊像素Pix(i,j)時,像素追蹤部5d將相鄰像素Pix(i+1,j)、Pix(i,j+1)、Pix(i+1,j+1)作為比較判定之對象像素。繼續,像素追蹤部5d按照指定之變換公式將YUV色彩空間之影像資料依既定變換公式變換成RGB色彩空間之影像資料後,按照下述公式(1)藉由判定部5e比較判定像素彼此之像素值。並且,像素追蹤部5d將滿足該公式(1)之像素(像素值之一致度係既定值以上的像素)判斷為與周邊像素Pix(i,j)類似之像素而追蹤。
|P R (i ,j )-P R (i -1,j -1)|+|P G (i ,j )-P G (i -1,j -1)|+|P B (i ,j )-P B (i -1,j -1)|<Th 1...(1)
另外,PR 係以RGB色彩空間所表現之各像素的R成分之值,PG 係以RGB色彩空間所表現之各像素的G成分之值,PB 係以RGB色彩空間所表現之各像素的B成分之值。此外,TH1係用於判定現在之對象像素與相鄰像素之色彩是否接近的臨限值,且可依追蹤精度而任意適當變更。
此時,像素值與周邊像素pix(i,j)差距既定值以上之像素,因為色彩與此周邊像素pix(i,j)差距太大,而會被認定為無法藉由像素追蹤部5d追蹤,因此較佳係按照下述公式(2)預先除去像素值與周邊像素pix(i,j)差距既定值以上之像素。
( P R ( 0,0 )- P R ( i - 1,j - 1 ))+( P G ( 0,0 )- P G ( i - 1,j - 1 ))+( P B ( 0,0 )- P B ( i - 1,j -1 ) )< Th2 .....(2)
另外,TH2係除去色彩與周邊像素pix(i,j)差距太大之像素所用的臨限值,可依追蹤精度而任意適當變更。
此外,像素追蹤部5d將在上述追蹤範圍內作為與周邊像素pix(i,j)類似之像素(像素值之一致度為既定值以上的像素)而追蹤之追蹤像素(例如相鄰像素pix(i+1,j))周圍的8個相鄰像素作為新的追蹤範圍。並且,像素追蹤部5d就該新的追蹤範圍之各像素(pix(i+1,j)之周邊像素),與上述同樣地藉由判定部5e判定與pix(i+1,j)之像素值是否接近。
像素追蹤部5d藉由反覆執行上述處理,基於作為與周邊像素pix(i,j)類似之像素而追蹤的追蹤像素依序設定新的追蹤範圍,並依序追蹤像素下去(參照第5A圖、第5B圖)。
影像追蹤部5d以追蹤前述至少一個像素之周邊之周邊像素中與前述至少一個像素類似之像素的方式構成。
此外,影像處理部5具備一關注區域檢測部5f,此關注區域檢測部5f係基於像素追蹤部5d之追蹤結果,從縮小影像F2估計並檢測出關注區域A。
具體而言,例如第5B圖所示,關注區域檢測部5f係估計由縮小影像F2中藉由像素追蹤部5d所追蹤之複數個像素(第5B圖中,以網眼表示之像素)所構成的區域以外之區域(例如在第5B圖中主要為野牛存在之區域),作為關注區域A。並且,關注區域檢測部5f以使藉由影像取得部5a所取得之影像F1賦予對應的方式,將所估計之關注區域A在水平(x軸)及垂直(y軸)均以對應於影像縮小部5b之縮小比率的比率放大。
換言之,在影像內由位於靠近端部側之像素所構成之區域,例如係天空及地面之清楚可見的區域,且是使用者關注程度低的攝影對象之可能性很高。因此,可將在處理對象影像中所追蹤的像素以外之區域估計為使用者關注程度高之關注區域A。
在此,關注區域檢測部5f係以估計由藉由像素追蹤部5d所追蹤之像素所構成的區域以外之區域作為關注區域A的方式構成。
顯示控制部6進行讀出暫時記憶於記憶體4之顯示用的影像資料並予以顯示於顯示部7的控制。
具體而言,顯示控制部6具備VRAM、VRAM控制器、數位視頻編碼器等。並且,數位視頻編碼器在中央控制部10之控制下,經由VRAM控制器而從VRAM定期讀出從記憶體4所讀出並記憶於VRAM(省略圖示)之亮度信號Y及色差信號Cb、Cr,而根據此等資料產生視頻信號而輸出至顯示部7。
顯示部7例如係液晶顯示裝置,基於來自顯示控制部6之視頻信號,將藉由電子攝影部所拍攝之影像等顯示於顯示畫面。具體而言,顯示部7在靜態影像攝影模式或動態影像攝影模式,依既定之幀率逐次更新藉由攝影部1拍攝被攝體所生成的複數個影像幀,並顯示實景影像。此外,顯示部7顯示作為靜態影像而記錄之影像(記錄觀賞(rec-view)影像),或是顯示作為動態影像而記錄中之影像。
記錄媒體8例如藉由非揮發性記憶體(快閃記憶體)等而構成,記憶藉由影像處理部5之編碼部(省略圖示)以既定之壓縮形式所編碼之記錄用的靜態影像資料及由複數個影像幀構成之動態影像資料。
操作輸入部9用於進行攝影裝置100之既定操作。具體而言,操作輸入部9具備:與被攝體之拍攝指示有關的快門按鈕、與攝影模式或功能等之選擇模式有關的選擇確定按鈕、及與變焦量之調整指示有關之變焦按鈕等(均省略圖示),並依此等按鈕之操作而將既定之操作信號輸出至中央控制部10。
中央控制部10係控制攝影裝置100之各部。具體而言,中央控制部10具備CPU(省略圖示),並按照攝影裝置100用之各種處理程式(省略圖示)進行各種控制動作。
其次,就藉由攝影裝置100拍攝被攝體時,藉由影像處理部5所執行之關注區域估計處理,參照第2圖至第5B圖作說明。
第2圖係與顯示關注區域估計處理有關之動作的一例之流程圖。
如第2圖所示,影像取得部5a例如藉由攝影部1拍攝實景影像或記錄用影像,取得藉由影像資料生成部3所生成之影像F1的YUV色彩空間之影像資料(步驟S1)。繼續,影像縮小部5b例如藉由對影像F1之YUV資料實施使用既定之濾波器(例如高斯濾波器)之濾波處理,生成在水平(x軸)及垂直(y軸)均以既定之比率縮小的縮小影像F2(步驟S2)。
其次,像素指定部5c指定藉由影像縮小部5b所生成之縮小影像F2的四個角落之各像素Pix(0,0)、Pix(x,0)、Pix(0,y)、Pix(x,y)作為周邊像素Pix(i,j)(步驟S3)。另外,x,y係依縮小影像F2之像素數而規定的實數。
繼續,像素追蹤部5d特定藉由像素指定部5c所指定之周邊像素Pix(i,j)的8個相鄰像素Pix(i-1,j-1)、Pix(i,j-1)、Pix(i+1,j-1)、Pix(i-1,j)、Pix(i+1,j)、Pix(i-1,j+1)、Pix(i,j+1)、Pix(i+1,j+1),作為追蹤範圍(步驟S4)。
並且,像素追蹤部5d將該追蹤範圍之各像素作為像素值之比較判定的對象像素。之後,像素追蹤部5d按照既定之變換公式將YUV色彩空間之影像資料變換成RGB色彩空間的影像資料後,就縮小影像F2之四個角落的各像素Pix(0,0)、Pix(x,0)、Pix(0,y)、Pix(x,y),作為與比較判定之對象像素的像數值之一致度,例如算出像素彼此之L2範數等(步驟S5)。繼續,像素追蹤部5d之判定部5e藉由按照下述公式(3)及(4)比較判定像素彼此之像素值,判定像素值之一致度是否為既定值以上(步驟S6)。
| P R ( i,j )- P R ( i - 1,j - 1 ) |+ | P G ( i,j )- P G ( i - 1,j - 1 ) |+ | P B ( i,j )- P B ( i - 1,j - 1 ) |< Th1 .....(3)
( P R ( 0,0 )- P R ( i - 1,j-1 ))+( P G ( 0,0 )- P G ( i - 1,j - 1 ))+( P B ( 0,0 )- P B ( i - 1,j - 1 ))< Th2 .....(4)
在步驟S6判定為像素值之一致度為既定值以上時(步驟S6;是),亦即,判斷為滿足上述各公式,像素值之一致度為既定值以上時,像素追蹤部5d特定與周邊像素Pix(i,j)類似之像素,亦即特定像素值之一致度為既定值以上之全部像素(例如相鄰像素Pix(i+1,j)),作為追蹤像素,並特定該追蹤像素周圍之8個相鄰像素作為新的追蹤範圍(步驟S7)。
並且,像素追蹤部5d將該新的追蹤範圍之各像素作為像素值之比較判定的對象像素,與上述同樣地就縮小影像F2之四個角落的各像素Pix(0,0)、Pix(x,0)、Pix(0,y)、Pix(x,y),例如算出像素彼此之L2範數等,作為與新的追蹤範圍內之比較判定的對象像素之像素值的一致度(步驟S8)。繼續,像素追蹤部5d之判定部5e藉由按照上述公式(3)及(4)比較判定像素彼此之像素值,判定像素值之一致度是否為既定值以上(步驟S9)。
在步驟S9判定為像素值之一致度為既定值以上時(步驟S9;是),亦即判定為滿足上述各公式,像素值之一致度為既定值以上時,處理移至步驟S7,執行之後之處理。
步驟S7以後之處理係反覆進行直到在步驟S9就新的追蹤範圍內之比較判定的對象像素,判定為與對應之縮小影像F2的四個角落之各像素Pix(0,0)、Pix(x,0)、Pix(0,y)、Pix(x,y)的像素值之一致度並非既定值以上為止(步驟S9;否)。藉此,像素追蹤部5d基於作為與周邊像素Pix(i,j)類似之像素所追蹤的追蹤像素,依序設定新的追蹤範圍下去(參照第5A圖、第5B圖)。
並且,在步驟S9就新的追蹤範圍內之比較判定的對象像素,判定為像素值之一致度並非既定值以上時(步驟S9;否),關注區域檢測部5f估計縮小影像F2中由像素值與四個角落之各像素Pix(0,0)、Pix(x,0)、Pix(0,y)、Pix(x,y)的一致度為既定值以上之像素(第5B圖中以網眼表示之像素)所構成的區域以外之區域,作為關注區域A(步驟S10)。
之後,關注區域檢測部5f以使藉由影像取得部5a所取得之縮小前的影像F1賦予對應之方式,將所估計之關注區域A在水平(x軸)及垂直(y軸)均以對應於影像縮小部5b之縮小比率的比率而放大,並輸出至記憶體4(步驟S11),而結束關注區域估計處理。
另外,在步驟S6,就追蹤範圍內之比較判定的對象像素,判定為像素值之一致度並非既定值以上時(步驟S6;否),亦結束關注區域估計處理。
如上所述,根據本實施形態之攝影裝置100時,就處理對象影像四個角落之至少一個像素的周邊區域,藉由追蹤與該至少一個像素類似之像素,可特定構圖(輪廓)內位於靠近端部側之使用者關注程度低的攝影對象,亦即可特定例如清楚可見的區域(關注區域以外之區域)。
並且,估計處理對象影像中由像素追蹤部5d所追蹤之像素所構成的區域以外之區域,作為關注區域A。換言之,在處理對象影像中,由所追蹤之像素所構成之區域,亦即在構圖內由位於靠近端部側之像素所構成的區域,很可能是例如天空及地面之為清楚可見狀態(關注區域以外之狀態)的使用者關注程度低的攝影對象。藉此,可估計處理對象影像中所追蹤之像素以外的區域,作為使用者之關注程度高的關注區域A,並可在考慮到被攝體之構圖的情況下,檢測出處理對象影像內使用者關注程度高之關注區域(例如在第5B圖中主要為野牛存在之區域)。
此外,從處理對象影像四個角落之至少一個像素追蹤影像F2中與該一個像素類似之像素。具體而言,由於係將處理對象影像四個角落之至少一個像素的相鄰像素作為追蹤範圍,並且將該追蹤範圍內作為與四個角落之至少一個像素類似的像素所追蹤之像素的相鄰像素作為新的追蹤範圍而依序追蹤,因此在構圖內剩下使用者之關注程度更高的區域(關注區域A),並可正確特定由位於靠近端部側之像素所構成的使用者之關注程度低之區域,可使從處理對象影像之關注區域A之檢測精度提高。
再者,由於追蹤判定為像素值與處理對象影像之四個角落的至少一個像素之一致度為既定值以上的像素,作為與該四個角落之至少一個像素類似的像素,因此可追蹤與處理對象影像四個角落之像素相似色彩的像素,可正確特定在構圖內由位於靠近端部側之像素所構成的使用者之關注程度低的區域。
此外,可生成藉由影像取得部5a所取得之影像F1的縮小影像F2,而將此縮小影像F2作為處理對象影像,可更加快與縮小影像F2四個角落之像素類似的像素之追蹤處理、及使用者之關注程度高的關注區域A之估計處理的處理速度。
另外,本發明不限定於上述實施形態,在不脫離本發明之主旨的範圍中,亦可進行各種改良與設計的變更。
例如,將處理對象影像(縮小影像F2)四個角落之各像素的相鄰像素作為追蹤範圍,並且將在該追蹤範圍內作為與四個角落之各像素類似的像素而追蹤之像素的相鄰像素作為新的追蹤範圍,不過追蹤範圍及新的追蹤範圍之設定方法並非限於此者,只要是追蹤與處理對象影像(縮小影像F2)四個角落之各像素類似的像素之方法,可任意適當變更。
此外,上述實施形態中,係使用將藉由影像取得部5a所取得之影像F1縮小的縮小影像F2,作為關注區域A之估計處理的對象影像,不過是否生成縮小影像F2及縮小之比率(程度)等,可依裝置之能力而任意適當變更。
此外,攝影裝置100之構成,例示於上述實施形態者係一例,並非限於此者。亦即,係例示攝影裝置100作為影像處理裝置,不過並非限於此者。例如,亦可為處理對象影像之攝影係藉由與該攝影裝置100不同之攝影裝置進行,可為取得從該攝影裝置所轉送之處理對象影像的影像資料,而進行關注區域A之檢測的影像處理裝置。
再者,上述實施形態中,雖係採取在中央控制部10之控制下,藉由影像處理部5之影像取得部5a、像素指定部5c、像素追蹤部5d及關注區域檢測部5f驅動而實現作為取得手段、指定手段、追蹤手段及估計手段之功能的構成,不過並非限於此者,亦可為藉由中央控制部10之CPU執行指定之程式等來實現的構成。
亦即,係在記憶程式之程式記憶體(省略圖示)中記憶有包含取得處理常式、指定處理常式、追蹤處理常式及估計處理常式的程式。並且,亦可藉由取得處理常式,而使中央控制部10之CPU發揮取得影像之取得手段的功能。此外,亦可藉由指定處理常式,而使中央控制部10之CPU發揮指定藉由取得手段所取得之影像之端部側的至少一個像素之指定手段的功能。此外,亦可藉由追蹤處理常式,使中央控制部10之CPU發揮就藉由指定手段所指定之至少一個像素的周邊區域,追蹤與該一個像素類似之像素的追蹤手段之功能。此外,亦可藉由估計處理常式,使中央控制部10之CPU發揮在影像中估計由追蹤手段所追蹤之像素所構成的區域以外之區域作為關注區域A的估計手段之功能。
雖然本發明係在參照一些典型具體實施例之情況下顯示並敘述,惟熟悉本技術者在不脫離由附加之申請專利範圍所定義的本發明之精神及範圍內,當可對其形態及內容作各種變化。因此,包含在附加之申請專利範圍內的所有變化及修改均屬於本發明之真實精神及範圍。
1...攝影部
2...攝影控制部
3...影像資料生成部
4...記憶體
5...影像處理部
5a...影像取得部(取得手段)
5b...影像縮小部
5c...像素指定部
5d...像素追蹤部
5e...判定部
5f...關注區域檢測部
6...顯示控制部
7...顯示部
8...記錄媒體
9...操作輸入部
10...中央控制部
100...攝影裝置
A...關注區域
F1...影像
F2...縮小影像
Cb、Cr...色差信號
Y...亮度信號
第1圖係顯示本發明一實施形態之攝影裝置的區塊圖。
第2圖係顯示第1圖之攝影裝置進行關於關注區域估計處理之動作一例的流程圖。
第3A圖、第3B圖係關注區域估計處理之說明圖。
第4圖係關注區域估計處理中之追蹤範圍的說明圖。
第5A圖、第5B圖係關注區域估計處理之說明圖。
1...攝影部
2...攝影控制部
3...影像資料生成部
4...記憶體
5...影像處理部
5a...影像取得部(取得手段)
5b...影像縮小部
5c...像素指定部
5d...像素追蹤部
5e...判定部
5f...關注區域檢測部
6...顯示控制部
7...顯示部
8...記錄媒體
9...操作輸入部
10...中央控制部
100...攝影裝置

Claims (6)

  1. 一種影像處理裝置,其具備:取得手段,係以取得影像的方式構成;指定手段,係以在前述影像之端部指定至少一個像素作為追蹤開始像素的方式構成;第一判定手段,係判定前述至少一個像素的像素值與前述一個像素的周邊像素的像素值之一致度是否為第一既定值以上;第二判定手段,係判定根據前述指定手段所指定的前述追蹤開始像素的像素值與前述周邊像素的像素值之差分是否未達到第二既定值;追蹤手段,將前述至少一個像素的周邊像素作為追蹤範圍的同時,自前述追蹤範圍中依序追蹤前述周邊像素中之一者,其前述周邊像素之一者係根據前述第一判定手段所判定於第一既定值以上的一致度且根據前述第二判定手段所判定的未滿第二既定值的差分;及估計手段,係以估計由藉前述追蹤手段所追蹤之像素所構成的區域以外之區域作為關注區域的方式構成。
  2. 如申請專利範圍第1項之影像處理裝置,其中前述至少一個像素存在於前述影像之至少一個角落。
  3. 如申請專利範圍第1項之影像處理裝置,其中進一步具備影像縮小手段,該影像縮小手段係以生成前述影像之縮小影像的方式構成,前述指定手段以指定前述縮小影像之端部的至少一個像素的方式構成。
  4. 如申請專利範圍第1項之影像處理裝置,其中前述第二判定手段係構成將根據前記指定手段所指定的前記追蹤開始像素的像素值與前述周邊像素的像素值之差分,以(PR (0,0)-PR (i-1,j-1))+(PG (0,0)-PG (i-1,j-1))+(PB (0,0)-PB (i-1,j-1))<Th2的式子判定是否未滿第二既定值(Th2),其中,對於在RGB色空間所顯示的各像素中,PR 係為R成分的值;PG 係為G成分的值;PB 係為B成分的值;i為前述各像素的行位置;以及j為前述各像素的列位置。
  5. 一種影像處理方法,其具有以下步驟:(a)取得影像;(b)在前述影像之端部指定至少一個像素作為追蹤開始像素;(c)執行第一判定,係判定前述至少一個像素的像素值與前述一個像素的周邊像素的像素值之一致度是否在第一既定值以上;(d)執行第二判定,係判定根據前述指定手段所指定的前述追蹤開始像素的像素值與前述周邊像素的像素值之差分是否未達到第二既定值;(e)將前述至少一個像素的周邊像素作為追蹤範圍的同時,自前述追蹤範圍中依序追蹤前述周邊像素中之一 者,其前述周邊像素之一者係根據前述第一判定所判定於第一既定值以上的一致度且根據前述第二判定所判定的未滿第二既定值的差分;及(f)估計由前述所追蹤之像素所構成的區域以外之區域作為關注區域。
  6. 一種電腦可讀取記憶媒體,其記憶使電腦執行以下動作用之程式:(a)取得影像;(b)在前述影像之端部指定至少一個像素作為追蹤開始像素;(c)執行第一判定,係判定前述至少一個像素的像素值與前述一個像素的周邊像素的像素值之一致度是否在第一既定值以上;(d)執行第二判定,係判定根據前述指定手段所指定的前述追蹤開始像素的像素值與前述周邊像素的像素值之差分是否未達到第二既定值;(e)將前述至少一個像素的周邊像素作為追蹤範圍的同時,自前述追蹤範圍中依序追蹤前述周邊像素中之一者,其前述周邊像素之一者係根據前述第一判定所判定於第一既定值以上的一致度且根據前述第二判定所判定的未滿第二既定值的差分;及(f)估計由前述所追蹤之像素所構成的區域以外之區域作為關注區域。
TW99129026A 2009-08-31 2010-08-30 影像處理裝置、影像處理方法及電腦可讀取記憶媒體 TWI469085B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009199675A JP4868046B2 (ja) 2009-08-31 2009-08-31 画像処理装置、画像処理方法及びプログラム

Publications (2)

Publication Number Publication Date
TW201129943A TW201129943A (en) 2011-09-01
TWI469085B true TWI469085B (zh) 2015-01-11

Family

ID=43625017

Family Applications (1)

Application Number Title Priority Date Filing Date
TW99129026A TWI469085B (zh) 2009-08-31 2010-08-30 影像處理裝置、影像處理方法及電腦可讀取記憶媒體

Country Status (5)

Country Link
US (1) US8295609B2 (zh)
JP (1) JP4868046B2 (zh)
KR (1) KR101178777B1 (zh)
CN (1) CN102006485B (zh)
TW (1) TWI469085B (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2616166C2 (ru) * 2012-05-25 2017-04-12 Сан Пэтент Траст Способ кодирования изображений, способ декодирования изображений, устройство кодирования изображений, устройство декодирования изображений и устройство кодирования и декодирования изображений
JP6135283B2 (ja) * 2013-04-26 2017-05-31 オムロン株式会社 画像処理装置、画像処理方法、プログラムおよび記録媒体
JP6232982B2 (ja) * 2013-12-02 2017-11-22 オムロン株式会社 画像処理装置、画像処理方法およびプログラム
JP6642970B2 (ja) 2015-03-05 2020-02-12 キヤノン株式会社 注目領域検出装置、注目領域検出方法及びプログラム
TWI712909B (zh) * 2018-04-17 2020-12-11 和碩聯合科技股份有限公司 輔助臉部辨識的防僞方法及系統
US20220051399A1 (en) * 2018-09-14 2022-02-17 Health Partners Pte Ltd Method and system for determining well-being indicators
JP7423951B2 (ja) 2019-09-19 2024-01-30 富士フイルムビジネスイノベーション株式会社 画像処理装置及び画像処理プログラム
CN112738625B (zh) * 2020-12-24 2023-03-31 广东九联科技股份有限公司 基于机顶盒的视频图像增强方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1234569A (zh) * 1998-02-06 1999-11-10 富士通株式会社 彩色图象处理装置及图案抽取装置
US20050111734A1 (en) * 2003-11-20 2005-05-26 Kazuyo Watanabe Image partitioning apparatus and method
TW200838316A (en) * 2007-01-23 2008-09-16 Euclid Discoveries Llc Computer method and apparatus for processing image data
TW200919375A (en) * 2007-10-29 2009-05-01 Ind Tech Res Inst Method and system for object detection and tracking

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100512374C (zh) * 2007-12-05 2009-07-08 北京航空航天大学 一种基于阈值分割的图像边缘检测方法
CN101447079B (zh) * 2008-12-11 2012-11-28 香港理工大学 基于模糊拓扑的图像区域目标提取方法
CN101493892B (zh) * 2009-02-27 2012-03-28 中国农业大学 图像特征提取方法及装置
US8565531B2 (en) * 2009-10-09 2013-10-22 Xerox Corporation Edge detection for mixed raster content (MRC) images for improved compression and image quality

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1234569A (zh) * 1998-02-06 1999-11-10 富士通株式会社 彩色图象处理装置及图案抽取装置
US20050111734A1 (en) * 2003-11-20 2005-05-26 Kazuyo Watanabe Image partitioning apparatus and method
TW200838316A (en) * 2007-01-23 2008-09-16 Euclid Discoveries Llc Computer method and apparatus for processing image data
TW200919375A (en) * 2007-10-29 2009-05-01 Ind Tech Res Inst Method and system for object detection and tracking

Also Published As

Publication number Publication date
US8295609B2 (en) 2012-10-23
KR20110023762A (ko) 2011-03-08
JP2011053759A (ja) 2011-03-17
CN102006485A (zh) 2011-04-06
JP4868046B2 (ja) 2012-02-01
CN102006485B (zh) 2014-03-12
US20110052070A1 (en) 2011-03-03
KR101178777B1 (ko) 2012-09-07
TW201129943A (en) 2011-09-01

Similar Documents

Publication Publication Date Title
TWI469085B (zh) 影像處理裝置、影像處理方法及電腦可讀取記憶媒體
TWI425826B (zh) 影像選擇裝置、影像選擇方法
TWI416945B (zh) 影像處理裝置、影像處理方法及電腦可讀取媒體
US9489747B2 (en) Image processing apparatus for performing object recognition focusing on object motion, and image processing method therefor
US20150358542A1 (en) Image processing apparatus, image capturing apparatus, image processing method, image capturing method, and non-transitory computer-readable medium for focus bracketing
WO2013021767A1 (ja) 動体検出装置及び方法
KR101441786B1 (ko) 피사체 판정 장치, 피사체 판정 방법, 및 기록 매체
JP5625995B2 (ja) 被写体追跡装置、被写体追跡方法及びプログラム
CN110636216B (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
TW201101813A (en) Image capturing device, image capturing method and image capturing program
KR20150078275A (ko) 움직이는 피사체 촬영 장치 및 방법
JP5144724B2 (ja) 撮像装置、画像処理装置、撮像方法、及び画像処理方法
JP2015012482A (ja) 画像処理装置及び画像処理方法
JP5949559B2 (ja) 画像処理装置、撮像装置および画像処理プログラム
JP5510287B2 (ja) 被写体検出装置、被写体検出方法及びプログラム
JP2008092299A (ja) 電子カメラ
JP2009089220A (ja) 撮像装置
JP2011066827A (ja) 画像処理装置、画像処理方法及びプログラム
JP2009118434A (ja) ぶれ補正装置及び撮像装置
JP4871664B2 (ja) 撮像装置及び撮像装置の制御方法
JP5287965B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP5644180B2 (ja) 撮像装置、撮像方法及びプログラム
JP5740934B2 (ja) 被写体検出装置、被写体検出方法及びプログラム
JP2012019284A (ja) 画像処理装置、デジタルカメラおよび画像処理プログラム
JP2012009980A (ja) 画像処理装置、画像処理方法及びプログラム

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees