TWI552591B - 標記視頻中物件的方法、裝置及電腦可讀取記錄媒體 - Google Patents
標記視頻中物件的方法、裝置及電腦可讀取記錄媒體 Download PDFInfo
- Publication number
- TWI552591B TWI552591B TW104127575A TW104127575A TWI552591B TW I552591 B TWI552591 B TW I552591B TW 104127575 A TW104127575 A TW 104127575A TW 104127575 A TW104127575 A TW 104127575A TW I552591 B TWI552591 B TW I552591B
- Authority
- TW
- Taiwan
- Prior art keywords
- marking
- video
- option
- target object
- mark
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 38
- 230000004044 response Effects 0.000 claims description 14
- 230000006870 function Effects 0.000 description 24
- 238000012544 monitoring process Methods 0.000 description 9
- 230000008859 change Effects 0.000 description 5
- 238000004590 computer program Methods 0.000 description 3
- 239000003550 marker Substances 0.000 description 3
- 238000003825 pressing Methods 0.000 description 3
- 206010042635 Suspiciousness Diseases 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000015654 memory Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
- G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
- G11B27/322—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
Landscapes
- Television Signal Processing For Recording (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
本發明是關於一種安全監控技術,特別是關於一種快速標記視頻中物件的方法、裝置及電腦可讀取記錄媒體。
近年來,安全監控系統已十分普及,並且視頻監視系統已被廣泛地應用於與安全相關的用途。例如:機場、地鐵站、銀行或酒店等場所都設置有安全監控系統,並藉由安全監控系統來連續拍攝現場影像供即時監看與錄影存證。
安全監控系統通常以數個攝影機對監控的環境進行連續拍攝並儲存此些攝影機所連續拍攝之影像,即,進行監控的環境的錄影。安全監控系統具有錄影回放功能,以提供使用者查看錄影畫面中有興趣或可疑的物體。
在錄影回放過程中,當使用者發現錄影畫面中具有興趣或可疑的物體時,使用者可利用安全監控系統的標記功能標記出現此物體的錄影畫面。
習知的標記方法是使用者需要不斷觀察錄影畫面的內容,一
邊拉動時間軸來多次改變播放時間,以找出可能為物體開始出現在錄影畫面中的開始時間予以標記,然後再以相同方法找出可能為物體離開錄影畫面的結束時間並予以標記。這樣的標記方法,其實施過程相當繁瑣且沒有效率。當錄影資料牽涉到多台攝影機和/或多個欲標記物體時,類似動作要重複進行,對使用者將是一大負擔。因此,尚有待開發設計之需要。
在一實施例中,一種標記視頻中物件的方法,其包括:播放具有複數個畫面之一視頻、利用一游標在一播放畫面上選擇一目標物件、從一物體元資料中取得對應於目標物件之至少一時間戳記及至少一定界框、根據播放畫面的時間戳記所對應的定界框於播放畫面上呈現一可點選區域、產生連結可點選區域的至少一標記功能選項、以及根據一標記功能選項對目標物件進行標記。其中,每一時間戳記對應於一個畫面以及一個定界框。
在一實施例中,一種標記視頻中物件的裝置包括一處理單元、一影像拍攝單元以及一顯示單元。處理單元用以執行根據本發明任一實施例之標記視頻中物件的方法。影像拍攝單元用以拍攝視頻。顯示單元用以顯示播放畫面。
在一實施例中,一種電腦可讀取記錄媒體,其包括一組指令,當電腦載入並執行此組指令後能完成根據本發明任一實施例之標記視頻中物件的方法。
綜上,根據本發明之標記視頻中物件的方法能直接從物體的
元資料中取得播放畫面中之目標物件在對應錄影資料的位置與時間戳記,並利用此些資訊在播放畫面中之目標物件上顯示一個可點選的區域,以快速進行視訊中的目標物件的標記,進而利用此些標記更有效率的管理、回放與匯出錄影資料。
S110、S120、S130、S140、S150、S160、S170、S172、S174、S176、S181、S183、S185、S187、S190、S191、S192、S193、S194、S195、S196、S197‧‧‧方法步驟
20‧‧‧電子裝置
210‧‧‧使用者介面
220‧‧‧處理單元
230‧‧‧儲存單元
30‧‧‧播放畫面
31‧‧‧可點選區域
32‧‧‧主時間軸
34‧‧‧子時間軸
36‧‧‧圈選框
40‧‧‧游標
50‧‧‧目標物件
F1‧‧‧顯示框架
F2‧‧‧時間框架
F3‧‧‧控制框架
F4‧‧‧管理框架
ID-tag-1‧‧‧標記
ID-tag-2‧‧‧標記
ID-tag-3‧‧‧標記
ID-tag-4‧‧‧標記
It0‧‧‧進行標記選項
It1‧‧‧標記功能選項
It2‧‧‧標記功能選項
It3‧‧‧標記功能選項
Pt1‧‧‧縮圖
Pt2‧‧‧縮圖
Pt3‧‧‧縮圖
W0‧‧‧清單方塊
W1‧‧‧清單方塊
W2‧‧‧清單方塊
W3‧‧‧清單方塊
Ic1‧‧‧時間軸調整選項
Ic2‧‧‧時間軸調整選項
Pm1‧‧‧縮圖
Pm2‧‧‧縮圖
Ia1‧‧‧備選標記選項
Ia2‧‧‧備選標記選項
Ia3‧‧‧備選標記選項
[第1圖]為根據本發明一實施例之標記視頻中物件的方法的流程圖。
[第2圖]為實施第1圖之標記視頻中物件的方法之電子裝置的一實施例的概要示意圖。
[第3圖]為顯示在第2圖之使用者介面上的回放視窗的第一態樣之示意圖。
[第4圖]為顯示在第2圖之使用者介面上的回放視窗的第二態樣之示意圖。
[第5圖]為顯示在第2圖之使用者介面上的回放視窗的第三態樣之示意圖。
[第6圖]為根據本發明另一實施例之標記視頻中物件的方法的流程圖。
[第7圖]為根據本發明又一實施例之標記視頻中物件的方法的局部流程圖。
[第8圖]為顯示在第2圖之使用者介面上的回放視窗的第四態樣之示意圖。
[第9圖]為顯示在第2圖之使用者介面上的回放視窗的第五態樣之示意圖。
[第10圖]為第1、6及7圖之步驟S190的一實施例之細部流程圖。
[第11圖]為第1、6及7圖之步驟S190的另一實施例之細部流程圖。
[第12圖]為顯示在第2圖之使用者介面上的回放視窗的第六態樣之示意圖。
第1圖為根據本發明一實施例之標記視頻中物件的方法的流程圖。第2圖為實施第1圖之標記視頻中物件的方法之電子裝置的一實施例的概要示意圖。
參照第1及2圖,根據本發明任一實施例之標記視頻中物件的方法可由一電腦程式實現,以致於當電腦(即,具有使用者介面210、處理單元220與儲存單元230之任意電子裝置20,如:安全監控系統)載入程式並執行後可完成任一實施例之標記視頻中物件的方法。在一些實施例中,使用者介面210可為一觸控式顯示單元、一般顯示單元與多個實體按鍵之組合、或觸控式顯示單元與一個或多個實體按鍵之組合等。其中,多個實體按鍵可以鍵盤、滑鼠或其組合實現。
於此,儲存單元230儲存一視訊(即,錄影資料)。其中,此視訊具有複數個畫面(frame),並且每個畫面具有一時間戳記(timestamp)。於此,儲存單元230中的視訊可來自電子裝置20本身具備的攝影單元或電子裝置20的外部裝置(例如:攝影機或影像伺服器等)。
其中,外部裝置能以有線或無線方式連接電子裝置20。於此,外部裝置可為近端裝置(即,其與電子裝置20位在同一內部網絡中)。外部裝置亦可為遠端裝置(即,其位在網際網絡中)。
此外,此視訊還具有一物體元資料(object meta data)。物體元資料包括每一個畫面中的每一個目標物件、出現此些目標物件的畫面的時間戳記、每一個目標物件在對應畫面中的位置(即,定界框(bounding box)),以及三者間的對應關係。換言之,物體元資料中具有多個目標物件、每一個目標物件對應於一時間戳記和一定界框,並且由此三個資訊構成一對應關係。物體元資料的此些目標物件可代表相同物體的影像,亦可代表不同物體的影像,或為其組合。於此,物體元資料可在錄影當下或之後利用影像辨識技術對原始視訊進行偵測分析(例如:移動偵測分析、人臉偵測分析等)而得之。
在一些實施例中,根據本發明之標記視頻中物件的方法可為安全監控系統的錄影回放功能。當使用者執行錄影回放功能時,處理單元220讀出儲存單元230中的視訊,並播放讀出的視訊在電子裝置20的顯示單元(使用者介面210)上(步驟S110)。
參照第3圖,在一些實施例中,於錄影回放過程中,處理單元220顯示一回放視窗在顯示單元上,並透過此回放視窗播放此視訊。於此,回放視窗包括一顯示框架F1、一時間框架F2以及一控制框架F3。於視訊播放過程中,處理單元220將當前顯示之畫面(以下稱「播放畫面30」)顯示在顯示框架F1中,並且根據所有畫面的時間戳記顯示一主時間軸32
在時間框架F2中。處理單元220提供多個控制鍵在控制框架F3中。於此,控制鍵可例如:播放(play)鍵、正播(forward)鍵、倒播(backward)鍵、停止鍵、暫停鍵、音量調整鍵或其任意組合等。
處理單元220會提供一游標40在使用者介面210上,並偵測此游標40在播放畫面30上的動作。於此,使用者可操作使用者介面210以移動游標40至有興趣或可疑的目標物件50(即,播放畫面30中的物體影像)上並點選目標物件50。
當游標40移到播放畫面30中的目標物件50上(如,游標與播放畫面30上的目標物件50的影像部分重疊)時,處理單元220即偵測到游標40在播放畫面30上選擇一目標物件50(步驟S120),於是處理單元220從一物體元資料中取得對應於此目標物件50之至少一時間戳記及至少一定界框(步驟S130)。在一些實施例中,處理單元220基於游標40在播放畫面30上的位置得知目標物件50為何,再以此目標物件50找出物體元資料中具有此目標物件50的至少一組對應關係,即得到至少一組對應關係中的至少一時間戳記及至少一定界框。
此外,處理單元220亦根據播放畫面30的時間戳記所對應之目標物件50的定界框於播放畫面30上呈現一可點選區域31(步驟S140),如第3圖所示。並且,處理單元220產生連結可點選區域31的至少一標記功能選項(步驟S150)。
在一些實施例中,當使用者在游標40位在播放畫面30中的目標物件50上的情況下進行點選(例如:按壓滑鼠右鍵)時,處理單元220
對應播放畫面30上的游標40顯示具有至少一標記功能選項It1、It2、It3的一清單方塊W0在播放畫面30上,如第4圖所示。在一些實施例中,在清單方塊W0顯示的當下,清單方塊W0是對應至游標40,但並不以此為限。
當使用者點選任一標記功能選項It1、It2、It3時,處理單元220會根據受選之標記功能選項It1、It2、It3對目標物件50進行標記(步驟S190)。
在一些實施例中,物體元資料中的每一目標物件50是以各自的物體識別碼表示。於此,處理單元220基於游標40在播放畫面30上的位置(其落入一定界框)及播放畫面30的時間戳記從物體元資料中找出目標物件50的一物體識別碼,然後再根據此物體識別碼從物體元資料中取得對應此物體識別碼的所有時間戳記及定界框。當使用者在游標40位在一標記功能選項It1、It2、It3上的情況下進行點選(例如:按壓滑鼠右鍵)時,處理單元220會接收到受選之標記功能選項It1、It2、It3的受選信號,並且響應此受選信號根據對應此物體識別碼的所有定界框中之每一者對其所對應之時間戳記的畫面進行標記。
在一些實施例中,當游標40選擇一標記功能選項It1、It2、It3時,處理單元220會接收到受選之標記功能選項It1、It2、It3的受選信號,並且響應此受選信號,根據各時間戳記及各時間戳記所對應的定界框提供一圈選框36至對應的畫面。因此,當目標物件50對應之時間戳記的畫面中之任一者為播放畫面30時,處理單元220會同時在播放畫面30中的目標物件50上呈現圈選框36,如第5圖所示。
在一些實施例中,各圈選框36的尺寸與在播放畫面30中的位置可由對應的定界框所決定。
在一些實施例中,各圈選框36所圈選的區域即可為其對應之可點選區域31。
在一些實施例中,參照第6圖,當游標40移到播放畫面30中的目標物件50上時,處理單元220會根據取得之所有時間戳記於主時間軸32上呈現對應於目標物件50的一子時間軸34(如第3至5圖所示)(步驟S160)。在一些實施例中,子時間軸34具有對應於目標物件50之至少一時間戳記所對應的至少一畫面的至少一縮圖Pt1、Pt2、Pt3。在一些實施例中,對應於目標物件50之至少一時間戳記中最早的時間戳記(如,縮圖Pt1的時間戳記)會預設為標記開始(mark-in)時間,而其中最晚的時間戳記(如,縮圖Pt3的時間戳記)會預設為標記結束(mark-out)時間。
在一些實施例中,使用者可直接點選縮圖來改變標記開始時間或標記結束時間。參照第7圖及第8圖,處理單元220根據使用者對使用者介面210的操控,將游標40移動至主時間軸32的複數個縮圖Pm1、Pm2中之一受選縮圖(即,縮圖Pm1)上(步驟S170)。當使用者在游標40位在受選縮圖Pm1上的情況下進行點選(例如:按壓滑鼠右鍵)時,處理單元220會偵測到游標40選擇受選縮圖Pm1,然後產生至少一時間軸調整選項Ic1、Ic2(步驟S172)。於此,處理單元220會將產生的時間軸調整選項Ic1、Ic2與受選縮圖Pm1連結(步驟S174),並且顯示產生的時間軸調整選項Ic1、Ic2(如第8圖所示)(步驟S176)。
在一些實施例中,處理單元220會根據游標40或受選縮圖Pm1於回放視窗上的位置,將具有產生的時間軸調整選項Ic1、Ic2之清單方塊W1顯示在回放視窗上,以供使用者參考及選擇以變更子時間軸34的開始時間或結束時間。
舉例來說,處理單元220可響應受選縮圖的受選信號,產生並顯示連結游標40或受選縮圖的清單方塊W1。
於顯示後,處理單元220會偵測時間軸調整選項Ic1、Ic2,以確認是否有任一時間軸調整選項Ic1、Ic2受選。在一些實施例中,至少一時間軸調整選項Ic1、Ic2可為一標記開始選項(如,時間軸調整選項Ic1)、一標記結束選項(如,時間軸調整選項Ic2)或其組合。
在一些實施例中,當使用者在游標40位在連結受選縮圖Pm1之標記開始選項上的情況下進行點選(例如:按壓滑鼠右鍵)時,處理單元220會接收到標記開始選項的一受選信號(步驟S181)。然後,處理單元220根據受選信號與受選縮圖Pm1重設子時間軸34的開始時間(步驟S183)。舉例來說,假設子時間軸34的範圍是由縮圖Pt1的時間戳記到縮圖Pt3的時間戳記,如第7圖所示。當游標40選擇受選縮圖Pm1之時間軸調整選項Ic1時,處理單元220接收時間軸調整選項Ic1的受選信號。並且,處理單元220響應時間軸調整選項Ic1的受選信號而將子時間軸34的標記開始時間從縮圖Pt1的時間戳記變更為受選縮圖Pm1的時間戳記,換言之,子時間軸34的範圍會由縮圖Pt1的時間戳記到縮圖Pt3的時間戳記變更為縮圖Pm1的時間戳記到縮圖Pt3的時間戳記。
在一些實施例中,當使用者在游標40位在連結受選縮圖Pm2之標記結束選項上的情況下進行點選(例如:按壓滑鼠右鍵)時,處理單元220會接收到標記結束選項的一受選信號(步驟S185)。然後,處理單元220根據受選信號與受選縮圖Pm2重設子時間軸34的結束時間(步驟S187)。舉例來說,假設子時間軸34的範圍是由縮圖Pt1的時間戳記到縮圖Pt3的時間戳記,如第7圖所示。當游標40選擇受選縮圖Pm2之時間軸調整選項Ic2時,處理單元220接收時間軸調整選項Ic2的受選信號。並且,處理單元220響應時間軸調整選項Ic2的受選信號而將子時間軸34的標記結束時間從縮圖Pt3的時間戳記變更為受選縮圖Pm2的時間戳記,換言之,子時間軸34的範圍會由縮圖Pt1的時間戳記到縮圖Pt3的時間戳記變更為縮圖Pm1的時間戳記到縮圖Pm2的時間戳記。
在一些實施例中,清單方塊W1可更具有一進行標記選項It0,以供使用者進行對應此子時間軸34的目標物件50的標記。當進行標記選項It0受選(如,使用者利用游標40點選進行標記選項It0)時,處理單元220響應進行標記選項It0的受選信號顯示具有至少一標記功能選項It1、It2、It3的清單方塊W0在使用者介面210上,如第9圖所示。
在一些實施例中,子時間軸34的開始時間或結束時間的變更可在目標物件50的標記生成之前,亦可在目標物件50的標記生成之後。換言之,不論是在目標物件50的標記生成之前或是在目標物件50的標記生成之後,處理單元220均可響應受選縮圖的受選信號,產生並顯示對應受選縮圖的清單方塊W1,以供使用者參考及選擇以變更子時間軸34的開始時
間或結束時間。
在一些實施例中,至少一標記功能選項It1、It2、It3可為「產生標記」選項、「加入標記」選項、「移除相關標記」選項或其組合。
在一些實施例中,「產生標記」選項提供使用者針對目標物件50生成一新標記。舉例來說,參照第10圖,當使用者選擇「產生標記」選項(如,標記功能選項It1)時,處理單元220會接收到「產生標記」選項的受選信號(步驟S191)。接著,處理單元220響應「產生標記」選項的受選信號產生一新標記ID-tag-4(如第5圖所示)(步驟S192)並將當前之目標物件50(位在播放畫面30中)的子時間軸34(即,由縮圖Pt1的時間戳記到縮圖Pt3的時間戳記)連結至此標記ID-tag-4(步驟S193)。
在一些實施例中,「加入標記」選項提供使用者將目標物件50加入至任一已生成之標記(以下稱之為舊標記)中。舉例來說,參照第11圖,當使用者選擇「加入標記」選項(如,標記功能選項It2)時,處理單元220會接收到「加入標記」選項的受選信號(以下稱第一受選信號)(步驟S194)。接著,處理單元220根據第一受選信號提供舊標記的備選標記選項Ia1、Ia2、Ia3(如第12圖所示)(步驟S195),以供使用者選擇此目標物件50要加入的舊標記ID-tag-1、ID-tag-2、ID-tag-3。在一些實施例中,參照第12圖,處理單元220偵測到標記功能選項中之「加入標記」選項受選時,處理單元220響應第一受選信號從儲存單元230取得此視訊已生成的所有舊標記ID-tag-1、ID-tag-2、ID-tag-3,並且以具有此些舊標記ID-tag-1、ID-tag-2、ID-tag-3的備選標記選項Ia1、Ia2、Ia3之
清單方塊W1顯示在回放視窗中。
當使用者選擇其中一備選標記選項(以備選標記選項Ia1為例)時,處理單元220會接收到備選標記選項Ia1的受選信號(以下稱第二受選信號)(步驟S196)。接著,處理單元220根據第二受選信號將當前之目標物件50(位在播放畫面30中)所對應的時間戳記(即,由縮圖Pt1的時間戳記到縮圖Pt3的時間戳記)連結至備選標記選項Ia1所對應的舊標記ID-tag-1(步驟S197)。換言之,處理單元220會響應第二受選信號將當前之目標物件50的子時間軸34加入到備選標記選項Ia1所對應的舊標記ID-tag-1中。
在一些實施例中,「移除相關標記」選項提供使用者將所有舊標記中針對目標物件50的記錄移除。舉例來說,當使用者選擇「移除相關標記」選項(如,標記功能選項It3)時,處理單元220會接收到「移除相關標記」選項的受選信號。接著,處理單元220響應「移除相關標記」選項的受選信號從儲存單元230所儲存的所有舊標記中找出與目標物件50所對應的時間戳記連結的相關標記。當相關標記只有與當前之目標物件50所對應的時間戳記連結時,處理單元220即將此相關標記從儲存單元230中刪除。當相關標記除了與當前之目標物件50所對應的時間戳記連結外還有與其他目標物件50所對應的時間戳記連結時,處理單元220將相關標記與當前之目標物件50所對應的時間戳記之連結移除,即清除儲存單元230中相關標記與當前之目標物件50所對應的時間戳記之連結關係的記錄。
在一些實施例中,參照第5圖,回放視窗可更包括一管理框
架F4。管理框架F4記錄有所有已生成的標記ID-tag-1、ID-tag-2、ID-tag-3、ID-tag-4。於此,每一標記即代表一目標物件50。當管理框架F4中的任一標記ID-tag-1、ID-tag-2、ID-tag-3、ID-tag-4受選時,處理單元220會響應受選標記的受選信號切換顯示框架F1與時間框架F2的內容,即,將受選標記所連結的子時間軸34顯示在時間框架F2中,以及以受選標記所連結子時間軸34中之任一時間戳記的畫面作為播放畫面30並顯示在顯示框架F1中。
在一些實施例中,回放視窗可更具有匯出功能(如,以在控制框架F3中的一匯出鍵呈現,或者是以連結至管理框架F4或管理框架F4中的任一標記ID-tag-1、ID-tag-2、ID-tag-3、ID-tag-4的匯出選項呈現),以供使用者操控處理單元220,以將每一標記ID-tag-1、ID-tag-2、ID-tag-3、ID-tag-4所連結之時間戳記所對應之視訊片段截取成一獨立檔案。
在一些實施例中,目標物件可為人、動物、異常事物(如火災的火焰、淹水的水)等可在連續畫面中變動的物體影像。
在一些實施例中,處理單元220可由一個或多個諸如微處理器、微控制器、數位信號處理器、微型計算機、中央處理器、場編程閘陣列、可編程邏輯設備、狀態器、邏輯電路、類比電路、數位電路和/或任何基於操作指令操作信號(類比和/或數位)的處理元件來實現。
在一些實施例中,儲存單元230可由一個或多個記憶體實現。
在一些實施例中,實現根據本發明任一實施例之標記視頻中
物件的方法的電腦程式是由一組指令所組成,並且此電腦程式可儲存在一電腦可儲存媒體。
綜上,根據本發明之標記視頻中物件的方法能直接從物體的元資料中取得播放畫面中之目標物件在對應錄影資料的位置與時間戳記,並利用此些資訊在播放畫面中之目標物件上顯示一個可點選的區域,以快速進行視訊中的目標物件的標記,進而利用此些標記更有效率的管理、回放與匯出錄影資料。舉例來說,當使用者發現有興趣的目標物件時,可直接點選目標物件,以致使安全監控系統根據物體元資料中目標物件的時間戳記自動計算出目標物件進入場景的時間與離開場景的時間,進而自動設定標記開始時間與標記結束時間,讓這段期間內出現的目標物件同時具有此項標記。
S110、S120、S130、S140、S150、S190‧‧‧方法步驟
Claims (15)
- 一種標記視頻中物件的方法,包括:播放一視頻,其中該視頻具有複數個畫面;利用一游標在該等複數個畫面中之一播放畫面上選擇一目標物件;從一物體元資料中取得對應於該目標物件之至少一時間戳記及至少一定界框,其中各該時間戳記對應於該等複數個畫面中之一以及該至少一定界框中之一;根據該播放畫面的該時間戳記所對應的該定界框於該播放畫面上呈現一可點選區域;產生連結該可點選區域的至少一標記功能選項;以及根據該至少一標記功能選項中之一對該目標物件進行標記。
- 如請求項1所述之標記視頻中物件的方法,其中根據該至少一標記功能選項中之一對該目標物件進行標記的步驟包括:接收該至少一標記功能選項中之一的一受選信號;以及響應該受選信號,根據各該時間戳記及各該時間戳記所對應的該定界框提供一圈選框至對應的該畫面,其中當該至少一時間戳記所對應的該至少一畫面中之任一者為該播放畫面時,同時在該播放畫面中的該目標物件上呈現該圈選框。
- 如請求項2所述之標記視頻中物件的方法,其中各該圈選框的尺寸與在該播放畫面中的位置是由對應的該定界框所決定。
- 如請求項1所述之標記視頻中物件的方法,更包括: 根據該至少一時間戳記於該視頻的一主時間軸上呈現對應於該目標物件的一子時間軸。
- 如請求項4所述之標記視頻中物件的方法,其中該子時間軸具有該至少一時間戳記所對應的該至少一畫面的至少一縮圖。
- 如請求項4所述之標記視頻中物件的方法,其中根據該至少一標記功能選項中之一對該目標物件進行標記的步驟包括:接收該至少一標記功能選項中之一的一受選信號;以及根據該受選信號產生一標記,並將該子時間軸連結至該標記。
- 如請求項4所述之標記視頻中物件的方法,更包括:移動該游標至該主時間軸的複數個縮圖中之一受選縮圖上;產生至少一時間軸調整選項;連結該至少一時間軸調整選項至該受選縮圖;以及顯示該至少一時間軸調整選項。
- 如請求項7所述之標記視頻中物件的方法,其中該至少一時間軸調整選項包括一標記開始選項,該標記視頻中物件的方法更包括:接收該標記開始選項的一受選信號;以及根據該受選信號以及該受選縮圖重設該子時間軸的開始時間。
- 如請求項7所述之標記視頻中物件的方法,其中該至少一時間軸調整選項包括一標記結束選項,該標記視頻中物件的方法更包括:接收該標記結束選項的一受選信號;以及根據該受選信號以及該受選縮圖重設該子時間軸的結束時間。
- 如請求項1所述之標記視頻中物件的方法,其中根據該至少一標記功能選項中之一對該目標物件進行標記的步驟包括:接收該至少一標記功能選項中之一的一第一受選信號;根據該第一受選信號提供至少一標記的至少一備選標記選項;接收該至少一備選標記選項中之一的一第二受選信號;以及根據該第二受選信號將該至少一時間戳記連結至對應的該標記。
- 如請求項1所述之標記視頻中物件的方法,其中該從一物體元資料中取得對應於該目標物件之至少一時間戳記及至少一定界框的步驟包括:根據該播放畫面的該時間戳記從該物體元資料中找出該目標物件的一物體識別碼;以及根據該物體識別碼從該物體元資料中取得該至少一時間戳記及該至少一定界框。
- 如請求項1所述之標記視頻中物件的方法,其中該從一物體元資料中取得對應於該目標物件之至少一時間戳記及至少一定界框的步驟包括:依據該游標在該播放畫面上的位置,從該物體元資料中找出對應於該目標物件的一物體識別碼,且該游標與該播放畫面上的該目標物件的影像部分重疊;以及根據該物體識別碼從該物體元資料中取得該至少一時間戳記及該至少一定界框。
- 如請求項11所述之標記視頻中物件的方法,其中根據該至少一標記功能選項中之一對該目標物件進行標記的步驟包括:接收該至少一標記功能選項中之一的一受選信號;以及響應該受選信號根據對應該物體識別碼的該至少一定界框中的每一者對每一該定界框所對應的該時間戳記的該畫面進行標記。
- 一種標記視頻中物件的裝置,包括:一處理單元,用以執行如請求項1至13中之任一項所述之標記視頻中物件的方法;一影像拍攝單元,用以拍攝該視頻,其中該視頻具有該等複數個畫面;以及一顯示單元,用以顯示該播放畫面。
- 一種電腦可讀取記錄媒體,包括一組指令,當電腦載入並執行該組指令後能完成如請求項1至13中之任一項所述之標記視頻中物件的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW104127575A TWI552591B (zh) | 2015-08-24 | 2015-08-24 | 標記視頻中物件的方法、裝置及電腦可讀取記錄媒體 |
US15/224,997 US10192588B2 (en) | 2015-08-24 | 2016-08-01 | Method, device, and computer-readable medium for tagging an object in a video |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW104127575A TWI552591B (zh) | 2015-08-24 | 2015-08-24 | 標記視頻中物件的方法、裝置及電腦可讀取記錄媒體 |
Publications (2)
Publication Number | Publication Date |
---|---|
TWI552591B true TWI552591B (zh) | 2016-10-01 |
TW201709747A TW201709747A (zh) | 2017-03-01 |
Family
ID=57848159
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW104127575A TWI552591B (zh) | 2015-08-24 | 2015-08-24 | 標記視頻中物件的方法、裝置及電腦可讀取記錄媒體 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10192588B2 (zh) |
TW (1) | TWI552591B (zh) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180052589A1 (en) * | 2016-08-16 | 2018-02-22 | Hewlett Packard Enterprise Development Lp | User interface with tag in focus |
TWI650014B (zh) * | 2017-03-20 | 2019-02-01 | 晶睿通訊股份有限公司 | 影像內容評論方法及其影像管理系統 |
US10936178B2 (en) * | 2019-01-07 | 2021-03-02 | MemoryWeb, LLC | Systems and methods for analyzing and organizing digital photos and videos |
US10817739B2 (en) | 2019-01-31 | 2020-10-27 | Adobe Inc. | Content-aware selection |
CN110020590A (zh) * | 2019-01-31 | 2019-07-16 | 阿里巴巴集团控股有限公司 | 基于区块链对人脸信息进行场景化存证的方法及装置 |
CN111901658B (zh) * | 2019-05-06 | 2022-07-22 | 腾讯科技(深圳)有限公司 | 评论信息显示方法、装置、终端及存储介质 |
US11625928B1 (en) * | 2020-09-01 | 2023-04-11 | Amazon Technologies, Inc. | Language agnostic drift correction |
CN113067983B (zh) * | 2021-03-29 | 2022-11-15 | 维沃移动通信(杭州)有限公司 | 视频处理方法、装置、电子设备和存储介质 |
CN113453071B (zh) * | 2021-06-28 | 2022-09-30 | 杭州海康威视数字技术股份有限公司 | 数据叠加方法、装置及电子设备 |
WO2023128437A1 (ko) * | 2021-12-31 | 2023-07-06 | 한화테크윈 주식회사 | 영상 수신/검색 장치 및 영상 표시 방법 |
CN114663940A (zh) * | 2022-03-17 | 2022-06-24 | 北京玉盛元科技有限公司 | 视频处理方法、装置和设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050285875A1 (en) * | 2004-06-28 | 2005-12-29 | Microsoft Corporation | Interactive viewpoint video system and process |
US20110078623A1 (en) * | 2009-09-30 | 2011-03-31 | Microsoft Corporation | Video content-aware advertisement placement |
US20150010209A1 (en) * | 2008-03-25 | 2015-01-08 | International Business Machines Corporation | Real time processing of video frames |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7703044B2 (en) * | 2001-11-19 | 2010-04-20 | Ricoh Company, Ltd. | Techniques for generating a static representation for time-based media information |
US8656282B2 (en) * | 2007-01-31 | 2014-02-18 | Fall Front Wireless Ny, Llc | Authoring tool for providing tags associated with items in a video playback |
US20090110245A1 (en) * | 2007-10-30 | 2009-04-30 | Karl Ola Thorn | System and method for rendering and selecting a discrete portion of a digital image for manipulation |
US8010691B2 (en) * | 2008-12-29 | 2011-08-30 | Cisco Technology, Inc. | Content tagging of media streams |
US20110307491A1 (en) * | 2009-02-04 | 2011-12-15 | Fisk Charles M | Digital photo organizing and tagging method |
US8281231B2 (en) * | 2009-09-11 | 2012-10-02 | Digitalsmiths, Inc. | Timeline alignment for closed-caption text using speech recognition transcripts |
US9111255B2 (en) * | 2010-08-31 | 2015-08-18 | Nokia Technologies Oy | Methods, apparatuses and computer program products for determining shared friends of individuals |
US20120239690A1 (en) * | 2011-03-16 | 2012-09-20 | Rovi Technologies Corporation | Utilizing time-localized metadata |
US9357242B2 (en) * | 2011-06-10 | 2016-05-31 | Tata Consultancy Services Limited | Method and system for automatic tagging in television using crowd sourcing technique |
US9070040B2 (en) * | 2011-08-04 | 2015-06-30 | Nec Corporation | Video processing system, method of determining viewer preference, video processing apparatus, and control method |
US9521175B2 (en) * | 2011-10-07 | 2016-12-13 | Henk B. Rogers | Media tagging |
JP5845801B2 (ja) * | 2011-10-18 | 2016-01-20 | ソニー株式会社 | 画像処理装置、画像処理方法、及び、プログラム |
US9047376B2 (en) * | 2012-05-01 | 2015-06-02 | Hulu, LLC | Augmenting video with facial recognition |
US9118886B2 (en) * | 2012-07-18 | 2015-08-25 | Hulu, LLC | Annotating general objects in video |
US8774596B2 (en) * | 2012-12-10 | 2014-07-08 | Futurewei Technologies, Inc. | Context driven video prioritization and bookmarking |
US9037643B2 (en) * | 2013-03-15 | 2015-05-19 | Edgecast Networks, Inc. | Dynamic tag management for optimizing content delivery |
US20160150284A1 (en) * | 2014-11-20 | 2016-05-26 | Squaredon Co Ltd | Dynamic channel selection for live and previously broadcast content |
US9851870B2 (en) * | 2015-03-17 | 2017-12-26 | Raytheon Company | Multi-dimensional video navigation system and method using interactive map paths |
-
2015
- 2015-08-24 TW TW104127575A patent/TWI552591B/zh active
-
2016
- 2016-08-01 US US15/224,997 patent/US10192588B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050285875A1 (en) * | 2004-06-28 | 2005-12-29 | Microsoft Corporation | Interactive viewpoint video system and process |
US20150010209A1 (en) * | 2008-03-25 | 2015-01-08 | International Business Machines Corporation | Real time processing of video frames |
US20110078623A1 (en) * | 2009-09-30 | 2011-03-31 | Microsoft Corporation | Video content-aware advertisement placement |
TW201113825A (en) * | 2009-09-30 | 2011-04-16 | Microsoft Corp | Video content-aware advertisement placement |
Also Published As
Publication number | Publication date |
---|---|
US20170062014A1 (en) | 2017-03-02 |
TW201709747A (zh) | 2017-03-01 |
US10192588B2 (en) | 2019-01-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI552591B (zh) | 標記視頻中物件的方法、裝置及電腦可讀取記錄媒體 | |
CN101267523B (zh) | 处理运动图像的设备、成像设备、图像显示控制方法 | |
US8437508B2 (en) | Information processing apparatus and information processing method | |
KR101376455B1 (ko) | 화상 처리 장치 및 화상 표시 방법 | |
US8224027B2 (en) | Method and apparatus for managing video data | |
JP6769943B2 (ja) | 録画したビデオを再生するための方法およびシステム | |
TWI664855B (zh) | 用於播放經記錄視訊之方法與裝置 | |
US20060119703A1 (en) | Apparatus for processing images, apparatus for processing reproduced images, method of processing images, and method of processing reproduced images | |
US9860475B2 (en) | Video processing apparatus, video processing method, and storage medium | |
US10929682B2 (en) | Information processing apparatus, information processing method, and storage medium | |
JP5506324B2 (ja) | 類似画像検索システム、および、類似画像検索方法 | |
CN110740290B (zh) | 监控录像预览方法及装置 | |
US11211097B2 (en) | Generating method and playing method of multimedia file, multimedia file generation apparatus and multimedia file playback apparatus | |
JP6203188B2 (ja) | 類似画像検索装置 | |
JP6214762B2 (ja) | 画像検索システム、検索画面表示方法 | |
JP2007047902A (ja) | 映像検索装置 | |
KR20210108691A (ko) | 영상 검색 장치 및 이를 포함하는 네트워크 감시 카메라 시스템 | |
JP2020198037A (ja) | 制御装置 | |
TWI566604B (zh) | 影像擷取裝置、影像擷取系統及儲存媒體 | |
US20220286642A1 (en) | Event-oriented multi-channel video backup apparatus and method, and network surveillance camera system including the same | |
JP3173910U (ja) | 医用動画データの保存装置 | |
JP5089648B2 (ja) | 映像比較装置,映像比較方法,映像比較プログラムおよび映像比較プログラムの記録媒体 | |
CN115699723B (zh) | 影像编辑装置、影像编辑方法以及记录介质 | |
JP2010212821A (ja) | 記録再生装置 |