JP2009076979A - 動画像処理装置 - Google Patents
動画像処理装置 Download PDFInfo
- Publication number
- JP2009076979A JP2009076979A JP2007241509A JP2007241509A JP2009076979A JP 2009076979 A JP2009076979 A JP 2009076979A JP 2007241509 A JP2007241509 A JP 2007241509A JP 2007241509 A JP2007241509 A JP 2007241509A JP 2009076979 A JP2009076979 A JP 2009076979A
- Authority
- JP
- Japan
- Prior art keywords
- frame
- image
- feature amount
- moving image
- pts
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
【解決手段】PTS比較部103により現行フレームとその直前の先行フレームとの間のPTS差分値が閾値THe以内か否かを判定する。そして、閾値THe以内であれば欠落フレームはないと見なし、特徴量比較部104で上記フレーム間の画像特徴量の類似度を判定し、類似度が閾値以上の場合に現行フレームの画像特徴量とPTSを画像変化点を表す情報としてメモリに記憶する。これに対しPTS差分値が閾値THeを超えている場合には欠落フレームがあると見なし、エラー特徴量生成部106により特有の画像特徴量を生成する。そして、この特有の画像特徴量を、先行フレームのPTSに閾値THeを加算した値と共に、画像変化点を表す情報としてメモリに記憶する。
【選択図】 図2
Description
図1は、この発明の第1の実施形態に係わる動画像処理装置を備えた携帯端末の構成を示すブロック図である。
図示しない基地局から送信された無線信号は、アンテナ11で受信されたのちアンテナ共用器(DUP)12を介して受信回路(RX)13に入力される。受信回路13は、上記受信された無線信号を周波数シンセサイザ(SYN)14から出力された局部発振信号とミキシングして中間周波信号に周波数変換(ダウンコンバート)する。そして、このダウンコンバートされた中間周波信号を直交復調して受信ベースバンド信号を出力する。なお、上記周波数シンセサイザ14から発生される局部発振信号の周波数は、制御ユニット23から出力される制御信号SYCによって指示される。
すなわち、制御ユニット23は、動画像復号部101と、特徴量算出部102と、PTS比較部103と、特徴量比較部104と、特徴量記憶部105と、エラー特徴量生成部106を備えている。これらの機能はいずれもアプリケーション・プログラムを上記マイクロコンピュータに実行させることにより実現される。なお、上記各機能のうち動画像復号部101の機能はコンパンダ17内に設けられたビデオデコーダにより実現してもよく、また特徴量記憶部105は記憶ユニット24内に設けてもよい。
動画像復号部101では、ワンセグ放送信号から分離された動画像ストリームがH.264方式に従い復号され、復号された動画像フレームが当該動画像フレームのPTSと共に一定のフレーム周期で出力される(ステップS31)。
(1)フレームの欠落が発生していないときの処理
上記PTS比較部103により欠落フレームがないと判定されると、特徴量比較部104においてカット検出処理が以下のように行われる(ステップS34)。
すなわち、特徴量比較部104では、上記特徴量算出部102により算出された現行フレームの画像特徴量と先行フレームの画像特徴量との間の類似度が算出され、この類似度が閾値と比較される。そして、類似度が閾値以上であれば、上記現行フレームが画像変化点(カット)であるとステップS35で判定され、当該現行フレームの画像特徴量とPTSが上記画像変化点を示す情報として特徴量記憶部105によりメモリに記憶される(ステップS36)。
上記PTS比較部103により欠落フレームがあると判定されると、エラー特徴量生成部106により欠落フレームに代わるエラー表示用フレームを表す特有の画像特徴量が生成される(ステップS38)。例えば、白色雑音画像から抽出される特徴量が上記特有の画像特徴量として生成される。具体的には、白色雑音画像から抽出した画像特徴量を表すデータを制御ユニット23内のメモリに予め記憶しておき、このメモリから上記白色雑音画像から抽出した画像特徴量のデータを読み出すことにより実現される。
この発明の第2の実施形態は、動画像復号部から復号動作時の瞬時リフレッシュ(IDR;Instantaneous Decoding Refresh)ピクチャに対応するリフレッシュフレームのみを出力するようにして、このリフレッシュフレームをカット検出の対象とする。さらに、現行フレームとその直前の先行フレームとの間のPTS差分値がIDR周期と等しいか否かを判定し、PTS差分値がIDR周期と等しい場合に上記現行フレームと先行フレーム間の画像特徴量の類似度をもとに画像変化点の有無を判定し、PTS差分値がIDR周期と等しくない場合には上記現行フレームの画像特徴量とPTSを無条件に画像変化点を示す情報として記憶するようにしたものである。
動画像復号部101′では、ワンセグ放送信号から分離された動画像ストリームがH.264方式に従い復号され、さらにこの復号された動画像フレームのうちIDRに対応するリフレッシュフレームのみが当該リフレッシュフレームのPTSと共に一定のIDR周期で出力される(ステップS51)。上記リフレッシュフレームが出力されると特徴量算出部102では、例えば当該出力されたリフレッシュフレーム(現行フレーム)についてその画像特徴量が算出され、この算出された画像特徴量が一時保持される(ステップS52)。
図6(c)は以上のようにしてメモリに記憶された画像切替点を表す情報の一例を示すものである。
前記各実施形態では、ワンセグ放送受信機30により受信された動画像ストリームについて画像変化点の検出及びショット分割を行う場合を例にとって説明した。しかし、それに限定されるものではなく、図1に示すようにワンセグ放送受信機30により受信された動画像ストリームデータを一旦メモリカード等の外部記憶媒体28に記憶させ、この外部記憶媒体28から動画像ストリームデータを外部メモリインタフェース27を介して制御ユニット23に取り込み、この取り込んだ動画像ストリームデータに対し前記第1又は第2の実施形態で述べた処理を行うようにしてもよい。また、上記外部記憶媒体28に記憶された動画像ストリームデータは、他の携帯端末や放送受信機により受信されたものを記憶したものでもよい。
Claims (3)
- 動画像復号部から第1の周期で出力される復号後の動画像フレームをもとに、当該動画像フレームの内容が切り替わる画像変化点を表す情報を生成する動画像処理装置において、
前記動画像復号部から動画像フレームが出力されるごとに、その画像の特徴量を算出する手段と、
前記動画像復号部から動画像フレームが出力されるごとに、当該現行フレームの表示指定時刻と、当該現行フレームの直前の先行フレームの表示指定時刻との差分を計算し、この計算された差分が前記第1の周期に対応して設定された第1の閾値以内であるか否かを判定する手段と、
前記計算された表示指定時刻の差分が前記第1の閾値以内であると判定された場合に、前記現行フレームと先行フレームとの間の画像特徴量の類似度を算出し、この算出された類似度が予め設定された判定値以上であるか否かを判定する手段と、
前記算出された類似度が判定値以上と判定された場合に、前記現行フレームの画像特徴量をその表示指定時刻と共に画像変化点を表す情報としてメモリに記憶する手段と、
前記計算された表示指定時刻の差分が前記第1の閾値を超えていると判定された場合に、欠落フレームに代わる代替フレームを表す特有の画像特徴量を生成する手段と、
前記生成された特有の画像特徴量を、前記先行フレームの表示指定時刻と前記現行フレームの表示指定時刻との間に設定される代替フレーム用の表示指定時刻と共に画像変化点を表す情報として前記メモリに記憶する手段と
を具備することを特徴とする動画像処理装置。 - 前記特有の画像特徴量を生成する手段は、白色雑音画像から抽出される画像特徴量を予め記憶しておき、この記憶された画像特徴量を読み出して前記特有の画像特徴量とすることを特徴とする請求項1記載の動画像処理装置。
- 前記動画像復号部が復号後の動画像フレームのうちリフレッシュフレームのみを出力する機能を備えている場合に、
前記計算された表示時刻の差分が前記第1の閾値以内であると判定された場合に、現行リフレッシュフレームの表示指定時刻と、当該現行リフレッシュフレームの直前の先行リフレッシュフレームの表示指定時刻との差分を計算し、この計算された差分が前記リフレッシュフレームの出力周期に対応して設定された第2の閾値と等しいか否かを判定する手段と、
前記計算された表示指定時刻の差分が前記第2の閾値と等しくないと判定された場合に、前記現行リフレッシュフレームの画像特徴量をその表示指定時刻と共に画像変化点を表す情報としてメモリに記憶する手段と
を、さらに具備することを特徴とする請求項1記載の動画像処理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007241509A JP4996403B2 (ja) | 2007-09-18 | 2007-09-18 | 動画像処理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007241509A JP4996403B2 (ja) | 2007-09-18 | 2007-09-18 | 動画像処理装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2009076979A true JP2009076979A (ja) | 2009-04-09 |
JP2009076979A5 JP2009076979A5 (ja) | 2010-09-30 |
JP4996403B2 JP4996403B2 (ja) | 2012-08-08 |
Family
ID=40611567
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007241509A Expired - Fee Related JP4996403B2 (ja) | 2007-09-18 | 2007-09-18 | 動画像処理装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4996403B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108364338B (zh) * | 2018-02-06 | 2022-03-15 | 创新先进技术有限公司 | 一种图像数据的处理方法、装置及电子设备 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10257500A (ja) * | 1997-03-10 | 1998-09-25 | Sony Corp | 映像信号処理装置 |
JP2002010254A (ja) * | 2000-06-20 | 2002-01-11 | Sony Corp | 特徴点検出方法および記録再生装置 |
JP2002229535A (ja) * | 2001-01-31 | 2002-08-16 | Hitachi Ltd | 映像処理装置 |
JP2003087734A (ja) * | 2001-09-13 | 2003-03-20 | Sony Corp | エラー検出装置及びエラー検出方法並びに記録再生装置及び記録再生方法 |
JP2005110055A (ja) * | 2003-09-30 | 2005-04-21 | Toshiba Corp | 受信装置及び受信データ制御方法 |
JP2006067122A (ja) * | 2004-08-25 | 2006-03-09 | Matsushita Electric Ind Co Ltd | 受信装置、icカード及びホスト装置 |
JP2006254298A (ja) * | 2005-03-14 | 2006-09-21 | Matsushita Electric Ind Co Ltd | 動画再生装置及び動画再生方法 |
JP2006261760A (ja) * | 2005-03-15 | 2006-09-28 | Casio Comput Co Ltd | 受信回路 |
-
2007
- 2007-09-18 JP JP2007241509A patent/JP4996403B2/ja not_active Expired - Fee Related
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10257500A (ja) * | 1997-03-10 | 1998-09-25 | Sony Corp | 映像信号処理装置 |
JP2002010254A (ja) * | 2000-06-20 | 2002-01-11 | Sony Corp | 特徴点検出方法および記録再生装置 |
JP2002229535A (ja) * | 2001-01-31 | 2002-08-16 | Hitachi Ltd | 映像処理装置 |
JP2003087734A (ja) * | 2001-09-13 | 2003-03-20 | Sony Corp | エラー検出装置及びエラー検出方法並びに記録再生装置及び記録再生方法 |
JP2005110055A (ja) * | 2003-09-30 | 2005-04-21 | Toshiba Corp | 受信装置及び受信データ制御方法 |
JP2006067122A (ja) * | 2004-08-25 | 2006-03-09 | Matsushita Electric Ind Co Ltd | 受信装置、icカード及びホスト装置 |
JP2006254298A (ja) * | 2005-03-14 | 2006-09-21 | Matsushita Electric Ind Co Ltd | 動画再生装置及び動画再生方法 |
JP2006261760A (ja) * | 2005-03-15 | 2006-09-28 | Casio Comput Co Ltd | 受信回路 |
Also Published As
Publication number | Publication date |
---|---|
JP4996403B2 (ja) | 2012-08-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20090054100A1 (en) | Television broadcast reception device, television broadcast reception device control method, and television broadcast reception device power consumption management method | |
US8879896B2 (en) | Method and apparatus to facilitate the efficient implementation of trick modes in a personal video recording system | |
US8350964B2 (en) | Captioned image reproducing device, captioned image reproducing method and program | |
JP2008011404A (ja) | コンテンツ処理装置及びコンテンツ処理方法 | |
JP5026294B2 (ja) | コンテンツ再生装置 | |
JP2006185439A (ja) | 移動通信端末機、移動通信端末機の動画検索装置及び動画像検索方法 | |
KR20110063004A (ko) | 키 프레임 추출 장치 및 방법과 이를 이용한 방송 녹화 장치 및 방법 | |
JP2008277967A (ja) | 情報処理装置および情報処理方法、プログラム、並びに記録媒体 | |
JP2006310977A (ja) | チャンネル切替補助装置、出力信号切替方法及びチャンネル切替補助プログラム | |
US8483548B2 (en) | Digital broadcast recording apparatus | |
JP2004056178A (ja) | 情報処理装置 | |
JP4996403B2 (ja) | 動画像処理装置 | |
JP4851909B2 (ja) | 映像記録装置及びプログラム | |
JPWO2008139515A1 (ja) | 信号出力装置、情報機器、信号出力方法および信号出力プログラム | |
US20080317434A1 (en) | Information recording/reproducing apparatus | |
US20080107207A1 (en) | Broadcast receiving terminal | |
JP4682159B2 (ja) | ストリーム再生装置 | |
EP1489838A2 (en) | Digital television broadcasting receiver | |
JP2008294942A (ja) | テレビ受信機 | |
JP2008053991A (ja) | デジタル放送受信装置 | |
JP4791422B2 (ja) | コマーシャル判別装置、方法及びプログラム | |
WO2006075457A1 (ja) | 記録装置 | |
JP2005323279A (ja) | 放送受信記録再生装置 | |
KR100680914B1 (ko) | 텔레비전 방송의 녹화/재생이 가능한 이동통신 단말기 및이를 이용한 방송 녹화/재생 방법 | |
KR100915798B1 (ko) | 개선된 압축 포맷에 의한 디지털 방송 녹화 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100816 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100816 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111219 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120124 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120326 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120417 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120511 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150518 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150518 Year of fee payment: 3 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20120529 |
|
A072 | Dismissal of procedure |
Free format text: JAPANESE INTERMEDIATE CODE: A072 Effective date: 20121030 |
|
LAPS | Cancellation because of no payment of annual fees |