JP2015039117A - Video reproduction device and video reproduction method - Google Patents

Video reproduction device and video reproduction method Download PDF

Info

Publication number
JP2015039117A
JP2015039117A JP2013169463A JP2013169463A JP2015039117A JP 2015039117 A JP2015039117 A JP 2015039117A JP 2013169463 A JP2013169463 A JP 2013169463A JP 2013169463 A JP2013169463 A JP 2013169463A JP 2015039117 A JP2015039117 A JP 2015039117A
Authority
JP
Japan
Prior art keywords
video
area
target
determination
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013169463A
Other languages
Japanese (ja)
Inventor
謙一 福中
Kenichi Fukunaka
謙一 福中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Funai Electric Co Ltd
Original Assignee
Funai Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Funai Electric Co Ltd filed Critical Funai Electric Co Ltd
Priority to JP2013169463A priority Critical patent/JP2015039117A/en
Publication of JP2015039117A publication Critical patent/JP2015039117A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

PROBLEM TO BE SOLVED: To contribute to improvement of reproduction quality of main video.SOLUTION: A video recording/reproducing device comprises: a determination unit that determines whether additional information video (AA) is added to recorded target video (310) including main video (MM) on the basis of a video signal of the target video (310); and a reproduction processing unit that when the additional information video (AA) is added to the target video (310), extracts the main video (MM) from the target video (310), and reproduces the extracted main video in an enlarged size.

Description

本発明は、映像再生装置及び映像再生方法に関する。   The present invention relates to a video playback device and a video playback method.

データ放送において、映像とデータが別々の情報として送られてくる放送形態がある。その放送形態においては、映像とデータが別々の情報として受信されるが故に、受信側でデータの表示のオン/オフを容易に切り替えることができる。一方、緊急速報等が放送される場合、図13に示すような、元々放送されるべき主映像910と緊急速報等の内容を示す速報映像920との合成映像900が1つの映像として放送局から送られてくることがある。このような映像900を録画した後、再生すると、速報映像920も表示されることになる。速報映像920を含む映像900は、視聴者の意図に関係なく、放送局が定める時間だけ継続して放送され、その継続時間は数分〜数時間に及ぶこともある。   In data broadcasting, there is a broadcasting form in which video and data are sent as separate information. In the broadcasting form, since video and data are received as separate information, the data display can be easily switched on / off on the receiving side. On the other hand, when an emergency bulletin or the like is broadcast, a composite video 900 of a main video 910 to be broadcast originally and a breaking video 920 indicating the content of the emergency bulletin or the like as shown in FIG. May be sent. When such a video 900 is recorded and then reproduced, a breaking video 920 is also displayed. The video 900 including the breaking news video 920 is continuously broadcast for a time determined by the broadcasting station regardless of the viewer's intention, and the duration may range from several minutes to several hours.

尚、録画番組の中にニュース速報が挿入されていると判別した場合、ニュース速報テロップ部分にマスクキングを自動的に加えて録画又は再生する方法が提案されている(例えば下記特許文献1参照:特に請求項5及び6参照)。また、クロールテキストを含む画像部分を画面から隠す又はブロックする方法も提案されている(例えば下記特許文献2参照:特に要約及び段落[0005]〜[0008]参照)。   When it is determined that a breaking news has been inserted into a recorded program, a method of automatically adding masking to the breaking news telop part and recording or reproducing has been proposed (see, for example, Patent Document 1 below). See especially claims 5 and 6). In addition, a method of hiding or blocking an image portion including crawl text from the screen has also been proposed (see, for example, Patent Document 2 below: particularly abstract and paragraphs [0005] to [0008]).

特開2003−274344号公報JP 2003-274344 A 特表2005−532743号公報JP 2005-532743 A

速報映像920は、主映像910の放送時刻における緊急速報等を含む。従って、主映像910の放送時刻に主映像910を視聴する場合には、速報映像920は視聴者にとって役に立ちうる。しかしながら、録画済み番組を再生する場合においては、速報映像920を表示しても、基本的に視聴者の役に立たない。しかも、映像900は、速報映像920を含まない映像との比較において、速報映像910の表示の分、主映像の表示サイズが小さくなる。視聴者が意図しない表示サイズの縮小は、当然、好ましくない。尚、録画対象映像に付与されうる付加情報映像の例として速報映像に注目したが、他の付加情報映像についても同様のことが言える。   The breaking news video 920 includes emergency breaking news at the broadcast time of the main video 910. Therefore, when viewing the main video 910 at the broadcast time of the main video 910, the breaking news video 920 can be useful for the viewer. However, when a recorded program is played, displaying the breaking video 920 is basically useless for the viewer. Moreover, the display size of the main video is smaller for the video 900 than the video that does not include the quick video 920 because the video 900 is displayed. Naturally, the reduction of the display size not intended by the viewer is not preferable. Note that although attention was paid to the breaking news video as an example of the additional information video that can be added to the recording target video, the same can be said for other additional information video.

そこで本発明は、主映像の再生品質向上に寄与する映像再生装置及び映像再生方法を提供することを目的とする。   SUMMARY OF THE INVENTION An object of the present invention is to provide a video playback apparatus and a video playback method that contribute to improving the playback quality of a main video.

本発明に係る映像再生装置は、主映像を含む録画された対象映像に付加情報映像が付与されているか否かを、前記対象映像の映像信号に基づいて判定する判定部と、前記対象映像に前記付加情報映像が付与されている場合、前記対象映像から前記主映像を抽出し、抽出主映像を拡大して再生する再生処理部と、を備えたことを特徴とする。   The video playback apparatus according to the present invention includes: a determination unit that determines whether additional information video is added to a recorded target video including a main video based on a video signal of the target video; A playback processing unit that extracts the main video from the target video and reproduces the enlarged main video when the additional information video is added;

これにより、対象映像に付加情報映像が付与されている場合であっても、再生が望まれる主映像が大きく映し出され、主映像の再生品質向上が図られる。   As a result, even when the additional information video is added to the target video, the main video that is desired to be reproduced is projected greatly, and the reproduction quality of the main video is improved.

具体的には例えば、前記判定部は、前記対象映像のフレーム間比較を用いて前記判定を行うことが好ましい。   Specifically, for example, the determination unit preferably performs the determination using inter-frame comparison of the target video.

速報映像等に対応する付加情報映像は、主映像と違った映像変化特徴を持っていることがある。故に、フレーム間比較を用いることで、付加情報映像の有無等を良好に判定することが可能となる。   The additional information video corresponding to the breaking news video or the like may have video change characteristics different from the main video. Therefore, by using the inter-frame comparison, it is possible to satisfactorily determine the presence or absence of the additional information video.

より具体的には例えば、前記判定部は、前記対象映像のフレーム間比較を用いて前記対象映像内の各位置の映像変化量を検出し、その検出結果を用いて前記判定を行うとともに前記付加情報映像の映像領域を検出することが好ましい。   More specifically, for example, the determination unit detects a video change amount at each position in the target video using inter-frame comparison of the target video, performs the determination using the detection result, and performs the addition. It is preferable to detect the video area of the information video.

速報映像等に対応する付加情報映像は、主映像と違った映像変化特徴を持っていることがある。故に、故に、フレーム間比較を用いて映像変化量を検出し、その検出結果を用いることで付加情報映像の有無等を良好に判定することが可能となる。   The additional information video corresponding to the breaking news video or the like may have video change characteristics different from the main video. Therefore, it is possible to detect the amount of video change using inter-frame comparison and to determine the presence / absence of the additional information video and the like by using the detection result.

或いは具体的には例えば、前記判定部は、前記対象映像のフレーム間比較を用いて前記対象映像内の各位置の映像変化量を検出し、その検出結果を用いて前記判定を行うとともに前記付加情報映像の映像領域の候補領域を設定し、前記候補領域に基づき前記付加情報映像の映像領域を検出することが好ましい。   Alternatively, for example, the determination unit detects a video change amount at each position in the target video using inter-frame comparison of the target video, performs the determination using the detection result, and performs the addition. It is preferable to set a candidate area of the video area of the information video and detect the video area of the additional information video based on the candidate area.

映像変化量の検出結果を用いて、一旦、付加情報映像の映像領域の候補領域を設定し、候補領域を元に付加情報映像の映像領域を検出する構成を採用することで、例えば候補領域が修正される機会が与えられる。結果、付加情報映像の映像領域の正確なる検出が期待される。   By using the detection result of the video change amount, a candidate area of the video area of the additional information video is once set, and the video area of the additional information video is detected based on the candidate area. An opportunity to be corrected. As a result, accurate detection of the video area of the additional information video is expected.

より具体的には例えば、前記付加情報映像の位置及び形状に関する所定のパターン情報を保持するメモリを当該映像再生装置に更に設けておいても良い。そして、前記判定部は、前記候補領域と前記パターン情報との照合結果に応じて、前記候補領域を元に前記付加情報映像の映像領域を検出することが好ましい。   More specifically, for example, a memory for holding predetermined pattern information related to the position and shape of the additional information video may be further provided in the video playback device. And it is preferable that the said determination part detects the video area | region of the said additional information image | video based on the said candidate area | region according to the collation result with the said candidate area | region and the said pattern information.

これにより、例えば、所定のパターン情報を利用して候補領域が修正される機会が与えられる。結果、付加情報映像の映像領域の正確なる検出が期待される。   Thereby, for example, an opportunity to correct the candidate area using predetermined pattern information is provided. As a result, accurate detection of the video area of the additional information video is expected.

更に例えば、前記判定部は、前記候補領域が前記付加情報映像の映像領域に相当するか否かを、判定基準を用いて決定することが好ましい。前記判定基準は、例えば、前記候補領域内の輝度の分布、前記候補領域内の所定の色成分の分布、通信又は放送波受信を介して取得された情報であって、前記対象映像の録画時刻を基準とした時刻に関連付けられた情報の内容、の内、少なくとも1つを含んでいると良い。   Further, for example, it is preferable that the determination unit determines whether or not the candidate area corresponds to a video area of the additional information video using a determination criterion. The determination criterion is, for example, luminance distribution in the candidate area, distribution of a predetermined color component in the candidate area, information acquired through communication or broadcast wave reception, and recording time of the target video It is preferable that at least one of the contents of the information associated with the time with reference to is included.

速報映像等に対応する付加情報映像は、輝度又は色成分の分布において特有の特徴を有していることがある。或いは、通信又は放送波受信を介して取得された情報から、速報映像等に対応する付加情報映像が対象映像に付与されている可能性を探ることができる場合がある。故に、上記の如く判定基準を用いる構成を採用すれば、付加情報映像の有無判定の精度向上が期待される。   The additional information video corresponding to the breaking news video or the like may have a characteristic characteristic in the luminance or color component distribution. Alternatively, it may be possible to search for the possibility that additional information video corresponding to breaking news video or the like is added to the target video from information acquired via communication or broadcast wave reception. Therefore, if the configuration using the determination criterion as described above is adopted, it is expected that the accuracy of the presence / absence determination of the additional information image is improved.

また例えば、前記判定基準は、前記候補領域内の文字の有無又は内容を更に含んでいてもよい。   In addition, for example, the determination criterion may further include the presence / absence or contents of characters in the candidate area.

速報映像等に対応する付加情報映像は、文字の有無又は内容について特有の特徴を有していることがある。故に、文字の有無等を判定基準に含めるようにすれば、付加情報映像の有無判定の精度向上が期待される。   The additional information video corresponding to the breaking news video or the like may have a characteristic characteristic regarding the presence or the content of characters. Therefore, if the presence / absence of characters is included in the determination criteria, it is expected to improve the accuracy of the presence / absence determination of the additional information video.

また例えば、前記判定部は、前記対象映像の再生を求める指示の入力前に前記判定を行っても良い。この際、前記再生処理部は、前記対象映像の再生の際に、その判定結果を参照することができる。   Further, for example, the determination unit may perform the determination before inputting an instruction to request reproduction of the target video. At this time, the reproduction processing unit can refer to the determination result when reproducing the target video.

判定部における判定を再生段階で行う場合、判定の実行に伴う再生待ち時間が発生し得る。当該判定を事前に行っておくことで、そのような再生待ち時間の発生が抑制される。   When the determination in the determination unit is performed at the reproduction stage, a reproduction waiting time associated with the execution of the determination may occur. By making this determination in advance, the occurrence of such a reproduction waiting time is suppressed.

また例えば、前記付加情報映像は、前記対象映像の録画時刻での情報の映像を含んでいると良い。   For example, the additional information video may include a video of information at the recording time of the target video.

対象映像の録画時刻での情報の映像を再生時に再生しても、基本的に視聴者の役に立たない。そのような不要映像が付加情報映像として対象映像に付与されているときに、主映像を拡大再生すれば、不要映像の再生が回避され、主映像が大きく映し出されて見やすくなる。   Even if the information video at the recording time of the target video is played back, it is basically useless to the viewer. If such an unnecessary video is added to the target video as an additional information video, if the main video is enlarged and reproduced, reproduction of the unnecessary video is avoided, and the main video is projected larger and is easy to see.

本発明に係る映像再生方法は、主映像を含む録画された対象映像に付加情報映像が付与されているか否かを、前記対象映像の映像信号に基づいて判定する判定ステップと、前記対象映像に前記付加情報映像が付与されている場合、前記対象映像から前記主映像を抽出し、抽出主映像を拡大して再生する再生処理ステップと、を備えたことを特徴とする。   The video playback method according to the present invention includes a determination step of determining whether additional information video is added to a recorded target video including a main video based on a video signal of the target video; A playback processing step of extracting the main video from the target video and enlarging and playing back the extracted main video when the additional information video is attached.

これにより、対象映像に付加情報映像が付与されている場合であっても、再生が望まれる主映像が大きく映し出され、主映像の再生品質向上が図られる。   As a result, even when the additional information video is added to the target video, the main video that is desired to be reproduced is projected greatly, and the reproduction quality of the main video is improved.

本発明によれば、主映像の再生品質向上に寄与する映像再生装置及び映像再生方法を提供することが可能である。   According to the present invention, it is possible to provide a video playback device and a video playback method that contribute to improving the playback quality of the main video.

本発明の第1実施形態に係る録画再生装置の全体ブロック図である。1 is an overall block diagram of a recording / playback apparatus according to a first embodiment of the present invention. 放送信号による通常映像及び速報込映像を示す図である。It is a figure which shows the normal image by a broadcast signal, and a quick report inclusion image. 対象番組の放送時間帯を示す図である。It is a figure which shows the broadcast time slot | zone of an object program. 録画ファイルの構造を示す図である。It is a figure which shows the structure of a video recording file. 対象映像から抽出された静止領域の例を示す図である。It is a figure which shows the example of the still area extracted from the object image | video. パターン情報のテーブルデータを示す図である。It is a figure which shows the table data of pattern information. パターン情報にて規定されるパターン領域を示す図である。It is a figure which shows the pattern area | region prescribed | regulated by pattern information. 本発明の第1実施形態に係り、再生時における録画再生装置の動作フローチャートである。6 is an operation flowchart of the recording / playback apparatus during playback according to the first embodiment of the present invention. 速報映像を含む対象映像から主映像が抽出されて出力映像が生成される様子を示す図である。It is a figure which shows a mode that a main image | video is extracted from the object image | video containing a bulletin image | video, and an output image | video is produced | generated. 速報映像除去機能のオン/オフ時における再生映像を示す図である。It is a figure which shows the reproduction | regeneration image | video at the time of ON / OFF of the breaking news image removal function. 本発明の第2実施形態に係り、再生時における録画再生装置の動作フローチャートである。12 is an operation flowchart of the recording / playback apparatus during playback according to the second embodiment of the present invention. 本発明の第4実施形態に係るマスク再生時の再生映像を示す図である。It is a figure which shows the reproduction | regeneration image | video at the time of mask reproduction | regeneration concerning 4th Embodiment of this invention. 放送される、主映像及び速報映像の合成映像を示す図である。It is a figure which shows the synthetic | combination image | video of the main image | video and breaking news image | video broadcasted.

以下、本発明の実施形態の例を、図面を参照して具体的に説明する。参照される各図において、同一の部分には同一の符号を付し、同一の部分に関する重複する説明を原則として省略する。尚、本明細書では、記述の簡略化上、情報、信号、物理量、状態量又は部材等を参照する記号又は符号を記すことによって該記号又は符号に対応する情報、信号、物理量、状態量又は部材等の名称を省略又は略記することがある。   Hereinafter, an example of an embodiment of the present invention will be specifically described with reference to the drawings. In each of the drawings to be referred to, the same part is denoted by the same reference numeral, and redundant description regarding the same part is omitted in principle. In this specification, for simplification of description, a symbol or reference that refers to information, signal, physical quantity, state quantity, member, or the like is written to indicate information, signal, physical quantity, state quantity or Names of members and the like may be omitted or abbreviated.

<<第1実施形態>>
本発明の第1実施形態を説明する。図1に、本発明の第1実施形態に係る録画再生装置1の全体ブロック図を示す。録画再生装置1は、符号11〜20によって参照される各部位を備える。表示装置2は、液晶ディスプレイ装置などの、録画再生装置1に接続された外部表示装置である。但し、表示装置2は録画再生装置1に内包されていても良い。
<< First Embodiment >>
A first embodiment of the present invention will be described. FIG. 1 shows an overall block diagram of a recording / playback apparatus 1 according to the first embodiment of the present invention. The recording / playback apparatus 1 includes parts referred to by reference numerals 11 to 20. The display device 2 is an external display device connected to the recording / playback device 1 such as a liquid crystal display device. However, the display device 2 may be included in the recording / playback device 1.

チューナ11は、アンテナATを介して受信した放送信号に含まれる所望のチャンネルの放送信号を復調し、復調された放送信号を出力する。放送信号は、各放送局から放送され、映像信号及び音声信号を含む。従って、チューナ11の出力信号は、復調によって得られた映像信号及び音声信号を含む。以下、映像信号及び音声信号をまとめてAV信号と呼ぶ。   The tuner 11 demodulates a broadcast signal of a desired channel included in the broadcast signal received via the antenna AT, and outputs the demodulated broadcast signal. The broadcast signal is broadcast from each broadcast station and includes a video signal and an audio signal. Therefore, the output signal of the tuner 11 includes a video signal and an audio signal obtained by demodulation. Hereinafter, the video signal and the audio signal are collectively referred to as an AV signal.

映像音声処理部12は、チューナ11からのAV信号を出力部19に送ることができる。また、映像音声処理部12は、チューナ11からのAV信号をメディアドライバ13に送ることができると共に、メディアドライバ13からのAVデータを出力部19に送ることもできる。映像音声処理部12は、AV信号をメディアドライバ13に送るとき、AV信号を圧縮符号化することができ、メディアドライバ13からのAV信号が圧縮符号化されているとき、メディアドライバ13からのAV信号を伸長復号化することができる。   The video / audio processing unit 12 can send the AV signal from the tuner 11 to the output unit 19. Further, the video / audio processing unit 12 can send the AV signal from the tuner 11 to the media driver 13 and can also send the AV data from the media driver 13 to the output unit 19. The video / audio processing unit 12 can compress and encode the AV signal when sending the AV signal to the media driver 13, and the AV from the media driver 13 when the AV signal from the media driver 13 is compressed and encoded. The signal can be decompressed and decoded.

メディアドライバ13は、映像音声処理部12からのAV信号を記録メディア(記録媒体)14に記録することができると共に、記録メディア14に記録されたAV信号を読み出して映像音声処理部12に送ることができる。記録メディア14は、磁気ディスク、光ディスク、光磁気ディスク若しくは半導体メモリ等又はそれらの組み合わせにて形成され、任意のデータ及び信号を記録可能である。尚、記録メディア14の全部又は一部は、録画再生装置1に対して着脱自在であっても良いし、録画再生装置1の外部に存在していても良い。   The media driver 13 can record the AV signal from the video / audio processing unit 12 on a recording medium (recording medium) 14, and also reads the AV signal recorded on the recording medium 14 and sends it to the video / audio processing unit 12. Can do. The recording medium 14 is formed of a magnetic disk, an optical disk, a magneto-optical disk, a semiconductor memory, or a combination thereof, and can record arbitrary data and signals. Note that all or part of the recording medium 14 may be detachable from the recording / playback apparatus 1 or may exist outside the recording / playback apparatus 1.

指示受付部15は、操作パネル等を含み、ユーザからの各種操作及び指示の入力を受け付ける。図示されないリモートコントローラを介して、ユーザからの各種操作及び指示が指示受付部15(録画再生装置1)に入力されても良い。当該リモートコントローラは、録画再生装置1の一部であると考えても良い。以下、指示受付部15に入力されたユーザからの指示を、入力指示という。   The instruction receiving unit 15 includes an operation panel and the like, and receives various operations and instructions input from the user. Various operations and instructions from the user may be input to the instruction receiving unit 15 (recording / playback apparatus 1) via a remote controller (not shown). The remote controller may be considered as a part of the recording / playback apparatus 1. Hereinafter, an instruction from the user input to the instruction receiving unit 15 is referred to as an input instruction.

制御部16は、CPU(Central Processing Unit)等にて形成され、入力指示に従いつつ、録画再生装置1内の各部位の動作を統括的に制御する。制御部16は、チューナ11、映像音声処理部12及びメディアドライバ13を制御することで、入力指示に従った番組のAV信号を記録メディア14に記録することができる。記録メディア14へのAV信号の記録を録画と呼ぶ。尚、或る番組の録画と、当該番組のAV信号の記録メディア14への記録は、同義である。メモリ17は、ROM(Read Only Memory)及びRAM(Random Access Memory)を含み、制御部16で実行されるプログラムや各種データを不揮発的に記憶すると共に録画再生装置1内で参照される任意のデータを一時記憶する。   The control unit 16 is formed by a CPU (Central Processing Unit) or the like, and comprehensively controls the operation of each part in the recording / playback apparatus 1 while following an input instruction. The control unit 16 can record the AV signal of the program according to the input instruction on the recording medium 14 by controlling the tuner 11, the video / audio processing unit 12, and the media driver 13. Recording of AV signals on the recording medium 14 is called video recording. Note that the recording of a program and the recording of the AV signal of the program on the recording medium 14 are synonymous. The memory 17 includes a ROM (Read Only Memory) and a RAM (Random Access Memory). The memory 17 stores a program executed by the control unit 16 and various data in a nonvolatile manner, and arbitrary data referred to in the recording / playback apparatus 1. Is temporarily stored.

OSD(On Screen Display)部18は、制御部16からの指示に基づいて生成したOSDデータを出力部19に送る。OSDデータは、設定メニュー等を示す映像の映像信号である。出力部19は、映像音声処理部12からのAV信号に含まれる映像信号及び音声信号を表示装置2に供給する。これにより、表示装置2において、出力部19からの映像信号及び音声信号が映像及び音として再生される。出力部19は、映像信号を表示装置2に供給する際、映像音声処理部12からの映像信号にOSDデータを合成し、これによって得られた合成映像信号を表示装置2に供給しても良い。また、出力部19は、そのような合成を行わずにOSDデータをそのまま表示装置2に供給することもできる。出力部19から表示装置2に供給されるべき信号及びデータは制御部16によって制御される。   An OSD (On Screen Display) unit 18 sends OSD data generated based on an instruction from the control unit 16 to the output unit 19. The OSD data is a video signal indicating a setting menu or the like. The output unit 19 supplies the video signal and the audio signal included in the AV signal from the video / audio processing unit 12 to the display device 2. Thereby, in the display device 2, the video signal and the audio signal from the output unit 19 are reproduced as video and sound. When supplying the video signal to the display device 2, the output unit 19 may synthesize the OSD data with the video signal from the video / audio processing unit 12 and supply the synthesized video signal obtained thereby to the display device 2. . The output unit 19 can also supply the OSD data as it is to the display device 2 without performing such synthesis. Signals and data to be supplied from the output unit 19 to the display device 2 are controlled by the control unit 16.

通信部20は、インターネット網などの任意のネットワークNETに接続可能であり、ネットワークNETを介し、ネットワークNETに接続された任意の機器との間で、任意の情報を通信可能である。   The communication unit 20 can be connected to an arbitrary network NET such as the Internet network, and can communicate arbitrary information with an arbitrary device connected to the network NET via the network NET.

上述したように、緊急速報等が放送される場合には、元々放送されるべき主映像と緊急速報等の内容を示す速報映像(付加情報映像)との合成映像が1つの映像として放送局から送られてくることがある。図2(a)の映像300は、速報映像を含まず主映像のみによって構成された映像(以下、通常映像という)の例である。図2(b)の映像310は、主映像と速報映像を合成することで得られた映像(以下、速報込映像という)の例である。図2(a)及び(b)において、映像MM及びAAは、夫々、主映像及び速報映像を表している。以下、速報映像の映像領域を速報領域とも呼ぶ。上述したように、録画済み番組を再生する場合においては、速報映像を表示しても基本的に視聴者の役に立たない。しかも、速報込映像では、通常映像との比較において、速報映像の表示の分、主映像の表示サイズが小さくなる。   As described above, when an emergency bulletin or the like is broadcast, a composite video of a main video to be broadcast originally and a preliminary video (additional information video) indicating the content of the emergency bulletin or the like is transmitted as one video from the broadcasting station. May be sent. A video 300 in FIG. 2A is an example of a video (hereinafter, referred to as a normal video) that includes only a main video without including a breaking video. A video 310 in FIG. 2B is an example of a video obtained by combining a main video and a breaking video (hereinafter referred to as a breaking-in video). 2A and 2B, images MM and AA represent a main image and a breaking news image, respectively. Hereinafter, the video area of the breaking news video is also referred to as a breaking news area. As described above, when a recorded program is reproduced, even if a breaking news video is displayed, it is basically useless for the viewer. In addition, in the pre-breaking video, the display size of the main video is reduced by the amount of display of the pre-breaking video in comparison with the normal video.

そこで、本実施形態では、録画映像に速報映像が付与されているか否かを判定する機能を録画再生装置1に持たせる。そして、当該付与が行われている場合には、録画済み番組の再生時において、記録映像から主映像を抽出して主映像を拡大再生する。これの実現方法について詳説する。   Therefore, in the present embodiment, the recording / playback apparatus 1 is provided with a function of determining whether or not a breaking video is attached to the recorded video. If the assignment is performed, the main video is extracted from the recorded video and the main video is enlarged and reproduced when the recorded program is reproduced. A method for realizing this will be described in detail.

以下、録画によって記録メディア14に記録された番組を対象番組と呼び、対象番組に注目して上記の実現方法を説明する。対象番組について記録メディア14に記録された映像、AV信号、映像信号及び音声信号を、夫々、対象映像、対象AV信号、対象映像信号及び対象音声信号と呼ぶ。対象映像は、所定のフレームレートで時系列に並ぶ複数のフレームにて形成される。図3に示す如く、対象番組は、時刻tA1から時刻tA2までの時間帯において放送局350より放送された番組であるとする(時刻tA3については後述)。対象番組を含む各番組は、録画ファイルに収容された状態で記録メディア14に記録される。図4に、1つの録画ファイルの構造を示す。記録メディア14に記録される録画ファイルは、AV信号とAV信号に関連付けられた録画関連情報を収容している。或る番組についての録画関連情報は、例えば、当該番組についての録画ファイルのファイル名、当該番組の放送局を示すデータ、及び、当該番組の録画開始時刻(放送開始時刻)及び録画終了時刻(放送終了時刻)を含む。 Hereinafter, the program recorded on the recording medium 14 by recording will be referred to as a target program, and the above implementation method will be described by paying attention to the target program. The video, AV signal, video signal and audio signal recorded on the recording medium 14 for the target program are referred to as the target video, target AV signal, target video signal and target audio signal, respectively. The target video is formed of a plurality of frames arranged in time series at a predetermined frame rate. As shown in FIG. 3, it is assumed that the target program is a program broadcast from the broadcast station 350 in the time period from time t A1 to time t A2 (time t A3 will be described later). Each program including the target program is recorded on the recording medium 14 while being accommodated in the recording file. FIG. 4 shows the structure of one recording file. The recording file recorded on the recording medium 14 contains AV signals and recording related information associated with the AV signals. The recording related information for a program includes, for example, the file name of the recording file for the program, data indicating the broadcasting station of the program, and the recording start time (broadcast start time) and recording end time (broadcast) of the program. End time).

制御部16は、対象映像に速報映像が付与されているか否かを対象映像信号に基づいて判定することができる。この判定を、便宜上、速報映像判定と呼ぶ。速報映像判定は、対象映像信号以外の情報にも基づいて実行されうる。対象映像に速報映像が付与されている場合、速報映像判定は、対象映像内における速報映像の位置及び形状を検出する処理も含む。速報映像判定に利用可能な複数の判定要素技術について説明する。   The control unit 16 can determine whether or not the breaking video is attached to the target video based on the target video signal. This determination is referred to as a breaking video determination for convenience. The breaking video determination can be executed based on information other than the target video signal. When the breaking video is added to the target video, the breaking video determination includes processing for detecting the position and shape of the breaking video in the target video. A plurality of determination element technologies that can be used for breaking video determination will be described.

――第1判定要素技術――
第1判定要素技術を説明する。対象映像に含まれうる速報映像は、対象映像の放送時間帯(従って対象映像の録画時間帯中の時刻)における情報の映像であり、対象映像の放送時間帯に放送局350から発せられた緊急速報等を含む。緊急速報による速報映像は、例えば、災害情報や選挙結果の情報を示す映像である。それらの情報の表示部分は、対象映像内で静止している静止箇所であると言え、速報映像の部分での映像変化は、基本的に主映像のそれに比べて小さい。
--First judgment element technology--
The first determination element technique will be described. The breaking video that can be included in the target video is a video of information in the broadcast time zone of the target video (hence, the time in the recording time zone of the target video), and an emergency issued from the broadcasting station 350 during the broadcast time zone of the target video. Includes breaking news. The bulletin video by the emergency bulletin is a video showing disaster information and election result information, for example. It can be said that the display portion of the information is a stationary portion that is stationary in the target video, and the video change in the portion of the breaking news video is basically smaller than that of the main video.

上記静止箇所を探索するべく、制御部16は、対象映像を形成する第1及び第2フレームの映像信号を比較して、第1及び第2フレーム間における対象映像の各位置の映像変化量を検出する。この比較及び検出を行う処理を静止領域探索処理と呼ぶ。静止領域探索処理は、第1及び第2フレーム間での映像変化量が所定量よりも小さい映像領域(以下、静止領域という)の有無及び静止領域の位置及び形状を検出する処理をも含む。ここにおける静止領域を、低変化領域と読み替えても良い。第2フレームは、第1フレームよりも時間的に任意のフレームである。通常、第2フレームは第1フレームの次のフレームであるが、第1及び第2フレーム間に他のフレームが存在していても良い。   In order to search for the still part, the control unit 16 compares the video signals of the first and second frames forming the target video, and calculates the video change amount at each position of the target video between the first and second frames. To detect. This comparison and detection process is called a still area search process. The still area search process also includes a process of detecting the presence / absence of a video area (hereinafter referred to as a still area) whose video change amount between the first and second frames is smaller than a predetermined amount, and the position and shape of the still area. The still area here may be read as the low change area. The second frame is an arbitrary frame in time than the first frame. Usually, the second frame is a frame next to the first frame, but another frame may exist between the first and second frames.

第1及び第2フレーム間における或る映像領域の映像変化量は、第1及び第2フレーム間における当該映像領域内の映像信号の変化の大きさを指す。或る映像領域内の映像信号の変化は、例えば、当該映像領域内の平均的な輝度又は色信号値の変化である。色信号値は、映像の赤の強度を示すR信号値、映像の緑の強度を示すG信号値、映像の青の強度を示すB信号値の内の、3つ、任意の2つ又は任意の1つを含んでいて良い。   A video change amount of a certain video region between the first and second frames indicates a magnitude of a change in the video signal in the video region between the first and second frames. The change in the video signal in a certain video area is, for example, a change in average luminance or color signal value in the video area. The color signal value is three, any two, or any of the R signal value indicating the red intensity of the video, the G signal value indicating the green intensity of the video, and the B signal value indicating the blue intensity of the video. May be included.

制御部16は、所定の時間長(例えば数フレームから数10フレーム分の時間長)に亘って静止領域探索処理を実行し、その結果を用いて速報映像判定を行う。具体的には例えば、所定の時間長継続して、対象映像中の或る映像領域が静止領域であると判断された場合、制御部16は、その映像領域(静止領域)を抽出領域Aとして抽出及び設定する(後述の図8のS11〜S13参照)。制御部16は、抽出領域Aが速報領域(速報映像の映像領域)であると判定して良い。領域Aが対象領域に存在しない場合、制御部16は、対象映像に速報映像が付与されていないと判定してよい。   The control unit 16 performs a still area search process over a predetermined time length (for example, a time length of several frames to several tens of frames), and performs a preliminary video determination using the result. Specifically, for example, when it is determined that a certain video area in the target video is a still area continuously for a predetermined time, the control unit 16 sets the video area (still area) as the extraction area A. Extraction and setting (see S11 to S13 of FIG. 8 described later). The control unit 16 may determine that the extraction area A is a breaking news area (an area for breaking news video). When the area A does not exist in the target area, the control unit 16 may determine that the breaking video is not added to the target video.

但し、後述の他の判定要素技術を用いて速報映像の有無等を最終的に判断することも可能である。この場合、制御部16は、抽出領域Aを速報候補領域に設定する。速報候補領域は、速報領域の候補(候補領域)である。抽出領域Aとしての速報候補領域は、必要に応じて修正されるため、それを第1の速報候補領域と呼ぶこともできる(後述の図8のS13参照)。速報候補領域は、最終的に速報領域と判定されないこともある。図5(a)、(b)又は(c)に示される対象映像中の領域A1、A2又はA3は、抽出領域Aの例である。図5(a)〜(c)において、記号WRが付された実線矩形枠内の領域は、対象映像の全映像領域である。 However, it is also possible to finally determine the presence / absence of a breaking video using other determination element techniques described later. In this case, the control unit 16 sets the extraction area A as a breaking news candidate area. The breaking news candidate area is a breaking news area candidate (candidate area). Since the breaking news candidate area as the extraction area A is corrected as necessary, it can also be referred to as a first breaking news candidate area (see S13 in FIG. 8 described later). The preliminary report candidate area may not be finally determined as the preliminary report area. An area A 1 , A 2, or A 3 in the target video shown in FIG. 5A, 5B, or 5C is an example of the extraction area A. In FIGS. 5A to 5C, the region within the solid line rectangular frame to which the symbol WR is attached is the entire video region of the target video.

――第2判定要素技術――
第2判定要素技術を説明する。メモリ17は、速報映像の表示位置及び形状(即ち速報領域の表示位置及び形状)を規定する所定のパターン情報を保持していても良い。パターン情報は、速報映像判定の実行に先立ってメモリ17に保持される。対象番組の放送時点から見て過去に放送された番組における速報映像の表示位置及び形状に基づき、パターン情報を定めておくことができる。パターン情報は、録画再生装置1の設計段階又は製造段階等において定められるものであって良い。録画再生装置1の出荷後、メモリ17に保持されるパターン情報が修正されても良い。
-Second judgment element technology-
The second determination element technique will be described. The memory 17 may hold predetermined pattern information that defines the display position and shape of the breaking news video (that is, the display position and shape of the breaking news area). The pattern information is held in the memory 17 prior to execution of the breaking news video determination. Pattern information can be determined based on the display position and shape of the breaking news video in a program broadcast in the past as viewed from the broadcast time of the target program. The pattern information may be determined at the design stage or manufacturing stage of the recording / playback apparatus 1. The pattern information held in the memory 17 may be corrected after the recording / playback apparatus 1 is shipped.

図6に、メモリ17に保持されるパターン情報のテーブルデータを示す。複数の放送局の夫々に対して1以上のパターン情報を設定し、各パターン情報をメモリ17に保持しておくことができる。第1〜第3放送局を含む複数の放送局が存在し、図6の例では、第i放送局についてパターン情報PTN[i,1]及びPTN[i,2]がメモリ17に保持されている(iは整数)。パターン情報PTN[i,1]は、災害情報が速報映像に示されるときの速報映像の表示位置及び形状を示し、パターン情報PTN[i,2]は、選挙情報(選挙結果の情報)が速報映像に示されるときの速報映像の表示位置及び形状を示す。尚、各放送局に対応づけられるパターン情報の個数は任意である。   FIG. 6 shows table data of pattern information held in the memory 17. One or more pieces of pattern information can be set for each of a plurality of broadcasting stations, and each pattern information can be held in the memory 17. There are a plurality of broadcasting stations including the first to third broadcasting stations. In the example of FIG. 6, pattern information PTN [i, 1] and PTN [i, 2] are held in the memory 17 for the i-th broadcasting station. (I is an integer). The pattern information PTN [i, 1] indicates the display position and shape of the breaking news video when the disaster information is shown in the breaking news video, and the pattern information PTN [i, 2] is the announcement information (election result information) breaking news. The display position and shape of the breaking news video when shown in the video are shown. The number of pattern information associated with each broadcasting station is arbitrary.

制御部16は、上記の如く設定した速報候補領域(即ち抽出領域A)の表示位置及び形状を、対応する放送局のパターン情報の表示位置及び形状と照合し、その照合結果を用いて、速報候補領域を修正することができる。修正を行わなかったとき、速報候補領域はそのまま維持される。制御部16は、修正又は維持された速報候補領域を速報領域であると判定することができる。但し、後述の他の判定要素技術を用いて速報映像の有無等を最終的に判断することもできる。   The control unit 16 collates the display position and shape of the preliminary report candidate area (that is, the extraction area A) set as described above with the display position and shape of the pattern information of the corresponding broadcasting station, and uses the collation result to perform the preliminary report. Candidate regions can be modified. When the correction is not performed, the preliminary report candidate area is maintained as it is. The control unit 16 can determine that the corrected / maintained breaking news candidate area is a breaking news area. However, it is also possible to finally determine the presence / absence of a breaking video using other determination element techniques described later.

パターン情報にて規定される表示位置及び形状を持つ速報領域をパターン領域と呼ぶ。制御部16は、抽出領域Aとしての速報候補領域(第1の速報候補領域)と対象番組に対応する放送局についてのパターン領域との間で、表示位置及び形状に関する照合を行う。そして、抽出領域Aとしての速報候補領域と一致又は近似しているパターン領域が存在している場合、制御部16は、パターン情報に基づいて速報候補領域Xを設定する。抽出領域Aとしての速報候補領域と一致又は近似しているパターン領域が存在しない場合、抽出領域Aとしての速報候補領域(第1の速報候補領域)を速報候補領域Xに設定する。速報候補領域X(以下単に領域Xとも呼ぶ)は、修正又は維持された速報候補領域であり、領域Xを第2の速報候補領域と呼んでも良い(後述の図8のS14〜S17も参照)。   The breaking news area having the display position and shape defined by the pattern information is called a pattern area. The control unit 16 collates the display position and the shape between the breaking news candidate area (first breaking news candidate area) as the extraction area A and the pattern area for the broadcasting station corresponding to the target program. When there is a pattern area that matches or approximates the preliminary report candidate area as the extraction area A, the control unit 16 sets the preliminary report candidate area X based on the pattern information. If there is no pattern area that matches or approximates the preliminary candidate area as the extraction area A, the preliminary candidate area (first preliminary candidate area) as the extraction area A is set as the preliminary candidate area X. The breaking news candidate area X (hereinafter also simply referred to as area X) is a revised or maintained breaking news candidate area, and the area X may be called a second breaking news candidate area (see also S14 to S17 in FIG. 8 described later). .

具体的な例として、今、対象番組の放送局350(図3)が第1放送局であった場合を考える。この場合、制御部16は、第1放送局のパターン情報PTN[1,1]にて規定される速報領域をパターン領域Bとして設定し、抽出領域Aとパターン領域Bとの照合を行う。そして、抽出領域Aとパターン領域Bとが一致又は近似している場合、パターン領域Bを領域Xに設定する。抽出領域Aとパターン領域Bとが一致又は近似していない場合、第1放送局のパターン情報PTN[1,2]にて規定される速報領域をパターン領域Bに再設定し、再度、照合を行う。抽出領域Aと再設定されたパターン領域Bとが一致又は近似している場合、再設定されたパターン領域Bを領域Xに設定する。第1放送局に対応する何れのパターン領域Bも抽出領域Aと一致又は近似していない場合、抽出領域Aを領域Xに設定する。   As a specific example, consider a case where the broadcast station 350 (FIG. 3) of the target program is the first broadcast station. In this case, the control unit 16 sets the breaking information area defined by the pattern information PTN [1, 1] of the first broadcasting station as the pattern area B, and collates the extraction area A and the pattern area B. If the extraction area A and the pattern area B match or approximate, the pattern area B is set as the area X. When the extraction area A and the pattern area B do not match or approximate, the breaking information area defined by the pattern information PTN [1,2] of the first broadcasting station is reset to the pattern area B, and the collation is performed again. Do. When the extraction area A and the reset pattern area B match or approximate, the reset pattern area B is set as the area X. If no pattern area B corresponding to the first broadcast station matches or approximates the extraction area A, the extraction area A is set as the area X.

図7に示す領域B1がパターン領域Bである場合を考える。この場合において、抽出領域Aが図5(a)の領域A1であるならば、抽出領域Aとパターン領域Bが一致又は近似していると判断される。しかしながら、抽出領域Aが図5(c)の領域A3であるならば、抽出領域Aとパターン領域Bは一致又は近似していないと判断される。領域A及びB間の一致又は近似とは、領域A及びB間における表示位置及び形状の一致又は近似である。領域A及びBが一致又は近似しているか否かを、領域A及びBの表示位置及び形状に基づき、所定のアルゴリズム(公知のパターンマッチング等)に従って判断すれば良い。 Consider the case where the area B 1 shown in FIG. In this case, if the extraction area A is the area A 1 in FIG. 5A, it is determined that the extraction area A and the pattern area B match or approximate. However, if the extraction area A is the area A 3 in FIG. 5C, it is determined that the extraction area A and the pattern area B do not match or approximate. The coincidence or approximation between regions A and B is the coincidence or approximation of display positions and shapes between regions A and B. Whether or not the regions A and B match or approximate may be determined according to a predetermined algorithm (such as a known pattern matching) based on the display positions and shapes of the regions A and B.

――第3判定要素技術――
第3判定要素技術を説明する。制御部16は、第1判定要素技術による速報候補領域(即ち抽出領域A)又は第1及び第2判定要素技術による速報候補領域Xが、対象映像中の速報領域に相当するのか否かを、付加判定基準を用いて決定することができる。以下では、第1及び第2判定要素技術による速報候補領域Xに注目して当該決定方法を説明するが、速報候補領域Xは、第2判定要素技術を用いずに設定された速報候補領域(即ち抽出領域A)であると捉えても良い。
-Third judgment element technology-
The third determination element technique will be described. The control unit 16 determines whether or not the preliminary report candidate area (that is, the extraction area A) based on the first determination element technique or the preliminary report candidate area X based on the first and second determination element techniques corresponds to the preliminary report area in the target video. It can be determined using additional criteria. In the following, the determination method will be described by paying attention to the preliminary candidate area X based on the first and second determination element technologies. However, the preliminary report candidate area X is a preliminary candidate area (without using the second determination element technique) ( In other words, it may be regarded as the extraction area A).

災害情報等を示す速報映像の輝度分布や色彩分布は、主映像のそれと比べて単調であることが予想される。従って、第3判定要素技術では、付加判定基準として、領域X内の輝度の分布、若しくは、領域X内の所定の色成分の分布、又は、それらの双方の分布を用いる。ここにおける色成分は、例えば、赤、緑及び青の内の、3つ又は任意の2つ又は任意の1つを含む。   It is expected that the luminance distribution and color distribution of the breaking video showing disaster information and the like are monotonous compared to that of the main video. Therefore, in the third determination element technique, the luminance distribution in the region X, the distribution of the predetermined color component in the region X, or both distributions are used as the additional determination criterion. The color component here includes, for example, three or any two or any one of red, green, and blue.

制御部16は、領域X内の全画素における輝度値の標準偏差YSDを、領域X内の輝度の分布として求めることができる。制御部16は、領域X内の全画素におけるR信号値の標準偏差RSD、G信号値の標準偏差GSD、B信号値の標準偏差BSDを、夫々、領域X内の赤成分の分布、緑成分の分布、青成分の分布として求めることができる(後述の図8のS18参照)。 The control unit 16 can obtain the standard deviation Y SD of the luminance values in all the pixels in the region X as the luminance distribution in the region X. Control unit 16, the standard deviation R SD of the R signal values of all pixels within the region X, the standard deviation G SD of G signal value, a standard deviation B SD of B signal values, respectively, the distribution of the red component in the region X , Green component distribution, and blue component distribution (see S18 in FIG. 8 described later).

そして、制御部16は、1以上の判定用標準偏差が全て所定閾値以下である場合、領域X内の映像は単調であると判定し、そうでない場合、領域X内の映像は単調でないと判定する。標準偏差YSD、RSD、GSD及びBSDの全て、又は、標準偏差YSD、RSD、GSD及びBSDの内の任意の1つ、2つ又は3つを判定用標準偏差に含めることができる。領域X内の映像が単調であると判定した場合、制御部16は、領域Xを速報領域であると判定して良い。但し、更に他の付加判定基準を用いて、領域Xが対象映像中の速報領域に相当するのか否かを決定しても良い。領域X内の映像が単調でないと判定した場合、制御部16は、領域Xは速報領域ではないと判定する(即ち、対象映像に速報映像は存在しないと判定する)。 Then, the control unit 16 determines that the video in the region X is monotonous when all of the one or more standard deviations for determination are equal to or less than the predetermined threshold, and otherwise determines that the video in the region X is not monotonous. To do. All standard deviation Y SD, R SD, G SD and B SD, or the standard deviation Y SD, R SD, any one of the G SD and B SD, two or three determination standard deviation Can be included. When it is determined that the video in the area X is monotonous, the control unit 16 may determine that the area X is a breaking news area. However, it is also possible to determine whether or not the area X corresponds to the breaking news area in the target video by using another additional determination criterion. When it determines with the image | video in the area | region X not being monotonous, the control part 16 determines with the area | region X not being a bulletin area (that is, it determines with the breaking video not existing in an object image | video).

――第4判定要素技術――
第4判定要素技術を説明する。対象番組の録画時刻を基準とする時間帯(以下、検索時間帯という)おいて災害発生や選挙結果発表等が行われていたか否かを、ネットワークNET等を経由して検索し、その検索結果を付加判定基準として用いても良い。検索時間帯は、対象番組の放送時間帯(即ち、図3の時刻tA1から時刻tA2までの時間帯)を含む。検索時間帯は、時刻tA1よりも所定時間だけ前の時刻と時刻tA1との間の時間帯を、更に含んでいても良い。これに加えて又はこれに代えて、検索時間帯は、時刻tA2と時刻tA2よりも所定時間だけ後の時刻との間の時間帯を、更に含んでいても良い。制御部16は、録画ファイルの録画関連情報から時刻tA1及びtA2を認識できる。検索時間帯において災害発生や選挙結果発表等の事実を確認できなかった場合、領域Xが速報領域である可能性は低いと判断される。
-Fourth judgment element technology-
The fourth determination element technique will be described. Searches via network NET etc. whether or not a disaster has occurred or an election result has been announced in a time zone based on the recording time of the target program (hereinafter referred to as a search time zone), and the search result May be used as an additional criterion. The search time zone includes the broadcast time zone of the target program (that is, the time zone from time t A1 to time t A2 in FIG. 3). The search time zone may further include a time zone between a time before a time t A1 and a time t A1 by a predetermined time. In addition to or instead of this, the search time zone may further include a time zone between time t A2 and time after a predetermined time from time t A2 . The control unit 16 can recognize the times t A1 and t A2 from the recording related information of the recording file. If facts such as the occurrence of a disaster or announcement of election results cannot be confirmed in the search time zone, it is determined that the possibility that the area X is a breaking news area is low.

従って、第4判定要素技術を利用する制御部16は、検索時間帯内の時刻に関連付けられた情報(以下、参照情報という)の内容を付加判定基準に含め、参照情報の内容に応じて速報可能性Qを導出する(後述の図8のS20及びS21参照)。速報可能性Qは、領域Xが、災害情報等を示す速報領域に相当する可能性を示す。そして、速報可能性Qが所定値QTH以上のとき、領域Xが速報領域であると確定することができる(QTH>0)。速報可能性Qが所定値QTH未満のときには、領域Xは速報領域でないと判断される(即ち、対象映像に速報映像は存在しないと判定される) Therefore, the control unit 16 that uses the fourth determination element technique includes the content of information (hereinafter referred to as reference information) associated with the time within the search time zone in the additional determination criterion, and promptly reports according to the content of the reference information. The possibility Q is derived (see S20 and S21 in FIG. 8 described later). The preliminary report possibility Q indicates a possibility that the area X corresponds to a preliminary report area indicating disaster information or the like. Then, when the possibility of breaking news Q is equal to or greater than a predetermined value Q TH, it can be determined that the area X is a breaking news area (Q TH > 0). When the breaking possibility Q is less than the predetermined value Q TH , it is determined that the area X is not a breaking area (that is, it is determined that there is no breaking video in the target video).

参照情報は、通信部20により、ネットワークNETを介してネットワークNETの接続機器(録画再生装置1以外の接続機器)から取得した情報INETを含む。情報INETは検索時間帯に発行された情報である。 The reference information includes information I NET acquired by the communication unit 20 from the connected device (connected device other than the recording / playback apparatus 1) of the network NET via the network NET. Information I NET is information issued in the search time zone.

例えば、所定機関(災害なら気象庁)のホームページのXMLデータテーブルや所定のデータベースから、ネットワークNETを通じて取得した災害関連情報及び選挙結果情報が情報INETに含まれる。検索時間帯内での自然災害(地震、津波又は台風等)の発生を示す災害関連情報が取得された場合、速報可能性Qは初期値(例えば0)から増大せしめられる。このとき、所定機関のホームページ又は情報信頼性の高い所定のデータベースから災害関連情報が取得されたならば、速報可能性Qを所定値QTH以上に高めて良い。 For example, the information I NET includes disaster-related information and election result information acquired through a network NET from an XML data table on a homepage of a predetermined organization (meteorological agency in case of disaster) or a predetermined database. When disaster-related information indicating the occurrence of a natural disaster (earthquake, tsunami, typhoon, etc.) within the search time zone is acquired, the early warning possibility Q is increased from an initial value (for example, 0). At this time, if disaster-related information is acquired from the homepage of a predetermined organization or a predetermined database with high information reliability, the early warning possibility Q may be increased to a predetermined value QTH or more.

或いは、SNS(ソーシャルネットワーキングサービス)や所謂ブログ等のウェブサイトにおいて、検索時間帯内で所定のキーワード(地震、津波、台風、選挙又は選挙速報等)が出現している場合も速報可能性Qを増大させて良い。この場合、その出現頻度が高まるにつれて、速報可能性Qをより増大させると良い(即ち情報の精度が高いと判断して良い)。   Alternatively, if a predetermined keyword (earthquake, tsunami, typhoon, election or preliminary announcement) appears on a website such as an SNS (social networking service) or a so-called blog, Q May be increased. In this case, as the appearance frequency increases, it is better to increase the possibility of breaking news Q (that is, it may be determined that the accuracy of information is high).

参照情報は、アンテナATによる放送波の受信を介し、放送信号より得られたEPG情報(電子番組表情報)を含んでいても良い。上述の説明では特に記述しなかったが、放送信号はEPG情報を含んでおり、図1の映像音声処理部12において放送信号からEPG情報を分離抽出することができる。EPG情報には、各放送局が放送する番組のタイトル及び内容が含まれている。   The reference information may include EPG information (electronic program guide information) obtained from a broadcast signal through reception of a broadcast wave by the antenna AT. Although not particularly described in the above description, the broadcast signal includes EPG information, and the EPG information can be separated and extracted from the broadcast signal in the video / audio processing unit 12 of FIG. The EPG information includes the title and content of a program broadcast by each broadcasting station.

制御部16は、時刻tA1又はtA2より後の時刻におけるEPG情報を、メモリ17又は記録メディア14に(例えば対象番組についての録画関連情報内に)保存しておくことができる。そして、保存したおいたEPG情報を参照情報に含めて利用することができる。例えば、時刻tA2から所定時間後の時刻tA3(図3参照)を検索時間帯に含めておき、時刻tA3に取得されたEPG情報を参照する。制御部16は、時刻tA3のEPG情報における各番組のタイトル及び内容に、所定のキーワード(地震、津波、台風、選挙又は選挙速報等)が存在している場合、速報可能性Qを増大させて良い。この場合、その存在個数の増大につれて速報可能性Qをより増大させると良い。例えば、地震が発生した場合、その発生後、しばらくしてから当該地震に関する特別番組が放送される可能性が高いからである。 The control unit 16 can store the EPG information at a time after the time t A1 or t A2 in the memory 17 or the recording medium 14 (for example, in the recording related information about the target program). The stored EPG information can be used by including it in the reference information. For example, a time t A3 (see FIG. 3) after a predetermined time from the time t A2 is included in the search time zone, and the EPG information acquired at the time t A3 is referred to. When the predetermined keyword (earthquake, tsunami, typhoon, election or election bulletin, etc.) is present in the title and content of each program in the EPG information at time t A3 , the control unit 16 increases the possibility of breaking news Q. Good. In this case, it is preferable to further increase the possibility of breaking news Q as the number of existing objects increases. For example, when an earthquake occurs, there is a high possibility that a special program related to the earthquake will be broadcast after a while.

上述の第1及び第2判定要素技術は、速報領域である可能性を有した映像領域を抽出及び設定する技術に相当する。第1判定要素技術の利用によって、速報領域である可能性を有した映像領域を良好に抽出できる。第2判定要素技術の利用によって、速報領域である可能性を有した映像領域の位置及び形状を修正できる。上述の第3及び第4判定要素技術は、速報領域である可能性を有した映像領域が本当に速報領域であるのかを判別する技術に相当する。第3及び第4判定要素技術の利用によって、速報領域の有無判定精度が高まる。   The first and second determination element techniques described above correspond to techniques for extracting and setting a video area having a possibility of being a breaking news area. By using the first determination element technology, it is possible to satisfactorily extract a video area having a possibility of being a breaking news area. By using the second determination element technique, it is possible to correct the position and shape of the video area that has the possibility of being a breaking news area. The third and fourth determination element techniques described above correspond to techniques for determining whether a video area having a possibility of being a breaking news area is really a breaking news area. By using the third and fourth determination element technologies, the accuracy of determining the presence or absence of the breaking news area is increased.

――動作フローチャート――
次に、図8を参照し、対象番組の再生が指示された場合における録画再生装置1の動作の流れを説明する。図8の動作フローチャートでは、上述の第1〜第4判定要素技術の全てが適用されている。ステップS11〜S23の処理は、制御部16により実行される又は制御部16の制御の下で実行される。
-Operation flowchart-
Next, with reference to FIG. 8, the flow of the operation of the recording / reproducing apparatus 1 when an instruction to reproduce the target program is given will be described. In the operation flowchart of FIG. 8, all of the first to fourth determination element technologies described above are applied. The processes of steps S11 to S23 are executed by the control unit 16 or under the control of the control unit 16.

ステップS10において、録画済みの対象番組の再生がユーザにより指示されると、ステップS11において、第1判定要素技術における対象映像のフレーム間比較により静止領域が探索される。続くステップS12において対象映像内に静止領域が存在すると判断されると、ステップS13にて該静止領域が抽出領域Aとして抽出された後、ステップS14へ移行する。対象映像内に静止領域が存在しない場合、速報映像は存在しないと判定してステップS25へ移行する。   In step S10, when the user instructs playback of the recorded target program, in step S11, a still region is searched by comparison between frames of the target video in the first determination element technique. If it is determined in step S12 that a still area exists in the target video, the still area is extracted as the extraction area A in step S13, and then the process proceeds to step S14. If there is no still area in the target video, it is determined that there is no breaking video and the process proceeds to step S25.

ステップS14では、第2判定要素技術に従い、対象番組の放送局に対応するパターン情報がメモリ17から読み出され、読み出されたパターン情報に基づくパターン領域Bが設定される。そして、ステップS15において、上述の方法に従い抽出領域Aとパターン領域Bが比較される。抽出領域Aと一致又は近似しているパターン領域Bが存在する場合、ステップS16において、そのパターン領域Bを領域X(第2の速報候補領域)に設定する(即ち、速報候補領域がパターン領域Bに修正される)。一方、抽出領域Aと一致又は近似しているパターン領域Bが存在しない場合、ステップS17において、抽出領域Aを領域Xに設定する(即ち、速報候補領域が、第1の速報候補領域としての抽出領域Aにて維持される)。   In step S14, according to the second determination element technique, pattern information corresponding to the broadcast station of the target program is read from the memory 17, and a pattern area B based on the read pattern information is set. In step S15, the extraction area A and the pattern area B are compared according to the method described above. If there is a pattern area B that matches or approximates the extracted area A, in step S16, the pattern area B is set as an area X (second breaking news candidate area) (that is, the breaking news candidate area is the pattern area B). To be corrected). On the other hand, if there is no pattern area B that matches or approximates the extraction area A, the extraction area A is set as the area X in step S17 (that is, the breaking news candidate area is extracted as the first breaking news candidate area). Maintained in region A).

ステップS16又はS17にて領域Xが設定された後、ステップS18において、領域Xの輝度及びRGB成分に関する上記標準偏差YSD、RSD、GSD及びBSDを導出し、続くステップS19にて、それらの標準偏差を所定閾値と比較する。標準偏差YSD、RSD、GSD及びBSDが全て所定閾値以下である場合にはステップS20へ移行するが、そうでない場合、速報映像は存在しないと判定してステップS25へ移行する。 After the region X is set in step S16 or S17, in step S18, the standard deviations Y SD , R SD , G SD and B SD regarding the luminance and RGB components of the region X are derived, and in step S19, Those standard deviations are compared with a predetermined threshold. If the standard deviations Y SD , R SD , G SD, and B SD are all equal to or less than the predetermined threshold value, the process proceeds to step S20. Otherwise, it is determined that there is no breaking video and the process proceeds to step S25.

ステップS20及びS21では、第4判定要素技術に従い、録画時刻を元にネットワークNET等を介して上記参照情報を取得し、取得した参照情報から速報可能性Qを導出する。そして、ステップS22において速報可能性Qを所定値QTHと比較し、速報可能性Qが所定値QTH以上ならステップS23へ移行する。一方、速報可能性Qが所定値QTH未満なら、速報映像は存在しないと判定してステップS25へ移行する。 In steps S20 and S21, according to the fourth determination element technique, the reference information is acquired via the network NET or the like based on the recording time, and the preliminary report possibility Q is derived from the acquired reference information. Then, the bulletin potential Q is compared with a predetermined value Q TH in step S22, bulletin possibility Q moves to step S23 if more than a predetermined value Q TH. On the other hand, if the possibility of breaking information Q is less than the predetermined value Q TH, it is determined that there is no breaking image and the process proceeds to step S25.

ステップS23において、制御部16は、領域Xが速報領域であると確定し(最終的に判定し)、続くステップS24において、領域Xを除いた領域の映像、即ち、主映像の拡大再生を行う。主映像の拡大再生とは、対象映像の全映像領域から速報映像(即ち領域X)を除去して主映像を抽出し、抽出主映像を拡大した映像を出力映像として出力部19から表示装置2に出力することを指す。出力映像は、表示装置2の所定表示領域の全体を用いて表示される。この際、映像の拡大の前後において、抽出主映像のアスペクト比を不変にすると良い。   In step S23, the control unit 16 determines that the area X is a breaking news area (final determination), and in the subsequent step S24, enlarges and reproduces the video of the area excluding the area X, that is, the main video. . The enlarged reproduction of the main video means that the main video is extracted by removing the breaking video (that is, the region X) from the entire video area of the target video, and the output unit 19 outputs the video obtained by enlarging the extracted main video as the output video. To output to. The output video is displayed using the entire predetermined display area of the display device 2. At this time, the aspect ratio of the extracted main video is preferably unchanged before and after the video is enlarged.

例えば、対象映像が図2(b)の速報込映像310である場合、図9に示す如く、対象映像310から主映像MMを抽出し、抽出主映像MMを拡大することで出力映像MM’を生成する。図10(a)に示す如く、出力映像MM’ は表示装置2の所定表示領域400の全体を用いて表示される。対象映像に速報映像が付与されているときに速報映像を除去して主映像を抽出及び拡大再生する機能を速報映像除去機能と呼ぶ。ユーザは、指示受付部15を通じて速報映像除去機能を有効又は無効に設定することができる。図8の動作は、速報映像除去機能が有効(オン)になっているときの動作である。仮に、速報映像除去機能が無効(オフ)に設定されていた場合において、対象映像が速報込映像310であるならば、映像310そのものが出力映像となって、図10(b)のような表示が成される。図10(a)及び(b)では、表示装置2の全表示領域が所定表示領域400になっているが、所定表示領域400は表示装置2の全表示領域の一部でも良い。   For example, when the target video is the quick-report video 310 in FIG. 2B, the main video MM is extracted from the target video 310 and the extracted main video MM is expanded as shown in FIG. Generate. As shown in FIG. 10A, the output video MM ′ is displayed using the entire predetermined display area 400 of the display device 2. The function of removing the breaking video and extracting and enlarging the main video when the breaking video is attached to the target video is called a breaking video removal function. The user can enable or disable the breaking video removal function through the instruction receiving unit 15. The operation in FIG. 8 is an operation when the breaking video removal function is enabled (on). If the quick video removal function is disabled (off) and the target video is the quick video 310, the video 310 itself becomes the output video and the display as shown in FIG. Is made. 10A and 10B, the entire display area of the display device 2 is the predetermined display area 400. However, the predetermined display area 400 may be a part of the entire display area of the display device 2.

ステップS25では、対象映像がそのまま出力映像として再生される(これを通常再生という)。即ち例えば、対象映像が図2(a)の通常映像300である場合、ステップS25への移行が発生して、映像300がそのまま出力映像として再生される。尚、ステップS24及びS25にて出力映像を生成する過程において、メディアドライバ13からの対象AV信号を伸長復号化(デコード)する処理が介在する。勿論、対象映像に基づく出力映像の再生時には、対象音声信号も同期して再生される。   In step S25, the target video is reproduced as it is as an output video (this is called normal playback). That is, for example, when the target video is the normal video 300 in FIG. 2A, the transition to step S25 occurs, and the video 300 is reproduced as it is as the output video. In the process of generating the output video in steps S24 and S25, a process of decompressing and decoding (decoding) the target AV signal from the media driver 13 is involved. Of course, when the output video based on the target video is played back, the target audio signal is also played back in synchronization.

本実施形態によれば、再生時には表示してもあまり意味を成さない速報映像が除去され、主映像を、通常の表示サイズで再生することができる。   According to the present embodiment, the breaking video that does not make much sense even when displayed during playback is removed, and the main video can be played back in the normal display size.

尚、対象映像に速報映像が付与されている場合において、領域Xが真の速報領域からずれていることもある。故に、ユーザによる入力指示に従い領域Xを修正できるようにしておくと良い。領域Xの修正は、領域Xを領域Aから領域Bへ変更すること、又は、その逆を含む。具体的な手法としては、図8の動作フローチャートに従いステップS24又はS25にて主映像の拡大再生又は対象映像の通常再生を開始した後、ユーザから領域Xの修正を求める入力指示があった場合に当該修正を実行する。或いは、ステップS13及びS14にて領域A及びBを定めた後、領域A及びBのどちらが領域Xとなるべきか(速報領域に相当するか)をOSDデータを用いてユーザに問い合わせても良い。この場合、この問い合わせに応答したユーザの入力指示に従い、領域A又はBを領域Xに設定する。このような問い合わせの実行は、特に、領域A及びB間の近似度が中程度の場合に有益である。   Note that, when a breaking video is given to the target video, the region X may deviate from the true breaking region. Therefore, it is preferable that the area X can be corrected in accordance with an input instruction from the user. The modification of the region X includes changing the region X from the region A to the region B or vice versa. As a specific method, when an enlargement reproduction of the main video or a normal reproduction of the target video is started in step S24 or S25 in accordance with the operation flowchart of FIG. Perform the correction. Alternatively, after the areas A and B are determined in steps S13 and S14, the user may be inquired about which of the areas A and B should be the area X (corresponding to the breaking news area) using the OSD data. In this case, the area A or B is set as the area X according to the input instruction of the user who responded to this inquiry. The execution of such an inquiry is particularly beneficial when the degree of approximation between the regions A and B is medium.

また、抽出領域Aと一致又は近似しているパターン領域Bが存在しない場合、ステップS17において、制御部16は、抽出領域Aを領域Xに設定しつつ、抽出領域Aを新たなパターン領域と捉えて、新たなパターン領域についてのパターン情報をメモリ17に追記しても良い。この追記により、以降の判断の精度向上が期待される。   If there is no pattern region B that matches or approximates the extraction region A, in step S17, the control unit 16 sets the extraction region A as the region X and regards the extraction region A as a new pattern region. Then, the pattern information for the new pattern area may be additionally written in the memory 17. This additional writing is expected to improve the accuracy of subsequent determinations.

<<第2実施形態>>
本発明の第2実施形態を説明する。第2実施形態並びに後述の第3及び第4実施形態は第1実施形態を基礎とする実施形態であり、第2〜第4実施形態において特に述べない事項に関しては、特に記述無き限り且つ矛盾の無い限り、第1実施形態の記載が第2〜第4実施形態にも適用される。矛盾の無い限り、第1〜第4実施形態の内、任意の複数の実施形態を組み合わせても良い。
<< Second Embodiment >>
A second embodiment of the present invention will be described. The second embodiment and the third and fourth embodiments to be described later are embodiments based on the first embodiment. Matters not specifically described in the second to fourth embodiments are not particularly described and contradictory. As long as there is no, description of 1st Embodiment is applied also to 2nd-4th embodiment. As long as there is no contradiction, any one of the first to fourth embodiments may be combined.

第1実施形態の図8の動作では、第1〜第4判定要素技術の全てが実施されているが、第1〜第4判定要素技術の内、一部の判定要素技術の実施を割愛しても良い。但し、速報映像判定の精度向上のためには、それらを全て実施した方が好ましい。   In the operation of FIG. 8 of the first embodiment, all of the first to fourth determination element technologies are implemented, but some of the determination element technologies are omitted from the first to fourth determination element technologies. May be. However, in order to improve the accuracy of the breaking news video determination, it is preferable to implement all of them.

例えば、ステップS13にて抽出領域Aが設定された後、無条件で抽出領域Aを領域Xに設定して、ステップS18、S20又はS23へ直接移行しても良い。
或いは例えば、ステップS16又はS17にて領域Xが設定された後、ステップS18及びS19の処理又はステップS18〜S22の処理を割愛して、ステップS20又はS23へ直接移行しても良い。
或いは例えば、ステップS19において判定用標準偏差が所定閾値以下である場合には、ステップS20〜S22の処理を割愛して、ステップS23へ直接移行しても良い(判定用標準偏差の意義については、第3判定要素技術の説明を参照)。
For example, after the extraction area A is set in step S13, the extraction area A may be set unconditionally to the area X, and the process may directly move to step S18, S20, or S23.
Alternatively, for example, after the region X is set in step S16 or S17, the process of steps S18 and S19 or the processes of steps S18 to S22 may be omitted, and the process may directly proceed to step S20 or S23.
Or, for example, when the standard deviation for determination is equal to or smaller than a predetermined threshold value in step S19, the process of steps S20 to S22 may be omitted and the process may directly proceed to step S23 (for the significance of the standard deviation for determination, (See description of third determination element technology).

また、第3及び第4判定要素技術において述べた付加判定基準は例示に過ぎず、他の付加判定基準を用いて、速報候補領域Xが速報領域に相当するのか否かを決定しても良い。例えば、領域X内の文字の有無若しくは内容、又は、それらの双方を付加判定基準に含めても良い(即ち、領域X内の文字の有無又は内容に基づき、速報候補領域Xが速報領域に相当するのか否かを決定しても良い)。速報領域には災害情報等を示す文字が示されていると予想されるため、文字の有無等による付加判定基準を利用することで、速報領域の有無判定精度が高まる。   In addition, the additional determination criteria described in the third and fourth determination element technologies are merely examples, and other additional determination criteria may be used to determine whether or not the preliminary report candidate area X corresponds to the preliminary report area. . For example, the presence / absence or content of the character in the region X, or both of them may be included in the additional determination criteria (that is, the preliminary candidate region X corresponds to the preliminary alert region based on the presence or content of the character in the region X) You may decide whether or not to do so). Since it is expected that characters indicating disaster information or the like are shown in the breaking news area, the accuracy of determining the presence or absence of the breaking news area is increased by using the additional determination criterion based on the presence or absence of the letters.

第3及び第4判定要素技術における付加判定基準と、文字の有無等による付加判定基準を組み合わせときの具体的な動作を、図11を参照して説明する。   A specific operation when the additional determination criterion in the third and fourth determination element technologies and the additional determination criterion based on the presence / absence of characters and the like are combined will be described with reference to FIG.

領域Xの設定後、制御部16は、領域X内の映像信号に基づき領域X内の文字を検出及び抽出する文字検出処理を実行し、その結果から評価値EVAを求める(ステップS31)。領域Xから一定数以上の文字が検出された場合、評価値EVAに所定値EVA1を設定する。但し、この場合において、領域Xから抽出された文字の中に、所定のキーワード(地震、津波、台風、選挙又は選挙速報等)が含まれている場合、評価値EVAに所定値EVA2を設定する。領域Xから一定数以上の文字が検出されない場合には、評価値EVAに所定値EVA0を設定する。ここで、“0≦EVA0<EVA1<EVA2”である。 After setting the region X, the control unit 16 executes a character detection process for detecting and extracting characters in the region X based on the video signal in the region X, and obtains an evaluation value EV A from the result (step S31). When a certain number or more of characters are detected from the area X, the predetermined value EV A1 is set as the evaluation value EV A. However, in this case, when a predetermined keyword (earthquake, tsunami, typhoon, election or preliminary announcement) is included in the characters extracted from the region X, the predetermined value EV A2 is set as the evaluation value EV A. Set. When a certain number of characters or more are not detected from the region X, the predetermined value EV A0 is set as the evaluation value EV A. Here, “0 ≦ EV A0 <EV A1 <EV A2 ”.

一方で、領域Xの設定後、制御部16は、上述の判定用標準偏差を導出し、判定用標準偏差に基づき評価値EVBを求める(ステップS32)。この際、判定用標準偏差が小さいほど評価値EVBが高くなるようにする。判定用標準偏差が2以上の標準偏差(例えば、YSD、RSD、GSD及びBSD)から形成される場合、例えば、2以上の標準偏差の平均値を判定用標準偏差とすればよい。 On the other hand, after setting the region X, the control unit 16 derives the above-described determination standard deviation and obtains the evaluation value EV B based on the determination standard deviation (step S32). At this time, the evaluation value EV B is set higher as the determination standard deviation is smaller. When the standard deviation for determination is formed from standard deviations of 2 or more (for example, Y SD , R SD , G SD and B SD ), for example, an average value of 2 or more standard deviations may be used as the standard deviation for determination. .

更に、領域Xの設定後、制御部16は、ネットワークNET等を介して取得した参照情報から評価値EVCを求める(ステップS33)。第1実施形態で述べた速報可能性Qを評価値EVCに設定することができる。 Further, after setting the area X, the control unit 16 obtains the evaluation value EV C from the reference information acquired via the network NET or the like (step S33). The preliminary report possibility Q described in the first embodiment can be set to the evaluation value EV C.

その後、制御部16は、下記式(1)に従って速報可能性Q’を導出する。ここで、kA、kB及びkCは、所定値を持つ係数である。速報可能性Q’が所定値QTH以上の場合には、図8のそれらと同じステップS23及びS24の処理が実行される。速報可能性Q’が所定値QTH未満の場合には、領域Xは速報領域ではないと判定されて図8のそれと同じステップS25の処理が実行される。
Q’=kA・EVA+kB・EVB+kC・EVC …(1)
Thereafter, the control unit 16 derives the preliminary report possibility Q ′ according to the following formula (1). Here, k A , k B and k C are coefficients having predetermined values. If the possibility of breaking news Q ′ is equal to or greater than the predetermined value Q TH , the same processes of steps S23 and S24 as those in FIG. 8 are executed. If the breaking possibility Q ′ is less than the predetermined value Q TH , it is determined that the area X is not a breaking area, and the same processing of step S25 as that of FIG. 8 is executed.
Q ′ = k A · EV A + k B · EV B + k C · EV C (1)

係数kA、kB及びkCの夫々は0以上の値を持つ。係数kA、kB及びkCの内、任意の1つ又は2つの係数の値は0であっても良い。係数kA、kB及びkCの値は固定値であっても良いが、制御部16にて係数kA、kB及びkCの値を可変設定しても良い。当該可変設定を入力指示に従って行っても良い。或いは例えば、録画再生装置1において対象番組より過去に録画された番組の傾向に基づき、係数kA、kB及びkCの値を可変設定しても良い。 Each of the coefficients k A , k B and k C has a value of 0 or more. Of the coefficients k A , k B and k C , the value of any one or two coefficients may be zero. The values of the coefficients k A , k B and k C may be fixed values, but the control unit 16 may variably set the values of the coefficients k A , k B and k C. The variable setting may be performed according to an input instruction. Alternatively, for example, the values of the coefficients k A , k B, and k C may be variably set based on the tendency of programs recorded in the past from the target program in the recording / playback apparatus 1.

より具体的には例えば、領域Xに単調な静止映像(出演者の発話内容の文言等の映像)が頻繁に表示されるようなニュース番組が、対象番組の放送時間帯より過去において高い頻度で録画されている傾向があったとする。そして、対象番組のジャンルがニュースであり、対象映像から静止領域が領域Aとして抽出されると共に領域Aに基づく領域Xが設定されたとする。この場合、対象番組のジャンルがニュースであること及び上記傾向から、対象映像内の領域Xに対する判定用標準偏差が比較的小さくなって評価値EVBが比較的大きくなりやすくなる。評価値EVBが大きくなると速報可能性Q’が高まる(領域Xが速報領域であると判定される可能性が高まる)。しかしながら、上記傾向に鑑みれば、速報映像に当たらない映像が対象番組の領域Xに表示されている可能性も高い。従って、この場合、制御部16は、対象番組のジャンルがニュースであること及び上記傾向に基づき、例えば係数kBの値を初期値から減少させると良い。 More specifically, for example, news programs in which monotonous still images (videos of words of the utterances of the performers) are frequently displayed in the region X have a higher frequency in the past than the broadcast time of the target program. Suppose there was a tendency to be recorded. Then, it is assumed that the genre of the target program is news, a still area is extracted as the area A from the target video, and the area X based on the area A is set. In this case, because the genre of the target program is news and the above tendency, the standard deviation for determination with respect to the region X in the target video is relatively small, and the evaluation value EV B tends to be relatively large. As the evaluation value EV B increases, the possibility of breaking information Q ′ increases (the possibility that the area X is determined to be a breaking area increases). However, in view of the above tendency, there is a high possibility that a video that does not hit the breaking video is displayed in the area X of the target program. Therefore, in this case, the control unit 16 may decrease the value of the coefficient k B from the initial value based on the fact that the genre of the target program is news and the above tendency, for example.

<<第3実施形態>>
本発明の第3実施形態を説明する。速報映像判定を、ユーザによる再生指示の入力前(例えば、対象映像の録画の際、或いは、対象映像の録画後であって且つ再生指示の入力前)に実行するようにしても良い。速報映像判定は、領域Aを探索及び抽出する処理、領域Xを設定する処理及び領域Xが速報領域に相当するのかを判定する処理を含む。
<< Third Embodiment >>
A third embodiment of the present invention will be described. The breaking video determination may be performed before the user inputs a reproduction instruction (for example, when recording the target video, or after recording the target video and before inputting the reproduction instruction). The breaking video determination includes a process for searching and extracting the area A, a process for setting the area X, and a process for determining whether the area X corresponds to a breaking area.

即ち、第1又は第2実施形態において、制御部16は、速報映像判定を対象番組(対象映像)の録画の期間中に実行し、速報映像判定の結果データを対象番組に関連付けて記録メディア14又はメモリ17に保存しておいても良い。或いは、第1又は第2実施形態において、制御部16は、対象番組の録画終了後であって且つ対象番組(対象映像)の再生を求める指示が指示受付部15に入力される前に、速報映像判定を実行しても良い。この場合も、速報映像判定の結果データを対象番組に関連付けて記録メディア14又はメモリ17に保存しておく。対象番組に関連付けるために、例えば、速報映像判定の結果データを対象番組の録画ファイルにおける録画関連情報に含めておくと良い(図4参照)。その後、対象番組(対象映像)の再生を求める入力指示が指示受付部15に与えられたとき、制御部16は、上記の如く保存しておいた速報映像判定の結果データを取得し、その結果データに応じて、ステップS24の主映像の拡大再生又はステップS25の対象映像の通常再生を行う(図8、図11参照)。   That is, in the first or second embodiment, the control unit 16 performs the breaking video determination during the recording of the target program (target video), and associates the result data of the breaking video determination with the target program in the recording medium 14. Alternatively, it may be stored in the memory 17. Alternatively, in the first or second embodiment, the control unit 16 provides a preliminary report after the recording of the target program is completed and before an instruction for reproducing the target program (target video) is input to the instruction receiving unit 15. Video determination may be performed. Also in this case, the result data of the breaking news video determination is stored in the recording medium 14 or the memory 17 in association with the target program. In order to associate with the target program, for example, the result data of the breaking video determination may be included in the recording related information in the recording file of the target program (see FIG. 4). After that, when an instruction for requesting playback of the target program (target video) is given to the instruction receiving unit 15, the control unit 16 acquires the result data of the preliminary video determination stored as described above, and the result Depending on the data, enlargement reproduction of the main video in step S24 or normal reproduction of the target video in step S25 is performed (see FIGS. 8 and 11).

速報映像判定の処理負荷等にも依存するが、速報映像判定を再生段階で行う場合、速報映像判定の実行に伴う再生待ち時間が発生し得る。本実施形態の如く、録画段階等で速報映像判定を行っておくことで、そのような再生待ち時間の発生が回避される。   Although depending on the processing load of the breaking video determination, etc., when the breaking video determination is performed at the playback stage, a reproduction waiting time can be generated due to the execution of the breaking video determination. As in this embodiment, the occurrence of such a reproduction waiting time is avoided by performing the breaking video determination at the recording stage or the like.

尚、対象番組の録画の際に速報映像判定を行う場合において、対象映像に速報映像が付与されているとき、映像音声処理部12は、対象番組の録画の段階で対象映像から速報映像(即ち領域X)を除去し、主映像を拡大した映像の映像信号を対象映像信号として記録メディア14に記録するようにしても良い。この場合、再生時には対象映像信号をそのまま再生するだけで、図10(a)のような映像が表示される。但し、速報映像判定に誤判定が有りうること等を考慮すれば、録画段階では領域Xの映像信号も記録しておいた方が良い(オリジナルの対象映像を記録しておいた方が良い)。   In the case where the breaking video is determined when the target program is recorded, when the breaking video is added to the target video, the video / audio processing unit 12 determines the breaking video from the target video (that is, at the stage of recording the target program). The video signal of the video obtained by removing the area X) and enlarging the main video may be recorded on the recording medium 14 as the target video signal. In this case, the video as shown in FIG. 10A is displayed by simply reproducing the target video signal as it is during reproduction. However, in consideration of the possibility of erroneous determination in the breaking video determination, it is better to record the video signal of the area X at the recording stage (it is better to record the original target video). .

<<第4実施形態>>
本発明の第4実施形態を説明する。対象映像の全区間において速報映像判定を周期的に繰り返し実行することができる。この場合において、速報映像が存在する速報映像有区間と速報映像が存在しない速報映像無区間とが対象映像の全区間中に混在していたとすると、速報映像有区間では主映像の拡大再生が行われ、速報映像無区間では対象映像の通常再生が行われる。そうすると、速報映像無区間から速報映像有区間への切り替わりにおいて主映像の表示サイズが拡大され、逆の切り替わりにおいて主映像の表示サイズが縮小される。このような拡大及び縮小が頻繁に行われると、再生映像が、かえって見づらくなる可能性がある。
<< Fourth Embodiment >>
A fourth embodiment of the present invention will be described. The breaking video determination can be periodically and repeatedly executed in all sections of the target video. In this case, if a section with a breaking video that contains a breaking video and a section without a breaking video without a breaking video are mixed in the entire section of the target video, the main video is enlarged and played back in the section with the breaking video. However, normal playback of the target video is performed in the section without the breaking video. Then, the display size of the main video is enlarged in the switching from the section without the breaking video to the section with the breaking video, and the display size of the main video is reduced in the reverse switching. If such enlargement and reduction are frequently performed, there is a possibility that the reproduced video becomes rather difficult to see.

そこで、第1、第2又は第3実施形態において、速報映像判定により領域Xが速報領域であると判定されたとき、制御部16は、主映像の拡大再生の代わりに、マスク再生を実行するようにしても良い。マスク再生では、対象映像中の速報映像(即ち領域X内の映像)を所定のマスク映像(例えば黒塗り映像)に置換し、当該置換を経た対象映像(即ち、主映像とマスク映像の合成映像)を出力映像として出力部19から表示装置2に出力する。図12に、図9の対象映像310に対してマスク再生を実行した場合の、表示装置2の表示の様子を示す。   Therefore, in the first, second, or third embodiment, when the area X is determined to be the breaking area by the breaking image determination, the control unit 16 performs mask reproduction instead of the enlarged reproduction of the main image. You may do it. In the mask reproduction, the breaking video (that is, the video in the region X) in the target video is replaced with a predetermined mask video (for example, black-painted video), and the target video that has undergone the replacement (that is, the composite video of the main video and the mask video). ) As an output video from the output unit 19 to the display device 2. FIG. 12 shows a display state of the display device 2 when mask reproduction is performed on the target video 310 of FIG.

対象映像に速報映像が含まれているときに、主映像の拡大再生と速報領域のマスク再生のどちらを行うのかを選択できるよう、録画再生装置1を形成しておいても良い。ユーザは、その選択を、指示受付部15を通じ、所定のセットアップモード又は再生中のメニューモード等にて指示することができる。   The recording / playback apparatus 1 may be formed so that when the target video includes the breaking news video, it is possible to select whether to perform enlarged playback of the main video or mask playback of the breaking news area. The user can instruct the selection through the instruction receiving unit 15 in a predetermined setup mode or a menu mode during reproduction.

<<変形等>>
本発明の実施形態は、特許請求の範囲に示された技術的思想の範囲内において、適宜、種々の変更が可能である。以上の実施形態は、あくまでも、本発明の実施形態の例であって、本発明ないし各構成要件の用語の意義は、以上の実施形態に記載されたものに制限されるものではない。上述の説明文中に示した具体的な数値は、単なる例示であって、当然の如く、それらを様々な数値に変更することができる。
<< Deformation, etc. >>
The embodiment of the present invention can be appropriately modified in various ways within the scope of the technical idea shown in the claims. The above embodiment is merely an example of the embodiment of the present invention, and the meaning of the term of the present invention or each constituent element is not limited to that described in the above embodiment. The specific numerical values shown in the above description are merely examples, and as a matter of course, they can be changed to various numerical values.

録画再生装置1若しくは制御部16である対象装置又は制御部16及び映像音声処理部12の組み合わせである対象装置を、集積回路等のハードウェア、或いは、ハードウェアとソフトウェアの組み合わせによって構成することができる。対象装置にて実現される機能の全部又は一部である任意の特定の機能をプログラムとして記述して、該プログラムを対象装置に搭載可能なフラッシュメモリに保存しておいても良い。そして、該プログラムをプログラム実行装置(例えば、対象装置に搭載可能なマイクロコンピュータ)上で実行することによって、その特定の機能を実現するようにしてもよい。上記プログラムは任意の記録媒体に記憶及び固定されうる。上記プログラムを記憶及び固定する記録媒体は対象装置と異なる機器(サーバ機器等)に搭載又は接続されても良い。   The target device that is the recording / playback device 1 or the control unit 16 or the target device that is a combination of the control unit 16 and the video / audio processing unit 12 may be configured by hardware such as an integrated circuit or a combination of hardware and software. it can. Arbitrary specific functions that are all or part of the functions realized by the target device may be described as a program, and the program may be stored in a flash memory that can be mounted on the target device. Then, the specific function may be realized by executing the program on a program execution device (for example, a microcomputer that can be mounted on the target device). The program can be stored and fixed on an arbitrary recording medium. The recording medium for storing and fixing the program may be mounted or connected to a device (such as a server device) different from the target device.

録画再生装置1は、映像の再生を行う映像再生装置を内包している。本発明に係る映像再生装置は、録画機能を持たない装置であっても良い。制御部16は、速報映像判定を行う判定部を備えていると言える。主映像の拡大再生を担う再生処理部は、映像音声処理部12によって、又は、映像音声処理部12及び制御部16によって構成される。速報映像は、対象映像に付与されうる付加情報映像(付加情報を示す映像)の例である。本発明に係る付加情報映像は、速報映像に分類されないような任意の情報の映像であっても良い。付加情報映像は、対象映像の録画時刻での情報の映像を含んでいると良い。対象映像の録画時刻での情報は、対象映像の録画時間帯(換言すれば対象番組の放送時間帯)に発生した任意の事象の情報、又は、任意の事象について対象映像の録画時間帯に放送された情報を含む。   The recording / playback apparatus 1 includes a video playback apparatus that plays back video. The video reproduction apparatus according to the present invention may be an apparatus that does not have a recording function. It can be said that the control part 16 is provided with the determination part which performs a bulletin image determination. The playback processing unit responsible for the enlarged playback of the main video is configured by the video / audio processing unit 12 or by the video / audio processing unit 12 and the control unit 16. The breaking news video is an example of additional information video (video showing additional information) that can be added to the target video. The additional information video according to the present invention may be a video of arbitrary information that is not classified as a breaking video. The additional information video preferably includes a video of information at the recording time of the target video. Information at the recording time of the target video is broadcasted during the recording time zone of the target video (in other words, the broadcast time zone of the target program), or broadcasted during the recording time zone of the target video for any event Information included.

1 録画再生装置
2 表示装置
11 チューナ
12 映像音声処理部
16 制御部
MM 主映像
AA 速報映像
DESCRIPTION OF SYMBOLS 1 Recording / reproducing apparatus 2 Display apparatus 11 Tuner 12 Image | video audio processing part 16 Control part MM main image AA Breaking image

Claims (10)

主映像を含む録画された対象映像に付加情報映像が付与されているか否かを、前記対象映像の映像信号に基づいて判定する判定部と、
前記対象映像に前記付加情報映像が付与されている場合、前記対象映像から前記主映像を抽出し、抽出主映像を拡大して再生する再生処理部と、を備えた
ことを特徴とする映像再生装置。
A determination unit that determines whether or not additional information video is added to the recorded target video including the main video based on the video signal of the target video;
A video playback comprising: a playback processing unit that extracts the main video from the target video and enlarges and plays the extracted main video when the additional information video is attached to the target video apparatus.
前記判定部は、前記対象映像のフレーム間比較を用いて前記判定を行う
ことを特徴とする請求項1に記載の映像再生装置。
The video reproduction apparatus according to claim 1, wherein the determination unit performs the determination using an inter-frame comparison of the target video.
前記判定部は、前記対象映像のフレーム間比較を用いて前記対象映像内の各位置の映像変化量を検出し、その検出結果を用いて前記判定を行うとともに前記付加情報映像の映像領域を検出する
ことを特徴とする請求項2に記載の映像再生装置。
The determination unit detects a video change amount at each position in the target video using an inter-frame comparison of the target video, performs the determination using the detection result, and detects a video area of the additional information video The video reproducing apparatus according to claim 2, wherein
前記判定部は、前記対象映像のフレーム間比較を用いて前記対象映像内の各位置の映像変化量を検出し、その検出結果を用いて前記判定を行うとともに前記付加情報映像の映像領域の候補領域を設定し、前記候補領域に基づき前記付加情報映像の映像領域を検出する
ことを特徴とする請求項2に記載の映像再生装置。
The determination unit detects a video change amount at each position in the target video using an inter-frame comparison of the target video, performs the determination using the detection result, and candidates for video areas of the additional information video 3. The video reproduction apparatus according to claim 2, wherein an area is set, and a video area of the additional information video is detected based on the candidate area.
前記付加情報映像の位置及び形状に関する所定のパターン情報を保持するメモリを更に備え、
前記判定部は、前記候補領域と前記パターン情報との照合結果に応じて、前記候補領域を元に前記付加情報映像の映像領域を検出する
ことを特徴とする請求項4に記載の映像再生装置。
A memory for holding predetermined pattern information related to the position and shape of the additional information video;
5. The video reproduction apparatus according to claim 4, wherein the determination unit detects a video area of the additional information video based on the candidate area according to a matching result between the candidate area and the pattern information. .
前記判定部は、前記候補領域が前記付加情報映像の映像領域に相当するか否かを、判定基準を用いて決定し、
前記判定基準は、
前記候補領域内の輝度の分布、
前記候補領域内の所定の色成分の分布、
通信又は放送波受信を介して取得された情報であって、前記対象映像の録画時刻を基準とした時刻に関連付けられた情報の内容、の内、少なくとも1つを含む
ことを特徴とする請求項4又は5に記載の映像再生装置。
The determination unit determines whether the candidate region corresponds to a video region of the additional information video using a determination criterion,
The criterion is
Luminance distribution in the candidate region;
A distribution of predetermined color components in the candidate region;
The information acquired through communication or broadcast wave reception, including at least one of information contents associated with a time based on a recording time of the target video. The video reproduction device according to 4 or 5.
前記判定基準は、前記候補領域内の文字の有無又は内容を更に含む
ことを特徴とする請求項6に記載の映像再生装置。
The video reproduction apparatus according to claim 6, wherein the determination criterion further includes presence / absence or contents of characters in the candidate area.
前記判定部は、前記対象映像の再生を求める指示の入力前に前記判定を行い、
前記再生処理部は、前記対象映像の再生の際に、その判定結果を参照する
ことを特徴とする請求項1乃至7の何れかに記載の映像再生装置。
The determination unit performs the determination before inputting an instruction to request reproduction of the target video,
The video playback apparatus according to claim 1, wherein the playback processing unit refers to a determination result when the target video is played back.
前記付加情報映像は、前記対象映像の録画時刻での情報の映像を含む
ことを特徴とする請求項1乃至8の何れかに記載の映像再生装置。
9. The video playback apparatus according to claim 1, wherein the additional information video includes a video of information at a recording time of the target video.
主映像を含む録画された対象映像に付加情報映像が付与されているか否かを、前記対象映像の映像信号に基づいて判定する判定ステップと、
前記対象映像に前記付加情報映像が付与されている場合、前記対象映像から前記主映像を抽出し、抽出主映像を拡大して再生する再生処理ステップと、を備えた
ことを特徴とする映像再生方法。
A determination step of determining whether or not additional information video is added to the recorded target video including the main video based on the video signal of the target video;
A video playback comprising: a playback processing step for extracting the main video from the target video and enlarging and playing the extracted main video when the additional information video is attached to the target video Method.
JP2013169463A 2013-08-19 2013-08-19 Video reproduction device and video reproduction method Pending JP2015039117A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013169463A JP2015039117A (en) 2013-08-19 2013-08-19 Video reproduction device and video reproduction method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013169463A JP2015039117A (en) 2013-08-19 2013-08-19 Video reproduction device and video reproduction method

Publications (1)

Publication Number Publication Date
JP2015039117A true JP2015039117A (en) 2015-02-26

Family

ID=52631956

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013169463A Pending JP2015039117A (en) 2013-08-19 2013-08-19 Video reproduction device and video reproduction method

Country Status (1)

Country Link
JP (1) JP2015039117A (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007174255A (en) * 2005-12-22 2007-07-05 Hitachi Ltd Recording and reproducing device
JP2008005428A (en) * 2006-06-26 2008-01-10 Toshiba Corp Video signal processor and video signal processing method
JP2009147749A (en) * 2007-12-14 2009-07-02 Toshiba Corp Video playback apparatus and video playback method
WO2009084110A1 (en) * 2007-12-28 2009-07-09 Fujitsu Limited Broadcast displaying device, broadcast displaying method, and computer program
JP2013101266A (en) * 2011-11-09 2013-05-23 Toshiba Corp Display device and display method
JP2013131814A (en) * 2011-12-20 2013-07-04 Fujitsu Semiconductor Ltd Video detection device, video recording device, video recording and reproducing device, video detection method, video recording method and video recording and reproducing method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007174255A (en) * 2005-12-22 2007-07-05 Hitachi Ltd Recording and reproducing device
JP2008005428A (en) * 2006-06-26 2008-01-10 Toshiba Corp Video signal processor and video signal processing method
JP2009147749A (en) * 2007-12-14 2009-07-02 Toshiba Corp Video playback apparatus and video playback method
WO2009084110A1 (en) * 2007-12-28 2009-07-09 Fujitsu Limited Broadcast displaying device, broadcast displaying method, and computer program
JP2013101266A (en) * 2011-11-09 2013-05-23 Toshiba Corp Display device and display method
JP2013131814A (en) * 2011-12-20 2013-07-04 Fujitsu Semiconductor Ltd Video detection device, video recording device, video recording and reproducing device, video detection method, video recording method and video recording and reproducing method

Similar Documents

Publication Publication Date Title
US12010391B2 (en) Method and apparatus for creating and sharing customized multimedia segments
KR100467613B1 (en) Method and apparatus for preventing duplicate copy of broadcasting program
US20060070106A1 (en) Method, apparatus and program for recording and playing back content data, method, apparatus and program for playing back content data, and method, apparatus and program for recording content data
US8424110B2 (en) Content storage apparatus, content storage method, storage medium, and program
JP2004534978A (en) System and method for determining the desirability of a video programming event
JP2006211311A (en) Digested video image forming device
JP5318160B2 (en) Information processing apparatus and information processing method
JP5857449B2 (en) Image processing apparatus and recording apparatus
US10348426B2 (en) Apparatus, systems and methods for identifying particular media content event of interest that is being received in a stream of media content
JP2006279290A (en) Program recording apparatus, program recording method, and program recording program
TWI533685B (en) Scene control system, method and recording medium
JP2008227909A (en) Video retrieval apparatus
JP2010016521A (en) Video image processing apparatus and video image processing method
CN101094337B (en) Method of controlling a television receiver and television receiver using the same
JP5135734B2 (en) Program information display apparatus and method, program, and recording medium
JP2015039117A (en) Video reproduction device and video reproduction method
CN103188564A (en) Electronic equipment and information processing method thereof
JP2009010846A (en) Digital broadcasting receiver
US20130151544A1 (en) Information processing apparatus, information processing method, and progam
JP2014072589A (en) Content reproducer, television receiver, content reproduction method, program and recording medium
JP2012034022A (en) Video audio recorder/reproducer, and video audio recording/reproducing method
US7890977B2 (en) Signal processing apparatus and signal processing method for upconverting a plurality of stored content data
JP6164445B2 (en) Chapter setting device
JP2011120016A (en) Information acquisition apparatus and information acquisition method
CN106686435A (en) Multimedia video file playing method, apparatus and TV terminal

Legal Events

Date Code Title Description
RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20150603

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160614

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170516

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170606

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20171205