JP4683281B2 - 再生システム、再生装置、再生方法、情報処理装置、情報処理方法、およびプログラム - Google Patents

再生システム、再生装置、再生方法、情報処理装置、情報処理方法、およびプログラム Download PDF

Info

Publication number
JP4683281B2
JP4683281B2 JP2005240562A JP2005240562A JP4683281B2 JP 4683281 B2 JP4683281 B2 JP 4683281B2 JP 2005240562 A JP2005240562 A JP 2005240562A JP 2005240562 A JP2005240562 A JP 2005240562A JP 4683281 B2 JP4683281 B2 JP 4683281B2
Authority
JP
Japan
Prior art keywords
content
reproduction
playback
special
interest
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005240562A
Other languages
English (en)
Other versions
JP2007060060A (ja
JP2007060060A5 (ja
Inventor
能明 賀川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2005240562A priority Critical patent/JP4683281B2/ja
Priority to US11/506,809 priority patent/US8103149B2/en
Publication of JP2007060060A publication Critical patent/JP2007060060A/ja
Publication of JP2007060060A5 publication Critical patent/JP2007060060A5/ja
Application granted granted Critical
Publication of JP4683281B2 publication Critical patent/JP4683281B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/782—Television signal recording using magnetic recording on tape
    • H04N5/783—Adaptations for reproducing at a rate different from the recording rate
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/11—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/781—Television signal recording using magnetic recording on disks or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Description

本発明は、再生システム、再生装置、再生方法、情報処理装置、情報処理方法、およびプログラムに関し、特に、例えば、コンテンツを再生する装置の利便性を向上させることができるようにする再生システム、再生装置、再生方法、情報処理装置、情報処理方法、およびプログラムに関する。
動画（画像の他、必要に応じて、画像に付随する音声を含む）や、静止画、音声（楽曲等を含む）などのコンテンツを再生する再生装置としては、例えば、テープレコーダ（プレーヤ）や、ディスクレコーダ（プレーヤ）などがある。
かかる再生装置では、コンテンツを実時間で再生する１倍速再生をすることができる他、特殊再生をすることができる。特殊再生としては、例えば、２倍速再生などの高速再生（早送り再生）、コマ送りやスロー再生などの低速再生、ポーズ（再生）、逆再生（巻き戻し再生）などがある。
例えば、ユーザは、所望のコンテンツを視聴したい場合、例えば、高速再生によって、所望のコンテンツを見つけ出すことができる。さらに、所望のコンテンツの中で特に視聴したい部分がある場合には、やはり高速再生によって、その部分を見つけ出すことができる。
ところで、近年においては、例えば、HD(Hard Disk)などの記録媒体の大容量化および低価格化が進み、大容量のHDを搭載したディスクレコーダが普及している。
大容量のHDを搭載したディスクレコーダによれば、多数（大量）のコンテンツを記録することができるため、そのような多数のコンテンツの中から、所望のコンテンツや、あるコンテンツの中の所望の部分を見つけ出すのは、上述した高速再生では、相応の労力が必要となる。
そこで、例えば、特許文献１には、コンテンツから、テロップが存在するテロップ区間や、話者の音声が存在する話者音声区間などを検出し、話者音声区間や、テロップ区間と話者音声区間とが重複する区間を、コンテンツを再生する再生区間として決めて、その再生区間を再生するダイジェスト再生を行うことが記載されている。
特開2005-65185号公報
ところで、従来の再生装置で行われる特殊再生は、高速再生や低速再生などのように、種々の再生速度による再生であり、コンテンツの内容とは無関係の再生である。
しかしながら、コンテンツの内容に応じた特殊再生、即ち、コンテンツの内容によって再生対象が決まる（変わる）再生を行うことができれば、便利である。
ここで、以下、適宜、高速再生や低速再生などのように、再生速度に応じた特殊再生を、単純特殊再生ともいう。また、以下、適宜、コンテンツの内容に応じた特殊再生を、特別特殊再生ともいう。
特別特殊再生としては、例えば、ユーザがコンテンツ全体の内容の概要を把握することができるように、コンテンツ全体の概要の把握に有用なシーンだけを再生する要約再生や、コンテンツのハイライトシーンだけを再生するハイライト再生などの、コンテンツの特定の内容の部分だけを再生対象とする再生が考えられ、このような要約再生やハイライト再生などの各種の特別特殊再生を行うことができれば、装置の利便性を向上させることができる。
本発明は、このような状況に鑑みてなされたものであり、装置の利便性を向上させることができるようにするものである。
本発明の第１の側面は、コンテンツを再生する再生システムにおいて、コンテンツのカテゴリを判定するカテゴリ判定手段と、コンテンツの各カテゴリについて、コンテンツの内容に応じた複数の特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す再生対象情報と前記注目コンテンツを識別する識別情報とを対応付けた再生指示データを生成する再生指示データ生成手段と、前記再生指示データにおいて、ユーザが指定したコンテンツの識別情報に対応付けられている、前記ユーザが指定した前記特殊再生の種類についての前記再生対象情報を取得する取得手段と、前記取得手段において取得された前記再生対象情報が表すコンテンツの特定の内容の部分を、前記ユーザが指定したコンテンツから抽出する抽出手段とを備える再生システムである。
かかる第１の側面の再生システムにおいては、コンテンツのカテゴリが判定される。さらに、コンテンツの各カテゴリについて、コンテンツの内容に応じた複数の特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分が、前記特殊再生の種類ごとに決定され、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す再生対象情報と前記注目コンテンツを識別する識別情報とを対応付けた再生指示データが生成される。そして、前記再生指示データにおいて、ユーザが指定したコンテンツの識別情報に対応付けられている、前記ユーザが指定した前記特殊再生の種類についての前記再生対象情報が取得され、その再生対象情報が表すコンテンツの特定の内容の部分が、前記ユーザが指定したコンテンツから抽出される。
本発明の第２の側面の再生装置は、コンテンツを再生する再生装置において、コンテンツの内容に応じた特殊再生をするときに再生対象とする前記コンテンツの特定の内容の部分を表す、前記特殊再生の種類ごとの再生対象情報と、前記コンテンツを識別する識別情報とを対応付けた再生指示データにおいて、ユーザが指定したコンテンツの識別情報に対応付けられている、前記ユーザが指定した前記特殊再生の種類についての前記再生対象情報を取得する取得手段と、前記取得手段において取得された前記再生対象情報が表すコンテンツの特定の内容の部分を、前記ユーザが指定したコンテンツから抽出する抽出手段とを備え、前記再生指示データは、コンテンツの各カテゴリについて、複数の前記特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す前記再生対象情報と前記注目コンテンツを識別する前記識別情報とを対応付けることにより生成されたデータである。
また、本発明の第２の側面の再生方法、またはプログラムは、コンテンツを再生する再生方法、またはコンテンツを再生する処理を、コンピュータに実行させるプログラムにおいて、コンテンツの内容に応じた特殊再生をするときに再生対象とする前記コンテンツの特定の内容の部分を表す、前記特殊再生の種類ごとの再生対象情報と、前記コンテンツを識別する識別情報とを対応付けた再生指示データにおいて、ユーザが指定したコンテンツの識別情報に対応付けられている、前記ユーザが指定した特殊再生の種類についての前記再生対象情報を取得し、その再生対象情報が表すコンテンツの特定の内容の部分を、前記ユーザが指定したコンテンツから抽出するステップを含み、前記再生指示データは、コンテンツの各カテゴリについて、複数の前記特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す前記再生対象情報と前記注目コンテンツを識別する前記識別情報とを対応付けることにより生成されたデータである。
以上のような第２の側面の再生装置、再生方法、またはプログラムにおいては、コンテンツの内容に応じた特殊再生をするときに再生対象とする前記コンテンツの特定の内容の部分を表す、前記特殊再生の種類ごとの再生対象情報と、前記コンテンツを識別する識別情報とを対応付けた再生指示データにおいて、ユーザが指定したコンテンツの識別情報に対応付けられている、前記ユーザが指定した特殊再生の種類についての前記再生対象情報が取得され、その再生対象情報が表すコンテンツの特定の内容の部分が、前記ユーザが指定したコンテンツから抽出される。また、再生指示データは、コンテンツの各カテゴリについて、複数の特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての再生ルールに基づき、注目コンテンツの特殊再生をするときに再生対象とする注目コンテンツの特定の内容の部分を、特殊再生の種類ごとに決定し、再生対象とする注目コンテンツの特定の内容の部分を表す再生対象情報と注目コンテンツを識別する識別情報とを対応付けることにより生成されたデータである。
本発明の第３の側面の情報処理装置は、コンテンツを処理する情報処理装置において、コンテンツのカテゴリを判定するカテゴリ判定手段と、コンテンツの各カテゴリについて、コンテンツの内容に応じた複数の特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す再生対象情報と前記注目コンテンツを識別する識別情報とを対応付けた再生指示データを生成する再生指示データ生成手段とを備える。
また、本発明の第３の側面の情報処理方法、またはプログラムは、コンテンツを処理する情報処理方法、またはコンテンツを処理する情報処理を、コンピュータに実行させるプログラムにおいて、コンテンツのカテゴリを判定し、コンテンツの各カテゴリについて、コンテンツの内容に応じた複数の特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す再生対象情報と前記注目コンテンツを識別する識別情報とを対応付けた再生指示データを生成するステップを含む。
以上のような第３の側面の再生装置、再生方法、またはプログラムにおいては、コンテンツのカテゴリが判定される。そして、コンテンツの各カテゴリについて、コンテンツの内容に応じた複数の特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分が、前記特殊再生の種類ごとに決定され、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す再生対象情報と前記注目コンテンツを識別する識別情報とを対応付けた再生指示データが生成される。
本発明の第１乃至第３の側面によれば、装置の利便性を向上させることが可能となる。
以下に本発明の実施の形態を説明する。
以下、図面を参照して、本発明の実施の形態について説明する。
図１は、本発明を適用した記録再生システムの一実施の形態の構成例を示している。
図１において、記録再生システムは、リモートコマンダ１、記録再生装置２、およびモニタ装置３から構成されている。
リモートコマンダ１には、ユーザによって操作される各種のボタンが設けられている。リモートコマンダ１は、ユーザがボタンを操作すると、その操作に応じた操作信号を、例えば、赤外線等によって、記録再生装置２に送信する。
ここで、図１において、リモートコマンダ１には、特別特殊再生の１つである要約再生を記録再生装置２に行わせるときに操作される要約ボタン１1と、特別特殊再生の他の１つであるハイライト再生を記録再生装置２に行わせるときに操作されるハイライトボタン１2とが設けられている。なお、図示していないが、リモートコマンダ１には、要約ボタン１1およびハイライトボタン１2の他、例えば、記録再生装置２の電源をオンまたはオフにするときに操作される電源ボタンや、記録再生装置２に通常の再生（一倍速再生）を行わせるときに操作される再生ボタン、記録再生装置２にコンテンツの記録（録画）を行わせるときに操作される記録ボタン等も設けられている。
記録再生装置２は、記録装置２０、再生装置３０、および生成装置４０から構成されている。なお、図１において、記録再生装置２を構成する記録装置２０、再生装置３０、および生成装置４０は、１つの筐体に収められている。但し、記録装置２０、再生装置３０、生成装置４０のそれぞれは、別の筐体に収め、独立の装置として構成することも可能である。記録装置２０、再生装置３０、生成装置４０のそれぞれが別の筐体に収められ、独立の装置として構成される場合には、記録装置２０、再生装置３０、生成装置４０は、ケーブルやネットワーク等を介して接続される。
記録装置２０は、記録部２１とコンテンツ保持部２２とで構成され、外部から入力される、例えば、テレビジョン放送番組としての動画や、ビデオカメラで撮影された動画などのコンテンツや、記録再生装置２が内蔵する図示せぬチューナで受信されたテレビジョン放送番組としての動画のコンテンツ等を記録（録画）する。
即ち、記録部２１には、記録（録画）の対象となるコンテンツが供給される。記録部２１は、コンテンツ保持部２２を制御することにより、記録部２１に供給されるコンテンツ（のデータ）を、コンテンツ保持部２２に記録する（記憶させる）。
コンテンツ保持部２２は、例えば、HDなどの磁気ディスクなどで構成される。なお、コンテンツ保持部２２は、その他、光ディスクや、光磁気ディスク、磁気テープ、相変化ディスク、半導体メモリ等の記録媒体（記憶媒体）で構成することができる。但し、コンテンツ保持部２２は、ランダムアクセス可能な記録媒体であることが望ましい。
再生装置３０は、コンテンツ保持部２２に記録されたコンテンツを再生し、モニタ装置３に供給する。
即ち、再生装置３０は、再生指示データ保持部３１、ユーザI/F(interface)３２、再生制御部３３、データ抽出部３４、およびデコード部３５から構成されている。
再生指示データ保持部３１は、後述する再生指示データを記憶する。
ユーザI/F３２は、リモートコマンダ１から送信されてくる操作信号を受信し、再生制御部３３に供給する。
再生制御部３３は、ユーザI/F３２から供給される操作信号に応じ、コンテンツ保持部２２に記録されたコンテンツの再生を制御する。即ち、再生制御部３３は、再生指示データ保持部３１に記憶された再生指示データを必要に応じて参照しながら、データ抽出部３４およびデコード部３５を制御することにより、コンテンツ保持部２２に記録されたコンテンツを再生させる。
データ抽出部３４は、再生制御部３３の制御にしたがい、コンテンツ保持部２２に記憶されたコンテンツから、再生対象となっている部分を抽出し（読み出し）、デコード部３５に供給する。
デコード部３５は、再生制御部３３の制御にしたがい、データ抽出部３４から供給されるコンテンツがエンコードされている場合には、そのデコードを行い、その結果得られるコンテンツとしての、例えば、画像と音声を、モニタ装置３に供給する。
生成装置４０は、コンテンツ保持部２２に記録されたコンテンツについて、再生指示データを生成する。
即ち、生成装置４０は、読み出し部４１、デコード部４２、判定ルール保持部４３、カテゴリ判定部４４、再生ルール保持部４５、再生指示データ生成部４６、およびルール取得部４７から構成されている。
読み出し部４１は、コンテンツ保持部２２に記録されたコンテンツのうちの、再生指示データを生成しようとするコンテンツを、注目する注目コンテンツとして読み出し、デコード部４２、カテゴリ判定部４４、および再生指示データ生成部４６に供給する。
デコード部４２は、読み出し部４１から供給される注目コンテンツがエンコードされている場合には、そのデコードを行い、そのデコードの結果得られる、例えば、画像と音声などを、カテゴリ判定部４４と再生指示データ生成部４６に供給する。
ここで、デコード部４２と、上述したデコード部３５とは、１つのデコード部で兼用することができる。
判定ルール保持部４３は、カテゴリ判定部４４においてコンテンツのカテゴリを判定するときに必要に応じて参照される知識としての判定ルールを記憶する。
カテゴリ判定部４４は、デコード部４２から供給される注目コンテンツの画像と音声などを用い、必要に応じて、判定ルール保持部４３に記憶された判定ルールを参照して、注目コンテンツのカテゴリ、即ち、例えば、注目コンテンツがテレビジョン放送番組などの動画である場合には、「ニュース」、「映画」、「野球」、「ゴルフ」、「サッカー」、「バラエティー」などといったカテゴリを判定し、その判定結果を、再生指示データ生成部４６に出力（供給）する。
ここで、カテゴリ判定部４４は、例えば、注目コンテンツの画像に含まれる文字を認識（文字認識）し、あるいは、注目コンテンツの音声を認識（音声認識）し、その認識結果に基づいて、注目コンテンツのカテゴリを判定する。即ち、カテゴリ判定部４４は、例えば、注目コンテンツの画像に含まれる文字や物体を認識（文字認識、画像認識）し、その認識結果として、プロ野球チームのロゴマークが得られた場合には、注目コンテンツのカテゴリを、「野球」と判定する。
なお、カテゴリ判定部４４において注目コンテンツのカテゴリを判定するにあたっては、読み出し部４１から供給される注目コンテンツに、例えば、タイトルのデータなどのメタデータや、クローズドキャプション（字幕）のテキストデータなどが含まれる場合には、そのメタデータやクローズドキャプションのテキストデータをも用いることができる。さらに、注目コンテンツが、テレビジョン放送番組である場合には、カテゴリ判定部４４では、そのテレビジョン放送番組に関する情報を含むEPG(Electronic Program Guide)情報をも用いて、注目コンテンツとしてのテレビジョン放送番組のカテゴリを判定することができる。
また、カテゴリ判定部４４において、注目コンテンツのカテゴリの判定結果としては、最も細かいカテゴリの判定結果を出力することもできるし、いわば階層的な判定結果を出力することもできる。即ち、例えば、野球を中継するテレビジョン放送番組である野球番組の最も細かいカテゴリは、「野球」であるが、野球番組は、「スポーツ」という上位のカテゴリに属する番組でもある。そこで、野球番組のカテゴリの判定結果としては、「野球」といった最も細かいカテゴリの判定結果を出力することもできるし、「スポーツ」に属する「野球」といった階層的な判定結果を出力することもできる。
再生ルール保持部４５は、再生指示データ生成部４６が注目コンテンツについての再生指示データを生成するときに用いる再生ルールを記憶する。
ここで、再生ルールは、コンテンツの各カテゴリについて、特別特殊再生の種類ごとに規定されている。即ち、例えば、いま、コンテンツのカテゴリとして、「野球」と「ゴルフ」とがあり、特別特殊再生として、要約再生とハイライト再生とがあるとすると、再生ルールは、カテゴリ「野球」について、要約再生とハイライト再生のそれぞれについて規定されているとともに、カテゴリ「ゴルフ」についても、要約再生とハイライト再生のそれぞれについて規定されている。
また、再生ルールは、コンテンツの特別特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための、いわば知識である。
具体的には、例えば、野球放送においては、経験的に、各回を区切りとして重要な場面が現れることが多い。そして、重要な場面は、ハイライトシーンということができる。そこで、カテゴリが「野球」で、特別特殊再生の種類が「ハイライト再生」の再生ルールとしては、例えば、各回の区切りの直前または直後のシーンを再生対象とする旨が規定されている。
また、例えば、ニュース番組では、経験的に、番組の最初にすべてのニュースの概要を紹介する場面がある場合が多く、さらに、各ニュースの最初に、そのニュースの要約が語られえる場合が多い。そして、これらの場面によれば、ニュース番組の全体の概要を把握することができる。そこで、カテゴリが「ニュース」で、特別特殊再生の種類が「要約再生」の再生ルールとしては、例えば、ニュース番組の最初の部分と、各ニュースの最初の部分とを、再生対象とする旨が規定されている。
さらに、例えば、ユーザがビデオカメラで撮影したプライベートな動画のコンテンツについては、そのコンテンツが人物中心のコンテンツであれば、即ち、ほとんどのシーンに人が映っていれば、経験的に、特定の人物がアップになっているシーンを主に集めると、コンテンツの内容が要約されることが多い。そこで、カテゴリが、ユーザが撮影したプライベートなコンテンツであることを表す「プライベート」であり、特別特殊再生の種類が「要約再生」の再生ルールとしては、例えば、特定の人物がアップになっているシーンを再生対象とする旨が規定されている。
再生指示データ生成部４６は、再生ルール保持部４５に記憶された再生ルールのうちの、カテゴリ判定部４４から供給される注目コンテンツのカテゴリについての再生ルールに基づき、注目コンテンツの特別特殊再生をするときに再生対象とする注目コンテンツの特定の内容の部分を、特別特殊再生の種類ごとに決定し、再生対象とする注目コンテンツの特定の内容の部分を表す再生対象情報と注目コンテンツを識別する識別情報とを対応付けた再生指示データを生成する。
なお、再生指示データ生成部４６は、上述のように、注目コンテンツの特別特殊再生をするときに再生対象とする注目コンテンツの特定の内容の部分を、特別特殊再生の種類ごとに決定するが、この決定は、デコード部４２から供給される注目コンテンツの画像と音声、さらには、読み出し部４１から供給される注目コンテンツに含まれるメタデータや、クローズドキャプションのテキストデータなどを用いて音声認識や画像認識、文字認識などを行い、その認識結果に基づいて行われる。
また、再生指示データ生成部４６は、注目コンテンツについて生成した再生指示データを、再生指示データ保持部３１に供給して記憶させる。
ルール取得部４７は、新たな判定ルールや新たな再生ルールを取得し、その新たな判定ルールや新たな再生ルールを、判定ルール保持部４３や再生ルール保持部４５に追加して記憶させ、あるいは、その新たな判定ルールや新たな再生ルールによって、判定ルール保持部４３や再生ルール保持部４５の記憶内容を更新する。
なお、新たな判定ルールや新たな再生ルールは、例えば、インタネット上のサイトから提供することができる。この場合、ルール取得部４７は、新たな判定ルールや新たな再生ルールをサイトからダウンロードすることにより取得する。また、新たな判定ルールや新たな再生ルールは、例えば、データ放送等によって放送することができ、この場合、ルール取得部４７は、放送されてくる新たな判定ルールや新たな再生ルールを受信することにより取得する。さらに、ルール取得部４７は、新たな判定ルール等が記録媒体に記録されて提供される場合には、その記録媒体から新たな判定ルール等を再生することにより取得する。
次に、図２は、再生指示データ保持部３１に記憶されている再生指示データを模式的に示している。
再生指示データでは、上述したように、コンテンツを識別する識別情報と、そのコンテンツの特別特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を表す再生対象情報とが対応付けられている。
ここで、コンテンツを識別する識別情報としては、例えば、コンテンツが、コンテンツ保持部２２にファイルとして記録（記憶）されている場合には、そのファイルのファイル名を採用することができる。その他、コンテンツを識別する識別情報としては、コンテンツ保持部２２に記録されているコンテンツを識別することができるユニークな情報、即ち、例えば、コンテンツがテレビジョン放送番組である場合には、その放送開始日時を放送チャンネルなどを採用することができる。
また、再生対象情報としては、コンテンツの部分を表すことができる任意の情報を採用することができる。即ち、コンテンツが、例えば、動画である場合には、コンテンツの部分の最小単位は、フレーム（またはフィールド）であり、再生対象情報としては、コンテンツとしての動画を構成するフレームの、コンテンツの先頭のフレームからのフレーム数（何フレーム目であるか）や、タイムコードなどを採用することができる。
再生指示データにおいて、再生対象情報は、特別特殊再生の種類ごとに存在する。即ち、図１の記録再生システムでは、特別特殊再生の種類として、要約再生とハイライト再生とがあるが、要約再生では、ユーザがコンテンツ全体の内容の概要を把握することができるように、コンテンツ全体の概要の把握に有用なシーンだけを再生し、ハイライト再生ではコンテンツのハイライトシーンだけを再生するから、あるコンテンツを対象に、要約再生をする場合と、ハイライト再生をする場合とでは、再生対象とすべきコンテンツの部分が異なる。このため、再生対象情報は、特別特殊再生の種類ごとに存在する。
図２では、再生対象情報として、コンテンツの先頭のフレームからのフレーム数（以下、適宜、フレーム番号という）が採用されている。そして、図２の、例えば、上から１行目の再生指示データにおいては、識別情報c1に、その識別情報c1によって識別されるコンテンツの要約再生をするときの再生対象を表す再生対象情報であるフレーム番号として、1,2,3,10,11,12,・・・が対応付けられ、ハイライト再生をするときの再生対象を表す再生対象情報であるフレーム番号として、4,5,6,7,31,32,33,・・・が対応付けられている。
従って、識別情報c1によって識別されるコンテンツの要約再生では、そのコンテンツの先頭から、1,2,3,10,11,12,・・・フレーム目が再生される。また、識別情報c1によって識別されるコンテンツのハイライト再生では、そのコンテンツの先頭から、4,5,6,31,32,33,・・・フレーム目が再生される。
なお、特別特殊再生をするときの再生対象となるコンテンツの部分が、連続したフレームからなる、いわゆるシーンである場合には、そのシーンの最初と最後のフレームのフレーム番号を、再生対象情報とすることができる。さらに、特別特殊再生をするときの再生対象となるコンテンツの部分は、１シーンだけであってもよいし、複数シーンであってもよい。
また、再生指示データにおいて、特別特殊再生の種類ごとの再生対象情報が表すコンテンツの部分は、その特別特殊再生の種類に適した特定の内容になっている。
即ち、例えば、コンテンツが野球番組である場合には、各回のスコアボードのシーンによって、試合における得点の状況、あるいは経過の概要を把握することができる。そこで、コンテンツが野球番組である場合の、要約再生の再生対象は、例えば、スコアボードのシーンとすることができ、そのシーンを構成するフレームのフレーム番号が、再生対象情報とされる。
また、コンテンツが野球番組である場合の、ハイライト再生の再生対象は、例えば、ホームランやヒットのシーンとすることができ、そのシーンを構成するフレームのフレーム番号が、再生対象情報とされる。
次に、図３のフローチャートを参照して、図１の再生装置３０で行われる、特別特殊再生の再生処理について説明する。
なお、以下、適宜、特別特殊再生の種類を、再生タイプという。ここでは、再生タイプとして、上述した要約再生とハイライト再生とがある。
また、特別特殊再生の再生対象となるコンテンツは、コンテンツ保持部２２に、既に記憶されていることとする。さらに、コンテンツ保持部２２に記憶されているコンテンツについての再生指示データも、再生指示データ保持部３１に、既に記憶されていることとする。
ユーザが、リモートコマンダ１を操作することにより、特別特殊再生をする再生対象のコンテンツを指定するとともに、その特別特殊再生の再生タイプを指定すると、リモートコマンダ１は、特別特殊再生をする再生対象のコンテンツを表す再生コンテンツ指示データと、再生タイプを表す再生タイプ指示データを送信する。リモートコマンダ１が送信する再生コンテンツ指示データと再生タイプ指示データは、ユーザI/F３２において受信され、再生制御部３３に供給される。
再生制御部３３は、ユーザI/F３２からの再生コンテンツ指示データが表すコンテンツ（以下、適宜、再生対象コンテンツという）の読み出しを開始するように、データ抽出部３４を制御する。これにより、データ抽出部３４は、コンテンツ保持部２２からの再生対象コンテンツの読み出しを開始する。
そして、再生制御部３３は、ステップＳ１において、再生指示データ保持部３１に記憶されている再生指示データにおいて、再生対象コンテンツの識別情報に対応付けられている再生対象情報のうちの、ユーザI/F３２からの再生タイプ指示データが表す再生タイプの再生対象情報を読み出すことにより取得し、データ抽出部３４とデコード部３５に供給して、ステップＳ２に進む。
ステップＳ２では、データ抽出部３４は、コンテンツ保持部２２から読み出した再生対象コンテンツ（のデータ）から、再生制御部３３からの再生対象情報が表す部分をデコードするのに必要なデータを抽出し、デコード部３５に供給する処理を開始して、ステップＳ３に進む。
ステップＳ３では、デコード部３５は、データ抽出部３４から供給されるデータをデコードし、その結果得られる画像や音声のうちの、再生制御部３３からの再生対象情報が表す画像や音声をモニタ装置３に出力する処理を開始する。これにより、モニタ装置３では、再生対象コンテンツのうちの、再生タイプ指示データが表す再生タイプの再生対象情報が表す部分の画像や音声だけの再生、即ち、再生タイプ指示データが表す再生タイプの特別特殊再生が行われる。
なお、再生対象コンテンツのうちの、再生タイプ指示データが表す再生タイプの再生対象情報が表す部分が、例えば、複数のシーン（チャプタ）で構成される場合には、デコード部３５において、その複数のシーンそれぞれのうちの、例えば、先頭のフレーム（の画像）を、いわゆるフィルムロール状に並べた画像であるフィルムロール画像を生成し、モニタ装置３に出力して表示させることができる。
この場合、ユーザは、フィルムロール画像を見ることによって、再生タイプ指示データが表す再生タイプの特別特殊再生によって、どのような内容のシーンが再生されるかを把握することができる。
さらに、上述のように、フィルムロール画像を生成する場合には、ユーザが、特別特殊再生を行うことを確定するように、リモートコマンダ１を操作したときに、再生タイプ指示データが表す再生タイプの特別特殊再生を開始するようにすることができる。
この場合、ユーザは、再生タイプ指示データが表す再生タイプの特別特殊再生によって、どのような内容のシーンが再生されるかを把握した上で、その特別特殊再生を行うかどうかを決めることができる。
次に、コンテンツについての再生指示データが、例えば、そのコンテンツを作成する編集時等に、そのコンテンツの作成者等によってあらかじめ作成されている場合には、図１の記録再生システムにおいて、その再生指示データを取得して、再生指示データ保持部３１に記憶させておくことができる。
ここで、あらかじめ作成された再生指示データが、例えば、コンテンツとともに提供される（例えば、コンテンツと同梱されている、あるいは、コンテンツとともに放送されてくる）場合には、そのコンテンツを取得する（コンテンツ保持部２２に記録する）ときに、同時に、そのコンテンツについての再生指示データを取得することができる。また、あらかじめ作成された再生指示データが、例えば、サイトから提供される場合には、そのサイトからダウンロードすることにより取得することができる。
ところで、コンテンツについての再生指示データが、そのコンテンツの作成者等によって作成されないことがあり得る。そこで、図１の記録再生システムでは、コンテンツについての再生指示データを生成することができるようになっている。
即ち、図１の記録再生システムにおいては、生成装置４０が、コンテンツ保持部２２に記録されたコンテンツについての再生指示データを生成する生成処理を行うことができるようになっている。
そこで、図４のフローチャートを参照して、生成処理について説明する。
生成処理では、まず最初に、ステップＳ１１において、読み出し部４１が、コンテンツ保持部２２に記録されたコンテンツの中で、再生指示データ保持部３１に再生指示データが記憶されていないコンテンツのうちの１つを、再生指示データを生成する対象の注目コンテンツとして選択し、その注目コンテンツを、コンテンツ保持部２２から読み出して、デコード部４２、カテゴリ判定部４４、および再生指示データ生成部４６に供給する。
読み出し部４１から注目コンテンツの供給を受けたデコード部４２は、その注目コンテンツをデコードし、カテゴリ判定部４４と再生指示データ生成部４６に供給する。
そして、カテゴリ判定部４４は、ステップＳ１２において、デコード部４２から供給される注目コンテンツのデコード結果や、読み出し部４１から供給される注目コンテンツに含まれるメタデータなどを用い、必要に応じて、判定ルール保持部４３に記憶された判定ルールを参照して、注目コンテンツのカテゴリを判定するカテゴリ判定処理を行う。さらに、カテゴリ判定部４４は、カテゴリ判定処理の結果得られる注目コンテンツのカテゴリ（の判定結果）を、再生指示データ生成部４６に供給して、ステップＳ１２からステップＳ１３に進む。
ステップＳ１３では、再生指示データ生成部４６は、再生ルール保持部４５に記憶された再生ルールのうちの、カテゴリ判定部４４から供給される注目コンテンツのカテゴリについての再生ルールに基づき、デコード部４２から供給される注目コンテンツの画像と音声、さらには、読み出し部４１から供給される注目コンテンツに含まれるメタデータ等を必要に応じて用いて、注目コンテンツの特別特殊再生をするときに再生対象とする注目コンテンツの特定の内容の部分を、再生タイプごとに決定し、再生対象とする注目コンテンツの特定の内容の部分を表す再生対象情報と注目コンテンツを識別する識別情報とを対応付けた再生指示データを生成する再生指示データ生成処理を行う。
そして、ステップＳ１３からステップＳ１４に進み、再生指示データ生成部４６は、ステップＳ１３の再生指示データ生成処理の結果得られた、注目コンテンツについての再生指示データを、再生指示データ保持部３１に供給して登録し（記憶させ）、生成処理を終了する。
なお、図４の生成処理は、必要に応じて繰り返し行われる。また、図４の生成処理は、記録装置２０において、注目コンテンツがコンテンツ保持部２２に記録された後の任意のタイミングで行うこともできるし、注目コンテンツがコンテンツ保持部２２に記録されているときに、その記録と並列して行うこともできる。さらに、図４の生成処理は、図３の再生処理が行われるときに、その再生処理の再生対象となっているコンテンツ（再生コンテンツ指示データが表すコンテンツ）を注目コンテンツとして、その特別特殊再生と並列して行うこともできる。
また、コンテンツ保持部２２に記録されたコンテンツのデータとして、例えば、高ビットレートのデータと、低ビットレートのデータとが存在する場合、即ち、コンテンツ本来のデータとしての高ビットレートのデータ（以下、適宜、本線データという）と、いわゆるプロキシ編集等に利用される、本線データのデータ量を少なくした低ビットレートのデータ（以下、適宜、プロキシデータという）とが存在する場合、図４の生成処理は、コンテンツのプロキシデータを用いて行うことができる。図４の生成処理を、コンテンツの本線データではなく、プロキシデータを用いて行うことにより、生成処理に要する負担の低減化を図ることができる。
次に、図５のフローチャートを参照して、図４のステップＳ１２でカテゴリ判定部４４が行うカテゴリ判定処理の詳細について説明する。
なお、以下においては、注目コンテンツ（再生指示データを生成する対象のコンテンツ）は、例えば、動画であるとする。
カテゴリ判定処理では、カテゴリ判定部４４は、ステップＳ２１において、注目コンテンツのカテゴリが、カテゴリ#1,#2,・・・,#Nである可能性をそれぞれ表すカテゴリパラメータP1,P2,・・・,PNに、初期値としての0をセットして、ステップＳ２２に進む。
ここで、カテゴリパラメータP1は、注目コンテンツのカテゴリが、例えば、ドラマである可能性を表し、カテゴリパラメータP2は、注目コンテンツのカテゴリが、例えば、野球である可能性を表す。さらに、カテゴリパラメータP3は、注目コンテンツのカテゴリが、例えば、ニュースである可能性を表し、以下、同様に、カテゴリパラメータP4乃至PNそれぞれは、注目コンテンツのカテゴリが、あるカテゴリである可能性を表す。
ステップＳ２２では、カテゴリ判定部４４は、注目コンテンツの、あるフレームに注目し、注目フレームとして選択する。即ち、ステップＳ２２では、例えば、注目コンテンツを構成する時系列のフレームのうちの、まだ、注目フレームとされていない時間的に最も前（過去）のフレームが、注目フレームとして選択される。
そして、ステップＳ２２からステップＳ２３に進み、カテゴリ判定部４４は、読み出し部４１から供給された注目コンテンツや、デコード部４２から供給された注目コンテンツのデコード結果から、注目フレームの画像データや、注目フレームを含むその前後の複数のフレームに付随する音声データ、注目フレームに付随するクローズドキャプションのデータやメタデータ等を、注目フレームのデータとして取得して、ステップＳ２４に進む。
ステップＳ２４では、カテゴリ判定部４４は、判定ルール保持部４３に記憶されている、コンテンツのカテゴリを判定するための判定ルールを特定するための変数mに、初期値としての、例えば1をセットとして、ステップＳ２５に進み、判定ルール保持部４３から、m番目の判定ルールを、注目判定ルールとして選択して、ステップＳ２６に進む。
ステップＳ２６では、カテゴリ判定部４４は、ステップＳ２３で得た注目フレームのデータを用い、ステップＳ２５で得た注目判定ルールに基づき、カテゴリパラメータPn(n=1,2,・・・,N)を更新する。
ここで、図６は、図１の判定ルール保持部４３に記憶されている判定ルールの例を示している。
例えば、注目判定ルールが、図６の１番目の判定ルール「・Ｔｅｘｔに野球中継とあれば、野球の可能性を０．５増やす」である場合において、注目フレームのデータのうちのテキストデータに、「野球中継」の文字のデータが存在すれば、カテゴリ判定部４４は、ステップＳ２６において、注目判定ルールに基づき、カテゴリが野球である可能性を表すカテゴリパラメータP2を、現在の値から0.5だけインクリメントした値に更新する。
また、例えば、注目判定ルールが、図６の２番目の判定ルール「・音声をデコードして、野球中継とあれば、野球の可能性を０．３増やす」である場合において、注目フレームのデータのうちの音声データに、「野球中継」の音声に対応するデータが存在すれば、カテゴリ判定部４４は、ステップＳ２６において、注目判定ルールに基づき、カテゴリが野球である可能性を表すカテゴリパラメータP2を、現在の値から0.3だけインクリメントした値に更新する。
さらに、例えば、注目判定ルールが、図６の３番目の判定ルール「・画像を解析して、野球場と判定できれば、野球の可能性を０．２増やす」である場合において、注目フレームのデータのうちの画像データに、野球場の画像に対応するデータが存在すれば、カテゴリ判定部４４は、ステップＳ２６において、注目判定ルールに基づき、カテゴリが野球である可能性を表すカテゴリパラメータP2を、現在の値から0.2だけインクリメントした値に更新する。
また、例えば、注目判定ルールが、図６の４番目の判定ルール「・画像を解析して、野球のユニフォームとバット、ボールが出てくれば、野球の可能性を０．１増やす」である場合において、注目フレームのデータのうちの画像データに、野球のユニフォームの画像、バットの画像、およびボールの画像に対応するデータが存在すれば、カテゴリ判定部４４は、ステップＳ２６において、注目判定ルールに基づき、カテゴリが野球である可能性を表すカテゴリパラメータP2を、現在の値から0.1だけインクリメントした値に更新する。
さらに、例えば、注目判定ルールが、図６の５番目の判定ルール「・Ｔｅｘｔを解析して、タイトルに脚本とあれば、ドラマの可能性を０．２増やす」である場合において、注目フレームのデータのうちのテキストデータに、「脚本」の文字のデータが存在すれば、カテゴリ判定部４４は、ステップＳ２６において、注目判定ルールに基づき、カテゴリがドラマである可能性を表すカテゴリパラメータP1を、現在の値から0.2だけインクリメントした値に更新する。
また、例えば、注目判定ルールが、図６の６番目の判定ルール「・音声を解析して、ドラマとあれば、ドラマの可能性を０．１増やす」である場合において、注目フレームのデータのうちの音声データに、「ドラマ」の音声に対応するデータが存在すれば、カテゴリ判定部４４は、ステップＳ２６において、注目判定ルールに基づき、カテゴリがドラマである可能性を表すカテゴリパラメータP1を、現在の値から0.1だけインクリメントした値に更新する。
さらに、例えば、注目判定ルールが、図６の７番目の判定ルール「・画像を解析して、ドラマに良く出る俳優の顔が認識できれば、ドラマの可能性を０．１増やす。」である場合において、注目フレームのデータのうちの画像データに、あらかじめ登録されている顔画像としての俳優の顔画像に対応するデータが存在すれば、カテゴリ判定部４４は、ステップＳ２６において、注目判定ルールに基づき、カテゴリがドラマである可能性を表すカテゴリパラメータP1を、現在の値から0.1だけインクリメントした値に更新する。
図５に戻り、カテゴリ判定部４４は、ステップＳ２６において、注目フレームのデータを用い、注目判定ルールに基づいて、上述したように、カテゴリパラメータPnを更新した後は、ステップＳ２７に進み、カテゴリパラメータP1乃至PNの中で、カテゴリの判定用にあらかじめ設定されている閾値であるカテゴリ判定用閾値を越えたカテゴリパラメータがあるかどうかを判定する。
ステップＳ２７において、カテゴリパラメータP1乃至PNの中で、カテゴリ判定用閾値を越えたカテゴリパラメータがあると判定された場合、即ち、カテゴリパラメータP1乃至PNの中のカテゴリパラメータPnが、カテゴリ判定用閾値を越えている場合、ステップＳ２８に進み、カテゴリ判定部４４は、注目コンテンツのカテゴリが、カテゴリパラメータPnに対応するカテゴリ#nであるという判定結果を、再生指示データ生成部４６に出力して、カテゴリ判定処理を終了する。
また、ステップＳ２７において、カテゴリパラメータP1乃至PNの中で、カテゴリ判定用閾値を越えたカテゴリパラメータがないと判定された場合、ステップＳ２９に進み、カテゴリ判定部４４は、変数mが、判定ルール保持部４３に記憶されている判定ルールの総数Mに等しいかどうかを判定する。
ステップＳ２９において、変数mが、判定ルール保持部４３に記憶されている判定ルールの総数Mに等しくないと判定された場合、ステップＳ３０に進み、カテゴリ判定部４４は、変数mを1だけインクリメントして、ステップＳ２５に戻り、以下、同様の処理を繰り返す。
また、ステップＳ２９において、変数mが、判定ルール保持部４３に記憶されている判定ルールの総数Mに等しと判定された場合、ステップＳ３１に進み、カテゴリ判定部４４は、注目コンテンツのすべてのフレームを注目フレームとして、カテゴリパラメータP1乃至PNの更新を行ったかどうかを判定する。
ステップＳ３１において、注目コンテンツのすべてのフレームを注目フレームとして、カテゴリパラメータP1乃至PNの更新を、まだ行っていないと判定された場合、即ち、注目コンテンツのフレームの中に、注目フレームとしていないフレームが存在する場合、ステップＳ２２に戻って、新たな注目フレームが選択され、以下、同様の処理が繰り返される。
また、ステップＳ３１において、注目コンテンツのすべてのフレームを注目フレームとして、カテゴリパラメータP1乃至PNの更新を行ったと判定された場合、即ち、注目コンテンツのすべてのフレームを、注目フレームとした場合、ステップＳ３２に進み、カテゴリ判定部４４は、注目コンテンツのカテゴリが、例えば、カテゴリパラメータP1乃至PNのうちの、最大値のカテゴリパラメータPnに対応するカテゴリ#nであるという判定結果を、再生指示データ生成部４６に出力して、カテゴリ判定処理を終了する。
次に、図７のフローチャートを参照して、図４のステップＳ１３で再生指示データ生成部４６が行う再生指示データ生成処理の詳細について説明する。
再生指示データ生成処理では、ステップＳ４１において、再生指示データ生成部４６が、複数の再生タイプのうちの、まだ、注目再生タイプとして選択していない再生タイプの１つを、注目再生タイプとして選択する。
ここで、本実施の形態では、再生タイプとして、要約再生とハイライト再生とがあり、従って、ステップＳ４１では、要約再生またはハイライト再生のうちのいずれか一方が、注目再生タイプとして選択される。
ステップＳ４１の処理後は、ステップＳ４２に進み、再生指示データ生成部４６は、注目再生タイプと、カテゴリ判定部４４がカテゴリ判定処理（図５）を行うことにより出力する注目コンテンツのカテゴリとに基づき、再生ルール保持部４５に記憶されている再生ルールの中から、注目再生タイプと注目コンテンツのカテゴリとに対応する再生ルールのセットを、注目ルールセットとして選択する。
ここで、図８は、再生ルール保持部４５に記憶された再生ルールを模式的に示している。
上述したように、再生ルールは、コンテンツの各カテゴリについて、再生タイプ（特別特殊再生の種類）ごとに規定されている。
本実施の形態では、再生タイプとして、要約再生とハイライト再生との２種類があるので、再生ルールも、コンテンツのカテゴリごとに、要約再生とハイライト再生のそれぞれについて規定されている。図８では、再生ルールが、野球やサッカーなどのカテゴリごとに、要約再生とハイライト再生のそれぞれについて規定されている。
例えば、いま、注目コンテンツのカテゴリが野球であり、注目再生タイプが要約再生であるとすると、再生指示データ生成部４６は、図８に斜線を付して示すように、カテゴリが「野球」で、再生タイプが「要約再生」の再生ルールのセット（集合）を、注目ルールセットとして選択する。
図７に戻り、再生指示データ生成部４６は、ステップＳ４２において、注目ルールセットを選択すると、ステップＳ４３に進み、注目ルールセットに基づき、注目コンテンツを構成する各フレームについて、後述する優先ポイントαを求める優先ポイント算出処理を行って、ステップＳ４４に進む。ここで、ステップＳ４３で行われる優先ポイント算出処理の詳細については、後述する。
ステップＳ４４では、再生指示データ生成部４６は、ステップＳ４３での優先ポイント算出処理によって求めた優先ポイントαに基づき、注目コンテンツの、注目再生タイプが表す特別特殊再生をするときに再生対象とする注目コンテンツの特定の内容の部分を表す再生対象情報を求める再生対象情報算出処理を行って、ステップＳ４５に進む。ここで、ステップＳ４４で行われる再生対象情報算出処理の詳細については、後述する。
ステップＳ４５では、再生指示データ生成部４６は、すべての再生タイプ、即ち、本実施の形態では、要約再生とハイライト再生のそれぞれについて、再生対象情報を求めたかどうかを判定する。
ステップＳ４５において、すべての再生タイプのそれぞれについて、再生対象情報が、まだ求められていないと判定された場合、ステップＳ４１に戻って、再生対象情報が求められていない再生タイプの１つが、新たに、注目再生タイプとして選択され、以下、同様の処理が繰り返される。
また、ステップＳ４５において、すべての再生タイプのそれぞれについて、再生対象情報が求められたと判定された場合、即ち、本実施の形態では、要約再生とハイライト再生が注目再生タイプとされ、その要約再生とハイライト再生のそれぞれについて、再生対象情報が求められた場合、ステップＳ４６に進み、再生指示データ生成部４６は、すべての再生タイプのそれぞれについて求められた再生対象情報と、注目コンテンツの識別情報とを対応付けて、注目コンテンツについての再生指示データとし、再生指示データ保持部３１に供給して登録して（記憶させて）、再生指示データ生成処理を終了する。
次に、図９のフローチャートを参照して、再生指示データ生成部４６が図７のステップＳ４３で行う優先ポイント算出処理について説明する。
優先ポイント算出処理では、再生指示データ生成部４６は、ステップＳ５１において、注目コンテンツを構成するフレームが、注目再生タイプが表す特別特殊再生を行うときに再生対象とすべき内容になっていることの程度を表す優先ポイントαに、初期値としての0をセットして、ステップＳ５２に進む。
ステップＳ５２では、再生指示データ生成部４６は、注目コンテンツの、あるフレームに注目し、注目フレームとして選択する。即ち、ステップＳ５２では、例えば、注目コンテンツを構成する時系列のフレームのうちの、まだ、注目フレームとされていない時間的に最も前（過去）のフレームが、注目フレームとして選択される。
そして、ステップＳ５２からステップＳ５３に進み、再生指示データ生成部４６は、読み出し部４１から供給された注目コンテンツや、デコード部４２から供給された注目コンテンツのデコード結果から、注目フレームの画像データや、注目フレームを含むその前後の複数のフレームに付随する音声データ、注目フレームに付随するクローズドキャプションのデータやメタデータ等を、注目フレームのデータとして取得し、その注目フレームのデータに基づき、注目フレームの内容の特徴量を表す特徴パラメータα1,α2,・・・,αKを求める。
ここで、ステップＳ５３で求めるべき特徴パラメータα1,α2,・・・,αKは、コンテンツのカテゴリごとにあらかじめ決まっており、再生指示データ生成部４６は、ステップＳ５３において、注目コンテンツのカテゴリに対してあらかじめ決められている特徴パラメータα1,α2,・・・,αKを求める。
即ち、例えば、注目コンテンツのカテゴリが、野球である場合には、特徴パラメータα1は得点を、特徴パラメータα2は一塁走者の有無を、特徴パラメータα3は二塁走者の有無を、特徴パラメータα4は三塁走者の有無を、特徴パラメータα5は歓声レベルを、特徴パラメータα6はアウト数を、それぞれ表すといったように、特徴パラメータα1,α2,・・・,αKのそれぞれが表すべき特徴があらかじめ決められている。
ステップＳ５３では、再生指示データ生成部４６は、注目フレームのデータに基づき、その注目フレームの特徴パラメータα1,α2,・・・,αKを求める。
その後、ステップＳ５３からステップＳ５４に進み、再生指示データ生成部４６は、図７のステップＳ４２で選択された注目ルールセットを構成する再生ルールを特定するための変数dに、初期値としての、例えば1をセットとして、ステップＳ５５に進み、注目ルールセットから、d番目の再生ルールを、注目再生ルールとして選択して、ステップＳ５６に進む。
ステップＳ５６では、再生指示データ生成部４６は、ステップＳ５３で得た注目フレームのデータや、注目フレームの特徴パラメータα1,α2,・・・,αKを用い、ステップＳ５５で得た注目再生ルールに基づき、注目フレームの優先ポイントαを更新する。
ここで、図１０は、カテゴリが「野球」で、再生タイプが「要約再生」のルールセットの例を示している。
例えば、注目再生ルールが、図１０のルールセットのうちの１番目の再生ルール「・注目フレームの得点と直前フレームの得点に違いがあれば、注目フレームの優先ポイントを１０００増やす」である場合において、注目フレームの得点を表す特徴パラメータα1と、その注目フレームの１フレーム前のフレームである直前フレームの得点を表す特徴パラメータα1との間に違いがあれば、再生指示データ生成部４６は、ステップＳ５６において、注目再生ルールに基づき、注目フレームの優先ポイントαを、現在の値から1000だけインクリメントした値に更新する。
また、例えば、注目再生ルールが、図１０のルールセットのうちの２番目の再生ルール「・注目フレームの走者と直前フレームの走者に差があれば、注目フレームの優先ポイントを１００増やす。」である場合において、注目フレームの走者の有無を表す特徴パラメータα2,α3,α4と、直前フレームの走者の有無を表す特徴パラメータα2,α3,α4との間に違いがあれば、再生指示データ生成部４６は、ステップＳ５６において、注目再生ルールに基づき、注目フレームの優先ポイントαを、現在の値から100だけインクリメントした値に更新する。
さらに、例えば、注目再生ルールが、図１０のルールセットのうちの３番目の再生ルール「・注目フレームの歓声レベルが直前フレームの歓声レベルより高ければ、その差を歓声レベルＭＡＸで割って、１０倍した整数だけ優先ポイントを増やす。」である場合において、注目フレームの歓声レベルを表す特徴パラメータα5が、直前フレームの歓声レベルを表す特徴パラメータα5よりも大であれば、再生指示データ生成部４６は、ステップＳ５６において、注目再生ルールに基づき、注目フレームの優先ポイントαを、現在の値から所定の値だけインクリメントした値に更新する。ここで、所定の値は、注目再生ルールに基づき、注目フレームの歓声レベルを表す特徴パラメータα5と、直前フレームの歓声レベルを表す特徴パラメータα5との差を、注目コンテンツを構成するフレームの歓声レベルを表す特徴パラメータα5の最大値MAXで除算し、さらに、その除算値を10倍した値とされる。
また、例えば、注目再生ルールが、図１０のルールセットのうちの４番目の再生ルール「・音声を解析して、バットでボールをジャストミートした高い音が検出できれば、優先ポイントを１増やす。」である場合において、注目フレームのデータのうちの音声データに、「バットでボールをジャストミートした高い音」に対応するデータが存在すれば、再生指示データ生成部４６は、ステップＳ５６において、注目再生ルールに基づき、注目再生ルールに基づき、注目フレームの優先ポイントαを、現在の値から1だけインクリメントした値に更新する。
さらに、例えば、注目再生ルールが、図１０のルールセットのうちの５番目の再生ルール「・注目フレームのアウト数が直前フレームのアウト数より大きければ優先ポイントを５増やす。」である場合において、注目フレームのアウト数を表す特徴パラメータα6が、直前フレームのアウト数を表す特徴パラメータα6よりも大であれば、再生指示データ生成部４６は、ステップＳ５６において、注目再生ルールに基づき、注目フレームの優先ポイントαを、現在の値から5だけインクリメントした値に更新する。
また、例えば、注目再生ルールが、図１０のルールセットのうちの６番目の再生ルール「・注目フレームのアウト数が直前フレームのアウト数より小さければ、優先ポイントを５０増やす。」である場合において、注目フレームのアウト数を表す特徴パラメータα6が、直前フレームのアウト数を表す特徴パラメータα6よりも小であれば、再生指示データ生成部４６は、ステップＳ５６において、注目再生ルールに基づき、注目フレームの優先ポイントαを、現在の値から50だけインクリメントした値に更新する。
図９に戻り、再生指示データ生成部４６は、ステップＳ５６において、上述したように、優先ポイントαnを更新した後は、ステップＳ５７に進み、変数dが、注目ルールセットを構成する再生ルールの総数Dに等しいかどうかを判定する。
ステップＳ５７において、変数dが、注目ルールセットを構成する再生ルールの総数Dに等しくないと判定された場合、ステップＳ５８に進み、再生指示データ生成部４６は、変数dを1だけインクリメントして、ステップＳ５５に戻り、以下、同様の処理を繰り返す。
また、ステップＳ５７において、変数dが、注目ルールセットを構成する再生ルールの総数Dに等しと判定された場合、ステップＳ５９に進み、再生指示データ生成部４６は、注目コンテンツのすべてのフレームを注目フレームとして、優先ポイントαを求めたかどうかを判定する。
ステップＳ５９において、注目コンテンツのすべてのフレームについて、まだ、優先ポイントαが求められていないと判定された場合、ステップＳ５２に戻って、新たな注目フレームが選択され、以下、同様の処理が繰り返される。
また、ステップＳ５９において、注目コンテンツのすべてのフレームを注目フレームとして、優先ポイントαが求められたと判定された場合、再生指示データ生成部４６は、優先ポイント算出処理を終了する。
次に、図１１のフローチャートを参照して、再生指示データ生成部４６が図７のステップＳ４４で行う再生対象情報算出処理について説明する。
再生対象情報算出処理では、ステップＳ７１において、再生指示データ生成部４６は、注目コンテンツの、注目再生タイプが表す特別特殊再生をする再生時間として設定された設定時間Tを取得する。
ここで、設定時間Tは、再生ルールの一部として、再生ルール保持部４５にあらかじめ記憶させておくことができる。この場合、再生指示データ生成部４６は、再生ルール保持部４５から設定時間Tを読み出すことにより取得する。
また、設定時間Tについては、その算出の仕方を記述したルールを、再生ルールの一部として、再生ルール保持部４５にあらかじめ記憶させておくことができる。この場合、設定時間Tの算出のルールとして、例えば、コンテンツ全体の再生時間の1/10であると規定されていれば、再生指示データ生成部４６は、注目コンテンツ全体の再生時間の1/10の時間を求めることにより、設定時間Tを取得する。
その他、設定時間Tとしては、ユーザがリモートコマンダ１を操作することにより、例えば、１分間や１０分間などの任意の時間を設定すること等が可能である。
ステップＳ７１の処理後は、ステップＳ７２に進み、再生指示データ生成部４６は、注目コンテンツを構成するフレームのうちの、注目再生タイプでの特別特殊再生をするときに再生対象とするフレーム（再生対象フレーム）として、まだ選択されていないフレーム（以下、適宜、未選択フレームという）の中で、優先ポイントが最大のフレームであるポイント最大フレームを検索して、ステップＳ７３に進む。
ステップＳ７３では、再生指示データ生成部４６は、直前のステップＳ７２で検索されたポイント最大フレームに基づき、注目コンテンツの未選択フレームの中から、再生対象フレームを選択する。
即ち、再生指示データ生成部４６は、例えば、ポイント最大フレームを含む１シーン、つまり、ポイント最大フレームの前に現れる間近のシーンチェンジの直後のフレームから、ポイント最大フレームの後に現れる間近のシーンチェンジの直前のフレームまでを、再生対象フレームとして選択する。
そして、ステップＳ７３からステップＳ７４に進み、再生指示データ生成部４６は、注目コンテンツから選択された再生対象フレームの再生時間の総和が、設定時間T以上となったかどうかを判定する。
ステップＳ７４において、注目コンテンツから選択された再生対象フレームの再生時間の総和が、設定時間T以上となっていないと判定された場合、即ち、注目コンテンツから選択された再生対象フレームの再生時間の総和が、設定時間T未満である場合、ステップＳ７２に戻り、再び、注目コンテンツの未選択フレームの中で、優先ポイントが最大のフレームであるポイント最大フレームが検索され、以下、同様の処理が繰り返される。
また、ステップＳ７４において、注目コンテンツから選択された再生対象フレームの再生時間の総和が、設定時間T以上となったと判定された場合、即ち、注目コンテンツから選択された再生対象フレームの再生時間の総和が、設定時間Tとなるか、または設定時間Tを越える、設定時間Tに近い時間になった場合、ステップＳ７５に進み、再生指示データ生成部４６は、注目コンテンツから選択された再生対象フレームを特定する情報（例えば、フレーム番号）を再生対象情報として求め、再生対象情報算出処理を終了する。
ここで、注目コンテンツから選択された再生対象フレームの再生時間の総和が、設定時間Tを越えた場合、再生指示データ生成部４６では、ステップＳ７５において、注目コンテンツから選択された再生対象フレームのうちの、最後に行われたステップＳ７３で選択された再生対象フレームを除く再生対象フレームを特定する情報を再生対象情報として求めるようにすることが可能である。この場合、再生対象情報が表すフレームの再生時間の総和は、設定時間T未満の、設定時間Tに近い時間となる。
以上のように、図１の記録再生システムでは、コンテンツの内容に応じた特殊再生（特別特殊再生）をするときに再生対象とするコンテンツの特定の内容の部分を表す、特別特殊再生の種類（再生タイプ）ごとの再生対象情報と、コンテンツを識別する識別情報とを対応付けた再生指示データにおいて、ユーザが指定したコンテンツの識別情報に対応付けられている、ユーザが指定した再生タイプについての再生対象情報を取得し、その再生対象情報が表すコンテンツの特定の内容の部分を、ユーザが指定したコンテンツから抽出するようにしたので、例えば、ユーザがコンテンツ全体の内容の概要を把握することができるように、コンテンツ全体の概要の把握に有用なシーンだけを再生する要約再生や、コンテンツのハイライトシーンだけを再生するハイライト再生などの、コンテンツの特定の内容の部分だけを再生対象とする各種の特別特殊再生を行うことが可能となり、装置の利便性を向上させることができる。
なお、注目コンテンツの特別特殊再生は、その注目コンテンツについての再生指示データのすべてが得られた後は勿論、再生指示データの一部が得られれば、残りの再生指示データを得るのと並列に行うことが可能である。
また、再生ルールについては、異なるカテゴリごとに、必ずしも異なった再生ルールを規定する必要はない。即ち、例えば、「野球」と「ソフトボール」や、あるいは「サッカー」と「フットサル」などの、いわば類似するカテゴリについては、同一の再生ルールを採用することが可能である。
さらに、本実施の形態では、再生指示データ生成部４６において、再生ルールに基づいて、再生指示データを生成するようにしたが、再生指示データ生成部４６では、その他、例えば、コンテンツを視聴するユーザに関するユーザ情報にも基づいて、再生指示データを生成することが可能である。
即ち、再生指示データ生成部４６では、例えば、記録再生装置２に対するユーザの操作の履歴（操作履歴）や、視聴の状況等のユーザ情報を収集して分析し、その分析結果を加味して、再生指示データを生成することが可能である。
具体的には、例えば、ユーザが、カテゴリ「野球」のコンテンツを視聴する（再生する）ケースを想定すると、高速再生をしながら、見たいシーンだけを通常再生する、いわゆる飛ばし見が行われることがある。そして、飛ばし見のタイプとしては、各回の終わりをチェックして進行をチェックするタイプや、ホームランやヒットなどの見所を見るタイプ、特定の選手を追いかけるタイプなどが考えられる。
そこで、再生指示データ生成部４６では、ユーザの操作履歴に基づき、ユーザがどのようなタイプの飛ばし見をするかを分析して、その分析結果に基づき、ユーザの飛ばし見のタイプに近い特別特殊再生が行われるように、再生指示データを生成することが可能である。
また、再生指示データ生成部４６では、ユーザの操作履歴を分析することにより、例えば、ドラマ番組の最初の音楽（挿入歌）はスキップする、野球の早送りを各回の終わりで止めて通常再生をするなどの、ユーザの操作の特徴を認識し、そのような特徴の操作が行われたかのような特別特殊再生が行われるように、再生指示データを生成することが可能である。
さらに、再生指示データ生成部４６では、ユーザの操作履歴を分析することにより、例えば、ユーザが、ハイライトシーンを主に視聴しているかや、進行の流れを見ているか、などを、コンテンツのカテゴリごとに把握し、そのユーザの視聴の仕方に適したシーンが再生される特別特殊再生が行われるように、再生指示データを生成することが可能である。
また、再生指示データ生成部４６では、例えば、コンテンツを視聴しているユーザをカメラで撮影して得られる画像の分析や、視線の検出などを行うことにより、ユーザの視聴の状況、即ち、例えば、ユーザが注視しているかや、居眠りをしているかなどを把握し、その視聴の状況にも基づいて、再生指示データを生成することが可能である。
具体的には、例えば、ユーザが注視しているシーンは、ユーザが興味があるシーンであると考えられるから、再生指示データ生成部４６では、そのようなシーンと同様の特徴があるシーンが再生される特別特殊再生が行われるように、再生指示データを生成することが可能である。また、例えば、ユーザが居眠りしていたときに再生されたシーンは、ユーザの興味がないシーンであると考えられるから、再生指示データ生成部４６では、そのようなシーンと同様の特徴があるシーンが再生されない特別特殊再生が行われるように、再生指示データを生成することが可能である。なお、ユーザが居眠りしていたときに再生されたシーンは、ユーザが見のがしたシーンであるとも考えられるので、再生指示データ生成部４６では、再生指示データとして、ユーザが居眠りしていたときに再生されたシーンの再生が行われるような再生指示データを生成するようにしても良い。
さらに、再生指示データ生成部４６では、例えば、コンテンツを視聴しているユーザをカメラで撮影して得られる画像の分析や、視線の検出などを行うことにより、ユーザが注視しているシーンの中で、特に注目している人物その他のオブジェクト（アイテム）を認識し、そのオブジェクトが現れるシーンの再生が行われるような再生指示データを生成するようにしても良い。
また、再生指示データ生成部４６では、例えば、コンテンツを視聴しているユーザをカメラで撮影して得られる画像を分析することにより、特定のユーザがコンテンツを視聴しているのかや、１人または複数人のユーザがコンテンツを視聴しているのかなどといった、ユーザの視聴の状況を把握し、その視聴の状況にも基づいて、再生指示データを生成することが可能である。
即ち、例えば、特定のユーザが自分の子供の運動会などを撮影した動画としてのコンテンツについては、そのコンテンツを視聴しているのが、特定のユーザだけであれば、そのコンテンツとしての動画に映っている人物のうちの、特定のユーザの子供が映っているシーンだけを再生する特別特殊再生が行われるような再生指示データを生成することができる。また、そのコンテンツを視聴しているのが、複数のユーザであれば、運動会全体の様子を把握することができるような、例えば、複数の人物が映っているシーンだけを再生する特別特殊再生が行われるような再生指示データを生成することができる。
以上のように、図１の記録再生装置２によれば、単なる変速再生や、チャプタ再生だけではなく、特別特殊再生を行うことができるので、例えば、HDDレコーダ・プレーヤに代表されるランダムアクセス機能を十分に生かした、新しい機能を十分に活用することができる。
また、記録再生装置２によれば、カテゴリごとの再生ルールに基づき、各カテゴリに属するコンテンツの特別特殊再生をするときに再生対象とするコンテンツの部分が決定されるため、例えば、コンテンツの再生時間を大きく越えない時間内に再生対象とするコンテンツの部分を決定し、簡便に特別特殊再生を実現することができる。
また、再生対象とするコンテンツの部分に含まれるシーンの先頭のフレームを、いわゆるフィルムロール状に並べたフィルムロール画像を表示することにより、ユーザは、コンテンツの内容を容易に把握して、例えば、多数のコンテンツの中から、所望のコンテンツを容易に探し出すことが可能となる。
さらに、要約再生やハイライト再生などの特別特殊再生によれば、ユーザは、少ない時間で、多くのコンテンツを楽しむ（視聴する）ことが可能となる。
さらに、再生指示データの生成は、見方を変えれば、いわば自動的な編集ということができ、従って、コンテンツを他人に見せるときなどに、コンテンツの編集などの作業が不要になる。
次に、上述した一連の処理は、ハードウェアにより行うこともできるし、ソフトウェアにより行うこともできる。一連の処理をソフトウェアによって行う場合には、そのソフトウェアを構成するプログラムが、汎用のコンピュータ等にインストールされる。
そこで、図１２は、上述した一連の処理を実行するプログラムがインストールされるコンピュータの一実施の形態の構成例を示している。
プログラムは、コンピュータに内蔵されている記録媒体としてのハードディスク１０５やＲＯＭ１０３に予め記録しておくことができる。
あるいはまた、プログラムは、フレキシブルディスク、CD-ROM(Compact Disc Read Only Memory)，MO(Magneto Optical)ディスク，DVD(Digital Versatile Disc)、磁気ディスク、半導体メモリなどのリムーバブル記録媒体１１１に、一時的あるいは永続的に格納（記録）しておくことができる。このようなリムーバブル記録媒体１１１は、いわゆるパッケージソフトウエアとして提供することができる。
なお、プログラムは、上述したようなリムーバブル記録媒体１１１からコンピュータにインストールする他、ダウンロードサイトから、ディジタル衛星放送用の人工衛星を介して、コンピュータに無線で転送したり、LAN(Local Area Network)、インターネットといったネットワークを介して、コンピュータに有線で転送し、コンピュータでは、そのようにして転送されてくるプログラムを、通信部１０８で受信し、内蔵するハードディスク１０５にインストールすることができる。
コンピュータは、CPU(Central Processing Unit)１０２を内蔵している。CPU１０２には、バス１０１を介して、入出力インタフェース１１０が接続されており、CPU１０２は、入出力インタフェース１１０を介して、ユーザによって、キーボードや、マウス、マイク等で構成される入力部１０７が操作等されることにより指令が入力されると、それにしたがって、ROM(Read Only Memory)１０３に格納されているプログラムを実行する。あるいは、また、CPU１０２は、ハードディスク１０５に格納されているプログラム、衛星若しくはネットワークから転送され、通信部１０８で受信されてハードディスク１０５にインストールされたプログラム、またはドライブ１０９に装着されたリムーバブル記録媒体１１１から読み出されてハードディスク１０５にインストールされたプログラムを、RAM(Random Access Memory)１０４にロードして実行する。これにより、CPU１０２は、上述したフローチャートにしたがった処理、あるいは上述したブロック図の構成により行われる処理を行う。そして、CPU１０２は、その処理結果を、必要に応じて、例えば、入出力インタフェース１１０を介して、LCD(Liquid Crystal Display)やスピーカ等で構成される出力部１０６から出力、あるいは、通信部１０８から送信、さらには、ハードディスク１０５に記録等させる。
ここで、本明細書において、コンピュータに各種の処理を行わせるためのプログラムを記述する処理ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はなく、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含むものである。
また、プログラムは、１のコンピュータにより処理されるものであっても良いし、複数のコンピュータによって分散処理されるものであっても良い。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであっても良い。
なお、コンテンツは、動画に限られるものではなく、静止画や、オーディオデータ（音声データ）等であっても良い。
また、コンテンツを記録しておくコンテンツ保持部２２と、再生指示データを記憶させておく再生指示データ保持部３１としては、別の記録媒体であっても良いし、同一の記録媒体であっても良い。
さらに、本実施の形態では、特別特殊再生として、要約再生とハイライト再生を採用したが、特別特殊再生の種類は、要約再生とハイライト再生に限定されるものではない。即ち、例えば、特定のもの、あるいは、人を画像や文字で示してそれが出てくるシーンを中心に再生するスター再生や、複数のコンテンツを連続して再生する際に、コンテンツ間で重複する映像を取り除いて連結して再生するコンボ再生などの、コンテンツの内容に応じた再生を、特別特殊再生として採用することが可能である。
また、図１の記録再生装置２は、例えば、HDDレコーダや、いわゆるホームネットワークに接続される、コンテンツの保存や配信を行うサーバ、コンピュータに画像等のコンテンツの記録や再生を行わせるためのアプリケーションプログラム等に適用することができる。
さらに、コンテンツの再生対象情報は、そのコンテンツと多重化しておくことが可能である。
また、図１１の再生対象情報算出処理では、設定時間Tに関係なく、優先ポイントが所定の閾値以上のフレームを含むシーンを構成するフレームを再生対象フレームとして選択することが可能である。
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
本発明を適用した記録再生システムの一実施の形態の構成例を示すブロック図である。 再生指示データの例を示す図である。 再生処理を説明するフローチャートである。 生成処理を説明するフローチャートである。 カテゴリ判定処理を説明するフローチャートである。 判定ルールの例を示す図である。 再生指示データ生成処理を説明するフローチャートである。 再生ルールの例を示す図である。 優先ポイント算出処理を説明するフローチャートである。 ルールセットの例を示す図である。 再生対象情報算出処理を説明するフローチャートである。 本発明を適用したコンピュータの一実施の形態の構成例を示すブロック図である。
符号の説明
１ リモートコマンダ， １1 要約ボタン， １2 ハイライトボタン， ２ 記録再生装置， ３ モニタ装置， ２０ 記録装置， ２１ 記録部， ２２ コンテンツ保持部， ３０ 再生装置， ３１ 再生指示データ保持部， ３２ ユーザI/F， ３３ 再生制御部， ３４ データ抽出部， ３５ デコード部， ４０ 生成装置， ４１ 読み出し部， ４２ デコード部， ４３ 判定ルール保持部， ４４ カテゴリ判定部， ４５ 再生ルール保持部， ４６ 再生指示データ生成部， ４７ ルール取得部， １０１ バス， １０２ CPU， １０３ ROM， １０４ RAM， １０５ ハードディスク， １０６ 出力部， １０７ 入力部， １０８ 通信部， １０９ ドライブ， １１０ 入出力インタフェース， １１１ リムーバブル記録媒体

Claims (16)

  1. コンテンツを再生する再生システムにおいて、
    コンテンツのカテゴリを判定するカテゴリ判定手段と、
    コンテンツの各カテゴリについて、コンテンツの内容に応じた複数の特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す再生対象情報と前記注目コンテンツを識別する識別情報とを対応付けた再生指示データを生成する再生指示データ生成手段と、
    前記再生指示データにおいて、ユーザが指定したコンテンツの識別情報に対応付けられている、前記ユーザが指定した前記特殊再生の種類についての前記再生対象情報を取得する取得手段と、
    前記取得手段において取得された前記再生対象情報が表すコンテンツの特定の内容の部分を、前記ユーザが指定したコンテンツから抽出する抽出手段と
    を備える再生システム。
  2. 前記特殊再生の種類は、要約再生およびハイライト再生である
    ことを特徴する請求項１に記載の再生システム。
  3. 前記カテゴリ判定手段は、前記コンテンツに含まれる文字認識、画像認識、又はコンテンツの音声認識の結果に基づいてカテゴリを判定する
    ことを特徴する請求項１に記載の再生システム。
  4. 前記カテゴリ判定手段は、前記コンテンツに含まれるメタデータ、クローズドキャプション、又は番組表情報を用いてカテゴリを判定する
    ことを特徴する請求項１に記載の再生システム。
  5. 前記再生ルールは、更新される
    ことを特徴する請求項１に記載の再生システム。
  6. 前記再生ルールは、インターネット上のサイトから提供される
    ことを特徴する請求項１に記載の再生システム。
  7. 前記再生ルールは、データ放送により放送され、更新される
    ことを特徴する請求項１に記載の再生システム。
  8. 前記再生指示データ生成手段は、コンテンツを視聴するユーザに関する情報にも基づき、前記再生指示データを生成する
    ことを特徴する請求項１に記載の再生システム。
  9. コンテンツを再生する再生装置において、
    コンテンツの内容に応じた特殊再生をするときに再生対象とする前記コンテンツの特定の内容の部分を表す、前記特殊再生の種類ごとの再生対象情報と、前記コンテンツを識別する識別情報とを対応付けた再生指示データにおいて、ユーザが指定したコンテンツの識別情報に対応付けられている、前記ユーザが指定した前記特殊再生の種類についての前記再生対象情報を取得する取得手段と、
    前記取得手段において取得された前記再生対象情報が表すコンテンツの特定の内容の部分を、前記ユーザが指定したコンテンツから抽出する抽出手段と
    を備え、
    前記再生指示データは、コンテンツの各カテゴリについて、複数の前記特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す前記再生対象情報と前記注目コンテンツを識別する前記識別情報とを対応付けることにより生成されたデータである
    再生装置。
  10. コンテンツを再生する再生方法において、
    コンテンツの内容に応じた特殊再生をするときに再生対象とする前記コンテンツの特定の内容の部分を表す、前記特殊再生の種類ごとの再生対象情報と、前記コンテンツを識別する識別情報とを対応付けた再生指示データにおいて、ユーザが指定したコンテンツの識別情報に対応付けられている、前記ユーザが指定した特殊再生の種類についての前記再生対象情報を取得し、
    その再生対象情報が表すコンテンツの特定の内容の部分を、前記ユーザが指定したコンテンツから抽出する
    ステップを含み、
    前記再生指示データは、コンテンツの各カテゴリについて、複数の前記特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す前記再生対象情報と前記注目コンテンツを識別する前記識別情報とを対応付けることにより生成されたデータである
    再生方法。
  11. コンテンツを再生する処理を、コンピュータに実行させるプログラムにおいて、
    コンテンツの内容に応じた特殊再生をするときに再生対象とする前記コンテンツの特定の内容の部分を表す、前記特殊再生の種類ごとの再生対象情報と、前記コンテンツを識別する識別情報とを対応付けた再生指示データにおいて、ユーザが指定したコンテンツの識別情報に対応付けられている、前記ユーザが指定した特殊再生の種類についての前記再生対象情報を取得し、
    その再生対象情報が表すコンテンツの特定の内容の部分を、前記ユーザが指定したコンテンツから抽出する
    ステップを含み、
    前記再生指示データは、コンテンツの各カテゴリについて、複数の前記特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す前記再生対象情報と前記注目コンテンツを識別する前記識別情報とを対応付けることにより生成されたデータである
    処理をコンピュータに実行させるプログラム。
  12. コンテンツを処理する情報処理装置において、
    コンテンツのカテゴリを判定するカテゴリ判定手段と、
    コンテンツの各カテゴリについて、コンテンツの内容に応じた複数の特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す再生対象情報と前記注目コンテンツを識別する識別情報とを対応付けた再生指示データを生成する再生指示データ生成手段と
    を備える情報処理装置。
  13. 前記再生指示データ生成手段は、コンテンツを視聴するユーザに関する情報にも基づき、前記再生指示データを生成する
    請求項１２に記載の情報処理装置。
  14. 前記再生指示データ生成手段は、前記再生対象とする前記注目コンテンツの特定の内容の部分を再生する再生時間の総和が、あらかじめ設定された設定時間または前記設定時間に近い時間になるように、前記注目コンテンツの前記特殊再生をするときに前記再生対象とする前記注目コンテンツの特定の内容の部分を決定する
    請求項１２に記載の情報処理装置。
  15. コンテンツを処理する情報処理方法において、
    コンテンツのカテゴリを判定し、
    コンテンツの各カテゴリについて、コンテンツの内容に応じた複数の特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す再生対象情報と前記注目コンテンツを識別する識別情報とを対応付けた再生指示データを生成する
    ステップを含む情報処理方法。
  16. コンテンツを処理する情報処理を、コンピュータに実行させるプログラムにおいて、
    コンテンツのカテゴリを判定し、
    コンテンツの各カテゴリについて、コンテンツの内容に応じた複数の特殊再生の種類ごとに規定されている再生ルールであって、コンテンツの前記特殊再生をするときに再生対象とするコンテンツの特定の内容の部分を決定するための前記再生ルールのうちの、注目している注目コンテンツのカテゴリおよび特殊再生の種類についての前記再生ルールに基づき、前記注目コンテンツの前記特殊再生をするときに再生対象とする前記注目コンテンツの特定の内容の部分を、前記特殊再生の種類ごとに決定し、前記再生対象とする前記注目コンテンツの特定の内容の部分を表す再生対象情報と前記注目コンテンツを識別する識別情報とを対応付けた再生指示データを生成する
    ステップを含む情報処理を、コンピュータに実行させるプログラム。
JP2005240562A 2005-08-23 2005-08-23 再生システム、再生装置、再生方法、情報処理装置、情報処理方法、およびプログラム Expired - Fee Related JP4683281B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2005240562A JP4683281B2 (ja) 2005-08-23 2005-08-23 再生システム、再生装置、再生方法、情報処理装置、情報処理方法、およびプログラム
US11/506,809 US8103149B2 (en) 2005-08-23 2006-08-21 Playback system, apparatus, and method, information processing apparatus and method, and program therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005240562A JP4683281B2 (ja) 2005-08-23 2005-08-23 再生システム、再生装置、再生方法、情報処理装置、情報処理方法、およびプログラム

Publications (3)

Publication Number Publication Date
JP2007060060A JP2007060060A (ja) 2007-03-08
JP2007060060A5 JP2007060060A5 (ja) 2008-09-11
JP4683281B2 true JP4683281B2 (ja) 2011-05-18

Family

ID=37804215

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005240562A Expired - Fee Related JP4683281B2 (ja) 2005-08-23 2005-08-23 再生システム、再生装置、再生方法、情報処理装置、情報処理方法、およびプログラム

Country Status (2)

Country Link
US (1) US8103149B2 (ja)
JP (1) JP4683281B2 (ja)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101120951B1 (ko) * 2007-03-22 2012-03-13 가부시키가이샤 코나미 데지타루 엔타테인멘토 게임 프로그램을 기록한 컴퓨터로 읽을 수 있는 매체, 게임 장치 및 게임 제어 방법
JP2009198622A (ja) * 2008-02-20 2009-09-03 Kenwood Corp コンテンツ記録装置、コンテンツ記録装置の制御方法、及びプログラム
JP4979623B2 (ja) * 2008-03-19 2012-07-18 三洋電機株式会社 画像処理装置
JP5528008B2 (ja) * 2008-07-17 2014-06-25 キヤノン株式会社 再生装置及び再生方法
WO2011099299A1 (ja) * 2010-02-10 2011-08-18 パナソニック株式会社 映像抽出装置、撮影装置、プログラム及び記録媒体
US20130294755A1 (en) * 2012-05-03 2013-11-07 United Video Properties, Inc. Systems and methods for preventing access to a media asset segment during a fast-access playback operation
US8948568B2 (en) 2012-07-31 2015-02-03 Google Inc. Customized video
JP6213031B2 (ja) * 2013-08-09 2017-10-18 船井電機株式会社 映像処理装置及び方法
EP3142040A1 (en) * 2015-09-11 2017-03-15 Canon Kabushiki Kaisha Information processing apparatus, method of controlling the same, and program
JP6775343B2 (ja) * 2015-09-11 2020-10-28 キヤノン株式会社 情報処理装置及びその制御方法及びプログラム
JP6535630B2 (ja) * 2015-11-25 2019-06-26 東芝映像ソリューション株式会社 電子機器および映像再生方法
JP7395901B2 (ja) * 2019-09-19 2023-12-12 ヤマハ株式会社 コンテンツ制御装置、コンテンツ制御方法およびプログラム
JP7442901B1 (ja) 2023-08-18 2024-03-05 真太郎 岸 情報処理システム、出力方法およびプログラム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004140874A (ja) * 2000-03-16 2004-05-13 Matsushita Electric Ind Co Ltd データ処理装置、データ処理方法および記録媒体、並びに該データ処理方法をコンピュータに実行させるためのプログラム
JP2005167456A (ja) * 2003-12-01 2005-06-23 Matsushita Electric Ind Co Ltd Ａｖコンテンツ興趣特徴抽出方法及びａｖコンテンツ興趣特徴抽出装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5434678A (en) * 1993-01-11 1995-07-18 Abecassis; Max Seamless transmission of non-sequential video segments
US20060031870A1 (en) * 2000-10-23 2006-02-09 Jarman Matthew T Apparatus, system, and method for filtering objectionable portions of a multimedia presentation
US6973256B1 (en) * 2000-10-30 2005-12-06 Koninklijke Philips Electronics N.V. System and method for detecting highlights in a video program using audio properties
US20020166123A1 (en) * 2001-03-02 2002-11-07 Microsoft Corporation Enhanced television services for digital video recording and playback
US6988093B2 (en) * 2001-10-12 2006-01-17 Commissariat A L'energie Atomique Process for indexing, storage and comparison of multimedia documents
US20040040041A1 (en) * 2002-08-22 2004-02-26 Microsoft Corporation Interactive applications for stored video playback
JP4217964B2 (ja) 2003-08-20 2009-02-04 ソニー株式会社 情報信号処理装置および情報信号処理方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004140874A (ja) * 2000-03-16 2004-05-13 Matsushita Electric Ind Co Ltd データ処理装置、データ処理方法および記録媒体、並びに該データ処理方法をコンピュータに実行させるためのプログラム
JP2005167456A (ja) * 2003-12-01 2005-06-23 Matsushita Electric Ind Co Ltd Ａｖコンテンツ興趣特徴抽出方法及びａｖコンテンツ興趣特徴抽出装置

Also Published As

Publication number Publication date
JP2007060060A (ja) 2007-03-08
US20070047913A1 (en) 2007-03-01
US8103149B2 (en) 2012-01-24

Similar Documents

Publication Publication Date Title
JP4683281B2 (ja) 再生システム、再生装置、再生方法、情報処理装置、情報処理方法、およびプログラム
JP4662779B2 (ja) 類似のビデオコンテンツへの乗り換えのための装置
JP4757876B2 (ja) ダイジェスト作成装置およびそのプログラム
JP4692775B2 (ja) 映像コンテンツ再生支援方法、映像コンテンツ再生支援システム、及び情報配信プログラム
US20040268398A1 (en) Controlled multi-media program review
JP4767216B2 (ja) ダイジェスト生成装置、方法及びプログラム
US20060110128A1 (en) Image-keyed index for video program stored in personal video recorder
KR20070001240A (ko) 실행중인 방송 또는 저장 콘텐츠를 캐치-업하기 위한 방법및 장치
JP2008061120A (ja) 再生装置、検索方法、およびプログラム
US7149365B2 (en) Image information summary apparatus, image information summary method and image information summary processing program
JP5079817B2 (ja) サマリ及びレポートを既に含んでいるオーディオビジュアル文書について新たなサマリを作成する方法及び該方法を使用する受信機
JP4650288B2 (ja) 再生制御装置、再生制御方法、およびプログラム
JP4735413B2 (ja) コンテンツ再生装置およびコンテンツ再生方法
JP4925938B2 (ja) ダイジェスト映像情報作成方法、ダイジェスト映像情報作成プログラム、および、映像装置
JPH11220689A (ja) 映像ソフト処理装置及び同処理プログラム記録記憶媒体
KR20020074328A (ko) 키프레임을 이용한 동영상 재생방법 및 그 장치
JPH11184867A (ja) 映像情報検索再生方法ならびに装置及び同方法がプログラムされ記録される記録媒体
JP2007288300A (ja) 映像音声再生装置
JP5002227B2 (ja) 再生装置
JP4519074B2 (ja) 映像蓄積再生装置
JP2005328329A (ja) 映像再生装置と映像録画再生装置と映像再生方法
JP2012089186A (ja) コンテンツ管理装置及びコンテンツ再生装置
JP2011078029A (ja) 電子機器、コンテンツ再生方法及びプログラム
JP4230402B2 (ja) サムネイル画像抽出方法、装置、プログラム
JP2005167456A (ja) Ａｖコンテンツ興趣特徴抽出方法及びａｖコンテンツ興趣特徴抽出装置

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080728

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080728

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091112

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100112

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110113

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110126

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140218

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140218

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees