JP4591982B2 - オーディオ信号及び/又はビデオ信号生成装置、及びオーディオ信号及び/又はビデオ信号生成方法 - Google Patents

オーディオ信号及び/又はビデオ信号生成装置、及びオーディオ信号及び/又はビデオ信号生成方法 Download PDF

Info

Publication number
JP4591982B2
JP4591982B2 JP2000338094A JP2000338094A JP4591982B2 JP 4591982 B2 JP4591982 B2 JP 4591982B2 JP 2000338094 A JP2000338094 A JP 2000338094A JP 2000338094 A JP2000338094 A JP 2000338094A JP 4591982 B2 JP4591982 B2 JP 4591982B2
Authority
JP
Japan
Prior art keywords
audio
metadata
video
video signal
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2000338094A
Other languages
English (en)
Other versions
JP2001216726A (ja
Inventor
ジョン マーク マクグラス
アンドリュー コリンズ
レックス マーチン ドリコット
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Europe BV United Kingdom Branch
Original Assignee
Sony United Kingdom Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from GBGB9926321.2A external-priority patent/GB9926321D0/en
Priority claimed from GB0004973A external-priority patent/GB2359918A/en
Priority claimed from GB0008435A external-priority patent/GB2356080A/en
Application filed by Sony United Kingdom Ltd filed Critical Sony United Kingdom Ltd
Publication of JP2001216726A publication Critical patent/JP2001216726A/ja
Application granted granted Critical
Publication of JP4591982B2 publication Critical patent/JP4591982B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/032Electronic editing of digitised analogue information signals, e.g. audio or video signals on tapes
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/11Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/3027Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is digitally coded
    • G11B27/3036Time code signal
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • G11B27/323Time code signal, e.g. on a cue track as SMPTE- or EBU-time code
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/327Table of contents
    • G11B27/328Table of contents on a tape [TTOC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/90Tape-like record carriers

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Description

【0001】
発明の分野
本発明は、オーディオ信号及び/又はビデオ信号生成装置、及びオーディオ信号及び/又はビデオ信号生成方法に関する。
【0002】
オーディオ及びビデオ作品の題材及びコンテンツには様々な種類のものがある。さらに、これら様々な種類に対応して、膨大な量のオーディオ及びビデオ作品が制作されている。オーディオ作品には、例えば、生放送及び録音放送を含むラジオ放送、ミュージカルや音声の録音等も含まれ、一方、ビデオ作品には、例えばテレビ番組やビデオの録画等も含まれる。通常、ビデオ作品はサウンドトラック又は解説音声のためのトラックを有しており、したがって、ビデオ作品は、本質的に、オーディオ作品をその一部として含んでいる場合が多い。
【0003】
ここで、オーディオ及び/又はビデオという用語は、オーディオ情報又は信号、ビデオ情報又は信号、又はビデオ及びオーディオ情報又は信号の組み合わせのいかなる形式をも指示するものとする。オーディオ及び/又はビデオを単にオーディオ/ビデオと表記する。
【0004】
オーディオ/ビデオ作品の種類及び量が大量に存在するため、オーディオ/ビデオ作品が保管されている場所からオーディオ/ビデオ素材の特定のコンテンツアイテムを検索するために、オペレータは、オーディオ/ビデオ作品群の中から視覚的に所望のコンテンツアイテムを検索しなくてはならず、この作業は困難で煩雑なものとなる。さらに、通常のオーディオ/ビデオ作品は、線形の記録媒体内に収まるものであっても、相当な長さを有している場合が多く、このような記録媒体を操作して、オーディオ/ビデオ作品からオーディオ/ビデオ素材の特定のコンテンツアイテムを検出する作業は、時間がかかり、煩雑なものとなる。
【0005】
本出願と同じ出願人により出願された同時に係属中の英国特許出願第9921235.9号(GB9921235.9)には、オーディオ/ビデオ素材のコンテンツを表すメタデータを用いてオーディオ/ビデオ素材のコンテンツを検索する装置及び手法が開示されている。
【0006】
本明細書において、メタデータは、オーディオ/ビデオ素材のコンテンツ、又はオーディオ/ビデオ素材のパラメータ又はオーディオ/ビデオ素材を作成するために用いられたパラメータ、又はオーディオ/ビデオ素材に関連する他のあらゆる情報を記述するいかなる形式の情報であってもよい。メタデータは、例えば、素材の実際のコンテンツに関する文脈的/記述的情報を提供する「意味的データ(semantic data)」であってもよい。意味的メタデータの例としては、対話期間の開始、場面の転換、新たな局面(face)の紹介又は場面における局面の位置、又はオーディオ/ビデオ素材のソースコンテンツに関連するその他の項目等がある。また、メタデータは、オーディオ/ビデオ素材の作成時に使用された設備の要素やパラメータに関連する統語的メタデータ(syntactic metadata)であってもよい。統語的メタデータとしては、カメラレンズに適用されたズーム量、レンズの開口及びシャッタースピードの設定、オーディオ/ビデオ素材が作成された日時等がある。メタデータは、関連するオーディオ/ビデオ素材とともに、記録媒体の異なる部分に記録してもよく、共通の部分に記録してもよいが、この説明におけるメタデータは、オーディオ/ビデオ素材のコンテンツの特徴及びエッセンスを検索及び識別するために使用するものであるため、オーディオ/ビデオ信号が再生される時には、オーディオ/ビデオ信号から分離していてもよい。
【0007】
同時に係属中の英国特許出願GB9921235.9号に開示されているオーディオ/ビデオ素材のコンテンツを検索する装置及び方法は、オーディオ/ビデオ信号とともに生成されたメタデータを用いて、オーディオ/ビデオ素材の文脈的又はエッセンスの情報項目を検索する。
【0008】
さらに、同時に係属中の英国特許出願GB9921234.2号には、オーディオ/ビデオ素材などのソースコンテンツを編集する編集システムが開示されている。この編集システムは、所望の作品スタイルのテンプレート表現をオーディオ/ビデオ素材に関連するメタデータに適用することにより、編集されたオーディオ/ビデオ作品を作成するものである。
【0009】
発明の開示
本発明に係るオーディオ/ビデオ生成装置は、オーディオ/ビデオソースを表現するオーディオ/ビデオ信号を生成するものであり、オーディオ/ビデオ信号を記録媒体に記録する記録手段を備え、このオーディオ/ビデオ生成装置は、データプロセッサにより生成された、オーディオ/ビデオ信号に関連付けられたメタデータを受け取り、記録手段は、オーディオ/ビデオ信号とともにメタデータを記録する。
【0010】
上述のように、オーディオ/ビデオ作品の性質及びコンテンツには様々なものがある。上述の同時に係属中の関連出願にも開示されているように、オーディオ/ビデオ作品にメタデータを関連付けて、オーディオ/ビデオ作品の保存管理に利用する手法は知られているが、本発明では、メタデータを用いて、オーディオ/ビデオ素材のコンテンツを編集及び検索することにより、オーディオ/ビデオ作品の作成にメタデータを活用する。
【0011】
メタデータを生成し、メタデータをオーディオ/ビデオ信号とともに記録媒体に記録するオーディオ/ビデオ生成装置により、オーディオ/ビデオ作品の作成処理の効率を高めることができる。オーディオ/ビデオ信号のコンテンツを記述するメタデータは、記録媒体から、独立して又は平行して読み出すことができ、したがってオーディオ/ビデオ信号を再生することなく、オーディオ/ビデオ信号のコンテンツを確認することができる。オーディオ/ビデオ素材のコンテンツを記述するメタデータを生成し、このメタデータをオーディオ/ビデオ信号とともに記録媒体に記録することにより、オーディオ/ビデオ信号を編集してオーディオ/ビデオ作品を作成する処理を容易に行うことができる。本発明によれば、オーディオ/ビデオ信号自体を再生することなく、オーディオ/ビデオ信号のコンテンツを記述するメタデータに基づいて、オーディオ/ビデオ信号を記録媒体から選択的に再生できる。オーディオ/ビデオ信号自体を再生しながらの作業は、時間がかかり煩雑なものである。したがって、本発明により、編集処理の効率が向上する。
【0012】
さらに、データプロセッサにより、記録されたオーディオ/ビデオ信号のタイムコードを表す信号を検出し、メタデータには、データプロセッサにより生成される、オーディオ/ビデオ信号のテイクの開始点及び終了点を表すタイムコードデータを含ませるとよい。オーディオ/ビデオ信号の一部を構成するテイクの開始点及び終了点のタイムコードを示すメタデータをオーディオ/ビデオ信号とともに記録することにより、オーディオ/ビデオ信号内の個別のアイテムを編集時に識別できる。
【0013】
オーディオ/ビデオ装置により生成されたオーディオ/ビデオ信号に関連するメタデータをデータプロセッサにより生成し、このメタデータをオーディオ/ビデオ生成装置に供給することにより、オーディオ/ビデオ生成装置の機能性を向上させることができる。データプロセッサは、オーディオ/ビデオ生成装置の一部であってもよく、オーディオ/ビデオ生成装置から独立した装置であってもよい。
【0014】
所定のフォーマットに準拠し、データプロセッサをオーディオ/ビデオ生成装置に接続するインターフェイスをオーディオ/ビデオ生成装置に設けてもよい。このインターフェイスにより、データプロセッサをオーディオ/ビデオ生成装置に接続することができる。この所定のフォーマットは、一般的なフォーマットであってもよく、これにより一定の範囲の種類のデータプロセッサをオーディオ/ビデオ生成装置に接続することができる。ユーザは、データプロセッサを用いて、メタデータを生成し、この目がデータをオーディオ/ビデオ生成装置により生成されたオーディオ/ビデオ信号に含ませることができる。このメタデータは、記録媒体において、オーディオ/ビデオ信号とは別に記録してもよい。
【0015】
好ましい実施の形態においては、インターフェイスは、オーディオ/ビデオ生成装置から信号を受け取る能力を有する。この信号は、例えば記録媒体におけるタイムコードを表すものであってもよい。データプロセッサは、記録された信号のタイムコードを表す信号を受け取り、これに基づくメタデータを生成する。
【0016】
また、本発明に係るオーディオ/ビデオ生成装置は、オーディオ/ビデオソースを表現するオーディオ/ビデオ信号を生成するオーディオ/ビデオ生成装置であって、オーディオ/ビデオ信号に関連するタイムコードを検出し、オーディオ/ビデオ信号の少なくとも一部に関連するタイムコードを表すデータをデータ記録装置に記録するデータプロセッサを備える。
【0017】
オーディオ/ビデオ信号に関連付けられたタイムコードを記録装置に独立して記録することにより、記録媒体に記録されているオーディオ/ビデオ信号を個別にアドレス指定することができる。本発明の具体例では、タイムコードデータは、オーディオ/ビデオ信号の少なくとも一部の開始点及び終了点のタイムコードを表す。オーディオ/ビデオ信号の部分は、これらタイムコードにより識別される。
【0018】
さらに、オーディオ/ビデオ信号を生成する際に、このオーディオ/ビデオ信号を識別する識別コードを自動的に生成するようにするとよい。メタデータにこの識別コードを含ませることにより、オーディオ/ビデオ信号の1又は複数の部分を個別に識別することができる。オーディオ/ビデオ信号の部分は、例えばオーディオ/ビデオ素材のテイクであってもよい。好ましい実施の形態においては、識別コードは、固有素材識別子(Unique Material Identifier: UMID)である。
【0019】
好ましい実施の形態において、オーディオ/ビデオ生成装置は、ビデオカメラ、カムコーダ、テレビジョンカメラ、映画用カメラ等である。
【0020】
また、本発明に係るメタデータ生成装置は、オーディオ/ビデオソースを表現するオーディオ/ビデオ信号を受け取り、オーディオ/ビデオ信号に関連するメタデータを生成するメタデータ生成装置であって、オーディオ/ビデオ信号に応じてメタデータを生成し、メタデータをオーディオ/ビデオ信号の少なくとも一部に関連付けて記録装置に記録するデータプロセッサを備え、データプロセッサは、オーディオ/ビデオ信号に関連するタイムコードを検出し、生成されるメタデータは、オーディオ/ビデオ信号の少なくとも一部に関連するタイムコードを表す。
【0021】
本発明のさらなる形態及び特徴は、請求の範囲において定義されている。
【0022】
好適な実施の形態の説明
取得ユニット( Acquisition unit
本発明は、例えばテレビジョンカメラ、ビデオカメラ又はカムコーダ等のオーディオ/ビデオ生成装置として実現される。Fig.1は、パーソナルデジタルアシスタント(personal digital assistant:以下、PDAという。)と通信を行う本発明に基づくビデオカメラの構成を示す図である。PDAは、データ処理装置の例であり、ユーザの要求に応じてメタデータを生成する。PDAは、民生用電子機器の分野では周知のものであり、英数キーパッドや手書き入力インターフェイスを備えた、携帯可能な小型の個人用オーガナイザ又はデータ処理装置である。
【0023】
Fig.1に示すビデオカメラ101は、カメラ本体102を備え、カメラ本体102は、1又は複数の撮像レンズ(図示せず)を有する撮像部(imaging arrangement)104の視野内に捉えられる光源からの光を受け取る。さらに、ビデオカメラ101は、ファインダ(view finder)106と、操作制御部(operating control unit)108を備え、これらによりユーザは、ビデオカメラ101の視野内に形成された画像を表す信号の記録を制御することができる。さらに、ビデオカメラ101は、マイクロフォン110を備える。マイクロフォン110は、ステレオ録音のために複数個のマイクロフォンを備えていてもよい。Fig.1に示す携帯型のPDA112は、画面114と英数字キーパッド116と、ユーザが手書き文字を入力する部分を備える。この手書き文字は、PDA112により認識される。PDA112は、インターフェイス118を介して、ビデオカメラ101に接続されている。インターフェイス118は、例えばRS232等の所定のフォーマットに準拠している。インターフェイス118は、赤外線信号に対応するものであってもよく、これにより、無線通信リンクが実現する。インターフェイス118により、ビデオカメラ101は情報通信を行うことができる。PDA112の機能及び用途については、後に詳細に説明する。PDA112は、このPDA112を用いて作成されたメタデータを送信及び受信する機能を有し、これらメタデータは、ビデオカメラ101により検出及び捕捉されたオーディオ/ビデオ信号とともに記録される。PDA112に接続されるビデオカメラ101の動作について、Fig.2を用いてさらに詳細に説明する。Fig.2は、Fig.1に示すカメラ本体102の内部構成を示す図であり、Fig.2において、Fig.1と同じ部分については同一の符号を付している。
【0024】
Fig.2に示すように、カメラ本体102は、磁気記録テープ126に対するデータの読出/書込を行う読出/書込ヘッド124を有するテープドライブ122を備える。さらに、Fig.2に示すように、カメラ本体102は、接続チャンネル130を介してテープドライブ122に接続されたメタデータ生成プロセッサ128を備える。メタデータ生成プロセッサ128には、データ記憶部132と、クロック136と、3つのセンサ138,140,142が接続されている。Fig.2に示すように、インターフェイス118は、無線チャンネル119を介してデータを送受信する。インターフェイス118とメタデータ生成プロセッサ128間には、受信データと送信データのそれぞれに対応する接続チャンネル148,150が設けられている。メタデータ生成プロセッサ128には、接続チャンネル151を介して、カメラ101により生成されたオーディオ/ビデオ信号も供給される。オーディオ/ビデオ信号は、テープドライブ122にも供給され、テープ126に記録される。
【0025】
Fig.1に示すビデオカメラ101は、撮像部104の視野内に捉えられた視覚的情報を記録媒体に記録する。ビデオカメラ101は、視覚的情報をビデオ信号に変換する。また、ビデオ信号として記録される視覚的情報とともに、マイクロフォン110により検出された音は、オーディオ信号として、ビデオ信号とともに記録媒体に記録される。Fig.2に示す具体例では、記録媒体は、磁気記録テープ126であり、磁気記録テープ126には、読出/書込ヘッド124によりオーディオ/ビデオ信号が記録される。読出/書込ヘッド124を用いてビデオ信号及びオーディオ信号を磁気記録テープ126に記録するための詳細な構成については、本発明の趣旨に直接関連するものではないため、Fig.2には示さず、詳細な説明を省略する。ユーザは、視覚的画像を捕捉し、これら画像を対応するオーディオ情報とともに磁気記録テープ126に記録すると、PDA112を用いて、このオーディオ/ビデオ信号のコンテンツを記述するメタデータを入力することができる。後述するように、メタデータは、例えば「テイク(take)」のような、予め構想されたイベント(pre-planned event)によりオーディオ/ビデオ信号を識別する情報であってもよい。ユーザがPDA112を用いて追加したメタデータは、Fig.2に示すように、インターフェイス118を介してカメラ本体102に供給される。インターフェイス118は、無線チャンネル119を介して、データ信号を受信する。インターフェイス118は、接続チャンネル148,150を介してこれらデータを受け取る取得プロセッサ(acquisition processor)であるメタデータ生成プロセッサ128により処理可能な形式にデータを変換する。
【0026】
メタデータ生成プロセッサ128は、接続チャンネル151から供給されてくるオーディオ/ビデオ信号に関連するメタデータを自動的に生成する。Fig.2に示す具体例では、メタデータ生成プロセッサ128は、クロック136を参照してタイムコードを生成し、これらタイムコードをテープ126のタイムコード用の線形記録トラックに記録する。タイムコードは、クロック136からの信号に基づいて、メタデータ生成プロセッサ128により生成される。さらに、メタデータ生成プロセッサ128は、オーディオ/ビデオ信号を固有に識別する固有素材識別子(Unique Material Identifier: 以下、UMIDという。)等のその他のメタデータを自動的に生成する。メタデータ生成プロセッサ128は、テープドライブ124と連携して動作し、テープ126に、オーディオ/ビデオ信号とともにUMIDを記録する。
【0027】
変形例においては、UMIDを他のメタデータとともにデータ記録部132に記録し、テープ126から独立してデータの送受信を行えるようにする。この場合、メタデータ生成プロセッサ128は、テープ126を他のテープから識別するために、テープIDを生成し、生成したテープIDをテープ126に記録する。
【0028】
UMID及びオーディオ/ビデオ信号のコンテンツを識別する他のメタデータを生成するために、メタデータ生成プロセッサ128は、クロック136とともに、センサ138,140,142から信号を受け取る。メタデータ生成プロセッサ128は、これら信号を整理(co-ordinate)し、例えば、撮像部104におけるカメラレンズの開口の設定、シャッタースピード、制御部108から供給される、細くされた画像が「画像良好(good shot)」であることを示す信号等を表すメタデータを生成する。これら信号及びデータは、センサ138,140,142により生成され、メタデータ生成プロセッサ128に供給される。この具体例におけるメタデータ生成プロセッサ128は、ビデオカメラ101がビデオ信号を生成する際に用いた動作パラメータを表す統語的メタデータを生成する。さらに、メタデータ生成プロセッサ128は、ビデオカメラ101の状態を監視し、特に、オーディオ/ビデオ信号がテープドライブ124により記録されているか否かを監視する。記録開始(RECORD START)が検出されると、開始点(IN POINT)タイムコードが捕捉され、この開始点タイムコードに対応するUMIDが生成される。このとき、拡張UMIDを生成してもよく、この場合、メタデータ生成プロセッサ128は、オーディオ/ビデオ信号が取得された位置を表す地理座標情報を受け取る。地理座標情報は、例えば、グローバルポジショニングシステム(Global Positioning System:GPS)に準拠する受信機により生成することができる。この受信機は、ビデオカメラ101の外部機器であってもよく、カメラ本体102に組み込んでもよい。
【0029】
記録開始(RECORD START)が検出されると、メタデータ生成プロセッサは、終了点(OUT POINT)タイムコードを捕捉する。上述のように、ここで「画像良好」を示すマーカを生成してもよい。「画像良好」を示すマーカは、記録処理の間に生成され、メタデータ生成処理プロセッサ128により検出される。「画像良好」を示すマーカは、開始点タイムコード及び終了点タイムコードとともに、テープ126に記録してもよく、データ記録部132に記録してもよい。
【0030】
上述のように、PDA112は、ビデオカメラ101により生成されたオーディオ/ビデオ素材の識別を補助するために使用される。このため、PDA112は、オーディオ/ビデオ素材を例えばシーン、ショット、テイク等の所定のイベントに関連付ける。Fig.1及びFig.2に示すビデオカメラ101及びPDA112は、オーディオ/ビデオ作品の構想を練り、取得し、編集するための統合システムを形成する。構想段階においては、オーディオ/ビデオ作品を作成するために必要なシーンが識別される。さらに、各シーンについて、そのシーンを構成するために必要な複数のショットが識別される。さらに、各ショットについて、複数のテイクを生成してもよく、これらテイクから最終編集用のショットとして用いるテイク番号が選択される。このような形式の構想情報(planning information)は、構想段階において識別される。構想されたシーン及びショットのそれぞれを表す又は識別するデータは、オーディオ/ビデオ素材が捕捉された際にディレクタを補助するための覚書とともにPDA112にロードされる。このようなデータの具体例を以下の表に示す。
【0031】
【表1】
Figure 0004591982
【0032】
この表の第1の欄は、カメラに捕捉され、オーディオ/ビデオ素材が作成されるイベントを示している。階層構造内で定義される各イベントには、識別番号が付与されている。これに対応して、第2の欄には、構想されたショット又はシーンのコンテンツをディレクタに指示し又は思い出させるための覚書が示されている。例えば、第1の列は、オーディオ/ビデオ作品がBMW社によるローバー(Rover)ブランドの処分を報告するニュースであることを定義している。表に示されている構想情報によれば、このニュースには3つのシーンがあり、それぞれのシーンには固有の識別番号が付与されている。各シーンは、「ロングブリッジ外観(Outside Longbridge)」、「BMWミュンヘン本社(BMW HQ Munich)」、「大臣へのインタビュー(Interview with Minister)」である。表では、各シーンに対応する複数のショットが各シーンの下に示されており、各ショットはそれぞれ固有のショット識別番号を有している。なお、これらショットのコンテンツの説明も第2欄に入力されている。例えば、第1のシーン「ロングブリッジ外観」に対しては、「ロングブリッジのBMWの看板(Longbridge BMW sign)」、「立ち去る労働者(Workers Leaving shift)」、「駐車場内の労働者(Workers in car park)」といった3つのショットが存在する。この情報をPDA112にロードして、ディレクタ又は単独のカメラマンは、新たなショットを撮影するための場所にPDA112を持ち出し、構想に基づくオーディオ/ビデオ素材を採取する。この情報をグラフィカルユーザインターフェイスに表示するPDA112をFig.3に示す。
【0033】
Fig.1に示すように、PDA112は、ビデオカメラ101に接続されてデータ通信を行う。このために、メタデータ生成プロセッサ128は、インターフェイス118を介して、PDA112とデータを送受信する。インターフェイス118は、例えば、周知の標準規格に準拠した赤外線リンク119を用いて無線通信を行う。PDA112及びFig.2に示すカメラ101においてメタデータを生成する部分をさらに詳細にFig.4に示す。
【0034】
Fig.4では、メタデータの生成及びPDA112との通信に関連するカメラの一部を独立した取得ユニット(acquisition unit)152として示している。なお、取得ユニット152は、カメラ102内部に組み込んでもよい。取得ユニット152は、メタデータ生成プロセッサ128と、データ記憶部132とを備える。さらに、取得ユニット152は、クロック136及びセンサ138,140,142を備えている。これら、クロック136及びセンサ138,140,142は、図面を簡潔にするため、Fig.4では示していない。これに代えて、Fig.2に示す構成要素の全て又は一部をカメラ102に組み込み、タイムコード等、メタデータを定義するために必要な信号及びオーディオ/ビデオ信号をインターフェイスポート154に接続された通信リンク153を介して送受するようにしてもよい。これにより、メタデータ生成プロセッサ128は、オーディオ/ビデオ素材を生成する際に使用された他のパラメータに加えて、タイムコード及びオーディオ/ビデオ素材にアクセスすることができる。タイムコード及びパラメータを表す信号は、オーディオ/ビデオ信号とともに、インターフェイスポートを介して、インターフェイスチャンネル156に供給される。さらに、取得ユニット152は、画面(図示せず)を備え、画面は画面駆動部158により駆動される。さらに、Fig.4に示すように、取得ユニットは、通信プロセッサ160を備え、通信プロセッサ160は、接続チャンネル162を介して、メタデータ生成プロセッサ128に接続されている。通信プロセッサ160は、アンテナ164を用いて、無線通信チャンネルを介して通信を行う。Fig.5は、取得ユニットの外観の具体例を示す図である。
【0035】
Fig.4には、PDA112も示されている。PDA112は、通信リンク119を介して取得ユニット152とデータを送受信するための対応する赤外線通信ポート165を備えている。さらに、PDA112は、データプロセッサ166を備え、データプロセッサ166は、接続チャンネル166を介して赤外線ポート165とデータを送受信する。さらに、PDA112は、それぞれデータプロセッサ166に接続されたデータ記録部167と画面駆動部168とを備える。
【0036】
Fig.3に外観を示すPDA112及びFig.5に示す取得ユニットは、本発明の一具体例を示すものである。これらPDA112及び取得ユニット152を接続する構成を図式的にFig.6に示す。Fig.6に示す具体例では、取得ユニット152は、ビデオカメラ101の背面に装着され、6ピンのリモート端子を介してビデオカメラ101に接続され、及び接続チャンネルを介して記録テープに記録されているタイムコードを表す外部信号を受け取る。すなわち、矢印で示す6ピンのリモート端子とタイムコードは、Fig.4に示す通信チャンネル153を構成する。Fig.6に示すインターフェイスポート154は、RM−P9/LTC信号をRS422信号に変換する変換回路154を備え、VA信号をDNI信号に変換する。RM−P9とは、カメラ用遠隔制御プロトコルであり、LTCは、アナログ形式の線形タイムコード(Linear Time Code)である。RS422信号は、インターフェイスポート154の一部である接続チャンネル153”を介して、RS422−RS232変換回路154”に供給される。この変換回路154”は、接続チャンネル156を介して、RS232標準規格に基づいて動作する処理装置128にRS232信号を供給する。
【0037】
Fig.4に示すように、事前に構想された作品の情報がロードされたPDA112は、赤外線通信リンク119を介して次のショットIDを送信することにより、オーディオ/ビデオ素材が生成されるべき現在のシーン及びショットに関する情報を送信する。また、PDA112は、事前に構想された情報を独立したリンク又は赤外線通信リンク119を介して取得ユニット152に供給し、この情報は記録部132に記録される。なお、取得ユニット152は、基本的には、現在選択されているシーンID又はショットIDに関連するメタデータを生成するように指示される。カメラ102は、現在のショットに関する情報を受け取った後、「そのショットのテイク(take of the shot)」を撮影するように操作される。そのテイクのオーディオ/ビデオ素材は、対応するタイムコードとともに記録テープ126に記録される。これらタイムコードは、インターフェイスポート154を介して、オーディオ/ビデオ素材とともにメタデータ生成プロセッサ128に供給される。メタデータ生成プロセッサ128には、現在撮影されている事前に構想された現在のショットに関する情報が既に入力されており、メタデータ生成プロセッサ128は、各ショットのテイクのためのタイムコードを記録する。すなわち、メタデータ生成プロセッサ128は、各テイクのINタイムコード及びOUTタイムコードをデータ記録部132に記録する。
【0038】
メタデータ生成プロセッサ128により生成され及び記録された情報を以下に表として示す。この表の第1の欄において、シーン及びショットは対応するID番号により識別されており、各ショットに対して複数のテイクがカメラ技術者により撮影され、表ではこれらを階層的構造により示している。このように、PDA112により現在のショットに関する情報が提供され、メタデータ生成プロセッサ128は、カメラ技術者により撮影された各テイクを記録する。表の第2及び第3欄は、このテイクの開始点(IN point)及び終了点(OUT point)を示すものであり、これらは記録部132に記録される。この情報は、Fig.5に示すように、取得ユニット152の画面にも表示される。さらに、上述のように、メタデータ生成プロセッサ128は、テイクとして記録されたオーディオ/ビデオ素材用のUMIDを生成する。表の第4欄は、各テイク用のUMIDを示している。さらに、いくつかの具体例においては、素材が記録されているテープを固有に識別するために、テープIDを生成し、このテープIDをメタデータに関連付ける。テープIDは、テープ自体に記録してもよく、テープカセット本体に組み込まれたランダムアクセスメモリチップに格納するようにしてもよい。ランダムアクセスメモリシステムは、TELEFILE(RTM)システムとして知られ、これによりテープIDを遠隔から読み出すことができる。テープIDは、磁気テープ126に書き込まれ、これによりこのテープが固有に識別される。好ましい実施の形態では、TELEFILE(RTM)システムには、メモリの一部として固有の番号が付されており、これをテープID番号として使用することができる。他の具体例においては、TELEFILE(RTM)システムは、記録されたオーディオ/ビデオ素材アイテムのIN/OUTタイムコードを自動的に生成する。
【0039】
本発明の一具体例において、以下の表に示す情報は、磁気テープ126における独立した記録チャンネルに記録される。なお、他の具体例においては、表に示すメタデータは、通信プロセッサ160又は赤外線リンク119を用いて、テープ126から独立して外部に送信される。このメタデータは、例えばPDA112により受信され、PDA112はこのメタデータを分析し、さらに別の装置に送信することもできる。
【0040】
【表2】
Figure 0004591982
【0041】
通信プロセッサ160は、無線通信リンクを介して、メタデータ生成プロセッサ128により生成されたメタデータを送信する。このメタデータは、無線通信リンクを介して、例えば遠隔に位置するスタジオにより受信され、スタジオは、磁気テープ126に記録されているオーディオ/ビデオ素材より先に、このメタデータを取得し、処理する。これにより、素材を編集するためのポストプロダクション段階におけるオーディオ/ビデオ作品の作成の効率を高めることができる。
【0042】
本発明の好適な実施の形態においては、記録されるオーディオ/ビデオ内の所定の時間的位置にピクチャスタンプ(picture stamp)を設ける。ピクチャスタンプは、当分野において、画像のデジタル表現として知られるものであり、この具体例においては、カメラにより生成された動画ビデオ素材から作成される。ビデオ信号に基づく画像を表すために必要なデータ量を低減させるために、ピクチャスタンプの画質を落としてもよい。したがって、ピクチャスタンプに対しては、画質を劣化させるような圧縮符号化処理を施してもよい。ピクチャスタンプは、オーディオ/ビデオ素材のコンテンツを視覚的に指示するものであり、したがって有効なメタデータとして機能する。ピクチャスタンプは、例えば、特定のテイクのINタイムコード及びOUTタイムコードの位置に対応して設けてもよい。ピクチャスタンプをメタデータ生成プロセッサ128により生成されたメタデータに関連付けて、データ記録部132に記録してもよい。ピクチャスタンプは、例えば、ピクチャスタンプにより表現されている画像が記録されているテープ上の位置を特定するタイムコード等のメタデータに関連付けられる。ピクチャスタンプは、「画像良好(good shot)」マーカとともに生成してもよい。メタデータ生成プロセッサ128は、通信リンク153を介して受け取ったオーディオ/ビデオ信号からピクチャスタンプを生成する。メタデータ生成プロセッサ128は、データサンプリング処理及び圧縮符号化処理を実行してピクチャスタンプを生成する。ピクチャスタンプが生成されると、ピクチャスタンプは様々な目的で使用できる。ピクチャスタンプをデータファイルに格納して、テープ126とは独立したデータとして取り扱ってもよく、あるいは、ピクチャスタンプを圧縮して、テープ126上の独立した記録チャンネルに記録してもよい。さらに、ピクチャスタンプを通信プロセッサ160を介して遠隔のスタジオに送信し、このスタジオにおいてプロデューサがピクチャスタンプを分析するような構成とすることが好ましい。これにより、プロデューサは、カメラにより撮影されたオーディオ/ビデオ素材が、要求されるものと合致するか否かを判断することができる。
【0043】
さらなる具体例においては、ピクチャスタンプは、PDA112に送信され、PDA112の画面上に表示される。この送信処理は、赤外線ポート119を介して行ってもよく、通信プロセッサ160とのさらなる無線通信を実現するための無線リンク機能をPDA112に設けて行ってもよい。PDA112を携帯するディレクタは、カメラにより撮影された現在のオーディオ/ビデオコンテンツを確認することができる。これにより、技術者に対して、現在生成されているオーディオ/ビデオ素材の美的品質に関する指示を直ちに行うことができる。上述のように、ピクチャスタンプは、圧縮符号化されており、したがって、PDA112に速やかに送信することができる。
【0044】
また、Fig.4に示す取得ユニット152によれば、遠隔のスタジオで待機する編集者に対し、オーディオ/ビデオ素材に先立って、オーディオ/ビデオ素材のコンテンツを示す情報が提供されるため、編集処理の効率が高められる。すなわち、無線リンクを介して、メタデータとともにピクチャスタンプを送信することにより、編集者は、オーディオ/ビデオ素材本体を受け取る前に、オーディオ/ビデオ素材のコンテンツを示す情報を受け取ることができる。この手法では、オーディオ/ビデオ素材用の帯域幅は、高品質な伝送に対応できるように広く確保され、メタデータ及びピクチャスタンプは、比較的伝送品質の低い狭い帯域幅で送信される。メタデータ及びピクチャスタンプの帯域幅を狭くすると、無線リンクにおいてかなり狭い帯域幅でメタデータ及びピクチャスタンプを伝送することができる。このため、オーディオ/ビデオ素材を記述するメタデータを高速に伝送することができる。
【0045】
メタデータ生成プロセッサ128により生成されるピクチャスタンプは、記録されるオーディオ/ビデオ素材のどの位置に対応するものであってもよい。一具体例においては、各テイクのINポイント及びOUTポイント毎にピクチャスタンプを設ける。また、他の具体例では、動きプロセッサ(activity processor)170がビデオ素材内の相対的動き(activity)を検出する。この処理は、ビデオ信号により表現されている画像の色成分のヒストグラムをコンパイルし、色成分の変化率を判定し、これら色成分の変化を用いて画像内の動きを調べるものである。これに代えて、又はこれに加えて、画像内の動きベクトルを用いて動きを検出するようにしてもよい。動きプロセッサ176は、ビデオ素材内の相対的動きを示す信号を生成する。メタデータ生成プロセッサ128は、この動きを示す信号に応答して、ピクチャスタンプを生成する。すなわち、ビデオ信号により表される画像における動きが激しいほど、多くのピクチャスタンプが生成される。
【0046】
本発明の変形例においては、動きプロセッサ170は、接続チャンネル172を介してオーディオ信号を受け取り、オーディオ信号に基づく音声を認識する。動きプロセッサ170は、この音声のコンテンツを表すコンテンツデータをテキストデータとして生成する。このテキストデータは、メタデータ生成プロセッサ128に供給される。このテキストデータは、さらにデータ記録部132に記録してもよく、上述したピクチャスタンプと同様に、通信プロセッサ160を介して、他のメタデータとともに外部に送信してもよい。
【0047】
Fig.7は、オーディオ/ビデオ素材を編集してオーディオ/ビデオ番組を作成するポストプロダクション処理を説明する図である。Fig.7に示すように、メタデータは、破線174により表される独立したルートを介して、取得ユニット152からメタデータデータベース176に送信される。このメタデータは、ピクチャスタンプ及び/又は音声コンテンツ情報を含んでいていてもよい。破線174で示す信号経路は、例えばUMTS、GSM等の無線通信リンクにより実現される。
【0048】
データベース176は、オーディオ/ビデオ素材に関連付けられるメタデータを格納する。データ品質の高いオーディオ/ビデオ素材は、テープ126に記録される。テープ126は、編集現場(editing suite)に搬送され、ここでテープ126は、採取プロセッサ(ingestion processor)178により採取(ingested)される。ここでは、破線180により示すように、テープ126に記録されているテープ識別情報(テープID)又はオーディオ/ビデオ素材のコンテンツを指示する他のメタデータを用いて、データベース176に格納されているメタデータをテープ126に記録されているオーディオ/ビデオ素材に関連付ける。
【0049】
本発明の実施の形態の説明では、オーディオ/ビデオ素材を記録する記録媒体としてビデオテープを用いるが、例えば磁気ディスクやランダムアクセスメモリ等の他の記録媒体を用いてもよいことは言うまでもない。
【0050】
採取プロセッサ( ingestion processor
Fig.7は、オーディオ/ビデオ素材を編集してオーディオ/ビデオ番組を作成するポストプロダクション処理を説明する図である。Fig.7に示すように、メタデータは、破線174により表される独立したルートを介して、取得ユニット152からメタデータデータベース176に送信される。このメタデータは、ピクチャスタンプ及び/又は音声コンテンツ情報を含んでいていてもよい。破線174で示す信号経路は、例えばUMTS、GSM等の無線通信リンクにより実現される。
【0051】
データベース176は、オーディオ/ビデオ素材に関連付けられるメタデータを格納する。データ品質の高いオーディオ/ビデオ素材は、テープ126に記録される。テープ126は、編集現場(editing suite)に搬送され、ここでテープ126は、採取プロセッサ(ingestion processor)178により採取(ingested)される。ここでは、破線180により示すように、テープ126に記録されているテープ識別情報(テープID)又はオーディオ/ビデオ素材のコンテンツを指示する他のメタデータを用いて、データベース176に格納されているメタデータをテープ126に記録されているオーディオ/ビデオ素材に関連付ける。
【0052】
採取プロセッサ174は、Fig.7に示すように、接続線182により表される通信チャンネルにより形成されているネットワークにも接続されている。接続線182は、相互接続ネットワークを形成する設備内の機器間でデータを送受信するための通信チャンネルを表している。このため、設備内の機器は、例えばイーサネット(Ethernet)やRS422等の周知の通信技術に基づいて動作するネットワークカードを備えている。さらに、後述するように、通信ネットワーク182は、シリアルデジタルインターフェイス(Serial Digital Interface:以下、SDIという。)又はシリアルデジタル伝送インターフェイス(Serial Digital Transport Interface)に基づくデータ通信を実現するものであってもよい。
【0053】
通信ネットワーク182には、メタデータのデータベース176と、オーディオ/ビデオ素材が採取されるオーディオ/ビデオサーバ190が接続されている。さらに、通信ネットワーク182には、デジタルマルチ効果プロセッサ(digital multi-effects processor)188とともに、編集端末装置184,186が接続されている。
【0054】
通信ネットワーク182は、採取プロセッサ178にロードされたテープ、ディスク又はその他の記録媒体に記録されているオーディオ/ビデオ素材へのアクセスを提供する。
【0055】
メタデータのデータベース176には、経路174を介して、採取プロセッサ178にロードされた記録媒体に記録されているオーディオ/ビデオ素材のコンテンツを記述するメタデータが供給される。
【0056】
本発明の実施の形態の説明では、オーディオ/ビデオ素材を記録する記録媒体としてビデオテープを用いるが、例えば磁気ディスクやランダムアクセスメモリ等の他の記録媒体を用いてもよく、ビデオテープは単に例示的なものに過ぎない。
【0057】
編集端末装置184,186及びデジタルマルチ効果プロセッサ188は、通信ネットワーク182を介して、採取プロセッサ178にロードされたテープに記録されているオーディオ/ビデオ素材及びメタデータのデータベース176に格納されている、このオーディオ/ビデオ素材を記述するメタデータにアクセスすることができる。メタデータのデータベース176と連携する採取プロセッサ178の動作について、さらに詳細に説明する。
【0058】
Fig.8は、採取プロセッサ178の外観の例を示す図である。Fig.8に示すように、採取プロセッサ178は、ジョグダイヤル操作子(jog shuttle control)200を備え、このジョグダイヤル200により、採取プロセッサ178が備えるビデオテープ記録/再生部にロードされたテープに記録されているオーディオ/ビデオ素材の検索(navigating)を行う。さらに、採取プロセッサ178は、表示画面202を備え、表示画面202オーディオ/ビデオ素材の選択された一部を表すピクチャスタンプを表示する。表示画面202は、タッチ画面としても機能し、ユーザは、この表示画面202に触れて、オーディオ/ビデオ素材を選択することができる。採取プロセッサ178は、表示スクリーン202に、台本(script)、カメラの機種、レンズの種類、UMID等の全ての種類のメタデータを表示させることができる。
【0059】
採取プロセッサ178は、Fig.9に示すように、オーディオ/ビデオ素材が記録された複数のビデオテープを同時に挿入できるように、複数のビデオテープ記録/再生部を備えていてもよい。Fig.9に示す具体例では、複数のビデオテープ記録装置204がRS−422リンク及びSDIイン/OUTリンクを介して採取プロセッサ178に接続されている。すなわち、採取プロセッサ178は、あらゆるビデオテープ記録装置204にアクセスし、そのビデオテープ記録装置204にロードされているビデオテープからオーディオ/ビデオ素材を再生するデータプロセッサを代表するものである。さらに、採取プロセッサ178は、通信ネットワーク182にアクセスするためのネットワークカードを備える。Fig.9に示すように、通信チャンネル182は、比較的伝送帯域幅の狭いデータ通信チャンネル182’と、ビデオデータストリーム用の伝送帯域幅の広いSDIチャンネル182”とを備える。これに対応して、採取プロセッサ178は、オーディオ/ビデオ素材の対応するアイテムを要求するために、RS−422リンクを介してビデオテープ記録装置204に接続されている。この接続を介してオーディオ/ビデオ素材のアイテムが要求されると、オーディオ/ビデオ素材は、SDI通信リンク206を介して、ビデオテープ記録装置204から採取プロセッサ178に供給され、さらにSDIチャンネル182”を介してSDIネットワークに分配される。この要求は、例えば、オーディオ/ビデオ素材のアイテムを固有に識別するUMIDを含んでいてもよい。
【0060】
メタデータのデータベース176と連携した採取プロセッサ178の動作について、Fig.10を用いて説明する。Fig.10に示すように、メタデータのデータベース176には、特定のテープID212に関連付けられた複数のメタデータ210のアイテムが格納されている。破線の矢印214により示すように、テープID212は、メタデータ210に対応するオーディオ/ビデオ素材が記録された特定のビデオテープ216を識別するものである。Fig.10に示す具体例では、テープID212は、ビデテープ218の線形タイムコード領域220に記録されている。なお、これに代えて、例えば垂直ブランキング領域等の他の領域にテープIDを記録するようにしてもよい。ビデオテープ216は、採取プロセッサ178の一部を構成する複数のビデオテープ記録装置204のうちのいずれか1つにロードされる。
【0061】
動作時には、編集端末装置184の1つが帯域幅の狭い通信チャンネル182’を介してメタデータのデータベース176にアクセスし、これにより編集端末装置184には、テープ216に記録されているオーディオ/ビデオ素材のコンテンツを記述するメタデータ210が供給される。メタデータ210には、著作権者「BskyB」、ピクチャの解像度、ビデオ素材の符号化フォーマット、この具体例では「グランドスタンド(Grandstand)である」番組名、及び日付、時刻、視聴者数等の情報が含まれる。さらに、メタデータ210は、オーディオ/ビデオ素材の内容に関する覚書を含む。
【0062】
オーディオ/ビデオ素材の各アイテムは、オーディオ/ビデオ素材を識別するUMIDに関連付けられている。これにより、編集端末装置184を用いて、メタデータ210から、番組を作成するために必要なオーディオ/ビデオ素材のアイテムを識別及び選択することができる。このオーディオ/ビデオ素材は、オーディオ/ビデオ素材に関連付けられたUMIDにより識別することができる。オーディオ/ビデオ素材にアクセスし、番組を作成するために、編集端末装置184は、帯域幅の狭い通信チャンネル182’を介して、そのオーディオ/ビデオ素材を要求するデータを送信する。この要求には、1又は複数のオーディオ/ビデオ素材のアイテムを識別する1又は複数のUMIDが含まれる。採取プロセッサ178は、編集端末装置184から送信されてきたオーディオ/ビデオ素材に対する要求に応答して、ビデオテープ216がロードされているビデオテープ記録装置から、この1又は複数のUMIDにより識別されるオーディオ/ビデオ素材のアイテムを選択的に再生する。このオーディオ/ビデオ素材は、SDIネットワーク182”を介して、編集端末装置184に伝送され、現在編集中のオーディオ/ビデオ作品に組み込まれる。伝送されたオーディオ/ビデオ素材は、オーディオ/ビデオサーバ190に採取(ingested)される。このオーディオ/ビデオサーバ190は、オーディオ/ビデオ素材を保存及び再生できる。
【0063】
Fig.11は、メタデータ210がオーディオ/ビデオ素材とともに適切な記録媒体に記録されている変形例を説明する図である。例えば、メタデータ210は、ビデオテープ218’のオーディオトラックの1つに記録することができる。これに代えて、記録媒体は、ランダムアクセスを可能とし、データ容量も大きい光ディスク又は磁気ディスクであってもよい。この場合、メタデータをオーディオ/ビデオ素材とともに記録することができる。
【0064】
さらなる変形例として、メタデータの一部又は全てをテープ216に記録してもよい。このメタデータは、例えば、テープ216の線形記録トラック218に記録できる。テープ216上に記録されたメタデータに関連するメタデータの一部を個別にデータベース176に送信及び登録してもよい。メタデータを採取するためには、さらなる処理が必要であり、このため、採取プロセッサ178は、記録媒体218’からメタデータを読み出し、このメタデータを通信ネットワーク182’を介してメタデータデータベース176に供給する。すなわち、採取プロセッサ178により採取するべきオーディオ/ビデオ素材に関連するメタデータは、独立した記録媒体又はオーディオ/ビデオ素材が記録されている記録媒体のいずれからも採取でき、データベース176に登録できる。
【0065】
オーディオ/ビデオ素材に関連付けられたメタデータは、ビデオ素材における様々な時点の画像を比較的低い画質で表現するピクチャスタンプを含む。これらピクチャスタンプは、採取プロセッサ178のタッチ画面202に表示することができる。さらに、ネットワーク182’を介して、これらピクチャスタンプを編集端末装置184,186又はマルチ効果プロセッサ188に供給して、オーディオ/ビデオ素材のコンテンツを指示するようにしてもよい。これにより、編集者は、オーディオ/ビデオ素材のコンテンツを視覚的に確認することができ、これに基づいてオーディオ/ビデオ素材のアイテムを選択することができる。さらに、ピクチャスタンプは、メタデータ210の一部として、データベース176に登録してもよい。編集者は、ピクチャスタンプに関連付けられたUMIDを用いて、ピクチャスタンプに対応する選択されたアイテムを呼び出す(retrieve)ことができる。
【0066】
オーディオ/ビデオ素材とともにピクチャスタンプを記録するための十分な容量を記録媒体が有していない場合がある。記録媒体がビデオテープ216である場合などは、このような状況が生じやすい。特にこのような場合、必要条件ではないが、オーディオ/ビデオ素材の採取前又は採取中にピクチャスタンプを生成することが望ましい。
【0067】
Fig.7において、他の具体例として、採取プロセッサ178に前処理ユニット(pre-processing unit)を設けてもよい。採取プロセッサ178に組み込まれた前処理ユニットは、この具体例ではビデオテープ126である記録媒体に記録されているオーディオ/ビデオ素材を読み出す。このために、前処理ユニットは、独立したビデオ記録/再生部を備え、あるいは、採取プロセッサ178の一部を形成するビデオ/記録再生装置に接続されている。前処理ユニットは、オーディオ/ビデオ素材に関連するピクチャスタンプを生成する。上述のように、ピクチャスタンプは、オーディオ/ビデオ素材のアイテムのコンテンツの視覚的な表現を提供する。なお、本発明のさらなる具体例においては、前処理ユニットは、オーディオ/ビデオ素材を処理し、オーディオ/ビデオ素材のコンテンツ内の相対的な動きを表現する動き情報(activity indicator)を生成する。この処理は、例えば、ビデオ信号により表される画像内の色成分のヒストグラムに基づいて動き信号を生成するプロセッサを用いて、ヒストグラムの色成分の変化率に応じて動き信号を生成することにより実現される。前処理ユニットは、ビデオ素材全体に亘って、この動き信号により動きが検出された時点でピクチャスタンプを生成する。この処理をFig.12に示す。Fig.12aに示す例では、ビデオ信号の時間軸を表す直線226に沿って複数のピクチャスタンプ224が生成されている。Fig.12aに示すように、ピクチャスタンプ224は、時間軸226に沿って、動きの発生を指示する矢印228で表される動き信号が動きの検出を示すたびに生成される。この動きは、例えば、何者かがカメラの視野内に入り、カメラの視野外に出る等、ビデオ信号により表される情報に大きな変化が生じた場合に検出される。このため、動き信号は、例えばMPEG標準規格に基づいて生成される動きベクトル等の情報を用いて生成することもできる。
【0068】
本発明の他の具体例においては、前処理ユニットは、テープ126に記録されているオーディオ/ビデオ素材のアイテムの一部を構成するオーディオ信号が表す音声に対応するテキスト情報を生成する。テキスト情報は、ピクチャスタンプの代わりに生成してもよく、ピクチャスタンプとともに生成してもよい。この場合、テキスト情報は、例えば文の最初の単語及び/又は話者の最初の発声(activity)に対して生成してもよい。このテキスト情報は、テープに記録され、又はオーディオ/ビデオ素材の一部を形成するオーディオ信号から検出される。Fig.12bには、時間軸226に沿ってテキスト情報が生成される開始点を矢印230として示している。これに代えて、文の最後の部分のテキスト情報を生成するようにしてもよく、談話内の他の重要な部分についてテキスト情報を生成するようにしてもよい。
【0069】
音声の開始が検出された時点で、音声プロセッサは、その音声のコンテンツを表すテキスト情報を生成する。Fig.12bに示す時間軸226上には、音声が発せられている期間の開始時の音声のコンテンツに対応するテキスト232を示している。
【0070】
前処理ユニットにより生成されるピクチャスタンプ及びテキスト情報は、通信チャネル182を介して、メタデータのデータベース176に供給され、登録される。これらピクチャスタンプ及びテキスト情報は、ピクチャスタンプ224及びテキスト情報232が生成されたオーディオ/ビデオ素材の対応するアイテムを識別するUMIDに関連付けられて登録される。これにより、編集者は、編集端末装置184,186の1つを用いて、オーディオ/ビデオ素材を採取プロセッサ178により採取する前に、オーディオ/ビデオ素材のコンテンツを分析することができる。ビデオテープ126が採取プロセッサ178にロードされると、この後、ネットワーク通信チャンネル182を介してオーディオ/ビデオ素材にアクセスすることができる。したがって、編集者は、オーディオ/ビデオ素材のコンテンツを速やかに確認することができ、したがって、自らが必要とする特定の素材アイテムに関連する素材の部分のみを採取することができる。このため、編集者によりオーディオ/ビデオ作品を作成する作業の効率を高めることができる。
【0071】
変形例として、前処理ユニットは、ピクチャスタンプ及び/又はテキスト情報を表示する画面と、採取すべきオーディオ/ビデオ素材を選択する機能を提供する例えばタッチスクリーン等の操作子等を備える専用の装置として独立させてもよい。
【0072】
本発明のさらなる具体例においては、採取プロセッサ178は、オーディオ/ビデオ素材を採取する間にUMID等のメタデータを生成する。この処理は、カメラ152の取得ユニットがUMIDを生成せず、固有素材参照番号(Unique Material Reference Number:以下、MURNという。)を生成する場合に必要である。MURNは、例えばテイク等、各素材アイテム毎に生成される。MURNは、UMIDよりかなり短いデータとして構成されており、UMIDの長さのためにUMIDを格納することが難しいビデオテープの線形タイムコード内にも格納することができる。これに代えて、MURNをテープのTELEFILE(RTM)ラベルに書き込んでもよい。MURNは、テープに記録されているオーディオ/ビデオ素材のアイテムに対する固有の識別情報を提供する。MURNは、線174により示すように、独立した経路を介して、データベース176に送信される。
【0073】
採取プロセッサ178は、テープ又はTELEFILEラベルから素材のアイテムに対するMURNを復元する。採取プロセッサ178は、各MURNに対応するUMIDを生成する。このUMIDは、MURNとともにデータベース176に送信され、データベース176において、MURNと関連付けて登録される。このMURNは、既にデータベース176に登録されているものであってもよい。
【0074】
カメラメタデータ
以下、番組の制作中に生成されるメタデータの種類と、メタデータを組織化する手法を例示的に説明する。
【0075】
Fig.13は、組織化されたメタデータの構造の具体例を示している。この構造には、それぞれがメタデータを含む複数のフィールドを有する複数のテーブルが設けられている。これらテーブルは、それぞれの共通フィールドにより相互に関連付けられ、これにより相互関連構造(relational structure)が実現されている。さらに、この構造では、同じテーブルにおいて複数のインスタンスを設けてもよく、これによりそのテーブルが表すオブジェクトの複数のインスタンスが表現される。フィールドは、所定の手法によりフォーマットしてもよい。また、フィールドのサイズも予め定めてもよい。サイズの例としては、2バイトを表す「Int」、4バイトを表す「Long Int」、8バイトを表す「Double」等がある。これに代えて、フィールドサイズは、例えば、8個、10個、16個、32個、128個、255個のキャラクタ等、そのフィールド内に含まれるキャラクタの数を参照して定義してもよい。
【0076】
この構造をより詳しく説明する。この構造は、番組テーブル(Programme Table)を有している。番組テーブルは、番組ID(Programme ID:以下、PIDという。)、タイトル、作業タイトル(Working Title)、概要(Synopsis)、アスペクト比、ディレクタID、ピクチャスタンプ(Picturestamp)等を含んでいる。番組テーブルには、ジャンルテーブル、キーワードテーブル、台本テーブル(Script Table)、関係者テーブル(People Table)、スケジュールテーブル、複数の媒体オブジェクトテーブルに関連付けられている。
【0077】
ジャンルテーブルは、番組テーブルのジャンルIDフィールドに関連付けられたジャンルIDとジャンル記述(Genre Description)とを含む複数のフィールドを有する。
【0078】
キーワードテーブルは、番組テーブルの番組IDフィールドに関連付けられた番組IDと、キーワードIDと、キーワードとを含む複数のフィールドを有する。
【0079】
台本テーブルは、台本ID、台本名、台本タイプ、文書フォーマット、パス、作製日付、原作者、バージョン、最終変更、変更者、番組IDに関連するPID、及び覚書(Notes)を含む複数のフィールドを有する。関係者テーブルは、画像を含む複数のフィールドを有する。
【0080】
関係者テーブルは、複数の個人テーブル(Individual Table)及びグループテーブル(Group Table)に関連付けられている。各個人テーブルは、画像を含む複数のフィールドを有する。各グループテーブルも、画像を含む複数のフィールドを有する。各個人テーブルは、制作スタッフテーブル又は出演者テーブルのいずれかに関連付けられている。
【0081】
制作スタッフテーブルは、制作スタッフID、姓、名、契約ID(Contract ID)、代理人、代理人ID、電子メールアドレス、住所、電話番号、職務ID、覚書、アレルギ、誕生日(Date of Birth:DOB)、国民保険番号(National Insurance Number)、銀行ID(Bank ID)、ピクチャスタンプを含む複数のフィールドを有する。
【0082】
出演者テーブルは、キャストID、姓、名、配役、契約ID(Contract ID)、代理人、代理人ID、組合番号(Equity Number)、電子メールアドレス、住所、電話番号、誕生日、銀行ID(Bank ID)、ピクチャスタンプを含む複数のフィールドを有している。制作スタッフテーブルと、出演者テーブルは、銀行詳細テーブル(Bank Details Table)及び代理人テーブルに関連付けられている。
【0083】
銀行詳細テーブルは、制作スタッフテーブルの銀行IDフィールド及び出演者テーブルの銀行IDフィールドに関連付けられた銀行IDと、種類コード(Sort Code)と、口座番号と、口座名とを含む複数のフィールドを有する。
【0084】
代理人テーブルは、制作スタッフテーブルの代理人IDフィールド及び出演者テーブルの代理人IDフィールドに関連付けられた代理人IDと、名称又は氏名、住所、電話番号、ホームページアドレス、電子メールアドレス、ピクチャスタンプを含む複数のフィールドを有する。制作スタッフテーブルは、職務テーブルにも関連付けられている。
【0085】
職務テーブルは、制作スタッフテーブルの職務IDフィールドに関連付けられた職務ID、役割(function)、覚書、ピクチャスタンプを含む複数のフィールドを有する。各グループテーブルは、組織テーブル(Organization Table)に関連付けられている。
【0086】
組織テーブルは、組織ID、名称、種類、住所、契約ID、連絡先名(Contact Name)、連絡先電話番号、ホームページ、ピクチャスタンプを含む複数のフィールドを有している。
【0087】
各媒体オブジェクトテーブルは、媒体オブジェクトID、説明、ピクチャスタンプ、PID、フォーマット、スケジュールID、台本ID、マスタIDを含む複数のフィールドを有している。媒体オブジェクトテーブルには、関係者テーブル、マスタテーブル、スケジュールテーブル、ストーリーボード(絵コンテ)テーブル、台本テーブル、及び複数の場面テーブル(Shot Table)が関連付けられている。
【0088】
マスタテーブルは、媒体オブジェクトテーブルのマスタIDフィールドに関連付けられているマスタID、タイトル、基礎UMID、EDL ID、テープID、期間、ピクチャスタンプを含む複数のフィールドを有する。
【0089】
スケジュールテーブルは、スケジュールID、スケジュール名、文書フォーマット、パス、作成日、原作者、開始日、終了日、バージョン、最終変更、変更者、覚書、及び番組IDに関連するPIDを含む複数のフィールドを有する。
【0090】
契約テーブルは、制作スタッフテーブル、出演者テーブル、及び組織テーブルの契約IDフィールドに関連する契約ID、効力発生日、レート、仕事タイトル、効力消滅日、詳細を含む複数のフィールドを有している。
【0091】
ストーリーボードテーブルは、場面テーブルのストーリーボードIDに関連するストーリーボードID、説明、原作者、パス、媒体IDを含む複数のフィールドを有する。
【0092】
各場面テーブルは、場面ID、PID、媒体ID、タイトル、場所(Location)ID、覚書、ピクチャスタンプ、台本ID、スケジュールID、説明を含む複数のフィールドを有する。各場面テーブルには、関係者テーブル、スケジュールテーブル、台本テーブル、場所テーブル及び複数のテイクテーブルが関連付けられている。
【0093】
場所テーブルは、場面テーブルの場所IDフィールドに関連付けられた場所ID、GPS、住所、説明、名称、時間単価、道順(Directions)、連絡先名称、連絡先住所、連絡先電話番号、ピクチャスタンプを含む複数のフィールドを有する。
【0094】
各テイクテーブルは、基礎UMID、テイク番号、場面ID、媒体ID、タイムコードIN、タイムコードOUT、標識メタデータ(Sign Metadata)、テープID、カメラID、ヘッド時間(Head Hours)、映像技師(Videographer)、INスタンプ、OUTスタンプ、レンズID、オートID(AUTOID)、インジェストID(ingest ID)、覚書を含む複数のフィールドを有する。テイクテーブルには、テープテーブル、タスクテーブル、カメラテーブル、レンズテーブル、インジェストテーブル、テイク注釈テーブルが関連付けられている。
【0095】
インジェストテーブルは、テイクテーブルのインジェストIDに関連付けられたインジェストIDと説明を含む複数のフィールドを有する。
【0096】
テープテーブルは、テイクテーブルのテープIDフィールドに関連付けられたテープID、PID、フォーマット、最大期間(Max Duration)、第1用途(First Usage)、最大削除箇所(Max Erasures)、現在削除箇所(Current Erasure)、推定到着時刻(estimated time of arrival: ETA)、最終削除日付、ピクチャスタンプを含む複数のフィールドを有する。
【0097】
タスクテーブルは、タスクID、PID、それぞれテイクテーブルの媒体IDフィールド及び場面フィールドに関連付けられた媒体ID及び場面ID、タイトル、タスクノート、分配リスト、CCリストを含む複数のフィールドを有する。タスクテーブルには、計画場面テーブル(Planned Shot Table)が関連付けられている。
【0098】
計画場面テーブルは、計画場面ID、それぞれタスクテーブルのPID、媒体ID、及び場面IDに関連付けられたPID、媒体ID、場面ID、ディレクタ、場面タイトル、場所、覚書、説明、映像技師、期限日、番組タイトル、媒体タイトル、アスペクト比、フォーマットを含む複数のフィールドを有する。
【0099】
カメラテーブルは、テイクテーブルのカメラIDフィールドに関連付けられたカメラID、製造業者、型番、フォーマット、シリアル番号、ヘッド時間、レンズID、覚書、連絡先名、連絡先住所、連絡先電話番号、ピクチャスタンプを含む複数のフィールドを有する。
【0100】
レンズテーブルは、テイクテーブルのレンズIDフィールドに関連付けられたレンズID、製造業者、型番、シリアル番号、連絡先名、連絡先住所、連絡先電話番号、ピクチャスタンプを含む複数のフィールドを有する。
【0101】
各注釈テーブルは、テイク注釈ID、基礎UMID、タイムコード、シャッタースピード、絞り、ズーム、階調度(ガンマ)、ショットID、フィルタホイール(Filter Wheel)、詳細、ゲインを含む複数のフィールドを有する。各テイク注釈テーブルには、ショットマーカテーブルが関連付けられている。
【0102】
ショットマーカテーブルは、テイク注釈テーブルのショットマーカIDに関連付けられたショットマーカIDと説明を含む複数のフィールドを有する。
【0103】
UMIDの説明
UMIDについては、2000年3月発行のSMPTEジャーナル(SMPTE Journal)に記述されている。本明細書では、このようなUMIDをSMPTE標準のUMIDと呼ぶ。Fig.14及びFig.15を参照して、基礎UMID(basic UMID)及び拡張UMID(extended UMID)を説明する。この拡張UMIDは、基礎UMID用の前半32バイトと、標識メタデータ(signature metadata)用の後半32バイトとを有する。
【0104】
前半32バイトに格納される基礎UMIDは、以下の成分からなる。
【0105】
・このデータがSMPTE UMIDであることを識別するための12バイトの汎用ラベル(universal label)。この汎用ラベルは、このUMIDにより識別される素材の種類と、汎用固有素材番号及びローカル固有インスタンス番号を生成するメッソドを定義する。
【0106】
・UMIDの残りの部分の長さを示す1バイトの長さ値(length value)。
【0107】
・同一の素材番号を有する素材のインスタンス間の違いを定義するために用いる3バイトのインスタンス番号。
【0108】
・各クリップを識別するための16バイトの素材番号。同一素材内の関連するインスタンスの各素材番号は同一である。
【0109】
後半32バイトの標識メタデータは、拡張UMIDを形成するために用いられるパックされたメタデータ項目の組により構成される。拡張UMIDは、基礎UMIDと、その直後に設けられた標識メタデータからなり、標識メタデータは、以下の成分からなる。
【0110】
・コンテンツユニット(content unit)が生成された日時を示す8バイトの時間/日付コード。
【0111】
・コンテンツユニット生成時の12バイトの地理座標を示すコード。
【0112】
・国名、組織及び個人コードを登録する各4バイトの3グループのコード。
【0113】
基礎UMID及び拡張UMIDの各成分をさらに詳細に説明する。
12バイトの汎用ラベル
UMIDにおける最初の12バイトは、以下の表1に定義される登録されたストリング値によりUMIDを識別するものである。
【0114】
【表3】
Figure 0004591982
【0115】
表1に示す16進数は例示的なものであり、これら以外の値を用いてもよい。また、バイト1〜バイト12にこの表1に示す情報以外の情報を格納してもよい。表1に示す例では、バイト4は、バイト5〜12がSMPTEに準拠するデータフォーマットに関するものであることを示している。バイト5は、バイト6〜10が「辞書」データに関するものであることを示している。バイト6バイトは、バイト7〜バイト10に定義されている「メタデータ」がどのようなメタデータであるかを示している。バイト7は、バイト9及びバイト10により定義されるメタデータを含む辞書の部分を示している。バイト8は、辞書のバージョンを示す。バイト9は、データクラスを示し、バイト10はそのクラス内の特定の項目を示す。
【0116】
この具体例においては、バイト1〜10は、予め割り当てられた固定の値を有する。バイト11は変数である。表1及びFig.3に示すように、UMID汎用ラベルにおけるバイト1〜10は固定である。したがって、このバイト1〜10は、バイト1〜10を表す1バイトの種類コード(type code)Tにより置換できる。種類コードコードTの後には、長さコード(length code)Lが設けられる。これら2つのバイトに続いて、表1に示すバイト11及びバイト12が設けられ、続いて3バイトのインスタンス番号及び16バイトの素材番号が設けられる。さらに、任意項目として、拡張UMID及び/又はその他のメタデータ構造において、素材番号に続いて標識メタデータを設けてもよい。
【0117】
バイト11により示されるUMID種類は、以下のような4つの異なるデータ種類を表す4つの別個の値を有している。
【0118】
「01h」=ピクチャ素材のUMID
「02h」=オーディオ素材のUMID
「03h」=データ素材のUMID
「04h」=グループ素材、すなわち関連するエッセンスの組み合わせのUMIDの値
12バイトからなるラベルの最後のバイト、すなわちバイト12は、素材及びインスタンス番号を生成するメソッドを定義する。バイト12は、トップニブル(top nibble)及びボトムニブル(bottom nibble)からなり、トップニブルは、素材番号生成のためのメッソドを定義し、ボトムニブルは、インスタンス番号生成のためのメソッドを定義する。
【0119】
長さ(length)
長さを表すLengthの値は、基礎UMIDの場合「13h」であり、拡張UMIDの場合「33h」である。
【0120】
インスタンス番号(instance number)
インスタンス番号は、標準規格に定義されているいくつかの手法の1つにより生成された固有の3バイトからなる番号である。インスタンス番号は、クリップ内の特定のインスタンスと外部の関連するメタデータとの間のリンク情報を提供する。このインスタンス番号がない場合、全ての素材は、その素材の全てのインスタンス及び関連するメタデータにリンクすることができる。
【0121】
新たなクリップを生成するためには、インスタンス番号0を有する新たな素材番号を生成する必要がある。したがって、0ではないインスタンス番号は、関連するクリップがソース素材ではないことを示す。インスタンス番号は、主に、クリップ内の任意の特定のインスタンスに関連するメタデータを識別するために使用される。
【0122】
素材番号(material number)
16バイトからなる素材番号は、標準規格において定義されているいくつかの手法のうちの1つにより生成された0ではない番号である。この番号は、6バイトの登録されたポートID番号、時間及び乱数生成器により生成される。
【0123】
標識メタデータ(signature metadata)
標識メタデータの全ての成分は、空白(null-filled)であってもよく、すなわち有効な値が入力されていなくてもよい。空白の成分は、ダウンストリームの復号器にこの成分が有効ではないことを明瞭に示すために、完全に空白にされる。
【0124】
日時フォーマット(the time-date format)
日時フォーマットは、8バイトからなり、これらのうち前半の4バイトは、汎用タイムコード(universal time code:以下、UTCという。)に基づく時間成分である。時刻は、エッセンスの種類に応じて、AES3の32ビットオーディオサンプルクロック及びSMPTE12Mのいずれかにより定義される。
【0125】
後半の4バイトは、SMPTE309Mにおいて定義されている修正ユリウスデータ(modified Julian data:以下、MJDという。)に基づいて日付を定義する。MDJは、西暦1858年11月17日の夜の12時から999,999日間を数え上げるものであり、これにより西暦4597年までの日付を表すことができる。
【0126】
地理座標フォーマット(the spatial co-ordinate format)
地理座標値は、以下の3つの成分からなる。
【0127】
・高度:99,999,999メートルまでの高度を特定する10進数の8桁で定義される。
【0128】
・経度:東経/西経180.00000度を特定する10進数の8桁で定義される。(5つの10進数位置がアクティブである。)
・緯度:北緯/南緯90.00000度を特定する10進数の8桁で定義される。(5つの10進数位置がアクティブである。)
高度を示す値は、地球の中心からの距離を示し、したがって、平均海水面以下の高さを表すこともできる。
【0129】
なお、多くのクリップにおいて地理座標は固定されるが、地理座標が動的に変化する場合もある。例えば、乗り物に搭載されたカメラ等の移動ソースから捕捉された素材における地理座標値は、随時変化することもある。
【0130】
国コード(country code)
国コードは、ISO3166において定義されている短縮型の4バイトの英数字文字列により表される。登録されていない国は、SMPTE登録機関(SMPTE Registration Authority)により英数字文字列の登録を得ることができる。
【0131】
組織コード(organization code)
組織コードは、SMPTEに登録される短縮形の4バイトの英数字文字列として表される。組織コードは、その組織が存在する国の登録された国コードに必ず関連付けられるので、異なる国の組織には同一の組織コードを与えることができる。
【0132】
ユーザコード(user code)
ユーザコードは、各組織が各地で(locally)割り当てた4バイトの英数字文字列であり、全体的には(組織外では)登録されない。ユーザコードは、登録された組織コード及び国コードに必ず関連付けられるので、異なる組織及び国においては、同一のユーザコードを用いることができる。
【0133】
フリーランスオペレータ(Freelance Operators)
フリーランスのオペレータは、居住する国の国コードと、組織コード及びユーザコードを結合した例えば8バイトのコードを使用することができ、この8バイトのコードをSMPTE登録機関に登録することができる。フリーランスのコードは、シンボル「〜」(ISO8859文字番号7Eh)から開始され、これに続いて登録された7桁の英数文字列が設けられる。
【0134】
本発明の範囲から逸脱することなく、上述の実施の形態を様々に変形できることは、当業者にとって明らかである。例えば、上述の説明では、オーディオ/ビデオ信号を磁気テープに記録しているが、ここで他の記録媒体を用いてもよい。さらに、ユーザにより生成されるメタデータをテキスト情報として示しているが、他のいかなる形式のメタデータを自動的に又はユーザの操作に基づいて生成してもよく、このメタデータをインターフェイスユニットを介してオーディオ/ビデオ生成装置に供給してもよい。これに対応して、二次的なメタデータは、いかなる形式の意味的メタデータ又は統語的メタデータであってもよい。
【0135】
本発明の実施の形態において、データプロセッサ又は処理ユニットとして説明した構成要素は、ハードウェアとしても、適切なデータプロセッサ上で実行されるコンピュータソフトウェアプログラムとしても実現できる。また、データプロセッサ上で実行されるコンピュータプログラム又はアプリケーションプログラムとして説明した構成要素を専用のハードウェアとして実現してもよい。したがって、データプロセッサ上で実行されて、上述したオーディオ/ビデオ生成装置を実現するコンピュータプログラムは、本発明の範囲内にある。同様に、記録媒体に格納され、本発明に基づく方法を定義するコンピュータプログラム、又はコンピュータにロードされて本発明に基づく装置を実現するコンピュータプログラムは、本発明の範囲内にある。
【図面の簡単な説明】
【図1】Fig.1は、個人用デジタルアシスタント(PDA)と連携して動作するビデオカメラの構成を示す図である。
【図2】Fig.2は、Fig.1に示すビデオカメラの一部の構成を示す図である。
【図3】Fig.3は、Fig.1に示すPDAの外観を示す図である。
【図4】Fig.4は、ビデオカメラの一部と、さらなるPDAと連携する独立した取得ユニットとしてメタデータを生成及び処理するビデオカメラの一部とによる構成を示す図である。
【図5】Fig.5は、Fig.4に示す取得ユニットの外観を示す図である。
【図6】Fig.6は、Fig.4に示す取得ユニットとビデオカメラ間の接続を図式的に説明する図である。
【図7】Fig.7は、ネットワークに接続された採取プロセッサと、メタデータ及びオーディオ/ビデオ素材アイテムの採取処理のフローを説明する図である。
【図8】Fig.8は、Fig.7に示す採取プロセッサの外観を示す図である。
【図9】Fig.9は、Fig.7及びFig.8に示す採取プロセッサの外観及び構成を図式的に詳細に説明する図である。
【図10】Fig.10は、Fig.7に示す採取プロセッサとデータベースとの連携処理を説明する図である。
【図11】Fig.11は、Fig.7に示す採取プロセッサのさらなる処理例を説明する図である。
【図12】Fig.12aは、オーディオ/ビデオ素材のサンプル時間におけるピクチャスタンプの生成を説明する図であり、Fig.12bは、オーディオ/ビデオ素材の時間軸上の時刻におけるテキストサンプルの生成を説明する図である。
【図13】Fig.13は、組織化されたメタデータの構成例を示す図である。
【図14】Fig.14は、データが縮減されたUMIDの構造を示す図である。
【図15】Fig.15は、拡張UMIDのデータ構造を示す図である。

Claims (13)

  1. オーディオ/ビデオソースを表すオーディオ/ビデオ信号を生成するオーディオ/ビデオ生成装置であって、
    上記生成されたオーディオ/ビデオ信号を記録媒体に記録する記録手段と、
    上記生成されたオーディオ/ビデオ信号を受信し、当該オーディオ/ビデオ信号に応じて自動的に第1のメタデータを生成するメタデータ生成プロセッサとを備え、
    上記第1のメタデータは、上記オーディオ/ビデオ信号の1以上の部分の開始点及び終了点を表すタイムコードと、当該各部分を識別する固有の識別コードとを含み、
    上記メタデータ生成プロセッサは、上記オーディオ/ビデオ信号が記録される上記記録媒体を識別する識別子を生成し、上記第1のメタデータ及び上記識別子を、上記記録媒体から独立して当該メタデータ生成プロセッサと通信可能なデータ記憶部へ記憶し、
    当該オーディオ/ビデオ生成装置は、所定のフォーマットに準拠して上記メタデータ生成プロセッサを外部の携帯型データ処理装置と接続するインターフェイスをさらに備え、
    上記携帯型データ処理装置は、ユーザの操作に応じて生成された第2のメタデータを上記メタデータ生成プロセッサに供給し、
    上記記録手段は、上記オーディオ/ビデオ信号及び上記第1のメタデータとともに上記第2のメタデータを上記記録媒体に記録し、
    上記第2のメタデータは、上記自動的に生成された第1のメタデータとともに記録される上記オーディオ/ビデオ信号に含まれるべきシーン又はショットの構想を示す、上記ユーザにより生成された事前構想情報と、当該事前構想情報から現在のショットを識別するショット識別子とを含み、
    上記事前構想情報は、上記携帯型データ処理装置に予め記憶されている
    オーディオ/ビデオ生成装置。
  2. 上記固有の識別コードは、固有素材識別子(Unique Material Identifier: UMID)であることを特徴とする請求項1記載のオーディオ/ビデオ生成装置。
  3. オーディオ/ビデオソースを表すオーディオ/ビデオ信号を生成するオーディオ/ビデオ生成装置であって、
    上記生成されたオーディオ/ビデオ信号を記録媒体に記録する記録部と、
    上記生成されたオーディオ/ビデオ信号を受信し、当該オーディオ/ビデオ信号に応じて自動的に第1のメタデータを生成するメタデータ生成プロセッサとを備え、
    上記第1のメタデータは、上記オーディオ/ビデオ信号の1以上の部分の開始点及び終了点を表すタイムコードと、当該各部分を識別する固有の識別コードとを含み、
    上記メタデータ生成プロセッサは、上記オーディオ/ビデオ信号が記録される上記記録媒体を識別する識別子を生成し、上記第1のメタデータ及び上記識別子を、上記記録媒体から独立して当該メタデータ生成プロセッサと通信可能なデータ記憶部へ記憶し、
    当該オーディオ/ビデオ生成装置は、所定のフォーマットに準拠して上記メタデータ生成プロセッサを外部の携帯型データ処理装置と接続するインターフェイスをさらに備え、
    上記携帯型データ処理装置は、ユーザの操作に応じて生成された第2のメタデータを上記メタデータ生成プロセッサに供給し、
    上記記録部は、上記オーディオ/ビデオ信号及び上記第1のメタデータとともに上記第2のメタデータを上記記録媒体に記録し、
    上記第2のメタデータは、上記自動的に生成された第1のメタデータとともに記録される上記オーディオ/ビデオ信号に含まれるべきシーン又はショットの構想を示す、上記ユーザにより生成された事前構想情報と、当該事前構想情報から現在のショットを識別するショット識別子とを含み、
    上記事前構想情報は、上記携帯型データ処理装置に予め記憶されている
    オーディオ/ビデオ生成装置。
  4. 上記固有の識別コードは、固有素材識別子(Unique Material Identifier: UMID)であることを特徴とする請求項3記載のオーディオ/ビデオ生成装置。
  5. オーディオ/ビデオソースを表すオーディオ/ビデオ信号を記録する記録装置から当該オーディオ/ビデオ信号を受信し、該オーディオ/ビデオ信号に関連するメタデータを生成するメタデータ生成装置であって、
    上記記録装置と接続する第1のインターフェイスと、
    上記受信されたオーディオ/ビデオ信号に応じて自動的に第1のメタデータを生成するメタデータ生成プロセッサとを備え、
    上記第1のメタデータは、上記オーディオ/ビデオ信号の1以上の部分の開始点及び終了点を表すタイムコードと、当該各部分を識別する固有の識別コードとを含み、
    上記メタデータ生成プロセッサは、上記オーディオ/ビデオ信号が記録される上記記録装置を識別する識別子を生成し、上記第1のメタデータ及び上記識別子を、上記記録装置から独立して当該メタデータ生成プロセッサと通信可能なデータ記憶部へ記憶し、
    当該メタデータ生成装置は、所定のフォーマットに準拠して上記メタデータ生成プロセッサを外部の携帯型データ処理装置と接続する第2のインターフェイスをさらに備え、
    上記携帯型データ処理装置は、ユーザの操作に応じて生成された第2のメタデータを上記メタデータ生成プロセッサに供給し、
    上記メタデータ生成プロセッサは、上記オーディオ/ビデオ信号及び上記第1のメタデータとともに上記第2のメタデータが上記記録媒体に記録されるように上記記録装置を制御し、
    上記第2のメタデータは、上記自動的に生成された第1のメタデータとともに記録される上記オーディオ/ビデオ信号に含まれるべきシーン又はショットの構想を示す、上記ユーザにより生成された事前構想情報と、当該事前構想情報から現在のショットを識別するショット識別子とを含み、
    上記事前構想情報は、上記携帯型データ処理装置に予め記憶されている
    メタデータ生成装置。
  6. 上記固有の識別コードは、固有素材識別子(Unique Material Identifier: UMID)であることを特徴とする請求項5記載のメタデータ生成装置。
  7. 上記オーディオ/ビデオ信号は、オーディオ/ビデオ素材のアイテムを表し、
    上記データプロセッサは、上記オーディオ/ビデオ素材のアイテム用のタイムコードのログを生成することを特徴とする請求項5記載のメタデータ生成装置。
  8. 上記データプロセッサは、上記ログを上記データ記憶部に記憶することを特徴とする請求項7記載のメタデータ生成装置。
  9. オーディオ/ビデオ生成装置によりオーディオ/ビデオソースを表すオーディオ/ビデオ信号を生成するオーディオ/ビデオ信号生成方法であって、
    上記オーディオ/ビデオ信号を生成するステップと、
    上記オーディオ/ビデオ信号を記録媒体に記録するステップと、
    上記オーディオ/ビデオ信号に応じて自動的に第1のメタデータを生成し、上記オーディオ/ビデオ信号が記録される上記記録媒体を識別する識別子を生成するステップと、
    上記第1のメタデータ及び上記識別子を、上記記録媒体から独立したデータ記憶部へ記憶するステップと、
    外部の携帯型データ処理装置により、ユーザの操作に応じて第2のメタデータを生成するステップと、
    上記第2のメタデータを、所定のフォーマットに準拠したインターフェイスを介して上記携帯型データ処理装置から受信するステップと、
    上記オーディオ/ビデオ信号及び上記第1のメタデータとともに上記受信された第2のメタデータを上記記録媒体へ記録するステップとを有し、
    上記第1のメタデータは、上記オーディオ/ビデオ信号の1以上の部分の開始点及び終了点を表すタイムコードと、当該各部分を識別する固有の識別コードとを含み、
    上記第2のメタデータは、上記自動的に生成された第1のメタデータとともに記録される上記オーディオ/ビデオ信号に含まれるべきシーン又はショットの構想を示す、上記ユーザにより生成された事前構想情報と、当該事前構想情報から現在のショットを識別するショット識別子とを含み、
    上記事前構想情報は、上記携帯型データ処理装置に予め記憶されている
    オーディオ/ビデオ信号生成方法。
  10. 上記固有の識別コードは、固有素材識別子(Unique Material Identifier: UMID)であることを特徴とする請求項記載のオーディオ/ビデオ信号生成方法。
  11. コンピュータにより実行可能な命令を提供するコンピュータプログラムであって、データプロセッサにロードされて、該データプロセッサを請求項1乃至4いずれか1項記載のオーディオ/ビデオ生成装置又は請求項5乃至8いずれか1項記載のメタデータ生成装置として動作させるコンピュータプログラム。
  12. コンピュータにより実行可能な命令を提供するコンピュータプログラムであって、データプロセッサにロードされて、請求項9記載のオーディオ/ビデオ信号生成方法を実行するコンピュータプログラム。
  13. 請求項11又は12記載のコンピュータプログラムを表す情報信号が記録されたコンピュータにより読取り可能な記録媒体。
JP2000338094A 1999-11-05 2000-11-06 オーディオ信号及び/又はビデオ信号生成装置、及びオーディオ信号及び/又はビデオ信号生成方法 Expired - Lifetime JP4591982B2 (ja)

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
GB9926321.2 1999-11-05
GBGB9926321.2A GB9926321D0 (en) 1999-11-05 1999-11-05 Recording and accessing metadata
GB0004973A GB2359918A (en) 2000-03-01 2000-03-01 Audio and/or video generation apparatus having a metadata generator
GB0004973.4 2000-03-01
GB0008435A GB2356080A (en) 1999-11-05 2000-04-05 Generation system for audio, video or a combination thereof where metadata is generated and stored or recorded with the audio/video signal
GB0008435.0 2000-04-05

Publications (2)

Publication Number Publication Date
JP2001216726A JP2001216726A (ja) 2001-08-10
JP4591982B2 true JP4591982B2 (ja) 2010-12-01

Family

ID=27255571

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000338094A Expired - Lifetime JP4591982B2 (ja) 1999-11-05 2000-11-06 オーディオ信号及び/又はビデオ信号生成装置、及びオーディオ信号及び/又はビデオ信号生成方法

Country Status (4)

Country Link
US (7) US7289717B1 (ja)
EP (1) EP1102271B8 (ja)
JP (1) JP4591982B2 (ja)
BR (1) BR0005253A (ja)

Families Citing this family (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1102271B8 (en) 1999-11-05 2016-12-07 Sony Europe Limited Method of generating audio and/or video signals and apparatus therefore
EP1187472B1 (en) 2000-02-07 2019-04-03 Sony Corporation Image processor and image processing method and recorded medium
EP1188164B1 (en) 2000-04-05 2011-10-05 Sony United Kingdom Limited Identifying and processing of audio and/or video material
JP4803544B2 (ja) * 2000-04-05 2011-10-26 ソニー ヨーロッパ リミテッド オーディオ/ビデオ再生装置及び方法
EP1300019A2 (en) * 2000-04-05 2003-04-09 Sony United Kingdom Limited Audio and/or video generation apparatus and method of generating audio and/or video signals
EP1208566A2 (en) * 2000-04-05 2002-05-29 Sony Uk Ltd INFORMATION IDENTIFICATION, RECORDING AND REPRODUCTION
KR100657267B1 (ko) * 2003-10-30 2006-12-14 삼성전자주식회사 검색을 위한 메타 정보가 포함된 저장 매체, 재생 장치 및그 재생 방법
EP1293911A1 (en) * 2001-08-21 2003-03-19 Deutsche Thomson-Brandt Gmbh Method and apparatus for generating editing-related metadata
WO2003026287A1 (fr) * 2001-09-13 2003-03-27 Sony Corporation Appareil d'enregistrement/reproduction d'informations et procede d'enregistrement/reproduction d'informations
JP2003163885A (ja) 2001-11-27 2003-06-06 Sony Corp データ記録方法およびデータ記録システムおよびデータ記録媒体
EP1480217A4 (en) * 2002-02-28 2008-05-07 Sony Corp DEVICE, METHOD AND PROGRAM FOR PROCESSING DATA
KR100872191B1 (ko) * 2002-09-27 2008-12-09 인터내셔널 비지네스 머신즈 코포레이션 발표 하이퍼링크 타임 테이블 생성 방법, 발표 처리 방법, 컴퓨팅 시스템 및 컴퓨터 판독가능한 기록 매체
GB2395781A (en) * 2002-11-29 2004-06-02 Sony Uk Ltd Face detection
CN100431016C (zh) * 2002-12-12 2008-11-05 皇家飞利浦电子股份有限公司 在媒体中创建数据/逻辑格式的方法、及媒体读取装置/方法
JP3637910B2 (ja) * 2003-04-04 2005-04-13 ソニー株式会社 データ処理方法およびそのシステム
JP3824163B2 (ja) 2003-04-04 2006-09-20 ソニー株式会社 記録制御装置および記録制御方法、プログラム、並びに記録媒体
JP4168837B2 (ja) 2003-06-03 2008-10-22 ソニー株式会社 情報生成装置、記録装置、再生装置、記録再生システムおよびその方法ならびにプログラム
EP1494237A1 (en) * 2003-07-01 2005-01-05 Deutsche Thomson-Brandt Gmbh Method and apparatus for editing a data stream
KR20050041797A (ko) * 2003-10-31 2005-05-04 삼성전자주식회사 확장 검색 기능을 제공하는 메타 정보 및 서브 타이틀정보가 기록된 저장 매체 및 그 재생 장치
JP4256250B2 (ja) * 2003-12-02 2009-04-22 パイオニア株式会社 データ記録システム、データ記録装置、データ送信装置、データ記録方法、並びに、記録プログラムおよびそれを記録した記録媒体
EP1742471B1 (en) * 2004-04-16 2012-07-18 Panasonic Corporation Imaging device and imaging system
KR100601677B1 (ko) * 2004-05-17 2006-07-14 삼성전자주식회사 저장 매체에 기록된 데이터와 다운로드된 데이터를 함께재생하는 재생 방법 및 그 재생 장치
KR100619064B1 (ko) 2004-07-30 2006-08-31 삼성전자주식회사 메타 데이터를 포함하는 저장 매체, 그 재생 장치 및 방법
KR100565080B1 (ko) * 2004-09-13 2006-03-30 삼성전자주식회사 대표 타이틀 정보가 부가된 메타 데이터를 포함한 av데이터를 기록한 정보저장매체, 그 재생장치 및 메타데이터 검색방법
KR100677601B1 (ko) 2004-11-11 2007-02-02 삼성전자주식회사 메타 데이터를 포함하는 영상 데이터를 기록한 저장매체,그 재생장치 및 메타 데이터를 이용한 검색방법
US8125859B2 (en) 2004-12-06 2012-02-28 Koninklijke Philips Electronics N.V. Method and device for extending interactivity to multiple storage media
TWI323456B (en) * 2005-01-07 2010-04-11 Samsung Electronics Co Ltd Storage medium storing metadata for providing enhanced search function
KR101029073B1 (ko) * 2005-11-14 2011-04-18 삼성전자주식회사 확장 검색 기능을 제공하기 위한 메타데이터가 기록된 저장매체 및 재생 장치
KR100782810B1 (ko) 2005-01-07 2007-12-06 삼성전자주식회사 확장 검색 기능을 제공하기 위한 메타데이터가 기록된 저장매체를 재생하는 방법 및 장치
JP2007287236A (ja) * 2006-04-17 2007-11-01 Sony Corp 記録再生装置及び再生装置
JP4508220B2 (ja) 2007-08-09 2010-07-21 ソニー株式会社 情報処理システム、記録装置、情報処理方法、及びプログラム
US20090086024A1 (en) * 2007-10-02 2009-04-02 Sam Systems, Inc. System and method for improving video compression efficiency
JP2009123303A (ja) * 2007-11-16 2009-06-04 Toshiba Corp 素材データ記録システム、リムーバブル記録媒体、記録装置及び、素材データ管理方法
JP5024000B2 (ja) * 2007-11-30 2012-09-12 ソニー株式会社 記録再生装置及びタイムコード復元方法
WO2009129621A1 (en) * 2008-04-25 2009-10-29 Gary Mark Symons Handheld recorder incorporating true raw audio or video certification
KR101029078B1 (ko) * 2008-07-30 2011-04-18 삼성전자주식회사 정보저장매체로부터 데이터를 재생하는 방법
JP2010124130A (ja) * 2008-11-18 2010-06-03 Toshiba Corp 蓄積素材再生装置及び蓄積素材再生方法
US8879895B1 (en) 2009-03-28 2014-11-04 Matrox Electronic Systems Ltd. System and method for processing ancillary data associated with a video stream
NO330120B1 (no) * 2009-05-14 2011-02-21 Drylab R & D As Fremgangsmate og innretning for a motta og modifisere bildedata
US8620967B2 (en) * 2009-06-11 2013-12-31 Rovi Technologies Corporation Managing metadata for occurrences of a recording
JP5369947B2 (ja) * 2009-07-09 2013-12-18 ソニー株式会社 撮像装置、画像処理方法及びプログラム
AT508623B1 (de) * 2009-07-16 2012-01-15 Jawoi Gmbh Anordnung zur videoaufnahme, übertragung und wiedergabe von veranstaltungen
US10531062B2 (en) * 2009-10-13 2020-01-07 Vincent Pace Stereographic cinematography metadata recording
US20120170914A1 (en) * 2011-01-04 2012-07-05 Sony Dadc Us Inc. Logging events in media files
US20140193083A1 (en) * 2013-01-09 2014-07-10 Nokia Corporation Method and apparatus for determining the relationship of an image to a set of images
US10438634B2 (en) * 2013-04-05 2019-10-08 Avid Technology, Inc. Content-based unique material identifiers
US9865306B2 (en) 2015-03-30 2018-01-09 International Business Machines Corporation System to distinguish between visually identical objects
US20170023182A1 (en) * 2015-04-08 2017-01-26 Jack D. Lollis Flanged pipe closure
US10649233B2 (en) * 2016-11-28 2020-05-12 Tectus Corporation Unobtrusive eye mounted display
US11017817B2 (en) 2017-03-27 2021-05-25 Sony Corporation Image processing apparatus, image processing method, camera apparatus, remote control apparatus, and camera system
CN106971749A (zh) * 2017-03-30 2017-07-21 联想(北京)有限公司 音频处理方法及电子设备
CN111108760B (zh) * 2017-09-29 2021-11-26 苹果公司 用于空间音频的文件格式
CN109992754B (zh) * 2017-12-29 2023-06-16 阿里巴巴(中国)有限公司 文档处理方法及装置
CN114449301B (zh) * 2022-01-14 2023-04-07 腾讯科技(深圳)有限公司 物品发送方法、装置、电子设备和计算机可读存储介质

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04245789A (ja) * 1991-01-30 1992-09-02 Nec Corp データ管理方法
JPH0520849A (ja) * 1991-07-09 1993-01-29 Matsushita Electric Ind Co Ltd 編集装置
JPH07162800A (ja) * 1993-12-07 1995-06-23 Hitachi Ltd 圧縮動画像記録装置及び再生装置
JPH07248726A (ja) * 1994-03-14 1995-09-26 Toshiba Corp Gps利用位置映像データ収集装置およびその再生装置
JPH08147943A (ja) * 1994-11-17 1996-06-07 Sony Corp 編集方法及びそのシステム
JPH0946633A (ja) * 1995-07-31 1997-02-14 Sony Corp カメラ一体型録画装置及び映像編集システム
JPH09238307A (ja) * 1996-02-29 1997-09-09 Victor Co Of Japan Ltd 監視映像の記録/再生装置
JPH09284707A (ja) * 1996-04-12 1997-10-31 Sony Corp 記録装置
WO1998036566A1 (fr) * 1997-02-14 1998-08-20 Sony Corporation Procede et systeme d'edition, enregistreur d'image, dispositif d'edition et support d'enregistrement
JPH10320969A (ja) * 1997-05-21 1998-12-04 Dainippon Screen Mfg Co Ltd 動画像データベースシステムおよび記録媒体
JPH11297038A (ja) * 1998-04-08 1999-10-29 Sony Corp 信号記録再生装置

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4425586A (en) * 1981-03-13 1984-01-10 Miller Richard L Apparatus and method for storing and interrelating visual data and computer information
JP2513182B2 (ja) 1986-04-09 1996-07-03 ソニー株式会社 デジタルビデオ信号の記録方法
JP2684695B2 (ja) 1988-08-05 1997-12-03 キヤノン株式会社 データ記録装置
KR950004703Y1 (ko) 1990-12-12 1995-06-13 삼성전자 주식회사 비데오 테이프 레코더의 자막신호기록 및 재생장치
KR0145007B1 (ko) 1992-07-31 1998-07-15 강진구 비데오 라이브러리 시스템 및 그 구현방법
US5687397A (en) 1993-02-26 1997-11-11 Sony Corporation System for expansion of data storage medium to store user data
US5488433A (en) * 1993-04-21 1996-01-30 Kinya Washino Dual compression format digital video production system
US5568205A (en) * 1993-07-26 1996-10-22 Telex Communications, Inc. Camera mounted wireless audio/video transmitter system
US5497241A (en) 1993-10-29 1996-03-05 Time Warner Entertainment Co., L.P. System and method for controlling display of motion picture subtitles in a selected language during play of a software carrier
US5526133A (en) * 1994-06-28 1996-06-11 Sensormatic Electronics Corporation System and method for logging and retrieving information on video cassettes in a computer controlled surveillance system
JP3575063B2 (ja) * 1994-07-04 2004-10-06 ソニー株式会社 再生装置、再生方法
JP3339210B2 (ja) * 1994-07-04 2002-10-28 ソニー株式会社 再生装置
GB2296601B (en) 1994-08-12 1998-10-21 Sony Corp Video signal recording device and editing device
EP0807352A1 (en) * 1995-01-31 1997-11-19 Transcenic, Inc Spatial referenced photography
US5642285A (en) * 1995-01-31 1997-06-24 Trimble Navigation Limited Outdoor movie camera GPS-position and time code data-logging for special effects production
US5910825A (en) 1995-05-09 1999-06-08 Sony Corporation Video signal transmitting apparatus with attendant data insertion and extraction functions
US6138147A (en) 1995-07-14 2000-10-24 Oracle Corporation Method and apparatus for implementing seamless playback of continuous media feeds
US6282362B1 (en) * 1995-11-07 2001-08-28 Trimble Navigation Limited Geographical position/image digital recording and display system
US5835163A (en) * 1995-12-21 1998-11-10 Siemens Corporate Research, Inc. Apparatus for detecting a cut in a video
GB2312078B (en) * 1996-04-12 1999-12-15 Sony Corp Cataloguing video information
US5870754A (en) * 1996-04-25 1999-02-09 Philips Electronics North America Corporation Video retrieval of MPEG compressed sequences using DC and motion signatures
US5940352A (en) 1996-10-08 1999-08-17 Nippon Columbia Co. Ltd. Record medium device for recording and reproducing time codes synchronized with input/reproduction signals into and from record medium having UTOC area, and record medium having UTOC area
US5956458A (en) * 1996-11-07 1999-09-21 Sharp Laboratories Of America, Inc. System and method for determining representative frames of video captured by a video camera
US6353461B1 (en) 1997-06-13 2002-03-05 Panavision, Inc. Multiple camera video assist control system
US6624846B1 (en) * 1997-07-18 2003-09-23 Interval Research Corporation Visual user interface for use in controlling the interaction of a device with a spatial region
US6360234B2 (en) * 1997-08-14 2002-03-19 Virage, Inc. Video cataloger system with synchronized encoders
AU729521B2 (en) 1997-09-15 2001-02-01 Canon Kabushiki Kaisha Content information gathering apparatus, system and method
US6392964B2 (en) 1997-09-19 2002-05-21 Sony Corporation Digital signal recording/reproducing apparatus and remote controlling apparatus capable of displaying program names in a plurality of display fields using different character symbols and recording and reproducing methods thereof
US6429879B1 (en) 1997-09-30 2002-08-06 Compaq Computer Corporation Customization schemes for content presentation in a device with converged functionality
US6064380A (en) * 1997-11-17 2000-05-16 International Business Machines Corporation Bookmark for multi-media content
US5956026A (en) * 1997-12-19 1999-09-21 Sharp Laboratories Of America, Inc. Method for hierarchical summarization and browsing of digital video
US6278446B1 (en) * 1998-02-23 2001-08-21 Siemens Corporate Research, Inc. System for interactive organization and browsing of video
JPH11273230A (ja) 1998-03-20 1999-10-08 Sony Corp 記録媒体、記録再生装置、及び記録再生方法
US6385772B1 (en) * 1998-04-30 2002-05-07 Texas Instruments Incorporated Monitoring system having wireless remote viewing and control
AU734202B2 (en) 1998-07-10 2001-06-07 Canon Kabushiki Kaisha Linking metadata with a time-sequential digital signal
JP3672437B2 (ja) * 1998-07-21 2005-07-20 株式会社リコー ネットワークファクシミリ装置
GB2354105A (en) * 1999-09-08 2001-03-14 Sony Uk Ltd System and method for navigating source content
EP1102271B8 (en) 1999-11-05 2016-12-07 Sony Europe Limited Method of generating audio and/or video signals and apparatus therefore

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04245789A (ja) * 1991-01-30 1992-09-02 Nec Corp データ管理方法
JPH0520849A (ja) * 1991-07-09 1993-01-29 Matsushita Electric Ind Co Ltd 編集装置
JPH07162800A (ja) * 1993-12-07 1995-06-23 Hitachi Ltd 圧縮動画像記録装置及び再生装置
JPH07248726A (ja) * 1994-03-14 1995-09-26 Toshiba Corp Gps利用位置映像データ収集装置およびその再生装置
JPH08147943A (ja) * 1994-11-17 1996-06-07 Sony Corp 編集方法及びそのシステム
JPH0946633A (ja) * 1995-07-31 1997-02-14 Sony Corp カメラ一体型録画装置及び映像編集システム
JPH09238307A (ja) * 1996-02-29 1997-09-09 Victor Co Of Japan Ltd 監視映像の記録/再生装置
JPH09284707A (ja) * 1996-04-12 1997-10-31 Sony Corp 記録装置
WO1998036566A1 (fr) * 1997-02-14 1998-08-20 Sony Corporation Procede et systeme d'edition, enregistreur d'image, dispositif d'edition et support d'enregistrement
JPH10320969A (ja) * 1997-05-21 1998-12-04 Dainippon Screen Mfg Co Ltd 動画像データベースシステムおよび記録媒体
JPH11297038A (ja) * 1998-04-08 1999-10-29 Sony Corp 信号記録再生装置

Also Published As

Publication number Publication date
US20140044405A1 (en) 2014-02-13
EP1102271B8 (en) 2016-12-07
US8543560B2 (en) 2013-09-24
US9204119B2 (en) 2015-12-01
BR0005253A (pt) 2001-06-19
EP1102271A1 (en) 2001-05-23
US10200766B2 (en) 2019-02-05
US20080040394A1 (en) 2008-02-14
US20120263436A1 (en) 2012-10-18
US8842964B2 (en) 2014-09-23
EP1102271B1 (en) 2016-08-31
US20160337714A1 (en) 2016-11-17
JP2001216726A (ja) 2001-08-10
US20150312543A1 (en) 2015-10-29
US10200767B2 (en) 2019-02-05
US7289717B1 (en) 2007-10-30
US8331759B2 (en) 2012-12-11
US20120263435A1 (en) 2012-10-18

Similar Documents

Publication Publication Date Title
JP4591982B2 (ja) オーディオ信号及び/又はビデオ信号生成装置、及びオーディオ信号及び/又はビデオ信号生成方法
USRE41939E1 (en) Audio/video reproducing apparatus and method
US8214858B2 (en) Audio and/or video generation apparatus and method of generating audio and/or video signals
JP2003529990A (ja) オーディオ及び/又はビデオマテリアルの識別及び処理方法
GB2356080A (en) Generation system for audio, video or a combination thereof where metadata is generated and stored or recorded with the audio/video signal
GB2361128A (en) Video and/or audio processing apparatus
GB2361097A (en) A system for generating audio/video productions
GB2361127A (en) Audio/video reproduction via a communications network
GB2361096A (en) Metadata generation in audio or video apparatus
GB2361098A (en) Editing system and method using metadata
GB2361090A (en) Generating sample images to assist video editing

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071015

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20080411

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20080415

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090210

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090511

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090707

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091007

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20091222

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100422

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20100510

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100727

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100730

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100817

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100910

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130924

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4591982

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term