JP4469868B2 - 説明表現付加装置、プログラムおよび説明表現付加方法 - Google Patents
説明表現付加装置、プログラムおよび説明表現付加方法 Download PDFInfo
- Publication number
- JP4469868B2 JP4469868B2 JP2007082620A JP2007082620A JP4469868B2 JP 4469868 B2 JP4469868 B2 JP 4469868B2 JP 2007082620 A JP2007082620 A JP 2007082620A JP 2007082620 A JP2007082620 A JP 2007082620A JP 4469868 B2 JP4469868 B2 JP 4469868B2
- Authority
- JP
- Japan
- Prior art keywords
- scene
- information
- meta information
- scenes
- text information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/11—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/7844—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using original textual content or text extracted from visual content or transcript of audio data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Library & Information Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Television Signal Processing For Recording (AREA)
- Information Transfer Between Computers (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
本発明の第1の実施の形態を図1ないし図22に基づいて説明する。
図1は、本発明の第1の実施の形態にかかるコメント閲覧システム100のシステム構築例を示す模式図である。コメント閲覧システム100は、映像コンテンツへのリンクを持つコメントを共有するシステムであって、図1に示すように、ユーザ間で共有する映像コンテンツへのリンクを持つコメントを蓄積するサーバコンピュータであるコメント蓄積装置1に対してIP(Internet Protocol)を利用したインターネットなどのネットワーク2を介して、ユーザが映像コンテンツへのリンクを持つコメントを書くためのクライアントコンピュータであるコメント作成閲覧装置3が複数台接続されたサーバクライアントシステムを想定する。加えて、本実施の形態においては、ユーザがコメントを書く際にブックマークしたシーンなどに説明表現を付加する機能を発揮する説明表現付加装置4がネットワーク2に接続されている。
まず、コメント作成閲覧装置3のコメント作成機能について説明する。コメント作成閲覧装置3のコメント作成部13は、図6に示すような画面50を表示部107に表示させることにより、ユーザが映像コンテンツへのリンクを持つコメントを書くための書き込みUI(User Interface)機能を提供している。
次に、本実施の形態において特徴的な機能を発揮する説明表現付加装置4の説明表現付加部42について詳述する。ここで、図8は説明表現付加部42の構成を示すブロック図、図9は説明表現付加部42におけるシーンメタデータ抽出処理の流れを示すフローチャートである。
ここでコメント作成閲覧装置3における説明表現の具体的な表示処理について具体例を挙げて説明する。例えば、図21に示すように、コメント作成閲覧装置3の表示部107に表示された画面50のテキスト情報編集部53において、シーンリンクがいくつも埋め込まれたコメントを読むときに、アイコンとして表示されたシーンリンク60の上にマウス(入力部108)のポインタを置いたときの動作の例である。この場合、説明表現を付加したいシーン集合がコメント作成閲覧装置3から説明表現付加装置4へ送られ、説明表現付加装置4の説明表現付加部42がブックマークしたシーンに対して説明表現を関連付けた表Xを生成した後、UIを介してコメント作成閲覧装置3に説明表現が提示される。より具体的には、図21に示すように、選択されたシーンリンク60の近くに、説明表現付加装置4において生成された表Xで当該シーンリンク60に関連付けられた説明表現70をポップアップ表示してやることで、それぞれのシーンがどのような差分のもとでリンクされたかを判別することができる。また、図22に示すように、コメント本文の一部や全部を選択状態にしてやれば、選択された部分に含まれるシーンリンク60の説明表現70を同じようにポップアップ表示してやることで、それぞれのシーンがどのような差分のもとでリンクされたかを判別することができる。
次に、本発明の第2の実施の形態を図23および図24に基づいて説明する。なお、前述した第1の実施の形態と同じ部分は同じ符号で示し説明も省略する。
21 収集手段
22 切出し手段
23 抽出手段
24 重み付け手段
25 抽出手段
26 格納手段
28 入力手段
29 検索手段
30 選択手段
32 付加手段
Claims (9)
- 映像コンテンツのシーンに係る所定時刻と当該所定時刻の前記シーンに係るテキスト情報を収集する収集手段と、
収集した前記テキスト情報から部分的なテキスト情報の切り出しを行なう切出し手段と、
時刻の差または切り出した部分的なテキスト情報に含まれる単語集合の類似度を用いてシーンの同一性を判定して、収集した前記各シーンの内、物理的には異なるが論理的には同一であると考えられる前記シーンを同一シーンとしてまとめて抽出する抽出手段と、
前記抽出手段によって同一シーンとしてまとめて抽出された前記シーンに係る前記部分的なテキスト情報を解析して、前記シーン毎の前記部分的なテキスト情報に含まれる単語情報に対する重みの集計を行う重み付け手段と、
予め設定された閾値を超える前記単語情報を、前記シーンに何が映っているかというメタ情報として抽出する単語情報抽出手段と、
前記映像コンテンツの所定時刻のシーンと当該シーンの前記メタ情報の集合との組み合わせであるシーンメタ情報を格納する格納手段と、
複数の前記シーンを含むシーン集合の入力を受け付ける入力手段と、
前記シーン集合に含まれる各シーンに対応するメタ情報の集合を前記シーンメタ情報から検索する検索手段と、
前記検索手段で検索されたシーンとメタ情報の組み合わせに基づき前記シーン集合に含まれるシーン毎にメタ情報間の距離が大きくなるように全てのシーンにまたがって出現しているメタ情報を削除することにより、差分の大きなメタ情報を選択して各シーンの説明表現として前記シーン毎に付加する付加手段と、
を備え、
前記付加手段は、全てのシーンにまたがって出現しているメタ情報の削除後、残っているそれぞれのシーンの前後に特徴的なシーンが存在する場合は、そのシーンとの時間関係を利用して時系列表現を付ける、
ことを特徴とする説明表現付加装置。 - 前記収集手段で収集される前記テキスト情報は、ネットワーク上のコメント蓄積装置に蓄積される前記映像コンテンツの所定時刻のシーンに係るテキスト情報を含むコメント情報である、
ことを特徴とする請求項1記載の説明表現付加装置。 - 前記収集手段で収集される前記テキスト情報は、前記映像コンテンツの所定時刻のシーンに係るテキスト情報であるクローズドキャプション(Closed captioning:字幕放送)である、
ことを特徴とする請求項1記載の説明表現付加装置。 - 前記収集手段で収集される前記テキスト情報は、前記映像コンテンツの所定時刻のシーンに係るテキスト情報であるEPG(Electronic Program Guide)である、
ことを特徴とする請求項1記載の説明表現付加装置。 - 前記付加手段は、予め順序付けされている前記メタ情報の分類クラスの順に、前記各メタ情報間の距離を算出する、
ことを特徴とする請求項1記載の説明表現付加装置。 - 前記付加手段は、ユーザ嗜好により予め順序付けされている前記メタ情報の分類クラスの順に、前記各メタ情報間の距離を算出する、
ことを特徴とする請求項1記載の説明表現付加装置。 - 前記付加手段は、前記シーン集合に含まれる各シーンに対応する前記メタ情報の集合に含まれる前記各メタ情報間の距離を計算し、前記各メタ情報間の距離が最大となる組み合わせを説明表現として選択する、
ことを特徴とする請求項1記載の説明表現付加装置。 - 映像コンテンツのシーンに係る所定時刻と当該所定時刻の前記シーンに係る前記テキスト情報を収集する収集機能と、
収集した前記テキスト情報から部分的なテキスト情報の切り出しを行なう切出し機能と、
時刻の差または切り出した部分的なテキスト情報に含まれる単語集合の類似度を用いてシーンの同一性を判定して、収集した前記各シーンの内、物理的には異なるが論理的には同一であると考えられる前記シーンを同一シーンとしてまとめて抽出する抽出機能と、
前記抽出機能によって同一シーンとしてまとめて抽出された前記シーンに係る前記部分的なテキスト情報を解析して、前記シーン毎の前記部分的なテキスト情報に含まれる単語情報に対する重みの集計を行う重み付け機能と、
予め設定された閾値を超える前記単語情報を、前記シーンに何が映っているかというメタ情報として抽出する単語情報抽出機能と、
前記映像コンテンツの所定時刻のシーンと当該シーンの前記メタ情報の集合との組み合わせであるシーンメタ情報を記憶部に格納する格納機能と、
複数の前記シーンを含むシーン集合の入力を受け付ける入力機能と、
前記シーン集合に含まれる各シーンに対応するメタ情報の集合を、前記記憶部に格納されている前記シーンメタ情報から検索する検索機能と、
前記検索機能で検索されたシーンとメタ情報の組み合わせに基づき前記シーン集合に含まれるシーン毎にメタ情報間の距離が大きくなるように全てのシーンにまたがって出現しているメタ情報を削除することにより、差分の大きなメタ情報を選択して各シーンの説明表現として前記シーン毎に付加する付加機能と、
をコンピュータに実行させ、
前記付加機能は、全てのシーンにまたがって出現しているメタ情報の削除後、残っているそれぞれのシーンの前後に特徴的なシーンが存在する場合は、そのシーンとの時間関係を利用して時系列表現を付ける、
ことを特徴とするプログラム。 - 説明表現付加装置で実行される説明表現付加方法であって、
前記説明表現付加装置は、制御部と記憶部を備え、
前記制御部において実行される、
収集手段が、映像コンテンツのシーンに係る所定時刻と当該所定時刻の前記シーンに係る前記テキスト情報を収集する工程と、
切出し手段が、収集した前記テキスト情報から部分的なテキスト情報の切り出しを行なう工程と、
抽出手段が、時刻の差または切り出した部分的なテキスト情報に含まれる単語集合の類似度を用いてシーンの同一性を判定して、収集した前記各シーンの内、物理的には異なるが論理的には同一であると考えられる前記シーンを同一シーンとしてまとめて抽出する工程と、
重み付け手段が、前記抽出手段によって同一シーンとしてまとめて抽出された前記シーンに係る前記部分的なテキスト情報を解析して、前記シーン毎の前記部分的なテキスト情報に含まれる単語情報に対する重みの集計を行う工程と、
単語情報抽出手段が、予め設定された閾値を超える前記単語情報を、前記シーンに何が映っているかというメタ情報として抽出する工程と、
格納手段が、前記映像コンテンツの所定時刻のシーンと当該シーンの前記メタ情報の集合との組み合わせであるシーンメタ情報を記憶部に格納する工程と、
入力手段が、複数の前記シーンを含むシーン集合の入力を受け付ける工程と、
検索手段が、前記シーン集合に含まれる各シーンに対応するメタ情報の集合を、前記記憶部に格納されている前記シーンメタ情報から検索する工程と、
付加手段が、前記検索手段で検索されたシーンとメタ情報の組み合わせに基づき前記シーン集合に含まれるシーン毎にメタ情報間の距離が大きくなるように全てのシーンにまたがって出現しているメタ情報を削除することにより、差分の大きなメタ情報を選択して各シーンの説明表現として前記シーン毎に付加する工程と、
を含み、
前記付加手段は、全てのシーンにまたがって出現しているメタ情報の削除後、残っているそれぞれのシーンの前後に特徴的なシーンが存在する場合は、そのシーンとの時間関係を利用して時系列表現を付ける、
ことを特徴とする説明表現付加方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007082620A JP4469868B2 (ja) | 2007-03-27 | 2007-03-27 | 説明表現付加装置、プログラムおよび説明表現付加方法 |
US12/049,767 US8931002B2 (en) | 2007-03-27 | 2008-03-17 | Explanatory-description adding apparatus, computer program product, and explanatory-description adding method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007082620A JP4469868B2 (ja) | 2007-03-27 | 2007-03-27 | 説明表現付加装置、プログラムおよび説明表現付加方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008242838A JP2008242838A (ja) | 2008-10-09 |
JP4469868B2 true JP4469868B2 (ja) | 2010-06-02 |
Family
ID=39794536
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007082620A Expired - Fee Related JP4469868B2 (ja) | 2007-03-27 | 2007-03-27 | 説明表現付加装置、プログラムおよび説明表現付加方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8931002B2 (ja) |
JP (1) | JP4469868B2 (ja) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10282481B2 (en) * | 2009-07-31 | 2019-05-07 | Oath Inc. | Providing link to portion of media object in real time in social networking update |
WO2011071309A2 (en) * | 2009-12-09 | 2011-06-16 | Samsung Electronics Co., Ltd. | Method and apparatus for sharing comments regarding content |
JP2012155695A (ja) * | 2011-01-07 | 2012-08-16 | Kddi Corp | 動画コンテンツにおける注目シーンにキーワードタグを付与するプログラム、端末、サーバ及び方法 |
KR20120099836A (ko) * | 2011-03-02 | 2012-09-12 | 삼성전자주식회사 | 이동통신 단말기에서 댓글을 공유하기 위한 장치 및 방법 |
JP5849463B2 (ja) * | 2011-06-29 | 2016-01-27 | ソニー株式会社 | サーバ装置、システム、プログラム及び処理方法 |
EP2608431A1 (en) | 2011-12-19 | 2013-06-26 | Thomson Licensing | Method for processing an audiovisual content and corresponding device |
US9008489B2 (en) | 2012-02-17 | 2015-04-14 | Kddi Corporation | Keyword-tagging of scenes of interest within video content |
JP2014068290A (ja) * | 2012-09-27 | 2014-04-17 | Sony Corp | 画像処理装置、画像処理方法、およびプログラム |
JP6702657B2 (ja) * | 2015-05-29 | 2020-06-03 | キヤノン株式会社 | 映像処理装置、映像処理方法、及びプログラム |
US20170351678A1 (en) * | 2016-06-03 | 2017-12-07 | Facebook, Inc. | Profile Suggestions |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030093790A1 (en) * | 2000-03-28 | 2003-05-15 | Logan James D. | Audio and video program recording, editing and playback systems using metadata |
JP3996723B2 (ja) | 1999-06-21 | 2007-10-24 | 株式会社日立製作所 | 画像表示方法および装置およびこれを利用した検索サービス |
US7739601B1 (en) * | 2002-01-23 | 2010-06-15 | Microsoft Corporation | Media authoring and presentation |
KR100912984B1 (ko) * | 2002-04-12 | 2009-08-20 | 미쓰비시덴키 가부시키가이샤 | 메타데이터 편집 장치, 메타데이터 재생 장치, 메타데이터 배신 장치, 메타데이터 검색 장치, 메타데이터 재생성 조건 설정 장치, 콘텐츠 배신 장치, 메타데이터 배신 방법, 메타데이터 재생성 장치, 메타데이터 재생성 방법 |
JP3982460B2 (ja) | 2003-06-06 | 2007-09-26 | 日本電信電話株式会社 | コンテンツ連動型コメント表示方法、コメント表示システム、サーバ装置、コメント表示装置及びコメント表示プログラム及びコンピュータ読み取り可能な記録媒体 |
JP4270118B2 (ja) | 2004-11-30 | 2009-05-27 | 日本電信電話株式会社 | 映像シーンに対する意味ラベル付与方法及び装置及びプログラム |
JP4561453B2 (ja) * | 2005-04-19 | 2010-10-13 | 株式会社日立製作所 | 記録再生装置、記録再生方法 |
US8196045B2 (en) * | 2006-10-05 | 2012-06-05 | Blinkx Uk Limited | Various methods and apparatus for moving thumbnails with metadata |
-
2007
- 2007-03-27 JP JP2007082620A patent/JP4469868B2/ja not_active Expired - Fee Related
-
2008
- 2008-03-17 US US12/049,767 patent/US8931002B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2008242838A (ja) | 2008-10-09 |
US8931002B2 (en) | 2015-01-06 |
US20080240671A1 (en) | 2008-10-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4469868B2 (ja) | 説明表現付加装置、プログラムおよび説明表現付加方法 | |
US8392834B2 (en) | Systems and methods of authoring a multimedia file | |
US10096145B2 (en) | Method and system for assembling animated media based on keyword and string input | |
US6834371B1 (en) | System and method for controlling synchronization of a time-based presentation and its associated assets | |
JP5539904B2 (ja) | ビデオインターバルへの注釈 | |
US20170318319A1 (en) | Simultaneously rendering a plurality of digital media streams in a synchronized manner by using a descriptor file | |
US7908556B2 (en) | Method and system for media landmark identification | |
US6839059B1 (en) | System and method for manipulation and interaction of time-based mixed media formats | |
US8805830B2 (en) | Web application for accessing media streams | |
US6922702B1 (en) | System and method for assembling discrete data files into an executable file and for processing the executable file | |
US20100262909A1 (en) | Method of Displaying Music Information in Multimedia Playback and Related Electronic Device | |
CN101183380B (zh) | 内容过滤方法及其装置 | |
JPH1098684A (ja) | 電子サーチ・検索に適したフォーマットでのビデオプログラム圧縮表現自動提供方法 | |
JP2008234431A (ja) | コメント蓄積装置、コメント作成閲覧装置、コメント閲覧システムおよびプログラム | |
JP2001028722A (ja) | 動画像管理装置及び動画像管理システム | |
JP3574606B2 (ja) | 映像の階層的管理方法および階層的管理装置並びに階層的管理プログラムを記録した記録媒体 | |
JP2007025786A (ja) | コンテンツ検索装置、コンテンツ検索プログラムおよびコンテンツ検索方法 | |
JP4836068B2 (ja) | コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法 | |
JP2000010986A (ja) | ドキュメントデータベースの検索支援方法とそのプログラムを記憶した記憶媒体 | |
JP2012068982A (ja) | 検索結果出力装置、検索結果出力方法及び検索結果出力プログラム | |
JP2007034960A (ja) | コンテンツ処理装置、コンテンツ処理プログラムおよびコンテンツ処理方法 | |
WO2002005135A2 (en) | Method and system for indexing and searching timed media information based upon relevance intervals | |
JP4120597B2 (ja) | 部分コンテンツ作成方法及び装置及びプログラム | |
JP2008312172A (ja) | 動画表示装置 | |
Christel et al. | XSLT for tailored access to a digtal video library |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090326 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090526 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090727 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091013 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091214 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100202 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100301 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130305 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130305 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140305 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |