JP2020079982A - 動画のためのタグ付け装置、方法、およびプログラム - Google Patents
動画のためのタグ付け装置、方法、およびプログラム Download PDFInfo
- Publication number
- JP2020079982A JP2020079982A JP2018212076A JP2018212076A JP2020079982A JP 2020079982 A JP2020079982 A JP 2020079982A JP 2018212076 A JP2018212076 A JP 2018212076A JP 2018212076 A JP2018212076 A JP 2018212076A JP 2020079982 A JP2020079982 A JP 2020079982A
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- tag
- scene
- text information
- image file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Transfer Between Computers (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
上述したタグ付け装置10を、Web環境で実現した例を、実施例1として説明する。
実施例1で説明したタグ付け装置の変形例を、実施例2として説明する。
11・・動画ファイル受付部、
12・・音声認識部、
13・・画像解析部、
14・・テロップ認識部、
15・・顔認識部、
16・・パーソナル情報取得部、
17・・シーン分割部、
18・・タグ抽出部、
19・・タグ付与部、
20・・表示制御部、
21・・変更部、
22・・表示画面、
23・・記憶部、
23a・・辞書データ、
23b・・タグ情報データベース、
23c・・パーソナル情報データベース、
110・・処理サーバ、
120・・音声認識エンジン、
130・・言語解析エンジン、
140、142・・ユーザ端末、
150・・インターネット、
160・・動画配信プラットフォーム。
Claims (14)
- 動画ファイルを音声認識してテキスト情報へ変換する音声認識部と、
前記動画ファイルを画像解析し、前記動画ファイルにおけるシーンの切り替わりを判定する画像解析部と、
前記テキスト情報における時間的な切れ目と、前記テキスト情報における内容的な切れ目と、前記シーンの切り替わりとに基づいて、前記動画ファイルを複数のシーンに分割するシーン分割部と、
前記テキスト情報から、予め定められた規則に従って、タグを抽出するタグ抽出部と、
前記抽出されたタグを、前記複数のシーンのうち、対応するシーンに付与するタグ付与部と、
を備えたタグ付け装置。 - 前記動画ファイルにおいて表示されるテロップを認識し、前記テロップのテキスト情報を取得するテロップ認識部をさらに備え、
前記シーン分割部はさらに、前記テロップ認識部によってテロップが認識されたことに基づいて、前記動画ファイルを複数のシーンに分割し、
前記タグ抽出部はさらに、前記テロップのテキスト情報から、予め定められた規則に従って、タグを抽出する、請求項1に記載のタグ付け装置。 - 前記動画ファイルに登場する人物の顔を認識する顔認識部と、
前記顔認識部によって顔を認識された人物のパーソナル情報を示すテキスト情報を取得するパーソナル情報取得部とをさらに備え、
前記シーン分割部はさらに、前記顔認識部によって顔が認識されたことに基づいて、前記動画ファイルを複数のシーンに分割し、
前記タグ抽出部はさらに、前記パーソナル情報取得部によって取得されたテキスト情報から、予め定められた規則に従って、タグを抽出する、請求項2に記載のタグ付け装置。 - 前記シーン分割部は、前記テキスト情報における時間的な切れ目と、前記テキスト情報における内容的な切れ目と、前記シーンの切り替わりと、前記テロップが認識されたタイミングと、前記パーソナル情報取得部によってテキスト情報が取得されたタイミングとに基づく機械学習モデルを作成し、前記機械学習モデルを用いて、前記動画ファイルを前記複数のシーンに分割する、請求項3に記載のタグ付け装置。
- 前記時間的な切れ目は、前記動画ファイルにおいて、音声の途切れが、予め決定されたしきい値を超えた場合に対応する、請求項1に記載のタグ付け装置。
- 前記シーンの切り替わりは、前記動画ファイルの映像において、話者が正面を向いたときである、請求項1に記載のタグ付け装置。
- 前記シーンの切り替わりは、前記動画ファイルの映像において、話者が変わったときである、請求項1に記載のタグ付け装置。
- 前記シーンの切り替わりは、前記動画ファイルにおいて、映像が切り替わったときである、請求項1に記載のタグ付け装置。
- 前記タグ付与部によって、前記対応するシーンに付与されたタグを、指定された分類別に表示画面から表示させる表示制御部をさらに備えた、請求項1乃至8のうち何れか1項に記載のタグ付け装置。
- 前記指定された分類は、会社コード、企業名、組織名、人名、テーマ情報、業界情報、およびジャンルのうちの少なくとも何れかを含む、請求項9に記載のタグ付け装置。
- 前記タグ付与部によって、前記対応するシーンに付与されたタグの削除、および、前記対応するシーンへの任意のタグの付与のうちの少なくとも何れかを、ユーザ指示に従って行う変更部をさらに備えた、請求項1乃至10のうち何れか1項に記載のタグ付け装置。
- 前記シーン分割部によって分割されたシーンの分割位置を、ユーザ指示に従って変更する変更部をさらに備えた、請求項1乃至10のうち何れか1項に記載のタグ付け装置。
- プロセッサによって実施されるタグ付け方法であって、
前記プロセッサが、動画ファイルを音声認識してテキスト情報へ変換し、
前記プロセッサが、前記動画ファイルを画像解析し、前記動画ファイルにおけるシーンの切り替わりを判定し、
前記プロセッサが、前記テキスト情報における時間的な切れ目と、前記テキスト情報における内容的な切れ目と、前記シーンの切り替わりとに基づいて、前記動画ファイルを複数のシーンに分割し、
前記プロセッサが、前記テキスト情報から、予め定められた規則に従って、タグを抽出し、
前記プロセッサが、前記抽出されたタグを、前記複数のシーンのうち、対応するシーンに付与する、タグ付け方法。 - 動画ファイルを音声認識してテキスト情報へ変換する機能、
前記動画ファイルを画像解析し、前記動画ファイルにおけるシーンの切り替わりを判定する機能、
前記テキスト情報における時間的な切れ目と、前記テキスト情報における内容的な切れ目と、前記シーンの切り替わりとに基づいて、前記動画ファイルを複数のシーンに分割する機能、
前記テキスト情報から、予め定められた規則に従って、タグを抽出する機能、
前記抽出されたタグを、前記複数のシーンのうち、対応するシーンに付与する機能、
をプロセッサに実現させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018212076A JP6669952B1 (ja) | 2018-11-12 | 2018-11-12 | 動画のためのタグ付け装置、方法、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018212076A JP6669952B1 (ja) | 2018-11-12 | 2018-11-12 | 動画のためのタグ付け装置、方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6669952B1 JP6669952B1 (ja) | 2020-03-18 |
JP2020079982A true JP2020079982A (ja) | 2020-05-28 |
Family
ID=70000711
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018212076A Active JP6669952B1 (ja) | 2018-11-12 | 2018-11-12 | 動画のためのタグ付け装置、方法、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6669952B1 (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102242953B1 (ko) * | 2020-07-14 | 2021-04-21 | 주식회사 포레스팅 | 주문형 콘텐츠 제작 방법, 서버 및 프로그램 |
JP2022139053A (ja) * | 2021-03-11 | 2022-09-26 | 株式会社アドバンスト・メディア | 検索支援サーバ、検索支援方法及びコンピュータプログラム |
JP2022139052A (ja) * | 2021-03-11 | 2022-09-26 | 株式会社アドバンスト・メディア | 検索支援サーバ、検索支援方法及びコンピュータプログラム |
WO2024010752A1 (en) * | 2022-07-07 | 2024-01-11 | Getac Technology Corporation | Audio content searching in multi-media |
JP7483784B2 (ja) | 2022-04-22 | 2024-05-15 | ソフトバンク株式会社 | 情報処理装置、情報処理方法、及びプログラム |
WO2024135873A1 (ko) * | 2022-12-20 | 2024-06-27 | 주식회사 하비텐 | 방송 동영상과 자막언어 빅데이터를 활용한 비대면 외국어 학습 영상 ai 검색 시스템 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111613212B (zh) * | 2020-05-13 | 2023-10-31 | 携程旅游信息技术(上海)有限公司 | 语音识别方法、***、电子设备和存储介质 |
CN113225618A (zh) * | 2021-05-06 | 2021-08-06 | 阿里巴巴新加坡控股有限公司 | 一种视频剪辑方法及装置 |
CN114374813B (zh) * | 2021-12-13 | 2024-07-02 | 青岛海信移动通信技术有限公司 | 多媒体资源管理方法、记录仪及服务器 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006025272A1 (ja) * | 2004-09-01 | 2006-03-09 | Nec Corporation | 映像分類装置、映像分類プログラム、映像検索装置、および映像検索プログラム |
JP2008288694A (ja) * | 2007-05-15 | 2008-11-27 | Sony Corp | 情報処理装置および情報処理方法、並びにプログラム |
JP2009239729A (ja) * | 2008-03-27 | 2009-10-15 | Toshiba Corp | コンテンツのシーン出現を通知する装置、方法およびプログラム |
JP2010187374A (ja) * | 2009-01-15 | 2010-08-26 | Victor Co Of Japan Ltd | 要約映像生成装置および要約映像生成方法 |
JP2010220065A (ja) * | 2009-03-18 | 2010-09-30 | Toshiba Corp | コンテンツ推薦装置及びコンテンツ推薦方法 |
JP2018169697A (ja) * | 2017-03-29 | 2018-11-01 | 西日本電信電話株式会社 | 映像データ処理装置、映像データ処理方法、及びコンピュータプログラム |
-
2018
- 2018-11-12 JP JP2018212076A patent/JP6669952B1/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006025272A1 (ja) * | 2004-09-01 | 2006-03-09 | Nec Corporation | 映像分類装置、映像分類プログラム、映像検索装置、および映像検索プログラム |
JP2008288694A (ja) * | 2007-05-15 | 2008-11-27 | Sony Corp | 情報処理装置および情報処理方法、並びにプログラム |
JP2009239729A (ja) * | 2008-03-27 | 2009-10-15 | Toshiba Corp | コンテンツのシーン出現を通知する装置、方法およびプログラム |
JP2010187374A (ja) * | 2009-01-15 | 2010-08-26 | Victor Co Of Japan Ltd | 要約映像生成装置および要約映像生成方法 |
JP2010220065A (ja) * | 2009-03-18 | 2010-09-30 | Toshiba Corp | コンテンツ推薦装置及びコンテンツ推薦方法 |
JP2018169697A (ja) * | 2017-03-29 | 2018-11-01 | 西日本電信電話株式会社 | 映像データ処理装置、映像データ処理方法、及びコンピュータプログラム |
Non-Patent Citations (2)
Title |
---|
望月 貴裕、外2名: "数値列化したイベントシーンの学習による野球イベント識別手法の実試合映像への適用", 画像ラボ, vol. 第20巻,第2号, JPN6019034649, 10 February 2009 (2009-02-10), JP, pages 61 - 67, ISSN: 0004110264 * |
金寺 登、外3名: "統計的な手法による動画シーン分割性能の改善", 第2回音声ドキュメント処理ワークショップ講演論文集, JPN6019034647, 1 March 2008 (2008-03-01), JP, pages 129 - 136, ISSN: 0004110263 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102242953B1 (ko) * | 2020-07-14 | 2021-04-21 | 주식회사 포레스팅 | 주문형 콘텐츠 제작 방법, 서버 및 프로그램 |
JP2022139053A (ja) * | 2021-03-11 | 2022-09-26 | 株式会社アドバンスト・メディア | 検索支援サーバ、検索支援方法及びコンピュータプログラム |
JP2022139052A (ja) * | 2021-03-11 | 2022-09-26 | 株式会社アドバンスト・メディア | 検索支援サーバ、検索支援方法及びコンピュータプログラム |
JP7257010B2 (ja) | 2021-03-11 | 2023-04-13 | 株式会社アドバンスト・メディア | 検索支援サーバ、検索支援方法及びコンピュータプログラム |
JP7297266B2 (ja) | 2021-03-11 | 2023-06-26 | 株式会社アドバンスト・メディア | 検索支援サーバ、検索支援方法及びコンピュータプログラム |
JP7483784B2 (ja) | 2022-04-22 | 2024-05-15 | ソフトバンク株式会社 | 情報処理装置、情報処理方法、及びプログラム |
WO2024010752A1 (en) * | 2022-07-07 | 2024-01-11 | Getac Technology Corporation | Audio content searching in multi-media |
WO2024135873A1 (ko) * | 2022-12-20 | 2024-06-27 | 주식회사 하비텐 | 방송 동영상과 자막언어 빅데이터를 활용한 비대면 외국어 학습 영상 ai 검색 시스템 |
Also Published As
Publication number | Publication date |
---|---|
JP6669952B1 (ja) | 2020-03-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6669952B1 (ja) | 動画のためのタグ付け装置、方法、およびプログラム | |
US8818803B2 (en) | Character-based automated text summarization | |
CN101150699B (zh) | 信息处理装置和信息处理方法 | |
JP4439462B2 (ja) | 情報提示方法、情報提示装置及び情報提示プログラム | |
CN112740713B (zh) | 用于提供多媒体内容中的关键时刻的方法及其电子设备 | |
US20080079693A1 (en) | Apparatus for displaying presentation information | |
JP4550725B2 (ja) | 映像視聴支援システム | |
US20100088726A1 (en) | Automatic one-click bookmarks and bookmark headings for user-generated videos | |
US20180308524A1 (en) | System and method for preparing and capturing a video file embedded with an image file | |
JP2008278088A (ja) | 動画コンテンツに関するコメント管理装置 | |
JP2001028722A (ja) | 動画像管理装置及び動画像管理システム | |
CN111885416B (zh) | 一种音视频的修正方法、装置、介质及计算设备 | |
CN111885313A (zh) | 一种音视频的修正方法、装置、介质及计算设备 | |
JP2010165030A (ja) | 文書管理システム、文書管理方法および文書管理プログラム | |
CN113395605B (zh) | 视频笔记生成方法及装置 | |
JP4197014B2 (ja) | 映像の検索方法および装置 | |
WO2024108981A1 (zh) | 视频剪辑方法及装置 | |
US20110258546A1 (en) | Edited information provision device, edited information provision method, program, and recording medium | |
JPH06253255A (ja) | 映像インデックス表示装置 | |
JP2002108892A (ja) | データ管理システム、データ管理方法、及び、記録媒体 | |
CN114666637A (zh) | 视频剪辑方法、音频剪辑方法及电子设备 | |
JP2018180519A (ja) | 音声認識誤り修正支援装置およびそのプログラム | |
JP5552987B2 (ja) | 検索結果出力装置、検索結果出力方法及び検索結果出力プログラム | |
JP6603929B1 (ja) | 動画編集サーバおよびプログラム | |
JP2003224791A (ja) | 映像の検索方法および装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181220 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20190325 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20190424 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190710 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190910 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191009 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200107 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20200205 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200205 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20200207 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6669952 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |