JP4797761B2 - 動画表示装置 - Google Patents
動画表示装置 Download PDFInfo
- Publication number
- JP4797761B2 JP4797761B2 JP2006109385A JP2006109385A JP4797761B2 JP 4797761 B2 JP4797761 B2 JP 4797761B2 JP 2006109385 A JP2006109385 A JP 2006109385A JP 2006109385 A JP2006109385 A JP 2006109385A JP 4797761 B2 JP4797761 B2 JP 4797761B2
- Authority
- JP
- Japan
- Prior art keywords
- face
- image
- face information
- graph
- frame position
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 claims description 27
- 230000008569 process Effects 0.000 claims description 14
- 238000001514 detection method Methods 0.000 claims description 12
- 210000000887 face Anatomy 0.000 description 38
- 230000006870 function Effects 0.000 description 22
- 230000007704 transition Effects 0.000 description 14
- 210000001508 eye Anatomy 0.000 description 9
- 230000008921 facial expression Effects 0.000 description 6
- 239000011521 glass Substances 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000001815 facial effect Effects 0.000 description 4
- 210000001331 nose Anatomy 0.000 description 2
- 210000000056 organ Anatomy 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 210000000720 eyelash Anatomy 0.000 description 1
- 210000000744 eyelid Anatomy 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
Description
ば、棒グラフ、折れ線グラフなどを好ましく採用できる。
ては、上述したものを採用できる。
図1は、本発明の実施形態に係る動画表示装置の機能構成を示すブロック図である。
ものでも、放送番組等を録画したものでも、記録媒体若しくはネットワークを介して提供されたデータであってもよい。
して視線の角度を算出してもよい。性別、年齢(年齢層)、人種などの属性推定については既存の技術を利用可能である。性別は「男性/女性」のように分類され、年齢は「10歳未満/10代・20代/30代・40代/50代・60代/70歳以上」とか「子供/大人/老人」のように分類され、人種は「コーカソイド/モンゴロイド/ネグロイド」のように分類される。表情は「幸福/悲しみ/恐怖/怒り/驚き/嫌悪」のように分類される。ひげの有無やメガネの有無はそれぞれ「有り/無し」で分類される。顔の位置は特徴量としての画像座標に基づき「中央/右/左」のように分類される。なお、ここで挙げた特徴量及び分類は一例であり、適宜設計変更しても構わない。
図2のフローチャートに沿って、動画表示装置における顔情報作成処理の流れを説明する。
フレーム位置とともに顔情報記憶部14に記録される。図4は、図3の画像に関する記録情報の一例を示している。記録情報には、フレーム位置(フレーム番号)、検出された顔の数、各顔の識別番号、各顔に関する特徴量の値及びクラスが含まれている。
グラフの表示態様(グラフの形式、グラフに表示する顔情報の種類など)はユーザが自由に設定できる。ユーザによる設定内容は記録され、次回のグラフ表示のときにもその設定内容に従ってグラフが表示される。以下、代表的な表示態様を例示する。
だけで写っているシーン」を見つけたいのであれば、男性「1」かつ女性「1」のフレームを順に確かめていけばよい。
11 入力部
12 顔検出部
13 顔情報取得部
130 顔同定機能
131 顔分類機能
14 顔情報記憶部
15 グラフ生成部
16 表示部
20 動画表示画面
21 グラフ表示画面
22 マーク
23 スライダー
Claims (10)
- 動画から選択された複数のフレームの画像の各々から顔を検出する顔検出手段と、
前記各画像について、前記検出された顔に関する顔情報を取得する顔情報取得手段と、
前記顔情報取得手段によって画像から取得された顔情報を、その画像の動画中のフレーム位置とともに記憶する顔情報記憶手段と、
前記顔情報記憶手段から前記各画像のフレーム位置及び顔情報を読み込み、前記各画像のフレーム位置と顔情報との関係を示す時系列形式のグラフを生成するグラフ生成手段と、
前記動画を前記グラフとともに表示する表示手段と、
を備え、
前記顔情報が、前記各画像から検出された顔の数を含み、
前記グラフが、前記各画像のフレーム位置に対応する顔の数を示すものである
ことを特徴とする動画表示装置。 - 前記顔情報取得手段が、前記検出された顔をその顔画像に基づいて所定のクラスのいずれかに分類する顔分類手段を有し、
前記顔情報が、前記検出された顔が分類されたクラスを含み、
前記グラフが、前記顔の数をクラス別に示すものである
請求項1記載の動画表示装置。 - 動画から選択された複数のフレームの画像の各々から顔を検出する顔検出手段と、
前記各画像について、前記検出された顔に関する顔情報を取得する顔情報取得手段と、
前記顔情報取得手段によって画像から取得された顔情報を、その画像の動画中のフレーム位置とともに記憶する顔情報記憶手段と、
前記顔情報記憶手段から前記各画像のフレーム位置及び顔情報を読み込み、前記各画像のフレーム位置と顔情報との関係を示す時系列形式のグラフを生成するグラフ生成手段と、
前記動画を前記グラフとともに表示する表示手段と、
を備え、
前記顔情報取得手段が、前記検出された顔をその顔画像に基づいて既知の顔か否か同定
する顔同定手段を有し、
前記顔情報記憶手段が、前記顔情報を人別に記憶し、
前記グラフが、前記顔情報を人別に示すものである
ことを特徴とする動画表示装置。 - 前記顔情報が、前記検出された顔の顔画像から抽出される特徴量を含み、
前記グラフが、人別に、前記各画像のフレーム位置と特徴量の値との関係を示すものである
請求項3記載の動画表示装置。 - 前記顔情報取得手段が、前記検出された顔をその顔画像に基づいて所定のクラスのいずれかに分類する顔分類手段を有し、
前記顔情報が、前記検出された顔が分類されたクラスを含み、
前記グラフが、人別に、前記各画像のフレーム位置とクラスとの関係を示すものである請求項3記載の動画表示装置。 - 複数の人のグラフが同時に表示される請求項3〜5のいずれかに記載の動画表示装置。
- 複数の顔情報のグラフが同時に表示される請求項3〜6のいずれかに記載の動画表示装置。
- 前記表示手段が、
ユーザによりフレーム位置が指定された場合に、前記動画の中から前記指定されたフレーム位置に対応する画像を表示する
請求項1〜7のいずれかに記載の動画表示装置。 - 記憶装置及び表示装置を備えるコンピュータが、
動画から選択された複数のフレームの画像の各々から顔を検出し、
前記各画像について、前記検出された顔に関する顔情報であって、前記検出された顔の数を含む顔情報を取得し、
画像から取得された顔情報を、その画像の動画中のフレーム位置とともに前記記憶装置に記録し、
前記記憶装置から前記各画像のフレーム位置及び顔情報を読み込み、前記各画像のフレーム位置に対応する顔の数を示す時系列形式のグラフを生成し、
前記動画を前記グラフとともに前記表示装置に表示する
動画表示方法。 - 記憶装置及び表示装置を備えるコンピュータに、
動画から選択された複数のフレームの画像の各々から顔を検出する処理と、
前記各画像について、前記検出された顔に関する顔情報であって、前記検出された顔の数を含む顔情報を取得する処理と、
画像から取得された顔情報を、その画像の動画中のフレーム位置とともに前記記憶装置に記録する処理と、
前記記憶装置から前記各画像のフレーム位置及び顔情報を読み込み、前記各画像のフレーム位置に対応する顔の数を示す時系列形式のグラフを生成する処理と、
前記動画を前記グラフとともに前記表示装置に表示する処理と、
を実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006109385A JP4797761B2 (ja) | 2006-04-12 | 2006-04-12 | 動画表示装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006109385A JP4797761B2 (ja) | 2006-04-12 | 2006-04-12 | 動画表示装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007280325A JP2007280325A (ja) | 2007-10-25 |
JP4797761B2 true JP4797761B2 (ja) | 2011-10-19 |
Family
ID=38681670
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006109385A Expired - Fee Related JP4797761B2 (ja) | 2006-04-12 | 2006-04-12 | 動画表示装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4797761B2 (ja) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008017042A (ja) | 2006-07-04 | 2008-01-24 | Sony Corp | 情報処理装置および方法、並びにプログラム |
JP5057918B2 (ja) | 2007-09-28 | 2012-10-24 | 株式会社東芝 | 電子機器およびシーン種類表示方法 |
JP4506832B2 (ja) * | 2007-12-28 | 2010-07-21 | ソニー株式会社 | 画像処理装置、インデックス生成装置、撮像装置、インデックス生成方法およびプログラム |
JP5213557B2 (ja) * | 2008-07-11 | 2013-06-19 | キヤノン株式会社 | 動画像処理装置および動画像処理方法 |
JP2010074399A (ja) * | 2008-09-17 | 2010-04-02 | Sony Corp | 構図判定装置、構図判定方法、画像処理装置、画像処理方法、プログラム |
JP4620150B2 (ja) | 2008-10-23 | 2011-01-26 | 株式会社東芝 | 電子機器および映像処理方法 |
JP4496264B2 (ja) | 2008-10-24 | 2010-07-07 | 株式会社東芝 | 電子機器及び映像表示方法 |
JP5128454B2 (ja) * | 2008-12-17 | 2013-01-23 | アイシン精機株式会社 | 瞼検出装置、瞼検出方法及びプログラム |
JP4625862B2 (ja) | 2008-12-24 | 2011-02-02 | 株式会社東芝 | オーサリング装置およびオーサリング方法 |
JP5232669B2 (ja) * | 2009-01-22 | 2013-07-10 | オリンパスイメージング株式会社 | カメラ |
JP5024434B2 (ja) * | 2010-07-30 | 2012-09-12 | カシオ計算機株式会社 | 撮像装置、制御プログラム及び表示制御方法 |
WO2016147653A1 (ja) * | 2015-03-19 | 2016-09-22 | 日本電気株式会社 | オブジェクト検出装置、オブジェクト検出方法および記録媒体 |
JP6904249B2 (ja) * | 2015-03-19 | 2021-07-14 | 日本電気株式会社 | オブジェクト検出装置、オブジェクト検出方法およびプログラム |
JP6723822B2 (ja) * | 2016-05-19 | 2020-07-15 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
US10475221B2 (en) | 2016-05-19 | 2019-11-12 | Canon Kabushiki Kaisha | Image processing device, image processing method and program for detected objects |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001357404A (ja) * | 2000-06-14 | 2001-12-26 | Minolta Co Ltd | 画像抽出装置 |
GB2414614A (en) * | 2004-05-28 | 2005-11-30 | Sony Uk Ltd | Image processing to determine most dissimilar images |
JP4586446B2 (ja) * | 2004-07-21 | 2010-11-24 | ソニー株式会社 | コンテンツ記録再生装置、コンテンツ記録再生方法及びそのプログラム |
JP4973188B2 (ja) * | 2004-09-01 | 2012-07-11 | 日本電気株式会社 | 映像分類装置、映像分類プログラム、映像検索装置、および映像検索プログラム |
JP4618166B2 (ja) * | 2006-03-07 | 2011-01-26 | ソニー株式会社 | 画像処理装置、画像処理方法、およびプログラム |
-
2006
- 2006-04-12 JP JP2006109385A patent/JP4797761B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2007280325A (ja) | 2007-10-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4797761B2 (ja) | 動画表示装置 | |
JP4765732B2 (ja) | 動画編集装置 | |
Doughty et al. | Who's better? who's best? pairwise deep ranking for skill determination | |
JP4168940B2 (ja) | 映像表示システム | |
JP5649425B2 (ja) | 映像検索装置 | |
Yao et al. | Oscar: On-site composition and aesthetics feedback through exemplars for photographers | |
Dhall et al. | The more the merrier: Analysing the affect of a group of people in images | |
JP5510167B2 (ja) | ビデオ検索システムおよびそのためのコンピュータプログラム | |
US8792685B2 (en) | Presenting image subsets based on occurrences of persons satisfying predetermined conditions | |
US8345118B2 (en) | Image capturing apparatus, image capturing method, album creating apparatus, album creating method, album creating system and computer readable medium | |
KR101346539B1 (ko) | 얼굴들을 상관시킴으로써 디지털 이미지들을 구조화하기 | |
US8311289B2 (en) | Computer-implemented method for performing similarity searches | |
US20150339516A1 (en) | Collation apparatus and method for the same, and image searching apparatus and method for the same | |
JP4924742B2 (ja) | 画像処理装置及び方法、並びにプログラム | |
JP6369470B2 (ja) | 情報処理システム | |
JP4881034B2 (ja) | 電子アルバム編集システム、電子アルバム編集方法、及び電子アルバム編集プログラム | |
JP6529314B2 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2007249588A (ja) | 顔画像登録装置、顔画像登録方法、顔画像登録プログラム、および記録媒体 | |
JP5163008B2 (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
EP3324307B1 (en) | Retrieval device, retrieval method, and computer-readable medium | |
JP4490214B2 (ja) | 電子アルバム表示システム、電子アルバム表示方法、及び電子アルバム表示プログラム | |
JP2006318375A (ja) | 顔画像検索装置および顔画像検索方法 | |
JP2006079460A (ja) | 電子アルバム表示システム、電子アルバム表示方法、電子アルバム表示プログラム、画像分類装置、画像分類方法、及び画像分類プログラム | |
Yoshida et al. | Spatiotemporal video highlight by neural network considering gaze and hands of surgeon in egocentric surgical videos | |
US9373021B2 (en) | Method, apparatus and system for outputting a group of images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090209 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110111 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110302 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20110322 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110530 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20110607 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110705 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110718 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140812 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4797761 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |