JP2006352542A - Device, method and program for reproducing content - Google Patents
Device, method and program for reproducing content Download PDFInfo
- Publication number
- JP2006352542A JP2006352542A JP2005176347A JP2005176347A JP2006352542A JP 2006352542 A JP2006352542 A JP 2006352542A JP 2005176347 A JP2005176347 A JP 2005176347A JP 2005176347 A JP2005176347 A JP 2005176347A JP 2006352542 A JP2006352542 A JP 2006352542A
- Authority
- JP
- Japan
- Prior art keywords
- content
- face information
- viewer
- photographing
- acquired
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Image Analysis (AREA)
- Electrically Operated Instructional Devices (AREA)
Abstract
Description
本発明は、視聴が義務付けられているコンテンツの再生を制御するコンテンツ再生装置および方法並びにコンテンツ再生方法をコンピュータに実行させるためのプログラムに関するものである。 The present invention relates to a content playback apparatus and method for controlling playback of content that is required to be viewed, and a program for causing a computer to execute the content playback method.
映像等の所定のコンテンツを視聴することを条件として資格が付与される場合がある。例えば、自動車免許は、30分程度の講義ビデオを聴講しなければ更新することができない。ここで、監督者がいる教室では、受講者はビデオの再生中に席を離れることはできない。しかしながら、ネットワークを介したストリーム配信では、コンテンツの提供者は受講者端末でコンテンツが再生されていることは確認できるものの、再生されているコンテンツを受講者が本当に見ているかどうかは確認することができない。 Qualification may be granted on condition that a predetermined content such as a video is viewed. For example, an automobile license cannot be renewed without listening to a lecture video of about 30 minutes. Here, in a classroom with supervisors, students cannot leave their seats during video playback. However, in stream distribution over a network, the content provider can confirm that the content is being played back on the student terminal, but can check whether the student is really watching the content being played back. Can not.
ここで、コンテンツの視聴を確認するための種々の手法が提案されている。例えば、耳の音響特性、骨伝導特性等の生体情報を検出する個人認証装置が設けられたヘッドフォンを使用し、ヘッドフォンから音楽を再生している間、生体情報を用いて継続的に本人確認を行い、契約者以外によるコンテンツの再生を制限する手法が提案されている(特許文献1参照)。また、データ配信サーバが端末装置にコンテンツを配信する際に生体情報の入力を求め、端末装置は配信されたデジタルコンテンツに生体情報を付加して記憶し、コンテンツを再生、表示、実行する際に、ユーザに対して生体情報の入力を要求し、入力された生体情報が、デジタルコンテンツに付加された生体情報と一致する場合にのみ、その再生等を許可する手法が提案されている(特許文献2参照)。
しかしながら、特許文献1,2に記載の手法においては、例えばヘッドフォンから頭を外す、端末装置から離れる、あるいは端末装置を見ていない等、視聴者がコンテンツの視聴をコンテンツの再生途中でやめた場合であっても、コンテンツの再生が続けられる。このため、視聴者が、コンテンツの再生途中で視聴をやめてしまうと、すべてのコンテンツを視聴者に視聴させることができない。したがって、コンテンツの視聴が義務付けられている場合であっても、視聴者にコンテンツを断片的にしか視聴させることができない。 However, in the methods described in Patent Documents 1 and 2, when the viewer stops viewing the content in the middle of reproducing the content, for example, removes his head from the headphones, leaves the terminal device, or does not look at the terminal device. Even if it exists, the reproduction of the content is continued. For this reason, if the viewer stops viewing while the content is being reproduced, the viewer cannot view all the content. Therefore, even when viewing of the content is required, the viewer can view the content only in fragments.
本発明は、上記事情に鑑みなされたものであり、視聴が義務付けられているコンテンツを、最初から最後まで確実に視聴者に視聴させることを目的とする。 The present invention has been made in view of the above circumstances, and an object of the present invention is to allow a viewer to surely view content that is required to be viewed from the beginning to the end.
本発明によるコンテンツ再生装置は、コンテンツの視聴が義務付けられた者の正面顔の顔情報を、前記コンテンツと対応付けた対応付け情報を記憶する顔情報記憶手段と、
前記コンテンツを再生するための表示画面を視認可能な範囲の場景を継続的に撮影する撮影手段と、
前記撮影手段による継続的な撮影が行われている間、撮影により取得された画像から前記コンテンツを視聴する視聴者の顔情報を取得し、前記対応付け情報を参照して、該取得した視聴者顔情報と再生中のコンテンツと対応付けられた顔情報との照合を継続的に行う照合手段と、
前記照合手段による照合結果が一致している間は前記コンテンツを再生し、前記照合結果が不一致となった場合に前記コンテンツの再生を停止し、前記照合結果が再び一致したときには、前記停止した箇所から前記コンテンツの続きを再生する再生手段とを備えたことを特徴とするものである。
A content reproduction apparatus according to the present invention includes face information storage means for storing association information in which face information of a front face of a person who is obligated to view content is associated with the content;
Photographing means for continuously photographing a scene in a range where the display screen for reproducing the content can be visually recognized;
While the continuous photographing is performed by the photographing unit, the face information of the viewer who views the content is acquired from the image acquired by the photographing, and the acquired viewer is referred to by referring to the association information Collation means for continuously collating face information and face information associated with the content being reproduced;
The content is reproduced while the collation result by the collation means is matched, the reproduction of the content is stopped when the collation result is inconsistent, and when the collation result is matched again, the stopped location And a reproducing means for reproducing the continuation of the content.
本発明によるコンテンツ再生方法は、コンテンツを再生するための表示画面を視認可能な範囲の場景を継続的に撮影し、
前記継続的な撮影が行われている間、撮影により取得された画像から前記コンテンツを視聴する視聴者の顔情報を取得し、前記コンテンツの視聴が義務付けられた者の正面顔の顔情報を前記コンテンツと対応付けた対応付け情報を参照して、前記取得した視聴者顔情報と再生中のコンテンツと対応付けられた顔情報との照合を継続的に行い、
前記照合結果が一致している間は前記コンテンツを再生し、前記照合結果が不一致となった場合に前記コンテンツの再生を停止し、前記照合結果が再び一致したときには、前記停止した箇所から前記コンテンツの続きを再生することを特徴とするものである。
The content reproduction method according to the present invention continuously shoots a scene in a range where a display screen for reproducing the content is visible,
While the continuous shooting is being performed, the face information of the viewer who views the content is acquired from the image acquired by shooting, and the face information of the front face of the person who is required to view the content is acquired. With reference to the association information associated with the content, the acquired viewer face information is continuously collated with the face information associated with the content being reproduced,
The content is reproduced while the collation results match, and the reproduction of the content is stopped when the collation results do not match. When the collation results match again, the content is started from the stopped position. The continuation of the above is reproduced.
本発明によるコンテンツ再生プログラムは、コンピュータに上記の本発明の画像処理方法を実行させる(上記各手段として機能させる)ものである。 A content reproduction program according to the present invention causes a computer to execute the above-described image processing method according to the present invention (functions as the above-described means).
本発明によれば、コンテンツを再生するための表示画面を視認可能な範囲の情景が継続的に撮影され、撮影により取得された画像からコンテンツを視聴する視聴者の顔情報が取得される。さらに、取得された視聴者顔情報と再生中のコンテンツと対応付けられた正面顔の顔情報の照合が継続的に行われる。そして、照合結果が一致している、すなわち視聴者が正面を向いている間はコンテンツが再生され、照合結果が一致していない、すなわち視聴者がコンテンツの再生場所から離れるまたは横を向いている等してコンテンツを視聴していない間はコンテンツの再生が停止され、照合結果が再び一致したときには停止した箇所からコンテンツの続きが再生される。このように、視聴者がコンテンツを視聴していない間は、コンテンツの再生が停止され、再度視聴を開始すると停止した箇所からコンテンツが再生されるため、視聴が義務付けられているコンテンツを、視聴者に対して最初から最後まで確実に視聴させることが可能となる。 According to the present invention, a scene in a range in which a display screen for reproducing content can be viewed is continuously photographed, and face information of a viewer who views the content is obtained from an image obtained by photographing. Further, collation of the acquired viewer face information and the face information of the front face associated with the content being reproduced is continuously performed. Then, the content is played while the matching result is matched, i.e., the viewer is facing the front, and the matching result is not matched, i.e., the viewer is away from the playback location of the content or turned sideways. For example, the content reproduction is stopped while the content is not being viewed, and when the collation result matches again, the continuation of the content is reproduced from the stopped position. In this way, while the viewer is not viewing the content, the playback of the content is stopped, and when the viewing is started again, the content is played back from the stopped position. Therefore, it is possible to reliably watch from the beginning to the end.
以下、図面を参照して本発明の実施形態について説明する。図1は本発明の実施形態によるコンテンツ再生装置の構成を示す概略ブロック図である。図1に示すように、本実施形態によるコンテンツ再生装置100は、コンテンツを再生する再生部1と、再生部1が再生したコンテンツを表示するモニタ2と、モニタ2の表示画面を視認可能な範囲の情景を継続的に撮影する撮影部3と、後述する顔情報データベースDB1を記憶する記憶部4と、照合部5とを備える。なお、再生部1、記憶部4および照合部5と、モニタ2および撮影部3とは、ネットワークを介して別の場所に設置されていてもよく、同一の場所に設置されていてもよい。
Hereinafter, embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a schematic block diagram showing a configuration of a content reproduction apparatus according to an embodiment of the present invention. As shown in FIG. 1, the
また、コンテンツ再生装置100は、CPUとメモリを備えた制御基板もしくは半導体装置等からなる制御部を備えている。制御部のメモリにはコンテンツ再生プログラムが記憶されており、再生部1、撮影部3および照合部5が行う処理は、このコンテンツ再生プログラムにより制御される。
In addition, the
再生部1は、映像およびスライドショー等のコンテンツを記憶したDVD等の記録媒体からコンテンツのデータを読み出してモニタ2に送信する。これにより、モニタ2にはコンテンツが表示される。また、再生部1は、コンテンツ再生プログラムによりコンテンツの再生を後述するように制御する。 The playback unit 1 reads content data from a recording medium such as a DVD that stores content such as videos and slideshows, and transmits the content data to the monitor 2. As a result, the content is displayed on the monitor 2. Further, the playback unit 1 controls the playback of the content as described later by the content playback program.
撮影部3は、例えばモニタ2の上部にモニタ2の画面と同一の方向を向くように設置されており、モニタ2の表示画面を視認可能な範囲の情景を継続的に撮影し、撮影により取得した画像データS0を照合部5に出力する。具体的には、所定時間間隔(例えば5秒)毎に撮影を行い、撮影により取得した画像データS0を照合部5に送信する。
For example, the photographing unit 3 is installed on the upper part of the monitor 2 so as to face the same direction as the screen of the monitor 2, and continuously shoots a scene in a range where the display screen of the monitor 2 can be visually recognized, and is acquired by photographing. The processed image data S0 is output to the
記憶部4は顔情報データベースDB1を記憶する。図2は顔情報データベースDB1の構成を示す図である。図2に示すように顔情報データベースDB1には、コンテンツの視聴が義務付けられた者(Aさん、Bさん、Cさん…)の顔情報が登録されており、そのそれぞれに視聴が義務付けられているコンテンツのタイトルが登録されている。なお、図2においては、Aさんの顔情報に02というタイトルのコンテンツが登録されている状態を示している。したがって、Aさんは02というタイトルのコンテンツの視聴が義務付けられている。 The storage unit 4 stores a face information database DB1. FIG. 2 is a diagram showing the configuration of the face information database DB1. As shown in FIG. 2, in the face information database DB1, face information of persons (Mr. A, Mr. B, Mr. C ...) who are required to view content is registered, and each of them is required to view. The title of the content is registered. FIG. 2 shows a state in which the content with the title 02 is registered in the face information of Mr. A. Therefore, Mr. A is obliged to view the content titled 02.
顔情報は、コンテンツの視聴が義務付けられた者の正面顔を撮影することにより取得した顔画像データから抽出した、複数種類の特徴量を表すデータ(以下、特徴量データ)からなる。特徴量データは照合部5における顔の照合に利用される。
The face information includes data representing a plurality of types of feature amounts (hereinafter referred to as feature amount data) extracted from face image data acquired by photographing a front face of a person who is required to view content. The feature amount data is used for face matching in the matching
照合部5は、撮影部3から送信された画像データS0の画像(以下画像についても同一の参照符号を用いる)から、コンテンツの視聴者の顔画像を抽出する。顔画像を抽出する手法としては、画像S0における肌色を有する領域を検出し、検出した肌色領域を含む所定範囲の領域を顔画像として抽出する手法、顔に含まれる目、鼻および口等の特徴に基づいて顔を検出し、検出した顔を含む所定範囲の領域を顔画像として抽出する手法等、公知の任意の手法を用いることができる。さらに、抽出した顔画像から特徴量のデータを抽出し、顔情報データベースDB1に登録された顔情報の特徴量と、抽出した特徴量とを比較することにより顔の照合を行う。
The
具体的には、下記のように顔の照合を行う。前述のように特徴量は複数種類あるため、特徴量毎に比較を行い、一致の度合い(類似度)を数値に換算する。そして、複数種類の特徴量について求めた数値の累積値を算出し、累積値が所定の閾値を越えていれば、視聴者はモニタ2を正視してコンテンツを視聴していると判定する。一方、所定の閾値以下の場合には、その視聴者は、横を向いていたり退席したりする等によりコンテンツを視聴していないと判定する。そして、再生部1が照合の結果に基づいてコンテンツの再生を制御する。 Specifically, face matching is performed as follows. As described above, since there are a plurality of types of feature amounts, comparison is made for each feature amount, and the degree of matching (similarity) is converted into a numerical value. Then, the cumulative value of the numerical values obtained for a plurality of types of feature quantities is calculated, and if the cumulative value exceeds a predetermined threshold value, it is determined that the viewer is viewing the content while looking at the monitor 2. On the other hand, when the value is equal to or smaller than the predetermined threshold value, it is determined that the viewer is not viewing the content by facing sideways or leaving the seat. Then, the playback unit 1 controls the playback of the content based on the collation result.
以下、再生制御処理を照合部5が行う処理と併せて説明する。図3は再生制御処理を示すフローチャートである。まず、照合部5が画像S0から抽出した顔情報の特徴量と、顔情報データベースDB1から取得した顔情報の特徴量とを用いて照合を行い、照合の結果を出力する(ステップST1)。
Hereinafter, the reproduction control process will be described together with the process performed by the
再生部1は、照合の結果が、視聴者がコンテンツを視聴してるものであるか否を判定し(ステップST2)、照合の結果が、視聴者がコンテンツを視聴していないものである場合(ステップST2:否定)には、コンテンツの再生を停止する(ステップST3)。さらに停止した箇所にマーカを付与する等して停止箇所を記録し(ステップST4)、リターンする。 The reproducing unit 1 determines whether or not the result of collation is that the viewer is viewing the content (step ST2), and when the result of collation is that the viewer is not viewing the content (step ST2). In step ST2: No, the reproduction of the content is stopped (step ST3). Further, the stop location is recorded by adding a marker to the stop location (step ST4), and the process returns.
一方、判定結果が、視聴者がコンテンツを視聴しているものである場合(ステップST2:肯定)には、現在コンテンツが停止中であるか否かを判定し(ステップST5)、停止中の場合は、上述したように記録した停止箇所からコンテンツを再生し(ステップST6)、リターンする。一方、現在コンテンツが再生中である場合にはリターンする。 On the other hand, if the determination result is that the viewer is watching the content (step ST2: affirmative), it is determined whether or not the content is currently stopped (step ST5). Plays the content from the recorded stop point as described above (step ST6) and returns. On the other hand, if the content is currently being reproduced, the process returns.
このように、本実施形態においては、視聴者がコンテンツを視聴していない間は、コンテンツの再生が停止され、再度視聴を開始すると停止した箇所からコンテンツが再生されるため、視聴が義務付けられているコンテンツを、視聴者に対して最初から最後まで確実に視聴させることが可能となる。 As described above, in this embodiment, while the viewer is not viewing the content, the reproduction of the content is stopped, and when the viewing is started again, the content is reproduced from the stopped position. It is possible to ensure that the viewer can view the content from the beginning to the end.
なお、本発明の実施形態に係る装置100について説明したが、コンピュータを、上記の再生部1、記憶部4および照合部5に対応する手段として機能させ、図3に示すような処理を行わせるプログラムも、本発明の実施形態の1つである。また、そのようなプログラムを記録したコンピュータ読取り可能な記録媒体も、本発明の実施形態の1つである。
In addition, although the
以上、本発明について複数の実施形態を例示して説明したが、本発明の技術的範囲は特許請求の範囲の記載事項によってのみ定められるべきであり、上記実施形態に限定されないことは、言うまでもない。 While the present invention has been described by exemplifying a plurality of embodiments, it is needless to say that the technical scope of the present invention should be determined only by the matters described in the claims and is not limited to the above embodiments. .
1 再生部
2 モニタ
3 撮影部
4 記憶部
5 照合部
DESCRIPTION OF SYMBOLS 1 Playback part 2 Monitor 3 Image | photographing part 4 Memory |
Claims (3)
前記コンテンツを再生するための表示画面を視認可能な範囲の場景を継続的に撮影する撮影手段と、
前記撮影手段による継続的な撮影が行われている間、撮影により取得された画像から前記コンテンツを視聴する視聴者の顔情報を取得し、前記対応付け情報を参照して、該取得した視聴者顔情報と再生中のコンテンツと対応付けられた顔情報との照合を継続的に行う照合手段と、
前記照合手段による照合結果が一致している間は前記コンテンツを再生し、前記照合結果が不一致となった場合に前記コンテンツの再生を停止し、前記照合結果が再び一致したときには、前記停止した箇所から前記コンテンツの続きを再生する再生手段とを備えたことを特徴とするコンテンツ再生装置。 Face information storage means for storing association information in which face information of a front face of a person who is obliged to view content is associated with the content;
Photographing means for continuously photographing a scene in a range where the display screen for reproducing the content can be visually recognized;
While the continuous photographing is performed by the photographing unit, the face information of the viewer who views the content is acquired from the image acquired by the photographing, and the acquired viewer is referred to by referring to the association information Collation means for continuously collating face information and face information associated with the content being reproduced;
The content is reproduced while the collation result by the collation means is matched, the reproduction of the content is stopped when the collation result is inconsistent, and when the collation result is matched again, the stopped location And a reproducing means for reproducing the continuation of the content.
前記継続的な撮影が行われている間、撮影により取得された画像から前記コンテンツを視聴する視聴者の顔情報を取得し、前記コンテンツの視聴が義務付けられた者の正面顔の顔情報を前記コンテンツと対応付けた対応付け情報を参照して、前記取得した視聴者顔情報と再生中のコンテンツと対応付けられた顔情報との照合を継続的に行い、
前記照合結果が一致している間は前記コンテンツを再生し、前記照合結果が不一致となった場合に前記コンテンツの再生を停止し、前記照合結果が再び一致したときには、前記停止した箇所から前記コンテンツの続きを再生することを特徴とするコンテンツ再生方法。 Continuously shoot scenes in a range where the display screen for content playback is visible,
While the continuous shooting is being performed, the face information of the viewer who views the content is acquired from the image acquired by shooting, and the face information of the front face of the person who is required to view the content is acquired. With reference to the association information associated with the content, the acquired viewer face information is continuously collated with the face information associated with the content being reproduced,
The content is played back while the matching results match, and the playback of the content is stopped when the matching results do not match, and when the matching results match again, the content is A content reproduction method characterized by reproducing a continuation of the above.
コンテンツの視聴が義務付けられた者の正面顔の顔情報を、前記コンテンツと対応付けた対応付け情報を記憶する顔情報記憶手段と、
前記コンテンツを再生するための表示画面を視認可能な範囲の場景を継続的に撮影する撮影手段と、
前記撮影手段による継続的な撮影が行われている間、撮影により取得された画像から前記コンテンツを視聴する視聴者の顔情報を取得し、前記対応付け情報を参照して、該取得した視聴者顔情報と再生中のコンテンツと対応付けられた顔情報との照合を継続的に行う照合手段と、
前記照合手段による照合結果が一致している間は前記コンテンツを再生し、前記照合結果が不一致となった場合に前記コンテンツの再生を停止し、前記照合結果が再び一致したときには、前記停止した箇所から前記コンテンツの続きを再生する再生手段として機能させることを特徴とするコンテンツ再生プログラム。 Computer
Face information storage means for storing association information in which face information of a front face of a person who is obliged to view content is associated with the content;
Photographing means for continuously photographing a scene in a range where the display screen for reproducing the content can be visually recognized;
While the continuous photographing is performed by the photographing unit, the face information of the viewer who views the content is acquired from the image acquired by the photographing, and the acquired viewer is referred to by referring to the association information Collation means for continuously collating face information and face information associated with the content being reproduced;
The content is reproduced while the collation result by the collation means is matched, the reproduction of the content is stopped when the collation result is inconsistent, and when the collation result is matched again, the stopped location The content reproduction program is made to function as reproduction means for reproducing the continuation of the content.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005176347A JP2006352542A (en) | 2005-06-16 | 2005-06-16 | Device, method and program for reproducing content |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005176347A JP2006352542A (en) | 2005-06-16 | 2005-06-16 | Device, method and program for reproducing content |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006352542A true JP2006352542A (en) | 2006-12-28 |
Family
ID=37647893
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005176347A Withdrawn JP2006352542A (en) | 2005-06-16 | 2005-06-16 | Device, method and program for reproducing content |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2006352542A (en) |
-
2005
- 2005-06-16 JP JP2005176347A patent/JP2006352542A/en not_active Withdrawn
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8233677B2 (en) | Image sensing apparatus and image file data structure | |
TW484108B (en) | Automatic user performance capture system | |
US6535269B2 (en) | Video karaoke system and method of use | |
US9560411B2 (en) | Method and apparatus for generating meta data of content | |
KR100827846B1 (en) | Method and system for replaying a movie from a wanted point by searching specific person included in the movie | |
US20040073803A1 (en) | Digital rights management apparatus , methods and multimedia products using biometric data | |
EP3575993B1 (en) | Method and system for validating remote live identification via video-recording | |
US10499097B2 (en) | Methods, systems, and media for detecting abusive stereoscopic videos by generating fingerprints for multiple portions of a video frame | |
JP4270199B2 (en) | Content playback device | |
US11245959B2 (en) | Continuous dual authentication to access media content | |
JP5317596B2 (en) | User authentication server and user authentication method | |
US20190356939A1 (en) | Systems and Methods for Displaying Synchronized Additional Content on Qualifying Secondary Devices | |
JP2005250322A (en) | Display device | |
JP2006287514A (en) | Camera device and control program thereof | |
KR101792909B1 (en) | Information processing method and device | |
JP2006352542A (en) | Device, method and program for reproducing content | |
CN114339449B (en) | Copyright protection method for embedding watermark in display system | |
JP2006155109A (en) | Image processor | |
JP2005354210A (en) | Image reproduction system and image filling system | |
EP3596628B1 (en) | Methods, systems and media for transforming fingerprints to detect unauthorized media content items | |
KR101552335B1 (en) | Apparatus and method for blocking harmful image play | |
WO2022202955A1 (en) | Meeting recording processing device and security assurance method for meeting recording | |
KR20200069756A (en) | Apparatus and method for playing and providing image contents | |
KR101530281B1 (en) | Device and method for recording dramatic video based on user's emotion | |
WO2009087765A1 (en) | Electronic device and accounting control method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061211 |
|
A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20080902 |