JP2021525424A - ユーザの注意力を決定するコンピュータ実装システム及び方法 - Google Patents
ユーザの注意力を決定するコンピュータ実装システム及び方法 Download PDFInfo
- Publication number
- JP2021525424A JP2021525424A JP2020565924A JP2020565924A JP2021525424A JP 2021525424 A JP2021525424 A JP 2021525424A JP 2020565924 A JP2020565924 A JP 2020565924A JP 2020565924 A JP2020565924 A JP 2020565924A JP 2021525424 A JP2021525424 A JP 2021525424A
- Authority
- JP
- Japan
- Prior art keywords
- data
- attention
- response data
- media content
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 77
- 230000004044 response Effects 0.000 claims abstract description 172
- 238000010801 machine learning Methods 0.000 claims abstract description 9
- 238000004458 analytical method Methods 0.000 claims description 36
- 230000002996 emotional effect Effects 0.000 claims description 33
- 238000012549 training Methods 0.000 claims description 20
- 230000006399 behavior Effects 0.000 claims description 10
- 230000003542 behavioural effect Effects 0.000 abstract description 33
- 238000002372 labelling Methods 0.000 abstract description 4
- 230000019771 cognition Effects 0.000 abstract description 2
- 230000001815 facial effect Effects 0.000 description 20
- 230000008569 process Effects 0.000 description 11
- 238000006243 chemical reaction Methods 0.000 description 9
- 238000013528 artificial neural network Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 210000003128 head Anatomy 0.000 description 6
- 230000036544 posture Effects 0.000 description 6
- 230000003068 static effect Effects 0.000 description 6
- 238000007405 data analysis Methods 0.000 description 5
- 230000001360 synchronised effect Effects 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 238000013480 data collection Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000008921 facial expression Effects 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 230000037007 arousal Effects 0.000 description 3
- 230000036760 body temperature Effects 0.000 description 3
- 238000013481 data capture Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 230000029058 respiratory gaseous exchange Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000003139 buffering effect Effects 0.000 description 2
- 230000008451 emotion Effects 0.000 description 2
- 230000006461 physiological response Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 208000027534 Emotional disease Diseases 0.000 description 1
- 230000004931 aggregating effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000035622 drinking Effects 0.000 description 1
- 230000006397 emotional response Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000003924 mental process Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000035755 proliferation Effects 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
- H04N21/4667—Processing of monitored end-user data, e.g. trend analysis based on the log file of viewer selections
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0277—Online advertisement
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
- G06N20/20—Ensemble learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0242—Determining effectiveness of advertisements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/251—Learning process for intelligent management, e.g. learning user preferences for recommending movies
- H04N21/252—Processing of multiple end-users' preferences to derive collaborative data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
- H04N21/25866—Management of end-user data
- H04N21/25891—Management of end-user data being end-user preferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42201—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
- H04N21/4662—Learning process for intelligent management, e.g. learning user preferences for recommending movies characterized by learning algorithms
- H04N21/4666—Learning process for intelligent management, e.g. learning user preferences for recommending movies characterized by learning algorithms using neural networks, e.g. processing the feedback provided by the user
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Software Systems (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Strategic Management (AREA)
- Development Economics (AREA)
- Computing Systems (AREA)
- Analytical Chemistry (AREA)
- Biomedical Technology (AREA)
- Chemical & Material Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Neurosurgery (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Biophysics (AREA)
- Entrepreneurship & Innovation (AREA)
- General Business, Economics & Management (AREA)
- Marketing (AREA)
- Economics (AREA)
- Game Theory and Decision Science (AREA)
- Social Psychology (AREA)
- Computer Graphics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Security & Cryptography (AREA)
- User Interface Of Digital Computer (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
本発明の実施形態は、ユーザがメディアコンテンツを消費している間に、ユーザから行動データを収集及び利用するシステム及び方法に関する。図1は、本発明の実施形態である完全なデータ収集及び分析システム100の概略図である。図1のシステムは、データの収集及びアノテーションを実行するためのコンポーネント、並びに注意力モデルを生成及び利用する際のデータのその後の使用のためのコンポーネントを示していることが理解できる。他の例では、これらの機能を有する別個のシステムが提供されてよい。
Claims (20)
- メディアコンテンツ消費中のユーザの注意力を決定するコンピュータ実装方法であって、
収集サーバで、クライアントデバイスからの応答データを取得することであって、前記応答データは、前記クライアントデバイスでメディアコンテンツを消費しているユーザについて収集され、前記応答データは、前記メディアコンテンツを消費中の前記ユーザの行動の経時的な変化を表すデータストリームを含む、前記応答データを取得することと、
前記収集サーバで、前記データストリームと前記メディアコンテンツを関連付けることと、
アノテーションデバイスで、前記応答データの動的表現と、前記応答データが関連付けられた前記メディアコンテンツとを同時に表示することと、
前記アノテーションデバイスで、アノテータからの注意力データを受信することであって、前記注意力データは、前記動的表現に基づいたユーザの注意力を示す入力スコアである、前記注意力データを受信することと、
前記アノテーションデバイスで、前記注意力データを前記データストリームまたはメディアコンテンツ内のイベントと関連付けて、注意力ラベル付き応答データを生成することと、
を含む、前記方法。 - 前記データストリームは、1つまたは複数の応答データパラメータの時間発展を示す情報を含む、先行請求項のいずれかに記載の方法。
- 前記応答データは、前記メディアコンテンツ消費中に収集された前記ユーザの顔画像データから取得された感情状態データを含む、先行請求項のいずれかに記載の方法。
- 前記データストリームを前記メディアコンテンツに関連付けることは、前記応答データを前記メディアコンテンツと同期することを含む、先行請求項のいずれかに記載の方法。
- 前記応答データは、タイムスタンプを付けられ、前記応答データを前記メディアコンテンツと同期することは、タイムスタンプデータをメディア再生ステータスデータと一致させることを含む、請求項4に記載の方法。
- 前記データストリームは、
メディア制御データ、
メディアタグデータ、
メディア注意力顕著性データ、及び、
メディア再生ステータスデータ
のいずれかをさらに含む、先行請求項のいずれかに記載の方法。 - 前記注意力ラベル付き応答データを生成することは、注意力ラベルパラメータを前記応答データに追加することを含む、先行請求項のいずれかに記載の方法。
- 前記注意力データは、
バイナリ指標、
複数のプリセットレベル、及び
スライディングスケール、
のいずれかから選択される、先行請求項のいずれかに記載の方法。 - 前記応答データは、感情状態データを含み、前記方法は、前記受信した注意力データに基づいて、前記感情状態データの有意性スコアまたは重み付けを導出することをさらに含む、先行請求項のいずれかに記載の方法。
- 前記同時に表示された前記応答データの動的表現と前記応答データが関連付けられている前記メディアコンテンツとを制御することを含む、先行請求項のいずれかに記載の方法。
- 分析サーバで、前記動的表現に関する注意力データを複数のアノテータから受信することと、
前記分析サーバによって、前記動的表現の組み合わせ注意力データを生成することであって、前記組み合わせ注意力データは、前記複数のアノテータからの前記注意力データ間の正の相関のレベルを示す注意力パラメータを含む、前記組み合わせ注意力データを生成することと、
をさらに含む、先行請求項のいずれかに記載の方法。 - 前記注意力データの前記入力スコアは、バイナリ指標であり、前記注意力パラメータは、連続型変数である、請求項11に記載の方法。
- 複数のユーザからの注意力ラベル付き応答データをデータリポジトリに記憶することと、
分析サーバによって、前記データリポジトリから注意力ラベル付き応答データ訓練セットを抽出することと、
前記分析サーバで、機械学習アルゴリズムの目的を確立することと、
前記機械学習アルゴリズムを使用して、前記注意力ラベル付き応答データ訓練セットから注意力モデルを生成することと、
をさらに含む、先行請求項のいずれかに記載の方法。 - 前記収集サーバで、クライアントデバイスから新しい応答データを取得することであって、前記応答データは、前記クライアントデバイスでメディアコンテンツを消費している他のユーザについて収集され、前記応答データは、前記メディアコンテンツを消費している間の前記ユーザの行動の経時的な変化を表すデータストリームを含む、前記新しい応答データを取得することと、
前記新しい応答データを前記注意力モデルに入力して、前記新しい応答データの1つまたは複数の部分の注意力スコアを取得することと、
をさらに含む、請求項13に記載の方法。 - 前記注意力ラベル付き応答データ訓練セットを抽出することは、前記リポジトリの前記注意力ラベル付き応答データにフィルタを適用することを含む、請求項13または14に記載の方法。
- 前記訓練セットの前記注意力ラベル付き応答データは、消費されている前記メディアコンテンツの主題を示すメディアタグデータを含み、前記方法は、
別のメディアコンテンツに関して新しいメディアタグデータを取得することと、
前記新しいメディアタグデータを前記注意力モデルに入力して、前記メディアコンテンツの1つまたは複数の部分の注意力スコアを取得することと、
をさらに含む、請求項13〜15のいずれか一項に記載の方法。 - 複数のユーザからの注意力ラベル付き応答データをデータリポジトリに記憶することと、
前記注意力ラベル付き応答データを使用して、複数の注意力プロキシサブモデルを生成することであって、前記注意力プロキシサブモデルは、それぞれ、各注意力プロキシパラメータに基づいて訓練されて、前記応答データから注意力を示す出力を供給する、前記複数の注意力プロキシサブモデルを生成することと、
前記複数の注意力プロキシサブモデルからの出力を使用して注意力信頼スコアを供給するアンサンブルモデルを確立することと、
をさらに含む、先行請求項のいずれかに記載の方法。 - 前記収集サーバでクライアントデバイスから新しい応答データを取得することであって、前記応答データは、前記クライアントデバイスでメディアコンテンツを消費している他のユーザについて収集され、前記応答データは、前記メディアコンテンツを消費している間の前記ユーザの行動の経時的な変化を表すデータストリームを含む、前記新しい応答データを取得することと、
前記新しい応答データを前記複数の注意力プロキシサブモデルに入力して、前記新しい応答データの1つまたは複数の部分の注意力スコアを取得することと、
前記複数の注意力プロキシサブモデルの前記出力を前記アンサンブルモデルに入力して、前記注意力スコアに関連付けられた注意力信頼スコアを取得することと、
をさらに含む、請求項17に記載の方法。 - メディアコンテンツ消費中のユーザの注意力を決定するコンピュータ実装方法であって、
収集サーバで、クライアントデバイスから応答データを取得することであって、前記応答データは、前記クライアントデバイスでメディアコンテンツを消費しているユーザについて収集され、前記応答データは、前記メディアコンテンツを消費している間の前記ユーザの行動の経時的な変化を表すデータストリームを含む、前記応答データを取得することと、
前記収集サーバで、前記データストリームを前記メディアコンテンツと関連付けることと、
複数のアノテーションデバイスで、前記応答データの動的表現を表示することと、
前記複数のアノテーションデバイスで、アノテータからの注意力データを受信することであって、前記注意力データは、前記動的表現に基づいたユーザの注意力を示す入力スコアである、前記注意力データを受信することと、
複数のアノテータからの前記動的表現に関する注意力データを前記複数のアノテーションデバイスから分析サーバで受信することと、
前記分析サーバによって、前記動的表現の組み合わせ注意力データを生成することであって、前記組み合わせ注意力データは、前記複数のアノテータからの前記注意力データ間の正の相関のレベルを示す注意力パラメータを含む、前記注意力データを生成することと、
前記分析サーバで、前記組み合わせ注意力データをデータストリームまたはメディアコンテンツ内のイベントに関連付けて、注意力ラベル付き応答データを生成することと、
を含む、前記方法。 - メディアコンテンツ消費中にユーザの注意力を決定するシステムであって、
複数のクライアントデバイスにネットワークを介して通信可能に結合された収集サーバであって、
前記複数のクライアントデバイスから応答データを取得することであって、前記応答データは、前記クライアントデバイスでメディアコンテンツを消費しているユーザについて収集され、前記応答データは、前記メディアコンテンツを消費している間の前記ユーザの行動の経時的な変化を表すデータストリームを含む、前記応答データを取得し、
前記データストリームを前記メディアコンテンツに関連付ける、
ように構成された前記収集サーバと、
前記収集サーバに通信可能に結合されたアノテーションデバイスであって、
前記応答データの動的表現と、前記応答データが関連付けられた前記メディアコンテンツとを同時に表示し、
前記動的表現に基づいたユーザの注意力を示す入力スコアを含む注意力データを受信し、
前記注意力データを前記データストリームまたはメディアコンテンツのイベントに関連付けて、注意力ラベル付き応答データを生成する
ように構成された前記アノテーションデバイスと、
を含む、前記システム。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
GBGB1809388.0A GB201809388D0 (en) | 2018-06-07 | 2018-06-07 | Computer-Implemented System And Method For Determining Attentiveness of User |
GB1809388.0 | 2018-06-07 | ||
US16/357,048 US11146856B2 (en) | 2018-06-07 | 2019-03-18 | Computer-implemented system and method for determining attentiveness of user |
US16/357,048 | 2019-03-18 | ||
PCT/EP2019/064476 WO2019234017A1 (en) | 2018-06-07 | 2019-06-04 | Computer-implemented system and method for determining attentiveness of user |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2021525424A true JP2021525424A (ja) | 2021-09-24 |
JPWO2019234017A5 JPWO2019234017A5 (ja) | 2022-05-17 |
JP7427611B2 JP7427611B2 (ja) | 2024-02-05 |
Family
ID=62975424
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020565924A Active JP7427611B2 (ja) | 2018-06-07 | 2019-06-04 | ユーザの注意力を決定するコンピュータ実装システム及び方法 |
Country Status (5)
Country | Link |
---|---|
US (3) | US11146856B2 (ja) |
EP (1) | EP3803758A1 (ja) |
JP (1) | JP7427611B2 (ja) |
GB (1) | GB201809388D0 (ja) |
WO (1) | WO2019234017A1 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11700420B2 (en) * | 2010-06-07 | 2023-07-11 | Affectiva, Inc. | Media manipulation using cognitive state metric analysis |
US10945011B2 (en) * | 2010-12-29 | 2021-03-09 | Comcast Cable Communications, Llc | Measuring video viewing |
US10440428B2 (en) | 2013-01-13 | 2019-10-08 | Comcast Cable Communications, Llc | Measuring video-program-viewing activity |
US20230319348A1 (en) * | 2017-09-12 | 2023-10-05 | Dental Imaging Technologies Corporation | Systems and methods for assessing viewer engagement |
CN111742560B (zh) * | 2017-09-29 | 2022-06-24 | 华纳兄弟娱乐公司 | 向用户提供影视内容的方法和装置 |
CN113545096B (zh) * | 2019-03-11 | 2024-06-14 | 索尼集团公司 | 信息处理装置和信息处理*** |
US11100917B2 (en) * | 2019-03-27 | 2021-08-24 | Adobe Inc. | Generating ground truth annotations corresponding to digital image editing dialogues for training state tracking models |
US11636117B2 (en) * | 2019-06-26 | 2023-04-25 | Dallas Limetree, LLC | Content selection using psychological factor vectors |
CN111144321B (zh) * | 2019-12-28 | 2023-06-09 | 北京如布科技有限公司 | 专注度检测方法、装置、设备和存储介质 |
CN111383494B (zh) * | 2020-05-12 | 2022-03-04 | 四川信息职业技术学院 | 一种英语教学的多模态英语教学装置 |
CN114422859B (zh) * | 2020-10-28 | 2024-01-30 | 贵州省广播电视信息网络股份有限公司 | 基于深度学习的有线电视运营商的排序推荐***及方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013537435A (ja) * | 2010-06-07 | 2013-10-03 | アフェクティヴァ,インコーポレイテッド | ウェブサービスを用いた心理状態分析 |
JP2014149840A (ja) * | 2014-03-12 | 2014-08-21 | Hitachi Ltd | 異常検知方法及びそのシステム |
JP2015510308A (ja) * | 2012-01-10 | 2015-04-02 | マイクロソフト コーポレーション | 個人のリアクションを伴うコンテンツの消費 |
US20170206557A1 (en) * | 2014-06-23 | 2017-07-20 | The Board Of Regents Of The University Of Texas System | Real-time, stream data information integration and analytics system |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5194015B2 (ja) * | 2006-09-05 | 2013-05-08 | インナースコープ リサーチ, インコーポレイテッド | 感覚的刺激への視聴者反応を決定する方法およびシステム |
US9191450B2 (en) * | 2007-09-20 | 2015-11-17 | Disney Enterprises, Inc. | Measuring user engagement during presentation of media content |
WO2009046224A1 (en) * | 2007-10-02 | 2009-04-09 | Emsense Corporation | Providing remote access to media, and reaction and survey data from viewers of the media |
US8462996B2 (en) | 2008-05-19 | 2013-06-11 | Videomining Corporation | Method and system for measuring human response to visual stimulus based on changes in facial expression |
US20100070987A1 (en) * | 2008-09-12 | 2010-03-18 | At&T Intellectual Property I, L.P. | Mining viewer responses to multimedia content |
US9503786B2 (en) * | 2010-06-07 | 2016-11-22 | Affectiva, Inc. | Video recommendation using affect |
US11700420B2 (en) * | 2010-06-07 | 2023-07-11 | Affectiva, Inc. | Media manipulation using cognitive state metric analysis |
US20130218663A1 (en) | 2010-06-07 | 2013-08-22 | Affectiva, Inc. | Affect based political advertisement analysis |
US9077458B2 (en) * | 2011-06-17 | 2015-07-07 | Microsoft Technology Licensing, Llc | Selection of advertisements via viewer feedback |
US20170251262A1 (en) * | 2011-11-07 | 2017-08-31 | Monet Networks, Inc. | System and Method for Segment Relevance Detection for Digital Content Using Multimodal Correlations |
US20160241533A1 (en) * | 2011-11-07 | 2016-08-18 | Anurag Bist | System and Method for Granular Tagging and Searching Multimedia Content Based on User's Reaction |
US11064257B2 (en) * | 2011-11-07 | 2021-07-13 | Monet Networks, Inc. | System and method for segment relevance detection for digital content |
US8943526B2 (en) * | 2011-12-02 | 2015-01-27 | Microsoft Corporation | Estimating engagement of consumers of presented content |
US8635637B2 (en) * | 2011-12-02 | 2014-01-21 | Microsoft Corporation | User interface presenting an animated avatar performing a media reaction |
JP2015505087A (ja) * | 2011-12-07 | 2015-02-16 | アフェクティヴァ, インコーポレイテッドAffectiva, Inc. | 広告効果の感情に基づく評価 |
WO2013142538A1 (en) * | 2012-03-19 | 2013-09-26 | Rentrak Corporation | System and method for measuring television audience engagement |
BR112014031288A2 (pt) * | 2012-06-14 | 2017-06-27 | Thomson Licensing | método, aparelho e sistema para determinar a reação do observador a elementos de conteúdo |
US20130339433A1 (en) * | 2012-06-15 | 2013-12-19 | Duke University | Method and apparatus for content rating using reaction sensing |
US9525952B2 (en) * | 2013-06-10 | 2016-12-20 | International Business Machines Corporation | Real-time audience attention measurement and dashboard display |
GB201314636D0 (en) | 2013-08-15 | 2013-10-02 | Realeyes Data Services Ltd | Method of collecting computer user data |
US10055756B2 (en) * | 2013-10-18 | 2018-08-21 | Apple Inc. | Determining user engagement |
US20160267521A1 (en) | 2013-11-06 | 2016-09-15 | Yume, Inc. | Systems and methods for electronically monitoring audience attentiveness and receptiveness |
GB201411912D0 (en) | 2014-07-03 | 2014-08-20 | Realeyes O | Method of collecting computer user data |
WO2017040723A1 (en) * | 2015-09-01 | 2017-03-09 | Technicolor Usa, Inc. | Methods, systems and apparatus for media content control based on attention detection |
EP4080794A1 (en) * | 2016-01-06 | 2022-10-26 | TVision Insights, Inc. | Systems and methods for assessing viewer engagement |
-
2018
- 2018-06-07 GB GBGB1809388.0A patent/GB201809388D0/en not_active Ceased
-
2019
- 2019-03-18 US US16/357,048 patent/US11146856B2/en active Active
- 2019-06-04 EP EP19730712.7A patent/EP3803758A1/en active Pending
- 2019-06-04 WO PCT/EP2019/064476 patent/WO2019234017A1/en unknown
- 2019-06-04 JP JP2020565924A patent/JP7427611B2/ja active Active
-
2021
- 2021-05-05 US US17/308,682 patent/US11330334B2/en active Active
-
2022
- 2022-05-09 US US17/739,533 patent/US11632590B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013537435A (ja) * | 2010-06-07 | 2013-10-03 | アフェクティヴァ,インコーポレイテッド | ウェブサービスを用いた心理状態分析 |
JP2015510308A (ja) * | 2012-01-10 | 2015-04-02 | マイクロソフト コーポレーション | 個人のリアクションを伴うコンテンツの消費 |
JP2014149840A (ja) * | 2014-03-12 | 2014-08-21 | Hitachi Ltd | 異常検知方法及びそのシステム |
US20170206557A1 (en) * | 2014-06-23 | 2017-07-20 | The Board Of Regents Of The University Of Texas System | Real-time, stream data information integration and analytics system |
Also Published As
Publication number | Publication date |
---|---|
US11146856B2 (en) | 2021-10-12 |
EP3803758A1 (en) | 2021-04-14 |
US11330334B2 (en) | 2022-05-10 |
JP7427611B2 (ja) | 2024-02-05 |
US20210258648A1 (en) | 2021-08-19 |
US11632590B2 (en) | 2023-04-18 |
US20220264183A1 (en) | 2022-08-18 |
US20190379938A1 (en) | 2019-12-12 |
GB201809388D0 (en) | 2018-07-25 |
WO2019234017A1 (en) | 2019-12-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7427611B2 (ja) | ユーザの注意力を決定するコンピュータ実装システム及び方法 | |
US11743527B2 (en) | System and method for enhancing content using brain-state data | |
Saneiro et al. | Towards emotion detection in educational scenarios from facial expressions and body movements through multimodal approaches | |
US20180124459A1 (en) | Methods and systems for generating media experience data | |
US20180115802A1 (en) | Methods and systems for generating media viewing behavioral data | |
US20170095192A1 (en) | Mental state analysis using web servers | |
US20180124458A1 (en) | Methods and systems for generating media viewing experiential data | |
US11483618B2 (en) | Methods and systems for improving user experience | |
US20180109828A1 (en) | Methods and systems for media experience data exchange | |
US11812105B2 (en) | System and method for collecting data to assess effectiveness of displayed content | |
US20210295186A1 (en) | Computer-implemented system and method for collecting feedback | |
Steptoe et al. | Multimodal data capture and analysis of interaction in immersive collaborative virtual environments | |
WO2022168180A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム | |
KR20200135431A (ko) | 처리 장치, 처리 방법, 데이터 처리 장치, 데이터 처리 시스템, 데이터 처리 방법 및 프로그램 | |
WO2022168174A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム | |
WO2022168178A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム | |
WO2022168179A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム | |
WO2022168175A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム | |
WO2022168176A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム | |
WO2022168183A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム | |
WO2022168182A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム | |
WO2022168184A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム | |
WO2022168177A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム | |
WO2022168181A1 (ja) | ビデオセッション評価端末、ビデオセッション評価システム及びビデオセッション評価プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220418 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220418 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230522 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230613 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230912 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231226 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240124 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7427611 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |