JP7234930B2 - 情報処理装置、情報処理方法及び情報処理システム - Google Patents
情報処理装置、情報処理方法及び情報処理システム Download PDFInfo
- Publication number
- JP7234930B2 JP7234930B2 JP2019547920A JP2019547920A JP7234930B2 JP 7234930 B2 JP7234930 B2 JP 7234930B2 JP 2019547920 A JP2019547920 A JP 2019547920A JP 2019547920 A JP2019547920 A JP 2019547920A JP 7234930 B2 JP7234930 B2 JP 7234930B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- reaction
- user
- unit
- reaction information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 53
- 238000003672 processing method Methods 0.000 title claims description 5
- 238000006243 chemical reaction Methods 0.000 claims description 176
- 230000008451 emotion Effects 0.000 claims description 146
- 238000012545 processing Methods 0.000 claims description 36
- 238000000034 method Methods 0.000 description 30
- 230000008569 process Effects 0.000 description 23
- 238000010586 diagram Methods 0.000 description 20
- 238000004891 communication Methods 0.000 description 19
- 230000002996 emotional effect Effects 0.000 description 18
- 230000008859 change Effects 0.000 description 8
- 230000000694 effects Effects 0.000 description 7
- 238000003745 diagnosis Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 230000036760 body temperature Effects 0.000 description 4
- 230000008921 facial expression Effects 0.000 description 4
- 238000012216 screening Methods 0.000 description 3
- 230000002889 sympathetic effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000012447 hatching Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000036651 mood Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 101100444028 Drosophila melanogaster Dso2 gene Proteins 0.000 description 1
- NIPNSKYNPDTRPC-UHFFFAOYSA-N N-[2-oxo-2-(2,4,6,7-tetrahydrotriazolo[4,5-c]pyridin-5-yl)ethyl]-2-[[3-(trifluoromethoxy)phenyl]methylamino]pyrimidine-5-carboxamide Chemical compound O=C(CNC(=O)C=1C=NC(=NC=1)NCC1=CC(=CC=C1)OC(F)(F)F)N1CC2=C(CC1)NN=N2 NIPNSKYNPDTRPC-UHFFFAOYSA-N 0.000 description 1
- 206010041349 Somnolence Diseases 0.000 description 1
- 230000037007 arousal Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000010195 expression analysis Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000006996 mental state Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 235000019640 taste Nutrition 0.000 description 1
- 238000001931 thermography Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/02—Reservations, e.g. for tickets, services or events
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/024—Detecting, measuring or recording pulse rate or heart rate
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/053—Measuring electrical impedance or conductance of a portion of the body
- A61B5/0531—Measuring skin impedance
- A61B5/0533—Measuring galvanic skin response
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0201—Market modelling; Market analysis; Collecting market data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/70—Multimodal biometrics, e.g. combining information from different biometric modalities
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2503/00—Evaluating a particular growth phase or type of persons or animals
- A61B2503/12—Healthy persons not otherwise provided for, e.g. subjects of a marketing survey
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6802—Sensor mounted on worn items
- A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Strategic Management (AREA)
- General Health & Medical Sciences (AREA)
- Development Economics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Entrepreneurship & Innovation (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Tourism & Hospitality (AREA)
- Heart & Thoracic Surgery (AREA)
- Pathology (AREA)
- Medical Informatics (AREA)
- Surgery (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- General Business, Economics & Management (AREA)
- Psychiatry (AREA)
- Marketing (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Social Psychology (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Game Theory and Decision Science (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Operations Research (AREA)
- Psychology (AREA)
- Child & Adolescent Psychology (AREA)
- Developmental Disabilities (AREA)
- Educational Technology (AREA)
Description
提示情報に対するユーザの反応を示す反応情報を取得する反応情報取得部と、
反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成する反応情報利用部と、
を有し、
反応情報取得部は、センサ部から出力されるセンサ情報に基づき反応情報を推定する反応情報推定部を有する
情報処理装置である。
反応情報取得部が、提示情報に対するユーザの反応を示す反応情報を取得し、
反応情報利用部が、反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成し、
反応情報推定部が、センサ部から出力されるセンサ情報に基づき反応情報を推定する
情報処理方法である。
提示情報に対するユーザの反応を示す反応情報を取得する反応情報取得部と、
反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成する反応情報利用部と、
を有し、
反応情報取得部は、センサ部から出力されるセンサ情報に基づき反応情報を推定する反応情報推定部を有する
情報処理システムである。
<1.一実施形態>
1.情報処理システム
1-1.用語に関する説明
1-2.システムの構成例
1-3.予約端末の構成例
1-4.サーバの構成例
1-5.反応情報取得装置の構成例
1-6.情報処理システムにおける処理の概要
2.予約処理
2-1.予約処理の流れ
2-2.予約処理における画面例
3.映画視聴時における感情情報の取得
3-1.センサ部の配置例
3-2.感情推定部の動作
4.サービス情報の生成
4-1.映画視聴後の処理の流れ
4-2.サービス情報生成部の動作例
4-3.サービス情報の具体例
5.反応情報の利用の許諾がない場合の処理
<2.変形例>
なお、以下に説明する実施形態等は本開示の好適な具体例であり、本開示の内容がこれらの実施形態等に限定されるものではない。
[1.情報処理システム]
(1-1.用語に関する説明)
始めに、本実施形態で使用される主な用語について説明する。
「提示情報」とは、ユーザに提示され、ユーザにより視聴、鑑賞、観戦等される情報をいう。本実施形態では、提示情報としてコンテンツより具体的には映画を例にして説明する。
「センサ情報」とは、カメラモジュールや生体センサ等のセンサ装置によって得られる情報(データ)をいう。
「反応情報」とは、提示情報に対するユーザの反応を示す情報をいい、具体的には、センサ情報を解析することにより得られる情報をいう。本実施形態では、反応情報として感情に対応する情報を用いている。したがって、「反応情報」を「感情情報」と称する場合もある。但し、「反応情報」は、感情だけでなく反応の有無やユーザの状態変化を含み、「感情情報」より広い概念である。
「許諾情報」とは、「反応情報」の利用に関する許諾の有無を示す情報をいう。
「サービス情報」とは、「反応情報」の利用を許諾したユーザに提示される情報をいう。
図1は、本実施形態に係る情報処理システム(情報処理システム100)の構成例を示している。情報処理システム100は、例えば、予約端末1と、情報処理装置の一例であるサーバ2と、反応情報取得装置3とを有している。例えば、予約端末1及びサーバ2により予約システムが構成されている。
続いて、各装置の概略的な構成例について説明する。始めに、予約端末1の構成例について説明する。予約端末1は、公共の場や店舗に設置される端末であっても良いし、ユーザUが有するパーソナルコンピュータやスマートフォン、タブレットコンピュータ等であっても良い。本実施形態では、予約端末1が、ユーザUが有するスマートフォンを例にして説明する。
サーバ2は、例えば、サーバ制御部21と、予約情報管理部22と、反応情報利用部の一例であるサービス情報生成部23と、通信部24とを有している。サーバ制御部21は、例えばCPUにより構成されており、サーバ2の各部を制御する。
反応情報取得装置3は、制御部31と、センサ部32と、感情推定部33と、通信部34とを有している。例えば、センサ部32と感情推定部33とにより反応情報推定部が構成される。制御部31は、例えばCPUにより構成されており、反応情報取得装置3の各部を制御する。センサ部32は、例えば映画の視聴時におけるユーザUの状態(反応)を計測するセンサである。本実施形態に係るセンサ部32は、例えば、カメラモジュール32Aと、生体センサ32Bとを有しているが、カメラモジュール32Aのみに基づく構成や、生体センサ32Bのみに基づく構成であっても良い。カメラモジュール32Aは、映画を鑑賞するユーザUを撮影する装置であり、レンズ321と、CCD(Charge Coupled Device)、CMOS(Complementary Metal Oxide Semiconductor)等からなるイメージセンサ322と、画像処理部323と、カメラモジュール32A全体を制御するカメラ制御部324とを含む構成を有している。生体センサ32Bは、ユーザUの生体情報を測定するセンサである。ユーザUの生体情報としては、ユーザUの体温、心拍、脈拍、血圧、発汗、脳波、体の動き等が挙げられる。
情報処理システム100で行われる処理について、図2に示すフローチャートを参照して概略的に説明する。ステップST1では、ユーザが予約端末1を利用して映画の予約を行う予約処理が行われる。ユーザUは、視聴対象の映画を指定すると共に視聴位置である座席を指定する。ユーザUは、さらに、反応情報の利用を許諾するか否かを示す許諾情報の入力を行う。反応情報の利用とは、例えば、反応情報が新規顧客の開拓や映画の嗜好傾向の把握、映画の関連商品販売等のマーケティング情報として利用されることをいう。予約端末1を介して入力された予約情報が、通信によりサーバ2に送信される。サーバ2は、予約端末1から送信された予約情報を管理する。そして、処理がステップST2に進む。
(2-1.予約処理の流れ)
次に、各処理の具体的な内容について説明する。図3は、本実施形態に係る予約処理の流れを示すフローチャートである。ステップST11では、予約端末1の表示部12にログイン画面が表示される。そして、処理がステップST12に進む。ステップST12では、映画及び上映時間の指定がなされる。そして、処理がステップST13に進む。ステップST13では、座席の選択がなされる。そして、処理がステップST14に進む。ステップST14では、反応情報の利用を許諾することにより想定されるユーザへの影響が表示され、特にユーザが得られる利点(メリット)が表示される。そして、処理がステップST15に進む。ステップST15では、許諾の有無が確認される。そして、処理がステップST16に進む。ステップST16では、映画の予約が完了する。
各処理の具体例について説明する。ここでは、予約処理における画面例について説明する。以下に説明する画面例は、予約端末制御部11の制御に応じて表示部12に表示される。
(3-1.センサ部の配置例)
予約処理の後に、ユーザUは実際に映画を視聴する。図10A及び図10Bは、センサ部32のカメラモジュール32Aの配置例を示している。カメラモジュール32Aは、映画館における所定の劇場51内に配置される。例えば、図10Aに示すように、カメラモジュール32Aは、劇場51の前方(スクリーン側)から観客席52側に向けて配置される。図10Bに示すように、観客席52を複数のエリア(例えば、2エリア)に分担して、エリア毎にカメラモジュール32Aが配置されていても良い。これによりカメラモジュール1台の撮影対象となるユーザ毎の解像度を担保することができる。また、複数台のカメラモジュール32Aが異なる角度から共通するエリアを撮影するようにしても良い。これによりユーザに動きがあった場合でも、正確に表情等の認識を行うことができる。1エリアについて複数のカメラモジュール32Aがアレイ状に近接して配置されたものが使用されても良い。カメラモジュール32Aにより得られた画像に基づいて、撮影範囲に存在するユーザUが撮影され、ユーザUの顔認識等がなされる。
カメラモジュール32A及び生体センサ32Bにより得られたセンサ情報が感情推定部33に供給される。感情推定部33は、センサ情報に基づいてユーザの感情を推定する。センサ情報に基づいて感情を推定する方法は、公知の方法を適用することができる。例えば、感情推定部33は、センサ情報に含まれる、撮影されたユーザの顔の特徴点や姿勢から当該ユーザUの感情を推定する。より具体的には、感情推定部33は、センサ情報に基づく顔認識と、認識された顔の表情解析を行い、その結果から、感情推定に必要な要素値を求める。例えば笑顔の程度を示す笑顔度を求め、その絶対値をある感情(例えば「喜び」)の程度と推定することや、笑顔度が所定の閾値を超えた場合に、ユーザがある「喜び」の状態にあると判定してもよい。あるいは、複数の要素感情の割合や、複数の要素感情における支配的な要素感情を特定することによって、最終的な感情を推定してもよい。あるいは、要素感情によらず、機械学習等を用いて認識された顔の表情から直接任意の感情を推定してもよい。ここで感情を推定する際に、センサ情報に含まれる生体情報を参照することにより、より的確に感情を推定することができる。あるいは、カメラモジュール32Aによる撮影を行わず、生体センサ32Bの情報のみに基づいて感情推定を行うこともできる。
(4-1.映画視聴後の処理の流れ)
図16は、ユーザUが映画を視聴した後に行われる処理の流れを示すフローチャートである。ステップST21では映画の視聴が終了する。ユーザUの映画の視聴時におけるセンサ情報に基づいて感情情報が推定され、感情情報がサーバ2に送信される。感情情報を送信する際に、セキュリティを確保するためにランダムデータを重畳しても良い(差分プライバシー等と称される場合もある。)。そして、処理がステップST22に進む。
映画視聴後における処理について具体的に説明する。反応情報取得装置3からサーバ2に対して感情情報が送信され、当該感情情報がサーバ2の通信部24により受信される。感情情報が通信部24からサービス情報生成部23に供給される。
本実施形態では、感情情報の利用を許諾することによりメリットとしてユーザに対してサービス情報を提供するようにしている。サービス情報生成部23は、予約情報を参照して、感情情報の中から許諾有りに対応する座席情報を抽出し、当該座席情報に対応する感情情報を利用してサービス情報を生成する。サービス情報は、例えば、反応情報に基づくユーザUの特性である。サービス情報の具体的な例について図18A~図18Cを参照して説明する。
ここで、反応情報の利用の許諾がない場合に行われる処理について説明する。反応情報の利用の許諾がない場合には、対応するデータは破棄される。例えば、サーバ2のサービス情報生成部23は、予約情報を参照して許諾情報が「0」に対応する座席情報を読み出し、当該座席情報に対応する感情情報のデータを破棄する(消去する)。また、サーバ2は、許諾情報「1」が紐付けられた座席情報に対応する感情情報のデータのみを利用するようにしても良い。また、サーバ2は、許諾された情報のみを使用するようにしても良い。
以上、本開示の一実施形態について具体的に説明したが、本開示の内容は上述した一実施形態に限定されるものではなく、本開示の技術的思想に基づく各種の変形が可能である。
(1)
提示情報に対するユーザの反応を示す反応情報を、当該反応情報の利用が許諾されている場合に利用する反応情報利用部を有する
情報処理装置。
(2)
前記反応情報を取得する反応情報取得部を有する(1)に記載の情報処理装置。
(3)
前記反応情報取得部は、センサ部と、前記センサ部から出力されるセンサ情報に基づいて、前記反応情報を推定する反応情報推定部とを有する(2)に記載の情報処理装置。
(4)
前記センサ部は、所定範囲に存在するユーザを監視し、当該ユーザが前記反応情報の利用を許諾している場合に、当該ユーザに関する前記センサ情報を前記反応情報推定部に出力する(3)に記載の情報処理装置。
(5)
前記反応情報推定部は、所定範囲に存在する全ユーザのセンサ情報を使用してユーザ毎の前記反応情報を推定し、前記許諾したユーザの前記反応情報のみを出力する(3)又は(4)に記載の情報処理装置。
(6)
前記反応情報利用部は、前記反応情報の利用を許諾したユーザに対してのみ提示されるサービス情報を生成する(1)から(5)までの何れかに記載の情報処理装置。
(7)
前記サービス情報は、前記ユーザの反応情報に基づく特性である(6)に記載の情報処理装置。
(8)
前記サービス情報は、前記ユーザの反応情報に基づく特性及び他のユーザの反応情報に対する相対的な特性の少なくとも一方である(6)に記載の情報処理装置。
(9)
前記許諾の有無を示す許諾情報が、前記ユーザが予約した座席情報に対応付けられている(1)から(8)までの何れかに記載の情報処理装置。
(10)
所定のユーザに対応する前記座席情報が複数存在し、且つ、前記許諾情報が許諾有りを示す場合には、前記反応情報利用部は、前記座席情報に位置する複数のユーザの前記反応情報を利用して、当該ユーザ間に関連する情報を生成する(9)に記載の情報処理装置。
(11)
前記反応情報は、前記ユーザの感情に対応する情報である(1)から(10)までの何れかに記載の情報処理装置。
(12)
前記提示情報は、前記ユーザが視聴するコンテンツ、前記ユーザが観戦するスポーツ及び前記ユーザが鑑賞する芸術の何れかである(1)から(11)までの何れかに記載の情報処理装置。
(13)
反応情報利用部が、提示情報に対するユーザの反応を示す反応情報を、当該反応情報の利用が許諾されている場合に利用する
情報処理方法。
(14)
提示情報に対するユーザの反応を示す反応情報を取得する反応情報取得部と、
前記反応情報の利用が許諾されている場合に前記反応情報を利用する反応情報利用部を有する
情報処理システム。
(15)
前記反応情報取得部は、センサ部と、前記センサ部から出力されるセンサ情報に基づいて、反応情報を推定する反応情報推定部とを有する(14)に記載の情報処理システム。
(16)
座席情報により示される座席を予約するための一連の予約処理において、所定の提示情報を鑑賞する際の座席情報と、前記提示情報を鑑賞する際のユーザの反応を示す反応情報の利用を許諾するか否かの入力画面と、前記許諾を促すための情報とを表示部に表示する制御を行う表示制御部を有する
表示装置。
(17)
(16)に記載の表示装置と、前記表示装置に接続される情報処理装置とを有し、
前記情報処理装置は、前記表示装置から出力される前記許諾の有無を示す許諾情報と、予約された前記座席情報とを対応付けて管理する予約情報管理部を有する
予約システム。
Claims (12)
- 提示情報に対するユーザの反応を示す反応情報を取得する反応情報取得部と、
前記反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成する反応情報利用部と、
を有し、
前記反応情報取得部は、センサ部から出力されるセンサ情報に基づき前記反応情報を推定する反応情報推定部を有する
情報処理装置。 - 前記センサ部は、所定範囲に存在するユーザを監視し、当該ユーザが前記反応情報の利用を許諾している場合に、当該ユーザに関する前記センサ情報を前記反応情報推定部に出力する請求項1に記載の情報処理装置。
- 前記反応情報推定部は、所定範囲に存在する全ユーザのセンサ情報を使用してユーザ毎の前記反応情報を推定し、前記許諾したユーザの前記反応情報のみを出力する請求項1に記載の情報処理装置。
- 前記反応情報利用部は、前記二次情報として、前記反応情報の利用を許諾したユーザに対してのみ提示されるサービス情報を生成する請求項1に記載の情報処理装置。
- 前記サービス情報は、前記ユーザの反応情報に基づく特性である請求項4に記載の情報処理装置。
- 前記サービス情報は、前記ユーザの反応情報に基づく特性及び他のユーザの反応情報に対する相対的な特性の少なくとも一方である請求項4に記載の情報処理装置。
- 前記許諾の有無を示す許諾情報が、前記ユーザが予約した座席情報に対応付けられている請求項1に記載の情報処理装置。
- 所定のユーザに対応する前記座席情報が複数存在し、且つ、前記許諾情報が許諾有りを示す場合には、前記反応情報利用部は、前記座席情報に位置する複数のユーザの前記反応情報を利用して、当該ユーザ間に関連する情報を生成する請求項7に記載の情報処理装置。
- 前記反応情報は、前記ユーザの感情に対応する情報である請求項1に記載の情報処理装置。
- 前記提示情報は、前記ユーザが視聴するコンテンツ、前記ユーザが観戦するスポーツ及び前記ユーザが鑑賞する芸術の何れかである請求項1に記載の情報処理装置。
- 反応情報取得部が、提示情報に対するユーザの反応を示す反応情報を取得し、
反応情報利用部が、前記反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成し、
反応情報推定部が、センサ部から出力されるセンサ情報に基づき前記反応情報を推定する
情報処理方法。 - 提示情報に対するユーザの反応を示す反応情報を取得する反応情報取得部と、
前記反応情報の利用が許諾されている場合に、当該反応情報に基づく二次情報を生成する反応情報利用部と、
を有し、
前記反応情報取得部は、センサ部から出力されるセンサ情報に基づき前記反応情報を推定する反応情報推定部を有する
情報処理システム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017199063 | 2017-10-13 | ||
JP2017199063 | 2017-10-13 | ||
PCT/JP2018/028439 WO2019073661A1 (ja) | 2017-10-13 | 2018-07-30 | 情報処理装置、情報処理方法、情報処理システム、表示装置及び予約システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019073661A1 JPWO2019073661A1 (ja) | 2020-11-05 |
JP7234930B2 true JP7234930B2 (ja) | 2023-03-08 |
Family
ID=66101332
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019547920A Active JP7234930B2 (ja) | 2017-10-13 | 2018-07-30 | 情報処理装置、情報処理方法及び情報処理システム |
Country Status (4)
Country | Link |
---|---|
US (1) | US12020180B2 (ja) |
JP (1) | JP7234930B2 (ja) |
CN (1) | CN110959166B (ja) |
WO (1) | WO2019073661A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11023729B1 (en) * | 2019-11-08 | 2021-06-01 | Msg Entertainment Group, Llc | Providing visual guidance for presenting visual content in a venue |
JP7319172B2 (ja) | 2019-11-13 | 2023-08-01 | 富士フイルム株式会社 | 画像処理装置、画像処理方法及び画像処理システム |
JP7395429B2 (ja) * | 2020-06-16 | 2023-12-11 | 住友電気工業株式会社 | 感情解析装置、感情解析システム、感情解析方法、及びコンピュータプログラム |
JPWO2022208723A1 (ja) * | 2021-03-31 | 2022-10-06 | ||
WO2023053278A1 (ja) * | 2021-09-29 | 2023-04-06 | 住友電気工業株式会社 | 提供システム、提供方法、及びコンピュータプログラム |
WO2023203961A1 (ja) * | 2022-04-18 | 2023-10-26 | パナソニックIpマネジメント株式会社 | 心理状態表示システム |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008027301A (ja) | 2006-07-24 | 2008-02-07 | Nec System Technologies Ltd | 座席予約システム、座席予約装置、座席予約方法、及びプログラム |
WO2014192457A1 (ja) | 2013-05-30 | 2014-12-04 | ソニー株式会社 | クライアント装置、制御方法、システム、およびプログラム |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8825482B2 (en) * | 2005-09-15 | 2014-09-02 | Sony Computer Entertainment Inc. | Audio, video, simulation, and user interface paradigms |
JP2009508553A (ja) * | 2005-09-16 | 2009-03-05 | アイモーションズ−エモーション テクノロジー エー/エス | 眼球性質を解析することで、人間の感情を決定するシステムおよび方法 |
US7889073B2 (en) | 2008-01-31 | 2011-02-15 | Sony Computer Entertainment America Llc | Laugh detector and system and method for tracking an emotional response to a media presentation |
JP2010225082A (ja) * | 2009-03-25 | 2010-10-07 | Noritsu Koki Co Ltd | 画像データ管理システムおよび画像データ管理方法 |
JP2013020365A (ja) * | 2011-07-08 | 2013-01-31 | Namco Bandai Games Inc | ゲームシステム、プログラム、及び情報記憶媒体 |
KR20130033520A (ko) | 2011-09-19 | 2013-04-04 | 에스케이플래닛 주식회사 | 온라인 상에 게재된 웹 문서 기반 행사 이력 분석 시스템 및 방법 |
KR101819791B1 (ko) * | 2012-03-08 | 2018-01-17 | 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 | 모바일 디바이스와 연관된 경험의 품질 측정 |
JP2013223038A (ja) * | 2012-04-13 | 2013-10-28 | Olympus Imaging Corp | 撮像装置及び撮像のための照明方法 |
US9721010B2 (en) * | 2012-12-13 | 2017-08-01 | Microsoft Technology Licensing, Llc | Content reaction annotations |
JP2014130467A (ja) * | 2012-12-28 | 2014-07-10 | Sony Corp | 情報処理装置、情報処理方法及びコンピュータプログラム |
JP2014134922A (ja) * | 2013-01-09 | 2014-07-24 | Sony Corp | 情報処理装置、情報処理方法およびプログラム |
KR20150126196A (ko) | 2014-05-02 | 2015-11-11 | 삼성전자주식회사 | 사용자 감성 활동 기반 데이터 처리 장치 및 방법 |
CN105787574A (zh) * | 2014-12-26 | 2016-07-20 | 阿里巴巴集团控股有限公司 | 提供座位信息的方法及装置 |
CN107995477A (zh) * | 2016-10-26 | 2018-05-04 | 中联盛世文化(北京)有限公司 | 图像展示方法、客户端及***、图像发送方法及服务器 |
US11291796B2 (en) * | 2016-12-29 | 2022-04-05 | Huawei Technologies Co., Ltd | Method and apparatus for adjusting user emotion |
US10348658B2 (en) * | 2017-06-15 | 2019-07-09 | Google Llc | Suggested items for use with embedded applications in chat conversations |
-
2018
- 2018-07-30 US US16/629,343 patent/US12020180B2/en active Active
- 2018-07-30 WO PCT/JP2018/028439 patent/WO2019073661A1/ja active Application Filing
- 2018-07-30 JP JP2019547920A patent/JP7234930B2/ja active Active
- 2018-07-30 CN CN201880049224.8A patent/CN110959166B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008027301A (ja) | 2006-07-24 | 2008-02-07 | Nec System Technologies Ltd | 座席予約システム、座席予約装置、座席予約方法、及びプログラム |
WO2014192457A1 (ja) | 2013-05-30 | 2014-12-04 | ソニー株式会社 | クライアント装置、制御方法、システム、およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
CN110959166A (zh) | 2020-04-03 |
WO2019073661A1 (ja) | 2019-04-18 |
US12020180B2 (en) | 2024-06-25 |
CN110959166B (zh) | 2024-04-30 |
JPWO2019073661A1 (ja) | 2020-11-05 |
US20210158228A1 (en) | 2021-05-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7234930B2 (ja) | 情報処理装置、情報処理方法及び情報処理システム | |
CN105339969B (zh) | 链接的广告 | |
JP6752819B2 (ja) | 感情検出システム | |
TWI581128B (zh) | 基於媒體反應來***體節目的方法、系統及電腦可讀取儲存記憶體 | |
Carah et al. | Algorithmic hotness: Young women’s “promotion” and “reconnaissance” work via social media body images | |
US20170315699A1 (en) | Novel system for capture, transmission, and analysis of emotions, perceptions, and sentiments with real-time responses | |
US9014509B2 (en) | Modifying digital images to increase interest level | |
US20130151333A1 (en) | Affect based evaluation of advertisement effectiveness | |
TW201301177A (zh) | 經由觀眾回饋的廣告選擇 | |
US20140002342A1 (en) | System for presenting high-interest-level images | |
KR20140045412A (ko) | 환경 센싱에 기초한 비디오 하이라이트 식별 기법 | |
US20120083675A1 (en) | Measuring affective data for web-enabled applications | |
US20140002644A1 (en) | System for modifying images to increase interestingness | |
JP2020126645A (ja) | 情報処理方法、端末装置及び情報処理装置 | |
US10755487B1 (en) | Techniques for using perception profiles with augmented reality systems | |
CN103621104A (zh) | 基于兴趣的视频流 | |
AU2012256402A1 (en) | Video recommendation based on affect | |
TW201407516A (zh) | 決定當前呈現的媒體節目的未來部分 | |
US20130102854A1 (en) | Mental state evaluation learning for advertising | |
JP7155248B2 (ja) | 記憶の協調的回想の適応提示のためのキュー・データ・モデルの実装 | |
US20130218663A1 (en) | Affect based political advertisement analysis | |
Girges et al. | Categorizing identity from facial motion | |
JP7343660B2 (ja) | 画像処理装置、画像処理方法、プログラムおよび記録媒体 | |
Vermeulen et al. | Heartefacts: augmenting mobile video sharing using wrist-worn heart rate sensors | |
JP7260505B2 (ja) | 情報処理装置、情報処理方法、情報処理プログラム及び端末装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210614 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220719 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220920 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230124 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230206 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7234930 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |