JP2021121912A - Information processing device and information processing method - Google Patents
Information processing device and information processing method Download PDFInfo
- Publication number
- JP2021121912A JP2021121912A JP2020015036A JP2020015036A JP2021121912A JP 2021121912 A JP2021121912 A JP 2021121912A JP 2020015036 A JP2020015036 A JP 2020015036A JP 2020015036 A JP2020015036 A JP 2020015036A JP 2021121912 A JP2021121912 A JP 2021121912A
- Authority
- JP
- Japan
- Prior art keywords
- user
- guide
- exhibit
- information processing
- control unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 66
- 238000003672 processing method Methods 0.000 title claims abstract description 9
- 238000004458 analytical method Methods 0.000 claims abstract description 61
- 230000009471 action Effects 0.000 claims description 5
- 230000004044 response Effects 0.000 claims description 4
- 238000000034 method Methods 0.000 description 93
- 230000008569 process Effects 0.000 description 48
- 238000010422 painting Methods 0.000 description 24
- 238000005516 engineering process Methods 0.000 description 21
- 238000001514 detection method Methods 0.000 description 13
- 238000004891 communication Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 10
- 238000012545 processing Methods 0.000 description 7
- 230000006399 behavior Effects 0.000 description 6
- 239000011521 glass Substances 0.000 description 5
- 238000004519 manufacturing process Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 210000001508 eye Anatomy 0.000 description 3
- 238000006748 scratching Methods 0.000 description 3
- 230000002393 scratching effect Effects 0.000 description 3
- 235000019640 taste Nutrition 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 210000005252 bulbus oculi Anatomy 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 230000036760 body temperature Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000037152 sensory function Effects 0.000 description 1
- 230000015541 sensory perception of touch Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
Landscapes
- Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Engineering & Computer Science (AREA)
- Accounting & Taxation (AREA)
- Development Economics (AREA)
- Finance (AREA)
- Economics (AREA)
- Game Theory and Decision Science (AREA)
- Entrepreneurship & Innovation (AREA)
- Marketing (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
本技術は、情報処理装置、及び情報処理方法に関し、特に、ユーザの満足度を向上させることができるようにした情報処理装置、及び情報処理方法に関する。 The present technology relates to an information processing device and an information processing method, and more particularly to an information processing device and an information processing method capable of improving user satisfaction.
美術館や博物館等では、音声ガイドを利用することで、鑑賞者は、展示物に関する詳細な情報を得ることができる。この種の音声ガイドでは、あらかじめ用意された説明を再生するため、鑑賞者ごとの個人差や、館内での状況による差に対応することができない。 In museums and the like, audio guides allow viewers to obtain detailed information about exhibits. Since this type of audio guide reproduces the explanation prepared in advance, it is not possible to deal with individual differences among viewers and differences due to the situation in the hall.
これに対し、特許文献１には、美術館や博物館の館内のどの作品を鑑賞したかの鑑賞時間を含めて鑑賞者の嗜好を分析し、その分析結果から鑑賞できなかった作品の中でお薦め作品を決定し、退館した後にお薦め作品を見学者に電子メールで通知する技術が開示されている。
On the other hand,
しかしながら、従来の技術であると、嗜好の分析が一括して行われるため、リアルタイムでの鑑賞者や館内の変化に追従することができない。そのため、鑑賞者に対するガイドの提示に際しては、リアルタイムでの鑑賞者や館内の変化にも対応して、ユーザの満足度を向上させることが求められていた。 However, with the conventional technology, the tastes are analyzed in a batch, so that it is not possible to follow the changes in the viewer or the hall in real time. Therefore, when presenting a guide to viewers, it has been required to improve user satisfaction in response to changes in the viewer and the hall in real time.
本技術はこのような状況に鑑みてなされたものであり、ユーザの満足度を向上させることができるようにするものである。 This technology was made in view of such a situation, and makes it possible to improve the satisfaction of the user.
本技術の一側面の情報処理装置は、分析対象データに基づいて、対象物が存在する空間にいるユーザと前記対象物に関するイベントを分析し、前記イベントの分析結果に基づいて、前記ユーザに対する前記対象物のガイドの提示を制御する制御部を備える情報処理装置である。 The information processing device of one aspect of the present technology analyzes an event related to the user in the space where the object exists and the object based on the analysis target data, and based on the analysis result of the event, the information processing device for the user It is an information processing device including a control unit that controls the presentation of a guide of an object.
本技術の一側面の情報処理方法は、情報処理装置が、分析対象データに基づいて、対象物が存在する空間にいるユーザと前記対象物に関するイベントを分析し、前記イベントの分析結果に基づいて、前記ユーザに対する前記対象物のガイドの提示を制御する情報処理方法である。 In the information processing method of one aspect of the present technology, the information processing apparatus analyzes an event related to the user in the space where the object exists and the object based on the analysis target data, and based on the analysis result of the event. , Is an information processing method that controls the presentation of a guide for the object to the user.
本技術の一側面の情報処理装置、及び情報処理方法においては、分析対象データに基づいて、対象物が存在する空間にいるユーザと前記対象物に関するイベントが分析され、前記イベントの分析結果に基づいて、前記ユーザに対する前記対象物のガイドの提示が制御される。 In the information processing device and the information processing method of one aspect of the present technology, the user in the space where the object exists and the event related to the object are analyzed based on the analysis target data, and based on the analysis result of the event. Therefore, the presentation of the guide of the object to the user is controlled.
本技術の一側面の情報処理装置は、独立した装置であってもよいし、１つの装置を構成している内部ブロックであってもよい。 The information processing device on one aspect of the present technology may be an independent device or an internal block constituting one device.
＜１．本技術の実施の形態＞ <1. Embodiment of this technology>
（音声ガイドの利用例）
図１は、美術館等の施設における音声ガイドを利用した鑑賞の例を示している。
(Example of using voice guide)
FIG. 1 shows an example of appreciation using an audio guide in a facility such as a museum.
美術館や博物館、観光施設等の施設では、音声ガイドを利用することで、鑑賞者は、絵画や彫刻等の展示物の見所や、より深い鑑賞のために知っておきたい事柄、時代背景、物語などの音声を聴きながら、同時に展示物をじっくり観ることができる。 By using audio guides at museums, tourist facilities, and other facilities, viewers can see the highlights of exhibits such as paintings and sculptures, as well as things they need to know for deeper viewing, historical backgrounds, and stories. You can take a closer look at the exhibits while listening to the audio.
図１において、ユーザは、絵画を観ながら、ユーザ端末１０で再生される音声ガイドを、イヤホンを利用して聴いている。この音声ガイドでは、ユーザが観ている絵画に関する事柄や時代背景などが再生されるため、ユーザは、同時に観ている絵画の鑑賞体験をより味わい深いものとすることができる。
In FIG. 1, the user is listening to the audio guide reproduced on the
ユーザ端末１０は、ガイド専用の機器、又はガイド用のアプリケーションをインストールしたスマートフォンやタブレット端末、眼鏡型のウェアラブル機器等の機器である。ユーザ端末１０は、音声ガイドを再生する機能のほか、動画や静止画、アニメーション等を画面に表示する機能を有していても構わない。
The
ところで、美術館等の施設における展示物の鑑賞は、現状、音声ガイドによるものが主流であり、ユーザの個人差やその場の状況による差などに対応することができなかった。 By the way, at present, audio guides are the mainstream for viewing exhibits in facilities such as museums, and it has not been possible to deal with individual differences among users and differences due to the situation at the time.
それに対し、美術館の館内のどの作品を鑑賞したかの鑑賞時間を含めて鑑賞者の嗜好を分析し、その分析結果から鑑賞できなかった作品の中でお薦め作品を決定し、退館した後にお薦め作品を見学者に電子メールで通知する方法がある。 On the other hand, we analyze the tastes of the viewers, including the viewing time of which works in the museum, determine the recommended works from the analysis results, and recommend them after leaving the museum. There is a way to notify visitors by email of the work.
しかしながら、この方法であると、嗜好の分析が一括して行われるため、リアルタイムでの鑑賞者や館内の変化に追従することができない。その結果として、美術館等の施設において、鑑賞者に対してガイドを提示するに際し、リアルタイムでの鑑賞者や館内の変化に対応することができずに、その施設に対する満足度が低下する恐れがある。 However, with this method, preference analysis is performed collectively, so it is not possible to follow changes in the viewer or in the hall in real time. As a result, when presenting a guide to a viewer in a facility such as a museum, it may not be possible to respond to changes in the viewer or the hall in real time, and the satisfaction level with the facility may decrease. ..
そこで、本技術では、美術館等の施設において、ユーザに対し、イベントに応じた個別のガイドを提示することで、リアルタイムでの鑑賞者や館内の変化にも対応できるようにして、その施設に対するユーザの満足度を向上させるようにする。以下、図面を参照しながら、本技術の実施の形態について説明する。 Therefore, in this technology, in a facility such as a museum, by presenting an individual guide according to the event to the user, it is possible to respond to changes in the viewer or the hall in real time, and the user for the facility. Try to improve your satisfaction. Hereinafter, embodiments of the present technology will be described with reference to the drawings.
（システム構成）
図２は、本技術を適用した情報処理システムの一実施の形態として、提示システム１の構成例を示している。
(System configuration)
FIG. 2 shows a configuration example of the
提示システム１は、ユーザ端末１０、及びサーバ２０から構成される。提示システム１において、ユーザ端末１０とサーバ２０とは、ネットワークを介して相互に接続される。このネットワークには、インターネット、イントラネット、携帯電話網等の通信網を含む。
The
ユーザ端末１０は、例えば、ガイド専用の機器、スマートフォン、タブレット端末、眼鏡型のウェアラブル機器、PC(Personal Computer)などとして構成される。ユーザ端末１０が、スマートフォン等の機器として構成される場合には、ネットワークを介してダウンロードされたガイド用のアプリケーションが、インストールされる。
The
ユーザ端末１０は、入力部１０１、及び提示部１０２を有する。
The
入力部１０１は、各種のセンシングで得られるセンサデータや、ユーザの発話や操作に応じた入力データなどの各種のデータを取得し、分析対象データとして出力する。入力部１０１は、位置検出部１１１、状態検出部１１２、及び対話入力部１１３を有する。
The
位置検出部１１１は、空間情報や時間情報等のセンシングを行い、そのセンシングの結果得られるユーザの位置に関するセンサデータを出力する。位置検出部１１１は、BLEセンサや赤外線センサ等のセンサのほか、カメラ、マイクロフォンなどを含む。
The
BLEセンサは、近距離無線通信技術であるBLE(Bluetooth Low Energy)を利用したセンサである。赤外線センサは、赤外線を受光し電気信号に変換して必要な情報を取り出して利用するセンサである。 The BLE sensor is a sensor that uses BLE (Bluetooth Low Energy), which is a short-range wireless communication technology. An infrared sensor is a sensor that receives infrared rays, converts them into electrical signals, and extracts and uses necessary information.
カメラは、被写体からの光を光電変換して信号処理を行うことで得られる撮影画像データを、センサデータとして出力する。マイクロフォンは、空気の振動としての音を受け付け、その電気信号としての音データを、センサデータとして出力する。 The camera outputs captured image data obtained by performing signal processing by photoelectric conversion of light from a subject as sensor data. The microphone receives sound as vibration of air and outputs sound data as its electric signal as sensor data.
状態検出部１１２は、空間情報や時間情報等のセンシングを行い、そのセンシングの結果得られるユーザの状態に関するセンサデータを出力する。状態検出部１１２は、ユーザの視線や動作、生体情報を取得するための各種のセンサのほか、カメラなどを含む。
The
各種のセンサとしては、例えば、XYZ軸の３方向の加速度を測定する加速度センサ、XYZ軸の３軸の角速度を測定するジャイロセンサ、生物の持つ心拍数、体温、又は姿勢といった情報を測定する生体センサ、近接するものを測定する近接センサ、磁場（磁界）の大きさや方向を測定する磁気センサなどの各種のセンサを含めることができる。なお、位置検出部１１１と状態検出部１１２では、同一のカメラを用いることができる。
Various sensors include, for example, an acceleration sensor that measures acceleration in three directions of the XYZ axes, a gyro sensor that measures the angular velocity of the three axes of the XYZ axes, and a living body that measures information such as the heart rate, body temperature, or posture of the organism. Various sensors such as a sensor, a proximity sensor that measures a proximity object, and a magnetic sensor that measures the magnitude and direction of a magnetic field (magnetic field) can be included. The same camera can be used in the
対話入力部１１３は、ユーザとの対話を行うためのユーザインターフェースであり、対話に応じた音声データやテキストデータ等の入力データを出力する。対話入力部１１３は、マイクロフォンや、タッチパネル、物理的なボタンなどを含む。なお、位置検出部１１１と対話入力部１１３では、同一のマイクロフォンを用いることができる。
The
ユーザ端末１０では、入力部１０１から出力される分析対象データが、ネットワークを介してサーバ２０に送信される。
At the
提示部１０２は、ユーザの視覚、聴覚、及び触覚のうち、少なくとも１つの感覚機能により、ユーザに感知されるように対象物（美術館の展示物等）のガイドを提示する。提示部１０２は、音声出力部１２１、及び画像出力部１２２を有する。なお、提示部１０２では、音声出力部１２１、及び画像出力部１２２のうち、いずれか一方を有する構成としても構わない。
The
音声出力部１２１は、そこに供給される音データに応じた音を出力する。音声出力部１２１は、スピーカとして構成されるか、あるいは無線又は有線で接続されるイヤホンやヘッドホンから音を出力してもよい。
The
画像出力部１２２は、そこに供給される画像データに応じた画像を表示する。画像出力部１２２は、ディスプレイやプロジェクタ等として構成される。
The
サーバ２０は、専用のサーバなどから構成される。サーバ２０は、状態分析部２１１、コンテンツ制御部２１２、及び提示制御部２１３を含む制御部２００を有する。また、サーバ２０は、ユーザＤＢ２２１、及びコンテンツＤＢ２２２などのデータベースを有する。
The
サーバ２０では、ネットワークを介してユーザ端末１０から送信されてくる分析対象データが受信され、状態分析部２１１に供給される。
The
状態分析部２１１は、分析対象データに基づいて、状態分析処理を実行し、その分析結果を、コンテンツ制御部２１２に供給する。また、状態分析部２１１は、状態分析処理の実行に際して、必要に応じてユーザＤＢ２２１又はコンテンツＤＢ２２２等のデータベースに格納された情報を参照することができる。
The
この状態分析処理では、センサデータや入力データ等の分析対象データに基づき、ユーザ（鑑賞者）と対象物（美術館の展示物等）に関するイベントが分析される。例えば、このイベントとしては、ユーザの動作に関するイベント、ユーザの歩行速度に関するイベント、ユーザによる展示物に対する注視点に関するイベント、ユーザから要求されるガイドの所要時間に関するイベントなどを含むが、その詳細は後述する。 In this state analysis process, events related to the user (viewer) and the object (exhibits in the museum, etc.) are analyzed based on the analysis target data such as sensor data and input data. For example, this event includes an event related to the user's movement, an event related to the user's walking speed, an event related to the user's gaze on the exhibit, an event related to the time required for the guide requested by the user, and the like, the details of which will be described later. do.
コンテンツ制御部２１２は、状態分析部２１１から供給される分析結果に基づいて、コンテンツＤＢ２２２に記録されたガイド等のコンテンツを処理し、提示制御部２１３に供給する。
The
提示制御部２１３は、コンテンツ制御部２１２から供給されるガイド等のコンテンツを、ネットワークを介してユーザ端末１０の提示部１０２に提示するための制御を行う。
The
ユーザＤＢ２２１は、ユーザごとに、各ユーザに関する情報（嗜好情報や履歴情報等）を記録する。コンテンツＤＢ２２２は、ガイド等のコンテンツを記録する。また、後述する図５，図７，図９，図１０のテーブルは、コンテンツＤＢ２２２に記録される。
The
なお、図２においては、ユーザ端末１０とサーバ２０の最小の構成を示しており、他の機能が含まれても構わない。
Note that FIG. 2 shows the minimum configuration of the
例えば、ユーザ端末１０では、半導体メモリ等の補助記憶装置、セルラー方式の通信（例えば5G等）や無線LAN(Local Area Network)などの無線通信若しくは有線通信に対応した通信モジュール、又は物理的なボタンやタッチパネル等の操作部などを含む構成としてもよい。また、図２では、１台のユーザ端末１０を例示しているが、美術館等の施設の空間にいるユーザのそれぞれが、ユーザ端末１０を所持することができる。
For example, in the
また、サーバ２０は、複数のサーバから構成されるようにしてもよく、機能ごとにサービスとして、別個のサーバが提供してもよい。機能ごとのサービスは、同一の事業者が提供することは勿論、サービスごとに異なる事業者が提供してもよい。
Further, the
提示システム１は、以上のように構成される。
The
（ガイド提示処理の流れ）
次に、図３のフローチャートを参照して、提示システム１を構成する各装置で実行されるガイド提示処理の流れを説明する。
(Flow of guide presentation process)
Next, the flow of the guide presentation process executed by each device constituting the
図３の説明では、美術館において、各エリアに設置された絵画等の展示物を、多数の鑑賞者が鑑賞している場合を想定している。また、鑑賞者のうち、処理の対象となる鑑賞者を、ユーザともいう。美術館の館内に設置された展示物のうち、ユーザの鑑賞の対象となる展示物を、対象展示物ともいう。 In the explanation of FIG. 3, it is assumed that a large number of viewers are viewing exhibits such as paintings installed in each area in the museum. In addition, among the viewers, the viewer to be processed is also referred to as a user. Among the exhibits installed in the museum, the exhibits that the user can appreciate are also called the target exhibits.
ステップＳ１１において、状態分析部２１１は、分析対象データに基づいて、状態分析処理を行い、美術館の館内を移動するユーザの歩行速度を検知する。
In step S11, the
ステップＳ１２において、状態分析部２１１は、分析対象データとユーザの歩行の分析結果に基づいて、状態分析処理を行い、美術館の館内におけるユーザの立ち止まり位置を検知する。
In step S12, the
ステップＳ１３において、状態分析部２１１は、分析対象データとユーザの立ち止まり位置に基づいて、状態分析処理を行い、当該立ち止まり位置の近傍に設置された対象展示物が、ユーザに対し、既にガイド提示済みの展示物であるかどうかを判定する。
In step S13, the
ステップＳ１３の判定処理で、対象展示物が、ガイド提示済みの展示物ではないと判定された場合、処理は、ステップＳ１４に進められる。 If it is determined in the determination process of step S13 that the target exhibit is not an exhibit for which the guide has been presented, the process proceeds to step S14.
ステップＳ１４において、状態分析部２１１は、対象展示物の設置位置に対するユーザの立ち止まり位置の距離に関する閾値判定を行うことで、当該距離が近いか、遠いかを判定する。
In step S14, the
ステップＳ１４の判定処理で、距離を示す値が一定値未満となり、対象展示物に対するユーザの距離が近いと判定された場合、処理は、ステップＳ１５に進められる。 If the determination process in step S14 determines that the value indicating the distance is less than a certain value and the user's distance to the target exhibit is short, the process proceeds to step S15.
ステップＳ１５において、提示制御部２１３は、コンテンツ制御部２１２からの制御に従い、対象展示物の技法ガイドを、ユーザが所持したユーザ端末１０の提示部１０２に提示する。この技法ガイドは、対象展示物の細部の特徴に関する説明を含むガイドであり、音声出力部１２１から音声として出力されてもよいし、画像出力部１２２により画像として表示してもよい。
In step S15, the
一方で、ステップＳ１４の判定処理で、距離を示す値が一定値以上となり、対象展示物に対するユーザの距離が遠いと判定された場合、処理は、ステップＳ１６に進められる。 On the other hand, in the determination process of step S14, when the value indicating the distance becomes a certain value or more and it is determined that the distance of the user to the target exhibit is long, the process proceeds to step S16.
ステップＳ１６において、提示制御部２１３は、コンテンツ制御部２１２からの制御に従い、対象展示物の全体・背景ガイドを、ユーザが所持したユーザ端末１０の提示部１０２に提示する。この全体・背景ガイドは、対象展示物の全体と背景に関する説明を含むガイドであり、音声出力部１２１による音声、又は画像出力部１２２による画像として提示される。
In step S16, the
例えば、図４に示すように、美術館に設置された展示物ａ−１を天井側から見た場合において、展示物ａ−１である絵画に対する空間内の領域として、その絵画の横幅に対応した直径からなる半円状の近エリアＡ１１と、その絵画の横幅よりも大きな直径からなる半円状の遠エリアＡ１２を想定する。 For example, as shown in FIG. 4, when the exhibit a-1 installed in the museum is viewed from the ceiling side, it corresponds to the width of the painting as an area in the space for the painting which is the exhibit a-1. It is assumed that a semicircular near area A11 having a diameter and a semicircular far area A12 having a diameter larger than the width of the painting are assumed.
このとき、ユーザＵが、展示物ａ−１に対してより近い領域となる近エリアＡ１１にいる場合、提示部１０２には、技法ガイドが提示される。一方で、ユーザＵが、展示物ａ−１に対してより遠い領域となる遠エリアＡ１２にいる場合、提示部１０２には、全体・背景ガイドが提示される。
At this time, when the user U is in the near area A11, which is a region closer to the exhibit a-1, the technique guide is presented to the
図５は、展示物に対するユーザの位置に応じたガイドの例を示している。 FIG. 5 shows an example of a guide according to the user's position with respect to the exhibit.
図５においては、展示物IDにより識別される展示物（絵画）ごとに、一般ガイドのほか、ユーザの位置に応じて提示される詳細ガイドが用意されている。この例では、各展示物の詳細ガイドとして、技法、制作背景、時代背景の３種類のガイドを例示しているが、２種類以下又は４種類以上の詳細ガイドを用意しても構わない。 In FIG. 5, in addition to a general guide, a detailed guide presented according to the position of the user is prepared for each exhibit (painting) identified by the exhibit ID. In this example, three types of guides, technique, production background, and historical background, are illustrated as detailed guides for each exhibit, but two or less or four or more types of detailed guides may be prepared.
展示物ID 001の展示物に対するガイドには、詳細ガイドとして、「特にひっかくようなタッチが・・・」である技法ガイドと、「この時期の作者は、家族との・・・」である制作背景ガイドと、「自由に国境を行き来する・・・」である時代背景ガイドがあらかじめ用意されている。
The guides for the exhibits with
ユーザが近エリアＡ１１にいる場合に、「特にひっかくようなタッチが・・・」である説明が提示され、遠エリアＡ１２にいる場合には、「この時期の作者は、家族との・・・」と「自由に国境を行き来する・・・」である説明がそれぞれ提示される。なお、一般ガイドは、ユーザが遠エリアＡ１２にいる場合などに提示可能である。 When the user is in the near area A11, the explanation "especially scratching touch ..." is presented, and when the user is in the far area A12, "the author at this time is with the family ..." "And" freely cross the border ... "are presented respectively. The general guide can be presented when the user is in the distant area A12.
また、展示物ID 002,003,004の展示物に対するガイドとしては、展示物ID 001の展示物のガイドと同様に、技法ガイドと、制作背景ガイドと、時代背景ガイドがそれぞれ用意されており、ユーザが近エリアＡ１１にいる場合に、各展示物に応じた技法ガイドが提示され、遠エリアＡ１２にいる場合には、各展示物に応じた制作背景ガイドと時代背景ガイドが提示される。
In addition, as a guide for the exhibit with exhibit ID 002,003,004, a technique guide, a production background guide, and an era background guide are prepared in the same way as the guide for the exhibit with
図３に戻り、ステップＳ１５，又はＳ１６の処理が終了すると、処理は、ステップＳ１７に進められる。ステップＳ１７において、状態分析部２１１は、分析対象データに基づいて、ユーザが鑑賞を終了したかどうかを判定する。
Returning to FIG. 3, when the process of step S15 or S16 is completed, the process proceeds to step S17. In step S17, the
ステップＳ１７の判定処理で、ユーザが鑑賞を終了していないと判定された場合、処理は、ステップＳ１１に戻り、上述した処理が繰り返される。 If it is determined in the determination process of step S17 that the user has not finished viewing, the process returns to step S11, and the above-mentioned process is repeated.
また、ステップＳ１３の判定処理で、対象展示物が、ガイド提示済みの展示物であると判定された場合、処理は、ステップＳ１８に進められる。ステップＳ１８において、状態分析部２１１は、分析対象データに基づいて、一定時間を経過したかどうかを判定する。
If the determination process in step S13 determines that the target exhibit is an exhibit whose guide has already been presented, the process proceeds to step S18. In step S18, the
ステップＳ１８の判定処理で、一定時間を経過していないと判定された場合、処理は、ステップＳ１９に進められる。ステップＳ１９において、状態分析部２１１は、分析対象データに基づいて、ユーザのリクエストがあったかどうかを判定する。
If it is determined in the determination process of step S18 that a certain time has not elapsed, the process proceeds to step S19. In step S19, the
ステップＳ１９の判定処理で、ユーザリクエストがあったと判定された場合、処理は、ステップＳ１４に進められ、上述したステップＳ１４以降の処理が実行される。すなわち、この場合には、対象展示物に対するユーザの距離に応じて、技法ガイド又は全体・背景ガイドが提示される。 If it is determined in the determination process of step S19 that there is a user request, the process proceeds to step S14, and the processes after step S14 described above are executed. That is, in this case, a technique guide or an overall / background guide is presented according to the distance of the user to the target exhibit.
一方で、ステップＳ１９の判定処理で、ユーザリクエストがないと判定された場合、処理は、ステップＳ１２に戻り、上述したステップＳ１２以降の処理が実行される。すなわち、この場合には、直ちにガイドを提示するのではなく、再度立ち止まり位置が検知され、その立ち止まり位置に応じたガイドの提示が制御される。 On the other hand, if it is determined in the determination process of step S19 that there is no user request, the process returns to step S12, and the processes after step S12 described above are executed. That is, in this case, instead of presenting the guide immediately, the stop position is detected again, and the presentation of the guide according to the stop position is controlled.
また、ステップＳ１８の判定処理で、一定時間を経過したと判定された場合、処理は、ステップＳ２０に進められる。ステップＳ２０において、提示制御部２１３は、コンテンツ制御部２１２からの制御に従い、対象展示物に関する未提示のガイドを、ユーザが所持したユーザ端末１０の提示部１０２に提示する。
If it is determined in the determination process of step S18 that a certain period of time has passed, the process proceeds to step S20. In step S20, the
ここでは、以前に、対象展示物のガイドを提示した際に、提示されなかった詳細な情報に関するガイド等が提示される。ステップＳ２０の処理が終了すると、処理は、ステップＳ１７に進められる。 Here, a guide or the like regarding detailed information that was not presented when the guide of the target exhibit was previously presented is presented. When the process of step S20 is completed, the process proceeds to step S17.
ステップＳ１７の判定処理では、ユーザの鑑賞が終了していないと判定された場合、処理は、ステップＳ１１に戻される。一方で、ステップＳ１７の判定処理で、ユーザの鑑賞が終了したと判定された場合、処理は、ステップＳ２１に進められる。 In the determination process of step S17, if it is determined that the user's viewing is not completed, the process is returned to step S11. On the other hand, if it is determined in the determination process of step S17 that the user's viewing is completed, the process proceeds to step S21.
ステップＳ２１において、提示制御部２１３は、ユーザ端末１０の提示部１０２に提示していたガイドを終了する。ステップＳ２１の処理が終了すると、ガイド提示処理は終了する。
In step S21, the
以上、ガイド提示処理の流れを説明した。このガイド提示処理では、美術館の館内で展示物を鑑賞している対象ユーザと対象展示物に関するイベントとして、対象展示物の設置位置に対する対象ユーザの立ち止まり位置の距離に関するイベントが検知された場合に、その距離に応じて技法ガイド又は全体・背景ガイドが提示される。これにより、ユーザに対し、イベントに応じた個別のガイドが提示されるため、リアルタイムでのユーザの動作の変化等にも対応できるようになって、その施設に対するユーザの満足度を向上させることができる。 The flow of the guide presentation process has been described above. In this guide presentation process, when an event related to the distance between the target user's stopping position and the installation position of the target exhibit is detected as an event related to the target user viewing the exhibit and the target exhibit in the museum. A technique guide or an overall / background guide is presented according to the distance. As a result, individual guides according to the event are presented to the user, so that it becomes possible to respond to changes in the user's behavior in real time and the user's satisfaction with the facility can be improved. can.
（ガイド提示制御の詳細）
上述した説明では、ユーザが展示物に近づいたときに、対象展示物の技法等の細部に関する説明の技法ガイドを提示し、展示物から離れたときには、対象展示物の時代背景や作者に関する説明の全体・背景ガイドを提示する制御を示したが、他のガイド提示制御が行われても構わない。以下、ガイド提示制御の詳細について、下記の（ａ）乃至（ｈ）を参照しながら説明する。
(Details of guide presentation control)
In the above explanation, when the user approaches the exhibit, a technique guide for explaining the details such as the technique of the target exhibit is presented, and when the user leaves the exhibit, the explanation about the historical background and the author of the target exhibit is given. Although the control for presenting the whole / background guide is shown, other guide presentation control may be performed. Hereinafter, the details of the guide presentation control will be described with reference to the following (a) to (h).
（ａ）鑑賞者の歩行速度に応じたガイド提示制御
美術館の館内を移動するユーザの歩行速度に応じて、ガイド量又は話速を制御することができる。ガイド量は、一定時間内に提示可能なガイドを定量的に表したものである。
(A) Guide presentation control according to the walking speed of the viewer The guide amount or the speaking speed can be controlled according to the walking speed of the user moving in the museum. The guide amount is a quantitative representation of the guides that can be presented within a certain period of time.
例えば、美術館内を移動するユーザの歩行速度の閾値判定を行い、歩行速度が、遅い場合と、中程度の場合と、速い場合の３段階で、ガイド量と話速を制御することができる。 For example, the threshold value of the walking speed of the user moving in the museum is determined, and the guide amount and the speaking speed can be controlled in three stages of a slow walking speed, a medium walking speed, and a fast walking speed.
具体的には、ユーザの歩行速度を示す値が一定値未満で、当該歩行速度が遅いと判定された場合には、標準の話速のときはガイド量が標準よりも多くなるように提示を制御し、ガイド量が標準のときは話速が標準よりも遅く（ゆっくりに）なるように提示を制御する。なお、標準とは、ガイドの制作者側で汎用的な設定値（一般的なユーザ向けの設定値）を設定した状態を意味する。 Specifically, when the value indicating the walking speed of the user is less than a certain value and it is determined that the walking speed is slow, the guide amount is presented so as to be larger than the standard at the standard speaking speed. Control and control the presentation so that when the guide amount is standard, the speaking speed is slower (slower) than the standard. The standard means a state in which a general-purpose setting value (setting value for a general user) is set on the side of the guide creator.
また、ユーザの歩行速度を示す値が、遅い歩行速度と速い歩行速度との間の値となる中程度である場合には、標準のガイド量となるように提示を制御する。 Further, when the value indicating the walking speed of the user is medium, which is a value between the slow walking speed and the fast walking speed, the presentation is controlled so as to be a standard guide amount.
また、ユーザの歩行速度が一定値以上で、当該歩行速度が速いと判定された場合には、標準の話速のときにはガイド量が標準よりも少なくなるように提示を制御し、ガイド量が標準のときには話速が速くなるように提示を制御する。なお、歩行速度は、現エリアの展示スペースでの速度に限らず、現エリアや前のエリア等の展示スペースに入る前のユーザの歩行状態を検知して、それを利用しても構わない。 In addition, when the walking speed of the user is equal to or higher than a certain value and it is determined that the walking speed is high, the presentation is controlled so that the guide amount is smaller than the standard at the standard speaking speed, and the guide amount is standard. At the time of, the presentation is controlled so that the speaking speed becomes faster. The walking speed is not limited to the speed in the exhibition space of the current area, and the walking state of the user before entering the exhibition space such as the current area or the previous area may be detected and used.
（ｂ）鑑賞者の注視点に応じたガイドの提示制御
例えば、ユーザの顔向きや視線等から注視点を検知して、当該ユーザが観ている展示物の部分に関する技法を説明する技法ガイドの提示を制御することができる。ここで、注視点は、ユーザの視点が滞留した位置を表している。
(B) Guide presentation control according to the viewer's gaze point For example, a technique guide that detects the gaze point from the user's face orientation, line of sight, etc., and explains the technique related to the part of the exhibit that the user is watching. The presentation can be controlled. Here, the gazing point represents the position where the user's point of view stays.
具体的には、展示物として絵画が展示されている場合に、ユーザが、描かれた部分のうち、人物が着ている服を観ているとき、その服にまつわるタッチの説明などが提示されるようにする。また、ユーザが展示物のタイトルを観ている場合には、そのタイトルの由来の詳しい説明が提示されるようにする。 Specifically, when a painting is exhibited as an exhibit, when the user is looking at the clothes worn by the person in the drawn part, an explanation of the touch related to the clothes is presented. To do so. In addition, when the user is watching the title of the exhibit, a detailed explanation of the origin of the title is presented.
また、例えば、ユーザが展示物を観ている時間が長くなるほど、その技法についての詳細を説明する技法ガイドを提示することができる。具体的には、展示物の特徴部分を移動するような視線が、ユーザの視線として検知された場合には、その特徴部分の技法に関する詳細な説明を継続する。 Also, for example, the longer a user is viewing an exhibit, the more a technique guide can be presented that details the technique. Specifically, when a line of sight that moves the featured part of the exhibit is detected as the line of sight of the user, a detailed explanation of the technique of the featured part will be continued.
例えば、図６に示すように、美術館に設置された展示物ａ−２を天井側から見た場合において、展示物ａ−２である絵画に描かれた特徴的な部分として、特徴部分Ａ，Ｂ，Ｃが描かれているとき、ユーザＵの注視点を検知して、当該ユーザＵが観ている特徴部分に関する技法ガイドを提示することができる。 For example, as shown in FIG. 6, when the exhibit a-2 installed in the museum is viewed from the ceiling side, the feature portion A, as a characteristic portion drawn on the painting which is the exhibit a-2, When B and C are drawn, the gazing point of the user U can be detected and a technique guide regarding the feature portion viewed by the user U can be presented.
すなわち、展示物ａ−２における特徴部分Ａに対し、ユーザＵの顔が向いている場合、又はユーザＵの視線がある場合には、その注視点に応じた特徴部分Ａの技法を説明するガイドが提示される。また、展示物ａ−２の特徴部分Ｂに対し、ユーザＵの注視点がある場合には、特徴部分Ｂの技法を説明するガイドが提示され、展示物ａ−２の特徴部分Ｃに対し、ユーザＵの注視点がある場合には、特徴部分Ｃの技法を説明するガイドが提示される。 That is, when the face of the user U is facing the feature portion A in the exhibit a-2, or when the user U has a line of sight, a guide for explaining the technique of the feature portion A according to the gazing point. Is presented. Further, when the user U has a gaze point on the feature portion B of the exhibit a-2, a guide explaining the technique of the feature portion B is presented, and the feature portion C of the exhibit a-2 is presented with a guide. If there is a gaze point for user U, a guide explaining the technique of feature portion C is presented.
なお、図６では、説明の都合上、展示物ａ−２である絵画の描画面に沿って、ユーザＵが横方向に移動するような記載になっているが、必ずしもユーザＵは移動する必要はなく、ユーザＵがある位置に立ち止まっている状態で、頭部や視線などを動かして、注視する特徴部分を変更しても構わない。また、図６においても、ユーザＵが、近エリアＡ１１から遠エリアＡ１２に移動した場合には、全体・背景ガイドが提示される。 In FIG. 6, for convenience of explanation, it is described that the user U moves laterally along the drawing surface of the painting which is the exhibit a-2, but the user U does not necessarily have to move. Instead, the feature portion to be watched may be changed by moving the head, the line of sight, or the like while the user U is stopped at a certain position. Further, also in FIG. 6, when the user U moves from the near area A11 to the far area A12, the whole / background guide is presented.
図７は、展示物に対するユーザの注視点に応じたガイドの例を示す図である。 FIG. 7 is a diagram showing an example of a guide according to the user's gaze point on the exhibit.
図７においては、展示物IDにより識別される展示物（絵画）ごとに、タイトルに関する説明のほか、ユーザの注視点に応じて提示される技法ガイドが用意されている。この例では、各展示物の技法ガイドとして、特徴部分Ａ，Ｂ，Ｃに関する説明のガイドを例示している。 In FIG. 7, for each exhibit (painting) identified by the exhibit ID, in addition to the explanation about the title, a technique guide presented according to the user's gaze point is prepared. In this example, as a technique guide for each exhibit, a guide for explaining the feature portions A, B, and C is illustrated.
展示物ID 001の展示物に対するガイドには、技法ガイドとして、「花瓶の花は、タッチが・・・」である特徴部分Ａに関する説明と、「ペーパーナイフの色の・・・」である特徴部分Ｂに関する説明と、「左の本は、フランス語で書かれた・・・」である特徴部分Ｃに関する説明があらかじめ用意されている。
As a technique guide, the guide for the
ユーザが近エリアＡ１１にいる場合において、その注視点が、特徴部分Ａにあるときには、「花瓶の花は、タッチが・・・」である説明、特徴部分Ｂにあるときには、「ペーパーナイフの色の・・・」である説明、特徴部分Ｃにあるときには、「左の本は、フランス語で書かれた・・・」である説明が、それぞれ技法ガイドとして提示される。 When the user is in the near area A11 and the gazing point is in the feature portion A, the explanation is "The flower in the vase has a touch ...", and when the user is in the feature portion B, "the color of the paper knife". When the explanation is "..." and the feature part C is, the explanation "The book on the left is written in French ..." is presented as a technique guide.
また、展示物ID 002,003,004の展示物に対するガイドとしては、展示物ID 001の展示物のガイドと同様に、技法ガイドとして、特徴部分Ａ，Ｂ，Ｃに関する説明がそれぞれ用意されており、ユーザによる各展示物の注視点に応じて、その展示物の特徴部分Ａ，Ｂ，Ｃの技法ガイドが提示される。
In addition, as a guide for the exhibit with the exhibit ID 002,003,004, as with the guide for the exhibit with the
上述した図４，図６の説明では、展示物ａ−１，ａ−２として、絵画等の平面的な展示物を例示したが、美術館の展示物としては、彫刻やオブジェ等の立体的な作品もあり、そのような立体的な展示物の場合、ユーザは、立体的な像の表面を、様々な方向から鑑賞することが可能となる。 In the explanations of FIGS. 4 and 6 described above, two-dimensional exhibits such as paintings are illustrated as exhibits a-1 and a-2, but three-dimensional exhibits such as sculptures and objects are used as exhibits in museums. There are also works, and in the case of such a three-dimensional exhibit, the user can appreciate the surface of the three-dimensional image from various directions.
例えば、図８に示すように、美術館に設置された彫刻等の立体形状を有する展示物ａ−３を側面側から見た場合において、展示物ａ−３を観ているユーザＵの位置を検知して、当該ユーザＵが観ている特徴部分に関する技法ガイドを提示することができる。図８において、一点鎖線の矢印Ｇ１１乃至Ｇ１３は、各位置におけるユーザＵの視線を表している。 For example, as shown in FIG. 8, when the exhibit a-3 having a three-dimensional shape such as a sculpture installed in a museum is viewed from the side surface, the position of the user U who is viewing the exhibit a-3 is detected. Then, a technique guide regarding the feature portion that the user U is viewing can be presented. In FIG. 8, arrows G11 to G13 of the alternate long and short dash line represent the line of sight of the user U at each position.
すなわち、展示物ａ−３は、円柱状の形状を有するが、その側面のうち、正面側の正面エリアＡ３１にユーザＵがいる場合、その正面側の技法に関する技法ガイドが提示され、裏面側の裏面エリアＡ３２にユーザＵがいる場合、その裏面側の技法に関する技法ガイドが提示される。 That is, the exhibit a-3 has a columnar shape, but when the user U is in the front area A31 on the front side of the side surface, a technique guide regarding the technique on the front side is presented, and the technique guide on the back side is presented. If there is a user U in the back area A32, a technique guide on the technique on the back side is presented.
また、展示物ａ−３に対し、その円柱状の形状の上面側の上面エリアＡ３３に、ユーザＵがいる場合、その上面側の技法に関する技法ガイドが提示される。 Further, when the user U is in the upper surface area A33 on the upper surface side of the columnar shape with respect to the exhibit a-3, a technique guide regarding the technique on the upper surface side is presented.
なお、図８では、ユーザＵの位置に応じて、技法ガイドの提示を制御したが、ユーザＵの注視点を検知して、当該ユーザが観ている特徴部分に関する技法ガイドを提示することができることは、先に述べた通りである。 In FIG. 8, the presentation of the technique guide is controlled according to the position of the user U, but it is possible to detect the gazing point of the user U and present the technique guide regarding the feature portion that the user is watching. Is as described above.
また、上述した説明において、ユーザＵの注視点が特定の対象にとどまらない場合、すなわち、視点を絶えず移動させて対象物の全体を観ている場合には、展示物の背景などの説明のガイドを提示しても構わない。さらに、展示物の背景の説明のガイドを提示する場合には、その時代の雰囲気を表現する映像や音楽を提示してもよい。 Further, in the above explanation, when the gaze point of the user U is not limited to a specific object, that is, when the viewpoint is constantly moved to view the entire object, a guide for explaining the background of the exhibit and the like. May be presented. Furthermore, when presenting a guide for explaining the background of the exhibit, images and music expressing the atmosphere of the time may be presented.
（ｃ）鑑賞者の経路の取り方に応じたガイド提示制御
美術館内を移動するユーザの経路の取り方に応じて、ガイドの提示制御を行ってもよい。
(C) Guide presentation control according to the route of the viewer The guide presentation may be controlled according to the route of the user moving in the museum.
例えば、ユーザの移動経路として、展示物に対するユーザの距離を示す値が一定値以上から一定値未満に変化する経路となった場合、すなわち、当該展示物に対し、ユーザが遠くから観ながら近づく場合には、当該展示物の全体の特徴に関する説明から、細部の特徴に関する説明へと流れるような説明のガイドの提示を制御する。 For example, when the user's movement route is a route in which the value indicating the user's distance to the exhibit changes from a certain value or more to less than a certain value, that is, when the user approaches the exhibit while looking at it from a distance. Controls the presentation of a guide of explanations that flows from an explanation of the overall features of the exhibit to an explanation of the features of the details.
その反対に、ユーザの移動経路として、展示物に対するユーザの距離を示す値が一定値未満から一定値以上に変化する経路となった場合、すなわち、当該展示物に対し、ユーザが近くで観てから遠ざかる場合には、当該展示物の細部の特徴に関する説明から、全体の特徴に関する説明へと流れるような説明のガイドの提示を制御する。 On the contrary, when the user's movement route is a route in which the value indicating the distance of the user to the exhibit changes from less than a certain value to more than a certain value, that is, the user sees the exhibit in close proximity. When moving away from, control the presentation of a guide to the explanation that flows from the explanation of the detailed features of the exhibit to the explanation of the overall features.
なお、美術館等において展示物の順路が決められている場合に、ユーザが、展示物の順番を飛ばして観ているときには、実際に観た展示物、つまり、選ばれた展示物に共通の特徴を含む説明のガイドの提示を制御することができる。 In addition, when the route of exhibits is decided in a museum or the like and the user skips the order of the exhibits and watches, the exhibits actually seen, that is, the characteristics common to the selected exhibits. It is possible to control the presentation of an explanation guide including.
図９は、展示物の特徴の例を示している。 FIG. 9 shows an example of the features of the exhibit.
図９においては、展示物IDにより識別される展示物（絵画や彫刻等）ごとに、宗教、風景、上流階級、労働者、盛り上げ、ひっかき、繰り返し、点描、幾何学、模倣、陰影などの特徴が用意されており、各展示物は、丸印(〇)が記された特徴を有している。 In FIG. 9, each exhibit (painting, sculpture, etc.) identified by the exhibit ID has features such as religion, landscape, upper class, worker, excitement, scratching, repetition, pointillism, geometry, imitation, and shading. Is prepared, and each exhibit has the features marked with a circle (○).
展示物ID 001の展示物は、宗教、上流階級、繰り返し、及び幾何学である特徴を有している。また、展示物ID 002の展示物は、風景や上流階級等の特徴を有し、展示物ID 003の展示物は、宗教や風景等の特徴を有し、展示物ID 004の展示物は、風景や労働者等の特徴を有する。
ここで、例えば、ユーザが、展示物ID 001の展示物を遠くから観ながら近づく場合、宗教や上流階級等の当該展示物の全体の特徴の説明から、繰り返しや幾何学等の細部の特徴の説明に流れるようなガイドが提示されるようにする。一方で、ユーザが、展示物ID 001の展示物を近くで観てから遠ざかる場合には、繰り返しや幾何学等の当該展示物の細部の特徴の説明から、宗教や上流階級等の全体の特徴の説明に流れるようなガイドが提示されるようにする。
Here, for example, when the user approaches the exhibit with the
（ｄ）鑑賞者ごとに個人化したガイドの提示制御
ユーザごとに個人化したガイドが提示されるようにしてもよい。絵画等の展示物への知識量は、ユーザごとに異なるため、展示物の知識が多いユーザには、一般的な説明を簡略化して、詳しい説明を重点的したガイドを提示することができる。
(D) Control of presenting a personalized guide for each viewer A personalized guide may be presented for each user. Since the amount of knowledge about exhibits such as paintings varies from user to user, it is possible to simplify general explanations and present a guide focusing on detailed explanations to users who have a lot of knowledge about exhibits.
ユーザの知識量に関しては、事前のアンケート登録や、他のイベントの鑑賞履歴などに加え、その場でのエージェントとの音声対話により取得しても構わない。ユーザごとの鑑賞が進むに従い、ユーザＤＢ２２１に蓄積される情報量も多くなり、より個人化したガイドを提示可能となる。
The amount of knowledge of the user may be acquired by registering a questionnaire in advance, viewing history of other events, or by voice dialogue with an agent on the spot. As the appreciation of each user progresses, the amount of information stored in the
例えば、「印象派の代表作を知っていますか？」や、「この作品の時代背景をご存じですか？」などの質問に対し、「知っている」又は「知らない」などの回答を得ることで、ユーザの知識量を取得することができる。ユーザの回答は、例えば、エージェントとの間の音声対話、ユーザ端末１０の提示部１０２に提示された画面の回答に対するタッチ操作、ユーザの頷きなどの動作の検出により得られる。
For example, by getting answers such as "I know" or "I don't know" to questions such as "Do you know the masterpiece of Impressionism?" Or "Do you know the historical background of this work?" , The amount of knowledge of the user can be acquired. The user's answer is obtained by, for example, detecting an action such as a voice dialogue with an agent, a touch operation for the answer on the screen presented to the
また、一般的な説明の簡略化に際しては、例えば、説明文を複数用意しておき、その中から簡略化された説明を選択したり、あるいは、簡易的な説明を動的に生成したりすることができる。 In addition, when simplifying a general explanation, for example, a plurality of explanatory texts are prepared and the simplified explanation is selected from them, or a simple explanation is dynamically generated. be able to.
なお、ユーザに対して複数の刺激を提示して、特に、ユーザの行動に変化が見られた提示方法を用いることができる。例えば、複数の刺激には、音声での問いかけや、ユーザ端末への視覚提示、音（効果音を含む）、音楽などを含めることができる。 In addition, it is possible to present a plurality of stimuli to the user, and in particular, to use a presentation method in which a change in the behavior of the user is observed. For example, the plurality of stimuli can include a question by voice, a visual presentation to a user terminal, a sound (including a sound effect), music, and the like.
ユーザが音声で質問した領域（技法や背景等）に対しては、別エリアでも同じ領域の説明を詳細に提示することができる。この提示によって説明時間が長くなる場合には、相対的に興味の薄い領域の説明を削除すればよい。 For the area (technique, background, etc.) that the user asks by voice, the explanation of the same area can be presented in detail in another area. If the explanation time becomes long due to this presentation, the explanation of the area of relatively little interest may be deleted.
また、美術館や博物館等の館内の空間におけるユーザの嗜好や行動履歴を分析し、その分析結果に基づき、館内に展示された展示物に関するガイドの内容を変更してもよい。 In addition, the user's preference and behavior history in the space of the museum, museum, etc. may be analyzed, and the content of the guide regarding the exhibits exhibited in the museum may be changed based on the analysis result.
例えば、興味のある展示物だけを観ているユーザに対しては、その先に展示されている展示物のうち、興味を持つことが推定される展示物について、より詳細な説明のガイドが提示されるようにするなど、当該ユーザが鑑賞を開始してからの館内での行動に応じて、ガイドの内容を変更することができる。 For example, for users who are only looking at exhibits that they are interested in, a guide with a more detailed explanation of the exhibits that are presumed to be of interest is presented. The contents of the guide can be changed according to the behavior in the hall after the user starts viewing.
さらに、美術大学や美術系専門学校の学生の実習などの特定の意図を持って、美術館等の館内に入館している集団（グループ）に対しては、技法などの特定の種類のガイド量を増やしたガイドを提示してもよい。 Furthermore, for groups that are admitted to museums and other museums with a specific intention, such as practical training for students of art colleges and art colleges, a specific type of guide amount such as techniques is provided. You may present an increased guide.
（ｅ）施設内の混雑に対応したガイド提示制御
ユーザの順路や歩行速度を推定することで、美術館等の館内の混雑状況の影響か、ユーザ個人の影響かを判別してもよい。
(E) Guide presentation control corresponding to congestion in the facility By estimating the route and walking speed of the user, it may be determined whether it is the influence of the congestion situation in the museum or the like or the influence of the individual user.
例えば、美術館等の館内が混雑していない状況であれば、ユーザの個人差として機械学習を行う一方で、館内が混雑している状況であれば、混雑に影響されていると推定して、ユーザを混雑していないエリアに誘導することができる。 For example, if the inside of a museum or the like is not crowded, machine learning is performed as an individual difference of the user, while if the inside of the museum is crowded, it is estimated that it is affected by the congestion. Users can be directed to uncrowded areas.
この誘導に際しては、例えば、「X番が空いています」などの提示を行えばよい。また、ユーザの誘導を行った場合に、当該ユーザが鑑賞できていない展示物については、後からリマインドを行うことができる。これにより、ユーザは、その時に鑑賞できなかった展示物を、確実に後から鑑賞することができる。 At the time of this guidance, for example, "X is vacant" may be presented. In addition, when the user is guided, the exhibit that the user cannot appreciate can be reminded later. As a result, the user can surely view the exhibit that could not be viewed at that time later.
（ｆ）リクエストに応じたガイドのカスタマイズ
ユーザが、ユーザ端末１０を操作して、ガイドの所要時間をリクエストしたとき、その所要時間に応じて、展示物の説明の詳細さの程度を決定して、提示されるガイドの説明の深さを制御してもよい。
(F) Customization of the guide according to the request When the user operates the
図１０は、ガイドの所要時間の例を示している。 FIG. 10 shows an example of the time required for the guide.
図１０においては、展示物IDにより識別される展示物ごとに、一般ガイドと詳細ガイドの所要時間が登録されている。詳細ガイドは、詳細１，詳細２，詳細３，・・・詳細Ｎ（Ｎ：１以上の整数）のように、説明の深さに応じて段階的に詳細な説明が用意されている。
In FIG. 10, the time required for the general guide and the detailed guide is registered for each exhibit identified by the exhibit ID. The detailed guide provides detailed explanations step by step according to the depth of explanation, such as
展示物ID 001の展示物は、一般ガイドが所要時間30秒で、詳細ガイドの詳細１，詳細２，詳細３の所要時間がそれぞれ、60秒、30秒、90秒である。また、展示物ID 002,003,004の展示物は、一般ガイドが所要時間30秒で共通するが、詳細ガイドの詳細１，詳細２，詳細３の所要時間がそれぞれ、40秒、50秒、80秒と、45秒、70秒、85秒と、35秒、20秒、90秒とで異なっている。
The time required for the
ここで、例えば、ユーザによりユーザ端末１０が操作され、展示物ID 001の展示物の所要時間がリクエストされた場合、当該所要時間に応じた説明の深さのガイドが提示されるようにする。所要時間は、例えば、下記の式（１）により定義される。
Here, for example, when the
所要時間＝ガイド時間＋移動時間＋ガイド無し鑑賞時間 ・・・（１） Time required = guide time + travel time + viewing time without guide ... (1)
すなわち、所要時間としては、ガイドを提示するガイド時間に限らず、ユーザの平均的な移動時間や、ガイド無しでの鑑賞時間を加味することができる。なお、移動時間と鑑賞時間は、美術館での展示を開催する主催者側で設定してもよいし、ユーザが、ユーザ端末１０等を操作して設定してもよい。
That is, the required time is not limited to the guide time for presenting the guide, but the average travel time of the user and the viewing time without the guide can be taken into consideration. The travel time and the viewing time may be set by the organizer who holds the exhibition at the museum, or may be set by the user by operating the
ガイド時間として、最短の時間は、一般ガイドだけの提示であり、リクエストされた所要時間に合わせて、詳細１乃至詳細Ｎが適宜追加される。このように、提示されるガイドは、あらかじめ用意された説明の組み合わせとなる。
As the guide time, the shortest time is presented only by the general guide, and
例えば、展示物ID 001の展示物の所要時間として300秒がリクエストされた場合に、移動時間が30秒で、ガイド無し鑑賞時間が150秒であったとき、展示物ID 001の展示物は、一般ガイドの所要時間が30秒であるため、ガイド時間の残り時間は90秒である。また、展示物ID 001の展示物は、詳細１と詳細２の所要時間の合計が90秒である。
For example, if 300 seconds is requested as the time required for the exhibit with
そのため、この例では、当該リクエストに応じて、一般ガイドに、詳細１と詳細２を加えたガイドを、ユーザ端末１０に提示することになる。
Therefore, in this example, in response to the request, a guide obtained by adding
なお、美術館において、最初の数点の展示から、ユーザが展示物の鑑賞を行う際に、ユーザの歩行速度や、ガイド無しでの鑑賞時間をあらかじめ検知しておき、検知した歩行速度や鑑賞時間を、それ以降で行われる所要時間の計算に反映させてもよい。 In the museum, when the user views the exhibits from the first few exhibits, the walking speed of the user and the viewing time without a guide are detected in advance, and the detected walking speed and viewing time are detected. May be reflected in the calculation of the required time performed thereafter.
また、ユーザＤＢ２２１等で管理される、事前の登録や過去の履歴などの情報を用い、美術館における個別の展示ごとに、ガイドの説明の深さを変更してもよい。すなわち、ユーザに関する事前の登録又は過去の履歴の少なくとも一方に関する情報に基づき、所要時間に適合したガイドを提示することができる。
Further, the depth of explanation of the guide may be changed for each individual exhibition in the museum by using information such as pre-registration and past history managed by the
さらには、ユーザによる展示物の鑑賞速度に応じて、それ以降の展示物に対するガイドの説明の深さを変更してもよい。また、鑑賞しない展示物がある場合には、それ以降の展示物に対するガイドの説明を長く（深く）してもよい。 Furthermore, the depth of the guide's explanation for the subsequent exhibits may be changed according to the viewing speed of the exhibits by the user. In addition, if there are exhibits that are not viewed, the guide's explanation for the subsequent exhibits may be lengthened (deep).
（ｇ）複数人グループでの鑑賞時のガイド提示制御
美術館等の施設の空間では、単独で行動するユーザだけでなく、複数人で来場して、グループになって一緒に行動するユーザも存在している。グループで一緒に行動している各ユーザは、ユーザ端末１０をそれぞれ所持している。
(G) Guide presentation control when viewing in groups of multiple people In the space of facilities such as museums, there are not only users who act alone, but also users who come to the venue with multiple people and act together as a group. ing. Each user acting together in a group has a
このとき、一緒に鑑賞しているユーザに対しては、同一のガイドを提示する場合があるが、絵画等の展示物に対する各ユーザの注視点が異なるときには、グループ内の少なくとも一人のユーザの注視点に応じたガイドを共通に提示することができる。 At this time, the same guide may be presented to the users who are watching together, but when each user's gaze point to the exhibit such as a painting is different, the note of at least one user in the group A guide according to the viewpoint can be presented in common.
グループ内のあるユーザの注視点に応じたガイドを共通に提示する際には、その注視点に応じた注視部分をハイライト等で表すことで、当該注視部分に対してグループ内の他のユーザの視線を誘導することができる。 When presenting a guide according to the gaze point of a certain user in the group in common, by highlighting the gaze part according to the gaze point, other users in the group with respect to the gaze part. Can guide the line of sight.
このハイライト方法としては、例えば、ユーザ端末１０が、拡張現実（AR：Augmented Reality）に対応した機器（ARデバイス）であり、AR技術を用いた視覚表現が可能な場合には、ディスプレイを介して、AR情報により、絵画等の展示物における注視部分を点灯や点滅で示したり、その領域を囲んだりすればよい。
As this highlighting method, for example, when the
ARデバイスとしては、通常の眼鏡においてフレームに取り付けられるレンズの位置に、左眼用と右眼用の一対の透過型ディスプレイが配置され、ユーザの目の周辺に装着される眼鏡型のウェアラブル機器（ARグラス）を用いることができる。このARグラスを用いることで、ユーザの視界を実空間から切り離すことなく、AR情報を視界内に表示可能となるため、他のユーザは、絵画等の展示物を観ながら、ハイライトされた注視部分を確認することができる。 As an AR device, a pair of transmissive displays for the left eye and the right eye are arranged at the position of the lens attached to the frame in ordinary eyeglasses, and the eyeglass-type wearable device worn around the user's eye ( AR glasses) can be used. By using this AR glass, AR information can be displayed in the field of view without separating the user's field of view from the real space, so other users can watch the highlighted gaze while watching the exhibits such as paintings. You can check the part.
ARデバイスでは、ハイライトにより他のユーザの視線が誘導され、あるユーザの注視点に応じたガイド（技法ガイド等）の提示が開始された時点で、ハイライトの提示を終了する。なお、ユーザ端末１０が、音声のみに対応した機器である場合には、「左側のｘｘｘ」などの音声出力により、他のユーザの視線を誘導すればよい。
In the AR device, when the line of sight of another user is guided by the highlight and the presentation of the guide (technique guide, etc.) according to the gaze point of a certain user is started, the presentation of the highlight ends. When the
また、複数のユーザが絵画等の展示物を観ている場合に、注視部分が複数存在するときには、最も多くのユーザが注視している注視部分が、優先的に選択されるようにすればよい。 Further, when a plurality of users are viewing an exhibit such as a painting and there are a plurality of gaze portions, the gaze portion that the most users are gazing at may be preferentially selected. ..
さらに、グループ内の他のユーザに対する視線の誘導を行っている間は、既に注視点を注視しているユーザに対し、ガイドの前振り部分を提示しておき、グループ全員が注視点を観た時点で、ガイドの本体部分の提示が開始されるようにすればよい。 Furthermore, while guiding the line of sight to other users in the group, the front swing part of the guide was presented to the users who were already gazing at the gazing point, and all the members of the group watched the gazing point. At that point, the presentation of the main body of the guide may be started.
図１１、図１２は、複数人のグループでの鑑賞時におけるガイドの提示の例を示している。 11 and 12 show an example of presenting a guide when viewing in a group of a plurality of people.
図１１、図１２においては、美術館の館内で、ユーザＵ１と、ユーザＵ２と、ユーザＵ３の３人のグループが一緒に行動し、展示物ａ−４を観ている場面を想定している。展示物ａ−４である絵画は、山や林、湖が描かれた風景画である。破線の矢印Ｇ１乃至Ｇ３は、各ユーザの視線を表している。 In FIGS. 11 and 12, it is assumed that a group of three users, user U1, user U2, and user U3, is acting together and watching the exhibit a-4 in the museum. The painting in exhibit a-4 is a landscape painting depicting mountains, forests, and lakes. The dashed arrows G1 to G3 represent the line of sight of each user.
時刻t1において、図１１の一点鎖線の枠内で示すように、３人のユーザのうち、ユーザＵ２とユーザＵ３は、湖を観ている一方で、ユーザＵ１は、林を観ている。このとき、より多くのユーザが観ている湖を、注視部分（確定注視点）として選択し、風景画における湖の部分がハイライトで表されるようにする。 At time t1, as shown in the frame of the alternate long and short dash line in FIG. 11, of the three users, user U2 and user U3 are watching the lake, while user U1 is watching the forest. At this time, the lake viewed by more users is selected as the gaze portion (determined gaze point) so that the lake portion in the landscape painting is highlighted.
例えば、ユーザＵ１がARグラスをかけている場合には、その透過型ディスプレイ越しに、AR情報によって、湖の部分がハイライトＨで囲まれる。これにより、ユーザＵ１の視線を、林から湖の方向に誘導することができる。なお、ユーザ端末１０が、ARグラスではなく、音声のみに対応した機器である場合には、「右側の湖は」などの音声出力により、ユーザＵ１の視線を湖の方向に誘導すればよい。
For example, when the user U1 is wearing AR glasses, the lake portion is surrounded by the highlight H by the AR information through the transmissive display. As a result, the line of sight of the user U1 can be guided from the forest to the lake. If the
その後の時刻t2において、図１２の一点鎖線で示すように、ユーザＵ１の視線を湖の方向に誘導中に、既に湖を注視しているユーザＵ２とユーザＵ３に対しては、展示物ａ−４のガイドの前振り部分が提示されるようにする。例えば、ガイドの前振り部分としては、「湖の説明をします」の音声出力などが行われる。この前振り部分の提示中に、ユーザＵ１が、ハイライトＨや言葉の誘導で、説明をしたい注視部分である湖に視線を動かすことが想定される。 At the subsequent time t2, as shown by the alternate long and short dash line in FIG. 12, the exhibit a- The front swing part of the guide of 4 is presented. For example, as the front swing part of the guide, the voice output of "I will explain the lake" is performed. During the presentation of this forward swing portion, it is assumed that the user U1 moves his / her gaze to the lake, which is the gaze portion to be explained, by the highlight H or the guidance of words.
そして、ユーザＵ１と、ユーザＵ２と、ユーザＵ３の３人の視線が、注視部分である湖に揃ったタイミングで、展示物ａ−４のガイドの本体部分の提示が開始されるようにする。例えば、ガイドの本体部分としては、「湖の色彩は、・・・」の音声出力など、前振り部分がなくても成立するガイドが提示される。 Then, when the lines of sight of the user U1, the user U2, and the user U3 are aligned with the lake, which is the gaze portion, the presentation of the main body portion of the guide of the exhibit a-4 is started. For example, as the main body part of the guide, a guide that can be established without a forward swing part, such as a voice output of "The color of the lake is ...", is presented.
なお、この例では、風景画における注視部分を、ユーザの視線により特定したが、例えば、ユーザによる指差しの動作など、注視部分を特定可能な方法であれば、他の特定方法を用いても構わない。 In this example, the gaze part in the landscape painting is specified by the user's line of sight, but other specific methods may be used as long as the gaze part can be specified, for example, the action of pointing by the user. I do not care.
（ｈ）その他
美術館等の施設に設置された展示物に対するユーザの注視点の特定方法であるが、ユーザ端末１０として、ARグラスが用いられる場合には、入力部１０１として設けられたカメラにより、ユーザの眼球を撮影し、その撮影画像データを分析した分析結果に基づき、当該ユーザの注視点を推定することができる。
(H) Others This is a method of specifying the user's gaze point on an exhibit installed in a facility such as a museum. When AR glasses are used as the
また、注視点の推定に際しては、ユーザが所持するユーザ端末１０の機能に限らず、例えば、施設内の空間に設置されたカメラでユーザの眼球を撮影することで、撮影画像データを取得しても構わない。なお、施設内の空間に、カメラ等のセンサ装置を設置した構成については、図１３を参照して後述する。
Further, when estimating the gazing point, not only the function of the
なお、ユーザの身体の向きや顔の向きの推定に関しても、ユーザ端末１０の機能を用いるほか、施設内の空間に設置されたセンサ装置からのセンサデータの分析などにより、それらの向きを推定することができる。ただし、身体の向きや顔の向きの推定精度が低い場合には、大まかな展示物にのみ適用することも可能である。また、ユーザによる指差しの動作についても、センサ装置からのセンサデータの分析などにより、指差しの対象を推定可能である。
Regarding the estimation of the user's body orientation and face orientation, in addition to using the functions of the
美術館等の施設に設置された展示物に対して音楽をそれぞれ設定し、個々の展示物に対するユーザの位置や視線等に応じて、ユーザ端末１０から音楽が再生されるようにしてもよい。個々の展示物に対する音楽の設定に際しては、ユーザの音楽視聴履歴などに基づき、展示物に対して音楽を設定することができる。例えば、展示物の年代や背景、ムード（明るい色調、暗いテーマのタイトル等）等の情報を分析し、ユーザが視聴可能な音楽の中から、当該展示物に適合する音楽を選択することで、選択した音楽をBGM等として再生することができる。
Music may be set for each of the exhibits installed in a facility such as a museum, and the music may be played from the
＜２．変形例＞ <2. Modification example>
（他の空間の例）
上述した説明では、美術館における展示物の鑑賞を中心に説明したが、例えば、博物館や観光施設、屋外など、所定の空間を有するものであれば、本技術を適用することが可能である。例えば、観光施設における建造物の鑑賞に対して適用する場合には、図４等に示した美術館の館内が、観光施設の敷地に相当するとして、「展示物」を「建造物」に読み替えればよい。「展示物」と「建造物」は、対象物の一例である。
(Example of other space)
In the above description, the description focuses on the appreciation of exhibits in museums, but the present technology can be applied to museums, tourist facilities, outdoors, etc., as long as they have a predetermined space. For example, when applied to the appreciation of a building in a tourist facility, the "exhibit" should be read as "building", assuming that the inside of the museum shown in Fig. 4 etc. corresponds to the site of the tourist facility. Just do it. "Exhibits" and "buildings" are examples of objects.
また、例えば、観光施設においてその施設のガイドを提示する際に、旅行プランやスケジュール表などから取得したルートで想定される所要時間を取得し、その所要時間に応じてガイドの内容を変更することができる。また、観光を開始してからその時点までの観光ルートにより、対象物への興味を推定（例えば、寺院の滞在時間が長いことや、景勝地の滞在時間が短いことなどを分析）して、その推定結果に応じてガイドの内容を変更することができる。 In addition, for example, when presenting a guide for a tourist facility, the required time estimated for the route acquired from a travel plan or schedule is obtained, and the content of the guide is changed according to the required time. Can be done. In addition, by estimating the interest in the object from the sightseeing route from the start of sightseeing to that point (for example, analyzing the long staying time of temples and the short staying time of scenic spots), The contents of the guide can be changed according to the estimation result.
あるいは、ガイドの説明を行う説明者（授業等の実施者）が重点的に下見をした対象物に関しては、別の時間帯に訪れた者（生徒等）に対しても、重点的にガイドが提示されてもよい。例えば、授業等の実施者が、学習意図に応じて重点的に説明を行う対象物に関しては、その対象物を観た生徒に対しても重点的にガイドを提示すればよい。 Alternatively, regarding the object that the explainer (practitioner of the lesson, etc.) who explains the guide focused on previewing, the guide also focused on those who visited at another time (students, etc.). May be presented. For example, with respect to an object for which the practitioner of a lesson or the like gives an explanation with priority according to the learning intention, the guide may be presented with priority to the students who have seen the object.
なお、主催者側の意図に応じて、ガイドの内容を変更しても構わない。例えば、観光ツアーを主催する旅行会社などの主催者が、あらかじめプライオリティをガイドに付与しておくことで、当該観光ツアーの参加者にだけ、そのプライオリティに従い、提示するガイドのガイド量を変更することができる。 The contents of the guide may be changed according to the intention of the organizer. For example, an organizer such as a travel agency that hosts a sightseeing tour gives a priority to the guide in advance, so that only the participants of the sightseeing tour can change the guide amount of the guide to be presented according to the priority. Can be done.
（システムの他の構成）
図２の説明において、制御部２００が、インターネット等のネットワークに接続されたサーバ２０に設けられるものとしたが、制御部２００の全部又は一部の機能については、美術館等の施設内に設けられたサーバ等の他の機器において実現されるようにしてもよい。
(Other configurations of the system)
In the description of FIG. 2, the
図１３は、本技術を適用した情報処理システムの一実施の形態の他の構成例を示している。 FIG. 13 shows another configuration example of an embodiment of an information processing system to which the present technology is applied.
図１３に示した提示システム２は、美術館等の施設内に設けられた施設内サーバ１３と、外部サーバ２１とが、ネットワーク３０を介して接続されている。
In the
ネットワーク３０は、インターネット、イントラネット、又は携帯電話網などの通信網を含んで構成され、TCP/IP(Transmission Control Protocol / Internet Protocol)等の通信プロトコルを用いた機器間の相互接続を可能にしている。
The
施設内サーバ１３の制御部１３０と、外部サーバ２１の制御部２１０には、図２を参照して説明した制御部２００の全部又は一部の構成がそれぞれ設けられる。このように、制御部２００（図２）の機能は、クラウド上のサーバにより提供される構成に限らず、ローカルのサーバにより提供される構成を用いても構わない。
The
外部サーバ２１において、データベース２２０は、図２に示したユーザＤＢ２２１、及びコンテンツＤＢ２２２から構成される。すなわち、外部サーバ２１は、データベース２２０を管理するＤＢサーバとして構成されるようにしてもよい。
In the
また、図２の説明において、ユーザ端末１０が位置検出部１１１や状態検出部１１２等のセンサ部を有するとして説明したが、当該センサ部の代わりに、美術館等の施設内の空間に設置されたセンサ装置１２により検出されたセンサデータを用いてもよい。例えば、センサ装置１２は、施設内の空間の各エリアに対応して１又は複数設置される。
Further, in the description of FIG. 2, it has been described that the
図１３では、図２に示したユーザ端末１０の代わりに、ユーザ端末１１が設けられている。ユーザ端末１１は、及び制御部１１０及び提示部１２０を有する。制御部１１０は、ユーザ端末１１の各部の動作を制御する。なお、ユーザ端末１１にセンサ部を設けて、当該センサ部からのセンサデータと、センサ装置１２からのセンサデータをそれぞれ用いても構わない。さらに、美術館等の施設内に提示装置を設けて、当該提示装置が、ユーザ端末１１の提示部１２０の代わりに、情報の提示を行っても構わない。
In FIG. 13, a
なお、ユーザ端末１１において、制御部１１０に、制御部２００の一部の構成を設けて、制御部２００の残り一部の構成を、施設内サーバ１３の制御部１３０、又は外部サーバ２１の制御部２１０に設けても構わない。また、ユーザ端末１０，１１と、施設内サーバ１３と、サーバ２０と、外部サーバ２１のそれぞれは、情報処理システムを構成する情報処理装置であると捉えることもできる。
In the
＜３．コンピュータの構成＞ <3. Computer configuration>
上述したユーザ端末１０又はサーバ２０等の機器の一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、各装置のコンピュータにインストールされる。
The series of processes of the device such as the
図１４は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示すブロック図である。 FIG. 14 is a block diagram showing a configuration example of hardware of a computer that executes the above-mentioned series of processes programmatically.
コンピュータにおいて、CPU(Central Processing Unit)１００１、ROM(Read Only Memory)１００２、RAM(Random Access Memory)１００３は、バス１００４により相互に接続されている。バス１００４には、さらに、入出力インターフェース１００５が接続されている。入出力インターフェース１００５には、入力部１００６、出力部１００７、記憶部１００８、通信部１００９、及びドライブ１０１０が接続されている。
In a computer, a CPU (Central Processing Unit) 1001, a ROM (Read Only Memory) 1002, and a RAM (Random Access Memory) 1003 are connected to each other by a
入力部１００６は、マイクロフォン、キーボード、マウスなどよりなる。出力部１００７は、スピーカ、ディスプレイなどよりなる。記憶部１００８は、ハードディスクや不揮発性のメモリなどよりなる。通信部１００９は、ネットワークインターフェースなどよりなる。ドライブ１０１０は、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリなどのリムーバブル記録媒体１０１１を駆動する。
The
以上のように構成されるコンピュータでは、CPU１００１が、ROM１００２や記憶部１００８に記録されているプログラムを、入出力インターフェース１００５及びバス１００４を介して、RAM１００３にロードして実行することにより、上述した一連の処理が行われる。
In the computer configured as described above, the
コンピュータ（CPU１００１）が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブル記録媒体１０１１に記録して提供することができる。また、プログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線又は無線の伝送媒体を介して提供することができる。
The program executed by the computer (CPU1001) can be recorded and provided on the
コンピュータでは、プログラムは、リムーバブル記録媒体１０１１をドライブ１０１０に装着することにより、入出力インターフェース１００５を介して、記憶部１００８にインストールすることができる。また、プログラムは、有線又は無線の伝送媒体を介して、通信部１００９で受信し、記憶部１００８にインストールすることができる。その他、プログラムは、ROM１００２や記憶部１００８に、あらかじめインストールしておくことができる。
In the computer, the program can be installed in the
ここで、本明細書において、コンピュータがプログラムに従って行う処理は、必ずしもフローチャートとして記載された順序に沿って時系列に行われる必要はない。すなわち、コンピュータがプログラムに従って行う処理は、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）も含む。 Here, in the present specification, the processing performed by the computer according to the program does not necessarily have to be performed in chronological order in the order described as the flowchart. That is, the processing performed by the computer according to the program also includes processing executed in parallel or individually (for example, parallel processing or processing by an object).
また、プログラムは、１のコンピュータ（プロセッサ）により処理されるものでもよいし、複数のコンピュータによって分散処理されるものでもよい。さらに、プログラムは、遠方のコンピュータに転送されて実行されてもよい。 Further, the program may be processed by one computer (processor) or may be distributed processed by a plurality of computers. In addition, the program may be transferred to a distant computer for execution.
さらに、本明細書において、システムとは、複数の構成要素（装置、モジュール（部品）等）の集合を意味し、すべての構成要素が同一筐体中にあるか否かは問わない。したがって、別個の筐体に収納され、ネットワークを介して接続されている複数の装置、及び、１つの筐体の中に複数のモジュールが収納されている１つの装置は、いずれも、システムである。 Further, in the present specification, the system means a set of a plurality of components (devices, modules (parts), etc.), and it does not matter whether or not all the components are in the same housing. Therefore, a plurality of devices housed in separate housings and connected via a network, and a device in which a plurality of modules are housed in one housing are both systems. ..
なお、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。例えば、本技術は、１つの機能を、ネットワークを介して複数の装置で分担、共同して処理するクラウドコンピューティングの構成をとることができる。 The embodiment of the present technology is not limited to the above-described embodiment, and various changes can be made without departing from the gist of the present technology. For example, the present technology can have a cloud computing configuration in which one function is shared and jointly processed by a plurality of devices via a network.
また、上述のフローチャートの各ステップは、１つの装置で実行する他、複数の装置で分担して実行することができる。さらに、１つのステップに複数の処理が含まれる場合には、その１つのステップに含まれる複数の処理は、１つの装置で実行する他、複数の装置で分担して実行することができる。 Further, each step of the above-mentioned flowchart can be executed by one device or can be shared and executed by a plurality of devices. Further, when a plurality of processes are included in one step, the plurality of processes included in the one step can be executed by one device or shared by a plurality of devices.
また、本明細書に記載された効果はあくまで例示であって限定されるものではなく、他の効果があってもよい。 Further, the effects described in the present specification are merely examples and are not limited, and other effects may be obtained.
なお、本技術は、以下のような構成をとることができる。 The present technology can have the following configurations.
（１）
分析対象データに基づいて、対象物が存在する空間にいるユーザと前記対象物に関するイベントを分析し、
前記イベントの分析結果に基づいて、前記ユーザに対する前記対象物のガイドの提示を制御する
制御部を備える
情報処理装置。
（２）
前記制御部は、
前記ユーザの動作に応じた前記イベントを検知し、
検知した前記イベントに応じて、前記空間に設置される展示物に関するガイドの提示を制御する
前記（１）に記載の情報処理装置。
（３）
前記制御部は、
前記展示物に対する前記ユーザの距離に関するイベントを検知し、
検知した前記イベントに応じて、前記展示物に関するガイドの説明の内容を変更する
前記（２）に記載の情報処理装置。
（４）
前記制御部は、
前記距離を示す値が一定値未満となる場合、前記展示物の細部の特徴に関する説明を含むガイドを提示し、
前記距離を示す値が一定値以上となる場合、前記展示物の全体と背景に関する説明を含むガイドを提示する
前記（３）に記載の情報処理装置。
（５）
前記制御部は、
前記ユーザの移動経路として、前記距離を示す値が一定値以上から一定値未満に変化する経路となった場合、前記展示物の全体に関する説明から、前記展示物の細部の特徴に関する説明へと流れるような説明のガイドを提示し、
前記ユーザの移動経路として、前記距離を示す値が一定値未満から一定値以上に変化する経路となった場合、前記展示物の細部の特徴に関する説明から、前記展示物の全体に関する説明へと流れるような説明のガイドを提示する
前記（３）に記載の情報処理装置。
（６）
前記制御部は、
前記空間における前記ユーザの歩行速度に関するイベントを検知し、
検知した前記イベントに応じて、前記展示物に関するガイドの説明の内容と速度を変更する
前記（２）に記載の情報処理装置。
（７）
前記制御部は、
前記歩行速度を示す値が一定値未満となる場合、前記展示物に関するガイドを、標準の話速で、かつ、標準よりも多いガイド量で提示するか、又はガイド量を標準で、かつ、標準よりも遅い話速で提示し、
前記歩行速度を示す値が一定値以上となる場合、前記展示物に関するガイドを、標準の話速で、かつ、標準よりも少ないガイド量で提示するか、又はガイド量を標準で、かつ、標準よりも速い話速で提示する
前記（６）に記載の情報処理装置。
（８）
前記制御部は、
前記ユーザによる前記空間に設置される展示物に対する注視点を分析し、
分析した前記注視点に応じて、前記展示物に関するガイドの提示を制御する
前記（１）に記載の情報処理装置。
（９）
前記制御部は、前記注視点に応じた特徴部分の詳細な説明を含むガイドを提示する
前記（８）に記載の情報処理装置。
（１０）
前記制御部は、前記ユーザから要求されるガイドの所要時間に応じて、前記空間に設置される展示物に関するガイドの説明の内容を変更する
前記（１）に記載の情報処理装置。
（１１）
前記制御部は、あらかじめ用意されている複数の説明を組み合わせて、前記所要時間に適合したガイドを提示する
前記（１０）に記載の情報処理装置。
（１２）
前記所要時間は、前記ガイドの説明時間と、前記ユーザの移動時間と、ガイド無しでの前記展示物の鑑賞時間とを含み、
前記制御部は、前記移動時間と前記鑑賞時間として、前記ユーザ若しくは展示の主催者により設定された設定値を用いるか、又は現時点よりも前の時点における展示物の鑑賞に関する分析対象データに基づいた分析値を用いる
前記（１０）又は（１１）に記載の情報処理装置。
（１３）
前記制御部は、前記空間内で、複数のユーザが前記空間に設置される展示物を鑑賞するために一緒に行動している場合、当該複数のユーザの中の少なくとも一人のユーザを含む特定ユーザによる前記展示物に対する注視点に応じたガイドを提示する
前記（１）に記載の情報処理装置。
（１４）
前記制御部は、前記特定ユーザを除いた他のユーザの視線を、前記注視点に誘導するための情報の提示を制御する
前記（１３）に記載の情報処理装置。
（１５）
前記制御部は、
複数の注視点が存在する場合、前記複数の注視点のうち、最も多くのユーザが注視している注視点を確定注視点として選択し、
前記特定ユーザとしての前記確定注視点を注視しているユーザを除いた他のユーザの視線を、前記確定注視点に誘導するための情報の提示を制御する
前記（１３）又は（１４）に記載の情報処理装置。
（１６）
前記制御部は、
前記他のユーザの視線の誘導中に、前記特定ユーザに対し、ガイドの前振り部分を提示し、
前記他のユーザの視線の誘導が完了した後に、全てのユーザに対し、ガイドの本体部分を提示する
前記（１４）又は（１５）に記載の情報処理装置。
（１７）
前記制御部は、
前記ユーザによる前記空間に設置される展示物に関する知識量を分析し、
分析した前記知識量に応じて、前記展示物に関するガイドの説明の内容を変更する
前記（１）に記載の情報処理装置。
（１８）
前記制御部は、
前記空間における前記ユーザの嗜好及び行動履歴の少なくとも一方を分析し、
分析した前記嗜好及び前記行動履歴の少なくとも一方に応じて、前記空間に設置される展示物に関するガイドの説明の内容を変更する
前記（１）に記載の情報処理装置。
（１９）
前記分析対象データは、前記ユーザが持っている機器、又は前記空間内に設置された装置により検出されたセンサデータを含む
前記（１）乃至（１８）のいずれかに記載の情報処理装置。
（２０）
情報処理装置が、
分析対象データに基づいて、対象物が存在する空間にいるユーザと前記対象物に関するイベントを分析し、
前記イベントの分析結果に基づいて、前記ユーザに対する前記対象物のガイドの提示を制御する
情報処理方法。
(1)
Based on the analysis target data, the user in the space where the object exists and the event related to the object are analyzed, and the event is analyzed.
An information processing device including a control unit that controls the presentation of a guide for the object to the user based on the analysis result of the event.
(2)
The control unit
Detecting the event according to the user's action,
The information processing device according to (1) above, which controls the presentation of a guide regarding an exhibit installed in the space in response to the detected event.
(3)
The control unit
Detects an event related to the user's distance to the exhibit and
The information processing device according to (2) above, wherein the content of the explanation of the guide regarding the exhibit is changed according to the detected event.
(4)
The control unit
If the value indicating the distance is less than a certain value, a guide including an explanation about the detailed features of the exhibit is presented.
The information processing apparatus according to (3) above, wherein when the value indicating the distance is equal to or more than a certain value, a guide including an explanation about the entire exhibit and the background is presented.
(5)
The control unit
When the user's movement route is a route in which the value indicating the distance changes from a certain value or more to less than a certain value, the description of the entire exhibit is followed by the explanation of the detailed features of the exhibit. Present a guide with explanations like
When the user's movement route is a route in which the value indicating the distance changes from less than a certain value to more than a certain value, the explanation regarding the detailed features of the exhibit is followed by the explanation regarding the entire exhibit. The information processing apparatus according to (3) above, which presents a guide for such an explanation.
(6)
The control unit
Detecting an event related to the walking speed of the user in the space,
The information processing device according to (2) above, wherein the content and speed of the description of the guide regarding the exhibit are changed according to the detected event.
(7)
The control unit
When the value indicating the walking speed is less than a certain value, the guide regarding the exhibit is presented at a standard speaking speed and a guide amount larger than the standard, or the guide amount is standard and standard. Present at a slower speaking speed,
When the value indicating the walking speed is equal to or higher than a certain value, the guide related to the exhibit is presented at a standard speaking speed and a smaller guide amount than the standard, or the guide amount is standard and standard. The information processing device according to (6) above, which is presented at a faster speaking speed.
(8)
The control unit
Analyzing the viewpoint of the user for the exhibits installed in the space,
The information processing apparatus according to (1) above, which controls the presentation of a guide regarding the exhibit according to the analyzed viewpoint.
(9)
The information processing device according to (8) above, wherein the control unit presents a guide including a detailed explanation of a feature portion according to the gazing point.
(10)
The information processing device according to (1) above, wherein the control unit changes the content of the guide description regarding the exhibit installed in the space according to the required time of the guide requested by the user.
(11)
The information processing device according to (10) above, wherein the control unit combines a plurality of explanations prepared in advance and presents a guide suitable for the required time.
(12)
The required time includes the explanation time of the guide, the travel time of the user, and the viewing time of the exhibit without the guide.
The control unit uses the set values set by the user or the organizer of the exhibition as the travel time and the viewing time, or is based on the analysis target data regarding the viewing of the exhibit at a time point earlier than the present time. The information processing apparatus according to (10) or (11) above, which uses analytical values.
(13)
When a plurality of users are acting together in the space to view an exhibit installed in the space, the control unit includes a specific user including at least one user among the plurality of users. The information processing apparatus according to (1) above, which presents a guide according to the gazing point of the exhibit.
(14)
The information processing device according to (13), wherein the control unit controls the presentation of information for guiding the line of sight of another user other than the specific user to the gazing point.
(15)
The control unit
When there are multiple gazing points, the gazing point that the most users are gazing at is selected as the definite gazing point from the plurality of gazing points.
13. The above (13) or (14), which controls the presentation of information for guiding the line of sight of another user other than the user who is gazing at the definite gazing point as the specific user to the definite gazing point. Information processing equipment.
(16)
The control unit
While guiding the line of sight of the other user, the front swing portion of the guide is presented to the specific user.
The information processing device according to (14) or (15), wherein the main body portion of the guide is presented to all users after the guidance of the line of sight of the other user is completed.
(17)
The control unit
Analyzing the amount of knowledge that the user has about the exhibits installed in the space,
The information processing apparatus according to (1) above, wherein the content of the explanation of the guide regarding the exhibit is changed according to the amount of knowledge analyzed.
(18)
The control unit
Analyzing at least one of the user's preferences and behavior history in the space,
The information processing apparatus according to (1), wherein the content of the guide regarding the exhibit installed in the space is changed according to at least one of the analyzed preference and the behavior history.
(19)
The information processing device according to any one of (1) to (18) above, wherein the analysis target data includes sensor data detected by a device owned by the user or a device installed in the space.
(20)
Information processing device
Based on the analysis target data, the user in the space where the object exists and the event related to the object are analyzed, and the event is analyzed.
An information processing method that controls the presentation of a guide for the object to the user based on the analysis result of the event.
１，２ 提示システム， １０ ユーザ端末， １１ ユーザ端末， １２ センサ装置， １３ 施設内サーバ， ２０ サーバ， ２１ 外部サーバ， ３０ ネットワーク， １０１ 入力部， １０２ 提示部， １１０ 制御部， １１１ 位置検出部， １１２ 状態検出部， １１３ 対話入力部， １２０ 提示部， １２１ 音声出力部， １２２ 画像出力部， ２００ 制御部， ２１０ 制御部， ２１１ 状態分析部， ２１２ コンテンツ制御部， ２１３ 提示制御部， ２２０ データベース， ２２１ ユーザＤＢ， ２２２ コンテンツＤＢ， １００１ CPU 1, 2 presentation system, 10 user terminal, 11 user terminal, 12 sensor device, 13 in-facility server, 20 server, 21 external server, 30 network, 101 input unit, 102 presentation unit, 110 control unit, 111 position detection unit, 112 state detection unit, 113 interactive input unit, 120 presentation unit, 121 audio output unit, 122 image output unit, 200 control unit, 210 control unit, 211 state analysis unit, 212 content control unit, 213 presentation control unit, 220 database, 221 User DB, 222 Content DB, 1001 CPU
Claims (20)
前記イベントの分析結果に基づいて、前記ユーザに対する前記対象物のガイドの提示を制御する
制御部を備える
情報処理装置。 Based on the analysis target data, the user in the space where the object exists and the event related to the object are analyzed, and the event is analyzed.
An information processing device including a control unit that controls the presentation of a guide for the object to the user based on the analysis result of the event.
前記ユーザの動作に応じた前記イベントを検知し、
検知した前記イベントに応じて、前記空間に設置される展示物に関するガイドの提示を制御する
請求項１に記載の情報処理装置。 The control unit
Detecting the event according to the user's action,
The information processing device according to claim 1, which controls the presentation of a guide regarding an exhibit installed in the space in response to the detected event.
前記展示物に対する前記ユーザの距離に関するイベントを検知し、
検知した前記イベントに応じて、前記展示物に関するガイドの説明の内容を変更する
請求項２に記載の情報処理装置。 The control unit
Detects an event related to the user's distance to the exhibit and
The information processing device according to claim 2, wherein the content of the explanation of the guide regarding the exhibit is changed according to the detected event.
前記距離を示す値が一定値未満となる場合、前記展示物の細部の特徴に関する説明を含むガイドを提示し、
前記距離を示す値が一定値以上となる場合、前記展示物の全体と背景に関する説明を含むガイドを提示する
請求項３に記載の情報処理装置。 The control unit
If the value indicating the distance is less than a certain value, a guide including an explanation about the detailed features of the exhibit is presented.
The information processing apparatus according to claim 3, wherein when the value indicating the distance becomes a certain value or more, a guide including an explanation about the entire exhibit and the background is presented.
前記ユーザの移動経路として、前記距離を示す値が一定値以上から一定値未満に変化する経路となった場合、前記展示物の全体に関する説明から、前記展示物の細部の特徴に関する説明へと流れるような説明のガイドを提示し、
前記ユーザの移動経路として、前記距離を示す値が一定値未満から一定値以上に変化する経路となった場合、前記展示物の細部の特徴に関する説明から、前記展示物の全体に関する説明へと流れるような説明のガイドを提示する
請求項３に記載の情報処理装置。 The control unit
When the user's movement route is a route in which the value indicating the distance changes from a certain value or more to less than a certain value, the description of the entire exhibit is followed by the explanation of the detailed features of the exhibit. Present a guide with explanations like
When the user's movement route is a route in which the value indicating the distance changes from less than a certain value to more than a certain value, the explanation regarding the detailed features of the exhibit is followed by the explanation regarding the entire exhibit. The information processing apparatus according to claim 3, which presents a guide for such an explanation.
前記空間における前記ユーザの歩行速度に関するイベントを検知し、
検知した前記イベントに応じて、前記展示物に関するガイドの説明の内容と速度を変更する
請求項２に記載の情報処理装置。 The control unit
Detecting an event related to the walking speed of the user in the space,
The information processing device according to claim 2, wherein the content and speed of the description of the guide regarding the exhibit are changed according to the detected event.
前記歩行速度を示す値が一定値未満となる場合、前記展示物に関するガイドを、標準の話速で、かつ、標準よりも多いガイド量で提示するか、又はガイド量を標準で、かつ、標準よりも遅い話速で提示し、
前記歩行速度を示す値が一定値以上となる場合、前記展示物に関するガイドを、標準の話速で、かつ、標準よりも少ないガイド量で提示するか、又はガイド量を標準で、かつ、標準よりも速い話速で提示する
請求項６に記載の情報処理装置。 The control unit
When the value indicating the walking speed is less than a certain value, the guide regarding the exhibit is presented at a standard speaking speed and a guide amount larger than the standard, or the guide amount is standard and standard. Present at a slower speaking speed,
When the value indicating the walking speed is equal to or higher than a certain value, the guide related to the exhibit is presented at a standard speaking speed and a smaller guide amount than the standard, or the guide amount is standard and standard. The information processing apparatus according to claim 6, which is presented at a faster speaking speed.
前記ユーザによる前記空間に設置される展示物に対する注視点を分析し、
分析した前記注視点に応じて、前記展示物に関するガイドの提示を制御する
請求項１に記載の情報処理装置。 The control unit
Analyzing the viewpoint of the user for the exhibits installed in the space,
The information processing apparatus according to claim 1, which controls the presentation of a guide regarding the exhibit according to the analyzed viewpoint.
請求項８に記載の情報処理装置。 The information processing device according to claim 8, wherein the control unit presents a guide including a detailed explanation of a feature portion according to the gazing point.
請求項１に記載の情報処理装置。 The information processing device according to claim 1, wherein the control unit changes the content of the guide description regarding the exhibit installed in the space according to the required time of the guide requested by the user.
請求項１０に記載の情報処理装置。 The information processing device according to claim 10, wherein the control unit combines a plurality of explanations prepared in advance and presents a guide suitable for the required time.
前記制御部は、前記移動時間と前記鑑賞時間として、前記ユーザ若しくは展示の主催者により設定された設定値を用いるか、又は現時点よりも前の時点における展示物の鑑賞に関する分析対象データに基づいた分析値を用いる
請求項１１に記載の情報処理装置。 The required time includes the explanation time of the guide, the travel time of the user, and the viewing time of the exhibit without the guide.
The control unit uses the set values set by the user or the organizer of the exhibition as the travel time and the viewing time, or is based on the analysis target data regarding the viewing of the exhibit at a time point earlier than the present time. The information processing apparatus according to claim 11, wherein the analysis value is used.
請求項１に記載の情報処理装置。 When a plurality of users are acting together in the space to view an exhibit installed in the space, the control unit includes a specific user including at least one user among the plurality of users. The information processing apparatus according to claim 1, wherein a guide according to a gazing point for the exhibit is presented.
請求項１３に記載の情報処理装置。 The information processing device according to claim 13, wherein the control unit controls the presentation of information for guiding the line of sight of another user other than the specific user to the gazing point.
複数の注視点が存在する場合、前記複数の注視点のうち、最も多くのユーザが注視している注視点を確定注視点として選択し、
前記特定ユーザとしての前記確定注視点を注視しているユーザを除いた他のユーザの視線を、前記確定注視点に誘導するための情報の提示を制御する
請求項１４に記載の情報処理装置。 The control unit
When there are multiple gazing points, the gazing point that the most users are gazing at is selected as the definite gazing point from the plurality of gazing points.
The information processing device according to claim 14, wherein the information processing device controls the presentation of information for guiding the line of sight of another user other than the user who is gazing at the definite gazing point as the specific user to the definite gazing point.
前記他のユーザの視線の誘導中に、前記特定ユーザに対し、ガイドの前振り部分を提示し、
前記他のユーザの視線の誘導が完了した後に、全てのユーザに対し、ガイドの本体部分を提示する
請求項１５に記載の情報処理装置。 The control unit
While guiding the line of sight of the other user, the front swing portion of the guide is presented to the specific user.
The information processing device according to claim 15, wherein the main body portion of the guide is presented to all users after the guidance of the line of sight of the other user is completed.
前記ユーザによる前記空間に設置される展示物に関する知識量を分析し、
分析した前記知識量に応じて、前記展示物に関するガイドの説明の内容を変更する
請求項１に記載の情報処理装置。 The control unit
Analyzing the amount of knowledge that the user has about the exhibits installed in the space,
The information processing apparatus according to claim 1, wherein the content of the explanation of the guide regarding the exhibit is changed according to the analyzed amount of knowledge.
前記空間における前記ユーザの嗜好及び行動履歴の少なくとも一方を分析し、
分析した前記嗜好及び前記行動履歴の少なくとも一方に応じて、前記空間に設置される展示物に関するガイドの説明の内容を変更する
請求項１に記載の情報処理装置。 The control unit
Analyzing at least one of the user's preferences and behavior history in the space,
The information processing apparatus according to claim 1, wherein the content of the guide regarding the exhibit installed in the space is changed according to at least one of the analyzed preference and the behavior history.
請求項１に記載の情報処理装置。 The information processing device according to claim 1, wherein the analysis target data includes sensor data detected by a device owned by the user or a device installed in the space.
分析対象データに基づいて、対象物が存在する空間にいるユーザと前記対象物に関するイベントを分析し、
前記イベントの分析結果に基づいて、前記ユーザに対する前記対象物のガイドの提示を制御する
情報処理方法。 Information processing device
Based on the analysis target data, the user in the space where the object exists and the event related to the object are analyzed, and the event is analyzed.
An information processing method that controls the presentation of a guide for the object to the user based on the analysis result of the event.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020015036A JP2021121912A (en) | 2020-01-31 | 2020-01-31 | Information processing device and information processing method |
| PCT/JP2021/001417 WO2021153302A1 (en) | 2020-01-31 | 2021-01-18 | Information processing device and information processing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020015036A JP2021121912A (en) | 2020-01-31 | 2020-01-31 | Information processing device and information processing method |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2021121912A true JP2021121912A (en) | 2021-08-26 |
Family
ID=77078352
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020015036A Pending JP2021121912A (en) | 2020-01-31 | 2020-01-31 | Information processing device and information processing method |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP2021121912A (en) |
| WO (1) | WO2021153302A1 (en) |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002290879A (en) * | 2001-03-27 | 2002-10-04 | Denon Ltd | Device and system for reproducing information |
| JP2006201912A (en) * | 2005-01-19 | 2006-08-03 | Nippon Telegr & Teleph Corp <Ntt> | Processing method for three-dimensional virtual object information providing service, three-dimensional virtual object providing system, and program |
| JP2006215883A (en) * | 2005-02-04 | 2006-08-17 | Matsushita Electric Ind Co Ltd | Exhibition facility guide system |
| JP5948901B2 (en) * | 2012-01-26 | 2016-07-06 | 富士ゼロックス株式会社 | Information processing apparatus and information processing program |
| JP6208637B2 (en) * | 2014-08-12 | 2017-10-04 | 日本電信電話株式会社 | Server apparatus, audio content providing method, and program |
| JP6615732B2 (en) * | 2016-10-31 | 2019-12-04 | 株式会社ソニー・インタラクティブエンタテインメント | Information processing apparatus and image generation method |
| JP2018093503A (en) * | 2018-01-09 | 2018-06-14 | 株式会社ネイン | Sound content reproduction earphone, method, and program |
| JP7056155B2 (en) * | 2018-01-10 | 2022-04-19 | 富士フイルムビジネスイノベーション株式会社 | Information transmission equipment, information transmission systems and programs |
| JP2019126033A (en) * | 2018-01-18 | 2019-07-25 | 株式会社電通ライブ | Speech information service system, speech information service device, and program |
-
2020
- 2020-01-31 JP JP2020015036A patent/JP2021121912A/en active Pending
-
2021
- 2021-01-18 WO PCT/JP2021/001417 patent/WO2021153302A1/en active Application Filing
Also Published As
| Publication number | Publication date |
|---|---|
| WO2021153302A1 (en) | 2021-08-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR20190038900A (en) | Word Flow Annotation | |
| US10841534B2 (en) | Real-world awareness for virtual reality | |
| KR20190121758A (en) | Information processing apparatus, information processing method, and program | |
| KR20150058286A (en) | Leveraging head mounted displays to enable person-to-person interactions | |
| CN111654715A (en) | Live video processing method and device, electronic equipment and storage medium | |
| Sodnik et al. | Spatial auditory human-computer interfaces | |
| US20220291808A1 (en) | Integrating Artificial Reality and Other Computing Devices | |
| JP7066115B2 (en) | Public speaking support device and program | |
| Tsepapadakis et al. | Are you talking to me? An Audio Augmented Reality conversational guide for cultural heritage | |
| US11164341B2 (en) | Identifying objects of interest in augmented reality | |
| US20240054736A1 (en) | Adjustable Immersion Level for Content | |
| WO2021153303A1 (en) | Information processing device and information processing method | |
| WO2021153302A1 (en) | Information processing device and information processing method | |
| US20220291743A1 (en) | Proactive Actions Based on Audio and Body Movement | |
| US11647260B2 (en) | Content event mapping | |
| WO2021153263A1 (en) | Information processing device and information processing method | |
| Dierker et al. | An augmented-reality-based scenario for the collaborative construction of an interactive museum | |
| US20240103705A1 (en) | Convergence During 3D Gesture-Based User Interface Element Movement | |
| WO2022049774A1 (en) | Virtual travel provision method | |
| WO2022264377A1 (en) | Information processing device, information processing system, information processing method, and non-transitory computer-readable medium | |
| Vainstein | Requirements and Design Considerations for a Head-Worn Display Museum Guide | |
| CN117631904A (en) | Information interaction method, device, electronic equipment and storage medium | |
| WO2023034632A1 (en) | Artificial reality device capture control and sharing | |
| Gregg et al. | Using enhanced audio to create an accessible mobile augmented reality app for visually impaired users | |
| CN118251667A (en) | System and method for generating visual subtitles |