JP6994005B2 - Information processing methods, information processing programs, information processing systems and information processing equipment - Google Patents

Description

本開示は、情報処理方法、情報処理プログラム、情報処理システムおよび情報処理装置に関する。 The present disclosure relates to information processing methods, information processing programs, information processing systems and information processing devices.

特許文献１には、ヘッドマウントディスプレイを用いてユーザが没入する仮想空間に含まれるオブジェクトに広告を表示させることが開示されている。 Patent Document 1 discloses that an advertisement is displayed on an object included in a virtual space in which a user is immersed by using a head-mounted display.

特許第５９６１７３６号公報Japanese Patent No. 5961736

特許文献１は、仮想空間内のオブジェクトに広告を表示させる際の表示方法に関するものであるが、仮想空間を活用した広告効果の向上については改善の余地がある。 Patent Document 1 relates to a display method when displaying an advertisement on an object in the virtual space, but there is room for improvement in improving the advertising effect by utilizing the virtual space.

本発明は、仮想空間を活用した広告効果が向上可能な情報処理方法、情報処理プログラム、情報処理システムおよび情報処理装置を提供することを目的とする。 An object of the present invention is to provide an information processing method, an information processing program, an information processing system and an information processing apparatus capable of improving an advertising effect utilizing a virtual space.

本開示が示す一態様によれば、情報処理方法であって、
前記情報処理方法は、端末機器を備えたシステムにおいて実行され、
（ａ）３６０度コンテンツである仮想空間を定義する仮想空間データを生成するステップと、
（ｂ）第一ＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）アドレスに対応するウェブページからのアクセスに基づいて、前記端末機器に前記仮想空間データを提供するステップと、を含み、
前記仮想空間は、メインコンテンツと、サブコンテンツを含み、
前記メインコンテンツは、前記仮想空間の水平方向における、前記仮想空間のうち前記アクセスに基づいて前記端末機器に最初に提示される方向である正面方向に、少なくとも一部が配置され、
前記サブコンテンツは、前記メインコンテンツの周辺、または、前記仮想空間において前記メインコンテンツと対向する方向に提示され、
前記メインコンテンツおよび前記サブコンテンツの少なくとも一方には、第二ＵＲＬアドレスが関連付けられており、
前記第二ＵＲＬアドレスには、ユーザにより前記端末機器に入力される課金指示が受け付けられる課金コンテンツが関連付けられており、
前記情報処理方法は、
（ｃ）前記ユーザによる、前記第二ＵＲＬアドレスが関連付けられた前記メインコンテンツまたは前記サブコンテンツに対する入力を受け付けるステップと、
（ｄ）前記入力に基づいて、前記第二ＵＲＬアドレスに対応するウェブページへのアクセスを受け付け、前記課金コンテンツを定義するデータを前記端末機器あるいは前記ユーザに関連付けられた他の端末機器に提供するステップと、をさらに含む。 According to one aspect of the present disclosure, it is an information processing method.
The information processing method is executed in a system equipped with a terminal device, and the information processing method is executed.
(A) A step of generating virtual space data that defines a virtual space that is 360-degree content, and
(B) Including a step of providing the virtual space data to the terminal device based on an access from a web page corresponding to a first URL (Uniform Resource Identifier) address.
The virtual space includes main content and sub-content.
At least a part of the main content is arranged in the horizontal direction of the virtual space in the front direction, which is the direction first presented to the terminal device based on the access in the virtual space.
The sub-content is presented in a direction facing the main content in the vicinity of the main content or in the virtual space.
A second URL address is associated with at least one of the main content and the sub-content.
The second URL address is associated with billing content for which a billing instruction input to the terminal device by the user is accepted.
The information processing method is
(C) A step of accepting an input by the user for the main content or the sub-content associated with the second URL address.
(D) Based on the input, the access to the web page corresponding to the second URL address is accepted, and the data defining the billing content is provided to the terminal device or another terminal device associated with the user. And further include.

本開示によれば、仮想体験コンテンツにおける広告効果を高めることが可能な情報処理方法を提供することができる。 According to the present disclosure, it is possible to provide an information processing method capable of enhancing the advertising effect in virtual experience contents.

本発明の実施形態（以下、単に本実施形態という。）に係る仮想体験コンテンツ配信システムを示す概略図である。It is a schematic diagram which shows the virtual experience content distribution system which concerns on embodiment of this invention (hereinafter, simply referred to as this embodiment). ユーザ端末である携帯端末を示す概略図である。It is a schematic diagram which shows the mobile terminal which is a user terminal. 携帯端末のハードウェア構成を示す図である。It is a figure which shows the hardware configuration of a mobile terminal. ヘッドマウントデバイス（ＨＭＤ）を含むユーザ端末の構成を示す概略図である。It is a schematic diagram which shows the structure of the user terminal including the head mount device (HMD). ＨＭＤを装着したユーザの頭部を示す図である。It is a figure which shows the head of the user who wears an HMD. 制御装置のハードウェア構成を示す図である。It is a figure which shows the hardware configuration of a control device. 外部コントローラの具体的な構成の一例を示す図である。It is a figure which shows an example of the specific configuration of an external controller. 視野画像をＨＭＤに表示する処理を示すフローチャートである。It is a flowchart which shows the process of displaying a field of view image on an HMD. 仮想空間の一例を示すｘｙｚ空間図である。It is an xyz space diagram which shows an example of a virtual space. （ａ）は、図９に示す仮想空間のｙｘ平面図である。（ｂ）は、図９に示す仮想空間のｚｘ平面図である。(A) is a yx plan view of the virtual space shown in FIG. (B) is a zx plan view of the virtual space shown in FIG. ＨＭＤに表示された視野画像の一例を示す図である。It is a figure which shows an example of the field of view image displayed on the HMD. 図１に示すサーバのハードウェア構成を示す図である。It is a figure which shows the hardware configuration of the server shown in FIG. 本実施形態に係る仮想体験コンテンツ配信システムの動作を説明するためのシーケンス図である。It is a sequence diagram for demonstrating the operation of the virtual experience content distribution system which concerns on this embodiment. 本実施形態に係る仮想体験コンテンツ配信システムの動作を説明するためのシーケンス図である。It is a sequence diagram for demonstrating the operation of the virtual experience content distribution system which concerns on this embodiment. ３６０度コンテンツを構成する仮想空間を示す図であるIt is a figure which shows the virtual space which constitutes 360 degree contents. ３６０度コンテンツを構成する仮想空間の別の例を示す図であるIt is a figure which shows another example of the virtual space which constitutes 360 degree contents. 状態（ａ）は、ＨＭＤと外部コントローラを装着したユーザを示す図である。状態（ｂ）は、仮想カメラと、操作オブジェクト（手オブジェクト）を含む仮想空間を示す図である。The state (a) is a figure which shows the user who attached the HMD and the external controller. The state (b) is a diagram showing a virtual camera and a virtual space including an operation object (hand object). 本実施形態に係る仮想体験コンテンツ配信システムの動作を説明するためのシーケンス図である。It is a sequence diagram for demonstrating the operation of the virtual experience content distribution system which concerns on this embodiment.

［本開示が示す実施形態の説明］
本開示が示す実施形態の概要を説明する。
（１）情報処理方法であって、
前記情報処理方法は、端末機器を備えたシステムにおいて実行され、
（ａ）３６０度コンテンツである仮想空間を定義する仮想空間データを生成するステップと、
（ｂ）第一ＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）アドレスに対応するウェブページからのアクセスに基づいて、前記端末機器に前記仮想空間データを提供するステップと、を含み、
前記仮想空間は、メインコンテンツと、サブコンテンツを含み、
前記メインコンテンツは、前記仮想空間の水平方向における、前記仮想空間のうち前記アクセスに基づいて前記端末機器に最初に提示される方向である正面方向に、少なくとも一部が配置され、
前記サブコンテンツは、前記メインコンテンツの周辺、または、前記仮想空間において前記メインコンテンツと対向する方向に提示され、
前記メインコンテンツおよび前記サブコンテンツの少なくとも一方には、第二ＵＲＬアドレスが関連付けられており、
前記第二ＵＲＬアドレスには、ユーザにより前記端末機器に入力される課金指示が受け付けられる課金コンテンツが関連付けられており、
前記情報処理方法は、
（ｃ）前記ユーザによる、前記第二ＵＲＬアドレスが関連付けられた前記メインコンテンツまたは前記サブコンテンツに対する入力を受け付けるステップと、
（ｄ）前記入力に基づいて、前記第二ＵＲＬアドレスに対応するウェブページへのアクセスを受け付け、前記課金コンテンツを定義するデータを前記端末機器あるいは前記ユーザに関連付けられた他の端末機器に提供するステップと、をさらに含む。 [Explanation of Embodiments Shown in the Present Disclosure]
An outline of the embodiments shown in the present disclosure will be described.
(1) Information processing method
The information processing method is executed in a system equipped with a terminal device, and the information processing method is executed.
(A) A step of generating virtual space data that defines a virtual space that is 360-degree content, and
(B) Including a step of providing the virtual space data to the terminal device based on an access from a web page corresponding to a first URL (Uniform Resource Identifier) address.
The virtual space includes main content and sub-content.
At least a part of the main content is arranged in the horizontal direction of the virtual space in the front direction, which is the direction first presented to the terminal device based on the access in the virtual space.
The sub-content is presented in a direction facing the main content in the vicinity of the main content or in the virtual space.
A second URL address is associated with at least one of the main content and the sub-content.
The second URL address is associated with billing content for which a billing instruction input to the terminal device by the user is accepted.
The information processing method is
(C) A step of accepting an input by the user for the main content or the sub-content associated with the second URL address.
(D) Based on the input, the access to the web page corresponding to the second URL address is accepted, and the data defining the billing content is provided to the terminal device or another terminal device associated with the user. And further include.

この方法によれば、仮想空間を活用して広告効果を向上させることができる。すなわち、広告商品に関するメインコンテンツおよびサブコンテンツを仮想空間で構成されるものとして提供することで、従来のＷｅｂ広告よりも当該商品の購入率（いわゆる、コンバージョン率）を高めることができる。 According to this method, the virtual space can be utilized to improve the advertising effect. That is, by providing the main content and the sub-content related to the advertising product as being composed of a virtual space, the purchase rate (so-called conversion rate) of the product can be increased as compared with the conventional Web advertisement.

（２）前記仮想空間の水平方向における前記メインコンテンツの幅が、前記仮想空間のうち前記端末機器に提示される視野の幅よりも大きくてもよい。 (2) The width of the main content in the horizontal direction of the virtual space may be larger than the width of the field of view presented to the terminal device in the virtual space.

この方法によれば、例えばメインコンテンツを３６０度コンテンツらしく楽しむことができ、広告効果をさらに高めることができる。 According to this method, for example, the main content can be enjoyed like 360-degree content, and the advertising effect can be further enhanced.

（３）（ｄ）前記端末機器に応じた前記視野の幅を特定するステップと、
（ｅ）前記視野の幅に応じて、前記メインコンテンツの幅を異ならせるステップと、をさらに含んでいてもよい。 (3) (d) A step of specifying the width of the field of view according to the terminal device, and
(E) A step of changing the width of the main content according to the width of the field of view may be further included.

この方法によれば、端末機器に応じたメインコンテンツ／サブコンテンツの提示を可能にし、効果的な広告提示を行うことができる。 According to this method, it is possible to present the main content / sub-content according to the terminal device, and it is possible to effectively present the advertisement.

（４）前記端末機器がヘッドマウントデバイスである場合には、前記視野の幅よりも前記メインコンテンツの幅を大きくし、
前記端末機器がタッチスクリーンを備える機器である場合には、前記視野の幅よりも前記メインコンテンツの幅を小さくしてもよい。 (4) When the terminal device is a head mount device, the width of the main content is made larger than the width of the field of view.
When the terminal device is a device provided with a touch screen, the width of the main content may be smaller than the width of the field of view.

タッチスクリーンを備える端末機器、例えばスマートフォンやタブレット型端末では、ユーザは二次元動画（メインコンテンツ）の視聴に慣れているため、サブコンテンツも初期視野に含まれた方がよい可能性がある。すなわち、スマートフォンやタブレット型端末にメインコンテンツを表示させる場合には当該メインコンテンツの幅を狭くすることでユーザがメインコンテンツ周辺のサブコンテンツに気づきやすいようにさせつつ、これらの端末よりも視野の広いヘッドマウントデバイスにメインコンテンツを表示させる場合には当該メインコンテンツの幅を広くしてユーザの没入感を損なわないようにする。 In terminal devices equipped with a touch screen, such as smartphones and tablet terminals, users are accustomed to watching two-dimensional moving images (main content), so it may be better to include sub-content in the initial field of view. That is, when displaying the main content on a smartphone or tablet terminal, the width of the main content is narrowed so that the user can easily notice the sub-content around the main content, and the head mount device has a wider field of view than these terminals. When displaying the main content on the tablet, widen the width of the main content so as not to impair the immersive feeling of the user.

（５）前記端末機器がヘッドマウントデバイスである場合には、前記仮想空間が前記メインコンテンツに関連するオブジェクトを含むようにしてもよい。 (5) When the terminal device is a head mount device, the virtual space may include an object related to the main content.

この方法によれば、オブジェクトをヘッドマウントデバイスに表示させることで、例えば３６０度動画であるメインコンテンツの利点とオブジェクトの利点との双方を活用することができ、ユーザの購買意欲を高めることができる。 According to this method, by displaying the object on the head mount device, both the advantages of the main content, which is a 360-degree video, and the advantages of the object can be utilized, and the user's purchasing motivation can be enhanced.

（６）前記仮想空間は、前記メインコンテンツに関連する商品オブジェクトと、前記商品オブジェクトと関連付けられた商品に対する前記ユーザからの注文を受け付ける受付オブジェクトとを含み、
（ｆ）前記受付オブジェクトに前記商品オブジェクトが関連付けられた場合に、前記商品の前記注文を受け付けるステップをさらに含んでいてもよい。 (6) The virtual space includes a product object related to the main content and a reception object that accepts an order from the user for the product associated with the product object.
(F) When the product object is associated with the reception object, the step of accepting the order of the product may be further included.

この方法によれば、注文の受付手続きを簡素化することでコンバージョン率をさらに向上させることができる。 According to this method, the conversion rate can be further improved by simplifying the order acceptance procedure.

（７）（ｇ）前記ユーザの身体の一部の動きに応じて、前記仮想空間に含まれる操作オブジェクトを移動させるステップと、
（ｈ）前記操作オブジェクトの動きに応じて、前記商品オブジェクトを移動させるステップと、
（ｉ）前記商品オブジェクトの移動に基づいて、前記商品オブジェクトと前記受付オブジェクトとを関連付けるステップと、をさらに含んでいてもよい。 (7) (g) A step of moving an operation object included in the virtual space according to the movement of a part of the user's body.
(H) A step of moving the product object according to the movement of the operation object, and
(I) A step of associating the product object with the reception object based on the movement of the product object may be further included.

（８）本開示の一実施形態に係る情報処理プログラムは、上記（１）から（７）のいずれかに記載の情報処理方法をコンピュータに実行させるための情報処理プログラムである。 (8) The information processing program according to the embodiment of the present disclosure is an information processing program for causing a computer to execute the information processing method according to any one of (1) to (7) above.

上記によれば、仮想空間を活用して広告効果を向上させることができる情報処理プログラムを提供することができる。 According to the above, it is possible to provide an information processing program that can improve the advertising effect by utilizing the virtual space.

（９）端末機器を備えた情報処理システムであって、
当該情報処理システムは、項目（１）から（７）のうちいずれかに記載の情報処理方法を実行するように構成された、情報処理システムである。 (9) An information processing system equipped with a terminal device.
The information processing system is an information processing system configured to execute the information processing method according to any one of items (1) to (7).

上記によれば、仮想空間を活用して広告効果を向上させることができる情報処理システムを提供することができる。 According to the above, it is possible to provide an information processing system capable of improving the advertising effect by utilizing the virtual space.

（１０）プロセッサと、
コンピュータ可読命令を記憶するメモリと、を備えた情報処理装置であって、
前記コンピュータ可読命令が前記プロセッサにより実行されると、前記情報処理装置は項目（１）から（７）のうちいずれかに記載の情報処理方法を実行する、情報処理装置である。 (10) Processor and
An information processing device equipped with a memory for storing computer-readable instructions.
When the computer-readable instruction is executed by the processor, the information processing apparatus is an information processing apparatus that executes the information processing method according to any one of items (1) to (7).

上記によれば、仮想空間を活用して広告効果を向上させることができる情報処理装置を提供することができる。情報処理装置は、端末機器またはサーバのいずれか一方である点に留意されたい。 According to the above, it is possible to provide an information processing device capable of improving the advertising effect by utilizing the virtual space. It should be noted that the information processing device is either a terminal device or a server.

［本開示が示す実施形態の詳細］
以下、本開示が示す実施形態について図面を参照しながら説明する。本実施形態の説明において既に説明された部材と同一の参照番号を有する部材については、説明の便宜上、その説明は繰り返さない。 [Details of Embodiments Shown in the Present Disclosure]
Hereinafter, embodiments shown in the present disclosure will be described with reference to the drawings. For convenience of explanation, the description of the member having the same reference number as the member already described in the description of the present embodiment will not be repeated.

本実施形態に係る３６０度コンテンツ配信システムの構成の概略について図１を参照して説明する。図１は、３６０度コンテンツ配信システムＳ（以下、単に配信システムＳという。）の概略図である。図１に示すように、配信システムＳは、例えば、複数のユーザ端末１，１００（端末機器の一例）と、３６０度コンテンツを配信するサーバ２を備える。ユーザ端末１，１００は、インターネット等の通信ネットワーク３を介してサーバ２に通信可能に接続されている。３６０度コンテンツとは、ユーザ端末１，１００のユーザに仮想体験を提供するための映像コンテンツ等であって、複数のオブジェクトを含む仮想空間または全天球画像等の３６０度空間画像を含む仮想空間として提供されてもよい。３６０度空間画像を含む仮想空間では、仮想空間の中心位置に仮想カメラが配置されると共に、仮想空間の表面上に３６０度空間画像が表示される。本実施形態において、「画像」とは、静止画像と複数のフレーム画像から構成された動画像（映像）の両方を含む。本実施形態において、仮想空間とは、ＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）空間と、ＡＲ（Ａｒｇｕｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）空間と、ＭＲ（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）空間と、を含むものである。 The outline of the configuration of the 360-degree content distribution system according to the present embodiment will be described with reference to FIG. FIG. 1 is a schematic diagram of a 360-degree content distribution system S (hereinafter, simply referred to as a distribution system S). As shown in FIG. 1, the distribution system S includes, for example, a plurality of user terminals 1,100 (an example of a terminal device) and a server 2 that distributes 360-degree content. The user terminals 1 and 100 are communicably connected to the server 2 via a communication network 3 such as the Internet. The 360-degree content is video content or the like for providing a virtual experience to users of user terminals 1, 100, and is a virtual space including a plurality of objects or a virtual space including a 360-degree space image such as an all-sky sphere image. May be provided as. In the virtual space including the 360-degree space image, the virtual camera is arranged at the center position of the virtual space, and the 360-degree space image is displayed on the surface of the virtual space. In the present embodiment, the "image" includes both a still image and a moving image (video) composed of a plurality of frame images. In the present embodiment, the virtual space includes a VR (Virtual Reality) space, an AR (Augmented Reality) space, and an MR (Mixed Reality) space.

次に、図２を参照してユーザ端末１の構成について説明する。図２は、ユーザ端末１を示す概略図である。図２に示すように、ユーザ端末１は、タッチスクリーン１０を備える端末機器であり、例えば、スマートフォン、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ
Ａｓｓｉｓｔａｎｔ）、タブレットまたはファブレット型コンピュータ等の携帯可能な端末であってもよいし、パーソナルコンピュータ、ビデオゲーム機器等であってもよい。 Next, the configuration of the user terminal 1 will be described with reference to FIG. FIG. 2 is a schematic view showing a user terminal 1. As shown in FIG. 2, the user terminal 1 is a terminal device provided with a touch screen 10, and is, for example, a smartphone or a PDA (Personal Digital).
It may be a portable terminal such as an Assistant), a tablet or a phablet type computer, or it may be a personal computer, a video game device or the like.

図３に示されるように、ユーザ端末１は、ハードウェア構成として、互いにバス接続されたプロセッサ１１、主記憶１２、補助記憶１３、送受信部１４、表示部１５および入力部１６を備えている。プロセッサ１１は、例えばＣＰＵ(Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ)、ＭＰＵ（Ｍｉｃｒｏ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）および／またはＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）で構成されている。主記憶１２は、例えばＤＲＡＭ（Ｄｙｎａｍｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などで構成されており、補助記憶１３は、例えばＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）などで構成されている。プロセッサ１１（制御部１８）は、主記憶１２または補助記憶１３に記憶されるプログラムを読み込んで実行することにより、ユーザ端末１の動作を制御する。送受信部１４はプロセッサ１１の制御によりユーザ端末１と通信ネットワーク３との接続を確立する。入力部１６は、タッチスクリーン１０である表示部１５に対するユーザの操作を検知して、ユーザ端末１に対して何らかの操作があったことを検知する。 As shown in FIG. 3, the user terminal 1 includes a processor 11, a main storage 12, an auxiliary storage 13, a transmission / reception unit 14, a display unit 15, and an input unit 16 which are bus-connected to each other as a hardware configuration. The processor 11 is composed of, for example, a CPU (Central Processing Unit), an MPU (Micro Processing Unit) and / or a GPU (Graphics Processing Unit). The main memory 12 is composed of, for example, a DRAM (Dynamic Random Access Memory) or the like, and the auxiliary storage 13 is composed of, for example, an HDD (Hard Disk Drive) or the like. The processor 11 (control unit 18) controls the operation of the user terminal 1 by reading and executing a program stored in the main storage 12 or the auxiliary storage 13. The transmission / reception unit 14 establishes a connection between the user terminal 1 and the communication network 3 under the control of the processor 11. The input unit 16 detects the user's operation on the display unit 15 which is the touch screen 10, and detects that some operation has been performed on the user terminal 1.

次に、図４を参照してユーザ端末１００の構成について説明する。図４は、ユーザ端末１００を示す概略図である。図４に示すように、ユーザ端末１００は、ユーザＵの頭部に装着されたヘッドマウントデバイス（ＨＭＤ）１１０と、ヘッドフォン１１６と、マイク１１８と、位置センサ１３０と、外部コントローラ３２０と、制御装置１２０とを備える。 Next, the configuration of the user terminal 100 will be described with reference to FIG. FIG. 4 is a schematic view showing the user terminal 100. As shown in FIG. 4, the user terminal 100 includes a head-mounted device (HMD) 110 mounted on the head of the user U, a headphone 116, a microphone 118, a position sensor 130, an external controller 320, and a control device. It is equipped with 120.

ＨＭＤ１１０は、表示部１１２と、ＨＭＤセンサ１１４と、注視センサ１４０とを備えている。表示部１１２は、ＨＭＤ１１０を装着したユーザＵの視界（視野）を完全に覆うように構成された非透過型の表示装置を備えている。これにより、ユーザＵは、表示部１１２に表示された視野画像のみを見ることで仮想空間に没入することができる。表示部１１２は、ユーザＵの左目に画像を提供するように構成された左目用表示部とユーザＵの右目に画像を提供するように構成された右目用表示部から構成されてもよい。ＨＭＤ１１０は、透過型の表示装置を備えてもよい。この場合、透過型の表示装置は、その透過率を調整することで、一時的に非透過型の表示装置として構成されてもよい。 The HMD 110 includes a display unit 112, an HMD sensor 114, and a gaze sensor 140. The display unit 112 includes a non-transparent display device configured to completely cover the field of view (field of view) of the user U wearing the HMD 110. As a result, the user U can immerse himself in the virtual space by seeing only the visual field image displayed on the display unit 112. The display unit 112 may be composed of a left-eye display unit configured to provide an image to the left eye of the user U and a right-eye display unit configured to provide an image to the right eye of the user U. The HMD 110 may include a transmissive display device. In this case, the transmissive display device may be temporarily configured as a non-transparent display device by adjusting its transmittance.

ＨＭＤセンサ１１４は、ＨＭＤ１１０の表示部１１２の近傍に搭載される。ＨＭＤセンサ１１４は、地磁気センサ、加速度センサ、傾きセンサ（角速度センサやジャイロセンサ等）のうちの少なくとも１つを含み、ユーザＵの頭部に装着されたＨＭＤ１１０の各種動きを検出することができる。 The HMD sensor 114 is mounted in the vicinity of the display unit 112 of the HMD 110. The HMD sensor 114 includes at least one of a geomagnetic sensor, an acceleration sensor, and a tilt sensor (angular velocity sensor, gyro sensor, etc.), and can detect various movements of the HMD 110 mounted on the head of the user U.

注視センサ１４０は、ユーザＵの視線方向を検出するアイトラッキング機能を有する。注視センサ１４０は、例えば、右目用注視センサと、左目用注視センサを備えてもよい。右目用注視センサは、ユーザＵの右目に例えば赤外光を照射して、右目（特に、角膜や虹彩）から反射された反射光を検出することで、右目の眼球の回転角に関する情報を取得してもよい。一方、左目用注視センサは、ユーザＵの左目に例えば赤外光を照射して、左目（特に、角膜や虹彩）から反射された反射光を検出することで、左目の眼球の回転角に関する情報を取得してもよい。 The gaze sensor 140 has an eye tracking function for detecting the line-of-sight direction of the user U. The gaze sensor 140 may include, for example, a gaze sensor for the right eye and a gaze sensor for the left eye. The gaze sensor for the right eye acquires information on the angle of rotation of the eyeball of the right eye by irradiating the user U's right eye with infrared light, for example, and detecting the reflected light reflected from the right eye (particularly the cornea or iris). You may. On the other hand, the gaze sensor for the left eye irradiates the left eye of the user U with infrared light, for example, and detects the reflected light reflected from the left eye (particularly the cornea or the iris) to obtain information on the angle of rotation of the eyeball of the left eye. May be obtained.

ヘッドフォン１１６は、ユーザＵの左耳と右耳にそれぞれ装着されている。ヘッドフォン１１６は、制御装置１２０から音声データ（電気信号）を受信し、当該受信した音声データに基づいて音声を出力するように構成されている。マイク１１８は、ユーザＵから発声された音声を収集し、当該収集された音声に基づいて音声データ（電気信号）を生成するように構成されている。マイク１１８は、音声データを制御装置１２０に送信するように構成されている。 The headphones 116 are attached to the left ear and the right ear of the user U, respectively. The headphone 116 is configured to receive voice data (electrical signal) from the control device 120 and output voice based on the received voice data. The microphone 118 is configured to collect voice uttered by the user U and generate voice data (electrical signal) based on the collected voice. The microphone 118 is configured to transmit voice data to the control device 120.

位置センサ１３０は、例えば、ポジション・トラッキング・カメラにより構成され、ＨＭＤ１１０と外部コントローラ３２０の位置を検出するように構成されている。位置センサ１３０は、制御装置１２０に無線または有線により通信可能に接続されており、ＨＭＤ１１０に設けられた図示しない複数の検知点の位置、傾きまたは発光強度に関する情報を検出するように構成されている。位置センサ１３０は、外部コントローラ３２０に設けられた図示しない複数の検知点の位置、傾きおよび／または発光強度に関する情報を検出するように構成されている。検知点は、例えば、赤外線や可視光を放射する発光部である。また、位置センサ１３０は、赤外線センサや複数の光学カメラを含んでもよい。 The position sensor 130 is configured, for example, by a position tracking camera and is configured to detect the positions of the HMD 110 and the external controller 320. The position sensor 130 is wirelessly or wiredly connected to the control device 120 and is configured to detect information regarding the position, tilt, or emission intensity of a plurality of detection points (not shown) provided on the HMD 110. .. The position sensor 130 is configured to detect information regarding the positions, tilts, and / or emission intensities of a plurality of detection points (not shown) provided on the external controller 320. The detection point is, for example, a light emitting unit that emits infrared rays or visible light. Further, the position sensor 130 may include an infrared sensor and a plurality of optical cameras.

外部コントローラ３２０は、例えば、仮想空間内に表示される手指オブジェクトの動作を制御するために使用される。外部コントローラ３２０は、ユーザＵが右手に持って使用する右手用外部コントローラと、ユーザＵが左手に持って使用する左手用外部コントローラを有してもよい。 The external controller 320 is used, for example, to control the operation of a finger object displayed in the virtual space. The external controller 320 may have a right-handed external controller that the user U holds and uses in the right hand, and a left-handed external controller that the user U holds and uses in the left hand.

制御装置１２０は、位置センサ１３０から取得された情報に基づいて、ＨＭＤ１１０の位置情報を取得し、当該取得された位置情報に基づいて、仮想空間における仮想カメラの位置と、現実空間におけるＨＭＤ１１０を装着したユーザＵの位置を正確に対応付けることができる。制御装置１２０は、位置センサ１３０から取得された情報に基づいて、外部コントローラ３２０の位置情報を取得し、当該取得された位置情報に基づいて、仮想空間内に表示される手指オブジェクトの位置と現実空間における外部コントローラ３２０とＨＭＤ１１０との間の相対関係位置を正確に対応付けることができる。 The control device 120 acquires the position information of the HMD 110 based on the information acquired from the position sensor 130, and mounts the position of the virtual camera in the virtual space and the HMD 110 in the real space based on the acquired position information. The position of the user U can be accurately associated. The control device 120 acquires the position information of the external controller 320 based on the information acquired from the position sensor 130, and the position and reality of the finger object displayed in the virtual space based on the acquired position information. The relative relationship positions between the external controller 320 and the HMD 110 in space can be accurately associated.

制御装置１２０は、注視センサ１４０から送信された情報に基づいて、ユーザＵの右目の視線と左目の視線をそれぞれ特定し、当該右目の視線と当該左目の視線の交点である注視点を特定することができる。制御装置１２０は、特定された注視点に基づいて、ユーザＵの視線方向を特定することができる。ユーザＵの視線方向は、ユーザＵの両目の視線方向であって、ユーザＵの右目と左目を結ぶ線分の中点と注視点を通る直線の方向に一致する。 The control device 120 identifies the line of sight of the right eye and the line of sight of the left eye of the user U, respectively, based on the information transmitted from the gaze sensor 140, and specifies the gaze point which is the intersection of the line of sight of the right eye and the line of sight of the left eye. be able to. The control device 120 can specify the line-of-sight direction of the user U based on the specified gaze point. The line-of-sight direction of the user U is the line-of-sight direction of both eyes of the user U, and coincides with the direction of the straight line passing through the midpoint of the line segment connecting the right eye and the left eye of the user U and the gazing point.

次に、図５を参照して、ＨＭＤ１１０の位置や傾きに関する情報を取得する方法について説明する。図５は、ＨＭＤ１１０を装着したユーザＵの頭部を示す図である。ＨＭＤ１１０を装着したユーザＵの頭部の動きに連動したＨＭＤ１１０の位置や傾きに関する情報は、位置センサ１３０および／またはＨＭＤ１１０に搭載されたＨＭＤセンサ１１４により検出可能である。図５に示すように、ＨＭＤ１１０を装着したユーザＵの頭部を中心として、３次元座標（ｕｖｗ座標）が規定される。ユーザＵが直立する垂直方向をｖ軸として規定し、ｖ軸と直交しＨＭＤ１１０の中心を通る方向をｗ軸として規定し、ｖ軸およびｗ軸と直交する方向をｕ軸として規定する。位置センサ１３０および／またはＨＭＤセンサ１１４は、各ｕｖｗ軸回りの角度（すなわち、ｖ軸を中心とする回転を示すヨー角、ｕ軸を中心とした回転を示すピッチ角、ｗ軸を中心とした回転を示すロール角で決定される傾き）を検出する。制御装置１２０は、検出された各ｕｖｗ軸回りの角度変化に基づいて、仮想カメラの視軸を制御するための角度情報を決定する。 Next, a method of acquiring information regarding the position and inclination of the HMD 110 will be described with reference to FIG. FIG. 5 is a diagram showing the head of the user U wearing the HMD 110. Information regarding the position and tilt of the HMD 110 linked to the movement of the head of the user U wearing the HMD 110 can be detected by the position sensor 130 and / or the HMD sensor 114 mounted on the HMD 110. As shown in FIG. 5, three-dimensional coordinates (uvw coordinates) are defined centering on the head of the user U wearing the HMD 110. The vertical direction in which the user U stands upright is defined as the v-axis, the direction orthogonal to the v-axis and passing through the center of the HMD 110 is defined as the w-axis, and the v-axis and the direction orthogonal to the w-axis are defined as the u-axis. The position sensor 130 and / or the HMD sensor 114 has an angle around each uvw axis (that is, a yaw angle indicating rotation about the v axis, a pitch angle indicating rotation about the u axis, and a w axis as the center. The tilt determined by the roll angle indicating rotation) is detected. The control device 120 determines the angle information for controlling the visual axis of the virtual camera based on the detected angle change around each uvw axis.

次に、図６を参照して、制御装置１２０のハードウェア構成について説明する。図６は、制御装置１２０のハードウェア構成を示す図である。図６に示すように、制御装置１２０は、制御部１２１と、記憶部１２３と、Ｉ／Ｏ（入出力）インターフェース１２４と、通信インターフェース１２５と、バス１２６とを備える。制御部１２１と、記憶部１２３と、Ｉ／Ｏインターフェース１２４と、通信インターフェース１２５は、バス１２６を介して互いに通信可能に接続されている。 Next, the hardware configuration of the control device 120 will be described with reference to FIG. FIG. 6 is a diagram showing a hardware configuration of the control device 120. As shown in FIG. 6, the control device 120 includes a control unit 121, a storage unit 123, an I / O (input / output) interface 124, a communication interface 125, and a bus 126. The control unit 121, the storage unit 123, the I / O interface 124, and the communication interface 125 are communicably connected to each other via the bus 126.

制御装置１２０は、ＨＭＤ１１０とは別体に、パーソナルコンピュータ、タブレットまたはウェアラブルデバイスとして構成されてもよいし、ＨＭＤ１１０に内蔵されていてもよい。制御装置１２０の一部の機能がＨＭＤ１１０に搭載されるとともに、制御装置１２０の残りの機能がＨＭＤ１１０とは別体の他の装置に搭載されてもよい。 The control device 120 may be configured as a personal computer, a tablet, or a wearable device separately from the HMD 110, or may be built in the HMD 110. A part of the functions of the control device 120 may be mounted on the HMD 110, and the remaining functions of the control device 120 may be mounted on another device separate from the HMD 110.

制御部１２１は、メモリとプロセッサを備えている。メモリは、例えば、各種プログラム等が格納されたＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）やプロセッサにより実行される各種プログラム等が格納される複数ワークエリアを有するＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等から構成される。プロセッサは、例えばＣＰＵ、ＭＰＵおよび／またはＧＰＵであって、ＲＯＭに組み込まれた各種プログラムから指定されたプログラムをＲＡＭ上に展開し、ＲＡＭとの協働で各種処理を実行するように構成されている。 The control unit 121 includes a memory and a processor. The memory is composed of, for example, a ROM (Read Only Memory) in which various programs and the like are stored, a RAM (Random Access Memory) having a plurality of work areas in which various programs and the like executed by the processor are stored, and the like. The processor is, for example, a CPU, MPU and / or GPU, and is configured to expand a program specified from various programs embedded in the ROM onto the RAM and execute various processes in cooperation with the RAM. There is.

プロセッサが図１３、図１４、および図１８に示す各処理を実行するための制御プログラムをＲＡＭ上に展開し、ＲＡＭとの協働で制御プログラムを実行することで、制御部１２１は、制御装置１２０の各種動作を制御してもよい。制御部１２１は、メモリに格納された３６０度コンテンツのデータを読み出すことで、ＨＭＤ１１０の表示部１１２に３６０度コンテンツの視野画像を表示する。これにより、ユーザＵは、表示部１１２に表示された３６０度コンテンツに没入することができる。 The processor develops a control program for executing each of the processes shown in FIGS. 13, 14, and 18 on the RAM, and executes the control program in cooperation with the RAM, so that the control unit 121 controls the control device. Various operations of 120 may be controlled. The control unit 121 reads the data of the 360-degree content stored in the memory, and displays the field-of-view image of the 360-degree content on the display unit 112 of the HMD 110. As a result, the user U can immerse himself in the 360-degree content displayed on the display unit 112.

記憶部（ストレージ）１２３は、例えば、ＨＤＤ、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、ＵＳＢフラッシュメモリ等の記憶装置であって、プログラムや各種データを格納するように構成されている。記憶部１２３は、本実施形態に係る情報処理方法をコンピュータに実行させる制御プログラムを格納してもよい。記憶部１２３には、ユーザＵの認証プログラムや各種画像やオブジェクトに関するデータを含むゲームプログラム等が格納されてもよい。記憶部１２３には、各種データを管理するためのテーブルを含むデータベースが構築されてもよい。 The storage unit (storage) 123 is, for example, a storage device such as an HDD, an SSD (Solid State Drive), or a USB flash memory, and is configured to store programs and various data. The storage unit 123 may store a control program that causes a computer to execute the information processing method according to the present embodiment. The storage unit 123 may store a user U authentication program, a game program including data related to various images and objects, and the like. A database including a table for managing various data may be constructed in the storage unit 123.

Ｉ／Ｏインターフェース１２４は、位置センサ１３０と、ＨＭＤ１１０と、外部コントローラ３２０と、ヘッドフォン１１６と、マイク１１８とをそれぞれ制御装置１２０に通信可能に接続するように構成されており、例えば、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）端子、ＤＶＩ（Ｄｉｇｉｔａｌ Ｖｉｓｕａｌ Ｉｎｔｅｒｆａｃｅ）端子、ＨＤＭＩ（登録商標）（Ｈｉｇｈ―Ｄｅｆｉｎｉｔｉｏｎ Ｍｕｌｔｉｍｅｄｉａ
Ｉｎｔｅｒｆａｃｅ）端子等により構成されている。制御装置１２０は、位置センサ１３０と、ＨＭＤ１１０と、外部コントローラ３２０と、ヘッドフォン１１６と、マイク１１８とのそれぞれと無線接続されていてもよい。 The I / O interface 124 is configured to connect a position sensor 130, an HMD 110, an external controller 320, a headphone 116, and a microphone 118 to the control device 120 so as to be communicable. For example, USB (Universal) is provided. Serial Bus) terminal, DVI (Digital Visual Interface) terminal, HDMI (registered trademark) (High-Definition Multimedia)
Interface) It is composed of terminals and the like. The control device 120 may be wirelessly connected to each of the position sensor 130, the HMD 110, the external controller 320, the headphones 116, and the microphone 118.

通信インターフェース１２５は、制御装置１２０をＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）またはインターネット等の通信ネットワーク３に接続させるように構成されている。通信インターフェース１２５は、通信ネットワーク３を介してサーバ２等の外部装置と通信するための各種有線接続端子や、無線接続のための各種処理回路を含んでおり、通信ネットワーク３を介して通信するための通信規格に適合するように構成されている。 The communication interface 125 is configured to connect the control device 120 to a communication network 3 such as a LAN (Local Area Network), a WAN (Wide Area Network), or the Internet. The communication interface 125 includes various wired connection terminals for communicating with an external device such as a server 2 via the communication network 3 and various processing circuits for wireless connection, and is for communicating via the communication network 3. It is configured to meet the communication standards of.

次に、図７を参照して外部コントローラ３２０の具体的構成の一例について説明する。外部コントローラ３２０は、ユーザＵの身体の一部（頭部以外の部位であり、本実施形態においてはユーザＵの手）の動きを検知することにより、仮想空間内に表示される手オブジェクトの動作を制御するために使用される。外部コントローラ３２０は、ユーザＵの右手によって操作される右手用外部コントローラ３２０Ｒ（以下、単にコントローラ３２０Ｒという。）と、ユーザＵの左手によって操作される左手用外部コントローラ３２０Ｌ（以下、単にコントローラ３２０Ｌという。）と、を有する。コントローラ３２０Ｒは、ユーザＵの右手の位置や右手の手指の動きを示す装置である。また、コントローラ３２０Ｒの動きに応じて仮想空間内に存在する右手オブジェクト４００Ｒ（図１７参照）が移動する。コントローラ３２０Ｌは、ユーザＵの左手の位置や左手の手指の動きを示す装置である。また、コントローラ３２０Ｌの動きに応じて仮想空間内に存在する左手オブジェクト４００Ｌ（図１７参照）が移動する。コントローラ３２０Ｒとコントローラ３２０Ｌは略同一の構成を有するので、以下では、図７を参照してコントローラ３２０Ｒの具体的構成についてのみ説明する。以降の説明では、便宜上、コントローラ３２０Ｌ，３２０Ｒを単に外部コントローラ３２０と総称する場合がある。 Next, an example of a specific configuration of the external controller 320 will be described with reference to FIG. 7. The external controller 320 detects the movement of a part of the body of the user U (a part other than the head, and the hand of the user U in this embodiment), so that the movement of the hand object displayed in the virtual space is performed. Used to control. The external controller 320 is referred to as a right-handed external controller 320R operated by the right hand of the user U (hereinafter, simply referred to as a controller 320R) and a left-handed external controller 320L operated by the left hand of the user U (hereinafter, simply referred to as a controller 320L). ) And. The controller 320R is a device that indicates the position of the right hand of the user U and the movement of the fingers of the right hand. Further, the right-handed object 400R (see FIG. 17) existing in the virtual space moves according to the movement of the controller 320R. The controller 320L is a device that indicates the position of the left hand of the user U and the movement of the fingers of the left hand. Further, the left-handed object 400L (see FIG. 17) existing in the virtual space moves according to the movement of the controller 320L. Since the controller 320R and the controller 320L have substantially the same configuration, only the specific configuration of the controller 320R will be described below with reference to FIG. 7. In the following description, for convenience, the controllers 320L and 320R may be simply collectively referred to as an external controller 320.

図７に示すように、コントローラ３２０Ｒは、操作ボタン３０２と、複数の検知点３０４と、図示しないセンサと、図示しないトランシーバとを備える。検知点３０４とセンサは、どちらか一方のみが設けられていてもよい。操作ボタン３０２は、ユーザＵからの操作入力を受付けるように構成された複数のボタン群により構成されている。操作ボタン３０２は、プッシュ式ボタン、トリガー式ボタン及びアナログスティックを含む。プッシュ式ボタンは、親指による押下する動作によって操作されるボタンである。例えば、天面３２２上に２つのプッシュ式ボタン３０２ａ，３０２ｂが設けられている。トリガー式ボタンは、人差し指や中指で引き金を引くような動作によって操作されるボタンである。例えば、グリップ３２４の前面部分にトリガー式ボタン３０２ｅが設けられると共に、グリップ３２４の側面部分にトリガー式ボタン３０２ｆが設けられる。トリガー式ボタン３０２ｅ，３０２ｆは、人差し指と中指によってそれぞれ操作されることが想定されている。アナログスティックは、所定のニュートラル位置から３６０度任意の方向へ傾けて操作されうるスティック型のボタンである。例えば、天面３２２上にアナログスティック３２０ｉが設けられており、親指を用いて操作されることが想定されている。 As shown in FIG. 7, the controller 320R includes an operation button 302, a plurality of detection points 304, a sensor (not shown), and a transceiver (not shown). Only one of the detection point 304 and the sensor may be provided. The operation button 302 is composed of a plurality of button groups configured to receive an operation input from the user U. The operation button 302 includes a push button, a trigger button and an analog stick. The push-type button is a button operated by the action of pressing with the thumb. For example, two push-type buttons 302a and 302b are provided on the top surface 322. The trigger type button is a button operated by an action such as pulling a trigger with the index finger or the middle finger. For example, a trigger type button 302e is provided on the front surface portion of the grip 324, and a trigger type button 302f is provided on the side surface portion of the grip 324. It is assumed that the trigger type buttons 302e and 302f are operated by the index finger and the middle finger, respectively. The analog stick is a stick-type button that can be operated by tilting 360 degrees in any direction from a predetermined neutral position. For example, an analog stick 320i is provided on the top surface 322, and it is assumed that the analog stick 320i is operated by using the thumb.

コントローラ３２０Ｒは、グリップ３２４の両側面から天面３２２とは反対側の方向へ延びて半円状のリングを形成するフレーム３２６を備える。フレーム３２６の外側面には、複数の検知点３０４が埋め込まれている。複数の検知点３０４は、例えば、フレーム３２６の円周方向に沿って一列に並んだ複数の赤外線ＬＥＤである。位置センサ１３０は、複数の検知点３０４の位置、傾きまたは発光強度に関する情報を検出した後に、制御装置１２０は、位置センサ１３０によって検出された情報に基づいて、コントローラ３２０Ｒの位置や姿勢（傾き・向き）に関する情報を取得する。 The controller 320R includes a frame 326 extending from both sides of the grip 324 in a direction opposite to the top surface 322 to form a semicircular ring. A plurality of detection points 304 are embedded in the outer surface of the frame 326. The plurality of detection points 304 are, for example, a plurality of infrared LEDs arranged in a row along the circumferential direction of the frame 326. After the position sensor 130 detects information regarding the position, tilt or emission intensity of the plurality of detection points 304, the control device 120 determines the position and orientation (tilt / tilt) of the controller 320R based on the information detected by the position sensor 130. Get information about orientation).

コントローラ３２０Ｒのセンサは、例えば、磁気センサ、角速度センサ、若しくは加速度センサのいずれか、又はこれらの組み合わせであってもよい。センサは、ユーザＵがコントローラ３２０Ｒを動かしたときに、コントローラ３２０Ｒの向きや動きに応じた信号（例えば、磁気、角速度、又は加速度に関する情報を示す信号）を出力する。制御装置１２０は、センサから出力された信号に基づいて、コントローラ３２０Ｒの位置や姿勢に関する情報を取得する。 The sensor of the controller 320R may be, for example, any one of a magnetic sensor, an angular velocity sensor, an acceleration sensor, or a combination thereof. When the user U moves the controller 320R, the sensor outputs a signal corresponding to the direction and movement of the controller 320R (for example, a signal indicating information regarding magnetism, angular velocity, or acceleration). The control device 120 acquires information regarding the position and orientation of the controller 320R based on the signal output from the sensor.

コントローラ３２０Ｒのトランシーバは、コントローラ３２０Ｒと制御装置１２０との間でデータを送受信するように構成されている。例えば、トランシーバは、ユーザＵの操作入力に対応する操作信号を制御装置１２０に送信してもよい。また、トランシーバは、検知点３０４の発光をコントローラ３２０Ｒに指示する指示信号を制御装置１２０から受信してもよい。さらに、トランシーバは、センサによって検出された値を示す信号を制御装置１２０に送信してもよい。 The transceiver of the controller 320R is configured to send and receive data between the controller 320R and the control device 120. For example, the transceiver may transmit an operation signal corresponding to the operation input of the user U to the control device 120. Further, the transceiver may receive an instruction signal instructing the controller 320R to emit light at the detection point 304 from the control device 120. Further, the transceiver may send a signal indicating the value detected by the sensor to the control device 120.

次に、図８から図１１を参照することで視野画像をＨＭＤ１１０に表示するための処理について説明する。図８は、視野画像をＨＭＤ１１０に表示する処理を示すフローチャートである。図９は、仮想空間２００の一例を示すｘｙｚ空間図である。図１０の状態（ａ）は、図９に示す仮想空間２００のｙｘ平面図である。図１０の状態（ｂ）は、図９に示す仮想空間２００のｚｘ平面図である。図１１は、ＨＭＤ１１０に表示された視野画像Ｖの一例を示す図である。 Next, a process for displaying the visual field image on the HMD 110 will be described with reference to FIGS. 8 to 11. FIG. 8 is a flowchart showing a process of displaying a field image on the HMD 110. FIG. 9 is an xyz space diagram showing an example of the virtual space 200. The state (a) of FIG. 10 is a yx plan view of the virtual space 200 shown in FIG. The state (b) of FIG. 10 is a zx plan view of the virtual space 200 shown in FIG. FIG. 11 is a diagram showing an example of the field image V displayed on the HMD 110.

図８に示すように、ステップＳ１において、制御部１２１（図６参照）は、仮想カメラ３００と、各種オブジェクトとを含む仮想空間２００を示す仮想空間データを生成する。図９に示すように、仮想空間２００は、中心位置２１０を中心とした全天球として規定される（図９では、上半分の天球のみが図示されている）。仮想空間２００では、中心位置２１０を原点とするｘｙｚ座標系が設定されている。仮想カメラ３００は、ＨＭＤ１１０に表示される視野画像Ｖ（図１１参照）を特定するための視軸Ｌを規定している。仮想カメラ３００の視野を定義するｕｖｗ座標系は、現実空間におけるユーザＵの頭部を中心として規定されたｕｖｗ座標系に連動するように決定される。ＨＭＤ１１０を装着したユーザＵの現実空間における移動に連動して、制御部１２１は、仮想カメラ３００を仮想空間２００内で移動させてもよい。 As shown in FIG. 8, in step S1, the control unit 121 (see FIG. 6) generates virtual space data indicating the virtual space 200 including the virtual camera 300 and various objects. As shown in FIG. 9, the virtual space 200 is defined as a spherical surface centered on the central position 210 (in FIG. 9, only the upper half of the celestial sphere is shown). In the virtual space 200, an xyz coordinate system with the center position 210 as the origin is set. The virtual camera 300 defines a visual axis L for specifying the visual field image V (see FIG. 11) displayed on the HMD 110. The uvw coordinate system that defines the field of view of the virtual camera 300 is determined to be linked to the uvw coordinate system defined around the head of the user U in the real space. The control unit 121 may move the virtual camera 300 in the virtual space 200 in conjunction with the movement of the user U wearing the HMD 110 in the real space.

次に、ステップＳ２において、制御部１２１は、仮想カメラ３００の視野ＣＶ（図１０参照）を特定する。具体的には、制御部１２１は、位置センサ１３０および／またはＨＭＤセンサ１１４から送信されたＨＭＤ１１０の状態を示すデータに基づいて、ＨＭＤ１１０の位置や傾きに関する情報を取得する。次に、制御部１２１は、ＨＭＤ１１０の位置や傾きに関する情報に基づいて、仮想空間２００内における仮想カメラ３００の位置や向きを特定する。次に、制御部１２１は、仮想カメラ３００の位置や向きから仮想カメラ３００の視軸Ｌを決定し、決定された視軸Ｌから仮想カメラ３００の視野ＣＶを特定する。仮想カメラ３００の視野ＣＶは、ＨＭＤ１１０を装着したユーザＵが視認可能な仮想空間２００の一部の領域に相当する（換言すれば、ＨＭＤ１１０に表示される仮想空間２００の一部の領域に相当する）。視野ＣＶは、図１０の状態（ａ）に示すｘｙ平面において、視軸Ｌを中心とした極角αの角度範囲として設定される第１領域ＣＶａと、図１０の状態（ｂ）に示すｘｚ平面において、視軸Ｌを中心とした方位角βの角度範囲として設定される第２領域ＣＶｂとを有する。制御部１２１は、注視センサ１４０から送信されたユーザＵの視線方向を示すデータに基づいて、ユーザＵの視線方向を特定し、ユーザＵの視線方向に基づいて仮想カメラ３００の向きを決定してもよい。 Next, in step S2, the control unit 121 specifies the field of view CV (see FIG. 10) of the virtual camera 300. Specifically, the control unit 121 acquires information on the position and inclination of the HMD 110 based on the data indicating the state of the HMD 110 transmitted from the position sensor 130 and / or the HMD sensor 114. Next, the control unit 121 specifies the position and orientation of the virtual camera 300 in the virtual space 200 based on the information regarding the position and inclination of the HMD 110. Next, the control unit 121 determines the visual axis L of the virtual camera 300 from the position and orientation of the virtual camera 300, and identifies the visual field CV of the virtual camera 300 from the determined visual axis L. The field of view CV of the virtual camera 300 corresponds to a part of the virtual space 200 visible to the user U wearing the HMD 110 (in other words, corresponds to a part of the virtual space 200 displayed on the HMD 110). ). The visual field CV is the first region CVa set as the angle range of the polar angle α about the visual axis L in the xy plane shown in the state (a) of FIG. 10, and the xz shown in the state (b) of FIG. In the plane, it has a second region CVb set as an angle range of the azimuth angle β about the visual axis L. The control unit 121 identifies the line-of-sight direction of the user U based on the data indicating the line-of-sight direction of the user U transmitted from the gaze sensor 140, and determines the direction of the virtual camera 300 based on the line-of-sight direction of the user U. May be good.

このように、制御部１２１は、位置センサ１３０および／またはＨＭＤセンサ１１４からのデータに基づいて、仮想カメラ３００の視野ＣＶを特定することができる。ＨＭＤ１１０を装着したユーザＵが動くと、制御部１２１は、位置センサ１３０および／またはＨＭＤセンサ１１４から送信されたＨＭＤ１１０の動きを示すデータに基づいて、仮想カメラ３００の視野ＣＶを変化させることができる。すなわち、制御部１２１は、ＨＭＤ１１０の動きに応じて、視野ＣＶを変化させることができる。同様に、ユーザＵの視線方向が変化すると、制御部１２１は、注視センサ１４０から送信されたユーザＵの視線方向を示すデータに基づいて、仮想カメラ３００の視野ＣＶを移動させてもよい。すなわち、制御部１２１は、ユーザＵの視線方向の変化に応じて、視野ＣＶを変化させてもよい。 In this way, the control unit 121 can specify the field of view CV of the virtual camera 300 based on the data from the position sensor 130 and / or the HMD sensor 114. When the user U wearing the HMD 110 moves, the control unit 121 can change the visual field CV of the virtual camera 300 based on the data indicating the movement of the HMD 110 transmitted from the position sensor 130 and / or the HMD sensor 114. .. That is, the control unit 121 can change the visual field CV according to the movement of the HMD 110. Similarly, when the line-of-sight direction of the user U changes, the control unit 121 may move the visual field CV of the virtual camera 300 based on the data indicating the line-of-sight direction of the user U transmitted from the gaze sensor 140. That is, the control unit 121 may change the visual field CV according to the change in the line-of-sight direction of the user U.

次に、ステップＳ３において、制御部１２１は、ＨＭＤ１１０の表示部１１２に表示される視野画像Ｖを示す視野画像データを生成する。具体的には、制御部１２１は、仮想空間２００を規定する仮想空間データと、仮想カメラ３００の視野ＣＶとに基づいて、視野画像データを生成する。 Next, in step S3, the control unit 121 generates visual field image data indicating the visual field image V displayed on the display unit 112 of the HMD 110. Specifically, the control unit 121 generates visual field image data based on the virtual space data defining the virtual space 200 and the visual field CV of the virtual camera 300.

次に、ステップＳ４において、制御部１２１は、視野画像データに基づいて、ＨＭＤ１１０の表示部１１２に視野画像Ｖを表示する（図１１参照）。このように、ＨＭＤ１１０を装着しているユーザＵの動きに応じて、仮想カメラ３００の視野ＣＶが変化し、ＨＭＤ１１０の表示部１１２に表示される視野画像Ｖが変化するので、ユーザＵは仮想空間２００に没入することができる。 Next, in step S4, the control unit 121 displays the field of view image V on the display unit 112 of the HMD 110 based on the field of view image data (see FIG. 11). In this way, the field of view CV of the virtual camera 300 changes according to the movement of the user U wearing the HMD 110, and the field of view image V displayed on the display unit 112 of the HMD 110 changes, so that the user U is in the virtual space. You can immerse yourself in 200.

仮想カメラ３００は、左目用仮想カメラと右目用仮想カメラを含んでもよい。この場合、制御部１２１は、仮想空間データと左目用仮想カメラの視野に基づいて、左目用の視野画像を示す左目用視野画像データを生成する。制御部１２１は、仮想空間データと、右目用仮想カメラの視野に基づいて、右目用の視野画像を示す右目用視野画像データを生成する。その後、制御部１２１は、左目用視野画像データに基づいて、左目用表示部に左目用の視野画像を表示すると共に、右目用視野画像データに基づいて、右目用表示部に右目用の視野画像を表示する。このようにして、ユーザＵは、左目用視野画像と右目用視野画像との間の視差により、視野画像を３次元的に視認することができる。本明細書では、説明の便宜上、仮想カメラ３００の数は一つとするが、本開示の実施形態は、仮想カメラの数が２つの場合でも適用可能である。 The virtual camera 300 may include a virtual camera for the left eye and a virtual camera for the right eye. In this case, the control unit 121 generates left-eye field-of-view image data showing the field-of-view image for the left eye based on the virtual space data and the field of view of the left-eye virtual camera. The control unit 121 generates right-eye field-of-view image data showing a field-of-view image for the right eye based on the virtual space data and the field of view of the right-eye virtual camera. After that, the control unit 121 displays the visual field image for the left eye on the left eye display unit based on the left eye visual field image data, and displays the visual field image for the right eye on the right eye display unit based on the right eye visual field image data. Is displayed. In this way, the user U can visually recognize the visual field image three-dimensionally by the parallax between the visual field image for the left eye and the visual field image for the right eye. In the present specification, the number of virtual cameras 300 is one for convenience of explanation, but the embodiment of the present disclosure is applicable even when the number of virtual cameras is two.

次に、図１に示すサーバ２のハードウェア構成について図１２を参照して説明する。図１２は、サーバ２のハードウェア構成を示す図である。図１２に示すように、サーバ２は、制御部２３と、記憶部２２と、通信インターフェース２１と、バス２４とを備える。制御部２３と、記憶部２２と、通信インターフェース２１は、バス２４を介して互いに通信可能に接続されている。制御部２３は、メモリとプロセッサを備えており、メモリは、例えば、ＲＯＭおよびＲＡＭ等から構成されるとともに、プロセッサは、例えば、ＣＰＵ、ＭＰＵおよび／またはＧＰＵにより構成される。 Next, the hardware configuration of the server 2 shown in FIG. 1 will be described with reference to FIG. FIG. 12 is a diagram showing a hardware configuration of the server 2. As shown in FIG. 12, the server 2 includes a control unit 23, a storage unit 22, a communication interface 21, and a bus 24. The control unit 23, the storage unit 22, and the communication interface 21 are connected to each other so as to be able to communicate with each other via the bus 24. The control unit 23 includes a memory and a processor, and the memory is composed of, for example, a ROM and a RAM, and the processor is composed of, for example, a CPU, an MPU, and / or a GPU.

記憶部（ストレージ）２２は、図１３に示す処理を実行するための制御プログラムや３６０度コンテンツを格納するように構成されており、大容量のＨＤＤ等である。通信インターフェース２１は、サーバ２を通信ネットワーク３に接続させるように構成されている。 The storage unit 22 is configured to store a control program for executing the process shown in FIG. 13 and 360-degree content, and is a large-capacity HDD or the like. The communication interface 21 is configured to connect the server 2 to the communication network 3.

次に、図１３～図１８を参照して本実施形態に係る配信システムＳの動作処理を以下に説明する。図１３および図１４は、配信システムＳの動作処理を説明するためのシーケンス図である。 Next, the operation processing of the distribution system S according to the present embodiment will be described below with reference to FIGS. 13 to 18. 13 and 14 are sequence diagrams for explaining the operation processing of the distribution system S.

最初に、例えばスマートフォンなどのユーザ端末１にランディングページとして３６０度コンテンツが配信される場合の配信システムＳの動作処理を、図１３～図１５を参照して説明する。ランディングページとは、公告からの流入用に設けられる専用ウェブページ、すなわち、様々なネット広告やリンクをクリックした際に表示されるウェブページである。図１３以降の説明ではユーザ端末１は、ＨＭＤ１１０以外の端末機器、例えばスマートフォンであるとする。 First, the operation processing of the distribution system S when 360-degree content is distributed as a landing page to a user terminal 1 such as a smartphone will be described with reference to FIGS. 13 to 15. A landing page is a dedicated web page provided for inflow from public notice, that is, a web page displayed when various online advertisements or links are clicked. In the description after FIG. 13, it is assumed that the user terminal 1 is a terminal device other than the HMD 110, for example, a smartphone.

図１３に示すように、ステップＳ１０－１において、例えばスマートフォンであるユーザ端末１の制御部１８は、タッチスクリーン１０上に表示されたウェブページを見ているユーザが、入力部１６を介して、当該ウェブページ内のリンクＬＫ１（図２参照）を選択したか否かを判断する。リンクＬＫ１は、サーバ２から配信される３６０度コンテンツ（広告コンテンツ）のリンク元としての第一ＵＲＬ（Ｕｎｉｆｏｒｍ Ｒｅｓｏｕｒｃｅ Ｌｏｃａｔｏｒ）アドレスに対応するリンクである。 As shown in FIG. 13, in step S10-1, for example, in the control unit 18 of the user terminal 1 which is a smartphone, a user who is viewing a web page displayed on the touch screen 10 can use the input unit 16 to perform the control unit 18. It is determined whether or not the link LK1 (see FIG. 2) in the web page is selected. The link LK1 is a link corresponding to a first URL (Uniform Resource Identifier) address as a link source of 360-degree content (advertising content) distributed from the server 2.

ユーザが第一ＵＲＬアドレスに対応するリンクＬＫ１を選択した、すなわち、第一ＵＲＬアドレスへのアクセスがあったと判定された場合には（ステップＳ１０－１のＹＥＳ）、ステップＳ１２－１において、ユーザ端末１の制御部１８は、通信ネットワーク３を介して、第一ＵＲＬアドレスに関連付けられた３６０度コンテンツの視聴を要求するための視聴要求信号をサーバ２に送信する。視聴要求信号は、ユーザ端末１の端末情報と、アドレス情報（ユーザ端末１のＩＰアドレスと、サーバ２のＩＰアドレス）と、ユーザのＩＤ情報とを含んでもよい。 When the user selects the link LK1 corresponding to the first URL address, that is, when it is determined that the first URL address has been accessed (YES in step S10-1), the user terminal in step S12-1. The control unit 18 of 1 transmits a viewing request signal for requesting viewing of the 360-degree content associated with the first URL address to the server 2 via the communication network 3. The viewing request signal may include terminal information of the user terminal 1, address information (IP address of the user terminal 1 and IP address of the server 2), and user ID information.

次に、ステップＳ１４において、サーバ２の制御部２３は、視聴要求信号をユーザ端末１から受信し、視聴要求信号を送信したユーザ端末１の種類を特定する。具体的には、制御部２３は、視聴要求信号を送信した端末機器（ここでは、ユーザ端末１）の端末情報に基づいて、当該端末機器が、ＨＭＤであるか、ＨＭＤ以外の端末機器（例えばスマートフォン、パーソナルコンピュータ等）を判定する。本例では、制御部２３は、ユーザ端末１の端末情報に基づいて、視聴要求信号を送信した端末機器はスマートフォン（すなわち、ＨＭＤ以外の端末機器）であると特定する。 Next, in step S14, the control unit 23 of the server 2 receives the viewing request signal from the user terminal 1 and specifies the type of the user terminal 1 that has transmitted the viewing request signal. Specifically, the control unit 23 determines whether the terminal device is an HMD or a terminal device other than the HMD (for example, based on the terminal information of the terminal device (here, the user terminal 1) that has transmitted the viewing request signal. Judge smartphones, personal computers, etc.). In this example, the control unit 23 identifies that the terminal device that has transmitted the viewing request signal is a smartphone (that is, a terminal device other than the HMD) based on the terminal information of the user terminal 1.

次に、ステップＳ１６において、制御部２３は、ユーザ端末１がＨＭＤ以外の端末機器であるとの判定に基づいて、３６０度コンテンツの表示条件を決定する。
視聴要求信号を送信した端末機器の種類に基づいて３６０度コンテンツの表示条件（コンテンツ表示条件）を決定する手法の一例について、図１５を参照して説明する。図１５は、３６０度コンテンツを構成する仮想空間２００を示す図である。図１５は、視聴要求信号を送信した端末機器が、タッチスクリーンを備えたユーザ端末１（例えば、スマートフォン）である場合の仮想空間２００を示す図である。 Next, in step S16, the control unit 23 determines the display condition of the 360-degree content based on the determination that the user terminal 1 is a terminal device other than the HMD.
An example of a method for determining a 360-degree content display condition (content display condition) based on the type of the terminal device that has transmitted the viewing request signal will be described with reference to FIG. FIG. 15 is a diagram showing a virtual space 200 constituting a 360-degree content. FIG. 15 is a diagram showing a virtual space 200 when the terminal device that has transmitted the viewing request signal is a user terminal 1 (for example, a smartphone) provided with a touch screen.

本実施形態における３６０度コンテンツは、３６０度空間画像を含む仮想空間２００として構成されている。すなわち、仮想空間２００の表面上に３６０度空間画像が表示される。３６０度空間画像が表示される仮想空間２００の表面上には、３６０度コンテンツの少なくとも一部を構成するメインコンテンツＣ１が表示されるメインコンテンツ表示領域Ｒ１が設けられている。メインコンテンツＣ１は、第一ＵＲＬアドレスに関連付けられたコンテンツであって、例えば広告用のコンテンツである。広告コンテンツとは、広告画像である。広告画像は、広告動画であってもよく、例えば、サッカーなどのスポーツゲームの試合動画や通販番組であってもよい。広告画像は、例えば、広告バナーとして表示されてもよいし、リンク先を示してもよい。広告画像は、Ｓｈｏｗｃａｓｅとして三次元的に表示されてもよい。仮想空間２００の表面上においてメインコンテンツ表示領域Ｒ１（および後述のサブコンテンツ表示領域Ｒ２，Ｒ３）が設けられている部分以外の領域についても、背景として３６０度空間画像（あるいは動画）が表示されてもよい。 The 360-degree content in this embodiment is configured as a virtual space 200 including a 360-degree spatial image. That is, a 360-degree spatial image is displayed on the surface of the virtual space 200. On the surface of the virtual space 200 on which the 360-degree space image is displayed, a main content display area R1 in which the main content C1 constituting at least a part of the 360-degree content is displayed is provided. The main content C1 is content associated with the first URL address, and is, for example, advertising content. Advertising content is an advertising image. The advertisement image may be an advertisement video, and may be, for example, a game video of a sports game such as soccer or a mail-order program. The advertisement image may be displayed as an advertisement banner, for example, or may indicate a link destination. The advertisement image may be displayed three-dimensionally as Showcase. Even if a 360-degree spatial image (or moving image) is displayed as a background in an area other than the portion on the surface of the virtual space 200 where the main content display area R1 (and the sub-content display areas R2 and R3 described later) are provided. good.

３６０度空間画像が表示される仮想空間２００の表面上には、メインコンテンツＣ１に関連するサブコンテンツＣ２，Ｃ３がそれぞれ表示されるサブコンテンツ表示領域Ｒ２，Ｒ３が設けられている。サブコンテンツは、例えば、メインコンテンツＣ１である広告動画に関連する広告コンテンツであり、例えば、視聴者コメントが表示されるテキスト欄Ｃ２や、メインコンテンツＣ１に関連する各種の商品を購入するためのリンクＣ３（後述の、第二ＵＲＬアドレスに対応するリンクＬＫ２を含む）等が含まれる。サブコンテンツ表示領域Ｒ２，Ｒ３は、メインコンテンツ表示領域Ｒ１の周辺、例えば、メインコンテンツ表示領域Ｒ１の左右方向に配置されている。 Sub-content display areas R2 and R3 on which sub-contents C2 and C3 related to the main content C1 are displayed are provided on the surface of the virtual space 200 on which the 360-degree space image is displayed. The sub-content is, for example, an advertisement content related to an advertisement video which is the main content C1, for example, a text field C2 in which a viewer comment is displayed, or a link C3 for purchasing various products related to the main content C1 ( (Including the link LK2 corresponding to the second URL address) described later) and the like are included. The sub-content display areas R2 and R3 are arranged around the main content display area R1, for example, in the left-right direction of the main content display area R1.

サブコンテンツ表示領域Ｒ２，Ｒ３は、メインコンテンツ表示領域Ｒ１と対向する方向の仮想空間２００の表面上に設けられていてもよい。この場合、サブコンテンツ表示領域Ｒ２，Ｒ３は、仮想空間２００水平方向においてメインコンテンツ表示領域Ｒ１に対して１８０度の位置に設けられることが好ましい。例えば、メインコンテンツ表示領域Ｒ１が全天球の上半分側に設けられている場合は、サブコンテンツ表示領域Ｒ２，Ｒ３は、全天球の上半分側であってメインコンテンツ表示領域Ｒ１に対向する位置に設けられる。 The sub-content display areas R2 and R3 may be provided on the surface of the virtual space 200 in the direction facing the main content display area R1. In this case, the sub-content display areas R2 and R3 are preferably provided at a position of 180 degrees with respect to the main content display area R1 in the horizontal direction of the virtual space 200. For example, when the main content display area R1 is provided on the upper half side of the whole celestial sphere, the sub-content display areas R2 and R3 are located on the upper half side of the whole celestial sphere and face the main content display area R1. It will be provided.

コンテンツ表示条件は、仮想空間２００内に配置された仮想カメラ３００の視野ＣＶに関連した条件を含む。コンテンツ表示条件は、ユーザ端末１に最初に提示される視野ＣＶ内にメインコンテンツ表示領域Ｒ１の少なくとも一部が配置されるように規定される。すなわち、メインコンテンツＣ１は、仮想空間２００の水平方向において、仮想空間２００のうち第一ＵＲＬアドレスへのアクセスに基づいてユーザ端末１，１００に最初に提示される方向である正面方向に、少なくとも一部が配置される。また、コンテンツ表示条件は、特に、仮想カメラ３００の視野ＣＶのうち、図１０の状態（ｂ）に示すｘｚ平面において、視軸Ｌを中心とした方位角βの角度範囲として設定される第２領域ＣＶｂの大きさ、すなわち、仮想空間２００の水平方向（ｘｚ方向）における幅Ｗ１（図１５参照）を規定する条件である。視野ＣＶの幅Ｗ１は、視聴要求信号を送信した端末機器の種類に応じて変更可能であり、制御部２３は、端末機器の種類に基づいてコンテンツ表示条件として視野ＣＶの幅Ｗ１を決定する。 The content display condition includes a condition related to the visual field CV of the virtual camera 300 arranged in the virtual space 200. The content display condition is defined so that at least a part of the main content display area R1 is arranged in the visual field CV first presented to the user terminal 1. That is, the main content C1 is at least partially in the horizontal direction of the virtual space 200, in the front direction, which is the direction first presented to the user terminals 1, 100 based on the access to the first URL address in the virtual space 200. Is placed. Further, the content display condition is set as an angle range of the azimuth angle β about the visual axis L in the xz plane shown in the state (b) of FIG. 10 in the visual field CV of the virtual camera 300. It is a condition that defines the size of the region CVb, that is, the width W1 (see FIG. 15) in the horizontal direction (xz direction) of the virtual space 200. The width W1 of the visual field CV can be changed according to the type of the terminal device that has transmitted the viewing request signal, and the control unit 23 determines the width W1 of the visual field CV as a content display condition based on the type of the terminal device.

ステップＳ１４において視聴要求信号を送信した端末機器がＨＭＤ以外の端末機器（本例ではスマートフォンであるユーザ端末１）であると特定された場合は、図１５に示すように、仮想カメラ３００の視野ＣＶの幅Ｗ１は比較的広く規定される。例えば、視野ＣＶの幅Ｗ１は、メインコンテンツ表示領域Ｒ１の水平方向の幅Ｗ２よりも広くなるように設定される。これにより、メインコンテンツＣ１が全て視野ＣＶ内に含まれるとともに、サブコンテンツＣ２，Ｃ３の少なくとも一部も視野ＣＶ内に含まれる。 When the terminal device that has transmitted the viewing request signal in step S14 is identified as a terminal device other than the HMD (user terminal 1 that is a smartphone in this example), as shown in FIG. 15, the field of view CV of the virtual camera 300 The width W1 of is relatively broadly defined. For example, the width W1 of the visual field CV is set to be wider than the horizontal width W2 of the main content display area R1. As a result, the main content C1 is all included in the visual field CV, and at least a part of the sub-contents C2 and C3 is also included in the visual field CV.

次に、図１４のステップＳ１８において、サーバ２の制御部２３は、第一ＵＲＬアドレスに関連付けられたメインコンテンツＣ１のデータとメインコンテンツＣ１に関連するサブコンテンツＣ２，Ｃ３のデータと、コンテンツ表示条件（例えば、視野ＣＶの幅Ｗ１を規定する条件）をユーザ端末１に送信する。次に、ステップＳ２０－１において、ユーザ端末１の制御部１８は、通信ネットワーク３を介して、メインコンテンツＣ１のデータと、サブコンテンツＣ２，Ｃ３のデータと、コンテンツ表示条件を受信し、コンテンツ表示条件に基づいてメインコンテンツＣ１およびサブコンテンツＣ２，Ｃ３を表示部１５（タッチスクリーン１０）に表示する。このようにして、ユーザ端末１のユーザは、メインコンテンツＣ１の視聴を開始することができる。 Next, in step S18 of FIG. 14, the control unit 23 of the server 2 has the data of the main content C1 associated with the first URL address, the data of the sub-contents C2 and C3 related to the main content C1, and the content display conditions (for example,). , Conditions that define the width W1 of the visual field CV) are transmitted to the user terminal 1. Next, in step S20-1, the control unit 18 of the user terminal 1 receives the data of the main content C1, the data of the sub-contents C2 and C3, and the content display condition via the communication network 3, and receives the content display condition. The main content C1 and the sub-contents C2 and C3 are displayed on the display unit 15 (touch screen 10) based on the above. In this way, the user of the user terminal 1 can start viewing the main content C1.

次に、ステップＳ２２－１において、ユーザ端末１の制御部１８は、表示部１５に表示されているコンテンツを視聴したユーザが、入力部１６を介して、第二ＵＲＬアドレスに対応するリンク（例えば、サブコンテンツＣ３に設定されたリンクＬＫ２）を選択したか否かを判断する。本例では、リンクＬＫ２は、複数のサブコンテンツＣ３のうちの一つに設定されるものとするが、メインコンテンツＣ１やサブコンテンツＣ２に設定されるものであってもよい。第二ＵＲＬアドレスは、課金コンテンツのリンク元としてのアドレスである。課金コンテンツとは、ユーザによりユーザ端末１に入力される課金指示が受け付けられるコンテンツである。ユーザが第二ＵＲＬアドレスのリンクＬＫ２を選択した、すなわち、第二ＵＲＬアドレスへのアクセスがあったと判定された場合（ステップＳ２２－１のＹＥＳ）、ステップＳ２４－１において、ユーザ端末１の制御部１８は、通信ネットワーク３を介して、第二ＵＲＬアドレスに関連付けられた課金コンテンツの視聴を要求するための視聴要求信号をサーバ２に送信する。 Next, in step S22-1, the control unit 18 of the user terminal 1 has a link (for example, for example) corresponding to the second URL address by the user who has viewed the content displayed on the display unit 15 via the input unit 16. , It is determined whether or not the link LK2) set in the sub-content C3 is selected. In this example, the link LK2 is set to one of the plurality of sub-contents C3, but may be set to the main content C1 or the sub-content C2. The second URL address is an address as a link source of the billing content. The billing content is content for which a billing instruction input to the user terminal 1 by the user is accepted. When the user selects the link LK2 of the second URL address, that is, it is determined that the second URL address has been accessed (YES in step S22-1), in step S24-1, the control unit of the user terminal 1 18 transmits a viewing request signal for requesting viewing of the charged content associated with the second URL address to the server 2 via the communication network 3.

次に、ステップＳ２６において、サーバ２の制御部２３は、課金コンテンツの視聴要求信号をユーザ端末１から受信し、記憶部２２に記憶された様々な課金コンテンツのうち、視聴要求信号に関連付けられた課金コンテンツを決定する。次に、ステップＳ２８－１において、サーバ２の制御部２３は、ステップＳ２６で決定した課金コンテンツを定義するデータを、通信ネットワーク３を介してユーザ端末１に送信する。次に、ステップＳ３０－１において、課金コンテンツを定義するデータを受信したユーザ端末１の制御部１８は、課金コンテンツを表示部１５に表示する。このようにして、ユーザ端末１のユーザは、課金コンテンツの視聴を開始することができる。 Next, in step S26, the control unit 23 of the server 2 receives the viewing request signal of the billing content from the user terminal 1 and is associated with the viewing request signal among the various billing contents stored in the storage unit 22. Determine billing content. Next, in step S28-1, the control unit 23 of the server 2 transmits the data defining the billing content determined in step S26 to the user terminal 1 via the communication network 3. Next, in step S30-1, the control unit 18 of the user terminal 1 that has received the data defining the billing content displays the billing content on the display unit 15. In this way, the user of the user terminal 1 can start viewing the charged content.

次に、端末機器がＨＭＤ１１０である場合、すなわち、ＨＭＤ１１０にランディングページとして３６０度コンテンツが配信される場合の配信システムＳの動作処理を、図１３、図１４を再び参照するとともに、図１６を参照して説明する。
図１３に示すように、ステップＳ１０－２において、ユーザ端末１００（ＨＭＤ１１０）の制御部１２１は、ユーザＵが、例えば図１１に示す視野画像Ｖ内の第一ＵＲＬアドレスのリンクＬＫ１を選択したか否かを判断する。ユーザＵは、外部コントローラ３２０を用いてリンクＬＫ１を選択してもよく、後述のハンドデバイスオブジェクトＨＲ，ＨＬを用いてリンクＬＫ１を選択してもよい。ユーザＵがリンクＬＫ１を選択した、すなわち、第一ＵＲＬアドレスへのアクセスがあったと判定された場合には（ステップＳ１０－２のＹＥＳ）、ステップＳ１２－２において、ＨＭＤ１１０の制御部１２１は、通信ネットワーク３を介して、第一ＵＲＬアドレスに関連付けられた３６０度コンテンツの視聴を要求するための視聴要求信号をサーバ２に送信する。ＨＭＤ１１０の制御部１２１から送信される視聴要求信号は、ＨＭＤ１１０の端末情報と、アドレス情報（ＨＭＤ１１０のＩＰアドレスと、サーバ２のＩＰアドレス）と、ユーザＵのＩＤ情報（ユーザＵのＩＤ情報に関連付けられたＨＭＤ１１０以外の端末機器の情報を含む）とを含んでもよい。 Next, refer to FIGS. 13 and 14 again and refer to FIG. 16 for the operation processing of the distribution system S when the terminal device is the HMD 110, that is, when the 360-degree content is distributed to the HMD 110 as a landing page. I will explain.
As shown in FIG. 13, in step S10-2, the control unit 121 of the user terminal 100 (HMD110) has selected, for example, the link LK1 of the first URL address in the field image V shown in FIG. Judge whether or not. The user U may select the link LK1 using the external controller 320, or may select the link LK1 using the hand device objects HR and HL described later. When the user U selects the link LK1, that is, when it is determined that the first URL address has been accessed (YES in step S10-2), in step S12-2, the control unit 121 of the HMD 110 communicates. A viewing request signal for requesting viewing of the 360-degree content associated with the first URL address is transmitted to the server 2 via the network 3. The viewing request signal transmitted from the control unit 121 of the HMD 110 is associated with the terminal information of the HMD 110, the address information (IP address of the HMD 110 and the IP address of the server 2), and the ID information of the user U (ID information of the user U). (Including information on terminal devices other than the HMD 110).

次に、ステップＳ１４において、サーバ２の制御部２３は、視聴要求信号をＨＭＤ１１０から受信し、当該視聴要求信号に基づいて第一ＵＲＬアドレスにアクセスした端末機器がＨＭＤ１１０であることを特定する。次に、ステップＳ１６において、制御部２３は、端末機器がＨＭＤ１１０であると特定されたことに基づき、３６０度コンテンツの表示条件を決定する。 Next, in step S14, the control unit 23 of the server 2 receives the viewing request signal from the HMD 110, and identifies that the terminal device that has accessed the first URL address based on the viewing request signal is the HMD 110. Next, in step S16, the control unit 23 determines the display condition of the 360-degree content based on the identification that the terminal device is the HMD 110.

図１６は、視聴要求信号を送信した端末機器がＨＭＤ１１０である場合の仮想空間２００Ａを示す図である。図１５に示す仮想空間２００と同様に、３６０度コンテンツを構成する仮想空間２００Ａの表面上には、メインコンテンツＣ１が表示されるメインコンテンツ表示領域Ｒ１と、サブコンテンツＣ２，Ｃ３が表示されるサブコンテンツ表示領域Ｒ２，Ｒ３が配置されている。また、図１６に示す仮想空間２００Ａには、メインコンテンツＣ１に関連する商品オブジェクトＧ１，Ｇ２や、商品購入のためのオブジェクトであるカートオブジェクトＣＴ（受付オブジェクトの一例）が含まれている。仮想空間２００Ａは、ＨＭＤ１１０のユーザＵの仮想手としてユーザＵが操作可能な左手オブジェクト４００Ｌと右手オブジェクト４００Ｒを含んでもよい。商品オブジェクトＧ１，Ｇ２は、例えば、メインコンテンツＣ１に関連する広告商品の３次元オブジェクトである。メインコンテンツＣ１がサッカーの試合動画である場合には、商品オブジェクトとして、例えば、試合中のチームのユニフォームに対応するユニフォームオブジェクトＧ１や公式スポンサーのスニーカーに対応するスニーカーオブジェクトＧ２等が仮想空間２００内に配置され得る。カートオブジェクトＣＴには、所定の課金コンテンツが関連付けられている。 FIG. 16 is a diagram showing a virtual space 200A when the terminal device that has transmitted the viewing request signal is the HMD 110. Similar to the virtual space 200 shown in FIG. 15, on the surface of the virtual space 200A constituting the 360-degree content, the main content display area R1 in which the main content C1 is displayed and the sub-content display in which the sub-contents C2 and C3 are displayed are displayed. Regions R2 and R3 are arranged. Further, the virtual space 200A shown in FIG. 16 includes product objects G1 and G2 related to the main content C1 and a cart object CT (an example of a reception object) which is an object for purchasing a product. The virtual space 200A may include a left-hand object 400L and a right-hand object 400R that can be operated by the user U as virtual hands of the user U of the HMD 110. The product objects G1 and G2 are, for example, three-dimensional objects of advertising products related to the main content C1. When the main content C1 is a soccer match video, for example, a uniform object G1 corresponding to the uniform of the team during the match, a sneaker object G2 corresponding to the official sponsor's sneaker, and the like are arranged in the virtual space 200 as product objects. Can be done. A predetermined billing content is associated with the cart object CT.

次に、仮想空間２００Ａに含まれる左手オブジェクト４００Ｌおよび右手オブジェクト４００Ｒについて図１７を参照して説明する。図１７の状態（ａ）は、ＨＭＤ１１０とコントローラ３２０Ｌ，３２０Ｒを装着したユーザＵを示す図である。図１７の状態（ｂ）は、仮想カメラ３００と、左手オブジェクト４００Ｌ（操作オブジェクトの一例）と、右手オブジェクト４００Ｒ（操作オブジェクトの一例）と、商品オブジェクトＧ１，Ｇ２と、カートオブジェクトＣＴとを含む仮想空間２００Ａを示す図である。なお、図１７の状態（ｂ）においては、メインコンテンツ表示領域Ｒ１やサブコンテンツ表示領域Ｒ２，Ｒ３の図示は省略する。 Next, the left-handed object 400L and the right-handed object 400R included in the virtual space 200A will be described with reference to FIG. FIG. 17A is a diagram showing a user U equipped with the HMD 110 and the controllers 320L and 320R. The state (b) in FIG. 17 is a virtual including a virtual camera 300, a left-hand object 400L (an example of an operation object), a right-hand object 400R (an example of an operation object), product objects G1 and G2, and a cart object CT. It is a figure which shows the space 200A. In the state (b) of FIG. 17, the main content display area R1 and the sub-content display areas R2 and R3 are not shown.

図１７に示すように、仮想空間２００Ａは、仮想カメラ３００と、左手オブジェクト４００Ｌと、右手オブジェクト４００Ｒと、商品オブジェクトＧ１，Ｇ２と、カートオブジェクトＣＴとを含む。制御部１２１は、これらのオブジェクトを含む仮想空間２００Ａを規定する仮想空間データを生成している。上述したように、仮想カメラ３００は、ユーザＵが装着しているＨＭＤ１１０の動きに連動する。つまり、仮想カメラ３００の視野は、ＨＭＤ１１０の動きに応じて更新される。また、左手オブジェクト４００Ｌと右手オブジェクト４００Ｒは、それぞれコリジョンエリアＣＡを有する。コリジョンエリアＣＡは、手オブジェクト４００と商品オブジェクトＧ１，Ｇ２やカートオブジェクトＣＴとのコリジョン判定（当たり判定）に供される。例えば、手オブジェクト４００のコリジョンエリアＣＡと商品オブジェクトＧ１，Ｇ２のコリジョンエリアとが接触することで、手オブジェクト４００と商品オブジェクトＧ１，Ｇ２とが接触したことが判定される。図１７に示すように、コリジョンエリアＣＡは、例えば、手オブジェクト４００の中心位置を中心とした直径Ｒを有する球により規定されてもよい。以下の説明では、コリジョンエリアＣＡは、手オブジェクト４００の中心位置を中心とした直径Ｒの球状に形成されているものとする。 As shown in FIG. 17, the virtual space 200A includes a virtual camera 300, a left-handed object 400L, a right-handed object 400R, product objects G1 and G2, and a cart object CT. The control unit 121 generates virtual space data that defines the virtual space 200A including these objects. As described above, the virtual camera 300 is linked to the movement of the HMD 110 worn by the user U. That is, the field of view of the virtual camera 300 is updated according to the movement of the HMD 110. Further, the left-hand object 400L and the right-hand object 400R each have a collision area CA. The collision area CA is used for collision determination (hit determination) between the hand object 400 and the product objects G1 and G2 and the cart object CT. For example, when the collision area CA of the hand object 400 and the collision area of the product objects G1 and G2 come into contact with each other, it is determined that the hand object 400 and the product objects G1 and G2 are in contact with each other. As shown in FIG. 17, the collision area CA may be defined by, for example, a sphere having a diameter R centered on the center position of the hand object 400. In the following description, it is assumed that the collision area CA is formed in a spherical shape having a diameter R centered on the center position of the hand object 400.

なお、カートオブジェクトＣＴにもコリジョンエリアが設定され、商品オブジェクトＧ１，Ｇ２のコリジョンエリアとの関係に基づいて、商品オブジェクトＧ１，Ｇ２とカートオブジェクトＣＴとの接触を判定してもよい。これにより、手オブジェクト４００によって商品オブジェクトＧ１，Ｇ２の挙動が操作された場合（カートオブジェクトＣＴに投げ入れられるなど）にも、商品オブジェクトＧ１，Ｇ２に基づいてカートオブジェクトＣＴに容易に作用を与え、各種判定に供することができる。 A collision area may also be set in the cart object CT, and the contact between the product objects G1 and G2 and the cart object CT may be determined based on the relationship between the product objects G1 and G2 and the collision area. As a result, even when the behavior of the product objects G1 and G2 is manipulated by the hand object 400 (such as being thrown into the cart object CT), the cart object CT can be easily affected based on the product objects G1 and G2, and various types can be obtained. It can be used for judgment.

商品オブジェクトＧ１，Ｇ２は、左手オブジェクト４００Ｌ，右手オブジェクト４００Ｒによって移動させることができる。例えば、手オブジェクト４００と商品オブジェクトＧ１が接触した状態でコントローラ３２０を操作して手オブジェクト４００の指を曲げることにより掴む動作を行う。この状態で手オブジェクト４００を移動させると、手オブジェクト４００の移動に追随するように、商品オブジェクトＧ１を移動させることができる。また、移動中に手オブジェクト４００の掴む動作を解除すると、手オブジェクト４００の移動速度、加速度、および、重力等を考慮して商品オブジェクトＧ１を仮想空間２００内において移動させることができる。これにより、ユーザはコントローラ３２０を用いて、商品オブジェクトＧ１，Ｇ２を掴んだり投げたりといった直感的な操作によって、意のままに操ることができる。 The product objects G1 and G2 can be moved by the left-handed object 400L and the right-handed object 400R. For example, the controller 320 is operated in a state where the hand object 400 and the product object G1 are in contact with each other, and the hand object 400 is gripped by bending the finger. If the hand object 400 is moved in this state, the product object G1 can be moved so as to follow the movement of the hand object 400. Further, when the operation of grasping the hand object 400 is released during movement, the product object G1 can be moved in the virtual space 200 in consideration of the moving speed, acceleration, gravity, and the like of the hand object 400. As a result, the user can operate the product objects G1 and G2 at will by intuitive operations such as grasping and throwing them using the controller 320.

再び、図１３に戻り、ステップＳ１６において視聴要求信号を送信した端末機器がＨＭＤ１１０であると判定された場合は、図１６に示すように、コンテンツ表示条件として、仮想カメラ３００の視野ＣＶの水平方向の幅Ｗ１Ａは、視聴要求信号を送信した端末機器がユーザ端末１である場合（仮想空間２００）の視野ＣＶの幅Ｗ１と比べて、狭く規定される。例えば、仮想空間２００Ａにおける視野ＣＶの幅Ｗ１Ａは、メインコンテンツ表示領域Ｒ１の幅Ｗ２よりも狭く設定され、視野ＣＶに基づく初期状態の視野画像においてメインコンテンツＣ１の水平方向の全幅の一部のみ視野画像内には含まれる。 Returning to FIG. 13, when it is determined in step S16 that the terminal device that transmitted the viewing request signal is the HMD 110, as shown in FIG. 16, as a content display condition, the horizontal direction of the field of view CV of the virtual camera 300 The width W1A is narrower than the width W1 of the visual field CV when the terminal device that has transmitted the viewing request signal is the user terminal 1 (virtual space 200). For example, the width W1A of the field of view CV in the virtual space 200A is set narrower than the width W2 of the main content display area R1, and only a part of the entire horizontal width of the main content C1 in the field image in the initial state based on the field of view CV. Is included in.

ステップＳ１６において視聴要求信号を送信した端末機器がＨＭＤ１１０であると判定された場合は、図１４に示すステップＳ１８において、制御部２３は、第一ＵＲＬアドレスに関連付けられたメインコンテンツＣ１のデータと、メインコンテンツＣ１に関連するサブコンテンツＣ２，Ｃ３のデータと、コンテンツ表示条件（例えば、視野ＣＶの幅Ｗ１Ａを規定する条件）をＨＭＤ１１０に送信する。次に、ステップＳ２０－２において、ＨＭＤ１１０の制御部１２１は、通信ネットワーク３を介して、メインコンテンツＣ１のデータと、サブコンテンツＣ２，Ｃ３のデータと、コンテンツ表示条件を受信し、コンテンツ表示条件に基づいてメインコンテンツＣ１の視野画像を表示部１１２に表示する。上述の通り、ＨＭＤ１１０の場合はユーザ端末１の場合に比べて視野ＣＶの幅Ｗ１Ａが狭く設定されており初期状態の視野画像においてはメインコンテンツＣ１周辺のサブコンテンツＣ２，Ｃ３は、表示部１１２には表示されない。このようにして、ＨＭＤ１１０のユーザＵは、３６０度コンテンツの視聴を開始することができる。図８のフローチャートで既に説明したように、３６０度コンテンツの視野画像は、ＨＭＤ１１０の動き（位置や傾き）に応じて更新され、ユーザＵは、首を左右に動かすことで、メインコンテンツＣ１周辺のサブコンテンツＣ２，Ｃ３や商品オブジェクトＧ１，Ｇ２、カートオブジェクトＣＴを視認することができる。 When it is determined in step S16 that the terminal device that has transmitted the viewing request signal is the HMD 110, in step S18 shown in FIG. 14, the control unit 23 has the data of the main content C1 associated with the first URL address and the main content. The data of the sub-contents C2 and C3 related to C1 and the content display condition (for example, the condition defining the width W1A of the visual field CV) are transmitted to the HMD 110. Next, in step S20-2, the control unit 121 of the HMD 110 receives the data of the main content C1, the data of the sub-contents C2 and C3, and the content display condition via the communication network 3, and is based on the content display condition. The field image of the main content C1 is displayed on the display unit 112. As described above, in the case of the HMD 110, the width W1A of the visual field CV is set narrower than in the case of the user terminal 1, and in the visual field image in the initial state, the sub-contents C2 and C3 around the main content C1 are displayed on the display unit 112. Do not show. In this way, the user U of the HMD 110 can start viewing the 360-degree content. As already described in the flowchart of FIG. 8, the field image of the 360-degree content is updated according to the movement (position and tilt) of the HMD 110, and the user U moves the neck left and right to sub-peripher the main content C1. The contents C2 and C3, the product objects G1 and G2, and the cart object CT can be visually recognized.

次に、ステップＳ２２－２において、ＨＭＤ１１０の制御部１２１は、ユーザＵが、例えば、サブコンテンツＣ３中に設定された第二ＵＲＬアドレスのリンクＬＫ２を選択したか否かを判断する。ユーザＵがリンクＬＫ２を選択した、すなわち、第二ＵＲＬアドレスへのアクセスがあったと判定された場合（ステップＳ２２－２のＹＥＳ）、ステップＳ２４－２において、ＨＭＤ１１０の制御部１２１は、通信ネットワーク３を介して、第二ＵＲＬアドレスに関連付けられた課金コンテンツの視聴を要求するための視聴要求信号をサーバ２に送信する。 Next, in step S22-2, the control unit 121 of the HMD 110 determines whether or not the user U has selected, for example, the link LK2 of the second URL address set in the sub-content C3. When the user U selects the link LK2, that is, it is determined that the second URL address has been accessed (YES in step S22-2), in step S24-2, the control unit 121 of the HMD 110 sets the communication network 3 A viewing request signal for requesting viewing of the charged content associated with the second URL address is transmitted to the server 2.

次に、ステップＳ２６において、サーバ２の制御部２３は、課金コンテンツの視聴要求信号をＨＭＤ１１０から受信し、視聴要求信号に関連付けられた課金コンテンツを決定する。次に、ステップＳ２８において、サーバ２の制御部２３は、ステップＳ２６で決定した課金コンテンツを、通信ネットワーク３を介してＨＭＤ１１０に送信する。次に、ステップＳ３０－２において、課金コンテンツを受信したＨＭＤ１１０の制御部１２１は、課金コンテンツを表示部１１２に表示する。このようにして、ＨＭＤ１１０のユーザＵは、課金コンテンツの視聴を開始することができる。 Next, in step S26, the control unit 23 of the server 2 receives the viewing request signal of the charged content from the HMD 110, and determines the charged content associated with the viewing request signal. Next, in step S28, the control unit 23 of the server 2 transmits the billing content determined in step S26 to the HMD 110 via the communication network 3. Next, in step S30-2, the control unit 121 of the HMD 110 that has received the charged content displays the charged content on the display unit 112. In this way, the user U of the HMD 110 can start viewing the charged content.

次に、ＨＭＤ１１０のユーザＵが、仮想空間２００Ａ内の商品オブジェクトＧ１，Ｇ２を用いて、メインコンテンツＣ１に関連付けられた商品をユーザＵの追加の意思表示なしに、いわゆる、ワンクリック方式で購入（注文）する場合の動作処理について図１８のシーケンス図を参照して説明する。
図１７に示すように、ＨＭＤ１１０のユーザＵは、仮想空間２００Ａに含まれる左手オブジェクト４００，右手オブジェクト４００Ｒを用いて、仮想空間２００Ａ内の商品オブジェクトＧ１，Ｇ２を掴むなどして商品オブジェクトＧ１，Ｇ２を観察し、これらの商品オブジェクトＧ１，Ｇ２に対応する実際の商品の購入（注文）を検討することができる。 Next, the user U of the HMD 110 purchases the product associated with the main content C1 using the product objects G1 and G2 in the virtual space 200A by a so-called one-click method without additional intention of the user U (order). ) Will be described with reference to the sequence diagram of FIG.
As shown in FIG. 17, the user U of the HMD 110 uses the left-hand object 400 and the right-hand object 400R included in the virtual space 200A to grab the product objects G1 and G2 in the virtual space 200A, and the product objects G1 and G2. It is possible to consider the purchase (order) of the actual product corresponding to these product objects G1 and G2.

図１８のステップ３２において、ＨＭＤ１１０の制御部１２１は、ユーザＵが、商品オブジェクトＧ１，Ｇ２の少なくとも一方をカートオブジェクトＣＴに関連付ける動作を行ったか否かを判定する。カートオブジェクトＣＴに関連付ける動作とは、例えば、手オブジェクト４００を用いて商品オブジェクトＧ１，Ｇ２の少なくとも一方を掴み、その商品オブジェクトをカートオブジェクトＣＴに投げ入れる動作を指す。ユーザＵは、手オブジェクト４００とは別の手段により商品オブジェクトＧ１，Ｇ２をカートオブジェクトＣＴに関連付けることもできる。ユーザＵが、例えば商品オブジェクトであるユニフォームオブジェクトＧ１を掴んでカートオブジェクトＣＴに投げ入れたと判定された場合には（ステップＳ３２のＹＥＳ）、ステップＳ３４において、ＨＭＤ１１０の制御部１２１は、ユニフォームオブジェクトＧ１に対応する実際のユニフォームに対するユーザＵからの注文を受け付ける注文受付信号をサーバ２へ送信する。 In step 32 of FIG. 18, the control unit 121 of the HMD 110 determines whether or not the user U has performed an operation of associating at least one of the product objects G1 and G2 with the cart object CT. The operation associated with the cart object CT refers to, for example, an operation of grasping at least one of the product objects G1 and G2 using the hand object 400 and throwing the product object into the cart object CT. The user U can also associate the product objects G1 and G2 with the cart object CT by means other than the hand object 400. When it is determined that the user U grabs the uniform object G1 which is a product object and throws it into the cart object CT (YES in step S32), in step S34, the control unit 121 of the HMD 110 corresponds to the uniform object G1. An order acceptance signal for accepting an order from the user U for the actual uniform is transmitted to the server 2.

次に、ステップＳ３６において、サーバ２の制御部２３は、注文受付信号をＨＭＤ１１０から受信し、注文受付信号に関連付けられた商品（ユニフォーム）のユーザＵからの注文を受け付ける。注文受付は、例えば、一般的な電子コマースの方法を用いることができる。次に、ステップＳ３８において、サーバ２の制御部２３は、商品の注文受付完了信号を、ＨＭＤ１１０に送信する。なお、ユーザ端末１がＨＭＤ１１０のユーザＵのＩＤ情報と関連付けられている場合、すなわち、ユーザ端末１がＨＭＤ１１０のユーザＵが所有するスマートフォンやパーソナルコンピュータである場合には、ステップＳ３８において、サーバ２の制御部２３は、注文受付完了信号をユーザ端末１へも送信しうる。次に、ステップＳ４０－２において、サーバ２から注文受付完了信号を受信したＨＭＤ１１０の制御部１２１は、商品の注文受付完了情報を表示部１１２に表示する。また、注文受付完了信号がユーザ端末１へも送信される場合には、ステップＳ４０－１において、ユーザ端末１の制御部１８は、商品の注文受付完了情報を表示部１５に表示する。このようにして、ＨＭＤ１１０のユーザＵは、商品オブジェクトＧ１に関連付けられた実際のユニフォームの注文が受け付けられたことを、装着中のＨＭＤ１１０および／またはユーザＵ自らが所有するユーザ端末１により確認することができる。 Next, in step S36, the control unit 23 of the server 2 receives the order acceptance signal from the HMD 110, and accepts the order from the user U of the product (uniform) associated with the order acceptance signal. For order reception, for example, a general electronic commerce method can be used. Next, in step S38, the control unit 23 of the server 2 transmits an order acceptance completion signal of the product to the HMD 110. When the user terminal 1 is associated with the ID information of the user U of the HMD 110, that is, when the user terminal 1 is a smartphone or a personal computer owned by the user U of the HMD 110, in step S38, the server 2 The control unit 23 can also transmit the order acceptance completion signal to the user terminal 1. Next, in step S40-2, the control unit 121 of the HMD 110 that has received the order acceptance completion signal from the server 2 displays the order acceptance completion information of the product on the display unit 112. Further, when the order acceptance completion signal is also transmitted to the user terminal 1, in step S40-1, the control unit 18 of the user terminal 1 displays the order acceptance completion information of the product on the display unit 15. In this way, the user U of the HMD 110 confirms that the order for the actual uniform associated with the product object G1 has been accepted by the user terminal 1 owned by the HMD 110 and / or the user U himself / herself. Can be done.

以上説明したように、本実施形態によれば、ユーザ端末１，１００による第一ＵＲＬアドレスに対応するウェブページからのアクセスに基づいて、第一ＵＲＬアドレスに関連するメインコンテンツＣ１およびメインコンテンツＣ１に関連するサブコンテンツＣ２を含む３６０度コンテンツをユーザ端末１，１００に提供する。また、メインコンテンツＣ１またはサブコンテンツＣ２，Ｃ３には、課金コンテンツが関連付けられた第二ＵＲＬアドレスのリンクが設定されており、第二ＵＲＬアドレスに対応するウェブページへのアクセスに基づいて、課金コンテンツを定義するデータがユーザ端末１，１００に送信される。これにより、仮想空間を活用して広告効果を向上させることができる。すなわち、広告商品に関するメインコンテンツＣ１およびサブコンテンツＣ２，Ｃ３を仮想空間で構成されるものとして提供することで、従来のＷｅｂ広告よりも当該商品の購入率（いわゆる、コンバージョン率）を高めることができる。 As described above, according to the present embodiment, the main content C1 and the main content C1 related to the first URL address are related based on the access from the web page corresponding to the first URL address by the user terminals 1, 100. The 360-degree content including the sub-content C2 is provided to the user terminals 1, 100. Further, the main content C1 or the sub-contents C2 and C3 are set with a link of the second URL address associated with the billing content, and the billing content is charged based on the access to the web page corresponding to the second URL address. The defined data is transmitted to the user terminals 1, 100. As a result, the virtual space can be utilized to improve the advertising effect. That is, by providing the main content C1 and the sub-contents C2 and C3 related to the advertisement product as being composed of a virtual space, the purchase rate (so-called conversion rate) of the product can be increased as compared with the conventional Web advertisement.

また、制御部２３は、メインコンテンツＣ１の少なくとも一部が、仮想空間２００，２００Ａの水平方向において、仮想空間２００，２００Ａのうち第一ＵＲＬアドレスへのアクセスに基づいてユーザ端末１，１００に最初に提示される方向である正面方向に配置されるように、視野ＣＶを規定する。これにより、ユーザ端末１，１００のユーザに対して最初にメインコンテンツＣ１を提示することができ、広告効果をさらに高めることができる。 Further, in the control unit 23, at least a part of the main content C1 is first sent to the user terminals 1, 100 in the horizontal direction of the virtual spaces 200, 200A based on the access to the first URL address of the virtual spaces 200, 200A. The visual field CV is defined so that it is arranged in the front direction, which is the direction in which it is presented. As a result, the main content C1 can be first presented to the users of the user terminals 1, 100, and the advertising effect can be further enhanced.

また、第一ＵＲＬアドレスにアクセスした端末機器がＨＭＤ１１０である場合には、制御部２３は、仮想空間２００Ａの水平方向におけるメインコンテンツＣ１の幅Ｗ２が、視野ＣＶの幅Ｗ１Ａよりも大きくなるように、メインコンテンツＣ１の形状あるいは視野ＣＶの幅Ｗ１Ａを設定する。これにより、ＨＭＤ１１０で３６０度コンテンツを視聴する場合には、メインコンテンツＣ１を３６０度コンテンツらしく楽しむことができ、広告効果をさらに高めることができる。 When the terminal device that has accessed the first URL address is the HMD 110, the control unit 23 sets the width W2 of the main content C1 in the horizontal direction of the virtual space 200A to be larger than the width W1A of the field of view CV. The shape of the main content C1 or the width W1A of the field of view CV is set. As a result, when viewing 360-degree content on the HMD 110, the main content C1 can be enjoyed like 360-degree content, and the advertising effect can be further enhanced.

また、第一ＵＲＬアドレスにアクセスした端末機器の視野ＣＶの幅Ｗ１，Ｗ１Ａに応じて、メインコンテンツＣ１の幅Ｗ２を異ならせても良い。これにより、端末機器に応じたメインコンテンツＣ１／サブコンテンツＣ２，Ｃ３の提示を可能にし、効果的な広告提示を行うことができる。なお、上記の実施形態では、第一ＵＲＬアドレスにアクセスした端末機器の種類に応じて、視野ＣＶの幅Ｗ１，Ｗ１Ａを異ならせる手法を例示しているが、視野ＣＶの幅Ｗ１，Ｗ１Ａを変更する代わりに、仮想空間２００，２００Ａの水平方向におけるメインコンテンツ表示領域Ｒ１の幅Ｗ２を変更してもよい。 Further, the width W2 of the main content C1 may be different according to the widths W1 and W1A of the field of view CV of the terminal device that has accessed the first URL address. This makes it possible to present the main content C1 / sub-contents C2 and C3 according to the terminal device, and effectively present the advertisement. In the above embodiment, a method of making the widths W1 and W1A of the field of view CV different according to the type of the terminal device that has accessed the first URL address is exemplified, but the widths W1 and W1A of the field of view CV are changed. Alternatively, the width W2 of the main content display area R1 in the horizontal direction of the virtual spaces 200 and 200A may be changed.

具体的には、端末機器がＨＭＤ１１０である場合には、視野ＣＶの幅Ｗ１ＡよりもメインコンテンツＣ１の幅Ｗ２を大きくし、端末機器がタッチスクリーンを備える機器（例えば、スマートフォンなどのユーザ端末１）である場合には、視野ＣＶの幅Ｗ１よりもメインコンテンツＣ１の幅Ｗ２を小さくすることが好ましい。 Specifically, when the terminal device is the HMD 110, the width W2 of the main content C1 is made larger than the width W1A of the field of view CV, and the terminal device is a device equipped with a touch screen (for example, a user terminal 1 such as a smartphone). In some cases, it is preferable to make the width W2 of the main content C1 smaller than the width W1 of the visual field CV.

タッチスクリーンを備える端末機器、例えばスマートフォンやタブレット型のユーザ端末１の場合は、ユーザは二次元動画の視聴に慣れているため、メインコンテンツＣ１だけでなく広告コンテンツとしてのサブコンテンツＣ２，Ｃ３も初期視野に含まれた方がいい可能性がある。すなわち、スマートフォンやタブレット型端末にメインコンテンツＣ１を表示させる場合にはメインコンテンツＣ１の幅を視野ＣＶの幅よりも狭くすることでユーザがメインコンテンツＣ１周辺のサブコンテンツＣ２，Ｃ３に気づきやすいようにさせる。一方で、これらの端末機器よりも視野の広いＨＭＤ１１０にメインコンテンツＣ１を表示させる場合には当該メインコンテンツＣ１の幅を視野ＣＶの幅よりも広くしてユーザＵの没入感を損なわないようにする。 In the case of a terminal device equipped with a touch screen, for example, a smartphone or tablet-type user terminal 1, since the user is accustomed to watching two-dimensional moving images, not only the main content C1 but also the sub-contents C2 and C3 as advertising contents are initially viewed. May be better included in. That is, when displaying the main content C1 on a smartphone or tablet terminal, the width of the main content C1 is made narrower than the width of the visual field CV so that the user can easily notice the sub-contents C2 and C3 around the main content C1. On the other hand, when the main content C1 is displayed on the HMD 110 having a wider field of view than these terminal devices, the width of the main content C1 is made wider than the width of the field of view CV so as not to impair the immersive feeling of the user U.

また、端末機器がＨＭＤ１１０である場合には、仮想空間２００Ａは、メインコンテンツＣ１に関連するオブジェクト（例えば、広告商品に関連する商品オブジェクトＧ１，Ｇ２）を含み得る。商品オブジェクトＧ１，Ｇ２をＨＭＤ１１０の表示部１１２に表示させることで、例えば３６０度動画であるメインコンテンツＣ１の利点と商品オブジェクトＧ１，Ｇ２の利点との双方を活用することができ、ユーザＵの購買意欲を高めることができる。 Further, when the terminal device is the HMD 110, the virtual space 200A may include an object related to the main content C1 (for example, product objects G1 and G2 related to the advertising product). By displaying the product objects G1 and G2 on the display unit 112 of the HMD 110, for example, both the advantages of the main content C1 which is a 360-degree video and the advantages of the product objects G1 and G2 can be utilized, and the user U's purchasing motivation can be utilized. Can be enhanced.

また、端末機器がＨＭＤ１１０である場合には、仮想空間２００Ａは、メインコンテンツＣ１に関連する商品オブジェクトＧ１，Ｇ２と、商品オブジェクトＧ１，Ｇ２に関連付けられた商品に対するユーザＵからの注文を受け付ける受付オブジェクトＣＴを含み、制御部１２１は、受付オブジェクトＣＴに商品オブジェクトＧ１，Ｇ２が関連付けられた場合には、商品の注文を受け付ける。このように、商品の注文手続きを単純化することでコンバージョン率をさらに向上させることができる。 When the terminal device is the HMD 110, the virtual space 200A is a reception object CT that accepts orders from the user U for the product objects G1 and G2 related to the main content C1 and the products associated with the product objects G1 and G2. When the product objects G1 and G2 are associated with the reception object CT, the control unit 121 accepts an order for the product. In this way, the conversion rate can be further improved by simplifying the product ordering procedure.

また、サーバ２の制御部２３（もしくはユーザ端末１の制御部１８、ユーザ端末１００の制御部１２１）によって実行される各種処理をソフトウェアによって実現するために、本実施形態に係る情報処理方法をコンピュータ（プロセッサ）に実行させるための制御プログラムが記憶部２２（もしくは、主記憶１２（補助記憶１３）、記憶部１２３）またはＲＯＭに予め組み込まれていてもよい。または、制御プログラムは、磁気ディスク（ＨＤＤ、フロッピーディスク）、光ディスク（ＣＤ－ＲＯＭ，ＤＶＤ－ＲＯＭ、Ｂｌｕ－ｒａｙ（登録商標）ディスク等）、光磁気ディスク（ＭＯ等）、フラッシュメモリ（ＳＤカード、ＵＳＢメモリ、ＳＳＤ等）等のコンピュータ読取可能な記憶媒体に格納されていてもよい。この場合、記憶媒体がサーバ２（もしくは、ユーザ端末１，１００）に接続されることで、当該記憶媒体に格納された制御プログラムが、記憶部２２（もしくは、主記憶１２（補助記憶１３）、記憶部１２３）に組み込まれる。そして、記憶部２２（もしくは、主記憶１２（補助記憶１３）、記憶部１２３）に組み込まれた制御プログラムがＲＡＭ上にロードされて、プロセッサがロードされた当該プログラムを実行することで、制御部２３（もしくは、制御部１８、制御部１２１）は本実施形態に係る情報処理方法を実行する。 Further, in order to realize various processes executed by the control unit 23 of the server 2 (or the control unit 18 of the user terminal 1 or the control unit 121 of the user terminal 100) by software, the information processing method according to the present embodiment is computerized. A control program for being executed by the (processor) may be preliminarily incorporated in the storage unit 22 (or the main storage unit 12 (auxiliary storage unit 13), the storage unit 123) or the ROM. Alternatively, the control program includes a magnetic disk (HDD, floppy disk), an optical disk (CD-ROM, DVD-ROM, Blu-ray (registered trademark) disk, etc.), a photomagnetic disk (MO, etc.), a flash memory (SD card, SD card, etc.). It may be stored in a computer-readable storage medium such as a USB memory, SSD, etc.). In this case, when the storage medium is connected to the server 2 (or the user terminals 1, 100), the control program stored in the storage medium can be stored in the storage unit 22 (or the main storage 12 (auxiliary storage 13)). It is incorporated in the storage unit 123). Then, the control program incorporated in the storage unit 22 (or the main storage 12 (auxiliary storage 13), the storage unit 123) is loaded onto the RAM, and the processor executes the loaded program to execute the control unit. 23 (or control unit 18, control unit 121) executes the information processing method according to the present embodiment.

また、制御プログラムは、通信ネットワーク３上のコンピュータから通信インターフェースを介してダウンロードされてもよい。この場合も同様に、ダウンロードされた当該制御プログラムが記憶部２２（もしくは、主記憶１２（補助記憶１３）、記憶部１２３）に組み込まれる。 Further, the control program may be downloaded from the computer on the communication network 3 via the communication interface. In this case as well, the downloaded control program is incorporated into the storage unit 22 (or the main storage unit 12 (auxiliary storage unit 13), the storage unit 123).

以上、本開示の実施形態について説明をしたが、本発明の技術的範囲が本実施形態の説明によって限定的に解釈されるべきではない。本実施形態は一例であって、特許請求の範囲に記載された発明の範囲内において、様々な実施形態の変更が可能であることが当業者によって理解されるところである。本発明の技術的範囲は特許請求の範囲に記載された発明の範囲およびその均等の範囲に基づいて定められるべきである。 Although the embodiments of the present disclosure have been described above, the technical scope of the present invention should not be construed as being limited by the description of the present embodiments. This embodiment is an example, and it is understood by those skilled in the art that various embodiments can be modified within the scope of the invention described in the claims. The technical scope of the present invention should be determined based on the scope of the invention described in the claims and the equivalent scope thereof.

本実施形態の説明では、図１５および図１６に示すように、３６０度空間画像が表示される仮想空間２００の表面上にメインコンテンツ表示領域Ｒ１およびサブコンテンツ表示領域Ｒ２，Ｒ３が設けられているが、この例に限られない。例えば、仮想空間２００内の所定位置に配置されるオブジェクトの表面上に、メインコンテンツやサブコンテンツを表示するためのコンテンツ表示領域を設けてもよい。また、メインコンテンツやサブコンテンツが３次元的に表示される場合には、これらのコンテンツは、オブジェクトの内部に表示されてもよい。この場合、コンテンツ表示領域は、オブジェクトの内部に設けられる。また、コンテンツを表示するオブジェクトは、透明であってもよい（すなわち、各オブジェクトに対してテクスチャマッピング処理が実行されない）。 In the description of the present embodiment, as shown in FIGS. 15 and 16, the main content display area R1 and the sub-content display areas R2 and R3 are provided on the surface of the virtual space 200 on which the 360-degree space image is displayed. , Not limited to this example. For example, a content display area for displaying main content or sub-content may be provided on the surface of an object arranged at a predetermined position in the virtual space 200. Further, when the main content and the sub-content are displayed three-dimensionally, these contents may be displayed inside the object. In this case, the content display area is provided inside the object. Also, the objects displaying the content may be transparent (ie, no texture mapping process is performed on each object).

本実施形態において、仮想空間は、ユーザにＶＲ（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ）、ＡＲ（Ａｒｇｕｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）及びＭＲ（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）といった、仮想体験を提供するために用いられる。仮想空間がＶＲを提供する場合、仮想空間の背景にはメモリに保存された背景データが使用される。仮想空間がＡＲまたはＭＲを提供する場合、背景には現実空間が使用される。この場合、ＨＭＤ１１０が透過型の表示装置（光学シースルーまたはビデオシースルー型の表示装置）を備えることにより、現実空間が背景として使用され得る。仮想空間がＭＲに適用される場合、オブジェクトは、現実空間によって影響を与えられてもよい。このように、仮想空間が背景や仮想オブジェクトといった仮想シーンを少なくとも一部に含むことにより、ユーザには当該仮想シーンとの相互作用が可能な仮想体験が提供され得る。 In the present embodiment, the virtual space is used to provide a virtual experience such as VR (Virtual Reality), AR (Augmented Reality), and MR (Mixed Reality). When the virtual space provides VR, the background data stored in the memory is used as the background of the virtual space. If the virtual space provides AR or MR, the real space is used as the background. In this case, the HMD 110 is provided with a transmissive display device (optical see-through or video see-through type display device), so that the real space can be used as a background. If virtual space is applied to MR, the object may be influenced by real space. As described above, by including the virtual scene such as the background and the virtual object in at least a part of the virtual space, the user can be provided with a virtual experience capable of interacting with the virtual scene.

仮想空間がＡＲまたはＭＲに適用される場合には、上述のハンドデバイスオブジェクトＨＲ，ＨＬの代わりにユーザの手が用いられてもよい。この場合、ユーザは、自らの手により、仮想空間内の３次元商品オブジェクトＧ１，Ｇ２をつかむことができる。 When the virtual space is applied to AR or MR, the user's hand may be used instead of the above-mentioned hand device objects HR and HL. In this case, the user can grab the three-dimensional product objects G1 and G2 in the virtual space by his / her own hands.

１：ユーザ端末（端末機器の一例）
２：サーバ
３：通信ネットワーク
１０：タッチスクリーン
１１：プロセッサ
１５：表示部
１８：制御部
２１：通信インターフェース
２２：記憶部
２３：制御部
２４：バス
１００：ユーザ端末（端末機器の一例）
１１０：ヘッドマウントデバイス（ＨＭＤ）
１１２：表示部
１１４：センサ
１１６：ヘッドフォン
１１８：マイク
１２０：制御装置
１２１：制御部
１２３：記憶部（ストレージ）
１２４：Ｉ／Ｏインターフェース
１２５：通信インターフェース
１３０：位置センサ
１４０：注視センサ
２００，２００Ａ：仮想空間
３００：仮想カメラ
３２０：外部コントローラ
４００（４００Ｌ，４００Ｒ）：手オブジェクト（左手オブジェクト、右手オブジェクト）
Ｃ１：メインコンテンツ
Ｃ２，Ｃ３：サブコンテンツ
ＣＴ：カートオブジェクト（商品購入オブジェクトの一例）
ＣＶ：視野
ＣＶａ：第１領域
ＣＶｂ：第２領域
Ｇ１，Ｇ２：商品オブジェクト
Ｌ：視軸
ＬＫ１：第一ＵＲＬアドレスのリンク
ＬＫ２：第二ＵＲＬアドレスのリンク
Ｐ０：中心位置
Ｒ１：メインコンテンツ表示領域
Ｒ２，Ｒ３：サブコンテンツ表示領域
Ｓ：３６０度コンテンツ配信システム（配信システム）
Ｗ１，Ｗ１Ａ：視野ＣＶの水平方向の幅
Ｗ２：メインコンテンツ表示領域の水平方向の幅 1: User terminal (an example of terminal equipment)
2: Server 3: Communication network 10: Touch screen 11: Processor 15: Display unit 18: Control unit 21: Communication interface 22: Storage unit 23: Control unit 24: Bus 100: User terminal (example of terminal equipment)
110: Head-mounted device (HMD)
112: Display unit 114: Sensor 116: Headphones 118: Microphone 120: Control device 121: Control unit 123: Storage unit (storage)
124: I / O interface 125: Communication interface 130: Position sensor 140: Gaze sensor 200, 200A: Virtual space 300: Virtual camera 320: External controller 400 (400L, 400R): Hand object (left hand object, right hand object)
C1: Main content C2, C3: Sub-content CT: Cart object (an example of a product purchase object)
CV: Field CVa: First area CVb: Second area G1, G2: Product object L: Visual axis LK1: Link of first URL address LK2: Link of second URL address P0: Center position R1: Main content display area R2 R3: Sub-content display area S: 360-degree content distribution system (distribution system)
W1, W1A: Horizontal width of the field of view CV W2: Horizontal width of the main content display area

Claims (8)

情報処理方法であって、
前記情報処理方法は、端末機器を備えたシステムにおいて実行され、
全天球として規定される仮想空間を生成するステップと、
前記仮想空間内に仮想カメラを配置し、前記仮想カメラから見える視野を特定し、前記視野に基づく画像を前記端末機器に表示するステップと、
メインコンテンツと前記メインコンテンツに関連付けられたサブコンテンツを前記全天球に表示させるステップと、
前記端末機器の種類に基づいて前記メインコンテンツと前記サブコンテンツの表示条件を決定するステップと、を含み、
前記表示条件は、前記端末機器の種類に基づいて、前記メインコンテンツと前記サブコンテンツを結ぶ方向における前記メインコンテンツの大きさである第１大きさを規定することを含み、
前記端末機器に応じて、前記視野の広さおよび前記第１大きさの少なくとも一方を異ならせるステップをさらに含み、
前記視野の広さおよび前記第１大きさの少なくとも一方を異ならせるステップは、
前記端末機器がヘッドマウントデバイスである場合には、前記広さよりも前記第１大きさを大きくし、
前記端末機器がタッチスクリーンを備える機器である場合には、前記広さよりも前記第１大きさを小さくすることを含む、情報処理方法。 It is an information processing method
The information processing method is executed in a system equipped with a terminal device, and the information processing method is executed.
Steps to create a virtual space defined as a spherical surface,
A step of arranging a virtual camera in the virtual space, specifying a field of view seen from the virtual camera, and displaying an image based on the field of view on the terminal device.
The step of displaying the main content and the sub-content associated with the main content on the spherical surface, and
Including a step of determining display conditions of the main content and the sub-content based on the type of the terminal device.
The display condition includes defining a first size, which is the size of the main content in the direction connecting the main content and the sub-content, based on the type of the terminal device.
Further comprising the step of differentiating at least one of the wide field of view and the first size depending on the terminal device .
The steps that make at least one of the wide field of view and the first magnitude different are
When the terminal device is a head mount device, the first size is made larger than the size.
When the terminal device is a device provided with a touch screen, the information processing method includes making the first size smaller than the size . 前記端末機器がヘッドマウントデバイスである場合には、前記仮想空間が前記メインコンテンツに関連するオブジェクトを含むようにする、請求項１に記載の情報処理方法。 The information processing method according to claim 1 , wherein when the terminal device is a head mount device, the virtual space includes an object related to the main content. 前記仮想空間は、前記メインコンテンツに関連する商品オブジェクトと、前記商品オブジェクトと関連付けられた商品に対するユーザからの注文を受け付ける受付オブジェクトと、を含み、
前記受付オブジェクトに前記商品オブジェクトが関連付けられた場合に、前記商品の前記注文を受け付けるステップをさらに含む、請求項１または２に記載の情報処理方法。 The virtual space includes a product object related to the main content and a reception object that accepts an order from a user for a product associated with the product object.
The information processing method according to claim 1 or 2 , further comprising a step of accepting the order of the product when the product object is associated with the reception object. 前記ユーザの身体の一部の動きに応じて、前記仮想空間に含まれる操作オブジェクトを動かすステップと、
前記操作オブジェクトの動きに応じて、前記商品オブジェクトを移動させるステップと、
前記商品オブジェクトの移動に基づいて、前記商品オブジェクトと前記受付オブジェクトとを関連付けるステップと、をさらに含む、請求項３に記載の情報処理方法。 A step of moving an operation object included in the virtual space according to the movement of a part of the user's body,
A step of moving the product object according to the movement of the operation object,
The information processing method according to claim 3 , further comprising a step of associating the product object with the reception object based on the movement of the product object. ユーザの身体の一部の動きに応じて、前記視野を変更すること、前記メインコンテンツまたは前記サブコンテンツを操作すること、の少なくとも一方を実行するステップをさらに含む、請求項１から４のいずれか一項に記載の情報処理方法。 One of claims 1 to 4 , further comprising the step of performing at least one of changing the field of view and manipulating the main content or the sub-content according to the movement of a part of the user's body. The information processing method described in the section. 請求項１から５のいずれか一項に記載の情報処理方法をコンピュータに実行させるためのプログラム。 A program for causing a computer to execute the information processing method according to any one of claims 1 to 5 . 前記端末機器を備えた情報処理システムであって、請求項１から５のうちいずれか一項に記載の情報処理方法を実行するように構成された、情報処理システム。 An information processing system including the terminal device, which is configured to execute the information processing method according to any one of claims 1 to 5 . プロセッサと、
コンピュータ可読命令を記憶するメモリと、を備えた情報処理装置であって、
前記コンピュータ可読命令が前記プロセッサにより実行されると、前記情報処理装置は請求項１から５のうちいずれか一項に記載の情報処理方法を実行する、情報処理装置。 With the processor
An information processing device equipped with a memory for storing computer-readable instructions.
An information processing apparatus that, when the computer-readable instruction is executed by the processor, executes the information processing method according to any one of claims 1 to 5 .

Images