JP7244450B2 - Computer program, server device, terminal device, and method - Google Patents

Description

本件出願に開示された技術は、コンピュータプログラム、サーバ装置、端末装置及び方法に関する。 The technology disclosed in the present application relates to computer programs, server devices, terminal devices and methods.

近年、配信者がアバターオブジェクトとして仮想空間内で演じる、ゲーム、アニメーション、動画などがある。かかる仮想空間においては、配信者の演じるアバターオブジェクトを、仮想空間内の映像として、配信していた。 In recent years, there are games, animations, moving images, etc. in which a distributor acts as an avatar object in a virtual space. In such a virtual space, an avatar object played by a distributor is distributed as a video in the virtual space.

特開２０１８－７４２９４号公報JP 2018-74294 A 特開２０１９－３７５４９号公報JP 2019-37549 A 特開２００２－２７１６９３号公報Japanese Patent Application Laid-Open No. 2002-271693 特許第６５４３４０３号公報Japanese Patent No. 6543403

特許文献１に記載された技術は、背景と３ＤＣＧ空間の映像を合成するものである。また、特許文献２に記載された技術は、プレイヤと参加者とが交流するものである。また、特許文献３に記載された技術は、実写画像と仮想画像とを合成するものである。また、特許文献４に記載された技術は、動画配信に係るものである。 The technique described in Patent Literature 1 synthesizes a background and a 3DCG space image. Also, the technique described in Patent Document 2 allows the player and the participants to interact with each other. Further, the technique described in Patent Document 3 combines a photographed image and a virtual image. Also, the technique described in Patent Document 4 relates to moving image distribution.

なお、上記特許文献１乃至４は、引用によりその全体が本明細書に組み入れられる。 The entirety of Patent Literatures 1 to 4 is incorporated herein by reference.

本件出願において開示された幾つかの実施形態は、過去に配信された、配信者の演じるアバターオブジェクトの演出の再演出が可能な、コンピュータプログラム、サーバ装置、端末装置、及び方法を提供する。 Some embodiments disclosed in the present application provide a computer program, a server device, a terminal device, and a method capable of reproducing a performance of an avatar object played by a distributor that has been distributed in the past.

一態様に係るコンピュータプログラムは、一又は複数のプロセッサにより実行されることにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、
を受信し、
前記第１アニメーションの生成に必要な情報を用いて、第１アニメーションを生成し、
前記第１アニメーションを表示する、ものである。 A computer program according to one aspect, when executed by one or more processors,
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
Information relating to a second gift different from the information relating to the first gift;
receive the
generating a first animation using information necessary for generating the first animation;
and displaying the first animation.

また、他の一態様に係るコンピュータプログラムは、一又は複数のプロセッサにより実行されることにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、を送信する、ものである。 Also, a computer program according to another aspect is executed by one or more processors,
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
It is a thing that transmits sounds and , which were delivered in the past.

また、他の一態様に係るコンピュータプログラムは、一又は複数のプロセッサにより実行されることにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、
を送信する、ものである。 Also, a computer program according to another aspect is executed by one or more processors,
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
Information relating to a second gift different from the information relating to the first gift;
is a thing that sends a

一態様に係るサーバ装置は、一又は複数のプロセッサを具備し、前記一又は複数のプロセッサが、コンピュータにより読み取り可能な命令を実行することにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、
を送信する、ものである。 A server device according to one aspect comprises one or more processors, and the one or more processors execute computer-readable instructions to:
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
Information relating to a second gift different from the information relating to the first gift;
is a thing that sends a

また、一態様に係る方法は、コンピュータにより読み取り可能な命令を実行する一又は複数のプロセッサにより実行される方法であって、前記一又は複数のプロセッサが、前記命令を実行することにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、
を受信し、
前記第１アニメーションの生成に必要な情報を用いて、第１アニメーションを生成し、
前記第１アニメーションを表示する、ものである。 Also, according to one aspect, a method is performed by one or more processors executing computer readable instructions, the one or more processors executing the instructions to:
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
Information relating to a second gift different from the information relating to the first gift;
receive the
generating a first animation using information necessary for generating the first animation;
and displaying the first animation.

また、他の一態様に係る方法は、コンピュータにより読み取り可能な命令を実行する一又は複数のプロセッサにより実行される方法であって、前記一又は複数のプロセッサが、前記命令を実行することにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、
を送信するものである。 According to another aspect, a method is performed by one or more processors executing computer-readable instructions, the one or more processors executing the instructions to:
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
Information relating to a second gift different from the information relating to the first gift;
is to be sent.

また、他の一態様に係る方法は、コンピュータにより読み取り可能な命令を実行する一又は複数のプロセッサにより実行される方法であって、前記一又は複数のプロセッサが、前記命令を実行することにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
を送信する、ものである。 According to another aspect, a method is performed by one or more processors executing computer-readable instructions, the one or more processors executing the instructions to:
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
is a thing that sends a

一態様に係る端末装置は、一又は複数のプロセッサを具備し、前記一又は複数のプロセッサが、コンピュータにより読み取り可能な命令を実行することにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、
を受信し、
前記第１アニメーションの生成に必要な情報を用いて、第１アニメーションを生成し、
前記第１アニメーションを表示する、ものである。 A terminal device according to one aspect comprises one or more processors, and the one or more processors execute computer-readable instructions to:
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
Information relating to a second gift different from the information relating to the first gift;
receive the
generating a first animation using information necessary for generating the first animation;
and displaying the first animation.

他の一態様に係る端末装置は、一又は複数のプロセッサを具備し、前記一又は複数のプロセッサが、コンピュータにより読み取り可能な命令を実行することにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
を送信する、ものである。 A terminal device according to another aspect comprises one or more processors, and the one or more processors execute computer-readable instructions,
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
is a thing that sends a

図１は、一実施形態に係るシステムの構成の一例を示すブロック図である。FIG. 1 is a block diagram showing an example of the configuration of a system according to one embodiment. 図２は、図１に示したサーバ装置２０（端末装置３０）のハードウェア構成の一例を模式的に示すブロック図である。FIG. 2 is a block diagram schematically showing an example of the hardware configuration of the server device 20 (terminal device 30) shown in FIG. 図３は、一実施形態に係るシステムの機能の一例を模式的に示すブロック図である。FIG. 3 is a block diagram that schematically shows an example of the functions of the system according to one embodiment. 図４は、一実施形態に係るシステムが有するデータの一例である。FIG. 4 is an example of data possessed by the system according to one embodiment. 図５は、一実施形態に係るシステムが有するデータの一例である。FIG. 5 is an example of data possessed by the system according to one embodiment. 図６は、一実施形態に係るシステムが有するデータの一例である。FIG. 6 is an example of data possessed by the system according to one embodiment. 図７は、一実施形態に係るシステムが表示しうる統計情報の一例である。FIG. 7 is an example of statistical information that may be displayed by the system according to one embodiment. 図８は、一実施形態に係るシステムが表示しうる統計情報の一例である。FIG. 8 is an example of statistical information that may be displayed by the system according to one embodiment. 図９は、一実施形態に係るシステムの構成の一例を示すブロック図である。FIG. 9 is a block diagram showing an example of the system configuration according to one embodiment. 図１０は、一実施形態に係るシステムが処理するフローの一例である。FIG. 10 is an example of a flow processed by a system according to one embodiment. 図１１は、一実施形態に係るシステムが処理するフローの一例である。FIG. 11 is an example of a flow processed by a system according to one embodiment. 図１２は、一実施形態に係るシステムが処理するフローの一例である。FIG. 12 is an example of a flow processed by a system according to one embodiment.

以下、添付図面を参照して本発明の様々な実施形態を説明する。或る図面に表現された構成要素が、説明の便宜上、別の図面においては省略されていることがある点に留意されたい。さらにまた、添付した図面は、本願発明の一実施形態を開示するものではあるものの、必ずしも正確な縮尺で記載されている訳ではないということに注意されたい。また、本願書類において、アプリケーションという用語が示す対象は、ソフトウェア、又はプログラムと呼ばれるものであってよく、コンピュータに対する指令であって、結果を得ることができるように組み合わされたものであればよい。 Various embodiments of the present invention will now be described with reference to the accompanying drawings. Note that components depicted in one drawing may be omitted in another drawing for convenience of explanation. Furthermore, it should be noted that the attached drawings, while disclosing one embodiment of the present invention, are not necessarily drawn to scale. Also, in this document, the object indicated by the term application may be referred to as software or a program, and may be instructions to a computer that are combined so as to obtain a result.

１．システムの例
図１は、一実施形態に係るシステムの構成の一例を示すブロック図である。図１に示すように、システム１は、通信網１０に接続される１又はそれ以上のサーバ装置２０と、通信網１０に接続される１又はそれ以上の端末装置３０と、を含んでよい。なお、図１には、サーバ装置２０の例として、３つのサーバ装置２０Ａ～２０Ｃが例示され、端末装置３０の例として、３つの端末装置３０Ａ～３０Ｃが例示されているが、サーバ装置２０として、これら以外の１又はそれ以上のサーバ装置２０が通信網１０に接続され得るし、端末装置３０として、これら以外の１又はそれ以上の端末装置３０が通信網１０に接続され得る。なお、本出願書類において、システムという用語を、サーバと端末装置の両方を含む場合もあれば、サーバのみ、又は、端末装置のみ、を示す用語としても用いる。すなわち、システムは、サ―バのみ、端末装置のみ、サーバ及び端末装置の両方、のいずれの態様であってもよい。 1. System Example FIG. 1 is a block diagram showing an example of a system configuration according to an embodiment. As shown in FIG. 1 , system 1 may include one or more server devices 20 connected to communication network 10 and one or more terminal devices 30 connected to communication network 10 . In FIG. 1, three server devices 20A to 20C are illustrated as examples of the server device 20, and three terminal devices 30A to 30C are illustrated as examples of the terminal device 30. , one or more server devices 20 other than these may be connected to the communication network 10 , and one or more terminal devices 30 other than these may be connected to the communication network 10 as terminal devices 30 . In this application document, the term "system" may include both a server and a terminal device, and may also be used as a term indicating only a server or only a terminal device. In other words, the system may be in any form of a server only, a terminal device only, or both a server and a terminal device.

また、システムは、クラウド上の情報処理装置であってもよい。また、システムは、仮想的な情報処理装置を構成するものであって、論理的に一の情報処理装置と構成されるものであってもよい。また、システムの所有者と管理者は異なってもよい。 Also, the system may be an information processing device on the cloud. Further, the system constitutes a virtual information processing device, and may be logically configured with one information processing device. Also, the system owner and administrator may be different.

通信網１０は、携帯電話網、無線ＬＡＮ、固定電話網、インターネット、イントラネット、イーサネット（登録商標）、及び／又はこれらの組み合わせ等であってよく、また、これらに限定されない。通信網１０においては、本願書類で開示された種々のデータが通信されてよい。 The communication network 10 may be, but is not limited to, a mobile telephone network, a wireless LAN, a fixed telephone network, the Internet, an intranet, Ethernet, and/or combinations thereof. In communication network 10, various data disclosed in this document may be communicated.

サーバ装置２０は、インストールされた特定のアプリケーションを実行することにより、第１アニメーションの生成に必要な情報として、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、過去に配信された、音と、前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、を送信する、という動作等を実行できてよい。 By executing a specific application installed on the server device 20, the movement of the avatar object is combined with the information related to the avatar object related to the distributor terminal as the information necessary for generating the first animation. and information related to the previously distributed first gift, given from the viewer terminal viewing the animation representing the movement of the avatar object, and , transmitting the sound and the information related to the second gift, which is different from the information related to the first gift, which has been distributed in the past.

或いはまた、端末装置３０は、インストールされたウェブブラウザまたは特定のアプリケーションを実行することにより、第１アニメーションの生成に必要な情報として、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、過去に配信された、音と、前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、を受信し、前記第1アニメーションの生成に必要な情報を用いて、第１アニメーションを生成し、前記第１アニメーションを表示する、という動作などを実行できてよい。 Alternatively, the terminal device 30 executes an installed web browser or a specific application to combine the information necessary for generating the first animation with the information related to the avatar object related to the distributor terminal. , previously distributed information related to motion capable of expressing the movement of the avatar object, and previously distributed information given from a viewer terminal viewing animation expressing the movement of the avatar object; Receive information related to one gift, previously delivered sound, and information related to a second gift that is different from the information related to the first gift, and use the information necessary to generate the first animation. , to generate a first animation and display the first animation.

或いはまた、端末装置３０は、インストールされたウェブブラウザまたは特定のアプリケーションを実行することにより、第１アニメーションの生成に必要な情報として、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、過去に配信された、音と、を送信する、という動作等を実行できてよい。 Alternatively, the terminal device 30 executes an installed web browser or a specific application to combine the information necessary for generating the first animation with the information related to the avatar object related to the distributor terminal. , previously distributed information related to motion capable of expressing the movement of the avatar object, and previously distributed information given from a viewer terminal viewing animation expressing the movement of the avatar object; It may be possible to execute an operation such as transmitting information related to one gift and a sound delivered in the past.

端末装置３０は、このような動作を実行することができる任意の端末装置であって、スマートフォン、タブレット、携帯電話（フィーチャーフォン）及び／又はパーソナルコンピュータ等であってよく、これらに限定されない。 The terminal device 30 is any terminal device capable of executing such operations, and may be, but is not limited to, a smart phone, tablet, mobile phone (feature phone) and/or personal computer.

２．各装置のハードウェア構成
次に、サーバ装置２０が有するハードウェア構成の一例について説明する。 2. Hardware Configuration of Each Device Next, an example of the hardware configuration of the server device 20 will be described.

２－１．サーバ装置２０のハードウェア構成
サーバ装置２０のハードウェア構成例について図２を参照して説明する。図２は、図１に示したサーバ装置２０（端末装置３０）のハードウェア構成の一例を模式的に示すブロック図である（なお、図２において、括弧内の参照符号は、後述するように各端末装置３０に関連して記載されたものである。） 2-1. Hardware Configuration of Server Device 20 An example of hardware configuration of the server device 20 will be described with reference to FIG. FIG. 2 is a block diagram schematically showing an example of the hardware configuration of the server device 20 (terminal device 30) shown in FIG. It is described in relation to each terminal device 30.)

図２に示すように、サーバ装置２０は、主に、演算装置２１と、主記憶装置２２と、入出力インタフェイス装置２３を備えることができる。サーバ装置２０は、更に、入力装置２４と、補助出力装置２６と、を含むことができる。これら装置同士は、データバス及び／又は制御バスにより接続されていてよい。 As shown in FIG. 2 , the server device 20 can mainly include an arithmetic device 21 , a main storage device 22 and an input/output interface device 23 . Server device 20 may further include input devices 24 and auxiliary output devices 26 . These devices may be connected by a data bus and/or a control bus.

演算装置２１は、主記憶装置２２に記憶されている命令及びデータを用いて演算を行い、その演算の結果を主記憶装置２２に記憶させるものである。さらに、演算装置２１は、入出力インタフェイス装置２３を介して、入力装置２４、補助記憶装置２５及び出力装置２６等を制御することができる。サーバ装置２０は、１以上の演算装置２１を含んでよい。演算装置２１は、１又はそれ以上の、中央処理装置（ＣＰＵ）、マイクロプロセッサ、及び／又は、グラフィックスプロセッシングユニット（ＧＰＵ）を含んでよい。 The arithmetic device 21 performs arithmetic operations using instructions and data stored in the main memory device 22 and causes the main memory device 22 to store the results of the arithmetic operations. Further, the computing device 21 can control an input device 24, an auxiliary storage device 25, an output device 26, and the like via an input/output interface device 23. FIG. The server device 20 may include one or more computing devices 21 . Computing device 21 may include one or more central processing units (CPUs), microprocessors, and/or graphics processing units (GPUs).

主記憶装置２２は、記憶機能を有し、入力装置２４、補助記憶装置２５及び通信網１０等（サーバ装置２０等）から、入出力インタフェイス装置２３を介して受信した命令及びデータ、並びに、演算装置２１の演算結果を記憶するものである。主記憶装置２２は、ＲＡＭ（ランダムアクセスメモリ）、ＲＯＭ（リードオンリーメモリ）及び／又はフラッシュメモリ等をこれらに限定することなく含むことができる。 The main storage device 22 has a storage function, and receives instructions and data from the input device 24, the auxiliary storage device 25, the communication network 10, etc. (server device 20, etc.) via the input/output interface device 23, and It stores the calculation result of the calculation device 21 . Main memory 22 may include, but is not limited to, RAM (random access memory), ROM (read only memory), and/or flash memory.

補助記憶装置２５は、記憶装置である。上記特定のアプリケーションやウェブブラウザ等を構成する命令及びデータ（コンピュータプログラム）を記憶してよく、演算装置２１により制御されることにより、これらの命令及びデータ（コンピュータプログラム）は入出力インタフェイス装置２３を介して主記憶装置２２にロードされてよい。補助記憶装置２５は、磁気ディスク装置及び／又は光ディスク装置、ファイルサーバ等であってよく、これらに限定されない。 The auxiliary storage device 25 is a storage device. Instructions and data (computer programs) that constitute the above-mentioned specific applications, web browsers, etc. may be stored. may be loaded into the main memory 22 via the . The auxiliary storage device 25 may be a magnetic disk device and/or an optical disk device, a file server, etc., but is not limited to these.

入力装置２４は、外部からデータを取り込む装置であり、タッチパネル、ボタン、キーボード、マウス及び／又はセンサ等であってよい。 The input device 24 is a device that takes in data from the outside, and may be a touch panel, buttons, keyboard, mouse and/or sensor.

出力装置２６は、ディスプレイ装置、タッチパネル及び／又はプリンタ装置等をこれらに限定することなく含むことができてよい。また、入力装置２４と出力装置２６とが一体化されたものであってもよい。 Output devices 26 may include, but are not limited to, display devices, touch panels, and/or printer devices. Alternatively, the input device 24 and the output device 26 may be integrated.

このようなハードウェア構成にあっては、演算装置２１が、補助記憶装置２５に記憶された特定のアプリケーションを構成する命令及びデータ（コンピュータプログラム）を順次主記憶装置２２にロードし、ロードした命令及びデータを演算することにより、入出力インタフェイス装置２３を介して出力装置２６を制御し、或いはまた、入出力インタフェイス装置２３及び通信網１０を介して、他の装置（例えばサーバ装置２０及び他の端末装置３０等）との間で様々な情報の送受信を行うことができてよい。 In such a hardware configuration, the arithmetic unit 21 sequentially loads instructions and data (computer programs) constituting a specific application stored in the auxiliary storage device 25 into the main storage device 22, and loads the loaded instructions. and data to control the output device 26 via the input/output interface device 23, or to control other devices (for example, the server device 20 and It may be possible to transmit and receive various information to and from other terminal devices 30, etc.).

サーバ装置２０がかかる構成を備え、インストールされた特定のアプリケーションを実行することにより、以下で定義される、第１アニメーションの生成に必要な情報として、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、過去に配信された、音と、前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、を送信する、という動作等（後に詳述する様々な動作を含む）の一部又は全部を実行できてよい。また、かかる動作等は、ユーザーが、入力装置２４又は後述する端末装置３０に係る入力装置３４を用いて、本願書類で開示する発明の一例のシステムに指示を与えることで動作されてよい。また、プログラムが演算装置２１上で実行されている場合にはユーザーの利用するシステムとしてのサーバ装置２０の出力装置２６によって表示されてよく、又はユーザーの利用するシステムとしての端末装置３０の出力装置３６に表示させる構成であってよい。なお、サーバ装置について、本願書類において、管理サーバということもある。 When the server device 20 has such a configuration and executes a specific installed application, the information necessary for generating the first animation defined below is combined with the information related to the avatar object related to the distributor terminal. previously distributed motion-related information capable of expressing the movement of the avatar object, and previously distributed information provided from the viewer terminal viewing the animation expressing the movement of the avatar object. An operation of transmitting the information related to the first gift received, the sound delivered in the past, and the information related to the second gift that is different from the information related to the first gift (described in detail later). various operations) may be performed. Further, such operations may be performed by the user using the input device 24 or an input device 34 associated with the terminal device 30, which will be described later, to give instructions to the system of the example of the invention disclosed in this document. Further, when the program is executed on the arithmetic device 21, it may be displayed by the output device 26 of the server device 20 as the system used by the user, or the output device of the terminal device 30 as the system used by the user. 36 may be used. Note that the server device is sometimes referred to as a management server in the documents of the present application.

２－２．端末装置３０のハードウェア構成
端末装置３０のハードウェア構成例について同じく図２を参照して説明する。各端末装置３０のハードウェア構成としては、例えば、上述した各サーバ装置２０のハードウェア構成と同一のものを用いることが可能である。したがって、各端末装置３０が有する構成要素に対する参照符号は、図２において括弧内に示されている。 2-2. Hardware Configuration of Terminal Device 30 An example of hardware configuration of the terminal device 30 will be described with reference to FIG. As the hardware configuration of each terminal device 30, for example, the same hardware configuration as that of each server device 20 described above can be used. Therefore, the reference numerals for the components of each terminal device 30 are shown in parentheses in FIG.

図２に示すように、各端末装置３０は、主に、演算装置３１と、主記憶装置３２と、入出力インタフェイス装置３３と、入力装置３４と、補助記憶装置３５と、出力装置３６と、を含むことができる。これら装置同士は、データバス及び／又は制御バスにより接続されている。 As shown in FIG. 2, each terminal device 30 mainly includes an arithmetic device 31, a main storage device 32, an input/output interface device 33, an input device 34, an auxiliary storage device 35, and an output device 36. , can be included. These devices are connected to each other by a data bus and/or a control bus.

演算装置３１、主記憶装置３２、入出力インタフェイス装置３３、入力装置３４、補助記憶装置３５及び出力装置３６は、それぞれ、上述した各サーバ装置２０に含まれる、演算装置２１、主記憶装置２２、入出力インタフェイス装置２３、入力装置２４、補助記憶装置２５及び出力装置２６と略同一であってもよいし、異なるものであってもよい。また、演算装置や記憶装置の容量や能力は、異なっていてよい。特に入力装置３４及び出力装置３６については、以下で詳述する。 Arithmetic device 31, main storage device 32, input/output interface device 33, input device 34, auxiliary storage device 35, and output device 36 are included in each server device 20 described above, respectively. , the input/output interface device 23, the input device 24, the auxiliary storage device 25, and the output device 26, or may be different. Also, the capacities and capabilities of the computing devices and storage devices may be different. Input device 34 and output device 36, in particular, are described in greater detail below.

このようなハードウェア構成にあっては、演算装置３１が、補助記憶装置３５に記憶された特定のアプリケーションを構成する命令及びデータ（コンピュータプログラム）を順次主記憶装置３２にロードし、ロードした命令及びデータを演算することにより、入出力インタフェイス装置３３を介して出力装置３６を制御し、或いはまた、入出力インタフェイス装置３３及び通信網１０を介して、他の装置（例えば各サーバ装置２０等）との間で様々な情報の送受信を行うことができる。 In such a hardware configuration, the arithmetic unit 31 sequentially loads instructions and data (computer programs) constituting a specific application stored in the auxiliary storage device 35 into the main storage device 32, and loads the loaded instructions. and data to control the output device 36 via the input/output interface device 33, or to control other devices (for example, each server device 20) via the input/output interface device 33 and the communication network 10 etc.).

端末装置３０がかかる構成を備え、インストールされたウェブブラウザまたは特定のアプリケーションを実行することにより、第１アニメーションの生成に必要な情報として、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、過去に配信された、音と、前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、を受信し、前記第１アニメーションの生成に必要な情報を用いて、第１アニメーションを生成し、前記第１アニメーションを表示する、という動作等（後に詳述する様々な動作を含む）の一部又は全部を実行できてよい。 The terminal device 30 has such a configuration, and by executing the installed web browser or a specific application, the information necessary for generating the first animation is combined with the information related to the avatar object related to the distributor terminal. By means of, previously distributed information related to the motion that can express the movement of the avatar object, and given from the viewer terminal viewing the animation that expresses the movement of the avatar object, receiving information about a first gift, previously distributed sound, and information about a second gift different from the information about the first gift, and generating information necessary for generating the first animation; may be used to perform some or all of operations such as generating a first animation and displaying the first animation (including various operations described in detail later).

或いはまた、端末装置３０は、インストールされたウェブブラウザまたは特定のアプリケーションを実行することにより、第１アニメーションの生成に必要な情報として、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、過去に配信された、音と、を送信する、という動作等（後に詳述する様々な動作を含む）の一部又は全部を実行できてよい。また、インストールされたウェブブラウザを実行することにより、サーバ装置２０からウェブページを受信及び表示して、同様の動作を実行できる。また、かかる動作等は、ユーザーが、入力装置３４を用いて、本願書類で開示する発明の一例のシステムに指示を与えることで動作されてよい。また、プログラムが演算装置３１上で実行されている場合にはユーザーの利用するシステムとしての端末装置３０の出力装置３６に表示する構成であってよい。 Alternatively, the terminal device 30 executes an installed web browser or a specific application to synthesize the information necessary for generating the first animation with the information related to the avatar object related to the distributor terminal. , previously distributed information related to motion capable of expressing the movement of the avatar object; It may be possible to execute some or all of operations such as transmitting information related to one gift and sounds distributed in the past (including various operations described in detail later). Also, by executing the installed web browser, it is possible to receive and display web pages from the server device 20 and perform similar operations. Also, such operations may be performed by the user using the input device 34 to give instructions to the system of the example of the invention disclosed in this document. Further, when the program is executed on the arithmetic device 31, it may be configured to be displayed on the output device 36 of the terminal device 30 as a system used by the user.

端末装置は、本願書類において、「配信者端末」と「視聴者端末」の２種類の端末装置があってよい。これらは端末の役割に対して付与された名称であってよく、一の端末装置が、視聴者端末であることもあれば、配信者端末であることもあり、また、視聴者端末であると同時に配信者端末であってもよい。配信者端末は、配信されるものにアバターなどのキャラクターとして登場する者である配信者が利用する端末であってよい。他方、視聴者端末は、主に、配信されたものを視聴する者である視聴者が利用する端末であってよい。なお、視聴者も、アバターなどのキャラクターに対してギフトを提供するギフティング行為によって、配信されるものにギフトが登場するような形で、視聴者が配信されるものに一定の影響をあたえてもよい。同様に、視聴者は、音声、コメント、等の形で、配信されるものに、一定の影響を与えてよい。配信されるものは、映像であってもよいし、アニメーションであってもよく、これらの一部に配信者が演じるアバターなどのキャラクターが登場する者であればよい。なお、上述の説明は、本願発明の一実施形態が適用される例にすぎず、かかる前提のないキャラクターが登場する仮想空間においても、本願発明に係る各実施形態は適用されてよい。 In the present document, there may be two types of terminal devices, a "distributor terminal" and a "viewer terminal". These may be names given to the roles of terminals, and one terminal device may be a viewer terminal or a distributor terminal, and may be a viewer terminal and a distributor terminal at the same time. may be a user terminal. The distributor terminal may be a terminal used by a distributor who appears as a character such as an avatar in what is distributed. On the other hand, the viewer terminal may be a terminal primarily used by viewers who watch what is distributed. In addition, viewers can also give a certain amount of influence to what is distributed by giving gifts to characters such as avatars in such a way that gifts appear in what is distributed. good too. Similarly, viewers may influence what is delivered in the form of audio, comments, and the like. What is distributed may be a video or an animation, as long as a character such as an avatar played by the distributor appears in a part of them. The above description is merely an example to which one embodiment of the present invention is applied, and each embodiment of the present invention may be applied even in a virtual space in which characters without such assumptions appear.

視聴者端末は、上述のように、音声の入力、コメントの入力、ギフティングなどが可能に構成されてよい。例えば、視聴者端末は、入力装置３４として、コメントを入力可能であり、テキスト情報たるコメントを取得可能なキーボード、タッチパネル、などを有してよい。また、視聴者端末は、演算装置３４により、一定のコメントを生成する機能を有してもよい。これらの取得されたコメントは、同様に、入出力インタフェイス装置２３を介して、通信網１０へ送信されてよい。 The viewer terminal may be configured to allow voice input, comment input, gifting, etc., as described above. For example, the viewer terminal may have, as the input device 34, a keyboard, a touch panel, or the like that can input comments and obtain comments that are text information. Also, the viewer terminal may have a function of generating a certain comment by means of the computing device 34 . These acquired comments may be similarly transmitted to the communication network 10 via the input/output interface device 23 .

なお、本願発明に係るコメントは、視聴者端末によって入力されるコメント以外に、システムが自動的に生成するものであってよい。かかるコメントは、視聴者端末に向けて送信され、視聴者端末において表示されてよい。 Note that the comments according to the present invention may be those automatically generated by the system in addition to the comments input by the viewer terminal. Such comments may be sent to the viewer terminal and displayed at the viewer terminal.

また、視聴者端末は、入力装置３４として、音を取得可能なマイクを含んでよい。なお、人の音声は、入力装置３４としてのマイクによって取得され、音として扱ってもよいし、入力装置３４としてのマイクによって取得された後、演算装置３１による音声認識によりテキスト化して、コメントとして扱ってもよい。なお、視聴者端末は、演算装置３１によって音を生成してもよい。これらの取得された音又はコメントは、同様に、入出力インタフェイス装置２３を介して、通信網１０へ送信されてよい。 Also, the viewer terminal may include a microphone capable of acquiring sound as the input device 34 . The human voice may be acquired by the microphone as the input device 34 and treated as sound, or after being acquired by the microphone as the input device 34, converted into text by voice recognition by the arithmetic unit 31 and used as a comment. can handle. Note that the viewer terminal may generate sound using the arithmetic unit 31 . These acquired sounds or comments may be similarly transmitted to the communication network 10 via the input/output interface device 23 .

他方、配信者端末は、入力装置３４として、人の動きを検知可能なモーションセンサーを含んでよい。モーションセンサーは、配信者の身体に装着し、身体の各部の動きを検知可能な機能を有してよい。身体の各部としては、頭部、顔面、上腕、前腕、手、大腿、下腿、足、体幹、など種々の箇所が挙げられうるが、これらの一部又は全部に限られず、身体の動きを検出可能な位置に装着できるものであってよい。モーションセンサーは、加速度センサー、ジャイロセンサー、地磁気センサーなどを有してよい。これらの取得された情報は、同様に、入出力インタフェイス装置２３を介して、通信網１０へ送信されてよい。 On the other hand, the distributor terminal may include a motion sensor capable of detecting human movement as the input device 34 . The motion sensor may be attached to the body of the broadcaster and have a function capable of detecting movements of each part of the body. Each part of the body can include various parts such as the head, face, upper arm, forearm, hand, thigh, lower leg, foot, trunk, etc., but not limited to some or all of these, body movement It may be something that can be attached to a detectable position. Motion sensors may include accelerometers, gyro sensors, geomagnetic sensors, and the like. These acquired information may be similarly transmitted to the communication network 10 via the input/output interface device 23 .

また、配信者端末は、入力装置３４として、動画を撮像可能な撮像装置を含んでよい。撮像装置は、配信者の、頭、顔面、目、身体の一部、全身、などを撮像してよい。撮像装置が、頭や顔面を撮像する場合顔の方向を検知することが可能であり、顔面を撮像する場合表情を検知することが可能であり、目を撮像する場合視線を検知することが可能であり、身体の一部又は全身を撮像する場合上述のモーションセンサーと共に又は代えて身体の動きを検知することが可能であってよい。配信者端末は、これらのモーションに係る情報を、モーションセンサー又は動画から生成してよい。また、かかるモーションセンサー又は動画から、顔の回転に係る情報を生成してよい。顔の回転に係る情報は、顔方向を含んでよい。また、配信者端末は、動画から、顔の位置の情報を生成してよい。すなわち、配信者端末は、動画から、モーションに係る情報を生成してよく、かかるモーションに係る情報は、顔の表情に係る情報、及び／又は、顔の位置及び回転に係る情報を含んでよい。また、配信者端末は顔の表情を撮像可能な撮像装置を備えてよく、顔の表情を撮像した配信者端末は、かかる顔の動画画像から、表情を特定する複数に区分された情報の一又は複数を特定する情報を生成してよい。表情を特定する複数の区分は予め定められてよい。また、表情の特定は、眉毛の各位置、目、鼻、唇の輪郭などの顔の一部の動きが、所定の動きである場合に、予め定められた表情の一であると特定されるものであって良い。また、かかる表情を設定する情報は、配信者に対して、パラメータなどがキャリブレーションによって設定されたものを用いて、設定されてよい。また、配信者端末は、これらの撮像情報に基づいた、モーションに係る情報を、入出力インタフェイス装置２３を介して、通信網１０へ送信されてよい。また、配信者端末も、入力装置３４として、音を取得可能なマイクを含んでよく、配信者が演じる際の音声を取得してよい。なお、入力装置３４としてのマイクによって取得された後、演算装置３１による音声認識によりテキスト化して、コメントとして扱ってもよい。なお、配信者端末も、演算装置３１によって音を生成してもよい。これらの取得された音又はコメントは、同様に、入出力インタフェイス装置２３を介して、通信網１０へ送信されてよい。 Also, the distributor terminal may include, as the input device 34, an imaging device capable of capturing moving images. The imaging device may capture an image of the distributor's head, face, eyes, part of the body, the whole body, or the like. The imaging device can detect the direction of the face when imaging the head or face, can detect facial expressions when imaging the face, and can detect the line of sight when imaging the eyes. , and it may be possible to detect body movement in conjunction with or in place of the motion sensors described above when imaging a portion of the body or the entire body. The distributor terminal may generate information related to these motions from motion sensors or moving images. Also, from such a motion sensor or video, information regarding face rotation may be generated. Information related to face rotation may include face orientation. Also, the distributor terminal may generate information on the position of the face from the video. That is, the distributor terminal may generate motion-related information from the video, and the motion-related information may include facial expression information and/or facial position and rotation information. . In addition, the distributor terminal may be equipped with an imaging device capable of capturing facial expressions, and the distributor terminal that has captured the facial expressions may select one of a plurality of pieces of information that identify the facial expressions from the moving image of the face. Alternatively, information identifying a plurality may be generated. A plurality of divisions specifying facial expressions may be determined in advance. In addition, the identification of the facial expression is identified as one of the predetermined facial expressions when the movement of a part of the face such as each position of the eyebrows, the outline of the eyes, nose, and lips is a predetermined movement. It can be anything. Information for setting such facial expressions may be set for the distributor using parameters and the like set by calibration. Also, the distributor terminal may transmit information related to motion based on the image information to the communication network 10 via the input/output interface device 23 . Further, the distributor terminal may also include a microphone capable of acquiring sound as the input device 34, and may acquire the voice when the distributor performs. After being acquired by the microphone as the input device 34, it may be converted into text by speech recognition by the computing device 31 and treated as a comment. Note that the distributor terminal may also generate sound using the arithmetic device 31 . These acquired sounds or comments may be similarly transmitted to the communication network 10 via the input/output interface device 23 .

また、視聴者端末及び配信者端末における出力装置３６は、表示装置、音発生装置であってよい。表示装置は、表示可能な機能であれば種々の装置であってよく、例えば、液晶ディスプレイ、プラズマディスプレイ、有機ＥＬディスプレイ、マイクロＬＥＤディスプレイ、ヘッドマウントディスプレイなどが挙げられるが、これらに限らず種々の装置であってよい。音発生装置は、スピーカー、ヘッドフォン、イヤホンなどであってよい。出力装置３６で出力される情報は、演算装置３１において生成された情報であってもよいし、通信網１０から受信した情報であってもよい。 Also, the output device 36 in the viewer terminal and distributor terminal may be a display device or a sound generator. The display device may be various devices as long as it has a displayable function, and examples thereof include liquid crystal displays, plasma displays, organic EL displays, micro LED displays, head-mounted displays, etc. It can be a device. The sound-producing device may be a speaker, headphones, earphones, or the like. The information output by the output device 36 may be information generated by the arithmetic device 31 or information received from the communication network 10 .

なお、本願書類において、端末装置として、「管理者端末」もあってよく、管理者端末は、視聴者端末の有している機能を有してよい。管理者端末は、管理サーバ又は配信者端末と接続可能であってよい。管理者端末は、システムの運営側として、管理サーバ又は配信者端末から配信された情報についての確認や検討などに用いられてよい。 In the present document, the terminal device may also be an "administrator terminal", and the administrator terminal may have the functions that the viewer terminal has. The administrator terminal may be connectable with the management server or the distributor terminal. The administrator terminal may be used as the operator of the system to check and review information distributed from the management server or the distributor terminal.

３．各装置の機能
次に、本願発明に係るシステムの機能の一例について、図３を参考に、説明する。図３は、図１に示したシステムの機能の一例を模式的に示すブロック図である。図３に示すように、一例のシステムは、第１モードと第２モードとのいずれかの選択された情報を取得する切替部４１と、少なくとも前記取得したモードに対応する情報を送信する送信部４２と、少なくとも前記取得したモードに対応する情報を受信する受信部４３と、前記取得したモードが第２モードである場合にアニメーションを生成する生成部４４と、視聴者に係る情報を用いた統計処理を行う統計処理部４５と、の一部又は全部を有してよい。例えば、配信者端末は、第１モードと第２モードとのいずれかの選択された情報を取得する切替部４１と、少なくとも前記取得したモードに対応する情報を送信する送信部４２と、統計処理を行う統計処理部４５と、の一部又は全部を有してよい。また、管理サーバは、第１モードと第２モードとのいずれかの選択された情報を取得する切替部４１と、少なくとも前記取得したモードに対応する情報を送信する送信部４２と、統計処理を行う統計処理部４５と、の一部又は全部を有してよい。また、管理サーバは、配信者端末から送信された情報を受信する受信部４３を有してよい。また、管理者端末又は視聴者端末は、第１モードと第２モードとのいずれかの選択された情報を取得する切替部４１と、少なくとも前記取得したモードに対応する情報を受信する受信部４３と、前記取得したモードが第２モードである場合にアニメーションを生成する生成部４４と、統計処理を行う統計処理部４５と、の一部又は全部を有してよい。 3. Functions of Each Apparatus Next, an example of functions of the system according to the present invention will be described with reference to FIG. FIG. 3 is a block diagram schematically showing an example of functions of the system shown in FIG. As shown in FIG. 3, an example system includes a switching unit 41 that acquires information selected from either a first mode or a second mode, and a transmission unit that transmits at least information corresponding to the acquired mode. 42, a receiving unit 43 that receives at least information corresponding to the acquired mode, a generating unit 44 that generates animation when the acquired mode is the second mode, and statistics using information related to viewers It may have a part or all of the statistical processing unit 45 that performs the processing. For example, the distributor terminal includes a switching unit 41 that acquires information selected from one of the first mode and the second mode, a transmission unit 42 that transmits at least information corresponding to the acquired mode, and statistical processing. It may have a part or all of the statistical processing unit 45 that performs In addition, the management server includes a switching unit 41 that acquires information selected from either the first mode or the second mode, a transmission unit 42 that transmits at least information corresponding to the acquired mode, and statistical processing. It may have a part or all of the statistical processing unit 45 that performs Also, the management server may have a receiving unit 43 that receives information transmitted from the distributor terminal. In addition, the administrator terminal or the viewer terminal includes a switching unit 41 that acquires information selected from either the first mode or the second mode, and a receiving unit 43 that receives at least information corresponding to the acquired mode. , a generating unit 44 that generates an animation when the obtained mode is the second mode, and a statistical processing unit 45 that performs statistical processing.

２．１．切替部４１
切替部４１は、視聴者端末への配信のモードの変更を管理する機能を有する。切替部４１は、第１のモードと、第２のモードと、第３のモードと、第４のモードと、を切り替える機能を有してよい。ここで、第１のモードは、配信者が仮想空間内でアバターオブジェクトを用いて同時間帯に演じている状態の映像についてのモードである。第２のモードは、配信者が仮想空間内でアバターオブジェクトを用いて同時間帯に演じている状態のアニメーションが表示画面を有する端末装置内で生成されるモードである。この場合、アニメーションの生成に必要な情報が、端末装置に送信され、端末装置内でアニメーションが生成されるモードとなる。なお、第１のモード及び第２のモードにおける同時間帯は、配信者の演じている時間帯と視聴者が視聴する時間帯が同じ又は極めて近い時間帯を意味し、後者は、映像やアニメーションの生成や配信の遅延時間程度のタイムラグがある場合も含んでよい。かかる同時間帯との用語について、本願書類においては、リアルタイム、ということもある。第３のモードは、配信者が仮想空間内でアバターオブジェクトを用いて過去に演じた状態の映像についてのモードである。第３のモードは第１のモードと異なり、過去に演じたものであり、過去に第１のモードによって配信されたものであってよいが、ギフト、音、コメント等の視聴者が視聴することによって追加される演出が異なるものであってもよい。なお、このように視聴者が視聴することによって追加される演出が異なるものも、本願書類においては、過去に配信された映像、ということもある。第４のモードは、配信者が仮想空間内でアバターオブジェクトを用いて過去に演じた状態のアニメーションが表示画面を有する端末装置内で生成されるモードである。この場合、アニメーションの生成に必要な情報が、端末装置に送信され、端末装置内でアニメーションが生成されるモードとなる。第４のモードは第２のモードと異なり、過去に演じたものであり、過去に第２のモードによって配信されたものであってよいが、ギフト、音、コメント等の視聴者が視聴することによって追加される演出が異なるものであってもよい。なお、このように視聴者が視聴することによって追加される演出が異なるものも、本願書類においては、過去に配信されたアニメーションの生成に必要な情報、過去に表示されたアニメーション、ということもある。第１乃至第４のモードの切り替えが可能とされることにより、視聴に関連する状況に応じて、より適切な選択が可能となる利点がある。特に、第２及び第４のモードは、後述するとおり、視聴者端末においてアニメーションを生成することになることから、処理の分散が可能となる利点がある。なお、本願書類において、配信者端末に係るアバターオブジェクトとかかるアバターオブジェクトの動きを表現可能なモーションに係る情報とを合成することによって視聴者端末において生成されるアニメーションを、単に「アニメーション」ということもある。他方、かかるアバターオブジェクトを用いた映像を、単に「映像」ということもある。また、このようなアニメーション又は映像の上位概念として「番組」ということがある。なお、上述のとおり、「アニメーション」は、アバターがオブジェクトに基づいて生成されるものであるため、背景が単なる静止画であってもよいし、映画のような予め定められた動画であってもよいし、人がリアルタイム又は過去に関与して作成されたゲーム動画のようなものであってもよい。また、番組は、過去に配信されたアニメーションや映像を含んでもよいし、配信者が同時間帯に演じて配信されているアニメーションや映像を含んでもよい。また、切替部４１は他のモードを選択できる機能を有してよい。 2.1. Switching unit 41
The switching unit 41 has a function of managing changes in the mode of distribution to the viewer terminals. The switching unit 41 may have a function of switching between a first mode, a second mode, a third mode, and a fourth mode. Here, the first mode is a mode for images in which the distributor is performing in the same time zone using an avatar object in the virtual space. The second mode is a mode in which an animation in which the broadcaster performs in the virtual space using an avatar object at the same time is generated in a terminal device having a display screen. In this case, information necessary for animation generation is transmitted to the terminal device, and animation is generated within the terminal device. The same time period in the first mode and the second mode means that the time period in which the broadcaster is performing and the time period in which the viewer is watching are the same or very close, and the latter means that the video or animation It may include the case where there is a time lag such as the delay time of the generation or distribution of The term "same time zone" is sometimes referred to as "real time" in the documents of the present application. A third mode is a mode for images of a state in which the broadcaster performed in the past using an avatar object in the virtual space. The third mode differs from the first mode in that it may have been performed in the past and delivered in the past by the first mode, but it is possible for the viewer to view and listen to gifts, sounds, comments, etc. The effect added by may be different. It should be noted that, in the present document, videos with different effects that are added depending on how viewers view them may also be referred to as videos distributed in the past. A fourth mode is a mode in which an animation performed in the past by the distributor using an avatar object in the virtual space is generated in a terminal device having a display screen. In this case, information necessary for animation generation is transmitted to the terminal device, and animation is generated within the terminal device. Unlike the second mode, the fourth mode may be performed in the past and distributed by the second mode in the past, but there are things such as gifts, sounds, comments, etc. that the viewer can see and hear. The effect added by may be different. In addition, in this document, the addition of different effects depending on the viewing by the viewer may also be referred to as information necessary for generating animations distributed in the past and animations displayed in the past. . By being able to switch between the first to fourth modes, there is an advantage that a more appropriate selection can be made according to the situation related to viewing. In particular, as will be described later, the second and fourth modes have the advantage of being able to distribute processing because animation is generated at the viewer terminal. In addition, in this document, the animation generated on the viewer terminal by synthesizing the avatar object related to the distributor terminal and the information related to the motion that can express the movement of the avatar object may be simply referred to as "animation". be. On the other hand, a video using such an avatar object is sometimes simply called a "video." A "program" is sometimes used as a superordinate concept of such animation or video. In addition, as described above, "animation" means that an avatar is generated based on an object. Alternatively, it may be something like a game video created with human involvement in real time or in the past. In addition, the program may include animations and videos that have been distributed in the past, and may include animations and videos that have been performed and distributed by the distributor in the same time slot. Also, the switching unit 41 may have a function of selecting another mode.

切替部４１は、選択された、第１乃至第４のモードの情報を取得する機能を有してよい。切替部４１は、第１のモードが選択された場合は、配信者が演じている時間帯と同時間帯に、映像を送信するよう設定、又は、映像を受信して映像を表示するよう設定、してよい。切替部４１は、第２のモードが選択された場合は、配信者が演じている時間帯と同時間帯に、アニメーションの生成に必要な情報を生成、又は、かかるアニメーションの生成に必要な情報を受信してかかるアニメーションの生成に必要な情報からアニメーションを生成し表示してよい。切替部４１は、第３のモードが選択された場合は、過去に配信された、映像を送信するよう設定、又は、映像を受信して映像を表示するよう設定、してよい。切替部４１は、第４のモードが選択された場合は、過去に配信された、アニメーションの生成に必要な情報を送信、又は、過去に配信されたアニメーションの生成に必要な情報を受信してかかるアニメーションの生成に必要な情報から過去に表示されたアニメーションを生成し表示してよい。 The switching unit 41 may have a function of acquiring information on the selected first to fourth modes. When the first mode is selected, the switching unit 41 is set to transmit the video or receive the video and display the video in the same time slot as the broadcaster is performing. , you may When the second mode is selected, the switching unit 41 generates the information necessary for generating the animation in the same time period as the time period during which the distributor performs, or changes the information necessary for generating the animation. may be received and an animation may be generated and displayed from the information necessary to generate such animation. When the third mode is selected, the switching unit 41 may be set to transmit the image distributed in the past, or set to receive the image and display the image. When the fourth mode is selected, the switching unit 41 transmits previously distributed information necessary for animation generation, or receives previously distributed information necessary for animation generation. Animations displayed in the past may be generated and displayed from the information necessary for generating such animations.

切替部４１は、第１乃至第４のモードの情報を、視聴者端末から取得してもよいし、配信者端末から取得してもよいし、かかる配信を管理するサーバ等から取得してもよい。また、第１乃至第４のモードの情報を、切替部４１が備わっている情報処理装置と同じ情報処理装置から取得してもよいし、切替部４１が備わっている情報処理装置と異なる情報処理装置から取得してもよい。なお、第１乃至第４のモードの選択の情報は、視聴者端末においては視聴者の選択によって取得してもよいし、配信者端末においては配信者の選択によって取得してもよいし、管理サーバにおいては管理者の選択によって取得してもよい。 The switching unit 41 may acquire information on the first to fourth modes from the viewer terminal, from the distributor terminal, or from a server or the like that manages such distribution. good. Information on the first to fourth modes may be acquired from the same information processing device as the information processing device provided with the switching unit 41, or may be obtained from an information processing device different from the information processing device provided with the switching unit 41. may be obtained from the device. The information on the selection of the first to fourth modes may be acquired by the viewer's selection at the viewer terminal, or may be acquired by the distributor's selection at the distributor's terminal. In the server, it may be obtained by the administrator's selection.

特に、切替部４１は、第３のモードと第４のモードは、いずれも過去に配信されたものであるため、切り替える旨の情報を取得することにより、互いに切り替えてよい。具体的には、第３のモードにおいて過去に配信された映像を送信、又は、過去に配信された映像を受信、している段階において、それぞれ、過去に配信された映像に対応するアニメーションの生成に必要な情報の送信、過去に配信された映像に対応するアニメーションの生成に必要な情報の受信、である第４のモードへの切り替えの情報を取得してよい。同様に、第４のモードにおいて、過去に配信されたアニメーションの生成に必要な情報の送信、又はかかる情報の受信、をしている段階において、それぞれ、過去に配信されたアニメーションに対応する映像の送信、過去に配信されたアニメーションに対応する映像の受信、である第３のモードへの切り替えの情報を取得してよい。すなわち、本願発明の一実施形態は、第１アニメーションの生成に必要な情報として、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、過去に配信された、音と、前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、を受信し、前記第１アニメーションの生成に必要な情報を用いて、第１アニメーションを生成し、前記第１アニメーションを表示する、ことを特徴とするコンピュータプログラムであって、前記第１アニメーションに対応する映像に切り替える旨の情報を取得し、前記映像を受信し、前記映像を表示する、ことを特徴とするコンピュータプログラムであってよい。 In particular, the switching unit 41 may switch between the third mode and the fourth mode by acquiring information to the effect that the switching between the third mode and the fourth mode was performed in the past. Specifically, at the stage of transmitting the video delivered in the past or receiving the video delivered in the past in the third mode, the animation corresponding to the video delivered in the past is generated respectively. Information necessary for switching to a fourth mode, which is transmission of information necessary for transmission and reception of information necessary for generating an animation corresponding to a previously distributed video, may be acquired. Similarly, in the fourth mode, at the stage of transmitting information necessary for generating the animation distributed in the past or receiving such information, respectively, the video corresponding to the animation distributed in the past Information on switching to a third mode of transmitting and receiving video corresponding to previously delivered animations may be obtained. That is, in one embodiment of the present invention, the motion of the avatar object can be expressed by synthesizing the information necessary for generating the first animation with the information related to the avatar object related to the distributor terminal. Distributed information related to motion, information related to the first gift distributed in the past, which is given from a viewer terminal viewing animation expressing the movement of the avatar object, and distributed in the past, receiving a sound and information relating to a second gift different from the information relating to the first gift, generating a first animation using the information necessary for generating the first animation, and generating the first animation; a computer program characterized by: acquiring information indicating switching to a video corresponding to the first animation, receiving the video, and displaying the video It can be a program.

また、切替部４１は、過去に配信されたものである第３のモード又は第４のモードから、配信者が現在演じているものである第１のモード又は第２のモードにも、切り替えられてよい。すなわち、本願発明の一実施形態は、第１アニメーションの生成に必要な情報として、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、過去に配信された、音と、前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、を受信し、前記第１アニメーションの生成に必要な情報を用いて、第１アニメーションを生成し、前記第１アニメーションを表示する、ことを特徴とするコンピュータプログラムであって、リアルタイムに配信されている映像に係る第２アニメーションの生成に必要な情報を受信し、前記第２アニメーションの生成に必要な情報を用いて、第２アニメーションを生成し、前記第２アニメーションを表示する、コンピュータプログラムであってよい。この場合、視聴者は、過去の番組の視聴に加えて、現在配信中の番組の視聴へも簡易に切り替えて視聴を楽しめる利点がある。また、前記第２アニメーションの生成に必要な情報は、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、モーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、第３ギフトに係る情報と、音と、を含むものであってよい。 In addition, the switching unit 41 switches from the third mode or the fourth mode that was distributed in the past to the first mode or the second mode that is currently performed by the distributor. you can That is, in one embodiment of the present invention, the motion of the avatar object can be expressed by synthesizing the information necessary for generating the first animation with the information related to the avatar object related to the distributor terminal. Distributed information related to motion, information related to the first gift distributed in the past, which is given from a viewer terminal viewing animation expressing the movement of the avatar object, and distributed in the past, receiving a sound and information relating to a second gift different from the information relating to the first gift, generating a first animation using the information necessary for generating the first animation, and generating the first animation; receiving information necessary for generating a second animation related to video being distributed in real time, and using the information necessary for generating the second animation , generating a second animation and displaying said second animation. In this case, the viewer has the advantage of being able to enjoy viewing by simply switching to viewing the currently distributed program in addition to viewing the past program. Further, the information necessary for generating the second animation is combined with information related to the avatar object related to the distributor terminal, and information related to motion capable of expressing the movement of the avatar object, and the avatar object. It may include information and sound relating to the third gift given from the viewer terminal viewing the animation expressing the movement of the player.

なお、過去に配信されて表示されたアニメーションである第４モード、又は、かかる過去に配信されて表示されたアニメーションに対応する映像である第３モード、の切り替えは、マニュアルで切替てもよいし、自動的に切替てもよい。マニュアルにおける切替の情報は、視聴者端末、配信者端末、管理サーバ、において入力されてよい。他方、自動的な切替は、視聴者端末の数、視聴者端末の機能の程度、視聴者端末との間のレイテンシ、などに応じてよい。視聴者端末の機能の程度は、視聴者端末のＣＰＵの機能、視聴者端末のメモリの機能、又は、視聴者端末上で実行されているアプリケーションの数や負担の程度、等の情報を含んでよい。なお、過去の配信の場合、リアルタイムの配信と異なり、同期するデータとして新たに発生する情報は、ギフトに係る情報やコメントなどにとどまる。また、過去の配信を同時に配信されている可能性は、配信自体がリアルタイムで行われている場合に比べて可能性は少ない。そのため、同期する必要のある情報として、新たに発生する情報は、リアルタイムの配信よりも、一般的に少ない。そのため、後述するように、アニメーションの生成に必要な情報を、複数のサーバ上に、記憶させることにより、第4モードは、リアルタイムでの配信と比較して、多数の視聴者端末に対し、過去に配信されたアニメーションの生成に必要な情報を配信できる利点がある。また、第４モードにおける配信は、アニメーションの生成に必要な情報の配信であり、かかる情報量は、かかるアニメーションの生成に必要な情報に対応する映像の情報量と比較して、少ないことから、記憶容量を少なくできる利点がある。更に、第４モードにおける配信は、第３モードにおける映像の配信と比較し、通信される情報量も少なくできる利点がある。なお、切替部４１において、第３モードと第４モードと、を切替可能であることにより、よりよいモードを選択できる利点がある。 Note that the switching between the fourth mode, which is the animation distributed and displayed in the past, and the third mode, which is the video corresponding to the animation distributed and displayed in the past, may be switched manually. , may be switched automatically. Manual switching information may be input in the viewer terminal, the distributor terminal, and the management server. On the other hand, automatic switching may depend on the number of viewer terminals, the degree of functionality of the viewer terminals, the latency with respect to the viewer terminals, and the like. The degree of function of the viewer terminal includes information such as the CPU function of the viewer terminal, the memory function of the viewer terminal, or the number of applications running on the viewer terminal and the degree of load. good. In the case of past distribution, unlike real-time distribution, information newly generated as data to be synchronized is limited to information related to gifts, comments, and the like. Also, the possibility that past deliveries are being delivered at the same time is less likely than the case where the delivery itself is performed in real time. As such, there is generally less emerging information than real-time delivery as information that needs to be synchronized. Therefore, as will be described later, by storing the information necessary for animation generation on multiple servers, the fourth mode can be used for a large number of viewer terminals compared to real-time distribution. It has the advantage of being able to deliver the information necessary to generate the animation delivered to the . In addition, the distribution in the fourth mode is the distribution of information necessary for animation generation, and the amount of information is small compared to the amount of video information corresponding to the information necessary for animation generation. There is an advantage that the storage capacity can be reduced. Furthermore, distribution in the fourth mode has the advantage of being able to reduce the amount of information to be communicated compared to video distribution in the third mode. In addition, since the switching unit 41 can switch between the third mode and the fourth mode, there is an advantage that a better mode can be selected.

また、切替部４１は、配信者端末において機能してもよいし、管理サーバにおいて機能してもよいし、視聴者端末において機能してもよい。配信者端末又は管理サーバにおける切替部４１によって、通信の状況や、視聴者端末の状況に応じて、第１のモード又は第２のモードの選択や両方のモードによる映像とアニメーションの送信を、選択できる利点がある。例えば、視聴者端末においてアニメーションの生成の処理負担が大きい場合には、第１のモードを選択して映像の送信を行うよう処理可能である。 Also, the switching unit 41 may function in the distributor terminal, may function in the management server, or may function in the viewer terminal. The switching unit 41 in the distributor terminal or the management server selects the first mode or the second mode, or selects the transmission of video and animation in both modes according to the communication situation and the situation of the viewer terminal. There are advantages to be had. For example, when the viewer terminal has a large processing load for animation generation, it is possible to select the first mode and transmit the video.

２．２．送信部４２
送信部４２は、映像の送信、又は、アニメーションの生成に必要な情報、を送信する機能を有する。送信の態様は、種々のものであってよく、その手法に制約はない。例えば、自発的に情報を送信してもよいし、一の情報の受信に対応する形式で受動的に他の情報を送信してもよい。また、他の情報処理装置からのアクセスに対応して情報を送信する態様であってもよい。なお、本願書類において、アニメーションの生成に必要な情報や映像について、情報処理装置間で情報が伝達されることを、配信ということもあれば、送信ということもある。 2.2. Transmitter 42
The transmission unit 42 has a function of transmitting video or information necessary for generating animation. Various modes of transmission may be used, and there are no restrictions on the method. For example, it may voluntarily transmit information, or it may passively transmit other information in a format corresponding to the receipt of one piece of information. Alternatively, information may be transmitted in response to access from another information processing apparatus. It should be noted that, in the present document, transmission of information between information processing apparatuses with respect to information and video necessary for generating an animation may be referred to as "distribution" or "transmission".

送信部４２は、第１乃至第４のモードの選択に応じて、対応する情報を送信してよい。すなわち、送信部４２は、切替部４１が第１のモードを取得した場合は、リアルタイムの映像の送信を行い、切替部４１が第２のモードを取得した場合は、リアルタイムにアニメーションの生成に必要な情報の送信を行い、切替部４１が第３のモードを取得した場合は、過去に配信した映像の送信を行い、切替部４１が第４のモードを取得した場合は、過去に配信したアニメーションの生成に必要な情報の送信を行ってよい。 The transmitter 42 may transmit corresponding information according to the selection of the first to fourth modes. That is, when the switching unit 41 acquires the first mode, the transmitting unit 42 transmits the video in real time, and when the switching unit 41 acquires the second mode, the transmission unit 42 transmits the video in real time. When the switching unit 41 acquires the third mode, the video transmitted in the past is transmitted, and when the switching unit 41 acquires the fourth mode, the animation distributed in the past is transmitted. You may send the information necessary for the generation of

第１のモードの場合、送信部４２は、配信者端末が取得した情報に基づいて、映像の送信をしてよい。映像は、配信者端末において、配信者がアバターとして登場したもの、に基づいて生成されてよい。かかる映像は、一又は複数の配信者端末における配信者の挙動に基づいて、生成された映像であってよい。かかる映像は、一又は複数の配信者端末における各配信者端末から取得された情報に基づいて、管理サーバなどにおいて生成されたものでもよいし、一又は複数の配信者端末における各配信者端末において生成された映像に基づいて、管理サーバなどにおいて合成されて生成された映像でもよい。なお、送信部４２は、かかる送信した映像を記憶してよい。かかる記憶された映像を再度送信することにより、リアルタイムに当初配信した映像の再配信を可能にできる利点がある。また、送信部４２は、かかる送信した映像と関連付けて、かかる映像の視聴者に係る情報を記憶してよい。例えば、映像の視聴者に係る情報は、配信時における視聴者数、配信時に提供されたギフト数、及び／又は、配信時に行われたコメント数、を含んでよい。かかる情報が記憶されることにより、当初配信された映像における、視聴者数、ギフト数、又は、コメント数といった視聴者の反応を映像と併せて記憶できる利点がある。また、かかる視聴者に係る情報は、対応する情報が検知された時間的な情報が関連付けられて含まれてよい。時間的な情報は、映像の開始時点からの経過時間であってもよいし映像の時刻情報であってもよい。かかる情報が記憶されることにより、上述の視聴者の反応が、経時的要素を含む映像におけるどの時点の情報であるかを記憶できる利点がある。図４は、視聴者に係る情報の記憶されたデータの一例である。 In the first mode, the transmission unit 42 may transmit video based on information acquired by the distributor terminal. The video may be generated based on the appearance of the distributor as an avatar on the distributor terminal. Such videos may be videos generated based on the behavior of the distributor at one or more distributor terminals. Such video may be generated in a management server or the like based on information acquired from each distributor terminal in one or more distributor terminals, or may be generated in each distributor terminal in one or more distributor terminals A video synthesized and generated in a management server or the like based on the generated video may also be used. Note that the transmission unit 42 may store such transmitted video. By retransmitting such stored video, there is an advantage that the video that was originally distributed can be redistributed in real time. In addition, the transmitting unit 42 may store information about viewers of the video in association with the transmitted video. For example, information about viewers of a video may include the number of viewers at the time of distribution, the number of gifts given at the time of distribution, and/or the number of comments made at the time of distribution. By storing such information, there is an advantage that viewer reactions such as the number of viewers, the number of gifts, or the number of comments to the originally distributed video can be stored together with the video. Also, such viewer-related information may be included in association with information about the time at which the corresponding information was detected. The temporal information may be the elapsed time from the start of the video or the time information of the video. By storing such information, there is an advantage that it is possible to store the information at which point in the video including the chronological element the reaction of the viewer is. FIG. 4 is an example of stored data of information related to viewers.

第２のモードの場合、送信部４２は、配信者端末が取得した情報に基づいて、アニメーションの生成に必要な情報を、送信してよい。アニメーションの生成に必要な情報は、少なくとも、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能なモーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与されるギフトに係る情報と、及び、音と、を含んでよい。なお、送信部４２は、かかる送信したアニメーションの生成に必要な情報を記憶してよい。かかる送信されて記憶されたアニメーションの生成に必要な情報を、「アーカイブ」ということもあり、また、かかる記憶されたアニメーションの生成に必要な情報を用いて生成されたアニメーションを、「アーカイブされたアニメーション」ということもある。かかる記憶されたアニメーションの生成に必要な情報を再度送信することにより、リアルタイムに当初表示されたアニメーションの再表示を可能にできる利点がある。また、送信部４２は、かかる送信したアニメーションの生成に必要な情報と関連付けて、当初配信時及び／又は再配信時にアニメーションに対してされたアニメーションの視聴者に係る情報を記憶してよい。例えば、アニメーションの視聴者に係る情報は、配信時における視聴者数、配信時に提供されたギフト数、及び／又は、配信時に行われたコメント数、を含んでよい。かかる情報が記憶されることにより、当初配信及び／又は再配信されたアニメーションにおける、視聴者数、ギフト数、又は、コメント数といった視聴者の反応を記憶できる利点がある。また、かかる視聴者に係る情報は、対応する情報が検知された時間的な情報が関連付けられて含まれてよい。時間的な情報は、映像の開始時点からの経過時間であってもよいし映像の時刻情報であってもよい。かかる情報が記憶されることにより、上述の視聴者の反応が、経時的要素を含む映像におけるどの時点の情報であるかを記憶できる利点がある。第２のモードにおけるアーカイブされたアニメーションの視聴者に係る情報についての記憶されたデータの一例は、図４であってよい。 In the case of the second mode, the transmission unit 42 may transmit information necessary for animation generation based on information acquired by the distributor terminal. The information necessary for animation generation includes at least motion information capable of expressing the movement of the avatar object and the movement of the avatar object by being combined with information concerning the avatar object associated with the distributor terminal. It may include information about a gift given from a viewer terminal that watches the animation, and sound. The transmitting unit 42 may store information necessary for generating the transmitted animation. The information necessary for generating such transmitted and stored animation may be referred to as an "archive", and the animation generated using the information necessary for generating such stored animation may be referred to as an "archived Also known as "animation". By retransmitting the information necessary for generating the stored animation, there is an advantage that the animation originally displayed can be redisplayed in real time. In addition, the transmitting unit 42 may store information related to viewers of the animation that was given to the animation at the time of initial distribution and/or redistribution, in association with the transmitted information necessary for generating the animation. For example, information about viewers of an animation may include the number of viewers at the time of distribution, the number of gifts given at the time of distribution, and/or the number of comments made at the time of distribution. By storing such information, there is an advantage that viewer reactions such as the number of viewers, the number of gifts, or the number of comments to the originally distributed and/or redistributed animation can be stored. Also, such viewer-related information may be included in association with information about the time at which the corresponding information was detected. The temporal information may be the elapsed time from the start of the video or the time information of the video. By storing such information, there is an advantage that it is possible to store the information at which point in the video including the chronological element the reaction of the viewer is. An example of stored data for viewer information of archived animations in the second mode may be FIG.

第３のモードの場合、送信部４２は、第１のモードにおいて送信した映像の送信をしてよい。また、送信部は、４２は、これに代えて、第４のモードにおいて送信されるアニメーションの生成に必要な情報に基づいて生成されたアニメーションに対応する映像を、送信してよい。この場合、かかるアニメーションに対応する映像は、後述の第２のギフトに係る情報を用いて生成され、かかる第２ギフトの表示を含む映像であってよい。また、送信部４２は、映像の送信と同時に、又は、映像の送信と異なる時間帯に、映像と関連付けられている視聴者に係る情報又はかかる視聴者に係る情報に基づく統計情報を、送信してよい。かかる映像と関連付けられている視聴者に係る情報に基づく統計情報は、所定期間内における、視聴者に係る情報についての、視聴者数、ギフト数、及び／又は、コメント数、の合計数を含んでよい。また、統計情報は、かかる視聴者数、ギフト数、及び／又は、コメント数が所定の数以上に限定されてもよいし、かかる限定をするための所定の数を含んでもよい。第３のモードにおいて、映像と関連付けられている視聴者に係る情報についての送信されるデータの一例は、図４であってよい。 In the case of the third mode, the transmission section 42 may transmit the video transmitted in the first mode. Alternatively, the transmission unit 42 may transmit video corresponding to the animation generated based on the information necessary for generating the animation transmitted in the fourth mode. In this case, the video corresponding to the animation may be a video generated using information relating to the second gift, which will be described later, and including the display of the second gift. In addition, the transmission unit 42 transmits the information related to the viewer associated with the video or the statistical information based on the information related to the viewer at the same time as the transmission of the video or in a time period different from the transmission of the video. you can Statistical information based on information related to viewers associated with such video includes the total number of viewers, the number of gifts, and/or the number of comments regarding the information related to viewers within a predetermined period OK. Also, the statistical information may limit the number of viewers, the number of gifts, and/or the number of comments to a predetermined number or more, or may include a predetermined number for such limitation. An example of transmitted data for viewer information associated with a video in the third mode may be FIG.

第４のモードの場合、送信部４２は、第２のモードにおいて送信したアニメーションの生成に必要な情報を送信してよい。また、送信部４２は、アニメーションの生成に必要な情報の送信と同時に、又は、それと異なる時間帯に、かかるアニメーションの生成に必要な情報と関連付けられている視聴者に係る情報又はかかる視聴者に係る情報に基づく統計情報を、送信してよい。かかるアニメーションの生成に必要な情報と関連付けられている視聴者に係る情報に基づく統計情報は、所定期間内における、視聴者に係る情報についての、視聴者数、ギフト数、及び／又は、コメント数、の合計数を含んでよい。また、統計情報は、かかる視聴者数、ギフト数、及び／又は、コメント数が所定の数以上に限定されてもよいし、かかる限定するための所定の数を含んでもよい。第４のモードにおいて、アニメーションと関連付けられている視聴者に係る情報についての送信されるデータの一例は、図４であってよい。 In the case of the fourth mode, the transmission section 42 may transmit the information necessary for generating the animation transmitted in the second mode. In addition, the transmission unit 42, at the same time as the transmission of the information necessary for generating the animation or at a different time period, transmits information related to the viewer associated with the information necessary for generating the animation, or to the viewer. Statistical information based on such information may be transmitted. Statistical information based on information related to viewers associated with information necessary for generating such animations is the number of viewers, the number of gifts, and/or the number of comments on the information related to viewers within a predetermined period. , may include the total number of In addition, the statistical information may limit the number of viewers, the number of gifts, and/or the number of comments to a predetermined number or more, or may include a predetermined number for such limitation. In the fourth mode, an example of transmitted data for viewer information associated with an animation may be FIG.

また、第４のモードの場合、送信部４２は、当初表示されたアニメーション又は当初表示されたアニメーション以降に表示されたアニメーションに対して付与されたギフトに係る情報（「第２ギフトに係る情報」ということもある）を、アニメーションの生成に必要な情報の一つとして、送信してよい。なお、配信者がアバターオブジェクトを利用して、リアルタイムに、当初生成されたアニメーションに対して付与されたギフトについてのギフトに係る情報を、本出願書類においては、「第１ギフトに係る情報」ということがある。これに対し、第２ギフトに係る情報における第２ギフトは、上述の定義に従うものであることから、過去に当初配信された第１アニメーション内に表示された第１ギフトと異なり、かつ、前記第１アニメーションの配信に対して新たに付与されたギフトである。このように、第４モードにおいては、第２ギフトに係る情報を、アニメーションの生成に必要な情報として送信することにより、リアルタイムの当初のアニメーションの後に付与されたギフトの情報もアニメーションの生成に使用され、生成されたアニメーションにおいて表示されることになり、アーカイブの送信に対するギフトの提供を行うインセンティブを与える利点がある。なお、上述の「アーカイブ」は、第２ギフトに係る情報を含んでもよく、「アーカイブされたアニメーション」は第２ギフトに係る情報に基づく第２ギフトの表示を含んでよい。また、第２ギフトに係る情報が入力される情報処理装置は種々のものであってよく、視聴者端末として、アニメーションが表示される情報処理装置と同じ視聴者端末であってもよいし、異なる視聴者端末であってもよい。すなわち、前記第２ギフトに係る情報は、前記第１アニメーションを表示する端末装置から入力されたギフトに基づく情報を含む、ものであってよい。すなわち、視聴者が、アーカイブされたアニメーションを視聴している状態において、ギフトを提供すると、そのギフトが、第２ギフトとして、視聴しているアーカイブされたアニメーションに表示されることになる。また、前記第２ギフトに係る情報は、前記第１アニメーションを表示する端末装置とは異なる端末装置から入力されたギフトに基づく情報を含む、ものでよい。この場合、例えば、第１視聴者が、アーカイブされたアニメーションを視聴している状態で、ギフトを提供するとする。このギフトは、第１視聴者が視聴するアニメーションにおいては、第２ギフトとして、表示される。その後、第２視聴者が、アーカイブされたアニメーションを視聴すると、第１視聴者が提供したギフトが、第２ギフトとして、表示される。このように、アーカイブされたアニメーションに対して第三者が提供したギフトも、アーカイブされたアニメーションの一部として、表示されるようになってよい。 Further, in the case of the fourth mode, the transmitting unit 42 transmits information ("second gift information") related to the gift given to the initially displayed animation or the animation displayed after the initially displayed animation. ) may be transmitted as one of the information necessary for animation generation. In addition, in the present application documents, the information about the gift given to the animation initially generated by the distributor using the avatar object in real time is referred to as "information about the first gift". Sometimes. On the other hand, since the second gift in the information relating to the second gift complies with the above definition, it is different from the first gift displayed in the first animation that was originally distributed in the past, and It is a gift newly given for distribution of 1 animation. Thus, in the fourth mode, by transmitting the information about the second gift as the information necessary for generating the animation, the information about the gift given after the original real-time animation is also used for generating the animation. and will be displayed in the generated animation, which has the advantage of incentivizing gift giving for sending archives. Note that the above-mentioned "archive" may include information about the second gift, and "archived animation" may include the display of the second gift based on the information about the second gift. Further, the information processing device to which the information related to the second gift is input may be of various kinds, and the viewer terminal may be the same viewer terminal as the information processing device on which the animation is displayed, or may be different. It may be a viewer terminal. That is, the information related to the second gift may include information based on the gift input from the terminal device displaying the first animation. That is, when the viewer provides a gift while viewing the archived animation, the gift is displayed as the second gift in the archived animation being viewed. Further, the information related to the second gift may include information based on the gift input from a terminal device different from the terminal device displaying the first animation. In this case, for example, the first viewer may offer the gift while watching the archived animation. This gift is displayed as the second gift in the animation viewed by the first viewer. Subsequently, when the second viewer views the archived animation, the gift provided by the first viewer is displayed as the second gift. In this way, gifts provided by third parties to archived animations may also become displayed as part of archived animations.

なお、送信部４２は、アーカイブされたアニメーションに対して提供されたギフトに係る情報を、視聴者端末から、受信し、記憶してよい。かかる記憶により、アーカイブされたアニメーションについてのアニメーションの生成に必要な情報を送信する際、ギフトに係る情報を、第２ギフトに係る情報として、アニメーションの生成に必要な情報の一として、送信できる。また、かかるギフトに係る情報は、アーカイブされたアニメーションにおいて提供された時間の情報と関連付けて、記憶されてよい。時間の情報は、アーカイブされたアニメーションの開始時間からの経過時間などであってよい。かかる時間の情報と関連付けられることにより、アーカイブされたアニメーションについてのアニメーションの生成に必要な情報を送信する際、対応する時間におけるギフトとして、送信し、付与されたギフトの時間に合わせて、アニメーション内でギフトを表示できる利点がある。 Note that the transmission unit 42 may receive and store information related to a gift provided for an archived animation from the viewer terminal. With such storage, when transmitting the information necessary for generating the animation of the archived animation, the information related to the gift can be transmitted as the information related to the second gift, as one of the information necessary for generating the animation. Also, such gift information may be stored in association with the time information provided in the archived animation. The time information may be the elapsed time from the start time of the archived animation. By being associated with such time information, when sending information necessary for generating an animation about an archived animation, it is sent as a gift at the corresponding time, and is sent within the animation according to the time of the given gift You have the advantage of being able to display your gift at

なお、上述のとおり、本願書類においては、第２のモードにおけるリアルタイムのアニメーションの送信と、第４のモードにおける過去に配信されたアニメーション（の生成に必要な情報）の再送信とを扱うため、リアルタイムのアニメーションの生成におけるギフトに係る情報は、「第３ギフトに係る情報」として区別することがある。 As mentioned above, in this document, in order to handle transmission of real-time animation in the second mode and retransmission of animation (information necessary for generation) delivered in the past in the fourth mode, Information related to gifts in real-time animation generation may be distinguished as "information related to third gifts".

なお、第１ギフトに係る情報と、第２ギフトに係る情報と、第３ギフトに係る情報と、の区別について補足すると、第３ギフトに係る情報は、リアルタイムに送信されるものとして参照する場合の呼び名であり、第１ギフトに係る情報は、かかるリアルタイムに送信された第３ギフトに係る情報を、再配信時などの後から参照する場合の呼び名であるため、実質的には同一のものを指す。他方、第２ギフトに係る情報は、アーカイブされたアニメーションに対して付与されるギフトについての呼び名である。なお、ここではギフトに係る情報のみ第１乃至第３の呼び名を説明したが、同様の概念は、コメント及び音にも適用されうることから、コメント及び音についても、同様のものであってよい。 In addition, to supplement the distinction between the information related to the first gift, the information related to the second gift, and the information related to the third gift, the information related to the third gift is referred to as being transmitted in real time. and the information related to the first gift is the name used when referring to the information related to the third gift transmitted in real time later, such as at the time of redistribution, so it is substantially the same. point to On the other hand, the information about the second gift is the name of the gift given to the archived animation. Although the first to third names have been described here only for information related to gifts, the same concept can be applied to comments and sounds, so comments and sounds may also be similar. .

送信部４２は、第３モードにおける映像、又は、第４モードにおけるアニメーションの生成に必要な情報を、視聴者端末に送信してもよいし、管理サーバとネットワークを介して関連付けられている管理者端末に送信してもよい。送信部が、かかる映像又は情報を、視聴者端末に送信する場合、リアルタイムの映像又はアニメーションの表示を見過ごした視聴者や後から興味を持った視聴者も、視聴者端末において、映像又はアニメーションを楽しむことができる利点がある。また、送信部が、管理者端末に送信する場合、リアルタイムに送信され表示された映像又はアニメーションについて、どのような表示がされたのかを、管理者端末において、確認できる利点がある。後者について具体的に説明すると、リアルタイムに表示された映像又はアニメーションの表示について、視聴者から、内容についてのクレームやエラーの報告などがある。このようなとき、映像又はアニメーションを提供し管理する立場として、かかる映像又はアニメーションとしてどのようなものが提供されたのかを、確認できる利点がある。また、アニメーションの生成に必要な情報として、具体的にどのような情報が送信されているのか、どのようにアニメーションが生成されたのか、についても検証できることから、ひいては、アニメーションの品質向上の対策を検討する契機にもなりえる利点がある。なお、第４のモードにおいて、送信部４２は、アニメーションの生成に必要な全ての情報を送信してもよいし、その一部を送信してもよい。例えば、アニメーションの生成に必要な情報として、モーションに係る情報、音、コメント、ギフトに係る情報、カメラワークに係る情報などがあるが、その一部の情報を送信してもよい。例えば、送信部４２が、モーションに係る情報と、カメラワークに係る情報を送信した場合、管理者端末において、かかる情報を用いて生成されたアニメーションは、音、コメント、ギフトがないものとなる。しかし、モーションに係る情報を用いて、配信者がアバターとしてどのような動きを行ったのかを確認することができるため、例えば、視聴者からアバターの動きのエラー報告があった場合等に、そのエラーの確認をできる利点がある。この場合、表示内で多数現れうるコメントやギフトなどのアニメーションの生成に必要な情報の一部が送信されないことによって、それらのコメントやギフトなどによって不必要に画面が遮られずに、モーションに係る情報に基づくアバターの動きに着目して、エラーの確認をできる利点がある。また、その他の例としては、送信部４２が、管理者端末に、コメントを送ることによって、管理者端末の閲覧者は、コメントの中身を確認することができ、これによって、例えば、コメント内に誹謗中傷が含まれている場合等も、他のアバターのモーションや音やギフトなどに煩わされずに、コメントに集中して、確認をすることができる利点がある。したがって、送信部４２は、アニメーションの生成に必要な情報のうちの一部又は全部を送信する要求を取得し、かかる要求に対応して、アニメーションの生成に必要な情報の一部又は全部を送信する機能を有してよい。これにより、上述のとおり、かかるアニメーションの生成に必要な情報の一部に基づいて生成されたアニメーションの閲覧者は、対象とする情報以外の情報に煩わされず、かかる対象とする情報に集中して、閲覧できる利点がある。 The transmission unit 42 may transmit the information necessary for generating the video in the third mode or the animation in the fourth mode to the viewer terminal. You can send it to your terminal. When the transmission unit transmits such video or information to the viewer terminal, viewers who overlooked the display of the real-time video or animation or viewers who became interested later can also view the video or animation on the viewer terminal. There are benefits that you can enjoy. In addition, when the transmission unit transmits to the administrator terminal, there is an advantage that the administrator terminal can confirm how the video or animation transmitted and displayed in real time was displayed. To explain the latter specifically, there are complaints about the content and error reports from viewers regarding the display of video or animation displayed in real time. In such a case, there is an advantage of being able to check what kind of video or animation has been provided as a person who provides and manages the video or animation. In addition, as information necessary for animation generation, it is possible to verify what kind of information is specifically sent and how the animation was generated. There is an advantage that can be an opportunity to consider. In addition, in the fourth mode, the transmission unit 42 may transmit all information necessary for animation generation, or may transmit a part of the information. For example, the information necessary for animation generation includes motion-related information, sound, comments, gift-related information, camerawork-related information, etc., and part of the information may be transmitted. For example, when the transmission unit 42 transmits information related to motion and information related to camerawork, an animation generated using such information on the administrator terminal does not include sound, comments, or gifts. However, using information related to motion, it is possible to confirm what kind of movement the broadcaster made as an avatar, so if, for example, a viewer reports an error in the movement of the avatar, the It has the advantage of being able to check for errors. In this case, by not transmitting part of the information necessary for generating the animation, such as comments and gifts, which may appear in large numbers in the display, the screen is not unnecessarily blocked by the comments and gifts, and the motion related to the motion is prevented. It has the advantage of being able to check for errors by focusing on the movement of the avatar based on the information. As another example, when the transmission unit 42 sends a comment to the administrator terminal, the viewer of the administrator terminal can confirm the contents of the comment. Even if the comment contains slander, there is an advantage that the user can concentrate on the comment and check it without being disturbed by the motions, sounds, gifts, etc. of other avatars. Therefore, the transmission unit 42 obtains a request to transmit a part or all of the information necessary for animation generation, and transmits a part or all of the information necessary for animation generation in response to the request. may have a function to As a result, as described above, the viewer of the animation generated based on part of the information necessary for generating the animation is not bothered by information other than the target information, and can concentrate on the target information. , has the advantage of being browsable.

なお、ギフトに係る情報は、ギフトの位置、及び／又は、表示されるギフトの回転角度を含んでよい。かかるギフトは、視聴者が、特定の配信者を特定する、又は、一定の場面に対して、提供できるものでよい。前者の場合、特定のアバターを特定する情報であってもよく、かかる情報に基づいてギフトの位置が特定されたものであってよい。これにより、特定の配信者に対するギフトであることが明確になる利点がある。また、ギフトは、回転することが可能である場合があり、回転可能なギフトの場合、ギフトに係る情報はギフトの回転角度を含んでよい。特に、ギフトに係る情報に基づくギフトが物理法則を用いて表示される場合、前記ギフトに係る情報は、前記ギフトが表示される位置、及び／又は、表示されるギフトの回転角度を含む、ものであってよい。 The information about the gift may include the position of the gift and/or the rotation angle of the displayed gift. Such gifts may be those that viewers can provide to specific broadcasters or for certain occasions. In the former case, the information may be information specifying a specific avatar, and the position of the gift may be specified based on such information. This has the advantage of making it clear that the gift is for a specific distributor. Also, the gift may be rotatable, and in the case of a rotatable gift, information about the gift may include the rotation angle of the gift. In particular, when a gift based on information about the gift is displayed using the laws of physics, the information about the gift includes the position at which the gift is displayed and/or the rotation angle of the displayed gift. can be

ギフトに係る情報は、ギフトの種類を含んでよい。ギフトの種類は、種々のものであってよく、種類は限定されない。なお、特に、前記ギフトに係る情報に基づくギフトが疑似ランダム性を用いて表示される場合、前記ギフトに係る情報は、前記ギフトの種類を含む、ものであってよい。また、前記ギフトに係る情報に基づくギフトが疑似ランダム性を用いて表示される場合、前記ギフトに係る情報は、前記ギフトの種類のみである、ものであってよい。また、前記ギフトに係る情報に基づくギフトが疑似ランダム性を用いて表示処理される場合、前記ギフトに係る情報は、前記ギフトの種類と前記疑似ランダム性のシードを含む、ものであってよい。疑似ランダム性及び疑似ランダム性のシードは、後述する。 The information about the gift may include the type of gift. The kind of gift may be various, and the kind is not limited. In particular, when the gift based on the gift information is displayed using pseudo-randomness, the gift information may include the gift type. Further, when the gift based on the gift information is displayed using pseudo-randomness, the gift information may be only the type of the gift. Further, when the gift based on the gift information is displayed using pseudorandomness, the gift information may include the gift type and the pseudorandomness seed. Pseudo-randomness and pseudo-randomness seeds are described below.

なお、ギフトに係る情報は、視聴者端末に基づくものであるため、視聴者端末から直接送信されたものでもよいし、管理サーバなどを介して間接的に送信されるものであってもよい。 Since the information about the gift is based on the viewer terminal, it may be directly transmitted from the viewer terminal, or may be indirectly transmitted via the management server or the like.

音は、配信者端末に基づくものでもよいし、視聴者端末に基づくものでもよく、管理サーバを介してもよいし、介さなくてもよい。 The sound may be based on the terminal of the distributor or may be based on the terminal of the viewer, and may or may not be transmitted through the management server.

また、送信部４２は、第２のモードまたは第４のモードにおいて、配信者が演じるアバターを特定する識別情報を特定する情報を、送信してよい。かかる識別情報を受信した側は、予め受信している３Ｄモデルデータのうち、受信した識別情報に対応するモデルデータに対して、前記モーションに係る情報を適用する処理を行うことによって、かかる配信者が演じるアバターが、アニメーション内でも対応して演じるよう、処理が可能となる利点がある。 In addition, in the second mode or the fourth mode, the transmission unit 42 may transmit information specifying identification information specifying the avatar played by the distributor. The side that receives such identification information applies the information related to the motion to the model data corresponding to the received identification information among the 3D model data that has been received in advance. There is an advantage that processing is possible so that the avatar played by will also perform correspondingly in the animation.

送信部４２は、配信者端末、及び／又は、管理サーバ、において、機能してよい。 The transmission unit 42 may function in the distributor terminal and/or the management server.

２．３．受信部４３
受信部４３は、映像の受信、又は、アニメーションの生成に必要な情報、を受信する機能を有する。受信の態様は、種々のものであってよく、その手法に制約はない。例えば、送信された情報を受信するものでもよいし、他の情報処理装置に対して情報をアクセスし、そのアクセスに対応して送信された情報を受信するものでもよい。 2.3. Receiver 43
The receiving unit 43 has a function of receiving video or information necessary for generating animation. Various modes of reception may be used, and there are no restrictions on the method. For example, it may receive transmitted information, or it may access information to another information processing apparatus and receive information transmitted in response to the access.

受信部４３は、送信部４２と対応して、送信部４２が送信した情報を、対応して、受信してよい。すなわち、受信部４３は、第１乃至第４のモードの選択に応じて、対応する情報を受信してよい。受信部４３は、切替部４１が第１のモードを取得した場合は、リアルタイムの映像を受信し、切替部４１が第２のモードを取得した場合は、リアルタイムのアニメーションの生成に必要な情報を受信し、切替部４１が第３のモードを取得した場合は、過去に配信された映像を受信し、切替部４１が第４のモードを取得した場合は、過去に配信されたアニメーションに対応するアニメーションの生成に必要な情報を受信してよい。ただし、第４のモードにおいて、上述のとおり、第２ギフトに係る情報も、アニメーションの生成に必要な情報の一つとして、受信してよい。 The receiver 43 may correspond to the transmitter 42 and receive the information transmitted by the transmitter 42 . That is, the receiving section 43 may receive corresponding information according to the selection of the first to fourth modes. The receiving unit 43 receives real-time video when the switching unit 41 acquires the first mode, and receives information necessary for generating real-time animation when the switching unit 41 acquires the second mode. When the switching unit 41 acquires the third mode, it receives the image distributed in the past, and when the switching unit 41 acquires the fourth mode, it corresponds to the animation distributed in the past. It may receive information necessary to generate the animation. However, in the fourth mode, as described above, the information regarding the second gift may also be received as one of the information necessary for generating the animation.

第１のモードの場合、受信部４３は、リアルタイムに、映像の受信をしてよい。かかる映像は、一又は複数の配信者端末における配信者の挙動に基づいて、生成された映像であってよい。かかる映像は、一又は複数の配信者端末における各配信者端末から取得された情報に基づいて、管理サーバなどにおいて生成されたものでもよいし、一又は複数の配信者端末における各配信者端末において生成された映像に基づいて、管理サーバなどにおいて合成されて生成された映像でもよい。 In the first mode, the receiver 43 may receive video in real time. Such videos may be videos generated based on the behavior of the distributor at one or more distributor terminals. Such video may be generated in a management server or the like based on information acquired from each distributor terminal in one or more distributor terminals, or may be generated in each distributor terminal in one or more distributor terminals A video synthesized and generated in a management server or the like based on the generated video may also be used.

第２のモードの場合、受信部４３は、リアルタイムに、アニメーションの生成に必要な情報を、受信してよい。アニメーションの生成に必要な情報は、少なくとも、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能なモーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される第３ギフトに係る情報と、及び、音と、を含んでよい。第３ギフトに係る情報、音、については、上述と同様であってよい。なお、このようなリアルタイムのアニメーションを、本願書類において、「第２アニメーション」ということもある。 In the case of the second mode, the receiving unit 43 may receive information necessary for animation generation in real time. The information necessary for generating the animation includes at least motion information capable of expressing the movement of the avatar object and the movement of the avatar object by being combined with information concerning the avatar object associated with the distributor terminal. It may include information and sound related to the third gift given from the viewer terminal watching the animation. Information and sound relating to the third gift may be the same as described above. Note that such a real-time animation is sometimes referred to as a "second animation" in this document.

第３のモードの場合、受信部４３は、過去に配信された映像の受信をしてもよいし、上述のアニメーションの生成に必要な情報に基づいて生成されるアニメーションに対応する映像の受信をしてもよい。後者の場合は、上述のとおり、第２ギフトに係る情報に基づく第２ギフトの表示を含む映像であってよい。かかる映像は、一又は複数の配信者端末における配信者の挙動に基づいて、生成された映像であってよい。かかる映像は、一又は複数の配信者端末における各配信者端末から取得された情報に基づいて、管理サーバなどにおいて生成されたものでもよいし、一又は複数の配信者端末における各配信者端末において生成された映像に基づいて、管理サーバなどにおいて合成されて生成された映像でもよい。 In the case of the third mode, the receiving unit 43 may receive images distributed in the past, or may receive images corresponding to the animation generated based on the information necessary for generating the animation described above. You may In the latter case, as described above, the image may include a display of the second gift based on information relating to the second gift. Such videos may be videos generated based on the behavior of the distributor at one or more distributor terminals. Such video may be generated in a management server or the like based on information acquired from each distributor terminal in one or more distributor terminals, or may be generated in each distributor terminal in one or more distributor terminals A video synthesized and generated in a management server or the like based on the generated video may also be used.

第４のモードの場合、受信部４３は、過去に配信されたアニメーションの生成に必要な情報を受信してよい。アニメーションの生成に必要な情報は、少なくとも、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能なモーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される第３ギフトに係る情報と、及び、音と、を含んでよい。第３ギフトに係る情報、音、については、上述と同様であってよい。なお、このような過去に配信されたアーカイブされたアニメーションを、本願書類において、「第１アニメーション」ということもある。 In the case of the fourth mode, the receiving unit 43 may receive information necessary for generating an animation distributed in the past. The information necessary for animation generation includes at least motion information capable of expressing the movement of the avatar object and the movement of the avatar object by being combined with information concerning the avatar object associated with the distributor terminal. It may include information about the third gift given from the viewer terminal that watches the animation and the sound. Information and sound related to the third gift may be the same as described above. It should be noted that such an archived animation distributed in the past may be referred to as a "first animation" in the present document.

上述のとおり、第１乃至第４のモードにおいて、受信部４３は、送信部４２の送信に対応し、視聴者に関する情報を取得してよい。特に、第４のモードにおいて、受信部４３は、前記過去に配信された第１アニメーションに係る視聴者に関する情報を受信してよい。かかる視聴者に関する情報を受信することにより、アーカイブされたアニメーションに関する情報を受信できる利点がある。また、前記視聴者に関する情報は、過去の配信時における視聴者数を含んでよい。視聴者数により、かかるアニメーションに興味を有した視聴者数の情報を受信できる利点があり、かかる情報が視聴者端末において表示される場合、かかるアニメーションに興味を有した視聴者数を、閲覧者は理解できる利点がある。また前記視聴者に関する情報は、過去の配信時におけるギフト数を含んでよい。ギフト数により、かかるアニメーションに興味を有してギフトを提供した、すなわち、アニメーションが盛況となった情報を受信できる利点があり、かかる情報が視聴者端末において表示される場合、かかるアニメーションが盛況となった状況を、閲覧者は理解できる利点がある。前記視聴者に関する情報は、過去の配信時におけるコメント数、を含んでよい。コメント数により、かかるアニメーションに興味を有してコメントを提供した、すなわち、アニメーションに対して視聴者の興味が生じた情報を受信できる利点があり、かかる情報が視聴者端末において表示される場合、かかるアニメーションに対して興味が生じた状況を、閲覧者は理解できる利点がある。 As described above, in the first to fourth modes, the receiving section 43 may correspond to the transmission of the transmitting section 42 and acquire information about the viewer. In particular, in the fourth mode, the receiving unit 43 may receive information about viewers related to the first animation distributed in the past. Receiving information about such viewers has the advantage of receiving information about archived animations. Also, the information about the viewers may include the number of viewers at the time of past distribution. The number of viewers has the advantage of receiving information on the number of viewers who were interested in such animation, and when such information is displayed on the viewer terminal, the number of viewers who were interested in such animation can be reported to viewers. has understandable advantages. Also, the information about the viewer may include the number of gifts at the time of distribution in the past. According to the number of gifts, it is possible to receive information that a gift was provided with interest in such animation, that is, the animation was successful, and if such information is displayed on the viewer terminal, the animation is successful. There is an advantage that the reader can understand the situation that has become. The information about the viewers may include the number of comments at the time of distribution in the past. According to the number of comments, there is an advantage that the viewer is interested in the animation and provides a comment, that is, the information that caused the viewer's interest in the animation can be received, and if such information is displayed on the viewer terminal, There is an advantage that the viewer can understand the situation in which interest is generated in such animation.

受信部４３は、管理サーバ、管理者端末、又は、視聴者端末、において機能してよい。 The receiving unit 43 may function in the management server, administrator terminal, or viewer terminal.

２．４．生成部４４
生成部４４は、受信したアニメーションの生成に必要な情報を用いて、アニメーションの生成をする機能を有する。生成部４４は、視聴者端末内において、機能してよい。 2.4. Generation unit 44
The generator 44 has a function of generating an animation using the received information necessary for generating the animation. The generator 44 may function within the viewer terminal.

生成部４４は、上述のアニメーションの生成に必要な情報を用いて、アニメーションを生成する。生成部４４は、アニメーションの生成に必要な情報として取得した、アバターオブジェクトの動きを表現可能なモーションに係る情報と、予め受信している３Ｄモデルデータのうち、受信した識別情報に対応するモデルデータと、を用いて、アバターオブジェクトの動きを表現し、アニメーションを生成してよい。すなわち、生成部４４は、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能なモーションに係る情報と、予め受信している３Ｄモデルデータのうち、受信した識別情報に対応するモデルデータに対して、前記モーションに係る情報を適用する処理によって、アニメーションを生成してよい。 The generation unit 44 generates the animation using the information necessary for generating the animation described above. The generation unit 44 generates information related to the motion that can express the movement of the avatar object, which is acquired as information necessary for generating animation, and model data corresponding to the received identification information among the 3D model data received in advance. and may be used to represent the movement of the avatar object and generate animation. That is, the generation unit 44 combines information related to the motion that can express the movement of the avatar object by combining with information related to the avatar object related to the distributor terminal, and the 3D model data received in advance, An animation may be generated by applying the information about the motion to the model data corresponding to the received identification information.

また、生成部４４は、受信部４３が受信した音を用いて、アニメーションを生成してよい。音は、配信者端末から取得した、配信者が演じる音を含んでもよく、また、視聴者端末から取得した、視聴者がアバターオブジェクトの演出に対して提供した音を含んでもよい。いずれの音についても、視聴者端末において受信し、これらが用いられてアニメーションが生成されてよい。 Also, the generating unit 44 may generate an animation using the sound received by the receiving unit 43 . The sound may include the sound performed by the distributor obtained from the distributor terminal, or may include the sound provided by the viewer for the presentation of the avatar object obtained from the viewer terminal. Any sounds may be received at the viewer terminal and used to generate an animation.

また、生成部４４は、受信した、ギフトに係る情報を用いて、アニメーションを生成してよい。ギフトは、視聴者が、一の配信者に係る一のアバターオブジェクト又は、複数の配信者に係る複数のアバターオブジェクトが演じる場面に対して、提供されるものであってよい。すなわち、ギフトに係る情報は、アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与されるものであってよい。 Also, the generation unit 44 may generate an animation using the received information about the gift. A gift may be provided for a scene in which a viewer performs one avatar object associated with one distributor or a plurality of avatar objects associated with a plurality of distributors. That is, the information about the gift may be given from the viewer terminal viewing the animation representing the movement of the avatar object.

ギフトは、種々の態様のものであってよいが、アバターオブジェクトが演じてギフトが提供される仮想空間において、ギフトは、仮想空間内の物理法則が適用されて、演出されてよい。例えば、仮想空間内の物理法則としては、例えば、ニュートン力学があげられ、物が上から下に落ちたり、ある速度で動いている物が慣性運動をしたり、また、摩擦や抵抗によって物の移動の速度が減少する、などであってよい。そして、ギフトに係る情報に基づくギフトが物理法則を用いて表示される場合、前記ギフトに係る情報は、前記ギフトが表示される位置、及び／又は、表示されるギフトの回転角度を含むものであってよく、アニメーションの生成においては、かかるギフトに係る情報として、ギフトを、表示される位置から物理法則を用いてアニメーションを生成し、また、表示されるギフトが回転されるものである場合、その回転の最初の位置である回転角度が用いられて、アニメーションが生成されてよい。なお、ギフトに係る情報として、そのほか、ギフトのギフトが表示される位置、表示されるギフトの大きさ、ギフトの表示される上下左右方向等の向き、ギフトの移動の初速度、ギフトの移動の上下左右方向等の向き、ギフトの移動の加速度、などの一部又は全部を含んでよい。かかるギフトに係る情報が含まれることによって、ギフトを、配信者端末内において表現の種類を増加できてよい。 The gift may be of various forms, but in the virtual space where the avatar object acts and the gift is provided, the gift may be produced by applying physical laws in the virtual space. For example, the laws of physics in virtual space include Newtonian mechanics, where objects fall from top to bottom, objects moving at a certain speed undergo inertial motion, and objects move due to friction and resistance. The speed of movement is reduced, and so on. When the gift based on the gift information is displayed using the laws of physics, the gift information includes the position at which the gift is displayed and/or the rotation angle of the displayed gift. In the generation of the animation, as the information related to the gift, the animation is generated using the laws of physics from the position where the gift is displayed, and if the displayed gift is rotated, The rotation angle, which is the initial position of that rotation, may be used to generate the animation. In addition, as information related to the gift, the position where the gift is displayed, the size of the gift to be displayed, the orientation of the gift such as up, down, left and right directions, the initial speed of movement of the gift, the movement of the gift It may include part or all of the orientation such as up, down, left, and right, the acceleration of movement of the gift, and the like. By including information related to such gifts, it may be possible to increase the types of representations of gifts within the distributor terminal.

また、ギフトのアニメーションは、疑似ランダム性が用いられて、アニメーションが生成されてもよい。ここで、疑似ランダム性とは、真のランダム性が数学的に実現できないことから、計算機内の演出として真のランダムを模して演出するための性質を意味するものであり、真のランダム性を模した種々の関数を用いるものにより実現されるものであってよい。ギフトのアニメーションが疑似ランダム性を持つ場合、ギフトの演出において、ギフトのギフトが表示される位置、表示されるギフトの大きさ、ギフトの表示される上下左右方向等の向き、ギフトの移動の初速度、ギフトの移動の上下左右方向等の向き、ギフトの移動の加速度、などの一部又は全部が疑似ランダム性によって決定されてよい。かかる場合、配信者端末又は管理サーバから、視聴者端末に、これらの情報を細かく通信する必要がないため、通信の情報量が減少する利点がある。特に、ギフトの種類のみが、視聴者端末に対して通信されるため、通信量を減少できる利点がある。なお、疑似ランダム性を用いた場合、視聴者端末毎に異なるアニメーションを作成できる利点がある。また、疑似ランダム性のシードが、視聴者端末に送信される場合、疑似ランダム性にバリエーションを適用できる利点がある。上述の通り、数学的に真のランダム性を表現できないことから、同一の関数を使用し続けると、ランダム性のないアニメーションが繰り返し表示されることとなり、バラエティに欠けることがある。疑似ランダム性のシードを用いることにより、疑似ランダム性におけるランダム性が向上し、よりバラエティのあるアニメーションが可能になる利点がある。なお、シードは、ギフトの種類毎に、割り当てられるものであって良い。また、シード自体も、疑似ランダムな関数によって計算されたものであってもよい。かかる疑似ランダム性のシードは、管理サーバ又は配信者端末から、視聴者端末に送信され、疑似ランダム性の関数が適用される際の一のパラメータとして利用されてよい。 Also, the animation of the gift may be generated using pseudo-randomness. Here, since true randomness cannot be realized mathematically, pseudo-randomness means the property of imitating true randomness as a presentation in a computer. It may be realized by using various functions modeled on . If the animation of the gift has pseudo-randomness, the position where the gift is displayed, the size of the gift to be displayed, the orientation of the gift such as the up, down, left, and right directions in which the gift is displayed, the initial movement of the gift, etc. Some or all of the speed, orientation such as up, down, left, or right of movement of the gift, acceleration of movement of the gift, etc. may be determined by pseudo-randomness. In this case, there is no need to communicate such information in detail from the distributor terminal or the management server to the viewer terminal, so there is an advantage that the amount of communication information is reduced. In particular, since only the type of gift is communicated to the viewer terminal, there is an advantage that the amount of communication can be reduced. Note that the use of pseudo-randomness has the advantage that different animations can be created for each viewer terminal. Also, if a seed of pseudo-randomness is sent to the viewer terminal, there is the advantage that variations can be applied to the pseudo-randomness. As described above, since true randomness cannot be expressed mathematically, continued use of the same function results in repeated display of animations without randomness, resulting in a lack of variety. By using a pseudo-random seed, there is an advantage that the randomness in the pseudo-randomness is improved and more variety of animation becomes possible. A seed may be assigned to each type of gift. The seed itself may also be calculated by a pseudo-random function. Such a pseudo-randomness seed may be transmitted from the management server or distributor's terminal to the viewer's terminal and used as one parameter when the pseudo-randomness function is applied.

なお、ギフトは、上述では、視聴者端末内において、物理法則がある場合について説明したが、視聴者端末内において物理法則がない場合であってもよい。この場合、ギフトの位置情報と回転情報が、配信者端末又は管理者サーバから伝達されることによって、いわば、物理法則が適用された結果としての、ギフトの位置情報と回転情報とを用いて、ギフトの描画を配信者端末においてしてもよい。この場合、配信者端末において、物理法則に関する処理を行う必要がない利点がある。 In addition, in the above description, the case where the gift has physical laws within the viewer terminal has been described, but the gift may also exist without physical laws within the viewer terminal. In this case, the location information and rotation information of the gift are transmitted from the distributor terminal or the administrator server. The drawing of the gift may be done at the distributor's terminal. In this case, there is an advantage that the terminal of the distributor does not need to perform processing related to the laws of physics.

なお、生成部４４は、受信したギフトに係る情報を所定の場合において、アニメーションの生成に使用しない、という処理としてもよいし、これに対応して、受信部４３は、所定の場合、ギフトに係る情報を受信しない、又は、送信部４２は、所定の場合に、ギフトに係る情報を送信しない、と処理してもよい。例えば、あるギフトの表示が３秒である場合において、残り０．１秒の段階でアニメーションの視聴を開始した視聴者端末ではかかるギフトの表示を行わない処理とする情報としてよい。これにより、描画の時間が所定時間以上残っていない場合は、実際に描画して演出する処理の意義が低いと考えられるためである。したがって、所定の場合としては、ギフトに係る情報におけるギフトの描画時間が、所定時間よりも短い場合、などであってよい。 Note that the generating unit 44 may perform processing such that, in a predetermined case, the information related to the received gift is not used for generating the animation. Such information may not be received, or the transmitting unit 42 may not transmit information related to gifts in a predetermined case. For example, when a certain gift is displayed for 3 seconds, the information may be such that the gift is not displayed on the viewer terminal that has started viewing the animation with 0.1 seconds remaining. This is because, if the drawing time does not remain longer than the predetermined time, it is considered that the process of actually drawing and effecting is of little significance. Therefore, the predetermined case may be, for example, the case where the drawing time of the gift in the gift-related information is shorter than the predetermined time.

アニメーションの生成に必要な情報は、サービスデータに係る情報、及び／又は、カメラワークに係る情報を含んでよい。生成部４４は、サービスデータに係る情報、及び／又は、カメラワークに係る情報を用いて、アニメーションを生成してよい。 The information necessary for animation generation may include information related to service data and/or information related to camerawork. The generation unit 44 may generate an animation using information regarding service data and/or information regarding camerawork.

サービスデータに係る情報は、配信者のコメント、視聴者のコメント、及び／又は、前記アニメーションの視聴者数、を含んでよい。配信者のコメントは、配信者が発するコメントであってよい。また、視聴者のコメントは、アニメーションを視聴する視聴者のコメントであってよい。 Information related to service data may include broadcaster comments, viewer comments, and/or the number of viewers of the animation. The distributor's comment may be a comment issued by the distributor. Also, the viewer's comment may be a comment of a viewer viewing the animation.

配信者のコメントは、配信者端末において入力又は生成されたコメントであってよい。かかるコメントは、入力又は生成された配信者端末から、アニメーションが生成される生成部４４を有する視聴者端末に、直接的に通信されてもよいし、間接的に通信されてもよい。間接的な通信は、例えば、管理サーバを経て、通信される態様であってよい。一又は複数の配信者がいる場合、かかる一又は複数の配信者に基づく、一又は複数の配信者端末からのコメントが、サービスデータに係る情報として、視聴者端末に通信されてよい。かかる配信者のコメントは、コメントを発した配信者と関連付けられて、視聴者端末に通信されてよく、視聴者端末において、関連付けられた配信者を示す情報と関連付けられて、かかるコメントが表示されてよい。 The distributor's comment may be a comment entered or generated at the distributor's terminal. Such comments may be directly or indirectly communicated from the distributor terminal in which they are input or generated to the viewer terminal having the generator 44 in which the animation is generated. Indirect communication may be, for example, communication via a management server. When there are one or more distributors, comments from one or more distributor terminals based on the one or more distributors may be communicated to the viewer terminals as information related to service data. Such comments by the distributor may be associated with the distributor who issued the comment and communicated to the viewer terminal, and the comment may be displayed in the viewer terminal in association with information indicating the associated distributor. you can

視聴者のコメントも、同様に、視聴者端末において入力又は生成されたコメントであってよい。かかるコメントは、入力又は生成された視聴者端末から、アニメーションが生成される生成部４４を有する視聴者端末に、直接的に通信されてもよいし、間接的に通信されてもよい。間接的な通信は、例えば、管理サーバを経て、通信される態様であってよい。アニメーションを視聴する一又は複数の視聴者について、かかる一又は複数の視聴者に基づく、一又は複数の視聴者端末からのコメントが、サービスデータに係る情報として、視聴者端末に通信されてよい。 Viewer comments may similarly be comments entered or generated at the viewer terminal. Such comments may be directly or indirectly communicated from the viewer terminal in which they are input or generated to the viewer terminal having the generator 44 in which the animation is generated. Indirect communication may be, for example, communication via a management server. For one or more viewers viewing the animation, comments from one or more viewer terminals based on such one or more viewers may be communicated to the viewer terminals as information related to service data.

視聴者のコメントが入力された視聴者端末と、かかる視聴者のコメントに基づいて生成されたアニメーションを表示する視聴者端末と、が異なる視聴者端末である場合、視聴者のコメントが入力された視聴者端末から、かかる視聴者のコメントを、直接的又は間接的に、かかる視聴者のコメントに基づいて生成されたアニメーションを表示することになる視聴者端末に送信し、かかる視聴者端末内の生成部４４は、受信した視聴者のコメントを、サービスデータに係る情報として、かかる視聴者のコメントとそのコメントを作成した視聴者とを含むアニメーションを生成し、かかる視聴者端末において表示してよい。この場合、視聴者は、他の視聴者が入力したコメントを、アニメーション内の表示により理解できる。 If the viewer terminal in which the viewer's comment is input and the viewer terminal that displays the animation generated based on the viewer's comment are different, the viewer's comment is input. Sending such viewer's comments, directly or indirectly, from the viewer's terminal to a viewer's terminal that will display an animation generated based on such viewer's comments, and The generation unit 44 may generate an animation including the viewer's comment and the viewer who created the comment as information related to the service data from the received viewer's comment, and display the animation on the viewer's terminal. . In this case, viewers can understand comments input by other viewers by displaying them in the animation.

また、視聴者のコメントが入力された視聴者端末と、かかる視聴者のコメントに基づいて生成されたアニメーションを表示する視聴者端末と、が同一の視聴者端末である場合、かかる視聴者端末内の生成部４４は、入力された視聴者のコメントを、サービスデータに係る情報として、かかる視聴者のコメントとそのコメントを作成した視聴者とを含むアニメーションを生成し、かかる視聴者端末において表示してよい。この場合、視聴者は、自ら入力したコメントが、アニメーション内で表示されることを理解できる。 In addition, if the viewer terminal in which the viewer's comment is input and the viewer terminal that displays the animation generated based on the viewer's comment are the same viewer terminal, the viewer terminal The generation unit 44 generates an animation including the input viewer's comment and the viewer who created the comment as information related to the service data, and displays it on the viewer terminal. you can In this case, the viewer can understand that the comment entered by the viewer is displayed within the animation.

また、視聴者のコメントは、コメントを入力した配信者と関連付けられて、視聴者端末に通信されてよく、視聴者端末において、関連付けられた配信者を示す情報と関連付けられて、かかるコメントと関連付けられた配信者を示す情報が表示されてよい。 In addition, the viewer's comment may be associated with the distributor who entered the comment and communicated to the viewer terminal, and in the viewer terminal, the viewer's comment may be associated with information indicating the associated distributor and associated with the comment. Information may be displayed that indicates the broadcaster that was sent.

アニメーションの視聴者数は、アニメーションを視聴している視聴者を推定できる数であればよく、例えば、生成されたアニメーションを表示している視聴者端末数や、アニメーションに生成に必要な情報を受信している視聴者端末数、又は、かかるアニメーションの生成に必要な情報を受信できるよう管理サーバや配信者端末に要求する要求信号を送信している視聴者端末数、であってよい。 The number of viewers of the animation can be any number that can estimate the number of viewers watching the animation. For example, the number of viewer terminals displaying the generated animation and the information necessary for animation generation or the number of viewer terminals transmitting a request signal requesting the management server or the distributor terminal to receive the information necessary for generating the animation.

管理サーバがアニメーションの生成に必要な情報の要求を視聴者端末から取得した場合においては、かかる要求を行う視聴者端末の数を管理サーバが合算することにより、かかる視聴者数を算出してよい。 When the management server obtains a request for information necessary for animation generation from a viewer terminal, the management server may calculate the number of viewers by totaling the number of viewer terminals that make such requests. .

また、配信者端末がアニメーションの生成に必要な情報の要求を視聴者端末から取得した場合においては、かかる要求を行う視聴者端末の数を、同一のアニメーションにおいて配信する配信者端末同士の間で共有又は一の配信者端末に連絡することにより、かかる視聴者数を算出してよい。 In addition, when a distributor terminal obtains a request for information necessary for animation generation from a viewer terminal, the number of viewer terminals that make such requests shall be determined between distributor terminals that distribute the same animation. The number of viewers may be calculated by sharing or by contacting one broadcaster terminal.

また、アニメーションの視聴者数は、一のアニメーションにおいて、リアルタイムに算出してよい。これにより、時々刻々と変化するアニメーションの視聴者数について、リアルタイムに算出し、表示できることとなり、視聴者は、アニメーションの視聴者数の多寡を理解できる利点がある。なお、かかるアニメーションの視聴者数は、視聴者端末において、ランキングされてもよい。例えば、各アニメーションに対応して視聴者数を関連付けることにより、視聴者数の多い順や少ない順などのアニメーションを表示してよい。これにより、視聴者は、視聴者数という人気度によって、アニメーションを評価できる利点がある。 Also, the number of viewers of an animation may be calculated in real time for one animation. As a result, the ever-changing number of viewers of the animation can be calculated and displayed in real time, and there is an advantage that viewers can understand the number of viewers of the animation. Note that the number of viewers of such animation may be ranked on the viewer terminal. For example, by associating the number of viewers with each animation, the animations may be displayed in descending order of the number of viewers or in ascending order of the number of viewers. This has the advantage that viewers can evaluate animations based on the popularity of the number of viewers.

また、サービスデータに係る情報は、配信者の視聴者に対するアクションを含んでよい。例えば、サービスデータに係る情報は、配信者が、視聴者のプロフィールを見るアクションを含んでよい。この場合、配信者が、かかる配信者の配信を視聴する複数の視聴者の中の一の視聴者を選択し、かかる選択された視聴者を見るアクションが、かかる配信者に係るアバターオブジェクトを視聴する視聴者端末に伝達されてよい。これにより、配信者がどの視聴者に興味を有しているかを、他の視聴者も共有することができる利点がある。特に、配信者端末において、アニメーションの生成を行う場合、遅延が減少し、例えば、数秒以内で表示可能になるため、映像の場合のように遅延が生じる場合と比較して、配信者のレスポンスをより同時刻に近いタイミングで、共有できる利点がある。 Also, the information related to the service data may include actions of the distributor for viewers. For example, information related to service data may include an action by a broadcaster to view a viewer's profile. In this case, the distributor selects one viewer among the plurality of viewers who watch the distribution of the distributor, and the action of viewing the selected viewer is to view the avatar object related to the distributor. may be conveyed to the viewer terminal that This has the advantage of allowing other viewers to share which viewer the distributor is interested in. In particular, when generating animations on the terminal of the distributor, the delay is reduced and, for example, it can be displayed within a few seconds. There is an advantage that it can be shared at a timing closer to the same time.

カメラワークに係る情報は、配信者を撮像する手法に関する情報であってよい。撮像の手法に関する情報は、例えば、配信者を撮像する角度、配信者を撮像する距離、配信者を撮像する撮像技術、などであってよい。配信者を撮像する角度は、撮影角度を示す種々の手法によって特定されてよい。また、配信者を撮像する距離も、距離を示す種々の方法によって特定されてよく、所定の絶対距離によって特定されてもよいし、所定の基準の距離に対する相対的な距離によって特定されてもよい。また、配信者を撮像する技術として、パン、チルト、などの技術が利用されてもよい。かかるカメラワークに係る情報は、視聴者端末において、アニメーションを生成する際に用いられてよい。特に、視聴者端末におけるカメラワークが配信者端末におけるカメラワークを模すことができるよう、配信者端末から伝達されたカメラワークに係る情報を用いて、視聴者端末における配信者の演じるアバターオブジェクトを表示する方法を特定してよい。 Information related to camerawork may be information related to a method of capturing an image of a distributor. The information about the imaging method may be, for example, the angle at which the distributor is imaged, the distance at which the distributor is imaged, the imaging technique for imaging the distributor, and the like. The angle at which the distributor is imaged may be specified by various methods of indicating the shooting angle. Also, the distance at which the image of the distributor is captured may be specified by various methods of indicating the distance, and may be specified by a predetermined absolute distance, or may be specified by a relative distance with respect to a predetermined reference distance. . Also, techniques such as panning and tilting may be used as techniques for imaging the distributor. Information related to such camera work may be used when generating an animation in the viewer terminal. In particular, the avatar object played by the distributor on the viewer terminal is created using the information related to the camera work transmitted from the distributor terminal so that the camera work on the viewer terminal can imitate the camera work on the distributor terminal. You may specify how to display it.

配信者を撮像する手法に関する情報は、予め配信者端末と、サーバと、視聴者端末において、予めルールが定められており、かかるルール内において、撮像する手法を特定する情報が伝達されることにより、配信者端末における配信者を撮像する手法が、視聴者端末側に、アニメーションの作成時に利用されてよい。 Information about the method of capturing the image of the distributor is defined in advance by the distributor terminal, the server, and the viewer terminal according to rules. , the method of capturing images of the distributor at the distributor terminal may be used at the viewer terminal side when creating animation.

生成部４４は、上述のとおりの、種々のアニメーションの生成に必要な情報を用いて、アニメーションを生成してよい。図５は、アニメーションの生成に必要な種々の情報の一例を概括的に示すものである。アニメーションの生成にあたり、一又は複数の配信者端末からの情報を用いてよく、また、一又は複数の視聴者端末からの情報を用いてよい。また、かかる生成は、リアルタイムに行われてよい。また、生成されたアニメーションは、生成した視聴者端末において、表示されてよい。 The generating unit 44 may generate animations using information necessary for generating various animations as described above. FIG. 5 generally shows an example of various information necessary for animation generation. In generating the animation, information from one or more distributor terminals may be used, and information from one or more viewer terminals may be used. Also, such generation may occur in real time. Also, the generated animation may be displayed at the generated viewer terminal.

２．５．統計処理部４５
統計処理部４５は、視聴者に関する情報を表示してよい。また、統計処理部４５は、視聴者に関する情報を用いて、統計処理する機能を有してよい。また、統計処理部４５は、統計処理した結果を、表示する機能を有してよい。 2.5. Statistical processing unit 45
The statistical processing unit 45 may display information about viewers. Also, the statistical processing unit 45 may have a function of performing statistical processing using information about viewers. Moreover, the statistical processing unit 45 may have a function of displaying the results of the statistical processing.

図６は、視聴者に関する情報を表示する一例である。ここでは、一例として、複数のアーカイブされたアニメーション６１と、各アニメーションについての視聴者数６２と、を関連付けて記憶されたものが対応付けて表示されている例である。ここで、視聴者数は、一定の時間的長さのあるアニメーションにおいて、かかる一定の時間内の最大の視聴者数であってもよいし、かかる一定の時間内の最小の視聴者数であってもよいし、かかる一定の時間内の視聴者数の平均視聴者数であってもよい。また、本例においては、合わせて、各アニメーション内で提供されたギフト数の合計６３、各アニメーション内で提供されたコメント数の合計６４、も各アニメーションに対応付けて記憶されたものを、対応付けて表示している。このように、視聴者数、ギフト数、コメント数が、表示されることによって、各アーカイブされたアニメーションについての情報を取得することができ、閲覧者は、希望のアニメーションを閲覧できる利点がある。なお、かかる表示において、これらの視聴者に関する情報について、ソーティングできる機能があってもよい。例えば、視聴者数が多い順にソーティングしたり、ギフト数が多い順にソーティングしたり、コメント数が多い順にソーティングする機能があってよい。また、かかるソーティングは、所定の期間についてのソーティング機能であってもよい。例えば、過去１日、過去１週間、過去１か月、過去半年、などである。また、これらの視聴者数、ギフト数、コメント数は、アニメーションがリアルタイムに当初配信された時の数であってもよいが、その後、アーカイブされて、アーカイブされたアニメーションとして送信された場合における、視聴者数、ギフト数、コメント数であってもよい。この場合、当初のアニメーションとは別に、アーカイブされてから人気が上昇又は下降したアニメーションという観点の情報が取得できる。この場合においても、上述と同様に、視聴者数、ギフト数、コメント数について、ソーティングできてよい。さらに、これらのリアルタイムのアニメーションの表示とアーカイブされたアニメーションの表示の合計における視聴者数、ギフト数、コメント数、であってもよい。この場合、当初のリアルタイムの表示に加えて、アーカイブされたアニメーションとしての表示の、両方を合計した、視聴者数、ギフト数、コメント数、を表示できるため、かかるアニメーションの全体的な人気の上昇又は下降を踏まえた、視聴者数、ギフト数、コメント数、を表示できる利点がある。なお、この場合においても、上述と同様に、視聴者数、ギフト数、コメント数について、ソーティングできてよい。 FIG. 6 is an example of displaying information about viewers. Here, as an example, a plurality of archived animations 61 and viewer numbers 62 for each animation are associated and stored and displayed. Here, the number of viewers may be the maximum number of viewers within a certain period of time, or the minimum number of viewers within such certain period of time, in an animation with a certain length of time. Alternatively, it may be the average number of viewers within such a certain period of time. In addition, in this example, a total of 63 gifts provided in each animation and a total of 64 comments provided in each animation are also stored in association with each animation. are attached and displayed. By displaying the number of viewers, the number of gifts, and the number of comments in this way, it is possible to obtain information about each archived animation, and the viewer has the advantage of viewing the desired animation. In addition, in such a display, there may be a function of sorting the information regarding these viewers. For example, there may be a function of sorting in descending order of the number of viewers, sorting in descending order of the number of gifts, or sorting in descending order of the number of comments. Such sorting may also be a sorting function for a predetermined time period. For example, the past day, the past week, the past month, the past six months, and the like. In addition, the number of viewers, the number of gifts, and the number of comments may be the number when the animation was originally distributed in real time, but after that, when it is archived and transmitted as an archived animation, It may be the number of viewers, the number of gifts, or the number of comments. In this case, it is possible to acquire information from the viewpoint of animations whose popularity increased or decreased after being archived, in addition to the original animations. Also in this case, the number of viewers, the number of gifts, and the number of comments may be sorted in the same manner as described above. Further, it may be the number of viewers, the number of gifts, and the number of comments in the sum of the display of these real-time animations and the display of archived animations. In this case, in addition to the original real-time display, it is possible to display the total number of viewers, the number of gifts, and the number of comments, which are displayed as an archived animation, thus increasing the overall popularity of such animations. Or there is an advantage that the number of viewers, the number of gifts, and the number of comments can be displayed based on the decline. Also in this case, the number of viewers, the number of gifts, and the number of comments may be sorted in the same manner as described above.

統計処理部４５は、配信者端末において機能してもよいし、管理サーバにおいて機能してもよいし、管理者端末において機能してもよいし、視聴者端末において機能してもよい。統計処理部４５は、以下で説明する種々の機能を、これらの各情報処理装置の一で完結して表示情報を生成して表示してもよいし、複数の情報処理装置において情報の生成と表示とを分散して処理してもよい。例えば、配信者端末や管理サーバから、視聴者端末又は管理者端末に、視聴者に関する情報を送信し、視聴者端末内にてかかる視聴者に関する情報を用いて、過去に配信された前記１アニメーションに係る視聴者に関する統計情報を生成し、かかる統計情報を前記視聴者端末又は管理者端末において表示してもよいし、配信者端末や管理サーバにおいて、視聴者に関する情報を用いて、過去に配信された前記１アニメーションに係る視聴者に関する統計情報を生成し、かかる統計情報を視聴者端末又は管理者端末に送信し、かかる視聴者端末又は管理者端末においてかかる統計情報を表示してもよい。これらの場合において、前記統計情報は、所定期間内における、前記視聴者数、前記ギフト数、及び／又は、前記コメント数の合計数を含んでよい。また、上述の表示は、前記統計情報において、視聴数、ギフト数、及び／又は、コメント数が所定の数以上の部分を表示するものであってよい。例えば、視聴者端末又は管理者端末において、所定の数として、一定の閾値以上の視聴者数、ギフト数、コメント数、のみが表示されてよい。 The statistical processing unit 45 may function in the distributor terminal, the management server, the administrator terminal, or the viewer terminal. The statistical processing unit 45 may complete the various functions described below in one of these information processing devices to generate and display display information, or may generate and display information in a plurality of information processing devices. Display may be distributed and processed. For example, from the distributor terminal or the management server, information about the viewer is sent to the viewer terminal or administrator terminal, and the information about the viewer is used in the viewer terminal, and the one animation that was distributed in the past Statistical information about viewers may be generated and the statistical information may be displayed on the viewer terminal or administrator terminal, or in the distributor terminal or management server, using information about viewers, distributed in the past Statistical information relating to the viewer of the one animation thus generated may be generated, the statistical information may be transmitted to the viewer terminal or the administrator terminal, and the statistical information may be displayed on the viewer terminal or the administrator terminal. In these cases, the statistical information may include the total number of viewers, gifts, and/or comments within a predetermined period. Moreover, the above-described display may display a portion of the statistical information in which the number of views, the number of gifts, and/or the number of comments is equal to or greater than a predetermined number. For example, only the number of viewers, the number of gifts, and the number of comments above a certain threshold may be displayed as the predetermined numbers on the viewer terminal or the administrator terminal.

また、統計処理部４５は、前記統計情報を用いて、グラフを生成し、表示してよい。例えば、図７は、統計処理部４５が作成したグラフの一例である。特定にアーカイブされたアニメーションについて、横軸の時間の経過に対し、縦軸において、視聴者数７１、ギフト数７３、コメント数７２、が表示されている。かかるグラフによって、あるアーカイブされたアニメーションについて、時間推移に対応する、視聴者数、ギフト数、コメント数、が理解できるため、かかるアニメーションにおける視聴者の全体的な推移の他、ギフト数が増加した時間帯やコメント数が増加した時間帯としてのアニメーションの盛況の度合いを、閲覧者は理解することができる。 Also, the statistical processing unit 45 may generate and display a graph using the statistical information. For example, FIG. 7 is an example of a graph created by the statistical processing section 45. In FIG. For a particular archived animation, the number of viewers 71, the number of gifts 73, and the number of comments 72 are displayed on the vertical axis against the passage of time on the horizontal axis. With such a graph, it is possible to understand the number of viewers, the number of gifts, and the number of comments corresponding to the time transition of an archived animation, so the number of gifts increased in addition to the overall transition of viewers in this animation. The viewer can understand the degree of popularity of the animation as a time period and a time period in which the number of comments increases.

また、前記統計情報において、前記視聴者数、前記ギフト数、及び／又は、前記コメント数が所定の数以上の所定の範囲を特定する情報を表示してもよい。例えば、図８において、コメント数８２が増加した箇所８４が表示される他、ギフト数８３が増加した箇所８５が表示されてよい。本図においては、数値が所定の数以上の所定の範囲を特定する情報として、四角で示したが、かかる表示は種々の者であってよく、要するに、所定の数以上であることを、閲覧者が理解できる態様で表示されればよい。かかる表示により、閲覧者は、アニメーションの表示のうち、どの時間帯において、視聴者数、ギフト数、及び／又は、コメント数、が所定の数以上であるのか、すなわち、盛況となり着目する価値がある部分であるかを理解できる利点がある。 Further, in the statistical information, information specifying a predetermined range in which the number of viewers, the number of gifts, and/or the number of comments is equal to or greater than a predetermined number may be displayed. For example, in FIG. 8, in addition to displaying a location 84 where the number of comments 82 has increased, a location 85 where the number of gifts 83 has increased may be displayed. In this figure, the information for specifying the predetermined range of numbers equal to or greater than the predetermined number is indicated by squares, but such indication may be of various types. It is sufficient if it is displayed in a manner that can be understood by a person. With this display, the viewer can see in which time zone the number of viewers, the number of gifts, and/or the number of comments are greater than or equal to a predetermined number in the display of the animation. It has the advantage of being able to understand what a part is.

また、統計処理部４５は、一のアニメーションのダイジェストを生成してもよい。一のアニメーションのダイジェストは、例えば、上述の視聴者数、ギフト数、及び／又は、コメント数が、所定の数以上の個所の部分を、つないだものであって良い。これにより、かかるダイジェストは、アニメーションの盛況であったと評価できる部分のみから構成され、短い時間で、かかるアニメーションのエッセンスを、視聴者は視聴できる利点がある。この場合、統計処理部４５は、かかるアニメーションにおいて、上述の視聴者数、ギフト数、及び／又は、コメント数が、所定の数以上の個所の部分について、送信部４２を介して、視聴者端末に送信し、受信部においては、かかる部分に基づくアニメーションの生成に必要な情報からアニメーションを生成して、視聴者端末において、ダイジェストとして表示してよい。かかる場合、一のアニメーションに対応するアニメーションの生成に必要な情報のうち、ダイジェストに対応するアニメーションの生成に必要な情報が送信され、受信されることから、通信量が少ない利点がある。他方、かかる構成に代えて、統計処理部４５は、受信部が受信した一のアニメーションの生成に必要な情報と対応する視聴者に関する情報において、上述の視聴者数、ギフト数、及び／又は、コメント数が、所定の数以上の個所の部分についてのみ、生成部においてアニメーションを生成して、視聴者端末において、ダイジェストとして表示してもよい。 Also, the statistical processing unit 45 may generate a digest of one animation. A digest of one animation may be, for example, a combination of parts where the number of viewers, the number of gifts, and/or the number of comments is equal to or greater than a predetermined number. As a result, the digest is composed only of portions of the animation that can be evaluated as successful, and there is an advantage that the viewer can view the essence of the animation in a short time. In this case, the statistical processing unit 45, in the animation, the number of viewers, the number of gifts, and / or the number of comments, the number of viewers, via the transmission unit 42, for the portion of the portion of the predetermined number or more, the viewer terminal , the receiving unit may generate an animation from the information necessary for generating an animation based on such a portion, and display it as a digest on the viewer terminal. In this case, among the information necessary for generating the animation corresponding to one animation, the information necessary for generating the animation corresponding to the digest is transmitted and received, so there is an advantage that the amount of communication is small. On the other hand, instead of such a configuration, the statistical processing unit 45 determines the number of viewers, the number of gifts, and/or Animation may be generated by the generation unit only for portions where the number of comments is equal to or greater than a predetermined number, and may be displayed as a digest on the viewer terminal.

また、上述では、ダイジェストを、一のアニメーションに基づくものとして、説明したが、複数のアニメーションに基づく、ダイジェストであってもよい。この場合、複数のアニメーションのエッセンスを、視聴者は、短い時間で視聴することができる利点がある。この場合においても、同様に、複数のアニメーションにおいて、上述の視聴者数、ギフト数、及び／又は、コメント数が、所定の数以上の個所の部分について、複数のアニメーションをまとめたダイジェストを生成し、視聴者端末において、表示する構成としてよい。この場合のダイジェストの生成は、上述のとおり、ダイジェストに必要なアニメーションの生成に必要な情報のみが送信され、受信されて、生成されてもよいし、ダイジェストに係る複数のアニメーションの生成に必要な情報が送信されたうえで、統計処理部４５において、上述の視聴者数、ギフト数、及び／又は、コメント数が、所定の数以上の個所の部分に対応するアニメーションの生成に必要な情報を用いて、視聴者端末においてアニメーションの生成が行われ、表示されてもよい。 Also, in the above description, the digest is described as being based on one animation, but it may be a digest based on a plurality of animations. In this case, there is an advantage that the viewer can watch the essence of a plurality of animations in a short time. In this case, similarly, in a plurality of animations, a digest summarizing a plurality of animations is generated for portions where the number of viewers, the number of gifts, and/or the number of comments is equal to or greater than a predetermined number. , may be configured to be displayed on the viewer terminal. In this case, the digest may be generated by transmitting and receiving only the information necessary for generating the animation necessary for the digest, as described above, or by generating multiple animations related to the digest. After the information is transmitted, the statistical processing unit 45 obtains the information necessary for generating the animation corresponding to the part where the number of viewers, the number of gifts, and/or the number of comments is equal to or greater than a predetermined number. may be used to generate and display an animation at the viewer terminal.

４．実施形態
４－１．実施形態１
実施形態１は、まずは、第１のモードと第２のモードに着目し、リアルタイムの配信についての実施態様を説明する。本実施形態は、図９のような、配信者端末９１Ａ及び９１Ｂと、サーバ装置９０と、管理者端末９３Ａ、視聴者端末９２Ａ及び９２Ｂ、からなる全体のシステムにおいて処理される動作が一例である。なお、管理者端末は、複数あってもよい。以下、図１０を参照して、本実施形態の流れを説明する。 4. embodiment
4-1. Embodiment 1
In Embodiment 1, first, focusing on the first mode and the second mode, an embodiment of real-time distribution will be described. This embodiment is an example of operations processed in the entire system including distributor terminals 91A and 91B, a server device 90, an administrator terminal 93A, and viewer terminals 92A and 92B, as shown in FIG. . Note that there may be a plurality of administrator terminals. The flow of this embodiment will be described below with reference to FIG.

ステップ１
配信者端末及び管理サーバ内の切替部４１が、第１のモード又は第２のモードのいずれかの情報を、取得する（ステップ００１）。モードの選択に関する情報は、サーバから取得してもよいし、配信者端末から取得してもよいし、視聴者端末から取得してもよい。 step one
The distributor terminal and the switching unit 41 in the management server acquire information on either the first mode or the second mode (step 001). Information about mode selection may be obtained from a server, a distributor's terminal, or a viewer's terminal.

ステップ２
一又は複数の配信者が、アバターとして、アバターオブジェクトを用いて仮想空間上で演じる（ステップ００２）。なお、アバターの演じている途中において、上述のモードに関する情報を取得してもよい。 step 2
One or more distributors act as avatars in the virtual space using avatar objects (step 002). It should be noted that the above-described mode information may be acquired while the avatar is performing.

ステップ３
各配信者に対応付けられている配信者端末は、配信者の演じる状況に係る情報を取得する（ステップ００３）。配信者端末は、上述の種々のセンサーや撮像装置などを利用して、演じる配信者の情報を取得してよい。 step 3
The distributor terminal associated with each distributor acquires information related to the situation in which the distributor plays (step 003). The distributor terminal may acquire information about the distributor who will perform by using the above-described various sensors, imaging devices, and the like.

ステップ４
配信者端末は、モードに対応する情報を、管理サーバに送信する（ステップ００４）。すなわち、第１のモードであれば、配信者の演じるアバターオブジェクトの動きが埋め込まれた映像を送信し、第２のモードであれば、配信者の演じるアバターオブジェクトの動きを表現可能なモーションに係る情報と、かかる配信者が発する音の情報と、を送信してよい。 step 4
The distributor terminal transmits information corresponding to the mode to the management server (step 004). That is, in the first mode, an image in which the movement of the avatar object played by the distributor is embedded is transmitted, and in the second mode, the motion related to the motion that can express the movement of the avatar object played by the distributor is transmitted. Information and information about sounds made by such distributors may be transmitted.

ステップ５
管理サーバは、モードに対応する情報を受信し、視聴者端末に送信可能なように加工し、視聴者端末に、情報を送信し、送信した情報を記憶する（ステップ００５）。なお、管理サーバは、情報を送信した後に記憶してもよいし、情報を記憶した後に送信してもよい。いずれにせよ、視聴者端末に送信した情報を記憶することにより、かかる記憶された情報を送信することで、リアルタイムに送信した内容を再現できる利点がある。 step 5
The management server receives the information corresponding to the mode, processes it so that it can be transmitted to the viewer terminal, transmits the information to the viewer terminal, and stores the transmitted information (step 005). The management server may store the information after transmitting it, or may transmit the information after storing the information. In any case, by storing the transmitted information in the viewer terminal, there is an advantage that the transmitted content can be reproduced in real time by transmitting the stored information.

ステップ６
視聴者端末の切替部４１は、第１のモード又は第２のモードの情報を取得し、また、管理サーバから、モードに対応して受信した情報を受信する（ステップ００６）。すなわち、第１のモードであれば、第１のモードである視聴者端末においては配信者が演じるアバターオブジェクトの埋め込まれた映像を受信し、第２のモードである視聴者端末においては、モーションに係る情報や音などのアニメーションの生成に必要な情報を受信する。 step 6
The switching unit 41 of the viewer terminal acquires the information of the first mode or the second mode, and also receives the information received corresponding to the mode from the management server (step 006). That is, in the first mode, the viewer terminal in the first mode receives the embedded image of the avatar object played by the distributor, and the viewer terminal in the second mode receives the motion. Information necessary for generating animation such as related information and sound is received.

ステップ７
視聴者端末は、第１のモードにおいては、受信した映像を表示し、第２のモードであるにおいては、受信したアニメーションの生成に必要な情報からアニメーションを生成して表示する（ステップ００７）。なお、ここで、視聴者が、映像又はアニメーションに対して、音、コメント、ギフト、などを示すと、かかる情報は、視聴者端末において取得され、視聴者端末から管理サーバに送信され、管理サーバにおいて、かかる音、コメント、ギフトなどを用いて、映像を生成する又はアニメーションの生成に必要な情報の一部として、リアルタイムに、視聴者端末に送信してよい。なお、この場合において、配信中の映像又はアニメーションに対して与えられた、視聴者端末や配信者端末からの音、コメント、ギフトは、それぞれ、音情報、コメント情報、ギフトに係る情報として、管理サーバに、記憶されてよい。この場合、これらの音情報、コメント情報、ギフトに係る情報は、配信中の映像又はアニメーションと関連付けられて、また、付与された時間に係る情報と関連付けられて、管理サーバに記憶されてよい。 step 7
The viewer terminal displays the received video in the first mode, and generates and displays an animation from the received information necessary for generating the animation in the second mode (step 007). Here, when the viewer indicates sound, comment, gift, etc. to the video or animation, such information is acquired at the viewer terminal, transmitted from the viewer terminal to the management server, and sent to the management server. , using such sounds, comments, gifts, etc., may be transmitted to the viewer terminal in real time as part of the information necessary for generating a video or generating an animation. In this case, the sound, comments, and gifts given to the video or animation being distributed from the viewer terminal and the distributor terminal are managed as sound information, comment information, and gift-related information, respectively. may be stored on the server. In this case, the sound information, the comment information, and the gift-related information may be stored in the management server in association with the video or animation being distributed, and also in association with the given time-related information.

なお、上述では、視聴者端末に表示される映像又はアニメーションとなる元の情報が、配信者端末から管理サーバを介して視聴者端末に伝達されているが、管理サーバを介さずに、配信者端末から視聴者端末に伝達する構成が採用されてもよい。かかる場合においては、配信者端末が上述の管理サーバの機能を有してよい。また、複数の配信者端末がある場合、かかる複数の配信者端末が同期を取る等により両方が管理サーバの機能を果たしてもよいし、複数の配信者端末のうちの一の配信者端末などの一部の配信者端末が、管理サーバの機能を果たしてもよい。また、かかる場合において、視聴者端末に伝達されている映像又はアニメーションの生成に必要な情報は、配信者端末に記憶されてもよいし、異なるサーバに記憶されてもよい。いずれにせよ、配信者端末に伝達されている映像又はアニメーションの生成に必要な情報が、何らかの情報処理装置内に記憶されることにより、かかる情報が視聴者端末や管理者端末に送信されることによって、リアルタイムの映像又はアニメーションを、再現できるものであればよい（なお、かかる再現は、ギフト、音、コメント等の追加があってもよい。）。 In the above description, the original information that becomes the video or animation displayed on the viewer terminal is transmitted from the distributor terminal to the viewer terminal via the management server. A configuration of transmitting from the terminal to the viewer terminal may be employed. In such a case, the distributor terminal may have the functions of the management server described above. In addition, when there are multiple distributor terminals, both of the multiple distributor terminals may perform the function of the management server by synchronizing, or one distributor terminal among the multiple distributor terminals may Some distributor terminals may function as the management server. In such a case, the information transmitted to the viewer terminal and necessary for generating the video or animation may be stored in the distributor terminal or in a different server. In any case, the information necessary for generating the video or animation transmitted to the terminal of the distributor is stored in some information processing device, and such information is transmitted to the terminal of the viewer or the terminal of the administrator. can reproduce real-time video or animation (this reproduction may include the addition of gifts, sounds, comments, etc.).

４－２．実施形態２
実施形態２は、主に、第３又は第４のモード、すなわち、過去に配信された映像又はアニメーションを、視聴者端末において視聴する実施形態である。本実施形態の流れを、図１１を用いて説明する。 4-2. Embodiment 2
Embodiment 2 is mainly an embodiment in which the third or fourth mode, that is, the video or animation distributed in the past is viewed on the viewer terminal. The flow of this embodiment will be described with reference to FIG.

ステップ１
視聴者端末は、視聴される番組の情報を、管理サーバに送信する（ステップ００１）。かかる番組は、複数の番組の中から選択されてよい。かかる複数の番組は、上述のとおり、例えば、各番組の、視聴者数、コメント数、ギフト数などの観点でランキングされたものから、選択されてもよい。視聴者端末において、視聴可能な番組の候補が提供されるために、予め、管理サーバから、視聴可能な一又は複数の番組を示す情報が、視聴者端末に提供され、視聴者端末において、かかる視聴可能な一又は複数の番組が表示されてよい。また、管理サーバから視聴者端末への視聴可能な一又は複数の番組を示す情報の送信は、視聴者端末からの要請に対応して送信してもよいし、視聴者端末からの要請なく送信してもよい。なお、番組は、過去のアニメーション又は映像に代えて又は加えて、現在配信中のリアルタイムの映像やアニメーションを含んでよい。 step one
The viewer terminal transmits information about the program to be viewed to the management server (step 001). Such programs may be selected from among a plurality of programs. Such a plurality of programs may be selected from, for example, those ranked in terms of the number of viewers, the number of comments, the number of gifts, etc. of each program, as described above. In order for the viewer terminal to be provided with viewable program candidates, information indicating one or more viewable programs is provided to the viewer terminal in advance from the management server. One or more programs available for viewing may be displayed. Information indicating one or more viewable programs from the management server to the viewer terminal may be transmitted in response to a request from the viewer terminal, or may be transmitted without a request from the viewer terminal. You may It should be noted that the program may include real-time video or animation currently being delivered instead of or in addition to past animation or video.

ステップ２
視聴者端末及び管理サーバは、第３又は第４のモードの情報を、取得する（ステップ００２）。モードの選択に関する情報は、管理サーバから取得してもよいし、配信者端末から取得してもよいし、視聴者端末から取得してもよい。また、モードの情報は、上述のステップ１の前に取得してもよい。 step 2
The viewer terminal and management server acquire information on the third or fourth mode (step 002). Information about mode selection may be acquired from the management server, may be acquired from the distributor terminal, or may be acquired from the viewer terminal. Also, the mode information may be obtained before step 1 above.

ステップ３
管理サーバは、モードに対応する情報を、視聴者端末に送信する（ステップ００３）。すなわち、第３のモードにおいては、過去に配信された、かかる一又は複数の配信者が演じるアバターオブジェクトの埋め込まれた映像を送信し、第４のモードにおいては、過去に配信されたモーションに係る情報や音などのアニメーションの生成に必要な情報を送信する。なお、第３のモードにおいて、かかる映像は、当初配信された映像と全く同一であってもよいし、当初配信された映像に対して、その後、音、ギフト、コメントなどが提供された場合、かかる提供された、音、ギフト、コメントを含んで新たに生成された映像であってもよい。この場合、音、ギフト、コメントなどの点において、当初配信された映像と異なり、その後の視聴によって追加された音、コメント、ギフト、が追加されたものであるが、当初配信の後の視聴者の反応も加味した映像となる利点がある。また、同様に、第４のモードにおいて、かかるアニメーションの生成に必要な情報は、当初配信されたアニメーションの生成に必要な情報と全く同一であってもよいし、当初表示されたアニメーションに対して、その後、音、ギフト、コメントなどが提供された場合、かかる提供された、音、ギフト、コメントについての情報が追加されたアニメーションの生成に必要な情報であってもよい。この場合、音、ギフト、コメントなどの点において、当初表示されたアニメーションと異なり、その後の視聴によって追加された音、コメント、ギフト、が追加されたものであるが、当初配信の後の視聴者の反応も加味したアニメーションとなる利点がある。すなわち、この場合、アニメーションの生成に必要な情報として、第１ギフトに係る情報、及び、第２ギフトに係る情報、を含むものであってよい。 step 3
The management server transmits information corresponding to the mode to the viewer terminal (step 003). That is, in the third mode, the video embedding the avatar object played by one or more distributors distributed in the past is transmitted, and in the fourth mode, the motion related to the motion distributed in the past is transmitted. Sends information, sounds, and other information needed to generate animations. In the third mode, the video may be exactly the same as the video that was originally distributed, or if the video that was originally distributed is subsequently provided with sound, gifts, comments, etc., It may be a newly generated image including such provided sounds, gifts, and comments. In this case, in terms of sound, gift, comment, etc., the video is different from the originally distributed video, and the sound, comment, gift, etc. added by subsequent viewing are added, but the viewer after the initial distribution There is an advantage that it becomes an image that also takes into account the reaction of Similarly, in the fourth mode, the information necessary for generating the animation may be exactly the same as the information necessary for generating the originally distributed animation, or the information necessary for generating the originally displayed animation. , and then, if a sound, gift, comment, etc. is provided, the information about the provided sound, gift, comment, etc. may be the information necessary for generating the animation to which the information is added. In this case, unlike the originally displayed animation in terms of sound, gift, comment, etc., the sound, comment, gift, etc. added by subsequent viewing are added, but the viewer after the initial delivery There is an advantage that it becomes an animation that also takes into account the reaction of That is, in this case, the information necessary for generating the animation may include information regarding the first gift and information regarding the second gift.

ステップ４
視聴者端末は、第３のモードの場合、受信した映像を表示し、第４のモードの場合、受信したアニメーションの生成に必要な情報からアニメーションを生成して表示する（ステップ００４）。ここで、上述のとおり、第４のモードにおいては、アニメーションの生成に必要な情報として、第２ギフトに係る情報を、含んでもよいし、含まなくてもよい。第2ギフトに係る情報を含む場合、当初のアニメーションの表示の後にアニメーションを視聴した視聴者の反応もアニメーション内に追加される利点がある。すなわち、本発明の一実施形態は、コンピュータプログラムであって、一又は複数のプロセッサにより実行されることにより、第１アニメーションの生成に必要な情報として、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、過去に配信された、音と、前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、を受信し、前記第１アニメーションの生成に必要な情報を用いて、第１アニメーションを生成し、前記第１アニメーションを表示する、ことを特徴とするコンピュータプログラムであってよい。 step 4
The viewer terminal displays the received video in the third mode, and generates and displays an animation from the received information necessary for generating the animation in the fourth mode (step 004). Here, as described above, in the fourth mode, information related to the second gift may or may not be included as the information necessary for animation generation. When the information about the second gift is included, there is an advantage that the reaction of the viewer who watched the animation after the display of the original animation is also added to the animation. That is, an embodiment of the present invention is a computer program, which is executed by one or a plurality of processors to generate information necessary for generating a first animation, including information related to an avatar object related to a distributor terminal and Information related to motion distributed in the past, capable of expressing the movement of the avatar object, and the past provided from the viewer terminal viewing the animation expressing the movement of the avatar object by being combined. Receiving information related to a first gift that has been delivered, sound that has been delivered in the past, and information related to a second gift that is different from the information related to the first gift, and generating the first animation The computer program may be characterized by generating a first animation and displaying the first animation using necessary information.

ステップ５
視聴者が、過去に配信され、現在視聴しているアニメーションに対して、ギフトを提供するという操作をした場合、ギフトを提供するという操作がされた視聴者端末は、かかるギフトが提供される情報を取得し、受信しているアニメーションの生成に必要な情報の一部としての、第２ギフトに係る情報として用いて、アニメーションを生成し、ギフトを提供するという操作がされた視聴者端末に表示する（ステップ００５）。なお、この例では、ギフトを提供するという操作がされた視聴者端末においては、かかるギフトに係る情報が、管理サーバを介さずに、直にギフトを提供するという操作がされた視聴者端末内において、アニメーションの生成に必要な情報として、アニメーションの生成に使用される態様を説明しているが、かかるギフトに係る情報が一旦管理サーバに送信され、管理サーバからかかるギフトを提供するという操作がされた視聴者端末にアニメーションの生成に必要な情報の一部として送信されるという通信の経路を介した第２ギフトに係る情報を用いて、ギフトを提供するという操作がされた視聴者端末がアニメーションを生成し、表示する構成を採用してもよい。前者の場合、後者と比べて遅延が少なくギフトを表示できる利点がある。他方、後者の場合、以下の例のような、他の視聴者端末からのギフトと、同じように扱うことができる利点がある。すなわち、視聴者がギフトを提供するという操作をした場合、視聴者によってギフトを提供するという操作がされた視聴者端末Ａは、ギフトを提供されるという情報を取得し、かかる視聴者端末Ａはかかるギフトが提供されるという情報を管理サーバに送信し、かかる情報を取得した管理サーバは、アニメーションの生成に必要な情報の一部としての第２ギフトに係る情報として、ギフトを提供するという操作がされた視聴者端末Ａとは異なる視聴者端末Ｂに送信し、かかる視聴者端末Ｂにおいてかかる第２ギフトに係る情報を含むアニメーションの生成に必要な情報を用いてアニメーションを生成し、かかる視聴者端末Ｂにおいてアニメーションを表示するという例である。この場合、視聴者端末Ａにおいて提供されたギフトが、視聴者端末Ｂにおいて、表示できることとなる。なお、上述では、ギフトのみ説明したが、音やコメントについても、同様である。 step 5
When a viewer performs an operation to provide a gift to an animation that was distributed in the past and is currently being viewed, the viewer terminal that has performed the operation to provide the gift will receive information that the gift is provided. is used as information related to the second gift as part of the information necessary to generate the received animation, generate the animation, and display it on the viewer terminal that has been operated to provide the gift. (step 005). In this example, in the viewer terminal operated to provide the gift, the information related to the gift is stored in the viewer terminal operated to provide the gift directly without going through the management server. describes a mode in which the information necessary for generating the animation is used to generate the animation. The viewer terminal operated to provide the gift using the information related to the second gift via the communication path that is transmitted as a part of the information necessary for generating the animation to the viewer terminal that was sent to the viewer terminal An animation may be generated and displayed. The former has the advantage that the gift can be displayed with less delay than the latter. On the other hand, the latter case has the advantage of being able to be handled in the same way as gifts from other viewer terminals, as in the example below. That is, when the viewer performs an operation to provide a gift, the viewer terminal A that has been operated by the viewer to provide the gift acquires the information that the gift will be provided, and the viewer terminal A An operation of transmitting information that the gift will be provided to the management server, and the management server that has obtained the information provides the gift as information related to the second gift as part of the information necessary for generating the animation. is sent to a viewer terminal B different from the viewer terminal A where the second gift was received, and the animation is generated at the viewer terminal B using the information necessary for generating the animation including the information related to the second gift, and the viewing is performed. This is an example of displaying an animation on the user terminal B. FIG. In this case, the gift provided by the viewer terminal A can be displayed on the viewer terminal B. In the above description, only gifts have been described, but the same applies to sounds and comments.

このように、本実施形態においては、視聴者は、過去に配信された映像やアニメーションを視聴できる利点がある。また、視聴者は、過去に配信された映像やアニメーションであったとしても、かかる映像やアニメーションに対して、自らのギフト、コメント、音などの操作をした結果が、視聴している映像やアニメーションに反映されることにより、過去のアーカイブであったとしても、リアルタイムに視聴している気分を得られる利点がある。これにより、配信者の演じる時間帯と同時間帯の視聴に加えて、番組の継続的に視聴される可能性が増加し、番組の価値が向上する利点がある。また、かかるアーカイブに対する視聴において追加されたギフト、コメント、音等が記憶されることにより、配信者も、当初の映像やアニメーションのみならず、その後の再配信における視聴者のレスポンスを得ることができる利点がある。 Thus, in this embodiment, the viewer has the advantage of being able to view videos and animations that have been distributed in the past. In addition, even if the video or animation has been distributed in the past, the viewer may not be able to use the video or animation as a result of manipulating his own gifts, comments, sounds, etc. By being reflected in , there is an advantage that even if it is an archive of the past, you can get the feeling of watching it in real time. As a result, in addition to being viewed in the same time slot as the broadcaster's performance, there is an increased possibility that the program will be viewed continuously, which has the advantage of improving the value of the program. In addition, by storing the gifts, comments, sounds, etc. added when viewing the archive, the distributor can obtain not only the original video and animation, but also the viewer's response in subsequent redistributions. There are advantages.

なお、上述の一又は複数の番組に代えて、又は、加えて、一又は複数の番組のダイジェストが選択可能とされてもよい。かかるダイジェストの場合においても、同様に、映像又はアニメーションの生成に必要な情報が、管理サーバから視聴者端末に送信され、視聴者端末において映像の表示又はアニメーションの生成と表示がされてよい。 It should be noted that instead of or in addition to the one or more programs described above, digests of one or more programs may be selectable. In the case of such a digest, similarly, information necessary for generating an image or animation may be transmitted from the management server to the viewer terminal, and the image or animation may be generated and displayed on the viewer terminal.

また、上述のステップ２において、第３のモードと第４のモードを説明したが、番組として、配信者がリアルタイムで演じている映像やアニメーションが選択された場合は、第３のモード又は第４のモードに代えて、第１のモード又は第２のモードであってよい。すなわち、本願発明の一実施形態は、第１アニメーションの生成に必要な情報として、配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、過去に配信された、音と、前記第１ギフトに係る情報と異なる、第２ギフトに係る情報と、を受信し、前記第１アニメーションの生成に必要な情報を用いて、第１アニメーションを生成し、前記第１アニメーションを表示する、ことを特徴とするコンピュータプログラムであって、リアルタイムに配信されている映像に係る第２アニメーションの生成に必要な情報を受信し、前記第２アニメーションの生成に必要な情報を用いて、第２アニメーションを生成し、前記第２アニメーションを表示する、コンピュータプログラムであってよい。 Also, in the above step 2, the third mode and the fourth mode have been explained, but if a video or animation performed in real time by the distributor is selected as the program, the third mode or the fourth mode may be used. mode may be the first mode or the second mode. That is, in one embodiment of the present invention, the motion of the avatar object can be expressed by synthesizing the information necessary for generating the first animation with the information related to the avatar object related to the distributor terminal. Distributed information related to motion, information related to the first gift distributed in the past, which is given from a viewer terminal viewing animation expressing the movement of the avatar object, and distributed in the past, receiving a sound and information relating to a second gift different from the information relating to the first gift, generating a first animation using the information necessary for generating the first animation, and generating the first animation; receiving information necessary for generating a second animation related to video being distributed in real time, and using the information necessary for generating the second animation , generating a second animation and displaying said second animation.

４－３．実施形態３
実施形態３は、主に、第３又は第４のモード、すなわち、過去に配信された映像又はアニメーションを、管理者端末において視聴する実施形態である。本実施形態の流れを、図１２を用いて説明する。 4-3. Embodiment 3
Embodiment 3 is mainly an embodiment in which the third or fourth mode, that is, the video or animation distributed in the past is viewed on the administrator terminal. The flow of this embodiment will be described with reference to FIG.

ステップ１
管理者端末は、視聴される番組の情報を、管理サーバに送信する（ステップ００１）。具体的な構成は、視聴者端末として説明した上述の実施形態２におけるステップ１が、管理者端末に置き換えられたものであってよい。 step one
The manager terminal transmits information about the program to be viewed to the management server (step 001). A specific configuration may be such that step 1 in the above-described second embodiment, which is described as a viewer terminal, is replaced with an administrator terminal.

ステップ２
管理サーバ及び管理者端末は、第３又は第４のモードの情報を、取得する（ステップ００２）モードの選択に関する情報は、管理サーバから取得してもよいし、配信者端末から取得してもよいし、視聴者端末から取得してもよい。第１のモード又は第２のモードに合わせて、第１のモードである視聴者端末においては配信者が演じるアバターオブジェクトの埋め込まれた映像を受信し、第２のモードである視聴者端末においては、モーションに係る情報や音などのアニメーションの生成に必要な情報を受信する（ステップ００２）。 step 2
The management server and administrator terminal acquire information on the third or fourth mode (step 002). Information on mode selection may be acquired from the management server or from the distributor terminal. Alternatively, it may be acquired from the viewer terminal. In accordance with the first mode or the second mode, the viewer terminal in the first mode receives the embedded image of the avatar object played by the distributor, and the viewer terminal in the second mode receives , information related to motion and information necessary for generating animation such as sound (step 002).

ステップ３
管理者端末は、第４のモードの場合において、アニメーションの生成に必要な情報のうち、アニメーションの生成に使用される情報を示す情報を選択し、かかる情報を、管理サーバに送信する（ステップ００３）。例えば、モーションに係る情報のみ、音のみ、ギフトに係る情報のみ、コメントのみ、これらの一部、又は、これらの全部、などであってよい。このような対応する情報のみが、アニメーションの生成に必要な情報として使用され、アニメーションが生成されることから、管理者端末の閲覧者は、アニメーションが生成される際に使用される情報を絞って、検討できる利点がある。例えば、上述のとおり、モーションに係る情報のみを選択した場合、管理者端末においては、モーションに係る情報を管理サーバから受信し、管理者端末において、モーションに係る情報に対応するアバターオブジェクトの動きを生成し、アバターオブジェクトについてのアニメーションを生成できる。これにより、ギフト、音、コメントなどはアニメーションの一部とならずに、これらの表示に惑わされずに、アバターオブジェクトの動きを検討できる利点がある。 step 3
In the case of the fourth mode, the administrator terminal selects information indicating information used for animation generation from among the information necessary for animation generation, and transmits this information to the management server (step 003). ). For example, only motion information, sound only, gift information only, comments only, some of them, or all of them may be included. Only such corresponding information is used as the information necessary for generating the animation, and the animation is generated. , there are advantages that can be considered. For example, as described above, when only information related to motion is selected, the administrator terminal receives the information related to motion from the management server, and the administrator terminal determines the movement of the avatar object corresponding to the information related to motion. can generate animations for avatar objects. This has the advantage that gifts, sounds, comments, etc. do not become part of the animation, and the movement of the avatar object can be considered without being distracted by these displays.

ステップ４
管理サーバは、管理者端末に対して、第３のモードの場合、映像を送信し、第４のモードの場合、上述の選択されたアニメーションの生成に使用される情報を示す情報を受信し、かかる示す情報に対応するアニメーションの生成に必要な情報を送信する（ステップ００４）。なお、上述のステップ３と４において、アニメーションの生成に使用される情報を示す情報は、第４のモードの機能として説明したが、第３のモードにおいて付加された機能であってもよい。この場合、第３のモードにおける映像は、選択された情報に基づいて管理サーバ内で生成された映像であってよい。また、実施形態３のように第２ギフトに係る情報を管理サーバが受信している場合、すなわち、当初のアニメーションや映像において表示されていないギフトに係る情報が当初のアニメーション又は映像に与えられている場合、ギフトが選択されている場合には、かかる第２ギフトに係る情報を用いて映像を生成して送信する、又は、かかる第２ギフトに係る情報をアニメーションの生成に必要な情報の一つとして送信する、よう構成してよい。また、ここではギフトのみを説明したが、コメントや、音についても、同様であって良い。 step 4
The management server transmits the video to the administrator terminal in the third mode, and receives information indicating the information used to generate the selected animation in the fourth mode, Information necessary for generating animation corresponding to the indicated information is transmitted (step 004). In steps 3 and 4 described above, the information indicating the information used for animation generation has been described as a function of the fourth mode, but may be a function added in the third mode. In this case, the video in the third mode may be video generated within the management server based on the selected information. Further, when the management server receives the information on the second gift as in the third embodiment, that is, when the information on the gift that is not displayed in the initial animation or video is given to the initial animation or video. If the gift is selected, the video is generated and transmitted using the information related to the second gift, or the information related to the second gift is used as one of the information necessary to generate the animation may be configured to be sent as one. Also, only the gift has been explained here, but comments and sounds may be the same.

ステップ５
視聴者端末は、第３のモードの場合、受信した映像を表示し、第４のモードの場合、受信したアニメーションの生成に必要な情報からアニメーションを生成して表示する（ステップ００５）。なお、かかる映像又はアニメーションの表示中においても、管理者端末は、上述のアニメーションの生成に必要な情報を選択してよく、その場合、かかる選択された情報を示す情報が管理サーバに送信されて、かかる情報に基づいて、アニメーションの生成に必要な情報が選択されてもよいし、かかる選択された情報を示す情報に基づいて視聴者端末においてアニメーションの生成に必要な情報が選択されてアニメーションが生成されて表示されてもよい。 step 5
The viewer terminal displays the received video in the third mode, and generates and displays an animation from the received information necessary for generating the animation in the fourth mode (step 005). Note that the administrator terminal may select information necessary for generating the above-described animation even while the video or animation is being displayed. In this case, information indicating the selected information is transmitted to the management server. Information necessary for animation generation may be selected based on such information, and animation may be generated by selecting information necessary for animation generation at the viewer terminal based on information indicating the selected information. may be generated and displayed.

上述のように、管理者端末において、第１又は第２モードのような過去に配信された映像やアニメーションが、第３又は第４モードとして表示できることにより、過去に表示された映像やアニメーションを確認、検討できる利点がある。また、表示される映像やアニメーションに使用される情報を選択可能であることにより、他の情報に紛らわされず、選択された情報に集中して、映像やアニメーションを確認、検討できる利点がある。 As described above, images and animations distributed in the past in the first or second mode can be displayed in the third or fourth mode on the administrator terminal, so that the images and animations displayed in the past can be confirmed. , there are advantages that can be considered. In addition, by being able to select the information used in the displayed images and animations, there is an advantage that you can check and examine the images and animations by concentrating on the selected information without being distracted by other information. be.

上述においては、主に、アバターが動作する仮想空間を対象とした、アニメーションや映像を説明したが、アバターが演じる場は、特定の構成を含む仮想空間であってもよい。 In the above description, animations and images were mainly described for the virtual space in which the avatar operates, but the place where the avatar performs may be a virtual space with a specific configuration.

例えば、特定の構成を含む仮想空間としては、ゲーム画面を含む仮想空間であってもよい。ゲーム画面を含む仮想空間の場合、ゲームに対してアバターが説明などをできる利点がある。また、第１及び第２モードにおいて、ゲームがリアルタイムに進行する場合に、アバターがゲームの実況中継をできる利点がある。この場合、ゲーム画面は、配信者がプレイするゲームであってもよいし、配信者以外の者がプレイするゲームのゲーム画面であってもよい。配信者がプレイするゲーム画面の場合、配信者端末から、かかるゲーム画面も送信され、管理サーバを介して又は介さずに、視聴者端末に伝達されてよい。配信者以外がプレイするゲーム画面の場合、かかるプレイする者の情報処理装置から、かかるゲーム画面が送信され、管理サーバを介して又は介さずに、視聴者端末に伝達されてよい。これらの場合において、上述の第２及び第４のモードにおいては、アニメーションの生成に必要な情報として、配信者又は配信者以外の者がプレイするゲーム画面が含まれてよく、かかる配信者又は配信者以外の者がプレイするゲーム画面を用いて視聴者端末においてアニメーションが生成されてよく、かかるアニメーションは視聴者端末において表示されてよい。また、第１及び第３のモードにおいては、ゲーム画面を含む映像が管理サーバや配信者端末において生成されてよく、かかる映像は、視聴者端末に送信され、視聴者端末においてかかるゲーム画面を含む映像が表示されてよい。第１乃至第４のモードの切り替えなどについては、上述と同様であって良い。 For example, the virtual space including a specific configuration may be a virtual space including a game screen. In the case of a virtual space including a game screen, there is an advantage that the avatar can explain the game. Also, in the first and second modes, there is an advantage that the avatar can broadcast the game live when the game progresses in real time. In this case, the game screen may be a game played by the distributor, or may be a game screen of a game played by someone other than the distributor. In the case of a game screen played by a distributor, the game screen may also be transmitted from the distributor terminal and transmitted to the viewer terminal with or without the management server. In the case of a game screen played by someone other than the distributor, the game screen may be transmitted from the player's information processing device and transmitted to the viewer terminal with or without the management server. In these cases, in the above-described second and fourth modes, the information necessary for animation generation may include a game screen played by the distributor or a person other than the distributor. An animation may be generated at the viewer terminal using a game screen played by a person other than the user, and such animation may be displayed at the viewer terminal. In addition, in the first and third modes, a video including a game screen may be generated in the management server or the distributor terminal, and such video is transmitted to the viewer terminal, and the viewer terminal includes the game screen. A video may be displayed. Switching among the first to fourth modes may be the same as described above.

また、特定の構成を含む仮想空間としては、実世界を撮影したものを含む仮想空間であってもよい。実世界を撮影したものを含む仮想空間の場合、あたかも、アバターが実世界の事象の説明や実世界の特定の個所を訪問する状況を実現できる利点がある。また、第１及び第２モードにおいて、実世界の撮影がリアルタイムに進行する場合、実世界の事件などの進行状況をアバターが実況中継できる利点がある。この場合、実世界を撮影したものが、アニメーションの生成に必要な情報に含まれてよい。実世界を撮影したものは、自然を撮影したものでもよいし、都会を撮影したものでもよく、その対象に限定はなくてよい。かかる撮影したものは、予め撮影されてもよいし、リアルタイムに撮影されてもよい。これらの撮影されたものは、管理サーバを介して又は介さずに、視聴者端末に送信されてよい。上述の第２及び第４のモードにおいては、アニメーションの生成に必要な情報として、かかる撮影されたものが含まれてよく、かかる撮影されたものを用いて視聴者端末においてアニメーションが生成されてよく、かかるアニメーションは視聴者端末において表示されてよい。また、第１及び第３のモードにおいては、かかる撮影されたものを含む映像が管理サーバや配信者端末において生成されてよく、かかる映像は、視聴者端末に送信され、視聴者端末においてかかる撮影されたものを含む映像が表示されてよい。第１乃至第４のモードの切り替えなどについては、上述と同様であって良い。 Also, the virtual space including a specific configuration may be a virtual space including a photograph of the real world. In the case of a virtual space containing a photograph of the real world, there is an advantage that it is possible to realize a situation in which the avatar explains phenomena in the real world and visits specific places in the real world. In addition, in the first and second modes, when real-world shooting progresses in real time, there is an advantage that the avatar can relay the progress of real-world incidents. In this case, the information necessary for generating the animation may include a photograph of the real world. A photograph of the real world may be a photograph of nature or a photograph of a city, and there is no limitation to the subject. Such photographed images may be photographed in advance or may be photographed in real time. These shots may be sent to the viewer terminal with or without the management server. In the above-described second and fourth modes, the information necessary for animation generation may include such photographed information, and the viewer terminal may use such photographed information to generate animation. , such animation may be displayed at the viewer terminal. In addition, in the first and third modes, a video including such shots may be generated in the management server or the distributor terminal, and such video is transmitted to the viewer terminal, and the shot is taken in the viewer terminal. A video containing what was done may be displayed. Switching among the first to fourth modes may be the same as described above.

本願書類で説明されたシステム及び情報処理は、ソフトウェア、ハードウェア又はこれらの組み合わせによっても実施されてよく、またかかるシステム及び情報処理の一部又は全部は、処理・手順をコンピュータプログラムとして実装し、各種のコンピュータに実行させられてよく、またこれらのコンピュータプログラムは、記憶媒体に記憶されてよい。また、これらのプログラムは、非一過性又は一時的な記憶媒体に記憶されてよい。 The systems and information processing described herein may also be implemented by software, hardware, or a combination thereof, and some or all of such systems and information processing may implement processes and procedures as computer programs, These computer programs may be executed by various computers, and may be stored in storage media. Also, these programs may be stored in a non-transitory or temporary storage medium.

本願書類で説明したものは、本願書類で説明されたものに限られず、本願書類で説明された種々の技術上の利点や構成を有する種々の技術的思想の範囲内で、種々の例に適用できることはいうまでもない。 What is described in this document is not limited to what is described in this document, and can be applied to various examples within the scope of various technical ideas having various technical advantages and configurations described in this document. It goes without saying that we can.

１ システム
１０ 通信網
２０（２０Ａ～２０Ｃ） サーバ装置
３０（３０Ａ～３０Ｃ） 端末装置
２１（３１） 演算装置
２２（３２） 主記憶装置
２３（３３） 入出力インタフェイス
２４（３４） 入力装置
２５（３５） 補助記憶装置
２６（３６） 出力装置
４１ 切替部４１
４２ 送信部４２
４３ 受信部４３
４４ 生成部４４
４５ 統計処理部４５
９０ サーバ装置
９１Ａ、９１Ｂ 配信者端末
９２Ａ、９２Ｂ 視聴者端末
９３Ａ 管理者端末 1 System 10 Communication Network 20 (20A to 20C) Server Device 30 (30A to 30C) Terminal Device 21 (31) Arithmetic Device 22 (32) Main Storage Device 23 (33) Input/Output Interface 24 (34) Input Device 25 ( 35) Auxiliary storage device 26 (36) Output device 41 Switching unit 41
42 transmitter 42
43 Receiving unit 43
44 generator 44
45 statistical processing unit 45
90 server device 91A, 91B distributor terminal 92A, 92B viewer terminal 93A administrator terminal

Claims (28)

コンピュータプログラムであって、
一又は複数のプロセッサにより実行されることにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
前記第１ギフトに係る情報と異なり、過去に配信された当初のアニメーションの配信以降に付与された第２ギフトに係る情報と、
を受信し、
前記第１アニメーションの生成に必要な情報を用いて、第１アニメーションを生成し、 前記第１アニメーションを表示し、
前記過去に配信された第１アニメーションに係る視聴者に関する情報を受信し、
前記視聴者に関する情報は、過去の配信時におけるギフト数、及び／又は、コメント数を含む、
ことを特徴とするコンピュータプログラム。 A computer program,
by being executed by one or more processors,
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
Unlike the information related to the first gift, information related to the second gift given after the delivery of the original animation delivered in the past ;
receive the
generating a first animation using information necessary for generating the first animation; displaying the first animation;
Receive information about viewers related to the first animation delivered in the past,
The information about the viewer includes the number of gifts and / or the number of comments at the time of past distribution,
A computer program characterized by: 前記第１アニメーションに対応する映像に切り替える旨の情報を取得し、
前記映像を受信し、
前記映像を表示する、
ことを特徴とする請求項１に記載のコンピュータプログラム。 Acquiring information to the effect of switching to the video corresponding to the first animation,
receiving the video;
displaying said video;
A computer program according to claim 1, characterized in that: 前記過去に配信された第１アニメーションに係る視聴者に関する情報を受信し、Receive information about viewers related to the first animation delivered in the past,
前記視聴者に関する情報は、少なくとも、前記ギフト数及び前記コメント数を含み、The information about the viewer includes at least the number of gifts and the number of comments,
前記視聴者に関する情報を用いて、過去の配信時における少なくとも前記ギフト数及び前記コメント数を時間推移に対応させたグラフを表示する、Using the information about the viewer, displaying a graph showing at least the number of gifts and the number of comments at the time of past distribution in correspondence with time transition;
ことを特徴とする請求項１に記載のコンピュータプログラム。A computer program according to claim 1, characterized in that: 前記グラフは、前記ギフト数及び前記コメント数が、所定の数以上の部分を特定して表示する、wherein the graph identifies and displays a portion where the number of gifts and the number of comments are equal to or greater than a predetermined number;
請求項３に記載のコンピュータプログラム。4. A computer program as claimed in claim 3. 前記過去に配信された第１アニメーションに係る視聴者に関する情報を受信し、Receive information about viewers related to the first animation delivered in the past,
前記視聴者に関する情報は、少なくとも、視聴者数、ギフト数、及び／又は、コメント数を含み、The information about the viewer includes at least the number of viewers, the number of gifts, and / or the number of comments,
前記視聴者数、前記ギフト数、及び／又は、前記コメント数が所定の数以上の箇所のみの前記第１アニメーションのダイジェストを表示する、Displaying a digest of the first animation only at locations where the number of viewers, the number of gifts, and/or the number of comments is equal to or greater than a predetermined number;
請求項１乃至４のいずれか一項に記載のコンピュータプログラム。5. A computer program according to any one of claims 1-4. リアルタイムに配信されている映像に係る第２アニメーションの生成に必要な情報を受信し、
前記第２アニメーションの生成に必要な情報を用いて、第２アニメーションを生成し、 前記第２アニメーションを表示する、
請求項１又は２に記載のコンピュータプログラム。 Receive information necessary for generating the second animation related to the video being distributed in real time,
generating a second animation using information necessary for generating the second animation, and displaying the second animation;
3. A computer program according to claim 1 or 2. 前記第２ギフトに係る情報は、前記第１アニメーションを表示する視聴者端末装置から入力されたギフトに基づく情報を含む、
請求項１乃至４のいずれか１項に記載のコンピュータプログラム。 The information related to the second gift includes information based on the gift input from the viewer terminal device displaying the first animation,
5. A computer program according to any one of claims 1-4. 前記第２ギフトに係る情報は、前記第１アニメーションを表示する視聴者端末装置とは異なる視聴者端末装置から入力されたギフトに基づく情報を含む、
請求項１乃至５のいずれか１項に記載のコンピュータプログラム。 The information related to the second gift includes information based on the gift input from a viewer terminal device different from the viewer terminal device that displays the first animation,
A computer program according to any one of claims 1-5. 前記視聴者に関する情報は、過去の配信時における視聴者数を含む、
ことを特徴とする請求項１乃至８のいずれか一項に記載のコンピュータプログラム。 The information about the viewer includes the number of viewers at the time of past distribution,
9. A computer program as claimed in any one of claims 1 to 8, characterized in that: 前記視聴者に関する情報を用いて、過去に配信された前記第１アニメーションに係る視聴者に関する統計情報を生成する、
ことを特徴とする請求項１乃至９のいずれか１項に記載のコンピュータプログラム。 Using the information about the viewer, generating statistical information about the viewer related to the previously delivered first animation;
10. A computer program as claimed in any one of claims 1 to 9, characterized in that: 前記プロセッサが、中央処理装置（ＣＰＵ）、マイクロプロセッサ又はグラフィックスプロセッシングユニット（ＧＰＵ）である、
請求項１乃至１０のいずれか１項に記載のコンピュータプログラム。 wherein the processor is a central processing unit (CPU), microprocessor or graphics processing unit (GPU);
Computer program according to any one of claims 1 to 10 . 前記プロセッサが、スマートフォン、タブレット、携帯電話又はパーソナルコンピュータに搭載される、
請求項１乃至１１のいずれか１項に記載のコンピュータプログラム。 The processor is installed in a smartphone, tablet, mobile phone or personal computer,
A computer program according to any one of claims 1-11 . コンピュータプログラムであって、
一又は複数のプロセッサにより実行されることにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
前記第１ギフトに係る情報と異なり、過去に配信された当初のアニメーションの配信以降に付与された第２ギフトに係る情報と、
を送信し、
前記過去に配信された第１アニメーションに係る視聴者に関する情報を送信し、
前記視聴者に関する情報は、過去の配信時におけるギフト数、及び／又は、コメント数を含む、
ことを特徴とするコンピュータプログラム。 A computer program,
by being executed by one or more processors,
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
Unlike the information related to the first gift, information related to the second gift given after the delivery of the original animation delivered in the past;
and send
Sending information about viewers related to the first animation delivered in the past,
The information about the viewer includes the number of gifts and / or the number of comments at the time of past distribution,
A computer program characterized by: 前記第１アニメーションに対応する映像に切り替える旨の情報を取得し、
前記映像を送信する、
ことを特徴とする請求項１３に記載のコンピュータプログラム。 Acquiring information to the effect of switching to the video corresponding to the first animation,
transmitting said video;
14. A computer program as claimed in claim 13 , characterized by: 前記プロセッサが、中央処理装置（ＣＰＵ）、マイクロプロセッサ又はグラフィックスプロセッシングユニット（ＧＰＵ）である、wherein the processor is a central processing unit (CPU), a microprocessor or a graphics processing unit (GPU);
請求項１３乃至１４のいずれか１項に記載のコンピュータプログラム。15. A computer program according to any one of claims 13-14. 前記プロセッサが、演算機能を有する、the processor has computing capabilities,
請求項１３乃至１５のいずれか１項に記載のコンピュータプログラム。16. A computer program according to any one of claims 13-15. 一又は複数のプロセッサを具備し、
前記プロセッサが、コンピュータにより読み取り可能な命令を実行することにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
前記第１ギフトに係る情報と異なる、過去に配信された当初のアニメーションの配信以降に付与された第２ギフトに係る情報と、
を送信し、
前記過去に配信された第１アニメーションに係る視聴者に関する情報を送信し、
前記視聴者に関する情報は、過去の配信時におけるギフト数、及び／又は、コメント数を含む、
ことを特徴とするサーバ装置。 comprising one or more processors;
The processor executing computer readable instructions to
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
Information about a second gift that is different from the information about the first gift and that is given after the distribution of the original animation that was distributed in the past ;
and send
Sending information about viewers related to the first animation delivered in the past,
The information about the viewer includes the number of gifts and / or the number of comments at the time of past distribution,
A server device characterized by: 前記第１アニメーションに係る映像に切り替える旨の情報を取得し、
前記映像を送信する、
ことを特徴とする請求項１７に記載のサーバ装置。 Acquiring information to the effect of switching to the video related to the first animation,
transmitting said video;
18. The server device according to claim 17 , characterized by: 前記プロセッサが、中央処理装置（ＣＰＵ）、マイクロプロセッサ又はグラフィックスプロセッシングユニット（ＧＰＵ）である、wherein the processor is a central processing unit (CPU), microprocessor or graphics processing unit (GPU);
請求項１７乃至１８のいずれか１項に記載のサーバ装置。The server apparatus according to any one of claims 17-18. 前記プロセッサが、演算機能を有する、the processor has computing capabilities,
請求項１７乃至１９のいずれか１項に記載のサーバ装置。The server device according to any one of claims 17 to 19. コンピュータにより読み取り可能な命令を実行する一又は複数のプロセッサにより実行される方法であって、
前記プロセッサが、前記命令を実行することにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
前記第１ギフトに係る情報と異なる、過去に配信された当初のアニメーションの配信以降に付与された第２ギフトに係る情報と、
を受信し、
前記第１アニメーションの生成に必要な情報を用いて、第１アニメーションを生成し、 前記第１アニメーションを表示し、
前記過去に配信された第１アニメーションに係る視聴者に関する情報を受信し、
前記視聴者に関する情報は、過去の配信時におけるギフト数、及び／又は、コメント数を含む、
ことを特徴とする方法。 1. A method performed by one or more processors executing computer readable instructions, comprising:
By the processor executing the instructions,
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
Information about a second gift that is different from the information about the first gift and that is given after the distribution of the original animation that was distributed in the past ;
receive the
generating a first animation using information necessary for generating the first animation; displaying the first animation;
Receive information about viewers related to the first animation delivered in the past,
The information about the viewer includes the number of gifts and / or the number of comments at the time of past distribution,
A method characterized by: 前記第１アニメーションに対応する映像に切り替える旨の情報を取得し、
前記映像を受信する、
ことを特徴とする請求項２１に記載の方法。 Acquiring information to the effect of switching to the video corresponding to the first animation,
receiving the video;
22. The method of claim 21 , wherein: 前記プロセッサが、中央処理装置（ＣＰＵ）、マイクロプロセッサ又はグラフィックスプロセッシングユニット（ＧＰＵ）である、wherein the processor is a central processing unit (CPU), microprocessor or graphics processing unit (GPU);
請求項２１又は２２に記載の方法。23. A method according to claim 21 or 22. 前記プロセッサが、演算機能を有する、the processor has computing capabilities,
請求項２１乃至２３のいずれか１項に記載の方法。24. The method of any one of claims 21-23. コンピュータにより読み取り可能な命令を実行する一又は複数のプロセッサにより実行される方法であって、
前記プロセッサが、前記命令を実行することにより、
第１アニメーションの生成に必要な情報として、
配信者端末に係るアバターオブジェクトに係る情報と合成されることにより、前記アバターオブジェクトの動きを表現可能な、過去に配信された、モーションに係る情報と、
前記アバターオブジェクトの動きを表現するアニメーションを視聴する視聴者端末から付与される、過去に配信された、第１ギフトに係る情報と、
過去に配信された、音と、
前記第１ギフトに係る情報と異なる、過去に配信された当初のアニメーションの配信以降に付与された第２ギフトに係る情報と、
を送信し
前記過去に配信された第１アニメーションに係る視聴者に関する情報を送信し、
前記視聴者に関する情報は、過去の配信時におけるギフト数、及び／又は、コメント数を含む、
ことを特徴とする方法。 1. A method performed by one or more processors executing computer readable instructions, comprising:
By the processor executing the instructions,
As information necessary for generating the first animation,
Information related to motion, distributed in the past, capable of representing the movement of the avatar object by being synthesized with information related to the avatar object related to the distributor terminal;
Information related to a first gift distributed in the past, which is given from a viewer terminal viewing an animation expressing the movement of the avatar object;
With the sound delivered in the past,
Information about a second gift that is different from the information about the first gift and that is given after the distribution of the original animation that was distributed in the past ;
send
Sending information about viewers related to the first animation delivered in the past,
The information about the viewer includes the number of gifts and / or the number of comments at the time of past distribution,
A method characterized by: 前記第１アニメーションに対応する映像に切り替える旨の情報を取得し、
前記映像を送信する、
ことを特徴とする請求項２５に記載の方法。 Acquiring information to the effect of switching to the video corresponding to the first animation,
transmitting said video;
26. The method of claim 25, wherein: 前記プロセッサが、中央処理装置（ＣＰＵ）、マイクロプロセッサ又はグラフィックスプロセッシングユニット（ＧＰＵ）である、wherein the processor is a central processing unit (CPU), microprocessor or graphics processing unit (GPU);
請求項２５又は２６に記載の方法。27. A method according to claim 25 or 26. 前記プロセッサが、演算機能を有する、the processor has computing capabilities,
請求項２５乃至２７のいずれか１項に記載の方法。28. The method of any one of claims 25-27.

Images