JP7436912B2 - Information processing device, video distribution method, and video distribution program - Google Patents
Information processing device, video distribution method, and video distribution program Download PDFInfo
- Publication number
- JP7436912B2 JP7436912B2 JP2022210354A JP2022210354A JP7436912B2 JP 7436912 B2 JP7436912 B2 JP 7436912B2 JP 2022210354 A JP2022210354 A JP 2022210354A JP 2022210354 A JP2022210354 A JP 2022210354A JP 7436912 B2 JP7436912 B2 JP 7436912B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- singing
- user
- dance
- mobile terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 20
- 238000000034 method Methods 0.000 title description 43
- 238000012545 processing Methods 0.000 claims description 15
- 238000003672 processing method Methods 0.000 claims 1
- 230000006870 function Effects 0.000 description 88
- 230000002860 competitive effect Effects 0.000 description 76
- 230000000694 effects Effects 0.000 description 44
- 238000011156 evaluation Methods 0.000 description 43
- 230000008569 process Effects 0.000 description 33
- 238000010586 diagram Methods 0.000 description 19
- 238000004891 communication Methods 0.000 description 15
- 238000000605 extraction Methods 0.000 description 10
- 230000008859 change Effects 0.000 description 9
- 239000000284 extract Substances 0.000 description 8
- 239000003086 colorant Substances 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 241001342895 Chorus Species 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 238000003703 image analysis method Methods 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
- User Interface Of Digital Computer (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Information Transfer Between Computers (AREA)
Description
本発明は、情報処理装置、動画配信方法及び動画配信プログラムに関するものである。 The present invention relates to an information processing device, a video distribution method, and a video distribution program.
近年、コンピュータネットワークを介して携帯端末等の情報処理装置に配信されるウェブサイト（Ｗｅｂページ，Ｗｅｂサービス）やオンラインゲーム、アプリケーションソフトウェア（以下「アプリ」という。）等のオンラインサービスが広く普及している。 In recent years, online services such as websites (web pages, web services), online games, and application software (hereinafter referred to as "apps") that are distributed to information processing devices such as mobile terminals via computer networks have become widespread. There is.
オンラインサービスの一つに、ユーザ自身が撮影した動画を投稿し、他のユーザによる当該動画の視聴を可能とする動画投稿サイトがある。この動画投稿サイトには、ユーザ自身による歌唱動画等のパフォーマンス動画の投稿も行われている。また、異なる投稿者によるパフォーマンス動画の対戦といったオンラインサービスも想定される。 One of the online services is a video posting site that allows users to post videos shot by themselves and allow other users to view the videos. This video posting site also allows users to post their own performance videos, such as singing videos. In addition, online services such as competitions between performance videos by different contributors are also envisioned.
ここで、特許文献１には、コラボレーションのカラオケ歌唱映像を構成する各カラオケ歌唱映像を表示する際に、各カラオケ歌唱映像の歌唱音声の音量について、所定の基準値以上か否かをそれぞれ判定し、判定された歌唱音声の音量が所定の基準値以上であるカラオケ歌唱映像を特定可能に表示するカラオケ装置が開示されている。これにより、このカラオケ装置は、基準値以上の音量で歌唱している利用者のカラオケ歌唱映像を大きく表示し、歌唱を行っていない利用者のカラオケ歌唱映像及びカラオケ歌唱映像を小さく表示することになる。
Here, in
しかしながら、特許文献１に開示されているカラオケ装置は、歌唱音声の音量に基づいてカラオケ歌唱映像を特定するものであるため、例えばユーザが音声を発しない場合もあるダンス等のパフォーマンス動画には対応できない。
However, since the karaoke device disclosed in
本発明は、このような事情に鑑みてなされたものであって、動画の音を用いることなく複数の動画の表示態様を変化させることができる、情報処理装置、動画配信方法及び動画配信プログラムを提供することを目的とする。 The present invention has been made in view of the above circumstances, and provides an information processing device, a video distribution method, and a video distribution program that can change the display mode of a plurality of videos without using video sound. The purpose is to provide.
上記課題を解決するために、本発明の情報処理装置、動画配信方法及び動画配信プログラムは以下の手段を採用する。 In order to solve the above problems, the information processing device, video distribution method, and video distribution program of the present invention employ the following means.
上記課題を解決するため、本発明の一態様である「情報処理装置」は、ユーザが投稿した動画を端末装置に配信する情報処理装置であって、複数の前記動画を前記端末装置の画面に同時に表示されるように配信する配信手段と、複数の前記動画のうち、被写体の動きが最も大きい前記動画を注目動画であると判定する判定手段と、を備え、前記配信手段は、前記注目動画が他の前記動画に比べて大きく表示されるように前記動画を前記端末装置に配信する。 In order to solve the above problems, an "information processing device" that is one aspect of the present invention is an information processing device that delivers videos posted by a user to a terminal device, the information processing device delivering a plurality of videos to a screen of the terminal device. The distributing means includes a distributing means for distributing so as to be displayed at the same time, and a determining means for determining the moving picture in which the movement of the subject is the largest among the plurality of videos, and the distributing means includes a distributing means for distributing the moving picture to be displayed simultaneously, The video is distributed to the terminal device so that the video is displayed larger than other videos.
上記課題を解決するため、本発明の一態様である「動画配信方法」は、ユーザが投稿した動画を端末装置に配信する動画配信方法であって、複数の前記動画を前記端末装置の画面に同時に表示されるように配信する第１工程と、複数の前記動画のうち、被写体の動きが最も大きい前記動画を注目動画であると判定する第２工程と、を有し、前記第２工程は、前記注目動画が他の前記動画に比べて大きく表示されるように前記動画を前記端末装置に配信する。 In order to solve the above problems, a "video distribution method" that is one aspect of the present invention is a video distribution method that distributes videos posted by users to a terminal device, the video distribution method delivering a plurality of videos to a screen of the terminal device. The second step includes a first step of distributing the video so that it is displayed simultaneously, and a second step of determining the video with the largest movement of the subject among the plurality of videos as the video of interest. , the video is distributed to the terminal device so that the video of interest is displayed larger than other videos.
上記課題を解決するため、本発明の一態様である「動画配信プログラム」は、ユーザが投稿した動画を端末装置に配信する情報処理装置が備えるコンピュータを、複数の前記動画を前記端末装置の画面に同時に表示されるように配信する配信手段と、複数の前記動画のうち、被写体の動きが最も大きい前記動画を注目動画であると判定する判定手段と、して機能させ、前記配信手段は、前記注目動画が他の前記動画に比べて大きく表示されるように前記動画を前記端末装置に配信する。 In order to solve the above problems, a "video distribution program" that is one aspect of the present invention provides a computer that is included in an information processing device that distributes videos posted by users to a terminal device, and a computer that transmits a plurality of videos to the screen of the terminal device. and a determining means that determines the video with the largest movement of the subject among the plurality of videos as the video of interest, and the distribution means functions as: The video is distributed to the terminal device so that the video of interest is displayed larger than other videos.
上記「情報処理装置」には、以下に例示するように、種々の技術的限定を加えてもよい。また、同趣旨の技術的限定を、「動画配信方法」が実行する処理ステップや「動画配信プログラム」の機能に加えてもよい。 Various technical limitations may be added to the above-mentioned "information processing device" as exemplified below. Furthermore, technical limitations to the same effect may be added to the processing steps executed by the "video distribution method" and the functions of the "video distribution program."
前記判定手段は、前記動画から前記被写体を示す画像を所定時間間隔で抽出し、複数の前記動画のうち抽出した前記被写体の差異が最も大きい前記動画を前記注目動画であると判定する。 The determination means extracts images showing the subject from the video at predetermined time intervals, and determines the video with the largest difference in the extracted subject from among the plurality of videos as the video of interest.
前記被写体は、人物であり、前記判定手段は、前記被写体の差異を前記被写体の手足の動きに基づいて判定する。 The subject is a person, and the determination means determines the difference between the subjects based on the movements of the limbs of the subject.
前記配信手段は、前記注目動画の音が出力され、他の前記動画の音が出力されないように、前記動画を前記端末装置に配信する。 The distribution means distributes the video to the terminal device so that the sound of the video of interest is output and the sound of the other video is not output.
前記判定手段は、前記注目動画の前記被写体の動きが所定時間以上、他の前記動画の前記被写体の動きよりも小さくなった場合、当該他の前記動画を前記注目動画であると判定する。 The determination means determines that the other video is the video of interest when the movement of the subject of the video of interest becomes smaller than the movement of the subject of the other video for a predetermined period of time or more.
本発明によれば、動画の音を用いることなく複数の動画の表示態様を変化させることができる、という効果を有する。 According to the present invention, it is possible to change the display mode of a plurality of moving pictures without using sound of the moving pictures.
以下に、本発明に係る情報処理装置、動画配信方法及び動画配信プログラムの一実施形態について、図面を参照して説明する。 DESCRIPTION OF THE PREFERRED EMBODIMENTS An embodiment of an information processing apparatus, a video distribution method, and a video distribution program according to the present invention will be described below with reference to the drawings.
［１．第１実施形態］
以下、本発明の第１実施形態について説明する。本実施形態ではパフォーマーが自身のパフォーマンスを携帯端末を用いて動画として記録してサーバへ送信することで動画投稿サイトにアップロードする。動画投稿サイトにアップロードされた動画（投稿動画）は、携帯端末を介して視聴可能とされる。なお、本実施形態では、パフォーマンスを歌唱とし、パフォーマーを歌唱ユーザとし、動画投稿サイトにアップロードされる動画を歌唱動画とする。また、動画投稿サイトにアップロードされた歌唱動画を視聴するユーザを視聴ユーザという。
[1. First embodiment]
A first embodiment of the present invention will be described below. In this embodiment, a performer records his or her performance as a video using a mobile terminal and uploads it to a video posting site by transmitting it to a server. Videos uploaded to video posting sites (posted videos) can be viewed via mobile terminals. Note that in this embodiment, the performance is singing, the performer is a singing user, and the video uploaded to the video posting site is a singing video. Furthermore, a user who views a singing video uploaded to a video posting site is referred to as a viewing user.
［１－１．カラオケシステムの構成］
図１は、本実施形態に係るカラオケシステム１の概略構成図である。カラオケシステム１は、通信回線２、複数の携帯端末３（携帯端末３Ａ１，３Ａ２，３Ｂ）、及びサーバ４を含んで構成される。
[1-1. Karaoke system configuration]
FIG. 1 is a schematic configuration diagram of a
通信回線２は、コンピュータネットワークを形成するものであり、例えば、電気事業者によって提供される広域通信回線である。
The
携帯端末３は、例えば、スマートフォンやタブレット端末、ノートパソコン等の情報処理端末であり、オンラインサービスをユーザが利用するために用いられる。携帯端末３は、画像を表示するタッチパネルディスプレイ３ａ、音を出力するスピーカー３ｂ、音が入力されるマイクロフォン３ｃ、被写体を撮影するカメラ３ｄ、及びイヤホン（不図示）が接続されるイヤホン端子３e等を備える。なお、ここでいう撮影とは、カメラ３ｄが機能し、録画の有無にかかわりなく被写体がタッチパネルディスプレイ３ａに表示されている状態である。タッチパネルディスプレイ３ａは、例えばＬＣＤ（Liquid Crystal Display）及びタッチセンサを備える。ＬＣＤは、各種画像を表示し、タッチセンサは、指、スタイラス、又はペン等の指示体を用いて行われる各種入力操作を受け付ける。以下の説明ではタッチパネルディスプレイ３ａを画面３ａともいう。
The
サーバ４は、通信回線２を介して、携帯端末３へオンラインサービスを提供する情報処理装置である。なお、図１の例では、歌唱ユーザは、携帯端末３Ａから自身の歌唱動画（歌唱動画データ）をサーバ４へ送信することで当該歌唱動画を動画投稿サイトにアップロードする。そして、視聴ユーザは、携帯端末３Ｂを用いて動画投稿サイトへアクセスし、当該歌唱動画を視聴する。なお、歌唱ユーザは、携帯端末３Ａを用いて動画投稿サイトへアクセスすることで、自身がアップロードした歌唱動画を視聴することも可能である。また、携帯端末３Ｂのユーザが歌唱ユーザとなり、歌唱動画を動画投稿サイトにアップロードすることも可能である。
The
［１－２．サーバの構成］
図２は、本実施形態に係るサーバ４の電気的構成を示すブロック図である。
[1-2. Server configuration]
FIG. 2 is a block diagram showing the electrical configuration of the
本実施形態に係るサーバ４は、サーバ４全体の動作を司る主制御部であるＣＰＵ（Central Processing Unit）２０、各種プログラム及び各種データ等が予め記憶されたＲＯＭ
（Read Only Memory）２２、ＣＰＵ２０による各種プログラムの実行時のワークエリア等として用いられるＲＡＭ（Random Access Memory）２４、各種プログラム及び各種データを記憶する記憶手段としてのＨＤＤ（Hard Disk Drive）２６を備えている。
The
(Read Only Memory) 22, a RAM (Random Access Memory) 24 used as a work area when various programs are executed by the
ＨＤＤ２６は、携帯端末３Ａから送信された歌唱動画データ、すなわち動画投稿サイトにアップロードされた歌唱動画データや、歌唱ユーザが歌唱可能な楽曲を示す楽曲データ等を記憶する。なお、記憶手段は、ＨＤＤ２６に限らず、例えば、フラッシュメモリ等の半導体メモリ等の他の記憶媒体であってもよい。
The
さらに、サーバ４は、キーボード及びマウス等で構成されて各種操作の入力を受け付ける操作入力部２８、各種画像を表示する例えば液晶ディスプレイ装置等のモニタ３０、通信回線２を介して携帯端末３等の他の情報処理装置等と接続され、他の情報処理装置等との間で各種データの送受信を行う外部インタフェース３２を備えている。
Furthermore, the
これらＣＰＵ２０、ＲＯＭ２２、ＲＡＭ２４、ＨＤＤ２６、操作入力部２８、モニタ３０、及び外部インタフェース３２は、システムバス３４を介して相互に電気的に接続されている。従って、ＣＰＵ２０は、ＲＯＭ２２、ＲＡＭ２４、及びＨＤＤ２６へのアクセス、操作入力部２８に対する操作状態の把握、モニタ３０に対する画像の表示、並びに外部インタフェース３２を介した他の情報処理装置等との各種データの送受信等を行なうことができる。
These
［１－３．携帯端末の電気的構成］
図３は、携帯端末３の電気的構成を示す機能ブロック図である。
[1-3. Electrical configuration of mobile terminal]
FIG. 3 is a functional block diagram showing the electrical configuration of the
携帯端末３は、図１に示される構成に加え、主制御部４０、主記憶部４２、補助記憶部４４、通信部４６、及び操作ボタン４８を備える。
In addition to the configuration shown in FIG. 1, the
主制御部４０は、例えば、ＣＰＵ、マイクロプロセッサ、ＤＳＰ（Digital Signal Processor）等であり、携帯端末３の全体の動作を制御する。
The
主記憶部４２は、例えば、ＲＡＭやＤＲＡＭ（Dynamic Random Access Memory）等で構成されており、主制御部４０による各種プログラムに基づく処理の実行時のワークエリア等として用いられる。
The
補助記憶部４４は、例えば、フラッシュメモリ等の不揮発性メモリであり、画像等の各種データ及び主制御部４０の処理に利用されるプログラム等を保存する。補助記憶部４４に記憶されるプログラムは、例えば、携帯端末３の基本的な機能を実現するためのＯＳ（Operating System）、各種ハードウェアを制御するためのドライバ、電子メールやウェブブラウジング、その他各種機能を実現するためのプログラム等である。また、補助記憶部４４には、歌唱動画の撮影や投稿及び動画投稿サイトを視聴するためのアプリケーション
（以下「動画投稿視聴アプリ」という。）が予め記憶されている。
The
通信部４６は、例えばＮＩＣ（Network Interface Controller）であり、通信回線２に接続する機能を有する。なお、通信部４６は、ＮＩＣに代えて又はＮＩＣと共に、無線ＬＡＮ（Local Area Network）に接続する機能、無線ＷＡＮ（Wide Area Network）に接続する機能、例えばBluetooth（登録商標）等の近距離の無線通信、及び赤外線通信等を可能とする機能を有してもよい。
The
操作ボタン４８は、携帯端末３の側面に設けられ、携帯端末３を起動又は停止させるための電源ボタンやスピーカー３ｂが出力する音のボリューム調整ボタン等である。
The
これら主制御部４０、主記憶部４２、補助記憶部４４、通信部４６、操作ボタン４８、タッチパネルディスプレイ３ａ、スピーカー３ｂ、マイクロフォン３ｃ、カメラ３ｄ、及びイヤホン端子３ｅは、システムバス４９を介して相互に電気的に接続されている。従って、主制御部４０は、主記憶部４２及び補助記憶部４４へのアクセス、タッチパネルディスプレイ３ａに対する画像の表示、ユーザによるタッチパネルディスプレイ３ａや操作ボタン４８に対する操作状態の把握、マイクロフォン３ｃへの音の入力、スピーカー３ｂ又はイヤホン端子３ｅに接続されたイヤホンからの音の出力、カメラ３ｄに対する制御、及び通信部４６を介した各種通信網や他の情報処理装置へのアクセス等を行える。
These
［１－４．歌唱ユーザによる歌唱動画の撮影］
歌唱ユーザが、携帯端末３Ａを用いて歌唱動画を撮影する場合について説明する。
[1-4. Shooting of singing videos by singing users]
A case where a singing user photographs a singing video using the mobile terminal 3A will be described.
歌唱ユーザは、歌唱動画を撮影する場合、携帯端末３Ａに動画投稿視聴アプリを起動させる。動画投稿視聴アプリが起動すると、携帯端末３Ａは複数の楽曲データを記憶したサーバ４にアクセスする。そして、歌唱ユーザは、動画投稿視聴アプリから自身で歌唱するための楽曲を任意に選択し、サーバ４から楽曲データを携帯端末３Ａへダウンロードする。そして、歌唱ユーザは、動画投稿視聴アプリを用いて任意のタイミングで楽曲を再生して歌唱を行う。動画投稿視聴アプリは、楽曲の再生を開始すると共に、カメラ３ｄによって動画の撮影を開始する。すなわち、歌唱動画は、携帯端末３Ａから楽曲が再生されながら携帯端末３Ａによって撮影された動画である。
When shooting a singing video, the singing user activates a video posting viewing application on the mobile terminal 3A. When the video posting and viewing application is started, the mobile terminal 3A accesses the
なお、楽曲データには、歌詞データも関連付けられており、楽曲データがサーバ４から携帯端末３Ａにダウンロードされる場合には関連付けられている歌詞データも携帯端末３Ａにダウンロードされる。なお、以下の説明において、楽曲データには歌詞データも含まれるものとする。
Note that lyrics data is also associated with the music data, and when the music data is downloaded from the
図４は、歌唱動画を撮影する場合における携帯端末３Ａの画面３ａにおける表示状態（以下「画面表示」という。）の一例である。
FIG. 4 is an example of a display state (hereinafter referred to as "screen display") on the
図４に示されるように画面３ａは、歌詞表示領域５０Ａ及び撮影画像表示領域５０Ｂに分けられる。歌詞表示領域５０Ａは、ユーザが歌唱する楽曲の歌詞を示す歌詞画像５２、楽曲の音程を示す音程画像５４、及び撮影の進行度合いを示す進行バー５６を含む。
As shown in FIG. 4, the
歌詞画像５２及び音程画像５４は、楽曲の進行に応じて更新される。本実施形態では、一例として、歌詞画像５２及び音程画像５４は数フレーズずつ更新して歌詞表示領域５０Ａに表示される。なお、歌詞画像５２と音程画像５４の更新タイミングは同じであってもよいし、異なってもよい。
The
歌詞画像５２は、一例として、歌詞を複数段（図４の例では２段）で表示し、歌唱ユーザが現在歌唱すべき歌詞を把握可能なように、上段の歌詞の色が楽曲の進行に合わせて左端から右端へ変化する。上段の歌詞の色の変化が右端に達すると、下段の歌詞が上昇して上段に表示されると共に新たな歌詞が下段に表示され、楽曲の進行に合わせて再び上段の歌詞の色が左端から右端へ変化する。
For example, the
音程画像５４は、一例として、複数の音程バー５４Ａが音程の強弱に合わせて左右方向に階段状に表示される。そして、歌唱ユーザが現在歌唱すべき歌詞の音程を把握可能なように、楽曲の進行に合わせて音程バー５４Ａの色が左端から右端へ変化すると共にポインタ５４Ｂが左端から右端へ移動する。音程バー５４Ａの色の変化及びポインタ５４Ｂが右端に達すると、次の音程を示す音程画像５４が更新表示される。
In the
進行バー５６は、一例として、左端から右端までの長さが楽曲全体の長さを示す。楽曲の再生が開始すると楽曲の再生位置を示すポインタ５６Ａが左端から右端へ移動し、ポインタ５６Ａが右端に達すると楽曲の終了となる。なお、ポインタ５６Ａが通過した進行バー５６は、進行前の位置に比べて太く表示される。
As an example, the length of the
歌唱動画の録画は、歌唱ユーザが楽曲を選択した後、画面３ａに表示される録画開始ボタン（不図示）をクリックしてから所定時間後（例えば１０秒後）に開始される。また、動画の録画開始と終了は、楽曲の開始と終了に一致してもよいが、これに限らず、楽曲の開始所定時間前（例えば５秒前）から動画の録画が開始してもよいし、楽曲の終了所定時間後（例えば５秒後）に動画の録画が終了してもよい。
Recording of the singing video starts after a predetermined time (for example, 10 seconds) after the singing user selects a song and clicks a recording start button (not shown) displayed on the
歌唱ユーザは、イヤホンをイヤホン端子３ｅに接続して再生される楽曲をイヤホンを用いて聴き、当該楽曲に合わせて歌唱する。携帯端末３Ａは、カメラ３ｄによって歌唱ユーザを撮影すると共に、マイクロフォン３ｃによって歌唱ユーザの歌唱を録音する。すなわち、マイクロフォン３ｃは再生される楽曲の音は取得しない。そして、携帯端末３Ａはマイクロフォン３ｃで取得した歌唱ユーザの歌声を録音し、歌唱データとする。
The singing user connects earphones to the
なお、歌唱データは、フィルタリング処理によって人間の声の周波数帯域を抽出したものとされてもよい。このフィルタリング処理によって、歌唱ユーザの周辺環境に起因する雑音が歌唱データから取り除かれることになるので、録音される歌唱ユーザの歌声がより鮮明となる。 Note that the singing data may be data obtained by extracting the frequency band of a human voice through filtering processing. By this filtering process, noise caused by the surrounding environment of the singing user is removed from the singing data, so that the recorded singing voice of the singing user becomes clearer.
そして、動画投稿視聴アプリは、楽曲データ及び歌唱データに録画データを組み合わせることで、サーバ４へ送信可能な歌唱動画データとする。なお、ユーザは、一例として、歌唱動画データをサーバ４へ送信するタイミング、すなわち、動画投稿サイトへアップロードするタイミングとして下記の２種類のうち一つを選択できる。
The video posting and viewing application combines the music data and the singing data with the recorded data to create singing video data that can be transmitted to the
一つは、歌唱ユーザが歌唱しながらリアルタイムで歌唱動画データを動画投稿サイトへアップロードするライブ配信である。ライブ配信では、視聴ユーザは歌唱ユーザによる歌唱をリアルタイムで視聴することになる。もう一つは、楽曲の歌唱が完了した後に、歌唱ユーザが任意のタイミングで動画投稿サイトへ歌唱動画データをアップロードする非ライブ配信である。 One is live distribution, in which a singing user uploads singing video data to a video posting site in real time while singing. In live distribution, viewing users will watch singing by singing users in real time. The other type is non-live distribution in which a singing user uploads singing video data to a video posting site at an arbitrary timing after the singing of a song is completed.
歌唱ユーザは、ライブ配信を行う場合には歌唱動画の録画前にライブ配信を行うための設定を行い、動画の録画開始と共に歌唱動画データが動画投稿サイトへアップロードされるようにする。なお、ライブ配信の場合には、歌唱動画データは携帯端末３Ａに記憶されることなく、動画投稿サイトへアップロードされてもよい。 When performing live distribution, the singing user makes settings for performing live distribution before recording the singing video, so that the singing video data is uploaded to the video posting site at the same time as the recording of the video starts. In addition, in the case of live distribution, the singing video data may be uploaded to the video posting site without being stored in the mobile terminal 3A.
なお、ライブ配信を行う場合の設定として、視聴ユーザがライブ配信で当該歌唱動画を視聴可能とする第１ライブ配信設定、ライブ配信後でも視聴ユーザが当該歌唱動画を視聴可能とする第２ライブ配信設定の何れか歌唱ユーザが設定可能とされる。すなわち、第１ライブ配信設定では、ライブ配信が終了するとサーバ４から歌唱動画データが削除され、視聴ユーザはライブ配信の終了後にライブ配信された歌唱動画の視聴ができない。一方、第２ライブ配信では、ライブ配信が終了してもサーバ４が当該歌唱動画データを記憶し続けるので、視聴ユーザはライブ配信の終了後でも非ライブ配信として当該歌唱動画の視聴ができる。
In addition, the settings for performing live distribution include a first live distribution setting that allows the viewing user to view the singing video through live distribution, and a second live distribution setting that allows the viewing user to view the singing video even after the live distribution. Any of the settings can be set by the singing user. That is, in the first live distribution setting, when the live distribution ends, the singing video data is deleted from the
なお、非ライブ配信を行う場合には、歌唱動画データは携帯端末３Ａに一旦記憶され、歌唱ユーザが動画投稿視聴アプリを操作することで任意のタイミングで動画投稿サイトへ歌唱動画をアップロードする。 Note that when performing non-live distribution, the singing video data is temporarily stored in the mobile terminal 3A, and the singing user uploads the singing video to the video posting site at any timing by operating the video posting and viewing application.
［１－５．視聴ユーザによる歌唱動画の視聴］
視聴ユーザが、携帯端末３Ｂを用いて歌唱動画を視聴する場合について説明する。
[1-5. Viewing of singing videos by viewing users]
A case will be described in which a viewing user views a singing video using the
視聴ユーザは、歌唱動画を視聴する場合、携帯端末３Ｂに動画投稿視聴アプリを起動させる。動画投稿視聴アプリが起動すると、携帯端末３Ｂは複数の歌唱動画データを記憶したサーバ４、すなわち動画投稿サイトにアクセスする。そして、視聴ユーザは、動画投稿視聴アプリを介して視聴したい歌唱動画を選択して画面３ａに表示させる。なお、サーバ４による携帯端末３Ｂへの歌唱動画の配信手法は一例として、ストリーミング配信である。
When viewing a singing video, the viewing user activates a video posting viewing application on the
図５は、歌唱動画を視聴する場合における携帯端末３Ｂの画面表示の一例であり、ライブ配信が行われている場合の画面表示を示している。
FIG. 5 is an example of a screen display of the
画面３ａには、歌唱動画が表示されると共に、歌唱ユーザ表示領域５０Ｃ、歌詞表示領域５０Ｄ、コメント入力表示領域５０Ｅが設けられる。歌唱ユーザ表示領域５０Ｃ、歌詞表示領域５０Ｄ、コメント入力表示領域５０Ｅは、歌唱動画に重畳して表示されてもよい。
The
歌唱ユーザ表示領域５０Ｃには、歌唱動画を投稿した歌唱ユーザのユーザ名、ライブ配信であるか否かの表示、歌唱している楽曲の名称が表示される。
The singing
歌詞表示領域５０Ｄには、歌唱動画の歌詞が表示される。なお、表示される歌詞は、一例として、複数フレーズずつであり、楽曲の進行に合わせて歌詞の色が左端から右端へ変化する。なお、歌詞表示領域５０Ｄは、一例として、歌詞を複数段で表示してもよい。この場合、上段の歌詞の色の変化が右端に達すると、下段の歌詞が上昇して上段に表示されると共に新たな歌詞が下段に表示され、楽曲の進行に合わせて再び上段の歌詞の色が左端から右端へ変化する。
The lyrics of the singing video are displayed in the
コメント入力表示領域５０Ｅには、コメントの入力欄が表示されると共に、歌唱動画を視聴している視聴ユーザのコメントがユーザ名と共に表示される。なお、一例として、視聴ユーザからのコメントが入力される毎にコメント入力表示領域５０Ｅの最上段に当該コメントが追加表示され、それまでに表示されていたコメントは下方に繰り下がる。そして、コメントがコメント入力表示領域５０Ｅに表示しきれなくなった場合には、コメント表示領域の右側にスクロールバー（不図示）が表示され、当該スクロールバーを視聴ユーザが操作することで、それまで画面３ａに表示されなかったコメントが表示される。
In the comment
さらに、画面３ａには、視聴ユーザが各種操作を行うための操作アイコン５８Ａ～５８Ｄが表示される。
Further, on the
操作アイコン５８Ａは、視聴ユーザが視聴している歌唱動画に視聴ユーザが共感等した場合にクリックされるアイコンであり、当該歌唱動画に対する操作アイコン５８Ａのクリックの総数が操作アイコン５８Ａの上方に表示される。
The
操作アイコン５８Ｂは、画面３ａに表示されている歌唱動画をライブ配信している歌唱ユーザに対して視聴ユーザが対戦（以下「対戦歌唱」という。）を申し込む場合にクリックされるアイコンである。対戦歌唱は、異なる歌唱ユーザによる複数の歌唱動画（第１歌唱動画、第２歌唱動画）を視聴ユーザの携帯端末３Ｂの画面３ａに同時に表示し、歌唱動画が同じ楽曲を交互に歌唱するものである。すなわち、操作アイコン５８Ｂをクリックした視聴ユーザは、対戦歌唱を行う歌唱ユーザとなる。
The
操作アイコン５８Ｃは、動画投稿視聴アプリに対する各種設定を視聴ユーザが行う場合にクリックされるアイコンである。
The
操作アイコン５８Ｄは、画面３ａに表示されている歌唱動画に対して装飾画像を重畳させる場合に視聴ユーザによってクリックされるアイコンである。なお、本実施形態に係る装飾画像は、その種類により金額が決められており、視聴ユーザが課金により購入可能とされている。そして、視聴ユーザは、操作アイコン５８Ｄをクリックすることで、自身が視聴している歌唱動画に対して装飾画像を重畳させる。装飾画像が重畳された歌唱動画の歌唱ユーザは、重畳された装飾画像に応じた金銭を動画投稿サイトの運営者から受け取る。すなわち、視聴ユーザによる歌唱動画への装飾画像の重畳（表示指示）は、歌唱ユーザに対する、いわゆる投げ銭に相当する。
The
［１－６．対戦歌唱機能の概要］
本実施形態に係る動画投稿視聴アプリは、パフォーマーである複数のユーザ同士が自身のパフォーマンス動画の優劣を競い合う対戦機能を有している。本実施形態に係る対戦機能は、いわゆるカラオケバトルの一種であり、図６に例示するように、異なる歌唱ユーザによる複数の歌唱動画（第１歌唱動画６０Ａ、第２歌唱動画６０Ｂ）を視聴ユーザの携帯端末３Ｂの画面３ａに同時に表示する対戦歌唱機能である。なお、対戦歌唱機能は、サーバ４によって実行される機能である。
[1-6. Overview of competitive singing function]
The video posting and viewing application according to the present embodiment has a competition function in which a plurality of users who are performers compete with each other to determine the superiority of their own performance videos. The battle function according to the present embodiment is a type of so-called karaoke battle, and as illustrated in FIG. This is a competitive singing function that is simultaneously displayed on the
図６は、対戦歌唱における視聴ユーザの携帯端末３Ｂの画面表示である。なお、図６に示される「ＶＳ」の表示は、対戦歌唱の開始時に表示され、対戦歌唱が開始されてから所定時間経過後（例えば３秒後）に当該表示が停止される。また、歌唱ユーザの携帯端末３Ａの画面表示は、例えば、図６と同様であってもよいし、図４に示されるような画面表示に対して対戦歌唱を行う他の歌唱ユーザが縮小表示（後述の図８参照）されてもよい。
FIG. 6 is a screen display of the viewing user's
対戦歌唱が行われるためには、歌唱ユーザ（以下「第１歌唱ユーザ」という。）から他の歌唱ユーザ（以下「第２歌唱ユーザ」という。）に対して歌唱動画の同時配信の要求（以下「対戦要求」という。）が行われ、当該対戦要求を第２歌唱ユーザが了承する必要がある。 In order for competitive singing to take place, a singing user (hereinafter referred to as the "first singing user") requests another singing user (hereinafter referred to as the "second singing user") to simultaneously distribute singing videos (hereinafter referred to as "the first singing user"). (referred to as a "competition request") is made, and the second singing user needs to approve the competition request.
より具体的には、第１歌唱ユーザは自身の携帯端末３Ａ１に動画投稿視聴アプリを起動させ、動画投稿視聴アプリを用いて歌唱動画をライブ配信している第２歌唱ユーザへ対戦要求を送信する。対戦要求の送信は、第１歌唱ユーザが操作アイコン５８Ｂをクリックすることで行われる。対戦歌唱で歌唱する楽曲は第１歌唱ユーザが選択する。選択した楽曲
（以下「対戦楽曲」という。）を示す情報（タイトルや歌手名）は対戦要求と共に第２歌唱ユーザに送信される。
More specifically, the first singing user activates the video posting and viewing application on his mobile terminal 3A1, and transmits a competition request to the second singing user who is live distributing the singing video using the video posting and viewing application. . The competition request is transmitted by the first singing user clicking the
携帯端末３Ａ１から送信された対戦要求は、サーバ４を介して第２歌唱ユーザの携帯端末３Ａ２に送信される。携帯端末３Ａ２の画面３ａには受信した対戦要求に応じた画像が表示され、第２歌唱ユーザは対戦要求を了承する場合には画面３ａに表示される所定画像をクリックする。
The competition request transmitted from the mobile terminal 3A1 is transmitted to the second singing user's mobile terminal 3A2 via the
そして、第２歌唱ユーザが第１歌唱ユーザからの対戦要求を了承した場合、サーバ４は、第１歌唱ユーザによる第１歌唱動画６０Ａ及び第２歌唱ユーザによる第２歌唱動画６０Ｂが携帯端末３Ｂの画面３ａに同時に表示されるように配信することで、対戦歌唱を開始する。これにより、視聴ユーザは、リアルタイムで第１歌唱ユーザと第２歌唱ユーザによる対戦歌唱（リアルタイム対戦）を視聴可能となる。なお、以下の説明では、対戦歌唱において配信される第１歌唱動画６０Ａ及び第２歌唱動画６０Ｂを総称して対戦歌唱動画ともいう。
When the second singing user accepts the competition request from the first singing user, the
このように、対戦歌唱機能は、第１歌唱ユーザから第２歌唱ユーザへの歌唱動画の対戦要求を受け付け、第２歌唱ユーザが対戦要求を了承した場合に、第１歌唱動画６０Ａ及び第２歌唱動画６０Ｂを携帯端末３Ｂの画面３ａに同時に表示されるように配信する。従って、対戦歌唱機能は、歌唱ユーザ同士が自身の歌唱を各々の歌唱動画によって競い合うことを可能とすると共に、競い合っている複数の歌唱動画を視聴ユーザが同時に視聴することを可能とする。
In this way, the competitive singing function accepts a singing video competition request from the first singing user to the second singing user, and when the second singing user accepts the competition request, the competition singing function performs the
また、第２歌唱ユーザが対戦要求を了承する一方で対戦楽曲を了承しない場合も想定される。このような場合のために、対戦歌唱機能は、第２歌唱ユーザの携帯端末３Ａ２から第１歌唱ユーザの携帯端末３Ａ１へ対戦楽曲の変更及び第２歌唱ユーザが選択した対戦楽曲を示す情報を送信し、第１歌唱ユーザの了承を求める機能を有してもよい。 It is also assumed that the second singing user approves the competition request but does not approve the competition music. For such a case, the competition singing function transmits information indicating a change in the competition song and the competition song selected by the second singing user from the second singing user's mobile terminal 3A2 to the first singing user's mobile terminal 3A1. However, it may also have a function of requesting approval from the first singing user.
［１－６－１．対戦歌唱における交互歌唱］
本実施形態に係る対戦歌唱機能では、第１歌唱ユーザと第２歌唱ユーザとが同じ楽曲を交互に歌唱（以下「交互歌唱」という。）する。
[1-6-1. Alternate singing in competitive singing]
In the competitive singing function according to the present embodiment, the first singing user and the second singing user alternately sing the same song (hereinafter referred to as "alternate singing").
交互歌唱は、例えば、第１歌唱ユーザが１曲を全て歌唱し終えた後に第２歌唱ユーザが同じ楽曲を全て歌唱する形態としてもよいが、本実施形態に係る対戦歌唱機能は、図７に示されるように、楽曲を仮想的に複数領域に分割し、当該分割領域６８毎に歌唱を行う歌唱ユーザの順番を設定（以下「交互パフォーマンス設定」という。）する。これにより、第１歌唱ユーザと第２歌唱ユーザは、交互パフォーマンス設定に従って同一の楽曲を交互に歌唱することになるので、視聴ユーザは、第１歌唱ユーザと第２歌唱ユーザとの歌唱力の差を明確に認識でき、より対戦歌唱を楽しむことができる。なお、以下の説明では、歌唱を行う歌唱ユーザの順番を交互歌唱順番という。 Alternate singing may be, for example, a form in which the second singing user sings all the same songs after the first singing user has finished singing all of the songs, but the competitive singing function according to the present embodiment is as shown in FIG. As shown, the song is virtually divided into a plurality of regions, and the order of singing users who perform singing is set for each divided region 68 (hereinafter referred to as "alternate performance setting"). As a result, the first singing user and the second singing user will alternately sing the same song according to the alternate performance setting, so the viewing user will be able to see the difference in singing ability between the first singing user and the second singing user. can be clearly recognized and enjoy competitive singing even more. In addition, in the following description, the order of the singing users who sing will be referred to as an alternate singing order.
なお、対戦歌唱機能は、一例として、歌唱ユーザ自身が歌唱する歌詞部分を強調表示させることにより、歌唱ユーザに自身が歌唱する分割領域６８を認識させる。強調表示は、歌詞の色変化や太さ変化等である。
In addition, as an example, the competitive singing function makes the singing user recognize the divided
図７の例では、第１歌唱ユーザと第２歌唱ユーザとが交互に歌唱するように分割領域６８が設定されると共に、第１歌唱ユーザと第２歌唱ユーザとが一緒に歌唱する分割領域６８も設定されている。分割領域６８は、例えば、楽曲のフレーズ、コーラス、又は小節等に基づいて予め設定され、各分割領域６８の時間長さは必ずしも同じである必要はない。
In the example of FIG. 7, the divided
交互歌唱順番は、対戦歌唱の実行の決定に伴い決定される。例えば、対戦要求を行った第１歌唱ユーザが先に歌唱を行い、第２歌唱ユーザが後に歌唱を行うように設定される。なお、第１歌唱ユーザと第２歌唱ユーザとが一緒に歌唱する分割領域６８は、楽曲毎に予め設定されてもよい。
The alternate singing order is determined in conjunction with the decision to perform competitive singing. For example, it is set so that the first singing user who made the competition request sings first, and the second singing user sings later. Note that the divided
また、分割領域に基づいて設定される交互歌唱順番は、動的に変化してもよい。例えば、後述する投票機能によって得た総点数が相対的に多い歌唱ユーザほど歌唱する分割領域６８が多くなってもよい。より具体的には、楽曲の予め定められたタイミング毎に歌唱ユーザ（歌唱動画）毎の総点数を比較し、総点数が相対的に多い歌唱ユーザがその後の複数の分割領域６８を連続して歌唱する。この場合、連続して歌唱可能な分割領域６８の最大数は予め定められている。
Further, the alternate singing order set based on the divided regions may be dynamically changed. For example, the singing user with a relatively larger total score obtained by the voting function described later may have more divided
これにより、総点数が相対的に多い歌唱ユーザは歌唱する分割領域６８が多くなる一方、総点数が相対的に少ない歌唱ユーザは歌唱する分割領域６８が少なくなる。従って、総点数が相対的に多い歌唱ユーザは、視聴ユーザに対して自身の歌唱力をよりアピールし、視聴ユーザをより惹き付けることができる。
As a result, a singing user with a relatively large total score has a large number of divided
［１－６－２．交互歌唱における画面表示と音声出力］
図６は、前述のように、対戦歌唱における視聴ユーザの携帯端末３Ｂの表示画面であり、第１歌唱動画６０Ａ及び第２歌唱動画６０Ｂが共に同じ画像サイズで表示されている。そして、歌唱を実行中の歌唱動画に対しては、それを視聴ユーザが認識可能な表示（図６の「ＮＯＷ ＰＬＡＹＩＮＧ」）が行われる。
[1-6-2. Screen display and audio output during alternate singing]
As described above, FIG. 6 is a display screen of the viewing user's
ここで、歌唱を実行中でない歌唱動画やその音声は視聴ユーザにとって興味を惹くものではなく、実行中の歌唱を視聴している視聴ユーザの注意を散漫にしかねない。 Here, the singing video and its audio when the singing is not being performed are not interesting to the viewing user, and may distract the viewing user who is viewing the singing being performed.
そこで、本実施形態に係る対戦歌唱機能は、歌唱を実行中の歌唱動画の音声が出力され、歌唱を実行中でない歌唱動画の音声は出力されないように、歌唱動画を携帯端末３Ｂに配信する。また、サーバ４は、歌唱を実行中の歌唱動画が歌唱を実行中でない歌唱動画よりも大きく携帯端末３Ｂの画面３ａに表示されるように、歌唱動画を携帯端末３Ｂに配信する。これらにより、視聴ユーザは、歌唱を実行中でない歌唱動画によって注意が散漫となることなく、対戦歌唱動画を視聴できる。
Therefore, the competitive singing function according to the present embodiment distributes the singing video to the
図８は、対戦歌唱における携帯端末３Ｂの画面表示の一例である。図８の例では、第１歌唱動画６０Ａが歌唱の実行中であり、第２歌唱動画６０Ｂが歌唱の実行中でないため、第１歌唱動画６０Ａが拡大表示（全画面表示）される一方、第２歌唱動画６０Ｂは縮小表示（ウィンドウ表示）される。歌唱動画が縮小表示される場合の画像サイズと画面３ａにおける表示位置は予め定められてもよいし、視聴ユーザが任意の画像サイズ及び画面位置に変更可能としてもよい。
FIG. 8 is an example of a screen display of the
なお、本実施形態に係る対戦歌唱機能は、上述した交互歌唱順番に基づいて、第１歌唱動画６０Ａ及び第２歌唱動画６０Ｂの音声出力、又は第１歌唱動画６０Ａ及び第２歌唱動画６０Ｂの画面表示が行われるように歌唱動画を携帯端末３Ｂに配信する。
Note that the competitive singing function according to the present embodiment outputs the audio of the
すなわち、第１歌唱ユーザが歌唱を行う分割領域６８では、第１歌唱動画６０Ａの音声が出力されると共に第１歌唱動画６０Ａが拡大表示される一方、第２歌唱動画６０Ｂの音声は出力されずに第２歌唱動画６０Ｂが縮小表示される。また、第２歌唱ユーザが歌唱を行う分割領域６８では、第２歌唱動画６０Ｂの音声が出力されると共に第２歌唱動画６０Ｂが拡大表示される一方、第１歌唱動画６０Ａの音声は出力されずに第１歌唱動画６０Ａが縮小表示される。また、第１歌唱ユーザと第２歌唱ユーザとが一緒に歌唱を行う分割領域６８では、図６のように第１歌唱動画６０Ａと第２歌唱動画６０Ｂとが同じ画像サイズで画面表示され、かつ共に音声出力される。
That is, in the divided
このように、本実施形態に係る対戦歌唱機能は、上述した交互パフォーマンス設定に基づいて、対戦歌唱動画の音声出力や画面表示を制御するので、歌唱動画を同時に表示させる場合であっても視聴ユーザの携帯端末３Ｂにおける対戦歌唱動画の出力制御を簡易に行える。
In this way, the competitive singing function according to the present embodiment controls the audio output and screen display of the competitive singing video based on the above-mentioned alternate performance settings, so even when the singing videos are displayed at the same time, the viewing user Output control of the competitive singing video on the
［１－６－３．投票機能］
動画投稿視聴アプリは、対戦歌唱において歌唱動画毎の評価（以下「投票」という。）の入力を視聴ユーザの携帯端末３Ｂから受け付ける投票機能を有する。
[1-6-3. Voting function]
The video posting viewing application has a voting function that receives input of evaluation (hereinafter referred to as "voting") for each singing video in competitive singing from the viewing user's
投票は、図６，８に示されるように歌唱動画毎に設けられている操作アイコン５８Ａを視聴者がクリックすることで入力される。すなわち、視聴ユーザは、歌唱動画に共感等した場合に当該歌唱動画に対する好評価の意思表示として操作アイコン５８Ａをクリックする。そして、受け付けられた歌唱動画毎の評価結果を示す画像（以下「投票結果画像」という。）６６が、歌唱動画と共に携帯端末３Ｂの画面３ａに表示されるように配信される。
Voting is input by the viewer clicking on the
このように本実施形態に係る投票機能は、一例として操作アイコン５８Ａを視聴ユーザがクリックすること対戦歌唱動画を視聴ユーザが評価できるので、対戦歌唱が行われた場合において歌唱の優劣判定を視聴ユーザが簡易に可能となる。なお、視聴ユーザは、一方の歌唱動画を評価すると共に他方の歌唱動画を評価することもできる。
As described above, the voting function according to the present embodiment allows the viewing user to evaluate the competitive singing video by clicking the
なお、投票機能は、投票として点数の入力を受け付け、歌唱動画の配信中に入力された総点数（以下「評価総得点」という。）を評価結果として導出する。評価総得点は、複数の視聴ユーザによって入力された点数の総和である。そして、投票機能は、対戦歌唱が終了するまでに入力された評価総得点によって対戦歌唱の勝者を決定する。すなわち、評価総得点が相対的に高い歌唱動画の歌唱ユーザが勝者とされる。このように、本実施形態に係る投票機能によれば、複数の視聴ユーザは自身が応援する歌唱ユーザ（歌唱動画）に対して協同して投票することで、自身が応援する歌唱ユーザを勝者とできるので、視聴ユーザは歌唱ユーザに対してより感情移入できる。 Note that the voting function accepts input of scores as votes, and derives the total score (hereinafter referred to as "evaluation total score") input during distribution of the singing video as an evaluation result. The total evaluation score is the sum of scores input by multiple viewing users. Then, the voting function determines the winner of the competitive singing based on the total evaluation score input until the competitive singing ends. That is, the singing user whose singing video has a relatively high total evaluation score is determined to be the winner. As described above, according to the voting function according to the present embodiment, multiple viewing users can jointly vote for the singing user (singing video) that they support, thereby making the singing user that they support the winner. Therefore, the viewing user can empathize more with the singing user.
本実施形態に係る投票機能は、操作アイコン５８Ａが一回クリックされる毎に１点が入力される。図６，８に示される投票結果画像６６の数字（２１及び１８５）は、歌唱ユーザ（歌唱動画）毎の評価総得点であり、画面３ａの左右に延伸し左右でハッチング（色）が異なるバー画像は、歌唱動画毎の評価総得点を相対的に示したものである。
In the voting function according to this embodiment, one point is input every time the
また、各視聴ユーザが操作アイコン５８Ａをクリック可能な回数には上限（以下「クリック上限」という。）が設けられており、本実施形態に係るクリック上限は一回である。そして、クリック上限が満たされると、図８に示されるように操作アイコン５８Ａの替わりに操作アイコン５８Ｄが画面３ａに表示される。
Further, an upper limit is set for the number of times each viewing user can click the
視聴ユーザは、操作アイコン５８Ｄをクリックすることで、クリックした操作アイコン５８Ｄに対応する歌唱動画に対して装飾画像（以下「投銭エフェクト画像」という。）を重畳させることが可能となる。このように、投票機能は、歌唱動画に対する投銭エフェクト画像の重畳を携帯端末３Ｂから受け付け、受け付けた投銭エフェクト画像を歌唱動画に重畳する投銭エフェクト機能を有する。なお、以下の説明では、視聴ユーザによる携帯端末３Ｂを介した投銭エフェクト画像の表示指示（選択）を、上述のように投銭入力という。
By clicking on the
すなわち、視聴ユーザは自身が共感する歌唱動画に対して投銭エフェクト画像６９を重畳させることで当該歌唱動画を装飾するので、投銭エフェクト機能は、歌唱動画の配信中に視聴者や歌唱動画そのものを盛り上げることができる。なお、投銭エフェクト機能は、動画投稿視聴アプリを介した視聴ユーザからの表示指示に応じてサーバ４によって実行される機能である。
In other words, since the viewing user decorates the singing video that he or she empathizes with by superimposing the
図９は、視聴ユーザが操作アイコン５８Ｄをクリックした場合に遷移する携帯端末３Ｂの画面表示であり、視聴ユーザが選択可能な複数の異なる投銭エフェクト画像６９が表示されている。投銭エフェクト画像６９には、各々ポイントが設定され、デザインがポイントに応じて異なっている。視聴ユーザは、画面表示されている複数の投銭エフェクト画像６９のうち、所有しているポイントで取得可能な一つを選択する。なお、デザインが異なるとは、例えば、形状や色彩又は向きが異なることをいう。
FIG. 9 shows a screen display of the
一例として、ポイントは１ポイント毎に課金額が定められており、視聴ユーザはポイントを購入し、所有しているポイントに応じて選択可能な投銭エフェクト画像６９の種類が増減する。視聴ユーザによって投銭エフェクト画像６９が選択されると、視聴ユーザが所有しているポイントは選択した投銭エフェクト画像６９のポイントに応じて減少する。なお、ポイントは課金による取得だけでなく、他のオンラインサービス等の利用によって増加してもよい。
As an example, a charge amount is determined for each point, and the viewing user purchases points, and the types of selectable coin-spending
図９に例示される投銭エフェクト画像６９は、スポットライトを模した向きの異なる末広がりの４種類のスポットライト画像、スポットライト画像を複数組み合わせて各々色彩が異なる４種類の合体スポットライト画像である。投銭エフェクト画像６９をスポットライトを模した画像とすることで、視聴ユーザはあたかもコンサート等に参加しているような感覚が得られる。なお、投銭エフェクト画像６９は図９の例に限らず、他の画像であってもよい。
The coin-throwing
図１０は、投銭エフェクト画像６９として合体スポットライト画像が視聴ユーザによって選択され、投銭エフェクト画像６９が重畳された歌唱動画（以下「エフェクト重畳歌唱動画」という。）の一例である。エフェクト重畳歌唱動画は、投銭エフェクト画像６９の選択を行った視聴ユーザだけではなく、対戦歌唱を視聴している他の視聴ユーザも視聴可能とされる。
FIG. 10 is an example of a singing video (hereinafter referred to as "effect superimposed singing video") in which the combined spotlight image is selected as the coin-throwing
なお、本実施形態に係る投銭エフェクト機能は、歌唱が実行されている歌唱動画に対して行うことが可能であり、投銭入力を行った後、略時間遅れなく投銭エフェクト画像６９を歌唱動画に重畳する。すなわち、図１０の例では、視聴ユーザは、第１歌唱動画６０Ａに対して投銭エフェクト画像６９を重畳させることができるが、歌唱ユーザが歌唱中ではない第２歌唱動画６０Ｂに対しては投銭エフェクト画像６９を重畳させることができない。より具体的には、歌唱ユーザが歌唱中でない歌唱動画に対応する操作アイコン５８Ｄを視聴ユーザがクリックしても、投銭エフェクト機能は当該クリックを受け付けない。
Note that the coin donation effect function according to the present embodiment can be performed on a singing video in which singing is being performed, and after inputting a coin deposit, the coin
また、投票機能は、投銭エフェクト画像６９の重畳を受け付けた場合、投銭エフェクト画像６９に応じた点数の入力を評価として受け付ける。本実施形態では、一例として投銭エフェクト画像に応じたポイントが評価の点数として入力される。すなわち、投銭入力が行われる毎に、視聴ユーザが選択した投銭エフェクト画像６９に応じたポイントが上述の評価総得点に加算される。
In addition, when the voting function receives the superimposition of the coin
このように、本実施形態に係る投票機能は、投銭エフェクト画像６９の重畳に応じて点数の入力を評価として受け付けることで、視聴ユーザによる投銭入力を促すことができる。なお、各視聴ユーザが可能な投銭入力の回数には上限はない。すなわち、視聴ユーザは、操作アイコン５８Ｄを何度もクリックすることで自身が共感等する歌唱動画の評価総得点を上げることができる。
In this manner, the voting function according to the present embodiment can encourage the viewing user to input coins by accepting the input of points as an evaluation according to the superimposition of the coin
さらに、歌唱動画に対して他の視聴ユーザよりも相対的に高い評価（投票）を行った視聴ユーザ、すなわち入力した点数の多い視聴ユーザ（以下「高評価ユーザ」という。）を示す画像（アイコン画像６４）が携帯端末３Ｂの画面３ａに表示される。これにより、視聴ユーザは、他の視聴ユーザに対して、自身が応援している歌唱ユーザを認識させることができる。また、視聴ユーザは、歌唱ユーザに対しても自身が応援していることを認識させることができる。
Furthermore, an image (icon Image 64) is displayed on the
なお、本実施形態に係る投票機能では、入力した点数が多い順に上位３名を高評価ユーザとし、高評価ユーザのアイコン画像６４を歌唱動画毎に画面３ａに表示させるが、アイコン画像６４が表示される高評価ユーザの数はこれに限られない。
In addition, in the voting function according to the present embodiment, the top three users in the order of input points are set as highly rated users, and the
また、本実施形態に係る投票機能は、操作アイコン５８Ａをクリックした場合と投銭入力が行われた場合に評価として点数が入力されるが、これに限らず、例えば、投銭入力が行われた場合に評価として点数が入力されてもよいし、操作アイコン５８Ａをクリックした場合に評価として点数が入力されてもよい。
Further, in the voting function according to the present embodiment, a score is input as an evaluation when the
［１－６－４．その他の機能］
サーバ４は、歌唱ユーザ毎の情報（以下「歌唱ユーザ情報」という。）をＨＤＤ２６に記憶してもよい。歌唱ユーザ情報には、歌唱ユーザが有するファンの数、歌唱ユーザの過去の対戦成績や勝率、及び得意とする楽曲等が含まれる。そして、対戦歌唱機能は、ファンの数が同程度の第１歌唱ユーザから第２歌唱ユーザへの対戦要求を受け付けてもよい。歌唱ユーザが有するファンの数は、歌唱ユーザの歌唱力に応じても異なると考えられる。このように、ファンの数が同程度であることを対戦歌唱を受け付ける条件とすることで、歌唱力が大きく異なる歌唱ユーザ同士による対戦歌唱が行われることが防止できる。
[1-6-4. Other features]
The
より具体的には、第１歌唱ユーザが第２歌唱ユーザに対戦要求を行う場合に、対戦歌唱機能が、第１歌唱ユーザのファンの数と第２歌唱ユーザのファンの数を比較し、ファンの数の差異が予め定められた基準値内（例えば±２０％内）である場合に、第１歌唱ユーザによる第２歌唱ユーザへの対戦要求を受け付ける。なお、ファンの数は、視聴ユーザが動画投稿視聴アプリを介して、自身が当該歌唱ユーザのファンであることを登録することで増加する。なお、視聴ユーザがファンとして登録できる歌唱ユーザの数に制限はない。 More specifically, when the first singing user makes a competition request to the second singing user, the competitive singing function compares the number of fans of the first singing user and the number of fans of the second singing user, and When the difference in the number of is within a predetermined reference value (for example, within ±20%), a competition request from the first singing user to the second singing user is accepted. Note that the number of fans increases when the viewing user registers that he/she is a fan of the singing user through the video posting/viewing application. Note that there is no limit to the number of singing users that the viewing user can register as fans.
なお、対戦歌唱機能は、ファンの数が同程度でも他の条件を満たしていれば、対戦要求を受け付けてもよいし、ファンの数が同程度でなくても第２歌唱ユーザが了承すれば対戦要求を受け付けてもよい。一方、対戦歌唱機能は、ファンの数が同程度の対戦要求のみを受け付けてもよい。ここでいう「のみ」とは、例えば、他の条件が満たされていても、ファンの数が同程度でない対戦要求は受け付けないことをいう。 In addition, the competition singing function may accept a competition request even if the number of fans is the same if other conditions are met, or even if the number of fans is not the same if the second singing user agrees. A match request may also be accepted. On the other hand, the competition singing function may accept only competition requests with the same number of fans. "Only" here means, for example, that even if other conditions are met, requests for matches that do not have the same number of fans will not be accepted.
また、対戦歌唱機能は、対戦歌唱で勝利した歌唱ユーザが自身に対する投票によって獲得した評価総得点に応じた対価を、歌唱ユーザに与えてもよい。ここでいう対価とは、金銭であったり、動画投稿視聴アプリ（動画投稿サイト）や他のオンラインサービスで使用可能なポイント等である。また、対戦歌唱で勝利した歌唱ユーザが、自身の評価総得点だけでなく対戦相手の評価総得点をも合算した点数に応じた対価を得てもよい（いわゆる総取り）。 Moreover, the competitive singing function may give consideration to the singing user according to the total evaluation score obtained by the singing user who won the competitive singing by voting for himself/herself. The consideration here may be money, points that can be used on a video posting/viewing application (video posting site), or other online services. Moreover, the singing user who wins in competitive singing may receive compensation according to the sum of not only his own total evaluation score but also the total evaluation score of his opponent (so-called all-out).
［１－７．対戦歌唱機能の機能ブロック］
図１１は、本実施形態に係る対戦歌唱機能に関する機能ブロック図である。サーバ４が備えるＣＰＵ２０は、対戦要求受付部７０、対戦了承判定部７１、対戦設定部７２、動画評価部７３、投銭エフェクト重畳部７４、及び動画配信部７５を備える。サーバ４が備える各機能によって実行される処理は、ＨＤＤ２６に記憶されているプログラムによって実現される。
[1-7. Competitive singing function functional block]
FIG. 11 is a functional block diagram regarding the competitive singing function according to this embodiment. The
対戦要求受付部７０は、第１歌唱ユーザから第２歌唱ユーザへの対戦要求を受け付ける。なお、対戦要求受付部７０は、ファンの数が同程度の第１歌唱ユーザから第２歌唱ユーザへの対戦要求を受け付けてもよい。
The competition
対戦了承判定部７１は、第２歌唱ユーザが第１歌唱ユーザからの対戦要求を了承したか否かを判定する。
The battle
対戦設定部７２は、対戦歌唱を行うために楽曲の設定や歌唱順の設定等の各種設定を行う。対戦設定部７２は、楽曲を時系列で複数領域に分割し、当該領域毎に歌唱を行う歌唱ユーザの順番（交互歌唱順番）を設定する。また、対戦設定部７２は、分割領域６８に基づいて設定される交互歌唱順番を動的に変化させてもよい。
The
動画評価部７３は、携帯端末３Ｂに配信されている歌唱動画毎の評価（点数）の入力、及び歌唱動画に対する投銭エフェクト画像６９の重畳（投銭入力）を携帯端末３Ｂから受け付ける。そして、動画評価部７３は、歌唱動画の配信中に入力された評価総得点を導出し、対戦歌唱の勝敗判定を行う。
The
投銭エフェクト重畳部７４は、投銭入力を受け付けた場合に、受け付けた投銭入力に応じた投銭エフェクト画像６９を歌唱動画に重畳する。
When a coin input is received, the coin contribution
動画配信部７５は、歌唱動画を携帯端末３Ｂに配信する。また、動画配信部７５は、第２歌唱ユーザが第１歌唱ユーザからの対戦要求を了承した場合、第１歌唱ユーザによる第１歌唱動画６０Ａ及び第２歌唱ユーザによる第２歌唱動画６０Ｂを携帯端末３Ｂの画面３ａに同時に表示されるように配信する。また、動画配信部７５は、歌唱を実行中の歌唱動画の音声が出力され、歌唱を実行中でない歌唱動画の音声は出力されず、歌唱を実行中の歌唱動画が歌唱を実行中でない歌唱動画よりも大きく画面３ａに表示されるように対戦歌唱動画を携帯端末３Ｂに配信する。
The
［１－８．対戦歌唱処理のフローチャート］
図１２は、サーバ４が備えるＣＰＵ２０によって実行される本実施形態に係る対戦歌唱処理の流れを示すフローチャートである。本実施形態に係る対戦歌唱処理を実行するためのプログラムはＨＤＤ２６の所定領域に予め記憶されている。
[1-8. Flowchart of competition singing process]
FIG. 12 is a flowchart showing the flow of the competitive singing process according to this embodiment executed by the
まず、ステップＳ１００では、第１歌唱ユーザによる第２歌唱ユーザへの対戦要求の有無を対戦要求受付部７０が判定し、肯定判定の場合、すなわち第１歌唱ユーザからの対戦要求を受け付けた場合はステップＳ１０２へ移行する。一方、否定判定の場合は、対戦要求を受け付けるまで待ち状態となる。
First, in step S100, the competition
ステップＳ１０２では、第２歌唱ユーザが対戦要求を了承したか否かを対戦了承判定部７１が判定し、肯定判定の場合はステップＳ１０４へ移行し、否定判定の場合はステップＳ１００へ戻る。
In step S102, the battle
ステップＳ１０４では、対戦歌唱を行うための各種設定を対戦設定部７２が行う。
In step S104, the
次のステップＳ１０６では、対戦歌唱動画の配信を動画配信部７５が開始する。
In the next step S106, the
次のステップＳ１０８では、対戦歌唱の楽曲が終了したか否かを動画配信部７５が判定し、肯定判定の場合はステップＳ１１０へ移行する。一方、否定判定の場合は、楽曲が終了するまで動画配信部７５が対戦歌唱動画の配信を継続する。
In the next step S108, the
次のステップＳ１１０では、動画配信部７５が対戦歌唱動画の配信を終了しステップＳ１００へ戻る。
In the next step S110, the
以上説明したように、本実施形態に係るサーバ４（対戦歌唱機能）は、第１歌唱ユーザから第２歌唱ユーザへの歌唱動画の対戦要求を受け付け、第２歌唱ユーザが対戦要求を了承した場合に、第１歌唱動画６０Ａ及び第２歌唱動画６０Ｂを携帯端末３Ｂの画面３ａに同時に表示されるように配信する。従って、本実施形態に係るサーバ４（対戦歌唱機能）は、歌唱ユーザ同士が自身の歌唱を各々の歌唱動画によって競い合うことを可能とすると共に、競い合っている複数の歌唱動画を視聴ユーザが同時に視聴することを可能とする。
As explained above, the server 4 (competitive singing function) according to the present embodiment receives a singing video competition request from the first singing user to the second singing user, and when the second singing user approves the competition request. , the
［１－９．投票処理のフローチャート］
図１３は、サーバ４が備えるＣＰＵ２０によって実行される本実施形態に係る投票処理の流れを示すフローチャートである。本実施形態に係る投票処理を実行するためのプログラムはＨＤＤ２６の所定領域に予め記憶されている。
[1-9. Flowchart of voting process]
FIG. 13 is a flowchart showing the flow of voting processing according to this embodiment executed by the
まず、ステップＳ２００では、対戦歌唱が開始したか否かを動画評価部７３が判定し、肯定判定の場合はステップＳ２０２へ移行する。一方、否定判定の場合は、対戦歌唱が開始するまで待ち状態となる。
First, in step S200, the
ステップＳ２０２では、視聴ユーザによって操作アイコン５８Ａがクリックされたか否かを動画評価部７３が判定し、肯定判定の場合はステップＳ２０４へ移行し、否定判定の場合はステップＳ２０６へ移行する。
In step S202, the
ステップＳ２０４では、評価総得点を動画評価部７３が導出し、評価総得点の表示を動画配信部７５が更新する。
In step S204, the
ステップＳ２０６では、視聴ユーザによって操作アイコン５８Ｄがクリックされたか否かを動画評価部７３が判定し、肯定判定の場合はステップＳ２０８へ移行し、否定判定の場合はステップＳ２１０へ移行する。
In step S206, the
ステップＳ２０８では、視聴ユーザが選択した投銭エフェクト画像６９を投銭エフェクト重畳部７４が対象の歌唱動画に重畳し、重畳した投銭エフェクト画像６９に応じた点数を加算した評価総得点を動画評価部７３が導出し、評価総得点の表示を動画配信部７５が更新する。
In step S208, the
次のステップＳ２１０では、歌唱動画に対する高評価ユーザに変化があったか否かを動画評価部７３が判定し、肯定判定の場合はステップＳ２１２へ移行し、否定判定の場合はステップＳ２１４へ移行する。
In the next step S210, the
ステップＳ２１２では、高評価ユーザのアイコン画像６４の表示を動画配信部７５が更新する。
In step S212, the
ステップＳ２１４では、対戦歌唱の楽曲が終了したか否かを動画配信部７５が判定し、肯定判定の場合はステップＳ２１６へ移行し、否定判定の場合はステップＳ２０２へ戻る。
In step S214, the
ステップＳ２１６では、動画評価部７３が歌唱動画毎の評価総得点に基づいて勝敗を判定し、その結果を示す画像を動画配信部７５が配信する。
In step S216, the
次のステップＳ２１８では、動画配信部７５が対戦歌唱動画の配信を終了し本投票処理を終了する。
In the next step S218, the
以上説明したように、本実施形態に係るサーバ４（投票機能）は、携帯端末３Ｂに配信されている歌唱動画毎の評価を携帯端末３Ｂから受け付ける。従って、本実施形態に係るサーバ４（投票機能）は、複数の歌唱ユーザ各々が配信したパフォーマンス動画の優劣判定を視聴ユーザが簡易に行うことを可能とする。
As explained above, the server 4 (voting function) according to this embodiment receives the evaluation for each singing video distributed to the
［２．第２実施形態］
以下、本発明の第２実施形態について説明する。
[2. Second embodiment]
A second embodiment of the present invention will be described below.
本実施形態に係るカラオケシステム１、サーバ４、及び携帯端末３の構成は、第１実施形態に係るカラオケシステム１、サーバ４、及び携帯端末３の構成と同様であるので説明を省略する。
The configurations of the
［２－１．対戦ダンス機能の概要］
本実施形態に係るパフォーマンス動画は、パフォーマーをダンサーとし、パフォーマンス動画をダンス動画とし、当該ダンス動画が動画投稿サイト（サーバ４）にアップロードされる。すなわち、本実施形態に係る対戦機能は、図１４に示されるように異なるダンスユーザによる複数のダンス動画（第１ダンス動画６０Ｃ、第２ダンス動画６０Ｄ）を視聴ユーザの携帯端末３Ｂの画面３ａに同時に表示する対戦ダンス機能である。
[2-1. Overview of the battle dance function]
In the performance video according to this embodiment, the performer is a dancer, the performance video is a dance video, and the dance video is uploaded to a video posting site (server 4). That is, as shown in FIG. 14, the competition function according to the present embodiment displays a plurality of dance videos (
対戦ダンスは、第１ダンスユーザから他のダンスユーザ（以下「第２ダンスユーザ」という。）に対してダンス動画の同時配信の要求（対戦要求）が行われ、当該対戦要求を第２ダンスユーザが了承することで行われる。一例として、第１ダンスユーザは、第２ダンスユーザに対戦要求を行う場合、本対戦要求が対戦ダンスであることを示す。これにより、第２ダンスユーザ及びサーバ４は、本対戦要求が対戦ダンスであることを認識できる。以下の説明では、対戦ダンスにおいて配信される第１ダンス動画６０Ｃ及び第２ダンス動画６０Ｄを総称して対戦ダンス動画ともいう。
In a competitive dance, a first dance user requests another dance user (hereinafter referred to as a "second dance user") to simultaneously distribute dance videos (competition request), and the second dance user receives the competition request. This will be done with the consent of As an example, when the first dance user makes a competition request to the second dance user, the first dance user indicates that the competition request is a competition dance. Thereby, the second dance user and the
なお、本実施形態に係る対戦ダンス機能は、第１実施形態と同様に、楽曲を仮想的に時系列で複数領域に分割した分割領域６８（図７参照）毎にダンスを行うダンスユーザの順番を設定（以下「交互ダンス設定」という。）する。交互ダンス設定には、第１ダンスユーザと第２ダンスユーザとが一緒にダンスを行う分割領域６８が設定されてもよい。
Note that, similarly to the first embodiment, the competitive dance function according to the present embodiment determines the order of dance users who dance in each divided area 68 (see FIG. 7) in which a song is virtually divided into multiple areas in chronological order. (hereinafter referred to as "alternate dance setting"). In the alternate dance setting, a divided
［２－１－１．注目動画の拡大表示機能］
本実施形態に係る対戦ダンス機能は、携帯端末３Ｂの画面３ａに同時に表示される複数のダンス動画のうち、被写体の動きが最も大きいダンス動画を注目動画であると判定（注目動画判定機能）し、注目動画が他のダンス動画に比べて大きく表示されるようにダンス動画を携帯端末３Ｂに配信する拡大表示機能を有する。なお、ここでいう被写体とは、人物であるダンサーである。
[2-1-1. Featured video enlargement function]
The competitive dance function according to the present embodiment determines the dance video with the largest movement of the subject among the multiple dance videos simultaneously displayed on the
図１５の例では、第１ダンス動画６０Ｃが注目動画であり、第２ダンス動画６０Ｄが注目動画でないため、第１ダンス動画６０Ｃが拡大表示（全画面表示）される一方、第２ダンス動画６０Ｄは縮小表示（ウィンドウ表示）される。なお、ダンス動画が縮小表示される場合の画像サイズと画面３ａにおける表示位置は予め定められてもよいし、視聴ユーザが任意の画像サイズ及び画面位置に変更可能としてもよい。
In the example of FIG. 15, the
このように、拡大表示機能は、被写体の動きに基づいて他のダンス動画に比べて大きく表示する注目動画を判定するので、配信されるダンス動画の音を用いることなく携帯端末３Ｂの画面３ａにおける対戦ダンス動画の表示態様を変化させることができる。
In this way, the enlarged display function determines which video to display larger than other dance videos based on the movement of the subject, so it can be displayed on the
また、第１ダンスユーザと第２ダンスユーザとが一緒にダンスを行う場合には、より動きの大きいダンス動画が視聴ユーザの携帯端末３Ｂで拡大表示されるので、対戦しているダンスユーザはより躍動感のあるダンスを行うことになり、その結果、視聴ユーザがより盛り上がることになる。
In addition, when the first dance user and the second dance user dance together, the dance video with larger movements is enlarged and displayed on the viewing user's
また、拡大表示機能は、注目動画の音が出力され、他のダンス動画の音が出力されないように、対戦ダンス動画を携帯端末３Ｂに配信する。これにより、注目動画のダンサーが発する音声（声や息づかい等）が携帯端末３Ｂから出力される一方、注目動画でないダンサーが発する音声は携帯端末３Ｂから出力されない。このため、視聴ユーザは、注目動画でないダンス動画からの音声によって注意が散漫となることなく、対戦ダンス動画を視聴できる。
Further, the enlarged display function distributes the competitive dance video to the
なお、本実施形態に係る拡大表示機能が実行される場合は、第１実施形態で説明した交互パフォーマンス設定に基づく音声出力及び画面表示は行われないが、これに限らず、交互パフォーマンス設定に基づく音声出力及び画面表示を行うものの、第１ダンスユーザと第２ダンスユーザとが一緒にダンスを行う場合に本実施形態に係る拡大表示機能が実行されてもよい。 Note that when the enlarged display function according to the present embodiment is executed, audio output and screen display based on the alternate performance settings described in the first embodiment are not performed, but the invention is not limited to this. Although audio output and screen display are performed, the enlarged display function according to this embodiment may be executed when the first dance user and the second dance user dance together.
［２－１－２．注目動画判定機能］
注目動画判定機能は、ダンス動画から被写体であるダンサー（人物）を示す画像（以下「ダンサー画像」という。）を所定時間間隔で抽出し、複数のダンス動画のうち抽出したダンサーの差異が最も大きいダンス動画を注目動画であると判定する。なお、画像抽出間隔（以下「画像抽出間隔」という。）は、例えば０．５秒であり、時間ではなくフレーム数で規定されてもよい。
[2-1-2. Featured video determination function]
The attention video determination function extracts images (hereinafter referred to as "dancer images") showing dancers (people) as subjects from dance videos at predetermined time intervals, and extracts images that show the dancer (person) as the subject at predetermined time intervals, and extracts images that show the dancer (person) as the subject at predetermined time intervals, and extracts images that show the largest difference between the extracted dancers among multiple dance videos. A dance video is determined to be a video of interest. Note that the image extraction interval (hereinafter referred to as "image extraction interval") is, for example, 0.5 seconds, and may be defined by the number of frames instead of time.
より具体的には、注目動画判定機能は、ダンス動画の開始から所定時間（０．５秒）間隔でダンサー画像を抽出し、画像抽出間隔前後のダンサー画像の差異を導出する。そして、注目動画判定機能は、第１ダンス動画６０Ｃと第２ダンス動画６０Ｄ毎に導出した同じタイミングにおけるダンス動画の差異を比較し、第１ダンス動画６０Ｃと第２ダンス動画６０Ｄのうち差異がより大きいダンス動画を注目動画とする。なお、ダンス動画からの人物の抽出は、例えば、既知の画像解析手法によって行われればよい。
More specifically, the attention video determination function extracts dancer images at predetermined time intervals (0.5 seconds) from the start of the dance video, and derives the difference between the dancer images before and after the image extraction interval. Then, the attention video determination function compares the differences between the dance videos at the same timing derived for each of the
このように、注目動画判定機能は、ダンス動画に含まれるダンサー画像から直接的にダンサーの動きの大小を判定するので、被写体であるダンサーの動きが相対的に大きいダンス動画を正確に判定できる。なお、本実施形態に係るダンス動画は、ダンサー画像を画像解析するため、ダンサーの全身が撮影され、かつ画像解析が可能な程度の大きさでダンサーが撮影される動画である。 In this way, the attention video determination function directly determines the size of the dancer's movement from the dancer images included in the dance video, so it is possible to accurately determine a dance video in which the movement of the dancer as a subject is relatively large. Note that the dance video according to this embodiment is a video in which the dancer's whole body is photographed and the dancer is photographed in a size that allows image analysis in order to perform image analysis of the dancer image.
また、本実施形態に係る注目動画判定機能は、被写体であるダンサーの動きの差異をダンサーの手足の動きに基づいて判定する。 Furthermore, the attention video determination function according to the present embodiment determines the difference in movement of a dancer, who is a subject, based on the movements of the dancer's limbs.
図１６は、ダンス動画から画像抽出間隔で抽出したダンサー画像の一例である。図１６
（Ａ），（Ｂ）は第１ダンス動画６０Ｃから画像抽出間隔で抽出したダンサー画像、図１６（Ｃ），（Ｄ）は第２ダンス動画６０Ｄから画像抽出間隔で抽出したダンサー画像である。すなわち、図１６の例では、図１６（Ａ）に示される第１ダンス動画６０Ｃのダンサー画像が所定時間後に図１６（Ｂ）のように変化し、図１６（Ｃ）に示される第２ダンス動画６０Ｄのダンサー画像が所定時間後に図１６（Ｄ）のように変化している。
FIG. 16 is an example of dancer images extracted from a dance video at image extraction intervals. Figure 16
16(A) and (B) are dancer images extracted from the
図１６の例では、破線領域で囲まれるように、第１ダンス動画６０Ｃでは左手及び右足の動きが大きい一方、第２ダンス動画６０Ｄでは左右の足が若干動いている程度であるため、第１ダンス動画６０Ｃの方がダンサー画像の差異が大きい。このため、第１ダンス動画６０Ｃが注目画像とされる。なお、一例として、手足の動きとは手足の先端位置の動きであり、手足の先端位置の動きは先端位置を示す座標の変化から導出される。
In the example of FIG. 16, as surrounded by a broken line area, in the
このように、注目動画判定機能は、被写体であるダンサーの動きの差異をダンサーの手足の動きに基づいて判定するので、より正確にダンサーの動きを判定できる。 In this way, the attention video determination function determines the difference in the movement of the dancer, who is the subject, based on the movement of the dancer's limbs, so that the movement of the dancer can be determined more accurately.
ここで、ダンスは瞬間的にダンサーが動かない場合もある。このような場合に、注目動画でない他のダンス動画のダンサー（被写体）が動くと、当該他のダンス動画が注目動画であると判定され、その結果、ダンスを行っていない動画が携帯端末３Ｂで拡大表示される可能性がある。
Here, in dancing, the dancer may not move for a moment. In such a case, if a dancer (subject) in another dance video that is not the video of interest moves, that other dance video will be determined to be the video of interest, and as a result, the video that is not dancing will be displayed on the
そこで、拡大表示機能は、注目動画のダンサーの動きが所定時間（例えば１秒）以上、他のダンス動画のダンサーの動きよりも小さくなった場合に当該他のダンス動画を注目動画として切り替えてもよい。換言すると、注目動画のダンサーの動きが他のダンス動画のダンサーの動きよりも小さくなっても、それが所定時間未満であれば他のダンス動画が注目動画に切り替わることは無い。 Therefore, the enlarged display function allows you to switch the other dance video as the featured video if the movement of the dancer in the video of interest becomes smaller than the movement of the dancer in another dance video for a predetermined period of time (for example, 1 second) or more. good. In other words, even if the movements of the dancer in the video of interest become smaller than the movements of the dancers of other dance videos, the other dance videos will not be switched to the video of interest as long as the movement is less than the predetermined time.
これにより、注目動画のダンサーが一時的に動作を停止しても、ダンスを実行していない他のダンス動画が注目動画となることを防止できる。 Thereby, even if the dancer in the video of interest temporarily stops moving, it is possible to prevent other dance videos that are not performing dance from becoming the video of interest.
［２－２．対戦ダンス機能の機能ブロック］
図１７は、本実施形態に係る対戦ダンス機能に関する機能ブロック図である。サーバ４が備えるＣＰＵ２０は、対戦要求受付部７０、対戦了承判定部７１、対戦設定部７２、動画評価部７３、投銭エフェクト重畳部７４、及び動画配信部７５と共に注目動画判定部８０を備える。サーバ４が備える各機能によって実行される処理は、ＨＤＤ２６に記憶されているプログラムによって実現される。なお、本実施形態に係る対戦要求受付部７０、対戦了承判定部７１、対戦設定部７２、動画評価部７３、投銭エフェクト重畳部７４、及び動画配信部７５は、処理の対象となる動画がダンス動画であるものの、第１実施形態に係る各部と同様であるので、その説明を省略する。
[2-2. Functional block of competitive dance function]
FIG. 17 is a functional block diagram regarding the competitive dance function according to this embodiment. The
注目動画判定部８０は、上述した注目動画判定機能を実行し、複数のダンス動画のうち被写体（ダンサー）の動きが最も大きいダンス動画を注目動画であると判定する。
The attention
なお、本実施形態に係る動画配信部７５は、注目動画の音が出力され、注目動画でない他のダンス動画の音が出力されないように、対戦ダンス動画を携帯端末３Ｂに配信する。
Note that the
［２－３．注目動画拡大処理のフローチャート］
図１８は、サーバ４が備えるＣＰＵ２０によって実行される本実施形態に係る注目動画拡大処理の流れを示すフローチャートである。本実施形態に係る注目動画拡大処理を実行するためのプログラムはＨＤＤ２６の所定領域に予め記憶されている。
[2-3. Flowchart of featured video enlargement process]
FIG. 18 is a flowchart showing the flow of the attention video enlargement process according to this embodiment, which is executed by the
まず、ステップＳ３００では、対戦ダンスの楽曲が開始したか否かを注目動画判定部８０が判定し、肯定判定の場合はステップＳ３０２へ移行する。一方、否定判定の場合は、対戦ダンスの楽曲が始まるまで待ち状態となる。
First, in step S300, the attention
次のステップＳ３０２では、対戦ダンスの楽曲が開始した直後又は所定時間経過後（例えば１秒後）に、注目動画判定部８０が第１ダンス動画６０Ｃ及び第２ダンス動画６０Ｄから各々のダンサー画像を抽出する。
In the next step S302, immediately after the competition dance music starts or after a predetermined period of time (for example, 1 second), the attention
次のステップＳ３０４では、前回ダンサー画像を抽出した時間から画像抽出間隔が経過したか否かを注目動画判定部８０が判定し、肯定判定の場合はステップＳ３０６へ移行する。一方、否定判定の場合は、画像抽出間隔が経過するまで待ち状態となる。
In the next step S304, the attention moving
ステップＳ３０６では、注目動画判定部８０が第１ダンス動画６０Ｃ及び第２ダンス動画６０Ｄから各々のダンサー画像を抽出する。
In step S306, the attention
次のステップＳ３０８では、前回抽出したダンサー画像と今回抽出したダンサー画像との差異をダンス動画毎に注目動画判定部８０が導出する。
In the next step S308, the attention
次のステップＳ３１０では、ダンス動画毎のダンサー画像の差異を注目動画判定部８０が比較して注目動画を判定する。
In the next step S310, the attention
次のステップＳ３１２では、注目動画が他のダンス動画に比べて大きく表示（拡大表示）されるように、動画配信部７５が対戦ダンス動画を携帯端末３Ｂに配信する。なお、ステップＳ３１０によって注目動画と判定されたダンス動画が切り替わった場合には、拡大表示されるダンス動画も切り替わることになる。
In the next step S312, the
次のステップＳ３１４では、前回ダンサー画像を抽出した時間から画像抽出間隔が経過したか否かを注目動画判定部８０が判定し、肯定判定の場合はステップＳ３０６へ戻り、否定判定の場合はステップＳ３１６へ移行する。
In the next step S314, the attention
ステップＳ３１６では、対戦ダンスの楽曲が終了したか否かを動画配信部７５が判定し、肯定判定の場合はステップＳ３１８へ移行し、否定判定の場合はステップＳ３１４へ戻る。
In step S316, the
次のステップＳ３１８では、動画配信部７５が対戦ダンス動画の配信を終了し、本注目動画拡大処理を終了する。
In the next step S318, the
以上説明したように、本実施形態に係るサーバ４（対戦ダンス機能）は、携帯端末３Ｂの画面３ａに同時に表示される複数のダンス動画のうち、ダンサーの動きが最も大きいダンス動画を注目動画であると判定する注目動画判定処理を行い、注目動画が他のダンス動画に比べて大きく表示されるように携帯端末３Ｂに配信する。従って、本実施形態に係るサーバ４（対戦ダンス機能）は、配信されるダンス動画の音を用いることなく携帯端末３Ｂの画面３ａにおける対戦ダンス動画の表示態様を変化させることができる。
As explained above, the server 4 (competitive dance function) according to the present embodiment selects the dance video with the largest movement of the dancer as the video of interest among the multiple dance videos displayed simultaneously on the
［３．他の実施形態］
以上、本発明を、上記各実施形態を用いて説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。発明の要旨を逸脱しない範囲で上記各実施形態に多様な変更又は改良を加えることができ、該変更又は改良を加えた形態も本発明の技術的範囲に含まれる。また、上記各実施形態を適宜組み合わせてもよい。
[3. Other embodiments]
Although the present invention has been described above using the above embodiments, the technical scope of the present invention is not limited to the range described in the above embodiments. Various changes or improvements can be made to each of the embodiments described above without departing from the gist of the invention, and forms with such changes or improvements are also included within the technical scope of the present invention. Furthermore, the above embodiments may be combined as appropriate.
例えば、上記実施形態では、対戦歌唱又は対戦ダンスを２人のパフォーマー（歌唱ユーザ又はダンスユーザ）で行う形態について説明したが、本発明は、これに限定されるものではない。例えば、対戦歌唱又は対戦ダンスを３人以上のパフォーマーで行う形態としてもよい。この形態の場合、あるパフォーマーが２人以上の他のパフォーマーに同時に対戦要求を行ってもよいし、対戦要求を受けたパフォーマーがさらに他のパフォーマーに対戦要求を行ってもよい。 For example, in the embodiment described above, a mode in which two performers (singing users or dancing users) perform competitive singing or dancing is described, but the present invention is not limited to this. For example, a competition singing or competition dance may be performed by three or more performers. In this case, a certain performer may request a battle to two or more other performers at the same time, or a performer who has received a battle request may further request another performer to compete.
また、上記実施形態では、投票結果画像６６として、動画毎の評価総得点をバー画像で表示する形態について説明したが、本発明は、これに限定されるものではない。例えば、バー画像の替わりに円グラフで動画毎の評価総得点を相対的に表示してもよい。
Further, in the embodiment described above, the total evaluation score for each video is displayed as a bar image as the
また、上記実施形態では、対戦歌唱又は対戦ダンスの勝敗を視聴ユーザの投票によって決定する形態について説明したが、本発明は、これに限定されるものではない。例えば、対戦歌唱機能又は対戦ダンスが自動採点機能を有し、この自動採点機能による判定結果によって勝敗が決定されてもよい。 Further, in the embodiment described above, a mode has been described in which the winner or loser of competitive singing or competitive dancing is determined by votes of viewing users, but the present invention is not limited to this. For example, the competition singing function or the competition dance may have an automatic scoring function, and the winner or loser may be determined based on the determination result of this automatic scoring function.
また、上記第１実施形態では、交互パフォーマンス設定に基づいて、第１歌唱動画６０Ａ及び第２歌唱動画６０Ｂの音声出力や画面表示を行う形態について説明したが、本発明は、これに限定されるものではない。例えば、携帯端末３Ａから送信される歌唱動画に対してサーバ４が画像解析（顔認識処理）を行いより大きく口を開いている歌唱動画を判定し、この判定結果に基づいて、第１歌唱動画６０Ａ及び第２歌唱動画６０Ｂの音声出力や画面表示を行ってもよい。すなわち、相対的に口を大きく開けている歌唱動画が、歌唱ユーザが歌唱を実行中の歌唱動画であると判定される。
Furthermore, in the first embodiment described above, a mode has been described in which the audio output and screen display of the
また、上記実施形態では、対戦歌唱又は対戦ダンスとしてリアルタイム対戦の形態について説明したが、本発明は、これに限定されるものではない。例えば、パフォーマーが既に録画済みの他のパフォーマーの動画に対して対戦要求を行い、ライブの動画と録画済みの動画による対戦や、録画済みの動画同士の対戦等が可能とされてもよい。 Further, in the embodiment described above, the form of real-time competition has been described as competitive singing or competitive dancing, but the present invention is not limited to this. For example, a performer may make a competition request for a video of another performer that has already been recorded, allowing a competition between a live video and a recorded video, or a competition between recorded videos.
また、上記実施形態で説明した各処理の流れも一例であり、本発明の主旨を逸脱しない範囲内において不要なステップを削除したり、新たなステップを追加したり、処理順序を入れ替えたりしてもよい。 Further, the flow of each process explained in the above embodiment is only an example, and unnecessary steps may be deleted, new steps may be added, or the processing order may be changed without departing from the spirit of the present invention. Good too.
３Ｂ 携帯端末（端末装置）
３ａ 画面
４ サーバ（情報処理装置）
６０Ｃ 第１ダンス動画（注目動画）
６０Ｄ 第２ダンス動画（他の動画）
７２ 対戦設定部（設定手段）
７５ 動画配信部（配信手段）
８０ 注目動画判定部（判定手段）
3B Mobile terminal (terminal device)
60C 1st dance video (featured video)
60D 2nd dance video (other videos)
72 Battle setting section (setting means)
75 Video distribution department (distribution means)
80 Attention video determination unit (determination means)
Claims (3)
それぞれ被写体を撮影し、表示サイズが制御される第１動画と第２動画を含む配信動画であって、前記第１動画の被写体と前記第２動画の被写体がパフォーマンスの優劣を視聴ユーザの投票に基づいて競う前記配信動画を配信し、
前記第１動画を前記第２動画に比べて大きく表示している間は、前記第１動画の被写体に対して投票するための操作を可能とし、前記第２動画の被写体に対して投票をするための操作を可能としない、
情報処理装置。 a processor, the processor comprising:
A distributed video including a first video and a second video whose display size is controlled by shooting a subject respectively, wherein the performance of the subject of the first video and the subject of the second video is determined by voting by viewing users. Distribute the said distribution video that competes based on the
While the first video is displayed larger than the second video, an operation for voting on the subject of the first video is enabled, and voting is performed on the subject of the second video. does not allow operations for
Information processing device.
プロセッサが、前記第１動画を前記第２動画に比べて大きく表示している間は、前記第１動画の被写体に対して投票するための操作を可能とし、前記第２動画の被写体に対して投票をするための操作を可能としない、
情報処理方法。 A distributed video including a first video and a second video whose display sizes are controlled by a processor, each photographing a subject, and a user who views the performance of the subject of the first video and the subject of the second video. distribute the said distribution video that competes based on the votes of
While displaying the first video larger than the second video, the processor enables an operation for voting on the subject of the first video, and performs voting on the subject of the second video. Do not allow operations for voting;
Information processing method.
プロセッサに、前記第１動画を前記第２動画に比べて大きく表示している間は、前記第１動画の被写体に対して投票するための操作を可能とし、前記第２動画の被写体に対して投票をするための操作を可能としないよう制御させる、
処理を実行させるプログラム。 A distributed video including a first video and a second video whose display sizes are controlled by each photographing a subject in a processor, and a user who views the performance of the subject of the first video and the subject of the second video. distribute the said distribution video that competes based on the votes of
The processor is enabled to perform an operation for voting on the subject of the first moving image while displaying the first moving image larger than the second moving image, and to perform voting on the subject of the second moving image. control so that operations for voting are not possible;
A program that executes processing.
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022210354A JP7436912B2 (en) | 2018-07-25 | 2022-12-27 | Information processing device, video distribution method, and video distribution program |
| JP2024012079A JP2024072820A (en) | 2018-07-25 | 2024-01-30 | Information processing device, video distribution method, and video distribution program |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018139740A JP7208466B2 (en) | 2018-07-25 | 2018-07-25 | Information processing device, video distribution method, and video distribution program |
| JP2022210354A JP7436912B2 (en) | 2018-07-25 | 2022-12-27 | Information processing device, video distribution method, and video distribution program |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018139740A Division JP7208466B2 (en) | 2018-07-25 | 2018-07-25 | Information processing device, video distribution method, and video distribution program |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2024012079A Division JP2024072820A (en) | 2018-07-25 | 2024-01-30 | Information processing device, video distribution method, and video distribution program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023052125A JP2023052125A (en) | 2023-04-11 |
| JP7436912B2 true JP7436912B2 (en) | 2024-02-22 |
Family
ID=69581618
Family Applications (3)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018139740A Active JP7208466B2 (en) | 2018-07-25 | 2018-07-25 | Information processing device, video distribution method, and video distribution program |
| JP2022210354A Active JP7436912B2 (en) | 2018-07-25 | 2022-12-27 | Information processing device, video distribution method, and video distribution program |
| JP2024012079A Pending JP2024072820A (en) | 2018-07-25 | 2024-01-30 | Information processing device, video distribution method, and video distribution program |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018139740A Active JP7208466B2 (en) | 2018-07-25 | 2018-07-25 | Information processing device, video distribution method, and video distribution program |
Family Applications After (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2024012079A Pending JP2024072820A (en) | 2018-07-25 | 2024-01-30 | Information processing device, video distribution method, and video distribution program |
Country Status (1)
| Country | Link |
|---|---|
| JP (3) | JP7208466B2 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11582523B2 (en) * | 2020-01-31 | 2023-02-14 | Virtual Arts, Inc. | Video-based competition platform |
| JP6905133B1 (en) * | 2020-08-28 | 2021-07-21 | Kddi株式会社 | Information processing equipment, information processing methods and programs |
| JP7465186B2 (en) | 2020-09-30 | 2024-04-10 | 株式会社第一興商 | Live Streaming System |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003179908A (en) | 2001-09-07 | 2003-06-27 | Matsushita Electric Ind Co Ltd | Image-distributing apparatus and image-receiving apparatus |
| JP2014092592A (en) | 2012-10-31 | 2014-05-19 | Daiichikosho Co Ltd | Collaboration singing video display system |
-
2018
- 2018-07-25 JP JP2018139740A patent/JP7208466B2/en active Active
-
2022
- 2022-12-27 JP JP2022210354A patent/JP7436912B2/en active Active
-
2024
- 2024-01-30 JP JP2024012079A patent/JP2024072820A/en active Pending
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003179908A (en) | 2001-09-07 | 2003-06-27 | Matsushita Electric Ind Co Ltd | Image-distributing apparatus and image-receiving apparatus |
| JP2014092592A (en) | 2012-10-31 | 2014-05-19 | Daiichikosho Co Ltd | Collaboration singing video display system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7208466B2 (en) | 2023-01-19 |
| JP2024072820A (en) | 2024-05-28 |
| JP2023052125A (en) | 2023-04-11 |
| JP2020017871A (en) | 2020-01-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7436912B2 (en) | Information processing device, video distribution method, and video distribution program | |
| JP7425356B2 (en) | Information processing device, video distribution method, and video distribution program | |
| JP7417176B2 (en) | Information processing device, video distribution method, and video distribution program | |
| JP7170077B2 (en) | program | |
| JP2015210344A (en) | Communication karaoke system and server | |
| JP6905826B2 (en) | Programs, game machines, and server devices | |
| TW202205868A (en) | Video distribution system, computer program used therein, and control method | |
| JP7093006B2 (en) | Information processing equipment, video distribution method and video distribution program | |
| JP2023171532A (en) | Evaluation information processing device, and control method and control program for the same | |
| JP2024020565A (en) | Information processing device, information processing system, and information processing program | |
| CN114253393A (en) | Information processing apparatus, terminal, method, and computer-readable recording medium | |
| JP2023169373A (en) | Information processing device, moving image synthesis method and moving image synthesis program | |
| JP7311815B2 (en) | Information processing device, video distribution method, and video distribution program | |
| JP7120746B2 (en) | Programs, computer systems, server systems and game systems | |
| JP5486538B2 (en) | Karaoke equipment | |
| JP7258923B2 (en) | program | |
| JP2024070696A (en) | Information processing system, information processing method, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230124 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230124 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230207 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240109 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240122 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7436912 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |