JP6051066B2 - カラオケ用の歌唱動画再生システム - Google Patents

Description

本発明は、サーバーからダウンロードした歌唱動画データを再生し、コラボレーション歌唱を行わせるカラオケ用の歌唱動画再生システムに関する。

カラオケ楽曲の歌唱中に撮影された歌唱動画データをサーバーに登録しておき、同じカラオケ楽曲を歌唱する際に、サーバーからダウンロードした歌唱動画データをカラオケ装置で再生させることで、コラボレーション歌唱を行わせるカラオケ用の歌唱動画再生システムが知られている。例えば、特許文献１には、撮影手段によって撮影された歌唱者を示す歌唱者映像を記憶手段に記憶し、記憶手段から読み出された歌唱者映像と撮影手段により現在撮影されている歌唱者映像とを映像表示手段で表示させる通信カラオケ装置が記載されている。

歌唱動画データの送受信に用いられる通信回線は、通常、混雑度合いによって通信速度が変化する。ここで、高画質の歌唱動画データはデータサイズが大きいため、回線が混雑しているとダウンロードの完了までに長時間を要することがある。この場合、ダウンロードの完了を待ってからカラオケ再生を行うと、待ち時間が長くなるので歌唱者を興ざめさせてしまう。一方、一部分の歌唱動画データがバッファリングできた段階でカラオケ再生を開始させると、歌唱動画データのダウンロード完了前に再生が追いつくことになり、再生が停止されて歌唱者を興ざめさせてしまう。

このような通信回線の混雑状況に対応すべく、例えば特許文献２には、動画のストリーミング配信に際し、通信回線の状況に応じて低画質（ＳＤ画質）と高画質（ＨＤ画質）の映像を切り換える技術が開示されている。

特開平１０−１７１４８１号公報 特開２００９−２９０６９１号公報

特許文献１の通信カラオケ装置に特許文献２の技術を適用することで、カラオケ歌唱を速やかに開始させることはできるが、通信回線の状況をサーバーが常に監視しなければならず、その分の負担が増えてしまう。また、特許文献２の技術は、ストリーミング配信を前提にしていることから、歌唱動画データのダウンロード完了前に再生が追いついてしまうと、再生が停止されてしまう。

本発明は、このような事情に鑑みてなされたものであり、その目的は、サーバーからダウンロードした歌唱動画データを再生し、コラボレーション歌唱を行わせるカラオケ用の歌唱動画再生システムにおいて、歌唱を速やかに開始させつつもサーバーによる回線の監視負担を軽減し、歌唱動画データの再生停止を抑制することにある。

前述の目的を達成するため、本発明は、サーバーとカラオケ装置とを通信回線によって接続した歌唱動画再生システムであって、前記サーバーは、或る歌唱映像が記録された第１歌唱映像データ、及び、前記或る歌唱映像が記録されると共に前記第１歌唱映像データよりも高画質でデータサイズの大きな第２歌唱映像データが記憶された歌唱映像データ記憶手段と、前記或る歌唱映像に対応する歌唱音声データが記憶された歌唱音声データ記憶手段と、前記カラオケ装置に対し、前記第１歌唱映像データ及び前記歌唱音声データを送信し、前記第１歌唱映像データの送信終了後に前記第２歌唱映像データを送信するデータ送信手段とを有し、前記カラオケ装置は、前記第１歌唱映像データ、前記第２歌唱映像データ、及び、前記歌唱音声データを受信するデータ受信手段と、前記第１歌唱映像データ及び前記歌唱音声データの受信完了を条件に、前記第１歌唱映像データ及び前記歌唱音声データの再生を開始するデータ再生手段とを有し、前記データ受信手段は、前記第１歌唱映像データ及び前記歌唱音声データの再生期間中に、前記第２歌唱映像データを受信することを特徴とする。

本発明によれば、サーバーは、回線の状態に関わらず各データをカラオケ装置へ送信すればよいので、通信回線の監視負担を軽減できる。そして、相対的にデータサイズが小さい第１歌唱映像データと歌唱音声データの受信完了を条件にカラオケ装置による再生が開始されるので、カラオケ歌唱を速やかに開始させることができる。また、第１歌唱映像データと歌唱音声データは、再生開始時点でカラオケ装置に受信済であることから、再生を中断させることなく最後までカラオケ歌唱を行わせることができる。さらに、カラオケ装置では、第１歌唱映像データと歌唱音声データの再生中に第２歌唱映像データを受信しているので、受信された第２歌唱映像データを適宜利用することができる。

前述の歌唱動画再生システムにおいて、前記データ再生手段は、前記データ受信手段による前記第２歌唱映像データの受信完了を条件に、前記第１歌唱映像データに代えて前記第２歌唱映像データを途中から再生することが好ましい。この歌唱動画再生システムによれば、受信が完了した第２歌唱映像データによる高画質な映像でカラオケ歌唱を行わせることができる。

前述の歌唱動画再生システムにおいて、前記データ送信手段は、前記第２歌唱映像データを再生の遅い側から送信すると共に、前記データ再生手段による前記第１歌唱映像データの再生時刻と前記データ受信手段で受信された前記第２歌唱映像データの先頭時刻との差が判断基準値以下であることを条件に、前記第２歌唱映像データの送信を停止し、前記データ再生手段は、前記データ再生手段による前記第１歌唱映像データの再生時刻が前記第２歌唱映像データの先頭時刻以降になったことを条件に、前記第１歌唱映像データに代えて前記第２歌唱映像データを再生することが好ましい。この歌唱動画再生システムによれば、サーバーとカラオケ装置との間で送受信される第２歌唱映像データのデータ量を少なくすることができる。

本発明によれば、サーバーからダウンロードした歌唱動画データを再生し、コラボレーション歌唱を行わせるカラオケ用の歌唱動画再生システムにおいて、歌唱を速やかに開始させつつもサーバーによる通信回線の監視負担を軽減できる。また、カラオケ装置における歌唱動画データの再生停止を抑制できる。

カラオケシステムの概略構成を説明する概念図である。 ホスト装置（サーバー）の構成を説明するブロック図である。 カラオケ装置の構成を説明するブロック図である。 カラオケ本体の構成を説明するブロック図である。 ユーザー端末の構成を説明するブロック図である。 第１実施形態におけるコラボレーション歌唱の処理を説明するフローチャートである。 第２実施形態の特徴を説明する概念図である。 第２実施形態におけるコラボレーション歌唱の処理を説明するフローチャートである。 第３実施形態の特徴を説明する概念図である。 第３実施形態におけるコラボレーション歌唱の処理を説明するフローチャートである。

以下、本発明の実施形態について説明する。図１に示すカラオケシステムは、本発明に係る歌唱動画再生システムに相当し、ホスト装置１とカラオケ装置２とユーザー端末３とを有している。そして、これらが通信回線４を介して通信可能に接続されている。ホスト装置１は、コラボレーション歌唱に際してカラオケ装置２で再生される歌唱動画データを多数記憶しており、利用者によって選択された歌唱動画データ（歌唱映像データと歌唱音声データの組）を対象のカラオケ装置２へ送信する。そして、カラオケ装置２は、受信した歌唱動画データを再生し、利用者にコラボレーション歌唱を行わせる。以下、カラオケシステムを構成する各装置１〜３について説明する。

まず、ホスト装置１について説明する。ホスト装置１は、サーバーとして機能し、顧客情報や歌唱動画データといった各種情報を蓄積して管理する。図２に示すように、ホスト装置１は、ホスト側制御部１１と、ホスト側通信部１２と、ホスト側記憶部１３とを有している。

ホスト側制御部１１は、ホスト装置１における制御の中心となる部分であり、ＣＰＵ１１ａやメモリ１１ｂを有している。ＣＰＵ１１ａは、メモリ１１ｂに記憶された動作プログラムに従って各種の制御を実行する。メモリ１１ｂは、ＣＰＵ１１ａに実行されるプログラムを記憶したり、プログラムの実行時に各種情報を一時的に記憶したりする記憶素子である。ホスト側通信部１２は、ホスト装置１を通信回線４に接続するためのインタフェースを提供する。そして、ホスト側制御部１１及びホスト側通信部１２の組は、ホスト側記憶部１３に記憶された各種のデータをカラオケ装置２に対して送信するデータ送信手段に相当する。

ホスト側記憶部１３は、大容量の情報を記憶する記憶装置であり、ハードディスクドライブ等によって構成されている。ホスト側記憶部１３の一部領域は、顧客情報記憶領域、歌唱音声データ記憶領域、歌唱映像データ記憶領域、閲覧用動画データ記憶領域として用いられている。

顧客情報記憶領域には、歌唱者毎の識別情報である利用者ＩＤに対応付けられた状態で、性別、年齢、生年月日、住所等の個人情報や、利用店舗、利用日時、歌唱履歴等の履歴データが記憶されている。

歌唱音声データ記憶領域には、カラオケ歌唱時に取得された歌唱音声データが記憶され、歌唱映像データ記憶領域には、カラオケ歌唱時に取得された歌唱映像データが記憶されている。これらの歌唱音声データや歌唱映像データは、歌唱動画コンテンツの基となる歌唱動画データであり、カラオケ楽曲毎の識別情報である楽曲ＩＤや利用者ＩＤといった各種の情報に対応付けられた状態で記憶されている。

本実施形態において、歌唱音声データはＭＰ３形式のデータが用いられ、歌唱映像データはＭＰＥＧ２形式のデータが用いられている。また、歌唱映像データに関し、同一の歌唱映像について、ファイルサイズの異なる２種類のデータが記憶されている。すなわち、低画質でデータサイズが相対的に小さい小サイズ映像データ（第１歌唱映像データ）と、高画質でデータサイズが相対的に大きい大サイズ映像データ（第２歌唱映像データ）が記憶されている。

なお、後述するように、コラボレーション歌唱が行われるとカラオケ装置２からは歌唱映像データを含む各種のデータがアップロードされる。このとき、カラオケ装置２からアップロードされる歌唱映像データは、大サイズ映像データである。そして、小サイズ映像データは、大サイズ映像データを変換することによりホスト装置１で生成される。

ここで、大サイズ映像データは、１枚のフレームを構成するドット数が、小サイズ映像データを構成するドット数よりも多く定められている。また、大サイズ映像データは単位時間あたりのフレーム数も、小サイズ映像データのフレーム数よりも多く定められている。これにより、大サイズ映像データに基づく再生映像は、小サイズ映像データに基づく再生映像よりも高い画質になる。

以上の説明から理解できるように、ホスト側記憶部１３の歌唱音声データ記憶領域は、或る歌唱映像に対応する歌唱音声データが記憶された歌唱音声データ記憶手段に相当する。また、歌唱映像データ記憶領域は、或る歌唱映像が記録された小サイズ映像データ（第１歌唱映像データ）、及び、或る歌唱映像が記録されるとともに小サイズ映像データよりも高画質でデータサイズの大きな大サイズ映像データ（第２歌唱映像データ）が記憶された歌唱映像データ記憶手段に相当する。

閲覧用動画データ記憶領域には、ユーザー端末３に閲覧させるための閲覧用動画データが記憶される。この閲覧用動画データは、ユーザー端末３で再生される歌唱動画コンテンツの基となるデータである。本実施形態の閲覧用動画データは、ＷＭＶ形式やＭＰ４形式の動画データであり、ＭＰＥＧ２形式の小サイズ映像データを利用して生成されている。

次に、カラオケ装置２について説明する。このカラオケ装置２は、カラオケ演奏や歌唱時における映像や音声の記録等を行う装置であり、図１に示すように、例えばカラオケ店ＫＢの各カラオケルームＲＭに設置されている。そして、図３に示すように、カラオケ装置２は、カラオケ本体２１と、スピーカ２２と、モニタ２３と、マイク２４と、ビデオカメラ２５と、リモコン装置２６とを有している。

カラオケ本体２１は、選択されたカラオケ楽曲の演奏制御、歌詞及び背景映像の表示制御、マイク２４を通じて入力された歌唱音声信号の処理といった、カラオケ歌唱に関する各種の制御を行う部分である。このカラオケ本体２１については、後で詳しく説明する。

スピーカ２２は、カラオケ本体２１に接続されており、カラオケ本体２１からの放音信号に基づいて放音する。モニタ２３もカラオケ本体２１に接続されており、カラオケ本体２１からの映像信号に基づいて映像を画面に表示する。そして、スピーカ２２は、カラオケ本体２１とともにデータ再生手段（放音手段）として機能し、モニタ２３もまた、カラオケ本体２１とともにデータ再生手段（映像表示手段）として機能する。

マイク２４もカラオケ本体２１に接続されており、歌唱者の音声をアナログの歌唱音声信号に変換してカラオケ本体２１に入力させる。このような機能を有するマイク２４は、歌唱音声入力手段に相当する。ビデオカメラ２５もカラオケ本体２１に接続されており、歌唱中の映像を歌唱映像信号に変換してカラオケ本体２１に入力させる。このような機能を有するビデオカメラ２５は、歌唱映像撮影手段に相当する。

リモコン装置２６は、カラオケ本体２１との間で情報を送受信するための双方向通信可能な短距離無線通信部を備えており、カラオケ楽曲の予約時などに操作される。カラオケ楽曲の予約時において、リモコン装置２６からは、演奏対象の楽曲を識別するための楽曲ＩＤを含んだ操作信号が送信される。登録された利用者がリモコン装置２６を通じてログインした場合、その利用者の利用者ＩＤがホスト装置１に送信される。そして、リモコン装置２６には、マイページに登録された歌唱動画や歌唱履歴等の各種情報が表示される。

また、本実施形態のリモコン装置２６は、ユーザー端末３としても機能する。この場合、リモコン装置２６は、近隣のアクセスポイント（図示せず）、及び、通信回線４を経由してホスト装置１に接続される。このため、利用者は、カラオケ店ＫＢに居ながらにして、マイページにアクセスできる。

次に、カラオケ本体２１について詳細に説明する。図４に示すように、カラオケ本体２１は、本体側制御部３１と、本体側通信部３２と、本体側記憶部３３と、音響処理部３４と、表示処理部３５と、映像入力部３６と、操作部３７とを有している。そして、これらの各部がバスを介して通信可能な状態に接続されている。

本体側制御部３１は、カラオケ本体２１における制御の中心となる部分であり、ＣＰＵ３１ａやメモリ３１ｂを有している。ＣＰＵ３１ａは、メモリ３１ｂに記憶された動作プログラムに従って各種の制御を実行する。例えば、操作部３７からの操作を受け付ける操作入力処理やシーケンサとして動作するシーケンサ処理を行う。メモリ３１ｂは、ＣＰＵ３１ａに実行されるプログラムを記憶したり、プログラムの実行時に各種情報を一時的に記憶したりする記憶素子である。

本体側通信部３２は、カラオケ本体２１（カラオケ装置２）を通信回線４に接続するためのインタフェースを提供する。この本体側通信部３２は、本体側制御部３１によって動作が制御される。そして、ホスト装置１（ホスト側記憶部１３）に記憶された各種のデータは通信回線４を通じて送信されるので、本体側制御部３１及び本体側通信部３２の組はホスト装置１から送信された各種のデータを受信するデータ受信手段に相当する。

本体側記憶部３３は、各種のデータを記憶する大容量の記憶装置であり、例えばハードディスクドライブによって構成されている。この本体側記憶部３３には、例えば、楽曲データ記憶領域、背景映像データ記憶領域、歌唱映像データ記憶領域、歌唱音声データ記憶領域、コラボ用動画データ記憶領域が設けられる。

楽曲データ記憶領域には、リモコン装置２６で選択されたカラオケ楽曲を演奏するための楽曲データが記憶され、背景映像データ記憶領域には、モニタ２３に背景映像を表示させるための背景映像データが記憶される。歌唱映像データ記憶領域には、ビデオカメラ２５で撮影された歌唱映像データが記憶され、歌唱音声データ記憶領域には、マイク２４からの歌唱音声信号をデジタルデータ化した歌唱音声データが記憶される。コラボ用動画データ記憶領域には、コラボレーション歌唱のために受信した、ホスト装置１からの歌唱動画データ（歌唱映像データ，歌唱音声データ）が記憶される。

音響処理部３４は、カラオケ楽曲に対する演奏の制御を行ったり、マイク２４を通じて入力された歌唱音声信号をデジタルの歌唱音声データに変換する等の制御を行ったりする部分である。この音響処理部３４では、伴奏データに応じて生成された楽音信号と歌唱音声データとが適当なバランスでミキシングされ、放音信号としてスピーカ２２へ出力される。また、音響処理部３４は、利用者がコラボレーション歌唱をする際、楽音信号や歌唱音声データに加え、コラボレーション歌唱用に受信した歌唱音声データもミキシングする。これにより、利用者は、歌唱音声データの再生音声と合唱が行える。

表示処理部３５は、カラオケ演奏時における背景映像の表示等の制御を行う。カラオケ演奏時において、表示処理部３５には背景映像データが入力されており、この背景映像データのデコードが行われる。そして、表示処理部３５は、デコードで生成された背景映像の映像信号に歌詞テロップを合成し、合成後の映像信号をモニタ２３に出力する。その結果、モニタ２３には、背景映像に歌詞テロップが重ねられた映像が表示される。

また、表示処理部３５は、利用者がコラボレーション歌唱をする際、受信した歌唱映像データを再生し、モニタ２３に歌唱映像を表示させる。このとき、モニタ２３の所定位置には、ビデオカメラ２５で撮影された歌唱中の歌唱者の映像も上書き（スーパーインポーズ）される。

映像入力部３６は、ビデオカメラ２５からの歌唱映像信号の取り込み処理を行う部分であり、いわゆるビデオカードで構成されている。この映像入力部３６は、例えば、ビデオカメラ２５と接続するための外部インタフェース、バスを通じて本体側制御部３１等と接続するための内部インタフェース、及び、フレームバッファとしてのビデオメモリを有している（何れも図示せず）。

操作部３７は、パネルスイッチやリモコン受信回路などからなっており、利用者によるパネルスイッチやリモコン装置２６の操作に応じた操作信号を本体側制御部３１に対して出力する。本体側制御部３１は、操作入力処理を行うことで操作信号を検出し、対応する処理を実行する。なお、パネルスイッチやリモコン装置２６は、操作を選択するための種々のキースイッチ（図示せず）を備えている。

そして、リモコン装置２６を通じた操作により、ログインした利用者のマイページから、コラボレーション歌唱用に登録された歌唱動画コンテンツを呼び出すことができる。この呼び出し操作により、当該歌唱動画コンテンツに対応する歌唱動画データがカラオケ装置２にダウンロードされ、コラボ用動画データ記憶領域に記憶される。あわせて、当該歌唱動画コンテンツに対応するカラオケ楽曲の楽曲ＩＤが本体側制御部３１のメモリ３１ｂに記憶され、演奏処理の待ち行列で管理される。

その後、当該カラオケ楽曲の順序がやってくると、カラオケ伴奏に同期して、コラボレーション歌唱用の歌唱映像とビデオカメラ２５で撮影された歌唱映像とがモニタ２３に表示される。また、コラボレーション歌唱用の歌唱音声がカラオケ伴奏と共にスピーカ２２から放音される。さらに、ビデオカメラ２５で撮影された歌唱映像が、新たな歌唱映像データとして歌唱映像データ記憶領域に記憶され、かつ、マイク２４で集音された歌唱音声信号に所定の処理が施され、歌唱音声データとして歌唱音声データ記憶領域に記憶される。

次に、ユーザー端末３について説明する。ユーザー端末３は、カラオケの利用者によって操作される通信端末であり、歌唱動画コンテンツを閲覧する際などに操作される。図１に示すように、ユーザー端末３は、パーソナルコンピュータ３Ａ、タブレットコンピュータ３Ｂ、携帯電話機３Ｃなどが含まれる。また、前述したように、リモコン装置２６もユーザー端末３に含まれる。

図５に示すように、ユーザー端末３は、端末側制御部４１と、端末側通信部４２と、端末側記憶部４３と、表示部４４と、入力部４５とを有している。

端末側制御部４１は、ユーザー端末３における制御の中心となる部分であり、ＣＰＵ４１ａやメモリ４１ｂを有している。ＣＰＵ４１ａは、メモリ４１ｂに記憶された動作プログラムに従って各種の制御を実行する。メモリ４１ｂは、ＣＰＵ４１ａに実行されるプログラムを記憶したり、プログラムの実行時に各種情報を一時的に記憶したりする記憶素子である。端末側通信部４２は、ユーザー端末３を通信回線４に接続するためのインタフェースを提供する。端末側記憶部４３は、各種の情報を記憶する記憶装置であり、不揮発性メモリやハードディスクドライブ等によって構成される。

表示部４４及び入力部４５は、いずれもユーザインタフェースを提供する部分である。表示部４４は、各種メニューや操作用のラジオボタン等を表示する部分であり、例えば液晶表示装置やブラウン管で構成される。入力部４５は、利用者による操作を操作情報として取り込む部分であり、例えばキーボード、マウス、タッチパネルによって構成される。なお、可搬性が要求されるタブレットコンピュータ３Ｂやリモコン装置２６では、表示部４４と入力部４５とが一体化されたタッチパネル付きの液晶表示パネルが好適に用いられる。

次に、上記構成を有するカラオケシステムの動作について説明する。このカラオケシステムは、コラボレーション歌唱時における歌唱映像データの処理に特徴を有している。

概略について説明すると、まずホスト装置１（サーバー）は、コラボレーション歌唱の選択に伴ってデータ送信手段として機能し、歌唱映像データ記憶領域に記憶された小サイズ映像データ（第１歌唱映像データ）と歌唱音声データ記憶領域に記憶された歌唱音声データの組をカラオケ装置２に送信する。そして、カラオケ装置２はデータ受信手段として機能し、小サイズ映像データと歌唱音声データの組を受信する。

小サイズ映像データと歌唱音声データの受信完了を条件に、カラオケ装置２はデータ再生手段として機能し、各データの再生を開始する。すなわち、コラボレーション歌唱を開始させる。これにより、小サイズ映像データに基づく歌唱映像がモニタ２３に表示されると共に、歌唱音声データに基づく歌唱音声及びカラオケ伴奏がスピーカ２２から放音される。

さらに、ホスト装置１（データ送信手段）は、小サイズ映像データの送信完了後に、大サイズ映像データ（第２歌唱映像データ）の送信を開始する。一方、カラオケ装置２（データ受信手段）は、コラボレーション歌唱が行われている期間（小サイズ映像データと歌唱音声データの再生期間）において、大サイズ映像データを受信する。

このカラオケシステムでは、小サイズ映像データと歌唱音声データの組を、大サイズ映像データに先行してカラオケ装置２に転送しているので、コラボレーション歌唱を早期に開始させることができる。そして、コラボレーション歌唱が行われている最中に、大サイズ映像データをカラオケ装置２に転送しているので、転送に時間を要してもコラボレーション歌唱に大きな支障は生じない。

以下、図６のフローチャートを参照して各装置１〜３の処理について説明する。

コラボレーション歌唱を行うに際しては、まず登録操作が行われる（Ｓ１）。この登録操作において、利用者はユーザー端末３を操作し、コラボレーション歌唱を行うカラオケ楽曲（好みの歌唱動画）をホスト装置１に登録する。例えば、利用者は、パーソナルコンピュータ３Ａを通じてホスト装置１にログインし、閲覧用動画データをパーソナルコンピュータ３Ａ上で再生するなどして歌唱動画を選んで登録を指示する。この指示に基づき、対象の歌唱動画がホスト装置１のマイページに登録される（Ｓ２）。歌唱動画の登録後、利用者はカラオケ店ＫＢに行き、登録された歌唱動画を選択する（Ｓ３）。例えば、利用者は、リモコン装置２６を操作してホスト装置１にログインし、マイページに登録されている歌唱動画を選択する。

歌唱動画が選択されたことに伴い、ホスト装置１は、小サイズ映像データと歌唱音声データの組をカラオケ装置２へ送信する（Ｓ４）。そして、カラオケ装置２は、ホスト装置１からの各データを受信する（Ｓ５）。各データの送受信はパケット単位で行われており、各データの全体がカラオケ装置２に受信されるまで継続される（Ｓ６）。なお、カラオケ装置２が受信した各データは、本体側記憶部３３のコラボ用動画データ記憶領域に記憶される。

各データの受信が完了したならば、カラオケ装置２は、コラボレーション歌唱を開始させる（Ｓ７）。コラボレーション歌唱時において、カラオケ装置２では、本体側記憶部３３から、楽曲データ、小サイズ映像データ、及び、歌唱音声データ等が読み出される。そして、楽曲データと歌唱音声データは音響処理部３４にてミキシングされ、ミキシング後の音声がスピーカ２２から放音される。

このとき、歌唱者による歌唱音声がマイク２４を通じて音響処理部３４に入力される。この歌唱音声は、楽曲データ等とミキシングされてスピーカ２２から放音される。また、歌唱音声は、新たな歌唱音声データとして本体側記憶部３３の歌唱音声データ記憶領域に記憶される。加えて、ビデオカメラ２５で撮影された歌唱者の映像が、歌唱映像信号として映像入力部３６に入力される。映像入力部３６では、歌唱映像信号を取り込んで歌唱映像データを生成する。生成された歌唱映像データは、本体側記憶部３３の歌唱映像データ記憶領域に記憶される。また、歌唱映像信号に基づく歌唱者の歌唱映像がモニタ２３の所定位置に表示される。

小サイズ映像データと歌唱音声データの組を送信し終えたホスト装置１は、引き続いて大サイズ映像データを送信する（Ｓ８）。これに伴ってカラオケ装置２は、ホスト装置１からの大サイズ映像データを受信する（Ｓ９）。大サイズ映像データの送受信はパケット単位で行われ、データの全体がカラオケ装置２に受信されるまで継続される（Ｓ１０）。そして、カラオケ装置２が受信した大サイズ映像データは、本体側記憶部３３のコラボ用動画データ記憶領域に記憶される。

その後、コラボレーション歌唱が終了したならば（Ｓ１１）、歌唱映像の録画及び歌唱音声の録音も終了される。続いて映像等の合成処理が行われる（Ｓ１２）。ここでは、今回のコラボレーション歌唱で新たに生成された歌唱映像データと、コラボレーション歌唱中にダウンロードされた大サイズ映像データとが合成され、合成歌唱映像データが生成される。また、今回のコラボレーション歌唱で新たに生成された歌唱音声データとコラボレーション歌唱用にホスト装置１からダウンロードされた歌唱音声データも合成され、合成歌唱音声データが生成される。

次に、生成された各データがカラオケ装置２からホスト装置１へとアップロードされる（Ｓ１３）。本実施形態では、今回のコラボレーション歌唱で新たに生成された歌唱映像データ及び歌唱音声データと、合成処理によって生成された合成歌唱映像データ及び合成歌唱音声データとがアップロードされる。そして、アップロードされた各データは、ホスト装置１で受信される（Ｓ１４）。全てのデータがホスト装置１に受信されたならば（Ｓ１５）、ホスト装置１は、受信した各種データをホスト側記憶部１３に登録する（Ｓ１６）。このとき、ホスト装置１は、受信した歌唱映像データ及び合成歌唱映像データを大サイズ映像データとして登録すると共に、これらの映像データを変換して小サイズ映像データを生成して登録する。

以上の動作を行う本実施形態のカラオケシステムにおいて、ホスト装置１は、通信回線４の状態に関わらず、各データ（小サイズ映像データ，大サイズ映像データ，歌唱音声データ）をカラオケ装置２へ送信すればよいので、通信回線４の監視負担を軽減できる。そして、小サイズ映像データと歌唱音声データの受信完了を条件に、カラオケ装置２による各データの再生が開始されるので、コラボレーション歌唱を速やかに開始させることができる。

また、小サイズ映像データと歌唱音声データは、再生の開始時点でカラオケ装置２に受信完了されていることから、再生を中断させることなく最後までコラボレーション歌唱を行わせることができる。さらに、カラオケ装置２では、小サイズ映像データと歌唱音声データの再生中に大サイズ映像データを受信しているので、受信された大サイズ映像データを、コラボレーション歌唱の終了後直ちに、合成歌唱映像データの生成に利用できる。

加えて、ホスト装置１には、１つの歌唱映像に対して大サイズ映像データと小サイズ映像データが記憶されているので、公開前の検閲作業に小サイズ映像データを用いることにより、検閲作業に使用するコンピュータの負荷を低減することができる。例えば、複数の小サイズ映像データを同時に再生して検閲することが容易に行える。

また、小サイズ映像データが準備されているので、コラボレーション歌唱の対象となる動画を利用者に選択させる際、この小サイズ映像データに基づく閲覧用動画データをユーザー端末３で再生させることもできる。このように構成すると、閲覧用動画データを容易に作成できる。

次に、第２実施形態のカラオケシステムについて説明する。このカラオケシステムでは、大サイズ映像データの受信が完了したことを条件に、コラボレーション歌唱で再生されている映像を途中で、小サイズ映像データ（第１歌唱映像データ）から大サイズ映像データ（第２歌唱映像データ）へと変更する点に特徴を有している。

図７の概念図で説明すると、まず、小サイズ映像データが順次カラオケ装置２にダウンロードされる（図７（ａ）参照）。そして、小サイズ映像データのダウンロードが完了したならば（図７（ｂ）参照）、コラボレーション歌唱が開始されると共に、大サイズ映像データのダウンロードも開始される。すなわち、コラボレーション歌唱と並行して大サイズ映像データのダウンロードが進行する（図７（ｃ）参照）。

大サイズ映像データのダウンロードが完了すると、切り替えタイミングが設定される（図７（ｄ）参照）。小サイズ映像データが切り替えタイミングまで再生されると、その時点からモニタ２３には大サイズ映像データに基づく歌唱映像が再生される（図７（ｅ）参照）。その後は、コラボレーション歌唱が終了するまで、大サイズ映像データに基づく歌唱映像が再生される（図７（ｆ）参照）。

以下、図８のフローチャートを参照して、第２実施形態の処理について説明する。なお、この処理において、ステップＳ１〜Ｓ１０の処理は、前述の第１実施形態と同じであるため、詳細な説明は省略する。

小サイズ映像データと歌唱音声データの組がカラオケ装置２で受信され、コラボレーション歌唱が開始されると（Ｓ７）、大サイズ映像データがカラオケ装置２で受信される（Ｓ８〜Ｓ１０）。大サイズ映像データの受信完了を契機に、カラオケ装置２は、映像の切替タイミングを設定し、小サイズ映像データが切替タイミングまで再生されたか否かを判定する（Ｓ２１）。なお、映像の切替タイミングは、大サイズ映像データの再生を開始可能なタイミングに設定される。

小サイズ映像データが切替タイミングまで再生されたならば、カラオケ装置２は、再生対象の映像データを小サイズ映像データから大サイズ映像データに切り替える（Ｓ２２）。これにより、モニタ２３に表示されている映像も、コラボレーション歌唱の途中から高画質の映像に切り替わる。従って、切り替え以降において、利用者は、高画質の映像をみながら気分よくコラボレーション歌唱を行うことができる。

コラボレーション歌唱が終了すると（Ｓ２３）、歌唱映像の録画及び歌唱音声の録音も終了し、歌唱映像データ及び歌唱音声データが新たに生成される。さらに、今回のコラボレーション歌唱で新たに生成された歌唱音声データとコラボレーション歌唱用にホスト装置１からダウンロードされた歌唱音声データとが合成され、合成歌唱音声データが生成される。

続いて、生成された各データがカラオケ装置２からホスト装置１へとアップロードされる（Ｓ２４）。本実施形態では、今回のコラボレーション歌唱で新たに生成された歌唱映像データ、歌唱音声データ、及び、合成歌唱音声データがアップロードされる。そして、アップロードされた各データは、ホスト装置１で受信される（Ｓ２５）。

全てのデータがホスト装置１に受信されたならば（Ｓ２６）、ホスト装置１は、映像等の合成処理を行う（Ｓ２７）。ここでは、新たに生成された歌唱映像データと、ホスト側記憶部１３に記憶された大サイズ映像データとが合成され、合成歌唱映像データが生成される。合成処理を行ったならば、ホスト装置１は、受信した各種データをホスト側記憶部１３に登録する（Ｓ２８）。このとき、ホスト装置１は、受信した歌唱映像データ及び生成した合成歌唱映像データを大サイズ映像データとして登録すると共に、これらの映像データを変換して小サイズ映像データを生成して登録する。

そして、第２実施形態のカラオケシステムでも、ホスト装置１による通信回線４の監視負担を軽減でき、コラボレーション歌唱を速やかに開始させることができる。また、再生を中断させることなく最後までコラボレーション歌唱を行わせることができるし、大サイズ映像データの受信完了後において、利用者は、高画質の映像とコラボレーション歌唱が行える。

次に、第３実施形態のカラオケシステムについて説明する。このカラオケシステムでも、第２実施形態と同様に、大サイズ映像データの受信が完了したことを条件に、コラボレーション歌唱で再生されている映像を途中で、小サイズ映像データ（第１歌唱映像データ）から大サイズ映像データ（第２歌唱映像データ）に変更する。さらに、大サイズ映像データをカラオケ楽曲の終わり（データ再生の遅い側）から逆順に転送することで、転送されるデータ量を低減している。

図９の概念図で説明すると、まず、小サイズ映像データが順次カラオケ装置２にダウンロードされる（図９（ａ）参照）。そして、小サイズ映像データのダウンロードが完了したならば（図９（ｂ）参照）、コラボレーション歌唱が開始されると共に、大サイズ映像データのダウンロードも開始される。その際、大サイズ映像データについては、カラオケ楽曲における終端から先頭に向けて、再生とは逆の順序でダウンロードされる（図９（ｃ）参照）。

ダウンロードが進行し、小サイズ映像データにおける再生時刻と受信された大サイズ映像データの先頭時刻との差△Ｔが規定間隔（判断基準値）以下になったならば、大サイズ映像データのダウンロードが停止される（図９（ｄ）参照）。ダウンロードの停止に伴って切り替えタイミングが設定される。この切り替えタイミングは、大サイズ映像データの先頭時刻以降に設定される。そして、小サイズ映像データが切り替えタイミングまで再生されると、その時点からモニタ２３には大サイズ映像データに基づく歌唱映像が再生される（図９（ｅ）参照）。その後は、コラボレーション歌唱が終了するまで、大サイズ映像データに基づく歌唱映像が再生される（図９（ｆ）参照）。

以下、図１０のフローチャートを参照して、第２実施形態の処理について説明する。なお、この処理において、ステップＳ１〜Ｓ７の処理は、前述の第１実施形態と同じであり、ステップＳ２２〜Ｓ２８の処理は、前述の第２実施形態と同じであるため、詳細な説明は省略する。

小サイズ映像データと歌唱音声データの組がカラオケ装置２で受信され、コラボレーション歌唱が開始されると（Ｓ７）、ホスト装置１は、引き続いて大サイズ映像データを送信する（Ｓ３１）。このとき、ホスト装置１は、大サイズ映像データを終端側から逆順に送信する。これに伴ってカラオケ装置２は、ホスト装置１からの大サイズ映像データを受信する（Ｓ３２）。大サイズ映像データの送受信はパケット単位で行われ、小サイズ映像データにおける再生時刻と受信された大サイズ映像データの先頭時刻との差△Ｔが、規定間隔（例えば５秒以下）になるまで継続される（Ｓ３３）。例えば、差△Ｔが規定間隔以下になると、カラオケ装置２からホスト装置１に対し、大サイズ映像データの送信停止指令がなされる。

小サイズ映像データの再生時刻と大サイズ映像データの先頭時刻との差が規定間隔以下になったならば、カラオケ装置２は、映像の切替タイミングを設定し、小サイズ映像データが切替タイミングまで再生されたか否かを判定する（Ｓ３４）。本実施形態でも、映像の切替タイミングは、大サイズ映像データの再生を開始可能なタイミングに設定される。

小サイズ映像データが切替タイミングまで再生されたならば、カラオケ装置２は、再生対象の映像データを小サイズ映像データから大サイズ映像データに切り替える（Ｓ２２）。これにより、モニタ２３に表示されている映像も、コラボレーション歌唱の途中から高画質の映像に切り替わる。以降は、第２実施形態と同様な処理が行われる（Ｓ２３〜Ｓ２８）。

そして、第３実施形態のカラオケシステムでも、ホスト装置１による通信回線４の監視負担を軽減でき、コラボレーション歌唱を速やかに開始させることができる。また、再生を中断させることなく最後までコラボレーション歌唱を行わせることができるし、大サイズ映像データの受信完了後において、利用者は、高画質の映像とコラボレーション歌唱が行える。さらに、ホスト装置１とカラオケ装置２との間で送受信される大サイズ映像データのデータ量を少なくすることができる。

以上の実施形態の説明は、本発明の理解を容易にするためのものであり、本発明を限定するものではない。本発明はその趣旨を逸脱することなく、変更、改良され得ると共に本発明にはその等価物が含まれる。例えば、次のように構成してもよい。

小サイズ映像データに関し、前述の各実施形態では、大サイズ映像データよりも構成ドット数や単位時間あたりのフレーム数が少なく定められていたが、この構成に限定されるものではない。例えば、各ドットの色を定めるビット数を少なくしてもよいし、圧縮率を高めてもよい。

また、第３実施形態において、大サイズ映像データの送信停止を判断するための規定時間は、任意に定めることができる。

また、各実施形態に記載された技術は相互に適用できる。例えば、第２実施形態のカラオケシステムでは映像等の合成をホスト装置１で行っていたが、第１実施形態のようにカラオケ装置２で行ってもよい。

１…ホスト装置（サーバー），２…カラオケ装置，３…ユーザー端末，３Ａ…パーソナルコンピュータ，３Ｂ…タブレットコンピュータ，３Ｃ…携帯電話機，４…通信回線，１１…ホスト側制御部，１１ａ…ＣＰＵ，１１ｂ…メモリ，１２…ホスト側通信部，１３…ホスト側記憶部，２１…カラオケ本体，２２…スピーカ，２３…モニタ，２４…マイク，２５…ビデオカメラ，２６…リモコン装置，３１…本体側制御部，３１ａ…ＣＰＵ，３１ｂ…メモリ，３２…本体側通信部，３３…本体側記憶部，３４…音響処理部，３５…表示処理部，３６…映像入力部，３７…操作部，４１…端末側制御部，４１ａ…ＣＰＵ，４１ｂ…メモリ，４２…端末側通信部，４３…端末側記憶部，４４…表示部，４５…入力部，ＫＢ…カラオケ店，ＲＭ…カラオケルーム

Claims (3)

1. サーバーとカラオケ装置とを通信回線によって接続した歌唱動画再生システムであって、
   前記サーバーは、
   或る歌唱映像が記録された第１歌唱映像データ、及び、前記或る歌唱映像が記録されると共に前記第１歌唱映像データよりも高画質でデータサイズの大きな第２歌唱映像データが記憶された歌唱映像データ記憶手段と、
   前記或る歌唱映像に対応する歌唱音声データが記憶された歌唱音声データ記憶手段と、
   前記カラオケ装置に対し、前記第１歌唱映像データ及び前記歌唱音声データを送信し、前記第１歌唱映像データの送信終了後に前記第２歌唱映像データを送信するデータ送信手段とを有し、
   前記カラオケ装置は、
   前記第１歌唱映像データ、前記第２歌唱映像データ、及び、前記歌唱音声データを受信するデータ受信手段と、
   前記第１歌唱映像データ及び前記歌唱音声データの受信完了を条件に、前記第１歌唱映像データ及び前記歌唱音声データの再生を開始するデータ再生手段とを有し、
   前記データ受信手段は、
   前記第１歌唱映像データ及び前記歌唱音声データの再生期間中に、前記第２歌唱映像データを受信することを特徴とする歌唱動画再生システム。
2. 前記データ再生手段は、前記データ受信手段による前記第２歌唱映像データの受信完了を条件に、前記第１歌唱映像データに代えて前記第２歌唱映像データを途中から再生することを特徴とする請求項１に記載の歌唱動画再生システム。
3. 前記データ送信手段は、前記第２歌唱映像データを再生の遅い側から送信すると共に、前記データ再生手段による前記第１歌唱映像データの再生時刻と前記データ受信手段で受信された前記第２歌唱映像データの先頭時刻との差が判断基準値以下であることを条件に、前記第２歌唱映像データの送信を停止し、
   前記データ再生手段は、前記データ再生手段による前記第１歌唱映像データの再生時刻が前記第２歌唱映像データの先頭時刻以降になったことを条件に、前記第１歌唱映像データに代えて前記第２歌唱映像データを再生することを特徴とする請求項１に記載の歌唱動画再生システム。

Images