JP2011053276A - Karaoke system including background image variable display function - Google Patents
Karaoke system including background image variable display function Download PDFInfo
- Publication number
- JP2011053276A JP2011053276A JP2009199681A JP2009199681A JP2011053276A JP 2011053276 A JP2011053276 A JP 2011053276A JP 2009199681 A JP2009199681 A JP 2009199681A JP 2009199681 A JP2009199681 A JP 2009199681A JP 2011053276 A JP2011053276 A JP 2011053276A
- Authority
- JP
- Japan
- Prior art keywords
- singer
- face
- user
- amount
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Abstract
Description
本発明は、楽曲演奏時に背景映像を表示させるカラオケシステムに関する。 The present invention relates to a karaoke system that displays a background video when playing music.
カラオケシステムの背景映像とは、演奏される楽曲のジャンルに合わせて適宜に選択された映像を再生するものである。しかしながらこのような背景映像は、同一ジャンルの楽曲が連続的に演奏されたりすると、同じような映像が何度も再生される場合があり利用者は歌唱意欲を失ったりする。このような背景映像のマンネリ化に対して、利用者に対する利用喚起や利用満足性の向上を図る種々の機能を提供してきている中で、背景映像への工夫は必要不可欠なものになっている。カラオケ利用者は、歌唱力が向上すると観客の前で歌唱することを望むことが多く、カラオケの利用喚起、歌唱喚起のために背景映像に観客を表示させて擬似的にステージ等で歌唱しているように演出するサービスを提供することも行われているが、利用者にさらなる興味を惹くサービスの提供が望まれる。 The background video of the karaoke system is a video that is appropriately selected according to the genre of the music to be played. However, such a background video may be played back many times if the music of the same genre is continuously played, and the user loses the willingness to sing. In response to such a tendency of background video to be provided, various functions for inviting the use of the user and improving the use satisfaction have been provided, and the device for the background video has become indispensable. Karaoke users often want to sing in front of the audience when the singing ability improves, and singing on the stage etc. by displaying the audience on the background video to stimulate the use of karaoke and singing However, it is desirable to provide a service that attracts further interest to users.
そして、従来、カラオケシステムにおいて背景映像を用いてステージ歌唱を疑似体験させる技術として、以下の特許文献等で提案されている。特許文献１は、歌手等がステージで歌ったときの歌手等や観客の反応を記録したソフトウェアを用いて、スピーカーより再生すると共に、ディスプレイ装置上で再生することで、当該ディスプレイ装置で再生される歌手等や観客の反応を見ながら歌唱させることが提案されている。この特許文献１は、一方で、歌手等や観客の反応を見ながら歌唱することは当該ソフトウェアの歌唱楽曲と同じ楽曲を歌唱しなければ反応等の内容に不自然さが生じてしまうこととなり、ソフトウェアの歌唱楽曲に制限されることとなる。
And the following patent documents etc. are proposed as a technique which makes a stage singing experience using a background image | video in a karaoke system conventionally.
しかしながら、上記特許文献１は予め記録しておいたソフトウェアを再生するのみで、歌唱者の動きや顔の向きに伴う視野の変化とは無関係に表示されるものであり、歌唱者による観客の擬似的な見え方で臨場感に欠け、ステージ等上での歌唱による疑似体験の実感性が削がれるという問題がある。
However, the above-mentioned
そこで、本発明は上記課題に鑑みなされたもので、実際の歌唱者の動きや顔の向きに対応した、歌唱者から見た観客席への視野をリアリティに再現することで臨場感を与えて歌唱可能とする背景映像可変表示機能を備えるカラオケシステムを提供することを目的とする。 Therefore, the present invention has been made in view of the above problems, and provides a sense of realism by realistically reproducing the field of view of the audience seat viewed from the singer corresponding to the actual movement and face direction of the singer. An object of the present invention is to provide a karaoke system having a background video variable display function that enables singing.
上記課題を解決するために、請求項１の発明では、歌唱者に観客の前で歌唱させることを疑似体験させる背景映像可変表示機能を備え、背景映像データ記憶手段、歌唱者撮像手段、歌唱者認識手段、視野変化量算出手段及び表示制御手段を有してなるカラオケシステムであって、上記背景映像データ記憶手段は、歌唱時に表示させる背景映像データを、スクロール表示可能に前記表示手段のフレームサイズより大として記憶し、上記歌唱者撮像手段は、単一の又は連設した複数の撮像カメラを備え、少なくとも顔部分を含む歌唱者を撮像し、上記歌唱者認識手段は、所定の前記撮像カメラから撮像データを取得し、任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出し、上記表示制御手段は、予め設定された、前記記憶されている表示すべき背景映像データのスクロール量と顔部分の移動量ないし角度変化量との関連付けに基づき、前記算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて当該背景映像データを前記表示手段で表示させる、構成とする。
In order to solve the above-mentioned problems, the invention of
請求項２の発明では、利用者情報データベース、利用者ＩＤ取得手段、利用者情報管理手段及び選曲楽曲登録手段を備え、上記利用者情報データベースは、利用者毎に予め撮像した顔写真データを利用者ＩＤを関連付けて格納し、上記利用者ＩＤ取得手段は、利用者より利用者ＩＤを取得し、上記利用者情報管理手段は、前記利用者ＩＤ取得手段が取得した利用者ＩＤに基づいて、前記利用者情報データベースより顔写真データを取得して利用者情報として管理し、上記選曲楽曲登録手段は、前記利用者ＩＤが取得された任意の利用者が選曲した楽曲を予約待ち行列に当該利用者ＩＤを関連付けて登録し、前記歌唱者認識手段が、前記登録楽曲の演奏開始時に、前記予約待ち行列で当該演奏楽曲に関連付けられた利用者ＩＤから前記利用者情報の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識する、構成である。 According to the second aspect of the present invention, a user information database, user ID acquisition means, user information management means, and music selection music registration means are provided, and the user information database uses face photograph data captured in advance for each user. The user ID acquisition means acquires a user ID from the user, and the user information management means is based on the user ID acquired by the user ID acquisition means. Facial photograph data is acquired from the user information database and managed as user information, and the music selection music registration means uses the music selected by any user whose user ID has been acquired in the reservation queue. The user ID is registered in association with each other, and the singer recognizing means, when the performance of the registered music starts, from the user ID associated with the performance music in the reservation queue, the user information. Face data is acquired as a singer, face data is generated, a singer of the users is identified based on the face data, and the singer's face data is recognized at any time during the performance of the music The configuration.
請求項３〜５の発明では、「請求項１又は２記載の背景映像可変表示機能を備えるカラオケシステムであって、前記顔部分の移動量ないし角度変化量を歌唱者水平位置の変化量としてスクロール量に関連付け、上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、該歌唱者の顔部分の移動を解析し、当該顔部分の移動量を算出する」構成であり、
「請求項１又は２記載の背景映像可変表示機能を備えるカラオケシステムであって、前記顔部分の移動量ないし角度変化量を歌唱者前後位置の変化量としてズームスクロール量に関連付け、前記視野変化量算出手段が、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、縮小拡大の変化量を演算し、当該演算した縮小拡大の変化量から顔部分の前後の移動量を算出する」構成であり、
「請求項１に記載の背景映像可変表示機能を備えるカラオケシステムであって、前記歌唱者撮像手段は、所定の角度毎に撮像方向を設定して連設した複数の撮像カメラを備え、前記顔部分の移動量ないし角度変化量を歌唱者の顔角度の変化量としてスクロール量に関連付け、前記視野変化量算出手段が、前記何れかの撮像カメラが所定の顔部分の向きを捉えているかを特定し、特定された撮像カメラの撮像方向に基づいて、当該歌唱者の顔部分の向きを解析し、当該解析データから当該歌唱者の顔部分の角度変化量を算出する」構成である。
According to a third to fifth aspect of the present invention, “the karaoke system having the background image variable display function according to the first or second aspect, wherein the movement amount or the angle change amount of the face portion is scrolled as the change amount of the singer horizontal position. The visual field change amount calculating means analyzes the movement of the face part of the singer based on the singer's face data recognized at any time by the singer recognition means, and calculates the movement amount of the face part. Is a "calculate" configuration,
The karaoke system having the background image variable display function according to
“A karaoke system having the background image variable display function according to
請求項１の発明によれば、利用者に観客の前で歌唱させることを疑似体験させる背景映像のデータを、スクロール表示可能に表示手段のフレームサイズより大として記憶しておき、少なくとも顔部分を含む歌唱者を撮像し、楽曲演奏開始時に撮像データから任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、認識された顔データに基づき当該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出し、表示すべき背景映像データのスクロール量を予め顔部分の移動量ないし角度変化量に関連付けておき、上記算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて当該背景映像データを表示させる構成とすることにより、歌唱者の動きによる視野に関係させて背景映像を変化させて表示させることから、歌唱者に観客前で歌唱していることの実感性を向上させて歌唱させることができるものである。具体的には、スナックやバーのようなナイト店舗やカラオケボックスのパーティルーム等のようなステージが設置された部屋にて歌唱者が歌唱する場合において、コンサートホールのようにステージから観客席を前にして歌唱しているような擬似的な体験をさせることができると共に、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験することが可能となり、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。 According to the first aspect of the present invention, the background video data that allows the user to sing in front of the audience is stored as being larger than the frame size of the display means so as to be scrollable, and at least the face portion is stored. The singer is imaged at the beginning of the music performance, the face data is generated from the imaging data at the start of the performance of the music to identify the singer, and the singer's face data is recognized at any time during the performance of the music. Then, based on the recognized face data, at least one of the position of the singer's face and the direction of the face is analyzed, the amount of movement or angle change of the face is calculated, and background video data to be displayed The amount of scrolling is associated with the amount of movement or angle change of the face portion in advance, and the background image data is displayed by making the scroll amount follow the calculated amount of movement or angle change of the face portion. By making it a structure to be made, the background image is changed and displayed in relation to the visual field due to the movement of the singer, so that the singer can sing with improved realism of singing in front of the audience It can be done. Specifically, when a singer sings in a room with a stage, such as a night shop such as a snack or bar, or a party room in a karaoke box, the audience seats in front of the stage like a concert hall It is possible to have a simulated experience as if singing, and to experience the tension and cheering and support of the audience as if singing in a concert hall. It is possible to improve actual feeling and singing motivation.
請求項２の発明によれば、利用者毎に予め撮像した顔写真データを利用者ＩＤを関連付けて格納しておき、利用者情報データベースより顔写真データを取得して利用者情報として管理し、また、利用者ＩＤが取得された任意の利用者が選曲した楽曲を予約待ち行列に当該利用者ＩＤを関連付けて登録し、登録楽曲の演奏開始時に予約待ち行列で関連付けられた利用者ＩＤから利用者情報の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識させる構成とすることにより、上記同様の効果の他に、利用者ＩＤで関連付けられた顔データから利用者のうちの歌唱者を容易に特定させることができるものである。あるいは、カラオケボックスの部屋のように特別な歌唱者用のステージや歌唱スペースがなく、複数人が１つの部屋の中で歌唱する場合でも、歌唱者を特定することができ、コンサートホールのようにステージから観客席を前にして歌唱するような疑似的な体験をさせることができると共に、歌唱者の顔部分の位置、顔部分の向きによって背景映像がスクロールすることにより、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験させることが可能となり、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。
According to the invention of
請求項３〜５の発明によれば、顔部分の移動量ないし角度変化量を歌唱者水平位置の変化量、歌唱者前後位置の変化量及び歌唱者の顔角度の変化量の少なくとも何れかとして対応するスクロール量、ズームスクロール量、角度スクロール量に関連付け、随時認識された当該歌唱者の顔データに基づいて、当該歌唱者の歌唱者水平位置、歌唱者前後位置及び歌唱者の顔角度の少なくとも何れかの変化量を特定する構成とすることにより、請求項１又は２の歌唱者の顔部分の位置、顔部分の向きを具体的に特定することができ、上記効果を具体的に実現することができるものである。
According to the third to fifth aspects of the present invention, the movement amount or angle change amount of the face portion is defined as at least one of the change amount of the singer horizontal position, the change amount of the singer front and back position, and the change amount of the singer's face angle. Corresponding to the corresponding scroll amount, zoom scroll amount, angle scroll amount, and based on the singer's face data recognized at any time, at least the singer's horizontal position, the singer's front-rear position, and the singer's face angle By adopting a configuration for specifying any amount of change, the position of the face part and the direction of the face part of the singer of
以下、本発明の実施形態を図により説明する。
図１に、本発明に係るカラオケシステムの系統構成図を示す。図１（Ａ）は通信ネットワークを使用して本システムを構成させた場合のネットワーク模式図、図１（Ｂ）はホスト装置の概要ブロック構成図、図１（Ｃ）は利用者データベース（利用者ＤＢ）の説明図である。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 shows a system configuration diagram of a karaoke system according to the present invention. 1A is a schematic diagram of a network when this system is configured using a communication network, FIG. 1B is a schematic block diagram of a host device, and FIG. 1C is a user database (user) DB) is an explanatory diagram.
図１（Ａ）において、ホスト装置１１はカラオケシステムの一部を構成するものとして、通信ネットワーク１２を介して所定数のカラオケ演奏端末１３（１３Ａ〜１３Ｎ）を管理するものであり、相互にデータ授受自在に接続されたものである。上記通信ネットワーク１２としては、例えば、一般公衆電話回線やこれを用いたＡＤＳＬや光通信回線或いはインターネット、さらにはＬＡＮがあるが、インターネット上に構築されるＶＰＮが好ましい。
In FIG. 1A, the
ホスト装置１１は、図１（Ｂ）に示すように、少なくとも送受信手段２１、制御手段２２及び利用者情報データベース（利用者ＤＢ）２３を備える。上記送受信手段２１は、各カラオケ演奏端末１３（１３Ａ〜１３Ｎ）との通信（データ授受）を行うために、通信ネットワーク１２の通信方式と整合性をとるための例えば物理的な通信用回路やプラットフォーム等のソフトウエアにより構成される。
As shown in FIG. 1B, the
上記制御手段２２は、当該ホスト装置１１を統括的に制御するもので、例えば物理的なＣＰＵであり、図示しないＲＯＭに格納されているプログラムのアルゴリズム処理を行う。上記利用者ＤＢ２３は、図１（Ｃ）に示すように、予め登録された利用者に利用者ＩＤを付し、少なくとも当該利用者の顔写真データを取得して当該利用者ＩＤに関連付けられて管理されるものである。この顔写真データは、ここでは、一例として利用者の正面の顔部分を撮像したビットマップデータである。
The control means 22 controls the
次に、図２に本発明のカラオケシステムにおけるカラオケ演奏端末に係るブロック構成図を示すと共に、図３に図２のスクロールテーブルの第１実施形態の説明図を示し、図４に図３の予約待ち行列の説明図を示す。 Next, FIG. 2 shows a block diagram of the karaoke performance terminal in the karaoke system of the present invention, FIG. 3 shows an explanatory diagram of the first embodiment of the scroll table of FIG. 2, and FIG. 4 shows the reservation of FIG. An explanatory diagram of the queue is shown.
図２において、カラオケ演奏端末１３は、主要装置としてのカラオケ本体３１に有線又は無線で外部接続されるものとして、表示手段である表示部３２、ミキシングアンプ３３、マイク３４、スピーカ３５及び歌唱者撮像手段である撮像部３６を備える。また、有線又は無線で遠隔入出力端末３７が接続される。
In FIG. 2, the
上記表示部３２は、通常の楽曲選曲表示やカラオケ演奏時の背景映像等をを表示するもので、例えば液晶ディスプレイ（ＬＣＤ）、プラズマディスプレイ（ＰＤＰ）、その他種々のディスプレイを採用することができる。上記ミキシングアンプ３３は、カラオケ本体３１より送られてくる演奏データに、マイク３４からの音声信号をミキシングし、増幅してスピーカ３５より出力する。
The
上記撮像部３６は、後述の図５に示すように、歌唱者の歌唱位置（例えば、図５に示すように７位置）に応じて連設した７台の撮像カメラ３６Ａ〜３６Ｇを備え、当該７台の撮像カメラ３６Ａ〜３６Ｇはその撮像範囲の歌唱位置を常に撮像し、撮像データをカラオケ本体３１の歌唱者認識手段（４８）に出力するもので、何れかによって少なくとも顔部分を含む歌唱者を随時撮像することとなる。
As shown in FIG. 5 to be described later, the
遠隔入出力端末３７は、図示しない端末送受信部により、カラオケ本体３１に対して有線方式ないし無線方式（ＩＲ方式やブルートゥース（登録商標）機構のピコネット接続方式など）を利用してデータ授受を行うためのもので、少なくとも利用者ＩＤ取得手段３８及び選曲楽曲登録手段３９を適宜備える。
The remote input /
上記利用者ＩＤ取得手段３８は、利用者より利用者ＩＤを取得する読み取り装置である。取得した利用者ＩＤは、後述の利用者管理手段（５０）の送出される。利用者ＩＤの取得（ログイン者情報）は、例えば、利用者の所持するＩＣカードから行う。 The user ID acquisition means 38 is a reading device that acquires a user ID from a user. The acquired user ID is sent out by a user management means (50) described later. Acquisition of the user ID (logged-in user information) is performed, for example, from an IC card possessed by the user.
上記選曲楽曲登録手段３９は、カラオケ装置として公知のユーザインタフェース機能により利用者ＩＤに基づいて、楽曲を検索させ、選曲させるテーブルを備えるプログラムである。これら選曲された楽曲は、後述のカラオケ本体３１における予約待ち行列（５２）に選曲者の利用者ＩＤが付帯されて登録される（図４で説明する）。
The music selection music registration means 39 is a program including a table for searching for music and selecting music based on a user ID by a user interface function known as a karaoke apparatus. These selected music pieces are registered with a user ID of the music selector attached to a reservation queue (52) in the karaoke
上記カラオケ本体３１は、バス４１、中央制御部４２、ＲＯＭ４３、ＲＡＭ４４、記憶部４５、表示制御手段である映像再生制御手段４６、音楽演奏制御部４７、歌唱者認識手段４８、視野変化量算出手段４９、利用者管理手段５０及び送受信部５０Ａ，５０Ｂを適宜備える。また、上記ＲＡＭ４４には、利用者情報５１及び予約待ち行列５２の記憶領域が形成され、記憶部４５には、楽曲ＤＢ５３、背景映像データ記憶手段である映像ＤＢ５４及びスクロールテーブル５５が記憶される。なお、上記各構成について、本発明の要旨と直接関連しない要素部分であっても、従前のカラオケ装置においても大部分が適用可能であることを示すために、装置全体を説明する。
The karaoke
上記中央制御部４２は、このシステムを統括的に処理制御する物理的なＣＰＵであり、ＲＯＭ４３に記憶されているプログラムに基づくアルゴリズム処理を行う。上記ＲＡＭ４４は、利用者情報５１及び予約待ち行列５２の記憶領域が形成される他に、上記種々のプログラムを展開、実行させるための作業領域としての役割をなすもので、例えば半導体メモリで構成され、仮想的にハードディスク上に構築される場合をも含む概念である。 The central control unit 42 is a physical CPU that performs overall processing control of the system, and performs algorithm processing based on a program stored in the ROM 43. The RAM 44 serves as a work area for developing and executing the various programs, in addition to the storage area for the user information 51 and the reservation queue 52, and is constituted by a semiconductor memory, for example. It is a concept that includes a case where it is virtually built on a hard disk.
上記映像再生制御手段４６は、演奏時に、映像ＤＢ５４より抽出された背景映像を表示部３２に出力するものであり、表示すべき背景映像データを、スクロールテーブル５５を参照して、後述の視野変化量算出手段４９で算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて表示部３２上でスクロール表示させるプログラム乃至電子回路である。詳細は、図５、図６で説明する。スクロール表示は、コンピュータ上の表示やコンピュータゲーム（テレビゲーム）の表示で使用されている公知のスクロール技術が使用される。
The video reproduction control means 46 outputs the background video extracted from the
上記音楽演奏制御部４７は、楽曲コードで楽曲ＤＢ５３より抽出された音符データをデジタル出力し、アナログ変換してミキシングアンプ３３に出力する電子回路である。
The music
上記歌唱者認識手段４８は、上記撮像部３６の所定の撮像カメラから撮像データを取得し、登録楽曲の演奏開始時に、予約待ち行列５１で当該演奏楽曲に関連付けられた利用者ＩＤから利用者情報５１の顔デ写真ータを歌唱者として取得し、当該歌唱者心データから顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識するプログラムである。なお、顔データの解析、認識は、例えばデジタルカメラなどで使用されている公知の顔認識技術を使用することができる。
The singer recognition means 48 acquires imaging data from a predetermined imaging camera of the
上記視野変化量算出手段４９は、歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出するプログラムである。 The visual field change amount calculation means 49 analyzes at least one of the position of the singer's face part and the direction of the face part based on the singer's face data recognized at any time by the singer recognition means. This is a program for calculating the amount of movement or angle change of the part.
上記利用者情報管理手段５０は、利用者ＩＤ取得手段が取得した利用者ＩＤに基づいて、送受信部５０Ｂを介してホスト装置１１にアクセスし、利用者ＤＢ２３より顔写真データを取得して後述の利用者情報（５１）として記憶するプログラムである。
The user information management means 50 accesses the
上記送受信部５０Ａは、遠隔入出力端末３７との間で有線方式ないし無線方式（ＩＲ方式やブルートゥース（登録商標）機構のピコネット接続方式など）を利用してデータ授受を行うためのもので、そのための電子回路及びプログラムである。上記送受信部５０Ｂは、上記ホスト装置１１と上記通信ネットワーク１２を介してデータ授受を行うためのもので、通信方式と整合性をとるための例えば物理的な通信用回路やプラットフォーム等のソフトウエアにより構成されるものである。
The transmission /
上記記憶部４５に記憶されている楽曲ＤＢ５３は、楽曲毎に、音符データ及び歌詞データを格納する。演奏に関して、具体的には、楽曲ＩＤ、曲名及びアーチストＩＤ（アーチスト名）が関連付けられた楽曲テーブルを有し、楽曲毎に、楽曲ＩＤで管理される所定データ形式のカラオケ楽曲の音符データ（例えば、ＭＩＤＩ（登録商標）形式の音符データ）等で構成される楽曲データ（ファイル）について楽曲コードをファイル名としてそれぞれ格納したデータベースである。 The music DB 53 stored in the storage unit 45 stores note data and lyrics data for each music. Regarding performance, specifically, there is a music table in which a music ID, a music title, and an artist ID (artist name) are associated, and for each music, note data of a karaoke music in a predetermined data format managed by the music ID (for example, , MIDI (registered trademark) format note data) and other music data (files), each of which stores a music code as a file name.
上記記憶部４５に記憶されている映像ＤＢ５４は、背景映像表示のための所定数の背景映像データを所定数格納するデータベースである。背景映像データは、利用者に観客の前で歌唱させることを疑似体験させるための観客（及びその周辺）を、例えばコンピュータグラフィックス（ＣＧ）で２Ｄ又は３Ｄ（好ましくは３Ｄ）で静止画映像、動画映像を問わずに作成されたもので、歌唱時に表示させる背景映像データを、スクロール表示可能に上記表示部３２のフレームサイズより大としたものである。なお、上記楽曲ＤＢ５３及び映像ＤＢ５４を、カラオケ本体３１ではなく、上記ホスト装置１１に備えさせることとしてもよい。
The
また、記憶部４５に記憶されているスクロールテーブル５５は、表示すべき背景映像データのスクロール量を予め顔部分の移動量ないし角度変化量に関連付けたものである。一例として、図３に示すように、顔部分の位置を歌唱者水平位置（歌唱者が水平方向に移動したときの位置）として、水平スクロール位置に関連付けたもので、例えば歌唱者水平位置１〜７に対して水平スクロール位置を、例えば中央位置（歌唱者位置４）をＬ０とした場合に対してＬ３〜−Ｌ３とさせたものである。上記歌唱者水平位置の変化分が顔部分の移動量ないし角度変化量となり、水平スクロール位置の差分が水平位置のスクロール量となる。なお、スクロールテーブル５５において、スクロール位置を予め定めた距離（位置）Ｌとする場合の他に、このスクロール位置を、顔部分の水平位置をパラメータとして、所定のアルゴリズムによる演算にて求める構成としてもよい。このことは、以下の実施形態においても同様である。 The scroll table 55 stored in the storage unit 45 associates the scroll amount of the background video data to be displayed with the amount of movement or angle change of the face portion in advance. As an example, as shown in FIG. 3, the position of the face part is associated with the horizontal scroll position as the singer horizontal position (position when the singer moves in the horizontal direction). 7, the horizontal scroll position is set to L3 to -L3, for example, when the center position (singer position 4) is L0. The change in the horizontal position of the singer is the amount of movement or angle change of the face portion, and the difference in horizontal scroll position is the scroll amount of the horizontal position. In the scroll table 55, in addition to the case where the scroll position is set to a predetermined distance (position) L, the scroll position may be obtained by calculation using a predetermined algorithm using the horizontal position of the face portion as a parameter. Good. The same applies to the following embodiments.
一方、上記ＲＡＭ４４に記憶される利用者情報５１は、上記遠隔入出力端末３７の利用者ＩＤ取得手段３８によって利用者ＤＢ２３より取得した顔写真データが利用者ＩＤと関連付けられて少なくとも記憶されるものであるが、そのほかに利用者ＤＢ２３に適宜登録されている利用者の氏名、ニックネーム、年齢、性別などをも適宜記憶される。ＲＡＭ４４に記憶される予約待ち行列５２は、図４に示すように、演奏する楽曲が予約順の楽曲ＩＤに、その選曲者の利用者ＩＤが付帯されて登録される。
On the other hand, the user information 51 stored in the RAM 44 is at least stored in association with the user ID of face photo data acquired from the
なお、カラオケ演奏端末１３をスタンドアローンのカラオケシステムとして適用させる場合には上記ホスト装置１１の利用者ＤＢ２３を当該カラオケ本体３１に備えさせる構成とすることにより実現することができる。
In addition, when applying the
そこで、図５に図２における歌唱者位置特定の説明図を示すと共に、図６に図２における背景映像のスクロール表示の説明図を示す。まず、前提として、複数の利用者のグループ等がカラオケ演奏端末１３を利用するものとして、利用時に各利用者による利用者ＩＤをカード等で遠隔入出力端末３７の利用者ＩＤ取得手段３８により利用者ＩＤを取得させる。当該利用者ＩＤ取得手段３８は、取得した利用者ＩＤをカラオケ本体の送受信部５０Ａを介して利用者管理手段５０に送出する。当該利用者管理手段５０は、送受信部５０Ｂよりコンピュータネットワーク１２を介してホスト装置１１にアクセスし、利用者ＩＤに基づいて利用者ＤＢ２３より当該利用者ＩＤの顔写真データ等を取得し、ＲＡＭ４４の利用者情報５１に当該利用者ＩＤに関連付けて記憶する。
FIG. 5 shows an explanatory diagram for specifying the singer position in FIG. 2, and FIG. 6 shows an explanatory diagram of the scroll display of the background video in FIG. First, as a premise, it is assumed that a group of a plurality of users uses the
また、所定の利用者が、遠隔入出力端末３７を使用して選曲楽曲登録手段３９で利用者ＩＤに基づいて選曲登録した場合、ＲＡＭ４４の予約待ち行列５２には、図４に示すように、少なくもと楽曲ＩＤに利用者ＩＤが関連付けられて登録される。そして、予約待ち行列５２に登録された順に演奏されるもので、その楽曲演奏時に、歌唱者認識手段４８が、当該演奏楽曲に関連付けられた利用者ＩＤに基づいて、利用者情報５１より当該利用者の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき当該グループ中の利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識する。
When a predetermined user uses the remote input /
そして、視野変化量算出手段４９は、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、歌唱者の顔部分の移動を解析し、当該顔部分の移動量を算出していく。例えば、歌唱者の顔部分の水平方向の移動が、図５に示すように、撮像カメラ３６Ｄで撮像された歌唱者水平位置「４」から、撮像カメラ３６Ｇで撮像された歌唱者水平位置「６」に変化した変化量を当該利用者の顔部分の移動量として特定する。 Then, the visual field change amount calculation means 49 analyzes the movement of the singer's face based on the singer's face data recognized at any time by the singer recognition means 48 and calculates the movement amount of the face part. Go. For example, as shown in FIG. 5, the horizontal movement of the face portion of the singer is from the singer horizontal position “4” captured by the imaging camera 36D to the singer horizontal position “6” captured by the imaging camera 36G. The amount of change changed to "is specified as the amount of movement of the user's face.
一方、映像表示制御手段４６は、図６（Ａ）に示すように、上記視野変化量算出手段４９で算出した歌唱者６１の水平位置での変化（移動）量に追従させて背景映像データ５４Ａの表示部４２上での表示フレーム３２Ａを、スクロールテーブル５５を参照して、水平方向のスクロール量を算出してスクロールさせる。図５の例では、図６（Ｂ）に示すように、上記視野変化量算出手段４９が算出した撮像カメラ３６Ｄで撮像された歌唱者水平位置「４」から、撮像カメラ３６Ｇで撮像された歌唱者水平位置「６」への変化量からスクロールテーブル５５を参照し、スクロール位置「Ｌ０」からスクロール位置「−Ｌ２］へのスクロール量を算出して表示部３２上の背景映像５４Ａをスクロール表示させる制御を行うものである。そして、視野変化量算出手段４９で算出された顔部分の移動量（歌唱者の水平位置変化量）に当該スクロール量を追従させて背景映像データ５４Ａを表示部３２で表示させるものである。なお、表示部４２上で表示される映像には、当該歌唱楽曲の歌詞テロップが当該楽曲に同期して表示される。
On the other hand, as shown in FIG. 6A, the video display control means 46 follows the change (movement) amount in the horizontal position of the
このように、実際の歌唱者の動きや顔の向きに対応して、歌唱者から見た観客席への視野をリアリティに再現することで歌唱者に臨場感を与えることができる。例えば、カラオケボックスの部屋のように特別な歌唱者用のステージや歌唱スペースがなく、複数人が1つの部屋の中で歌唱する場合でも、歌唱者を特定することができ、コンサートホールのようにステージから観客席を前に歌唱するように疑似的な体験をさせることができると共に、歌唱者の顔部分の位置、顔部分の向きによって背景映像がスクロールすることにより、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験させることができ、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。 In this way, it is possible to give the singer a sense of realism by realistically reproducing the field of view from the singer in the audience seat corresponding to the actual movement and face direction of the singer. For example, there is no special stage for a singer or singing space like a karaoke box room, and even if multiple people sing in one room, the singer can be identified, like a concert hall Singing in front of the audience seats from the stage can be simulated, and the background image scrolls depending on the position of the singer's face and the direction of the face. It is possible to experience a sense of tension and cheering and cheering of the audience, and to improve the sensibility and willingness to sing.
なお、上記実施形態では、撮像部３６を複数の撮像カメラ３６Ａ〜３６Ｇで構成させた場合を示したが、単一の撮像カメラで構成してもよい。この場合、図５に示す歌唱者水平位置「１」〜歌唱者水平位置「７」が撮像範囲となる。歌唱者認識手段４８は、一の撮像データ中の各歌唱水平位置で歌唱者の顔データを随時認識するものであり、視野変化量算出手段４９が歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置を解析し、当該歌唱者の顔部分の移動量を算出するものである。このことは、以下の実施形態においても同様である。
In the above embodiment, the case where the
ところで、上記実施形態では、歌唱者認識手段４８が歌唱者を特定するに際し、利用者ＩＤに基づいて利用者ＤＢ３２、予約待ち行列５２からの顔写真データによって歌唱者を特定する場合を示したが、利用者ＩＤを用いずに行うこともできる。
By the way, in the said embodiment, when the singer recognition means 48 specified a singer, although the case where a singer was specified by
すなわち、歌唱者認識手段４８が所定の撮像カメラ３６から撮像データを取得し、任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、上記視野変化量算出手段４９が、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置を解析し、当該顔部分の移動量を算出する。そして、映像表示制御手段４６が、図３に示すようなスクロールテーブル５５を参照して顔部分の移動量に応じたスクロール量で表示すべき背景映像データ５４Ａを表示部４２で表示させることで実現することができるものである。
That is, the singer recognition means 48 acquires imaging data from a
このように利用者ＩＤを使用しない場合であっても、歌唱者の動きによる視野に関係させて背景映像を変化させて表示させることができ、歌唱者に観客前で歌唱していることの実感性を向上させて歌唱させることができるものである。例えば、スナックやバーのようなナイト店舗やカラオケボックスのパーティルーム等のようなステージが設置された部屋にて歌唱者が歌唱する場合において、コンサートホールのようにステージから観客席を前にして歌唱しているような擬似的な体験をさせることができると共に、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験させて、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。このことは、以下の実施形態においても同様である。 Even when the user ID is not used in this way, the background image can be changed and displayed in relation to the visual field due to the movement of the singer, and the singer can sing in front of the audience. It can improve sexuality and sing. For example, when a singer sings in a room with a stage, such as a night shop such as a snack or bar or a party room in a karaoke box, singing in front of the audience seats from the stage like a concert hall The singers can feel the sensation and willingness of singing by experiencing the tension and the cheering and cheering of the audience as if singing in a concert hall. Can be improved. The same applies to the following embodiments.
次に、図７に、本発明におけるカラオケシステムの第２実施形態のスクロール表示の説明図を示す。この実施形態は、歌唱者の前後の移動に応じてスクロール表示をズーミングする場合を示している。すなわち、スクロールテーブル５５を、図７（Ａ）に示すように、顔部分の位置を歌唱者前後としてズームスクロール位置と関連付けたものである。すなわち、上記歌唱者前後位置の変化分が顔部分の移動量となり、ズームスクロール位置の差分がスクロール量となる。 Next, FIG. 7 shows an explanatory diagram of scroll display of the second embodiment of the karaoke system in the present invention. This embodiment has shown the case where a scroll display is zoomed according to a singer's back-and-forth movement. That is, as shown in FIG. 7A, the scroll table 55 is associated with the zoom scroll position with the position of the face portion being the front and rear of the singer. That is, the amount of change in the position of the singer before and after is the amount of movement of the face portion, and the difference in zoom scroll position is the amount of scroll.
この場合、視野変化量算出手段４９では、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、図７（Ｂ）に示すように、縮小拡大の変化量を演算し、当該演算した縮小拡大の変化量から歌唱者の前後位置「１」〜「７」に基づく前後の移動量を算出する。例えば、歌唱者が歌唱者前後位置「４」から歌唱者前後位置「６」に前方に移動して変化した場合、視野変化量算出手段４９が歌唱者の前後の移動量を算出し、当該移動量に基づき図７（Ａ）に示すスクロールテーブル５５を参照してズームスクロール位置の変化量を算出し、図７（Ｃ）に示すように、映像表示制御手段４６が、背景映像５４Ａをフレーム３２Ａ内でズーミングし多様に縮小拡大させて表示部４２上に表示させるものである。
In this case, the visual field change amount calculating means 49 calculates the amount of change in reduction and enlargement based on the singer's face data recognized at any time by the singer recognition means 48, as shown in FIG. The amount of movement before and after the singer's front and rear positions “1” to “7” is calculated from the calculated amount of change in reduction and enlargement. For example, when the singer moves forward and changes from the singer front and back position “4” to the singer front and back position “6”, the visual field change amount calculation means 49 calculates the movement amount before and after the singer, and the movement Based on the amount, the
このように、歌唱者の顔部分の位置を歌唱者前後位置によっても顔部分の前後の移動量を具体的に算出することができ、ズーミング表示を行わせることもできるものである。 In this way, the amount of movement of the face part before and after the face part of the singer can be calculated specifically by the singer front and back position, and zooming display can be performed.
次に、図８に本発明におけるカラオケシステムの第３実施形態のスクロール表示に係る利用者ＤＢの説明図を示すと共に、図９に図８のスクロール表示に係るスクロールテーブルの説明図を示し、図１０に図８及び図９におけるスクロール表示の説明図を示す。この実施形態は、歌唱者が顔を水平方向に廻した場合に応じてスクロール表示する場合を示している。この場合、歌唱者を撮像する撮像部３６を構成する単一の撮像カメラを歌唱者に向かって配置させている。
Next, FIG. 8 shows an explanatory diagram of the user DB related to the scroll display of the third embodiment of the karaoke system of the present invention, and FIG. 9 shows an explanatory diagram of the scroll table related to the scroll display of FIG. FIG. 10 is an explanatory diagram of the scroll display in FIGS. This embodiment shows a case where the singer performs scroll display according to the case where the face turns in the horizontal direction. In this case, the single imaging camera which comprises the
まず、ホスト装置１１の利用者ＤＢ２３では、図８（Ａ）、（Ｂ）に示すように、利用者毎に所定数の水平顔角度「θ」（例えば、＋−７５度）毎の顔写真データを、利用者ＩＤを関連付けて格納しておく。また、カラオケ本体３１における記憶部４６のスクロールテーブル５５を、図９に示すように、顔部分の向きを上記利用者ＤＢ２３に格納した水平顔角度「θ」に対応した歌唱者の水平顔角度「θ」としてスクロール位置（水平スクロール角度「θ」）と関連付けたものである。すなわち、上記歌唱者の水平顔角度の変化分が顔部分の移動量ないし角度変化量となり、水平スクロール角度の差分がスクロール量となる。
First, in the
そこで、視野変化量算出手段４９では、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、歌唱者の顔部分の水平方向の向きを解析し、当該顔部分の角度変化量を算出しいく。また、映像表示制御手段４６は、図１０（Ａ）に示すように、歌唱者６１の水平角度「−θ５」〜「θ５」での変化（回転）で算出された顔部分の角度変化量に追従させて背景映像データ５４Ａを表示部４２のフレーム３２Ａ内で、図９に示すスクロールテーブル５５を参照し、水平スクロール角度の変化量を算出したスクロール量でスクロール表示させるものである。
Therefore, the visual field change amount calculation means 49 analyzes the horizontal direction of the singer's face based on the singer's face data recognized at any time by the singer recognition means 48, and the angle change amount of the face part. Is calculated. Further, as shown in FIG. 10 (A), the video display control means 46 sets the angle change amount of the face portion calculated by the change (rotation) of the
例えば、図１０（Ｂ）に示すように、上記視野変化量算出手段４９は、歌唱者の水平顔角度「θ０」から水平顔角度「θ３」への変化分に応じた顔部分の角度変化量を算出し、図９に示すスクロールテーブル５５から水平スクロール角度「θ０」から「θ３］の変化量を算出して得たスクロール量で表示部３２上におけるフレーム３２Ａ内の背景映像５４Ａをスクロール表示させる制御を行うものである。これが、視野変化量算出手段４９で算出された水平顔角度の変化毎に当該水平スクロール角度の変化量を追従させて表示部３２で表示させるものである。
For example, as shown in FIG. 10 (B), the visual field change amount calculation means 49 is the amount of change in the angle of the face according to the amount of change from the horizontal face angle “θ0” of the singer to the horizontal face angle “θ3”. , And the background image 54A in the frame 32A on the
このように、歌唱者の顔部分の向きを水平顔角度によっても顔部分の水平角度変化量を具体的に算出することができ、スクロール角度に応じたスクロール表示を行わせることもできるものである。 In this way, the horizontal angle change amount of the face part can be specifically calculated also by the orientation of the singer's face part by the horizontal face angle, and scroll display corresponding to the scroll angle can also be performed. .
ところで、撮像部３６における撮像カメラを、予め定めた水平角度「−θ５」〜「θ５」毎に、かつ歌唱者を正面視する向きであり、同距離で配置してもよい。この場合、ホスト装置１１の利用者ＤＢ２３には、図１（Ｃ）に示すような、利用者毎に正面の顔写真データを格納しておけばよい。この場合の、各撮像カメラでの撮像は、図５に示すような状態となるものである。このことは、以下の第４実施形態においても同様である。
By the way, the imaging camera in the
図１１に、本発明におけるカラオケシステムの第４実施形態のスクロール表示の説明図を示す。この実施形態は、歌唱者が顔を垂直方向に廻した場合に応じてスクロール表示する場合を示している。この場合のおいても、歌唱者を撮像する撮像部３６を上記同様に単一の撮像カメラを配置してもよく、また、上記のように各角度毎に配置させてもよい。ここでは、撮像カメラを単一で配置させた場合として示している。
In FIG. 11, the explanatory view of the scroll display of 4th Embodiment of the karaoke system in this invention is shown. This embodiment shows a case where the singer performs scroll display according to the case where the face turns in the vertical direction. Even in this case, the
まず、ホスト装置１１の利用者ＤＢ２３では、図８と同様な形態で、利用者毎に所定数の垂直顔角度「θ」（例えば、＋−７５度）の顔写真データを、利用者ＩＤを関連付けて格納しておく。また、カラオケ本体３１における記憶部４６のスクロールテーブル５５を、図１１（Ｂ）に示すように、顔部分の向きを上記利用者ＤＢ２３に格納した水平顔角度「θ」に対応した歌唱者の垂直顔角度「Ｖθ」としてスクロール位置（垂直スクロール角度「Ｖθ」）と関連付けたものである。すなわち、上記歌唱者の垂直顔角度の変化分が顔部分の角度変化量となり、垂直スクロール角度の差分がスクロール量となる。
First, in the
そこで、視野変化量算出手段４９では、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、歌唱者の顔部分の垂直方向の向きを解析し、当該顔部分の角度変化量を算出しいく。また、映像表示制御手段４６は、歌唱者６１の垂直角度「−Ｖθ５」〜「Ｖθ５」での変化（回転）で算出された顔部分の角度変化量に追従させて背景映像データ５４Ａを表示部４２のフレーム３２Ａ内で、図１１（Ｂ）に示すスクロールテーブル５５を参照し、垂直スクロール角度の変化量を算出したスクロール量でスクロール表示させるものである。
Therefore, the visual field variation calculation means 49 analyzes the vertical direction of the singer's face based on the singer's face data recognized at any time by the singer recognition means 48, and the angle variation of the face part. Is calculated. In addition, the video display control means 46 causes the
このように、歌唱者の顔部分の向きを垂直顔角度によっても顔部分の垂直角度変化量を具体的に算出することができ、スクロール角度に応じたスクロール表示を行わせることもできるものである。 Thus, the amount of change in the vertical angle of the face part can be calculated specifically by the direction of the face part of the singer by the vertical face angle, and scroll display corresponding to the scroll angle can be performed. .
ところで、上記第１実施形態〜第４実施形態を、各単独で、又は、適宜の組合せで実施することが可能である。すなわち、スクロールテーブル５５において、歌唱者水平位置、歌唱者前後位置及び歌唱者の水平顔角度、垂直角度の少なくとも何れかとしてその変化量を算出可能とし、これに対応する水平スクロール位置、ズームスクロール量、水平角度スクロール量、垂直角度スクロールに関連付けてスクロール量を算出可能とすることにより、随時認識された当該歌唱者の顔データに基づいて、当該歌唱者の歌唱者水平位置、歌唱者前後位置及び歌唱者の水平顔角度、垂直顔角度の少なくとも何れかの変化に対する顔部分の移動量ないし角度変化量を特定する構成とすることができるものである。 By the way, the said 1st Embodiment-4th Embodiment can be implemented by each independently or in an appropriate combination. That is, in the scroll table 55, the amount of change can be calculated as at least one of the singer's horizontal position, the singer's front and back position, and the singer's horizontal face angle and vertical angle, and the corresponding horizontal scroll position and zoom scroll amount. By enabling the calculation of the scroll amount in association with the horizontal angle scroll amount and the vertical angle scroll, the singer horizontal position of the singer, the singer front-rear position, and The moving amount or the angle change amount of the face part with respect to the change of at least one of the horizontal face angle and the vertical face angle of the singer can be specified.
本発明の背景映像可変表示機能を備えるカラオケシステムは、カラオケの基本的機能を備えるカラオケ機器製造の分野に利用可能である。 The karaoke system having the background video variable display function of the present invention can be used in the field of karaoke equipment manufacturing having a basic karaoke function.
１１ ホスト装置
１３ カラオケ演奏端末
２３ 利用者ＤＢ
３１ カラオケ本体
３２ 表示部
３６ 撮像部
３８ 利用者ＩＤ取得手段
４６ 映像表示制御手段
４８ 歌唱者認識手段
４９ 視野変化量算出手段
５０ 利用者情報管理手段
５１ 利用者情報
５２ 予約待ち行列
５５ スクロールテーブル
11
31
Claims (5)
上記背景映像データ記憶手段は、歌唱時に表示させる背景映像データを、スクロール表示可能に前記表示手段のフレームサイズより大として記憶し、
上記歌唱者撮像手段は、単一の又は連設した複数の撮像カメラを備え、少なくとも顔部分を含む歌唱者を撮像し、
上記歌唱者認識手段は、所定の前記撮像カメラから撮像データを取得し、任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、
上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出し、
上記表示制御手段は、予め設定された、前記記憶されている表示すべき背景映像データのスクロール量と顔部分の移動量ないし角度変化量との関連付けに基づき、前記算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて当該背景映像データを前記表示手段で表示させる、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。 It has a background video variable display function that allows the singer to sing in front of the audience, and has a background video data storage means, a singer imaging means, a singer recognition means, a visual field change amount calculation means, and a display control means. Karaoke system
The background video data storage means stores the background video data to be displayed at the time of singing as being larger than the frame size of the display means in a scrollable manner,
The singer imaging means includes a single or a plurality of continuous imaging cameras, images a singer including at least a face part,
The singer recognition means acquires imaging data from the predetermined imaging camera, generates face data at the start of performance of any song, identifies the singer, and performs the song's performance during the performance of the song. Recognize face data at any time,
The visual field change amount calculating means analyzes at least one of the position of the singer's face part and the direction of the face part based on the singer's face data recognized at any time by the singer recognition means, Calculate the amount of movement or angle change of the part,
The display control means is configured to calculate the amount of movement of the face portion based on a preset association between the stored scroll amount of background video data to be displayed and the amount of movement or angle change of the face portion. Or the background image data is displayed on the display means by causing the scroll amount to follow the angle change amount.
A karaoke system equipped with a variable background image display function.
利用者情報データベース、利用者ＩＤ取得手段、利用者情報管理手段及び選曲楽曲登録手段を備え、
上記利用者情報データベースは、利用者毎に予め撮像した顔写真データを利用者ＩＤを関連付けて格納し、
上記利用者ＩＤ取得手段は、利用者より利用者ＩＤを取得し、
上記利用者情報管理手段は、前記利用者ＩＤ取得手段が取得した利用者ＩＤに基づいて、前記利用者情報データベースより顔写真データを取得して利用者情報として管理し、
上記選曲楽曲登録手段は、前記利用者ＩＤが取得された任意の利用者が選曲した楽曲を予約待ち行列に当該利用者ＩＤを関連付けて登録し、
前記歌唱者認識手段が、前記登録楽曲の演奏開始時に、前記予約待ち行列で当該演奏楽曲に関連付けられた利用者ＩＤから前記利用者情報の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。 A karaoke system comprising the background image variable display function according to claim 1,
A user information database, a user ID acquisition means, a user information management means and a song selection music registration means,
The user information database stores face photograph data previously captured for each user in association with a user ID,
The user ID acquisition means acquires a user ID from the user,
The user information management means acquires face photo data from the user information database based on the user ID acquired by the user ID acquisition means and manages it as user information,
The music selection music registration means registers the music selected by any user whose user ID is acquired in association with the user ID in the reservation queue,
The singer recognition means generates facial data by acquiring facial photo data of the user information as a singer from a user ID associated with the performance music in the reservation queue at the start of performance of the registered music. And identifying a singer among the users based on the face data, and recognizing the singer's face data at any time during the performance of the music,
A karaoke system equipped with a variable background image display function.
前記顔部分の移動量を歌唱者水平位置の変化量としてスクロール量に関連付け、
上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の移動を解析し、当該顔部分の移動量を算出する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。 A karaoke system comprising the background image variable display function according to claim 1 or 2,
Associate the amount of movement of the face portion with the amount of scroll as the amount of change in the singer horizontal position,
The visual field change amount calculating means analyzes the movement of the face part of the singer based on the singer's face data recognized at any time by the singer recognition means, and calculates the movement amount of the face part.
A karaoke system equipped with a variable background image display function.
前記顔部分の移動量を歌唱者前後位置の変化量としてズームスクロール量に関連付け、
前記視野変化量算出手段が、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、縮小拡大の変化量を演算し、当該演算した縮小拡大の変化量から顔部分の前後の移動量を算出する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。 A karaoke system comprising the background video variable display function according to claim 1,
Associating the amount of movement of the face portion with the amount of zoom scroll as the amount of change in the position of the singer back and forth,
The visual field change amount calculation means calculates a change amount of reduction / enlargement based on the singer's face data recognized at any time by the singer recognition means, and calculates the change amount of reduction / enlargement before and after the face portion. Calculate the amount of movement,
A karaoke system equipped with a variable background image display function.
前記歌唱者撮像手段は、所定の角度毎に撮像方向を設定して連設した複数の撮像カメラを備え、
前記視野変化量算出手段が、前記何れかの撮像カメラが所定の顔部分の向きを捉えているかを特定し、特定された撮像カメラの撮像方向に基づいて、当該歌唱者の顔部分の向きを解析し、当該解析データから当該歌唱者の顔部分の角度変化量を算出する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。 A karaoke system comprising the background video variable display function according to claim 1,
The singer imaging means includes a plurality of imaging cameras arranged in series by setting an imaging direction for each predetermined angle,
The field-of-view change amount calculation means specifies which one of the imaging cameras captures the orientation of the predetermined face portion, and determines the orientation of the face portion of the singer based on the imaging direction of the identified imaging camera. Analyzing and calculating the angle change amount of the singer's face from the analysis data,
A karaoke system equipped with a variable background image display function.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009199681A JP2011053276A (en) | 2009-08-31 | 2009-08-31 | Karaoke system including background image variable display function |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2009199681A JP2011053276A (en) | 2009-08-31 | 2009-08-31 | Karaoke system including background image variable display function |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2011053276A true JP2011053276A (en) | 2011-03-17 |
Family
ID=43942395
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2009199681A Withdrawn JP2011053276A (en) | 2009-08-31 | 2009-08-31 | Karaoke system including background image variable display function |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2011053276A (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012088521A (en) * | 2010-10-20 | 2012-05-10 | Mega Chips Corp | Amusement system |
| JP2016166928A (en) * | 2015-03-09 | 2016-09-15 | 高橋 勝治 | Performance device, performance method, program, and amusement system |
| US9601118B2 (en) | 2010-10-20 | 2017-03-21 | Megachips Corporation | Amusement system |
| JP2020025869A (en) * | 2018-08-09 | 2020-02-20 | 株式会社ユークス | Display system for hall and method for executing event using the same |
-
2009
- 2009-08-31 JP JP2009199681A patent/JP2011053276A/en not_active Withdrawn
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012088521A (en) * | 2010-10-20 | 2012-05-10 | Mega Chips Corp | Amusement system |
| US9601118B2 (en) | 2010-10-20 | 2017-03-21 | Megachips Corporation | Amusement system |
| JP2016166928A (en) * | 2015-03-09 | 2016-09-15 | 高橋 勝治 | Performance device, performance method, program, and amusement system |
| JP2020025869A (en) * | 2018-08-09 | 2020-02-20 | 株式会社ユークス | Display system for hall and method for executing event using the same |
| JP7309148B2 (en) | 2018-08-09 | 2023-07-18 | 株式会社ユークス | Hall display system and method for holding events using the same |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6823852B2 (en) | Methods, digital jukebox systems and recording media | |
| JP5422593B2 (en) | Video information distribution system | |
| JP4755672B2 (en) | Content editing apparatus, method and program | |
| JP7121270B2 (en) | Information processing device, video distribution method, and video distribution program | |
| JP7193702B2 (en) | Information processing device, video distribution method, and video distribution program | |
| JP2023052125A (en) | Information processing apparatus, moving image distribution method, and moving image distribution program | |
| JP2011053276A (en) | Karaoke system including background image variable display function | |
| JP2024020565A (en) | Information processing device, information processing system, and information processing program | |
| JP5498341B2 (en) | Karaoke system | |
| JP2023169373A (en) | Information processing device, moving image synthesis method and moving image synthesis program | |
| JP2017005371A (en) | Coaction video presentation device and coaction video presentation system | |
| JP5550593B2 (en) | Karaoke equipment | |
| JP7442979B2 (en) | karaoke system | |
| JP6116213B2 (en) | Synthetic video content generation system | |
| GB2532644A (en) | Digital jukebox device with karaoke and/or photo booth features, and associated methods | |
| JP6134506B2 (en) | Singing video content viewing system | |
| JP6051028B2 (en) | Singing video data acquisition system | |
| JP5486538B2 (en) | Karaoke equipment | |
| JP6043610B2 (en) | Synthetic video content generation system | |
| JP7311815B2 (en) | Information processing device, video distribution method, and video distribution program | |
| JP5789477B2 (en) | Image reproduction apparatus and image reproduction system | |
| JP4471946B2 (en) | Karaoke system | |
| JP6276673B2 (en) | Karaoke device and program | |
| WO2020121624A1 (en) | Music posting device and music posting program | |
| JP6472216B2 (en) | Karaoke linkage system, digital signage, and advertisement selection method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20121106 |