JP2005136519A - Remote control system - Google Patents
Remote control system Download PDFInfo
- Publication number
- JP2005136519A JP2005136519A JP2003368004A JP2003368004A JP2005136519A JP 2005136519 A JP2005136519 A JP 2005136519A JP 2003368004 A JP2003368004 A JP 2003368004A JP 2003368004 A JP2003368004 A JP 2003368004A JP 2005136519 A JP2005136519 A JP 2005136519A
- Authority
- JP
- Japan
- Prior art keywords
- information
- remote control
- control system
- display
- selection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Studio Devices (AREA)
- Telephone Set Structure (AREA)
- Telephonic Communication Services (AREA)
- Details Of Television Systems (AREA)
Abstract
Description
この発明は、遠隔操作システムに関する。 The present invention relates to a remote operation system.
従来より、遠隔操作システムとして様々なシステムが提案されている(特許文献1参照、特許文献2、特許文献3、特許文献4)。
しかしながら、近年、ディジタルTVやホームネットワーク機器といったIT機器が複雑、高度化してきているため、このようなIT機器を遠隔操作するためのリモートコントローラについては、ボタン数が増加し所望の操作をするためのボタンの発見に苦労を伴う、或いは、所望の操作を行うためにボタンを押下する回数が増加する等、リモートコントローラの操作が非常に煩わしくなってきており、高齢者や情報弱者のみならず、日頃IT機器に接する機会の多い人にとってもその操作が困難なものとなってきている。よって、このような遠隔操作システムにおける構成の簡素化、低コスト化、操作性の向上が更に求められる。 However, in recent years, IT devices such as digital TVs and home network devices have become complicated and sophisticated, so that the remote controller for remotely operating such IT devices increases the number of buttons and performs a desired operation. The operation of the remote controller has become very troublesome, such as increasing the number of times the button is pressed to perform the desired operation. It is becoming difficult for those who have a lot of opportunities to come into contact with IT equipment on a daily basis. Accordingly, there is a further demand for simplification of configuration, cost reduction, and improvement in operability in such a remote operation system.
この発明は、上記の事情に鑑み、簡素化、低コスト化、操作性の向上が図れる遠隔操作システムを提供することを目的とする。 In view of the above circumstances, an object of the present invention is to provide a remote operation system that can be simplified, reduced in cost, and improved in operability.
この発明の遠隔操作システムは、上記の課題を解決するために、遠隔指示操作により特定される表示画面上の指示位置または指示エリアを検出する位置検出手段と、遠隔選択操作に基づき前記指示位置または前記指示エリアにおける選択を実行する選択制御手段とを、有することを特徴とする。 In order to solve the above-described problem, the remote operation system of the present invention includes position detection means for detecting an instruction position or an instruction area on a display screen specified by a remote instruction operation, and the indication position or the position based on the remote selection operation. Selection control means for executing selection in the instruction area.
前記表示画面上の映像表示を制御する表示制御手段を備えてもよい。前記表示制御手段は、前記表示画面上の前記指示位置または前記指示エリアを強調表示するのがよい。前記表示制御手段は、前記指示位置または前記指示エリアを拡大表示してもよい。前記表示制御手段は、前記指示位置または前記指示エリアを点滅表示してもよい。前記表示制御手段は、前記指示位置または前記指示エリアの色度または輝度を変更してもよい。前記表示制御手段は、前記指示位置または指示エリアに関連する情報を表示してもよい。 You may provide the display control means which controls the video display on the said display screen. The display control means may highlight the designated position or the designated area on the display screen. The display control means may enlarge and display the designated position or the designated area. The display control means may blink the indication position or the indication area. The display control means may change chromaticity or luminance of the designated position or the designated area. The display control means may display information related to the designated position or designated area.
音声を出力する音声出力手段を備えてもよい。前記音声出力手段は、前記表示画面上の前記指示位置若しくは前記指示エリアの情報または前記指示位置若しくは前記指示エリアに関連する情報を音声出力するのがよい。前記音声出力手段は、選択の実行に先行して、確認を促す音声出力を行ってもよい。 You may provide the audio | voice output means which outputs an audio | voice. The voice output means may output the information on the designated position or the designated area on the display screen or information related to the designated position or the designated area. The voice output means may perform voice output for prompting confirmation prior to execution of selection.
前記選択の実行に先行して、仮選択処理をするようにしてもよい。前記仮選択処理は、選択ボタンの先行操作により実行され、前記選択の実行は前記選択ボタンの後続操作により行われてもよい。 Prior to the execution of the selection, a provisional selection process may be performed. The temporary selection process may be performed by a preceding operation of the selection button, and the execution of the selection may be performed by a subsequent operation of the selection button.
前記選択の実行は、前記指定位置または前記指示エリアが所定期間以上変更されないことを検出して行われてもよい。前記選択の実行は、音声認識により行われてもよい。前記選択の実行は、操作者の動作に基づきなされてもよい。 The execution of the selection may be performed by detecting that the designated position or the instruction area is not changed for a predetermined period or longer. The execution of the selection may be performed by voice recognition. The selection may be performed based on an operator's action.
生体情報に基づいて操作者を判定する手段を備え、判定結果に基づいて視聴制限及び/又は電子プログラムガイドの表示制限を行うかどうかを決定するように構成されていてもよい。取得した生体情報と予め登録した生体情報とに基づいて登録者を判定するか又は取得した生体情報と予め設定した基準情報との比較によって大人か子供かを推定する手段を備え、登録者か未登録者かの判定結果又は大人か子供かの推定結果と、放送番組の視聴制限情報とに基づいて視聴制限及び/又は電子プログラムガイドの表示制限を行うかどうかを決定するように構成されていてもよい。 Means for determining the operator based on the biological information may be provided, and it may be configured to determine whether to restrict viewing and / or display restriction of the electronic program guide based on the determination result. A means for determining a registrant based on the acquired biometric information and pre-registered biometric information or estimating whether the registrant is an adult or a child by comparing the acquired biometric information with preset reference information is provided. It is configured to determine whether to restrict viewing and / or display restriction of the electronic program guide based on the determination result of the registrant or the estimation result of adult or child and the viewing restriction information of the broadcast program. Also good.
取得した生体情報と予め登録した生体情報とに基づいて登録者を判定するか又は取得した生体情報と予め設定した基準情報との比較によって大人か子供かを推定する手段を備え、登録者か未登録者かの判定結果又は大人か子供かの推定結果と、予め登録したキーワードが番組情報中に存在するかどうかの結果とに基づいて視聴制限及び/又は電子プログラムガイドの表示制限を行うかどうかを決定するように構成されていてもよい。 A means for determining a registrant based on the acquired biometric information and pre-registered biometric information or estimating whether the registrant is an adult or a child by comparing the acquired biometric information with preset reference information is provided. Whether to restrict viewing and / or display restrictions on the electronic program guide based on the judgment result of the registrant or the estimation result of whether it is an adult or a child and whether or not a keyword registered in advance exists in the program information May be configured to determine.
取得した生体情報と予め登録した生体情報とに基づいて登録者を判定するか又は取得した生体情報と予め設定した基準情報との比較によって大人か子供かを推定する手段を備え、未登録者或いは子供であるとの判定結果が得られたときに、操作制限が行われるように構成されていてもよい。前記生体情報は音声であるのがよい。 A means for determining whether a registrant is based on the acquired biometric information and preregistered biometric information or comparing the acquired biometric information with preset reference information to determine whether an adult or a child, The operation restriction may be performed when a determination result that the child is a child is obtained. The biological information may be voice.
前記位置検出手段は撮像カメラを利用して構成され、撮像カメラで撮像された所定画像部分の撮像素子上の位置に基づいて表示画面上の指示位置または指示エリアを検出するようにしてもよい。前記位置検出手段は撮像カメラを利用して構成され、撮像カメラで撮像された基準となる画像とこの基準となる画像に対する現在撮像中の画像の移動量及び移動方向を算出して表示画面上の指示位置または指示エリアを検出してもよい。前記位置検出手段は撮像カメラを利用して構成され、撮像カメラで撮像された画像上の特徴画像部位と同画像上の所定部位とのずれの方向及び量に基づいて表示画面上の指示位置または指示エリアを検出してもよい。前記位置検出手段は撮像カメラを利用して構成され、撮像カメラで撮像した画像と画面表示画像との対比処理によって表示画面上の指示位置または指示エリアを検出してもよい。前記位置検出手段は撮像カメラを利用して構成され、撮像カメラにて撮像された画像に基づいて文字認識を行い、認識した文字と画面表示対象とされている文字との対比に基づいて表示画面上の指示位置または指示エリアを検出してもよい。前記位置検出手段は撮像カメラ及び光線出射手段を利用して構成され、撮像カメラにて撮像された画像上の光線照射位置を検出し、この撮像画像上の光線照射位置に基づいて表示画面上の指示位置または指示エリアを検出してもよい。 The position detection unit may be configured using an imaging camera, and may detect an instruction position or an instruction area on the display screen based on a position on the imaging element of a predetermined image portion imaged by the imaging camera. The position detection means is configured by using an imaging camera, calculates a reference image captured by the imaging camera, and a moving amount and a moving direction of an image currently being captured with respect to the reference image, and displays them on the display screen. The designated position or the designated area may be detected. The position detecting means is configured using an imaging camera, and based on the direction and amount of deviation between the feature image portion on the image captured by the imaging camera and the predetermined portion on the image, the indicated position on the display screen or The instruction area may be detected. The position detection unit may be configured using an imaging camera, and may detect an instruction position or an instruction area on a display screen by a comparison process between an image captured by the imaging camera and a screen display image. The position detection unit is configured using an imaging camera, performs character recognition based on an image captured by the imaging camera, and displays a display screen based on a comparison between the recognized character and a character that is a screen display target. The upper designated position or designated area may be detected. The position detecting unit is configured using an imaging camera and a light beam emitting unit, detects a light beam irradiation position on an image captured by the imaging camera, and displays on the display screen based on the light beam irradiation position on the captured image. The designated position or the designated area may be detected.
前記撮像カメラはディジタルカメラであってもよい。前記撮像カメラは携帯型電話装置に設けられたものであってもよい。 The imaging camera may be a digital camera. The imaging camera may be provided in a portable telephone device.
前記位置検出手段は光線出射手段を利用して構成され、表示画面であるディスプレイ側又はスクリーン側に設けた光電変換手段にて光線受光位置を判定して、表示画面上の指示位置または指示エリアを検出してもよい。 The position detecting means is configured by using a light emitting means, and the light receiving position is determined by the photoelectric conversion means provided on the display side or the screen side which is a display screen, and the designated position or designated area on the display screen is determined. It may be detected.
以上説明したように、この発明によれば、遠隔操作システムの構成が簡単になり、また、操作性に優れる。また、ディジタルカメラや携帯電話を用いる構成であれば、コスト低減が図れるという効果を奏する。 As described above, according to the present invention, the configuration of the remote operation system is simplified and the operability is excellent. In addition, if a configuration using a digital camera or a mobile phone is used, there is an effect that the cost can be reduced.
以下、この発明の実施形態を図1乃至図7に基づいて説明するが、この実施形態では制御対象機器がディジタル放送受信装置である場合の遠隔操作システムを例示している。 Hereinafter, an embodiment of the present invention will be described with reference to FIGS. 1 to 7. In this embodiment, a remote operation system in the case where a device to be controlled is a digital broadcast receiver is illustrated.
図1において、アンテナ1は、屋外において所定の方向に向けて配置されており、衛星や地上波放送局から送られてくるディジタル放送信号を受信する。
In FIG. 1, an
チューナ2は、映像・音声データを含む高周波ディジタル変調信号のうちから特定周波数の信号を取り出す。また、チューナ2は、復調回路、逆インタリーブ回路、誤り訂正回路などを備えることにより、選択したディジタル変調信号を復調してトランスポート・ストリームを出力する。
The
デマルチプレクサ(DEMUX)3は、チューナ2から出力されるトランスポート・ストリームを、MPEG2(Moving Picture Experts Group2)のビデオストリーム、オーディオストリーム、PSI/SI(Program Specific Information/Service Information)、及びデータ放送データ等に分離する。デマルチプレクサ3におけるTSデコーダ3aは、ユーザによって選択された番組を構成するビデオストリーム及びオーディオストリームをCPU17の指令に基づいて取り出してストリーム記録・再生部4及びAVデコーダ7へ供給する。データ放送データはブラウザ(現状はBMLブラウザ)に供給される。なお、トランスポート・ストリームには複数のチャンネルが多重化されており、このなかから任意のチャンネルを選択するための処理は、前記PSI/SIから任意のチャンネルがトランスポート・ストリーム中でどのパケットIDで多重化されているかといったデータを取り出すことで可能となる。また、トランスポート・ストリームの選定もPSI/SIの情報に基づいて行うことができる。更に、SIには番組情報(番組名、番組開始時刻、番組継続時間、番組内容情報、番組ジャンル情報等)が含まれている。
The demultiplexer (DEMUX) 3 converts the transport stream output from the
ストリーム記録・再生部4は、外部装置31との間でIEEE1394インターフェース5を通じてデータや制御信号のやりとりを行い、TSデコーダ3aから出力されたビデオストリーム及びオーディオストリームを外部装置31に書き込み(記録)、また、外部装置31からビデオストリーム及びオーディオストリームを読み出すことができる(再生)。
The stream recording / playback unit 4 exchanges data and control signals with the
AVデコーダ7は、ビデオストリームに対してデコードを行うビデオデコーダ、及びオーディオストリームに対してデコードを行うオーディオデコーダを備える。ビデオデコーダは、入力された可変長符号を復号して量子化係数や動きベクトルを求め、逆DCT変換や動きベクトルに基づく動き補償制御等を行う。オーディオデコーダは、入力された符号化信号を復号して音声データを生成する。
The
映像処理回路8は、AVデコーダ7から映像データを受け取ってD/A変換を行い、例えばNTSCコンポジット信号に変換する。音声処理回路9は、AVデコーダ7から出力された音声データを受け取ってD/A変換を行い、例えば右(R)音のアナログ信号及び左(L)音のアナログ信号を生成する。
The
映像出力回路10及び音声出力回路11は出力抵抗や増幅器等を備えて成る。AV出力端子12には、出力部(左右音声出力端子等や映像出力端子のセット)が設けられており、この出力部には、ディスプレイやスピーカを備えるモニタ14が映像/音声コード13によって接続される。
The
OSD(オンスクリーンディスプレイ)回路19は、CPU17から出力指示された文字情報や色情報に基づくビットマップデータを加算器20に出力する。加算器20は前記ビットマップデータを映像データに組み込む処理を行う。上記OSD回路19により、CPU17が受け取ったPSI/SIに基づく電子プログラムガイド(EPG)表示、カーソル表示、メッセージ表示、メニュー画面表示、ツールバー表示などが行えることになる。
An OSD (on-screen display)
ディジタルカメラ15は、当該放送受信装置30を遠隔制御する遠隔操作システムを構成するものである。このディジタルカメラ15の構成例を図2に示す。ディジタルカメラ15は、その本来のカメラ機能として、ディジタルカメラカメラ機能部15e、表示部15d、メモリ15bを備える。メモリ15bには撮像画像データやユーザー設定情報などが格納される。情報送受部15cは、CPU15aから送出指令を受けた情報を例えば赤外線信号に変換して送出したり、放送受信装置30から受信した情報を電気信号に変換してCPU15aに送出する。音声認識部15fは、マイクから入力された音声をディジタル解析して音声認識を行う。音声生成部15hは、CPU15aの指示により図示しない音声メモリから読み出したデータに基づく音声信号又はCPU15aから供給された文字情報に基づく音声合成による音声信号をスピーカに出力する。また、CPU15aは、撮像画像に基づいて指示位置(指示エリア含む)の判定処理を行う。ここで、指示エリアは指示されたエリアの他、指示位置に対して所定範囲の近傍エリアを含むものとして定義される。
The
メモリ(RAM、EEPROM、フラッシュメモリ等)18には、EPG画面などの表示に用いられる番組情報や各種設定内容などが格納される。 A memory (RAM, EEPROM, flash memory, etc.) 18 stores program information used for displaying an EPG screen, various setting contents, and the like.
モデム22は、例えば双方向通信や課金センターへ視聴履歴情報を伝送する際のダイヤルアップ接続やインターネットプロバイダへのダイヤルアップ接続においてCPU13の制御の下で動作する。
The
ICカード21Aは、有料放送を視聴可能にするための鍵情報や番組毎に課金対象となるPPV(ペイ・パー・ビュー)番組の視聴履歴情報や契約チャンネル情報などをその内蔵メモリに格納する。CAモジュール21は、CPU13とICカード21Aとの間で諸情報の書き込み処理や読出し処理を行う。
[ディジタルカメラ15による表示画面上の指示制御]
ディジタルカメラ15に設けられた例えば「リモコンモード」といったボタンが操作されるとディジタルカメラ15はリモコンモードに移行する。ユーザは、このリモコンモードとした後、以下のように操作する。ディジタルカメラ15をリモートコントローラとして操作する様子を図4に示している。なお、図4のなかの放送受信装置30のモニタ14(画面)には、電子プログラムガイドが表示されている。
The
[Instruction control on display screen by digital camera 15]
When a button such as “remote control mode” provided on the
イ.ディジタルカメラ15をテーブル上に置く。ディジタルカメラ15のレンズ近くで物体(LED等の光る物体や高反射率の金属等がよい)をユーザが手に持って動かす。物体の画像部分は撮像素子(CCD等)上で移動することになる。ディジタルカメラ15のCPU15aは所定輝度以上の部分を物***置と判断する。撮像素子の右端下端はモニタ14の右端下端である、のごとく、撮像素子位置(座標)と放送受信装置30の画面位置(座標)とを対応つけておく。ディジタルカメラ15は、撮像素子上の物***置(座標)情報を放送受信装置30に送出する。放送受信装置30は物***置(座標)情報を受信し、OSD処理にて受信映像にカーソル(矢印マーク、色変え等)を重畳し、このカーソルを前記移動量及び移動方向の情報に基づいて移動表示させる。ユーザは、放送受信装置30のモニタ14上のカーソルを見て前記物体を所望の方向に動かせばよく、この動きに追従してモニタ14上のカーソルが移動する。なお、前記物体に選択ボタンを設けておき、選択ボタンの操作信号がディジタルカメラ15側で受信され、このディジタルカメラ15から操作信号が放送受信装置30に転送されるか、或いは、選択ボタンの操作信号が直接に放送受信装置30に送信されるように構成する。前記選択ボタンは二段ボタンでもよい。
A. The
ロ.ユーザは、ディジタルカメラ15にて所望の画像(例えば、モニタ14付近の画像、テーブル上の配置物の画像等なんでもよい。ただし、壁などの単一色部分の画像は避ける)を撮像し、基準登録画像とする処理を行う。ユーザは、ディジタルカメラ15を手に持って撮像位置を変化させる。ディジタルカメラ15は基準登録画像に対する現在撮像中の画像の移動量及び移動方向を算出し、この移動量及び移動方向を位置指定情報として放送受信装置30に送出する。放送受信装置30は前記位置指定情報を受信し、OSD処理にて映像にカーソルを重畳し、カーソルを移動表示させる。なお、前記基準登録画像及び現在撮像中の画像をディジタルカメラ15の情報送出部15cから放送受信装置30に与え、放送受信装置30側で移動量及び移動方向を算出してもよい。
B. The user takes a desired image (for example, an image near the
ハ.放送受信装置30は、例えば画面の右端下端に特徴画像(色度、輝度、形状、点滅等で他の部分とは異なる特徴をもたせる)を表示する。ユーザはディジタルカメラ15を手に持ってモニタ14の画面を撮像する。このとき、ユーザは、ディジタルカメラ15のモニタを見ながら所望の番組欄部分が例えばモニタ中央に位置するように撮像する。ここで、モニタ中央(撮像画像中央)に特徴画像が存在すれば放送受信装置30に対する画面上の指示位置は特徴画像部分の表示位置に一致する。また、図3に示すように、撮像画像の中央に対して特徴画像がずれて存在すれば、そのずれ情報(図のx値とy値)に基づいて画面上の指示位置を判定することができる。なお、ディジタルカメラ15が前記ずれ情報を算出して放送受信装置30に送出することとしてもよいし、ディジタルカメラ15の撮像画像を放送受信装置30に送出して放送受信装置30側でずれ情報を得て指示位置判定を行うこととしてもよい。
C. For example, the
ニ.ディジタルカメラ15をテーブル上に置き、放送受信装置30のモニタ14の画面を撮像させる。ユーザは、例えば、レーザポインタを用い、モニタ14の画面上の所望の位置に点状光(例えば、赤色光)を照射する。ディジタルカメラ15はモニタ14の画像上に前記点状光が存在する画像を撮像することになる。この点状光存在画像とモニタ14の画像(フレーム)との差分を求めると、点状光の画像上の座標(指示位置)を取得することができる。より具体的には、例えば、点状光のないモニタ14の画像は、例えばモニタ14の淵を含む画像であって、淵の角を基準としてXY座標を確立し、点状光のないモニタ画面と点状光のあるモニタ画面との差分より、画像上の点状光の位置を算出することができる。放送受信装置30は点状光の画像上の座標(指示位置)を受信し、OSD処理にて映像にカーソルを重畳し、移動表示させることとしてもよく、この場合、点状光の照射位置に追従するようにしてカーソルが移動していくことになり、放送受信装置30側で指示位置を正しく把握しているかどうかの確認が行える。なお、ディジタルカメラ15が放送受信装置30から前記画像(フレーム)を受信して前記指示位置を求め、この指示位置を放送受信装置30に送出してもよいし、放送受信装置30がディジタルカメラ15から撮像画像を受信して前記指示位置を求めてもよい。また、前記レーザポインタに選択ボタンを設けておき、選択ボタンの操作信号がディジタルカメラ15側で受信されて放送受信装置30に転送されるか、或いは、選択ボタンの操作信号が直接に放送受信装置30に送信されるようにしてもよい。前記選択ボタンは二段ボタンでもよい。
D. The
ホ.ユーザはディジタルカメラ15を手に持ってモニタ14の画面を撮像する。このとき、ユーザは、ディジタルカメラ15のモニタを見ながら所望の番組欄部分が例えばモニタ中央に位置するように撮像する。ディジタルカメラ15には撮像画像に基づいて文字(図形)認識を行う機能を搭載しておく。ディジタルカメラ15は認識した文字(図形)の情報を放送受信装置30に送出する。放送受信装置30は受け取った文字(図形)情報に一致する文字(図形)が画面上でどの位置に表示されているかを判断する。電子プログラムガイド画面やツールバー画面などは放送受信装置自らが作成する画像であるので、上記判断が可能である。なお、ディジタルカメラ15が撮像画像を放送受信装置30に送出し、放送受信装置30の側で文字(図形)認識を行うこととしてもよい。また、ディジタルカメラ15がズーム機能を備えるときには、所望の番組欄部分を拡大して撮像することとすれば、認識率を高めることができる。
E. The user captures the screen of the
ヘ.ディジタルカメラ15にて操作者の体の一部(目(視線)、手等)を撮像して指示位置を検出してもよい。なお、ディジタルカメラは汎用のものでもよいし、コントローラ専用の撮像カメラでもよい。
F. The designated position may be detected by imaging a part of the operator's body (eyes (gaze), hand, etc.) with the
次に、指示位置(指示エリアを含む)における表示制御を説明する。放送受信装置30は、例えば、電子プログラムガイド画面上の指示位置部分について、強調表示(他の部分と区別できてユーザの認識を容易にする表示)を行う。具体的には、図4に示しているように、例えば指示位置を拡大表示する。指示位置上で拡大してもよいが、指示位置とは異なる位置(重要な情報を表示していない位置等)で拡大表示するのがよい。また、このような拡大に限るものではなく、拡大と共に或いは拡大しないで、指示位置を点滅表示させてもよいし、記指示位置の色度または輝度を変更するようにしてもよい。また、指定エリアの表示としては、実際の指定エリアの拡大等の表示の他、前述した定義のごとく、指示位置に対して所定範囲の近傍エリア(指定位置の番組情報に隣接する他の番組情報など)を拡大等して表示してもよい。
Next, display control at the designated position (including the designated area) will be described. For example, the
指定位置上の番組情報に限らず、これに関連する情報、例えば、番組欄では表示されていない番組詳細情報、過去の同一番組の録画データから抽出した場面画像、番組のオープニング画像等を表示してもよい。また、番組情報や関連情報に基づき、音声生成部15gにて、例えば「7時のニュースです」、「この番組はプレビューがあります」、「この番組はパレンタルレベルによる視聴制限がかかりません」、「この番組は未契約です」、「この番組はシリーズ番組です」、「この番組は再放送番組です」、「この番組と同一番組を○月○日に録画しています」といった音声出力を行うようにしてもよい。また、このような音声出力に合わせてインターフェイスエージェント(キャラクタ画像)をOSD表示することとしてもよい。 Not only program information at the specified position, but also related information such as detailed program information not displayed in the program column, scene images extracted from recorded data of the same program in the past, program opening images, etc. May be. Also, based on program information and related information, for example, “7 o'clock news”, “This program has a preview”, “This program is not subject to parental level viewing restrictions” , "This program is not contracted", "This program is a series program", "This program is a rebroadcast program", "The same program as this program is recorded on the day of the month" You may make it perform. In addition, the interface agent (character image) may be OSD displayed in accordance with such voice output.
次に、指定位置に対する選択の実行について説明していく。前述したごとく、指定位置に対応して番組欄部分上でカーソルの表示等が実行されるが、その番組の録画予約を受け付ける処理は、例えば、ディジタルカメラ15のマイクに向けて、ユーザが「録画して」といったときに実行される。ディジタルカメラ15は音声認識部15fにて「録画」の言葉を認識したときに、放送受信装置30に対して録画指令を意味する情報を送出する。また、前記物体やレーザポインタに設けた選択ボタンの操作、ディジタルカメラ15に設けられているシャッタボタン等の操作、指定位置を所定時間以上維持するユーザ操作、当該物体やレーザポインタの所定特定の動き(指定位置上でレーザポインタ等にて丸を描くような動作等)など、操作者の各種動作によって選択が実行されることとしてもよい。
Next, execution of selection for a designated position will be described. As described above, a cursor is displayed on the program field corresponding to the designated position. The process for accepting a recording reservation for the program is, for example, directed to the microphone of the
また、前記選択ボタンやディジタルカメラ15のシャッタボタンが二段操作可能なボタンである場合、これらボタンの仮押し操作(第1段操作:先行操作)にて仮選択処理が行われるようにしてもよい。また、仮選択処理はユーザが発した言葉が「これ」である場合に行うこととしてもよい。仮選択処理は、例えば、図2に示したように、「予約視聴」と「予約録画」の選択項目をモニタ14の画面に表示させ、いずれかにカーソルを位置させる。ユーザが前記ボタンの仮押し操作を繰り返すと、カーソル位置が変化する。所望のカーソル位置で本押し操作(第2段操作:後続操作)を行うと、カーソル位置の内容(処理)が実行される。また、ユーザが発した言葉が「次」である場合にカーソル位置が変化する。所望のカーソル位置でユーザが「これ」という言葉を発すると、カーソル位置の内容(処理)実行される。勿論、カーソル表示によらず、ユーザが「予約録画」と言ったときに、予約録画処理を実行することとしてもよい。なお、放送受信装置30は現在時刻と選択番組欄の番組開始時終了刻情報とを比較し、現在時刻が番組放映時間内のときには、「今すぐ視聴」といった項目を選択項目として追加表示することもできる。
Further, when the selection button or the shutter button of the
また、放送受信装置30又はディジタルカメラ15は、選択の実行を行うのに先立って、音声合成処理によって、例えば、「よろしいですか」といった確認の音声メッセージを出力し、例えばその2秒後に「受け付けました」といった音声メッセージを出力することとしてもよい。また、前記「よろしいですか」といった確認の音声メッセージに対してユーザが「いいよ」と発話すると、放送受信装置30又はディジタルカメラ15が音声認識により前記「いいよ」を「受け付けOK」の意味であると判定して、「受け付けました」といった音声メッセージを出力することとしてもよい。また、ユーザが前記2秒の間に「中止」といった言葉を発すると、音声認識にて選択の実行を中止する。
Also, the
図5は携帯電話15Aをリモートコントローラとして用いる場合を例示している。携帯電話15Aは、ディジタルカメラを搭載しており、更に、音声認識処理部、音声合成処理部、及び放送受信装置30との間で情報送受を行う情報送受信部を備える。例えば、放送受信装置30から微弱な電磁波や超音波を送出しておき、この電磁波や超音波を携帯電話15Aが受信できたときに、例えば、電話着信機能停止処理や、相手先に対して電話にでられない旨のメッセージ伝送等の処理を行うのがよい。すなわち、携帯電話15Aは、制御対象機器である放送受信装置30から所定エリア内に存在するとの判断を行ったときには、リモートコントローラとしての機能を優先する処理を行ってもよい。先述のディジタルカメラ15においても同様に、制御対象機器である放送受信装置30から所定エリア内に存在するとの判断を行ったときには、リモートコントローラとしての機能を優先する処理を行ってもよい。
FIG. 5 illustrates a case where the
図6及び図7に示す例は、モニタ14に映像を表示するのではなく、スクリーン14′に映像投写を行う放送受信装置30′を示している。そして、位置指示にレーザポインタ15Bを用い、このレーザポインタ15Bに二段ボタン151と音声認識用のマイク152と情報送出部(図示せず)を設けている。スクリーン14′は投写映像を100%反射するのではなく、一部は透過させる。スクリーン14′の背面側にフォトダイオード等を用いた二次元の光電変換素子(位置検出素子)141を設けておく。光電変換素子141は受光点の座標情報を出力する。また、例えば、スクリーン14′の背面との間に赤色光のみ透過させる光学フィルムを介挿しておく。スクリーン14′に向けてレーザポインタ15Bから赤色ポイント光を照射すると、この光の一部はスクリーン14′を透過する。光電変換素子141は、スクリーン14′の背面全体を検出対象とするように設けられており、スクリーン14′裏面上の透過ポイント光に対応した位置に光を感受することになる。投写映像光の透過による光電変換素子141の赤色受光強度よりもレーザポインタ15Bからの赤色受光強度が高くなるようにポイント光出力を設定しておく。所定の閾値を超える受光部分の座標情報を赤色ポイント光による指示位置として認識し、この指示位置の情報をスクリーン14′に設けた情報送出部から放送受信装置30′に送出する。これにより、放送受信装置30′において指示位置を検出できることになる。二段ボタン151の操作情報や音声認識(マイク152)による音声認識情報はレーザポインタ15Bの情報送出部から送出される。
The example shown in FIGS. 6 and 7 shows a
なお、例えば、二段ボタン151の仮押し操作で第1間隔のパルス光が出射され、本押し操作で第2間隔のパルス光が出射されるようにしてもよい。スクリーン14′側の光電変換素子141にてどの間隔のパルスが照射されているかを識別できる。従って、二段ボタン151の操作情報をスクリーン14′側で認識し、スクリーン14′に設けた情報送出部から放送受信装置30′に操作情報を送出することもできる。また、放送受信装置30′が電源OFFのときにスクリーン14′に向けてポイント光を出射すると光電変換素子141がこれを感受してその情報を放送受信装置30′に送出することで当該装置30′が電源ONとなり、電源ON中の画面に電源OFFボタンを表示し、これに対する位置指示がなされて選択の実行が行われたときに、電源OFFすることとしてもよい。すなわち、レーザポインタ15B側で放送受信装置30′に対する情報送出部を備えないで済む構成とすることも可能となる。
For example, the first interval pulse light may be emitted by temporarily pressing the two-
一方、レーザポインタ15Bに設けた情報送出部にてスクリーン14′側に情報送出を行い、スクリーン14′側から放送受信装置30′に受信情報やこの情報に基づく命令を転送するようにしてもよい。
On the other hand, information may be sent to the screen 14 'side by an information sending unit provided in the
また、プロジェクタでは光源出射光の紫外線や赤外線をカットすることが多い。レーザポインタ15Bが赤外線も照射することとし、スクリーン14′が赤外線透過に優れており、光電変換素子141が赤外線に対して高感度とすると、位置検出の精度が高まる。
Further, projectors often cut off ultraviolet rays and infrared rays emitted from a light source. If the
位置指定にて各種操作(電源ON/OFF、音量アップダウン、チャンネルアップダウン等)を行わせるために、音声認識を用いてもよいが、放送受信装置30′の投影画面にツールバーを表示させるようにしておいてもよい。ユーザはツールバーのなかの「チャンネルアップ」の表示箇所に位置指定を行い、選択の実行を行わせることで、放送受信装置30(30′)においてチャンネルアップさせることができる。 Voice recognition may be used to perform various operations (power ON / OFF, volume up / down, channel up / down, etc.) by position designation, but a tool bar is displayed on the projection screen of the broadcast receiver 30 '. You may leave it. The user can make the channel up in the broadcast receiving apparatus 30 (30 ′) by specifying the position at the “channel up” display location in the tool bar and executing the selection.
ところで、子供(特に幼児)による操作や不特定者による操作を制限することが望ましいことがある。制限は、操作制限(ディジタルカメラ15、レーザーポインタ15B、放送受信装置におけるON操作制限、操作できる内容の制限)、或いは、放送受信装置における制限であれば番組や電子プログラムの視聴制限などがある。特に、前述したレーザーポインタ15Bにおいては、不用意に光線が出射されないことが望ましく、大人や特定者の操作時のみ光線が出射されることとするのがよい。
By the way, it may be desirable to restrict operations by children (particularly infants) and operations by unspecified persons. The restrictions include operation restrictions (
[操作者の特定]
操作者の特定は、音声認識により、予め登録した声の主かどうかを判定する技術(話者識別技術)を用いればよい。例えば、操作者は「オン」という言葉を予め登録しておき、コントローラ(ディジタルカメラ15、携帯電話15A、レーザーポインタ15B)に対して「オン」と声を発して話者識別を行わせ、登録者であると判断したときに、コントローラ起動が行われるようにすればよい。また、音声に含まれる周波数成分(声の高低等)を分析することで、音声の主が子供か大人かの推定が可能となる。勿論、音声以外の生体情報、例えば、網膜パターンや指紋を用いた認識処理によって特定者を判定することとしてもよい。
[Specify operator]
The operator may be identified by a technique (speaker identification technique) for determining whether or not the voice is registered in advance by voice recognition. For example, the operator registers the word “ON” in advance, and speaks “ON” to the controller (
[視聴制限]
例えば、番組情報に含まれるパレンタルレベルと予めユーザ側で設定したパレンタルレベルにより、所定の番組についての視聴が制限され、その制限解除のためにはパスワードの入力が必要となるが、前述のごとく、特定者や大人であるとの判断がなされたときには、パレンタルレベルに関係なく全て視聴できることとし、不特定者や子供であるとの判断がなされたときに、パレンタルレベルにて視聴制限がかかるようにしてもよい。なお、R指定の情報を用いても同様の処理が可能である。
[Viewing restrictions]
For example, depending on the parental level included in the program information and the parental level set in advance by the user, viewing of a predetermined program is restricted, and a password must be input to cancel the restriction. As such, when it is determined that the person is a specific person or an adult, all the contents can be viewed regardless of the parental level, and when it is determined that the person is an unspecified person or a child, viewing is restricted at the parental level. May be used. Note that the same processing can be performed using R designation information.
ユーザが予め設定したキーワードに基づいて制限を行うこともできる。例えばユーザ設定キーワードと各番組の番組情報に含まれる文言との一致/類似を判定し、その文言を含んでいる番組の視聴制限や電子プログラムガイドでの表示制限を行うこととしてもよい。キーワードの他、ジャンル、番組名、出演者の情報によって制限を行わせることもできる。 The restriction can also be performed based on a keyword preset by the user. For example, the match / similarity between the user-set keyword and the wording included in the program information of each program may be determined, and viewing restriction of the program containing the wording or display restriction in the electronic program guide may be performed. In addition to keywords, restrictions may be imposed by genre, program name, and performer information.
[操作制限]
操作制限としては、起動しない、起動しても操作を受け付けない、エラーメッセージを出力するといったことがあげられる。また、操作できる内容の制限としては、有料放送のプレビューの指示を受け付けない、有料番組の購入指示を受け付けない、チャンネル設定処理や色調整処理の指令を受け付けない、などがあげられる。
[Operation restriction]
Operation restrictions include not being activated, not accepting an operation even when activated, and outputting an error message. Further, the contents that can be operated include, for example, not accepting a pay broadcast preview instruction, not accepting a pay program purchase instruction, and not accepting a channel setting process or color adjustment process instruction.
なお、上記の例では制御対象機器が放送受信装置である場合を示したが、これに限るものではない。また、情報送受は有線で行ってもよい。前記情報送受は有線・無線LANのネットワークを用いてもよい。音声認識や音声合成を制御対象機器側で行ってもよく、更に、その音声出力については、ディジタルカメラ15等の指示装置側で生成した音声合成データを制御対象機器に送出し、この制御対象機器のスピーカから出力するようにしてもよいし、その逆に、制御対象機器側で生成した音声合成データを指示装置側に送出し、この指示装置側のスピーカから出力するようにしてもよい。
In the above example, the case where the device to be controlled is a broadcast receiving device is shown, but the present invention is not limited to this. Information transmission / reception may be performed by wire. The information transmission / reception may use a wired / wireless LAN network. Voice recognition or voice synthesis may be performed on the control target device side. Further, for voice output, voice synthesis data generated on the pointing device side such as the
15 ディジタルカメラ
15a CPU
15c 情報送受部
15d 表示部
15e ディジタルカメラ機能部
15f 音声認識部
15g 音声生成部
15A 携帯電話
15B レーザーポインタ
30 ディジタル放送受信装置
15
15c Information transmission /
Claims (29)
有する遠隔操作システム。 Position detection means for detecting an instruction position or an instruction area on a display screen specified by a remote instruction operation; and a selection control means for executing selection in the instruction position or the instruction area based on a remote selection operation.
Having remote operation system.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003368004A JP2005136519A (en) | 2003-10-28 | 2003-10-28 | Remote control system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003368004A JP2005136519A (en) | 2003-10-28 | 2003-10-28 | Remote control system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2005136519A true JP2005136519A (en) | 2005-05-26 |
Family
ID=34645839
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003368004A Withdrawn JP2005136519A (en) | 2003-10-28 | 2003-10-28 | Remote control system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2005136519A (en) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007020079A (en) * | 2005-07-11 | 2007-01-25 | Funai Electric Co Ltd | Television set |
JP2008301150A (en) * | 2007-05-31 | 2008-12-11 | Sharp Corp | Image display apparatus and method |
JP2014102517A (en) * | 2014-01-20 | 2014-06-05 | Nikon Corp | Electronic apparatus |
JP2015194864A (en) * | 2014-03-31 | 2015-11-05 | Kddi株式会社 | Remote operation method, system, user terminal, and viewing terminal |
JP2015537417A (en) * | 2012-10-22 | 2015-12-24 | ムン キ イ, | Video processing device using difference camera |
JP7440975B2 (en) | 2018-07-17 | 2024-02-29 | 株式会社Synapse Gear | Imaging device and identification method |
-
2003
- 2003-10-28 JP JP2003368004A patent/JP2005136519A/en not_active Withdrawn
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007020079A (en) * | 2005-07-11 | 2007-01-25 | Funai Electric Co Ltd | Television set |
JP2008301150A (en) * | 2007-05-31 | 2008-12-11 | Sharp Corp | Image display apparatus and method |
JP2015537417A (en) * | 2012-10-22 | 2015-12-24 | ムン キ イ, | Video processing device using difference camera |
JP2014102517A (en) * | 2014-01-20 | 2014-06-05 | Nikon Corp | Electronic apparatus |
JP2015194864A (en) * | 2014-03-31 | 2015-11-05 | Kddi株式会社 | Remote operation method, system, user terminal, and viewing terminal |
JP7440975B2 (en) | 2018-07-17 | 2024-02-29 | 株式会社Synapse Gear | Imaging device and identification method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4796209B1 (en) | Display device, control device, television receiver, display device control method, program, and recording medium | |
JP4697279B2 (en) | Image display device and detection method | |
JP2005136518A (en) | Remote operation system | |
KR20120051209A (en) | Method for providing display image in multimedia device and thereof | |
TW200412038A (en) | A remote control with the fingerprint recognition capability | |
JP4844614B2 (en) | Information processing apparatus, information processing method, and computer program | |
KR101772456B1 (en) | Multimedia device, multiple image sensors having different types and the method for controlling the same | |
JP4756980B2 (en) | Television receiver | |
KR20120051211A (en) | Method for recognizing user gesture in multimedia device and multimedia device thereof | |
KR20130076977A (en) | Broadcasting receiver and controlling method thereof | |
WO2011118836A1 (en) | Display apparatus, television receiver, method of controlling display apparatus, remote control device, method of controlling remote control device, control program, and computer readable recording medium with control program stored therein | |
US8156521B2 (en) | Receiver | |
KR101741550B1 (en) | Method and apparatus for providing optimized viewing conditions in multimedia device | |
JP2005136519A (en) | Remote control system | |
JP4933337B2 (en) | Movie shooting device, movie playback device, movie distribution system, control method, control program, and recording medium | |
KR20190017507A (en) | Image display apparatus | |
KR20150008769A (en) | Image display apparatus, and method for operating the same | |
KR101687615B1 (en) | Method for providing telephone service in network tv and the network tv | |
KR101642000B1 (en) | Mobile Terminal, Digital Television and Method Of Controlling DTV | |
JP2008182348A (en) | Receiver | |
KR20210002797A (en) | Display device | |
JP5050113B1 (en) | VIDEO DISPLAY DEVICE, ELECTRONIC DEVICE, VIDEO DISPLAY METHOD | |
KR20120051213A (en) | Method for image photographing of multimedia device and multimedia device thereof | |
JP2010219923A (en) | Reception controller, method of displaying video, and video display/processing program | |
KR20090080638A (en) | System and Method for Processing Broadcast Contents Reference, Internet Protocol Television and Recording Medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050506 |
|
A761 | Written withdrawal of application |
Free format text: JAPANESE INTERMEDIATE CODE: A761 Effective date: 20070730 |