JP5430381B2 - 携帯端末を用いた表示機器操作システム - Google Patents

Description

本発明は、テレビ等の表示機器を携帯端末により操作するための表示機器操作システムに関するものである。

従来、液晶テレビに表示される映像の表示をユーザが操作するためには、専用のリモコンを用いて操作している。そして、近年、１つのリモコンに種々の機能を持たせることによりユーザの使い勝手を良くすることが考えられている。

しかしながら、ボタン数が増加すると、現在の表示を操作するためのボタン（電源ボタン、チャンネルボタン、音量ボタンの他、録画ボタン、巻戻しボタン、早送りボタン、一時停止ボタン、再生ボタン等）を瞬時に見つけ出すことが難しくなり、またその見つけ出す作業が煩雑になり、逆にユーザの使い勝手を阻害する結果となっている。この問題は、特許文献１に示すような、液晶テレビに接続されたＤＶＤレコーダ等の周辺機器も共通のリモコンで操作可能に構成されたものにおいて一層顕著になる。

また、１つのリモコンにおいてボタン数が増加すると、それにともない、ボタンのサイズも小さくなる傾向がある。そうするとユーザにとって操作しにくくなるという問題もある。

なお、近年では、例えば特許文献２や特許文献３に示すように、現実環境にコンピュータを用いて情報を付加提示する技術（拡張現実（ＡＲ）技術）を用いて、通常の可視光による画像表示を妨げることなく、不可視光による画像表示を行うことによって別の情報表示を可能にするものが考えられている。具体的にこれらは、プロジェクタからスクリーン上に投影することによって、可視光による画像表示を行うと共に不可視光により画像表示を行い、目視により可視光による画像を認識するとともに、携帯端末により不可視光による画像を認識するものである。

特開２００９−２２５３９６号公報 特開２００５−６２７４８号公報 特開２００５−１７９８５号公報

そこで本発明は、上記問題点を一挙に解決すべくなされたものであり、ＡＲ技術を用いた従来にはない全く新しい表示機器の操作システムを提供するものであり、可視光による画像表示を妨げずに、当該可視光による画像表示を操作するためのボタンを携帯端末を介してユーザに提示することができるだけでなく、その携帯端末を用いて可視光による画像表示を操作可能にすることをその主たる所期課題とするものである。

すなわち本発明に係る携帯端末を用いた表示機器操作システムは、可視光による第１画像及び不可視光による第２画像を表示する表示機器と、前記第２の画像を撮像するカメラ及び画面を有する携帯端末とを備え、記第２画像が、前記表示機器による前記第１画像の表示を操作するための操作内容を特定する識別子を示すものであり、前記携帯端末が、前記第２画像を撮像し、その第２画像により示される識別子に基づいて所定のアプリケーションを起動して前記操作内容を画面に表示するとともに、ユーザがその操作内容に基づいて操作すると前記表示機器に操作指令信号を送信するものであり、前記表示機器が、前記第１画像の種類に応じて前記操作内容を判断し、当該操作内容を特定する識別子を示す前記第２画像を表示するものであることを特徴とする。

このようなものであれば、可視光による画像表示を操作するためのボタンを携帯端末を介してユーザに提示することができるだけでなく、その携帯端末を用いて可視光による画像表示を操作可能にすることができる。これにより、操作可能なボタンの識別を極めて簡単に行うことができ、可視光による画像表示の操作性を向上させることができる。また、操作内容を特定する識別子を示す第２画像を不可視光により表示しているので、可視光による画像表示を妨げることもない。

種々の第１画像に合わせて自動的に特有の操作内容を表示できるようにするためには、前記表示機器が、前記第１画像の種類に応じて操作内容を判断し、当該操作内容を特定する識別子を示す第２画像を表示するものであることが望ましい。その他、現在表示されている第１画像の種類をユーザが入力することによって、前記表示機器が、当該画像に合わせた操作内容を特定する識別子を示す第２画像を表示するようにしても良い。

従来の液晶テレビにおけるリモコン信号受信部を兼用可能とするためには、前記操作指令信号が赤外線信号であることが望ましい。

また、本発明に係る表示機器操作方法は、可視光による第１画像及び不可視光による第２画像を表示する表示機器と、前記第２の画像を撮像するカメラ及び画面を有する携帯端末とを用いた表示機器操作方法であって、前記第２画像が、前記表示機器による前記第１画像の表示を操作するための操作内容を特定する識別子を示すものであり、前記携帯端末により前記第２画像を撮像し、その第２画像により示される識別子に基づいて所定のアプリケーションを起動して前記操作内容を画面に表示するとともに、ユーザがその操作内容に基づいて前記携帯端末を操作すると、前記携帯端末が前記表示機器に操作指令信号を送信し、前記表示機器が、前記第１画像の種類に応じて前記操作内容を判断し、当該操作内容を特定する識別子を示す前記第２画像を表示することを特徴とする。

このように構成した本発明によれば、可視光による画像表示を妨げずに、当該可視光による画像表示を操作するためのボタンを携帯端末を介してユーザに提示することができるだけでなく、その携帯端末を用いて可視光による画像表示を操作可能にすることができる。

本発明の表示機器操作システムの一実施形態を示す模式図である。 同実施形態の液晶テレビのバックライトの構成を示す図である。 変形例に係る液晶テレビのバックライトを示す図である。 変形例に係る液晶テレビの模式的断面図を示す図である。 同実施形態の携帯端末の機器構成図である。 同実施形態の携帯端末の機能構成図である。 同実施形態の携帯端末画面の表示内容を示す一例である。 同実施形態の携帯端末画面の表示内容を示す一例である。 変形実施形態に係る携帯端末画面の表示内容を示す図である。

以下に本発明の一実施形態について図面を参照して説明する。

本実施形態に係る表示機器操作システム１００は、可視光による第１画像Ｍ１及び不可視光による第２画像Ｍ２を表示可能な表示機器２と、前記第２画像Ｍ２を撮像可能なカメラ３１及び画面３２を有する携帯端末３とを具備している。

表示機器２は、テレビ放送信号を選択的に受信するチューナと、当該テレビ放送信号が示す映像出力を行う液晶パネルを有する液晶パネルと、当該液晶パネルに光を照射するバックライトと、これら各部を制御等する制御部とを備える液晶テレビである。なお、表示機器２は液晶テレビに限られず、その他のディスプレイ装置を用いて構成しても良い。

そして、液晶テレビ２は、可視光による第１画像Ｍ１及び不可視光による第２画像Ｍ２を表示可能に構成されている。不可視光とは、不可視である波長帯域の光であり、本実施形態では赤外線である。

また、液晶テレビ２の制御部は、現在表示している第１画像Ｍ１の種類に応じて表示の操作内容を判断して、当該操作内容を特定する識別子を示す第２画像Ｍ２を画面上に表示させる。本実施形態の第２画像Ｍ２は、二次元バーコードである。なお、識別子を示す第２画像Ｍ２は、後述するアプリケーションデータと対応付けられて予め制御部内に入力されている。

なお、バックライトが直下型方式のものであれば、図２に示すように、赤色ＬＥＤ（Ｒ）、緑色ＬＥＤ（Ｇ）及び青色ＬＥＤ（Ｂ）の他、赤外線ＬＥＤ（Ｉｒ）を液晶パネルの裏面に均一に配置して構成される。また、バックライトがエッジライト方式のものであれば、図３に示すように、赤色ＬＥＤ（Ｒ）、緑色ＬＥＤ（Ｇ）及び青色ＬＥＤ（Ｂ）の他、赤外線ＬＥＤ（Ｉｒ）を線上に均一に配置し、それらＬＥＤからの光を導光板により面状の光に変換して液晶パネルに照射する。また、このとき、図４に示すように、液晶パネルの前面に設けられるカラーフィルタには、赤色フィルタ部、緑色フィルタ部、青色フィルタ部の他、赤外線フィルタ部を均一に配置している。

携帯端末３は、図６にその機器構成の一例を示すように、少なくとも、指などの接触による操作が可能なタッチパネル式の画面３２と、不可視光（赤外線）による第２画像Ｍ２を撮像可能な例えばＣＣＤ又はＣＭＯＳ等の撮像素子を有するカメラ３１と、赤外線送信を行う信号送信部３３とを備えるものである。なお、このカメラ３１は、通常使用時において可視光による画像Ｍ１を撮像可能とし、表示機器２の操作開始時において不可視光による画像Ｍ２のみを撮像可能とするように切り替え可能に構成している。また、切り替えることなく、両方の画像を取得できるように構成しても良い。

そして、携帯端末３は、メモリに格納されたプログラムによりＣＰＵ及びその他の周辺機器が協働することによって、アプリケーション格納部３ａ、アプリケーション取得部３ｂ、アプリケーション起動部３ｃ等の機能を発揮する制御部３４を備えている。

アプリケーション格納部３ａは、液晶テレビ２に表示される第１画像Ｍ１の表示を携帯端末３により操作可能にするためのアプリケーションデータを格納するものである。

具体的なアプリケーションとしては、液晶テレビ２がテレビ放送信号を受信して、当該テレビ放送を表示している場合には、図７に示すように、当該テレビ放送の表示を操作するためのボタン機能（電源ボタンＰ１１、チャンネル切替ボタンＰ１２、音量調節ボタンＰ１３等）を携帯端末３に付加するものである。

また、液晶テレビ２がＤＶＤレコーダ等の映像再生装置（不図示）に接続され、当該映像再生装置から録画した番組等の映像データを取得して再生している場合には、図８に示すように、当該映像の表示を操作するためのボタン機能（電源ボタンＰ２１、巻戻しボタンＰ２２、早送りボタンＰ２３、一時停止ボタンＰ２４、停止ボタンＰ２５、再生ボタンＰ２６等）を携帯端末３に付加するものである。これらのアプリケーションデータは予めアプリケーション格納部３ａに格納されていている。なお、後述するアプリケーション取得部３ｂが解析した識別子に基づいてインターネットを介してアプリケーションデータを取得できるようにしても良い。

アプリケーション取得部３ｂは、前記カメラ３１により得られた画像（第２画像Ｍ２）を示す画像データを取得して、当該第２画像Ｍ２を解析（デコード）して識別子を認識するものである。そして、アプリケーション取得部３ｂは、解析した結果得られた識別子に結び付けられたアプリケーションデータをアプリケーション格納部３ａから取得して、アプリケーション起動部３ｃに出力する。

アプリケーション起動部３ｃは、アプリケーション取得部３ｂにより得られたアプリケーションデータを起動して、タッチパネル式の画面３２に、第１画像Ｍ１の画像表示を操作するための操作ボタンを表示する。前述のとおり、液晶テレビ２がテレビ放送を表示している場合には、図７に示すように、当該テレビ放送の表示を操作するために必要なボタン（電源ボタンＰ１１、チャンネル切替ボタンＰ１２、音量調節ボタンＰ１３等）のみをタッチパネル式画面３２に表示する。そして、アプリケーション起動部３ｃは、ユーザが当該タッチパネル画面３２に表示されたボタンを押下することによって生じる操作信号を取得して、信号送信部３３に出力する。

そして、操作信号を受信した信号送信部３３は、当該操作信号に対応する液晶テレビ２の操作指令信号を赤外線送信する。この操作指令信号は、液晶テレビ２の信号受信部により受信される。その後、操作指令信号を受信した液晶テレビ２は、当該操作指令信号に基づいて画面表示等を制御する。

＜本実施形態の効果＞
このように構成した本実施形態に係る表示機器操作システム１００によれば、可視光による画像表示を操作するために必要なボタンのみを携帯端末３を介してユーザに提示することができるだけでなく、その携帯端末３を用いて可視光による画像表示Ｍ１を操作可能にすることができる。これにより、操作可能なボタンの識別を極めて簡単に行うことができ、可視光による画像表示の操作性を向上させることができる。また、操作内容を特定する識別子を示す第２画像Ｍ２を不可視光により表示しているので、可視光による画像表示を妨げることもない。

＜その他の変形実施形態＞
なお、本発明は前記実施形態に限られるものではない。

例えば、前記実施形態において第２画像に対応付けられた所定のアプリケーションを起動して携帯端末画面に操作ボタンを表示する期間は、携帯端末のカメラが第２画像を撮像している最中のみとしても良い。また、携帯端末のカメラにより第２画像を撮像してから、ユーザが所定のアプリケーションを終了するための終了ボタンを押下するまでの間であっても良い。また、携帯端末の姿勢をセンサにより認識して所定のアプリケーションの終了を判断するようにしても良い。このとき、例えば携帯端末のカメラが液晶テレビの画面を向いていない姿勢（具体的には携帯端末が水平姿勢である等）となった場合に所定のアプリケーションを終了することが考えられる。

また、前記実施形態では、表示機器の操作機能を携帯端末に持たせる態様について説明したが、その他、可視光である第１画像と当該第１画像に関連付けられた不可視光により第２画像を表示して、当該第２画像を携帯端末を介して視認可能に構成しても良い。例えば図９（Ａ）に示すように、液晶テレビがデジタル放送を受信している場合には、受信中の番組に関する情報（ＥＰＧ情報）を携帯端末に表示するように構成しても良い。このとき、裏番組のＥＧＰ情報又は現在録画予約中の番組に関する情報を表示しても良い。

さらに、第１画像として表示されている番組又はＣＭに関する付加情報がＷｅｂに存在する場合には、当該ＷｅｂのＵＲＬを第２画像として表示するようにしても良い。このとき、第２画像としてＵＲＬを撮像した携帯端末は、図９（Ｂ）に示すように、当該ＵＲＬを携帯端末画面上に表示すると共に、当該ＵＲＬを選択（タッチパネル式の場合には接触）した場合には、そのＵＲＬのＷｅｂページを表示する。

その上、情報番組や通信販売等の番組であれば、図９（Ｃ）に示すように、紹介した商品の情報やその注文のための電話番号を携帯端末に表示するように構成しても良い。

さらにその上、図９（Ｄ）に示すように、スクリプト言語等によって記述された携帯端末のバグ修正パッチやゲーム等のアプリケーションを携帯端末上で実行できるように構成しても良い。

加えて前記不可視光としては、赤外線の他、電波、紫外線、エックス線又はガンマ線を用いても良い。

その他、本発明は前記実施形態に限られず、その趣旨を逸脱しない範囲で種々の変形が可能であるのは言うまでもない。

１００・・・表示機器操作システム
２ ・・・表示機器（液晶テレビ）
Ｍ１ ・・・第１画像
Ｍ２ ・・・第２画像
３ ・・・携帯端末
３１ ・・・カメラ
３２ ・・・画面

Claims (4)

1. 可視光による第１画像及び不可視光による第２画像を表示する表示機器と、
   前記第２の画像を撮像するカメラ及び画面を有する携帯端末とを備え、
   記第２画像が、前記表示機器による前記第１画像の表示を操作するための操作内容を特定する識別子を示すものであり、
   前記携帯端末が、前記第２画像を撮像し、その第２画像により示される識別子に基づいて所定のアプリケーションを起動して前記操作内容を画面に表示するとともに、ユーザがその操作内容に基づいて操作すると前記表示機器に操作指令信号を送信するものであり、
   前記表示機器が、前記第１画像の種類に応じて前記操作内容を判断し、当該操作内容を特定する識別子を示す前記第２画像を表示するものである、携帯端末を用いた表示機器操作システム。
2. 前記操作指令信号が赤外線信号である請求項１記載の携帯端末を用いた表示機器操作システム。
3. 前記携帯端末の画面がタッチパネル式のものである請求項１又は２記載の携帯端末を用いた表示機器操作システム。
4. 可視光による第１画像及び不可視光による第２画像を表示する表示機器と、前記第２の画像を撮像するカメラ及び画面を有する携帯端末とを用いた表示機器操作方法であって、
   前記第２画像が、前記表示機器による前記第１画像の表示を操作するための操作内容を特定する識別子を示すものであり、
   前記携帯端末により前記第２画像を撮像し、その第２画像により示される識別子に基づいて所定のアプリケーションを起動して前記操作内容を画面に表示するとともに、ユーザがその操作内容に基づいて前記携帯端末を操作すると、前記携帯端末が前記表示機器に操作指令信号を送信し、
   前記表示機器が、前記第１画像の種類に応じて前記操作内容を判断し、当該操作内容を特定する識別子を示す前記第２画像を表示する表示機器操作方法。