JP2011134282A - 情報処理装置及び情報処理方法 - Google Patents

Abstract

【課題】マルチ画面に対して、容易しかも素早く各画面を操作（チャンネル切り替え、入力切替、メインーサブ画面切り替え等）可能とする。
【解決手段】本発明の一実施例に係る情報処理装置は、指との接触部位置を検知するタッチ入力部１００と、移動する前記接触部の軌跡を記憶する記憶部３００と、前記軌跡に対応するコマンドを判定する判定部３２０と、前記タッチ入力部１００に接触している指の種類を判断する判断部２１０と、各指に対応して、分割された画面中の各画面が設定された指／画面データベース４１０と、前記判断部にて判断された指の種類に対応する画面を、前記データベースを検索して決定する決定部４００と、前記分割された画面中の各画面の表示を、入力制御信号に応じて制御する制御部１５と、前記判定部２１０にて判定されたコマンドに、前記決定部４００にて決定された画面の情報を付加して前記制御信号として前記制御部１５に送信する送信部５００とを具備する。
【選択図】図２

Description

本発明は、マルチ画面を表示可能なテレビ受信機等の情報処理装置に関する。

近年、大型のテレビ受信機等では、マルチ画面方式を採用するものが普及している。このマルチ画面方式は、テレビの画面を例えば２つに分割し、２つの分割画面に異なる放送チャンネルの番組を表示することが可能である。各分割画面に表示される番組のチャンネルは、リモコンなどにより個別に設定できる。テレビが地上デジタルチューナ、ＢＳデジタルチューナあるいはＣＳデジタルチューナ等を内蔵し、更に外部ＨＤＤレコーダ等が接続されている場合には、分割画面にそれぞれの機器からの映像を任意に設定して表示可能である。

例えば２分割画面の一方の画面に表示されている番組の音声は、テレビのスピーカから発生され、他方の画面に表示されている番組の音声は例えばイヤホンで聴くことができるので、二人又はそれ以上の視聴者が１台のテレビでそれぞれ別の番組を視聴することが可能である。また他の利用方法として、マルチ画面方式のテレビは、スピーカから音声が発生される主映像と、音声が発生されない裏番組の副映像を設定でき、主映像と副映像は互いに切り替えることが容易であるから、裏番組における見たい場面を見逃さずに視聴できる。

テレビをマルチ画面に設定しマルチ画面を操作する場合、操作したい画面を最初に選択し、それからチャンネル切り替え等の様々な画面操作が行われる。画面操作を行う場合に、タッチパネルを用いるものがある。タッチパネルは、駅の自動券売機、銀行のＡＴＭ等、入力装置として様々な機器に利用されている（例えば特許文献１参照）。

特開２００８−１２３０３２号公報

前述したように、テレビのマルチ画面を操作する場合、操作したい画面を最初に選択し、それからチャンネル切り替え等の様々な画面操作が行われる。しかし、この手順だと、操作が煩雑であるという欠点がある。

上記特許文献１では、操作者の指又は指の組み合わせに関連付けてコマンドが登録される。タッチパネルへの指の接触が、操作者の何れの指の接触であるか判定される。この判定結果に基づいて、登録したコマンドのうち１つが選択され、コマンドに対応する処理が実行される。

このように特許文献１では、操作者はどの指にどのコマンドが設定されているか覚えていなければならない。従って、特許文献１のような従来技術をテレビのマルチ画面の操作に応用しても、操作の簡略化あるいは容易性の向上は実現できない。

従って本発明は、マルチ画面に対して、容易しかも素早く各画面を操作（チャンネル切り替え、入力切替、メインーサブ画面切り替え等）可能とすることを目的とする。

本発明の一実施例では、ユーザーの各指に対応する各画面との関連が登録され、タッチ入力装置に接触している指のモーション（移動軌跡）及び指の種類に応じて、画面及びコマンドが決定され、マルチ画面が操作される。

すなわち本発明の一実施例に係る情報処理装置は、指との接触部位置を検知するタッチ入力部１００と、移動する前記接触部の軌跡を記憶する記憶部３００と、前記軌跡に対応するコマンドを判定する判定部３２０と、前記タッチ入力部１００に接触している指の種類を判断する判断部２１０と、各指に対応して、分割された画面中の各画面が設定された指／画面データベース４１０と、前記判断部にて判断された指の種類に対応する画面を、前記データベースを検索して決定する決定部４００と、前記分割された画面中の各画面の表示を、入力制御信号に応じて制御する制御部１５と、前記判定部２１０にて判定されたコマンドに、前記決定部４００にて決定された画面の情報を付加して前記制御信号として前記制御部１５に送信する送信部５００とを具備する。

マルチ画面に対して、容易しかも素早く各画面を操作（チャンネル切り替え、入力切替、メインーサブ画面切り替え等）することが可能となる。

本発明が適用される情報処理装置の一例として、デジタル放送テレビを示すブロック図である。 図１の画面操作部及びリモコンの詳細を示すブロック図である。 指／画面対応データベースの格納内容の詳細を示す図である。 テレビのマルチ画面の一例を示す図である。 テレビのマルチ画面の他の例を示す図である。 選択された画面の枠が太く表示されるマルチ画面の例を示す図である。 本発明に係る画面操作処理の具体的動作の第１実施例を示す図である。 本発明に係る画面操作処理の具体的動作の第２実施例を示す図である。

以下、本発明に係る情報処理装置の実施例について、図面を参照して説明する。

図１は、本発明が適用される情報処理装置の一例として、デジタル放送テレビ１０を示すブロック図である。

チューナ１３には、アンテナで受信された放送信号がアンテナ入力端子２４を介して受信される。チューナ１３は、受信した放送信号から、特定チャンネルの番組データを抽出する。チューナ１３はＢＳデジタル及び地上波デジタル等のデジタル放送をそれぞれ受信可能な複数のデジタルチューナを含んでいる。

ＨＤＭＩ Ｉ／Ｆ１６は、ＨＤＭＩ端子２６に接続されたＨＤＭＩ機器とのインターフェースを行う。ＩＥＥＥ１３９４（ｉＬＩＮＫ） Ｉ／Ｆ１７は、ＩＥＥＥ１３９４端子２７を介して接続されたＩＥＥＥ１３９４機器とのインターフェースを行う。ＬＡＮ ＨＤＤ Ｉ／Ｆ１８は、端子２８を介して接続されたＬＡＮ ＨＤＤ機器とのインターフェースを行う。デコーダ１２は、チューナ１３、各種インターフェース１６〜１８又はＨＤＤ１１から提供される圧縮されたデータをデコード（伸長）する。

信号処理部１５は、デコーダ１２によってデコードされた映像及び音声データを例えばＤ／Ａ変換及び増幅し、映像信号及び音声信号を再生する。モニタ部２３は、端子３０を介して信号処理部１５から提供される映像信号を元に映像を表示し、音声信号を元に音声を出力する。信号処理部１５はマルチ画面モード信号を入力すると、表示部２３ａの画面を分割し、複数の画面に番組映像を表示する。信号処理部１５は又、マルチ画面モードで複数の画面が表示部２３ａに表示されている場合、端子３０及び２８に出力される番組音声を、入力制御信号に応じて任意に設定できる。

切り替え部４０は、外部入力端子２５ａ…２５ｎを介して接続された外部入力機器（アナログ映像機器）の１つをＣＰＵ２１の制御の下に選択し、選択された外部入力機器からのアナログ信号を信号処理部１５に供給する。信号処理部１５は、入力される外部入力機器からのアナログ信号に対して増幅及びフィルタリング等の信号処理を施し、処理された信号をモニタ部２３に提供する。外部入力機器からのアナログ信号を記録する場合、該アナログ信号は例えば信号処理部１５にてＡ／Ｄ変換され、エンコーダ１４によりエンコード（圧縮）された後、ＨＤＤ１１に記録される。又、ＨＤＤ１１は、各種インターフェース１６〜１８から提供されるエンコードされた映像及び音声データを記録する。

操作部２２はユーザインターフェースであり、ユーザから各種入力操作を受けつけるための様々なボタン、及びリモコン３２から送信された信号を受信する受信部２２ａを有している。ユーザは操作部２２又はリモコン３２を用いて、テレビ１０を操作できる。

メモリ２０は各種制御プログラムを格納するＲＯＭ及びＣＰＵ２１の作業エリアとして使用されるＲＡＭを含む。ＣＰＵ１５は、操作部２２を介してユーザから入力された指示に従って、メモリ２０に記録されている制御プログラムを実行する。

画面操作部１９は、リモコン３２のタッチ入力部１００から操作部２２を介して入力されるユーザのタッチ入力信号を受信し、本発明の一実施例に係るマルチ画面操作を実行する。尚、画面操作部１９は、ＣＰＵ２１が実行するプログラムとして、メモリ２０に格納されても良い。

次に、本発明の一実施例に係る画面操作部１９の画面操作処理について説明する。

図２は、画面操作部１９及びリモコン３２の詳細を示すブロック図である。

ユーザの指がタッチ入力部１００（タッチパッド、タッチパネル、タッチスクリーン等）に接触した情報は、指位置判定部２００と接触指判定部２１０へ送られる。指位置判定部２００は、指がタッチ入力部１００のどの場所と接触しているか判定する。指の接触位置が移動した軌跡を、指モーション記憶部３００が保存する。モーション・コマンドデータベース３１０には、各モーションと対応するコマンドの一覧が格納されている。例えば、チャンネルを変えたい場合は、指を上下に動かす、入力を切り替える場合は、左右に動かす、といったモーションが考えられる。モーション・コマンドデータベース３１０と、指モーション記憶部３００の情報に基づいて、コマンド判定部３２０は、モーションに対応したコマンドを決定する。接触指判定部２１０は、どの指が接触しているのかを判定し、指の種類（一指し指、中指等）を示す信号を提供する。指／画面対応データベース４１０には、各指と対応する画面の一覧が格納されている。画面決定部４００は、接触指判定部２１０からの指の種類を示す信号と、指／画面対応データベース４１０に基づいて、どの画面に対してコマンドを送信するかを決める。指／画面対応情報登録部４２０は、どの指をどの画面に対応付けるかを登録する機能を有する。指／画面対応データベース４１０には、デフォルト値が予め格納されているが、リモコン３２からの信号に基づいて、指／画面対応情報登録部４２により、指／画面の対応を変更できる。

コマンド送信部５００は、決定されたコマンドに画面情報を付加したコマンドを信号処理部１５へ送る。信号処理部１５は、画面情報付きコマンドを受けて、各画面をコントロールする。

図３は、指／画面対応データベース４１０の格納内容の詳細を示す図である。各指と対応する画面とが組になって格納されている。この格納内容は前述したように、指／画面対応情報登録部４２０を介して、ユーザーが変更できる。

図４は、テレビのマルチ画面の例である。このマルチ画面の分割レイアウトは、図３の指／画面対応データベースの「対応する画面」の情報と一致する。このマルチ画面には、例えば地上デジタル放送及びＢＳデジタル放送のそれぞれ１以上の番組映像及び（又は）装置に接続された映像機器からの映像を、リモコン３２からの指示に応じて任意に表示できる。

図５は、テレビのマルチ画面の他の例である。例えば、サブ画面の画面Ｂに表示されている番組と、メイン画面の画面Ａに表示されている番組を入れ替えたいとする。各指には、各画面が対応付けされているので、画面Ｂに対応する指（図３の指／画面対応データベース例では中指）をタッチ入力部１００で回すと、サブ画面の画面Ｂとメイン画面の画面Ａの表示番組が入れ替わる。すなわちメインとサブが入れ替わる。回す動作は一例であり、他の動作をモーションコマンドデータベース３１０に登録しても良い。

図６に示すマルチ画面は、指に対応した画面が選択された際、当該画面の周りの枠が太く表示される事により、その画面が選択された事をユーザーに分かりやすく示す。

次に、本発明に係る画面操作処理の具体的動作の第１実施例を、図７のフローチャートを参照して説明する。

ユーザからリモコン３２を介して分割指示を受信すると、信号処理部１５は表示部２３ａの画面を図４又は図５のように分割する。リモコン３２の接触指判定部２１０は、タッチ入力部１００に指が接触したかどうかを判定し（Ｓ１０１、Ｓ１０２）、指がタッチ入力部１００に接触した場合、接触している指が何指か判定する（Ｓ１０３）。この指判定は、例えば予め登録しておいたユーザの各指の指紋情報と、現在タッチ入力部１００に接触している指の指紋とのパターンマッチングにより行われる。判定した指の情報（接触指情報）は、画像判定部４００に送られる。

画像判定部４００は、接触指情報を使って指／画面対応データベース４１０をサーチし（Ｓ１０４）、操作対象になる画面を判定する（Ｓ１０５）。

以上の画面判定（Ｓ１０３〜Ｓ１０５）と並行して、指位置判定部２００はタッチ入力部１００に接触している指の接触位置を判定し、判定結果を指／モーション記憶部３００に送る（Ｓ１０６）。指／モーション記憶部３００は、受信した接触位置を逐次記憶することにより、指接触部のモーション（移動軌跡）を決定する（Ｓ１０７）。コマンド判定部３２０は、決定されたモーションを使用して、モーション・コマンドデータベースをサーチし、モーションに対応するコマンドを判定する（Ｓ１０８）。

コマンド送信部５００は、コマンド判定部３２０からのコマンドに、画面決定部４００からの画面情報を付加したコマンド情報を作成し、信号処理部１５に送信する。信号処理部１５は、受信したコマンド情報に基づいて、表示部２３ａに表示されている複数の画面における特定画面について、チャンネル切換等のコマンドに対応する処理を実行する。

次に、本発明に係る画面操作処理の具体的動作の第２実施例を、図８のフローチャートを参照して説明する。上記第１実施例では、接触指判定部２１０の接触指判定処理と、指位置判定部２００の指位置判定処理は並行して（同時に）行われた。しかし第２実施例では接触指判定処理に基づいて操作対象画面が決定された後、指位置判定処理が行われる。以下第２実施例を図４又は図５のように、画面を４分割したマルチ画面の操作について詳細に説明する。分割数は２以上であって、ユーザが任意に選択できる。

ユーザからリモコン３２を介して分割指示を受信すると、信号処理部１５は表示部２３ａの画面を図４又は図５のように分割する。リモコン３２の接触指判定部２１０は、複数の指が接触したことを検知し、次に複数の指から操作する指以外が離れると、接触したまま残っている指が接触している指と判定する。このとき意図せずに指が離れてしまう場合も考慮して、指が離れてから一定時間経過した後に離れたと判定するようにしても良い。例えば接触指判定部２１０は図８のように、タッチ入力部１００に画面数に対応する４本の指が接触したかどうかを判定する（Ｓ２０１、Ｓ２０２）。４本の指がタッチ入力部１００に接触した場合、接触指判定部２１０は４つの指接触部の位置を記憶すると共に指操作モードとなる。この指操作モードで接触指判定部２１０は、一定時間１本のみの指が接触しているか判定する（Ｓ２０３、Ｓ２０４）。

一定時間１本の指が接触しているならば（Ｓ２０４のＹｅｓ）、接触指判定部２１０は、接触している指を判定する（Ｓ２０５）。この指判定は、上記Ｓ２０２で記憶した４本の指の接触位置と、現在の指接触位置の相対に基づいて行われる。例えば、４本の指の接触位置のうち右から２番目が現在もタッチ入力部１００に接触している場合、接触指判定部２１０は接触している指を中指と判定する。判定した指の情報（接触指情報）は、画像判定部４００に送られる。尚、この指を離すとき、操作する指も他の指と一緒に離れた場合でも、直ぐに指を戻して接触させれば、その指が操作に使用する指だと判定される。

画面決定部４００は、接触指情報を使って指／画面対応データベース４１０をサーチし（Ｓ２０６）、操作対象になる画面を判定する（Ｓ２０７）。

次に、指位置判定部２００はタッチ入力部１００に接触している指の接触位置を判定し、判定結果を指／モーション記憶部３００に送る（Ｓ２０８）。このとき、タッチ入力部１００に接触している指の種類はいかなるものであっても良い。

指／モーション記憶部３００は、受信した接触位置を逐次記憶することにより、指接触部のモーションを決定する（Ｓ２０９）。コマンド判定部３２０は、決定されたモーションを使用して、モーション・コマンドデータベースをサーチし、モーションに対応するコマンドを判定する（Ｓ２１０）。

コマンド送信部５００は、コマンド判定部３２０からのコマンドに、画面決定部４００からの画面情報を付加したコマンド情報を作成し、信号処理部１５に送信する。信号処理部１５は、受信したコマンド情報に基づいて、表示画面２３ａに表示されている複数の画面における特定画面について、チャンネル切換等のコマンドに対応する処理を実行する。

以上の説明はこの発明の実施の形態であって、この発明の装置及び方法を限定するものではなく、様々な変形例を容易に実施することができるものである。例えば、単に各画面に指を振り分けるだけでなく、モーション／指の種類の組み合わせにより、どの画面にどんなコマンドを送るかを決定し、より複雑な操作ができるようにしてもよい。

例えば、複数の指を同時に処理してもよい。つまり第１実施例において、中指と薬指を同時に動かすと、画面ＢとＣを同時に操作できるようにしてもよい。もしくは、画面数が６以上ある場合に、複数の指の組み合わせによって画面の選択をしても良い。例えば第１実施例において、人差し指と中指が同時に接触している場合は、画面６を選択するようにしてもよい。

更に、テレビ側にあるコマンド判定部及び／又は画面決定部に関連する機能ブロックを、リモコン側に移しても良い。逆に、リモコン側にある指位置判定部及び／又は接触指判定部をテレビ側に移してもよい。

［効果］
従来の、画面を指定してから、その画面に対して操作（チャンネル切り替え、入力切替、メインーサブ画面切り替え等）するよりも、素早く操作する事ができる。

１１…ハードディスクドライブ、１２…デコーダ、１３…チューナ、１４…エンコーダ、１５…信号処理部、１６…ＨＤＭＩインターフェース、１７…ＩＥＥＥ１３９４インターフェース、１８…ＬＡＮ ＨＤＤインターフェース、１９…画像操作部、２０…メモリ、２１…ＣＰＵ、２２…操作部、３２…リモコン、４０…切替部、１００…タッチ入力部、２００…指位置判定部、２１０…接触指判定部、３００…指モーション記憶部、３１０…モーション・コマンドデータベース、３２０…コマンド判定部、４００…画面決定部、４１０…指／画面対応データベース、４２０…指／画面対応情報登録部、５００…コマンド送信部。

Claims (14)

1. 指との接触部位置を検知するタッチ入力部と、
   移動する前記接触部の軌跡を記憶する記憶部と、
   前記軌跡に対応するコマンドを判定する判定部と、
   前記タッチ入力部に接触している指の種類を判断する判断部と、
   分割された画面中の各画面が、各指に対応して設定された指／画面データベースと、
   前記判断部にて判断された指の種類に対応する画面を、前記データベースを検索して決定する決定部と、
   前記分割された画面中の各画面の表示を、入力制御信号に応じて制御する制御部と、
   前記判定部にて判定されたコマンドに、前記決定部にて決定された画面の情報を付加して前記制御信号として前記制御部に送信する送信部と、
   を具備することを特徴とする情報処理装置。
2. 前記タッチ入力部の接触部位置検知、前記記憶部の軌跡記憶及び前記判定部のコマンド判定は、前記判断部の種類判断及び前記決定部の画面決定とは別に行われることを特徴とする請求項１記載の情報処理装置。
3. 前記判断部の種類判断、前記決定部の画面決定、前記タッチ入力部の接触部位置検知、前記記憶部の軌跡記憶、及び前記判定部のコマンド判定は、この順に行われることを特徴とする請求項１記載の情報処理装置。
4. 前記判断部は、複数の指が接触した事を検知し、この複数の接触部のうち少なくとも１つの接触部以外が離れると、残っている接触部に対応する指を接触している指と判定することを特徴とする請求項３記載の情報処理装置。
5. 前記判断部は、前記分割された画面中の画面数に対応する複数の指接触部が前記タッチ入力部に存在することを検出し、その後、１つの接触部のみを検出した場合、前記複数の接触部における前記１つの接触部の相対位置に基づき、前記１つの接触部に接触している指の種類を判断することを特徴とする請求項３記載の情報処理装置。
6. 前記分割された画面を表示する表示部を更に具備することを特徴とする請求項１〜５のうち１項記載の情報処理装置。
7. 前記判定部は、上下方向の軌跡をチャンネル切換、左右方向の軌跡を装置に接続された映像機器の切換と判定することを特徴とする請求項１〜５のうち１項記載の情報処理装置。
8. 指との接触部位置を検知するタッチ入力部と、前記タッチ入力部に接触している指の種類を判断する判断部とを具備するリモートコントローラから、接触部位置を示す位置情報及び前記指の種類を示す接触指情報を受信する情報処理装置であって、
   前記位置情報に基づいて、移動する前記接触部の軌跡を記憶する記憶部と、
   前記軌跡に対応するコマンドを判定する判定部と、
   分割された画面中の各画面が、各指に対応して設定された指／画面データベースと、
   前記接触指情報を基に前記データベースを検索し、前記指の種類に対応する画面を決定する決定部と、
   前記分割された画面中の各画面の表示を、入力制御信号に応じて制御する制御部と、
   前記判定部にて判定されたコマンドに、前記決定部にて決定された画面の情報を付加して前記制御信号として前記制御部に送信する送信部と、
   を具備することを特徴とする情報処理装置。
9. 前記タッチ入力部の接触部位置検知、前記記憶部の軌跡記憶及び前記判定部のコマンド判定は、前記判断部の種類判断及び前記決定部の画面決定とは別に行われることを特徴とする請求項８記載の情報処理装置。
10. 前記判断部の種類判断、前記決定部の画面決定、前記タッチ入力部の接触部位置検知、前記記憶部の軌跡記憶、及び前記判定部のコマンド判定は、この順に行われることを特徴とする請求項７記載の情報処理装置。
11. 指との接触部位置をタッチパネルにて検知し、
    移動する前記接触部の軌跡を記憶し、
    前記軌跡に対応するコマンドを判定し、
    前記タッチパネルに接触している指の種類を判断し、
    前記判断された指の種類に対応する画面を、分割された画面中の各画面が各指に対応して設定された指／画面データベースを検索して決定し、
    前記判定されたコマンドに前記決定された画面の情報を付加して、制御信号として送信し、
    前記分割された画面中の各画面の表示を、前記制御信号に応じて制御し、
    を具備することを特徴とする情報処理方法。
12. 前記指との接触部位置の検知、前記軌跡の記憶及び前記コマンドの判定は、前記種類の判断及び前記画面の決定とは別に行われることを特徴とする請求項１１記載の情報処理方法。
13. 前記指の種類の判断は、複数の指が接触した事を検知し、この複数の接触部のうち少なくとも１つの接触部以外が離れると、残っている接触部に対応する指を接触している指と判断することを特徴とする請求項１１記載の情報処理方法。
14. 前記判断は、前記分割された画面中の画面数に対応する複数の指接触部が前記タッチ入力部に存在することを検出し、その後、１つの接触部のみを検出した場合、前記複数の接触部における前記１つの接触部の相対位置に基づき、前記１つの接触部に接触している指の種類を判断することを特徴とする請求項１２記載の情報処理方法。

Images