JP5289889B2 - 表示装置、表示装置の制御方法、表示装置を制御するためのプログラム - Google Patents

表示装置、表示装置の制御方法、表示装置を制御するためのプログラム Download PDF

Info

Publication number
JP5289889B2
JP5289889B2 JP2008274607A JP2008274607A JP5289889B2 JP 5289889 B2 JP5289889 B2 JP 5289889B2 JP 2008274607 A JP2008274607 A JP 2008274607A JP 2008274607 A JP2008274607 A JP 2008274607A JP 5289889 B2 JP5289889 B2 JP 5289889B2
Authority
JP
Japan
Prior art keywords
display
image
display area
liquid crystal
crystal panel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008274607A
Other languages
English (en)
Other versions
JP2010102581A (ja
Inventor
真一 北林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2008274607A priority Critical patent/JP5289889B2/ja
Publication of JP2010102581A publication Critical patent/JP2010102581A/ja
Application granted granted Critical
Publication of JP5289889B2 publication Critical patent/JP5289889B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Digital Computer Display Output (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Description

本発明は表示装置の制御に関し、特に、複数の表示領域を有する表示装置の制御に関する。
コンピュータその他の情報処理装置に表示される画像その他のオブジェクトは、マウス、キーボードその他の入力装置を用いて操作される。その操作を容易にするために、他の入力インターフェイスも開示されている。
たとえば、特開平9−160914号公報(特許文献1)は、「カットアンドペースト・コピーアンドペーストのテキストの移動を効率良く行うことができるペン入力装置」を開示している。
また、特開平7−175587号公報(特許文献2)は、「現実の物をマンマシンインタフェースの部品として利用可能とし、手のジェスチャによりモードレスで表示対象物を直感的に操作する」ための技術を開示している([要約]の[課題])。
特開平9−160914号公報 特開平7−175587号公報
しかしながら、複数のタブレット型ディスプレイ装置の場合、たとえば第1の表示領域から第2の表示領域に跨る際、ペンがタブレットから一旦離れる。そのため、第1の表示領域に表示されていた画像その他のオブジェクトを第2の表示領域に表示させることができなかった。
本発明は、上述のような問題点を解決するためになされたものであって、その目的は、表示領域間のオブジェクトの移動を容易に実現できる表示装置を提供することである。他の目的は、オブジェクトの操作に関する利便性が向上する表示装置を提供することである。
他の目的は、表示領域間のオブジェクトの移動を容易に実現できる表示装置の制御方法を提供することである。他の目的は、オブジェクトの操作に関する利便性が向上する表示装置の制御方法を提供することである。
他の目的は、表示領域間のオブジェクトの移動を容易に実現できる表示装置を制御するためのプログラムを提供することである。他の目的は、オブジェクトの操作に関する利便性が向上する表示装置を制御するためのプログラムを提供することである。
さらに他の目的は、表示領域間のオブジェクトの移動を容易に実現できる表示装置を制御するためのプログラムを格納した記録媒体を提供することである。他の目的は、オブジェクトの操作に関する利便性が向上する表示装置を制御するためのプログラムを格納した記録媒体を提供することである。
ある局面に従う表示装置は、画像を表示するための第1の表示領域を有する第1の表示手段と、画像を表示するための第2の表示領域を有する第2の表示手段と、第1の表示領域に表示されている画像が選択されたことを検知する第1の選択検知手段と、選択された画像を移動するための操作入力に基づいて、選択された画像の表示場所を、第1の表示手段から第2の表示手段に切り換える表示制御手段とを備える。
好ましくは、第1の表示手段は、第1の表示領域に沿って内蔵された複数の光センサを含む。
好ましくは、第2の表示手段は、第2の表示領域に沿って内蔵された複数の光センサを含む。
好ましくは、表示装置は、第2の表示領域において指定された位置の座標値を検出する座標値検出手段をさらに備える。表示制御手段は、第1の表示領域に表示されていた画像を、座標値に基づいて、第2の表示領域において指定された位置に表示する。
好ましくは、表示制御手段は、選択後の出力に基づいて特定される第1の表示領域における軌跡が予め規定されたパターンに対応するか否かを判断し、軌跡が予め規定されたパターンに対応する場合に、画像の表示を第1の表示領域から第2の表示領域に切り換える。
好ましくは、選択後の出力に基づいて特定される第1の表示領域における軌跡の長さが予め定められた長さを上回る場合に、または、選択後の出力に基づいて特定される第1の表示領域における軌跡の始点から終点までの操作入力の速さが定められた速さを上回る場合に、表示制御手段は、第1の表示領域に表示されていた画像を、第2の表示領域において指定された位置に表示する。
好ましくは、選択後の出力に基づいて特定される第1の表示領域における軌跡の長さが予め定められた長さを下回る場合に、または、選択後の出力に基づいて特定される第1の表示領域における軌跡の始点から終点までの操作入力の速さが定められた速さを下回る場合に、表示制御手段は、第1の表示領域に表示されていた画像を、第1の表示領域において軌跡の終点により特定される位置に表示する。
好ましくは、第1の表示領域のうちの周辺領域として予め設定された領域に画像が表示されている場合、表示制御手段は、第1の表示領域における軌跡の検知に応答して、画像を第2の表示領域に表示する。
好ましくは、軌跡の終点を含むベクトルの方向に第2の表示手段が位置している場合に、表示制御手段は、第1の表示領域に表示されていた画像を第2の表示領域に表示する。
他の局面に従うと、表示装置を制御するための方法が提供される。この方法は、第1の表示領域に画像を表示するステップと、画像を移動するための操作入力に基づいて、第1の表示領域に表示された画像が選択されたことを検知するステップと、選択された画像を、第1の表示領域または第1の表示領域と異なる第2の表示領域のいずれの表示領域に表示するかを決定するステップと、第1の表示領域に表示されていた画像を、決定された表示領域に表示するステップとを含む。
他の局面に従うと、表示装置が備えるコンピュータに表示装置を制御させるためのプログラムが提供される。このプログラムは、コンピュータに、第1の表示領域に画像を表示するステップと、画像を移動するための操作入力に基づいて、第1の表示領域に表示された画像が選択されたことを検知するステップと、選択された画像を、第1の表示領域または第1の表示領域と異なる第2の表示領域のいずれの表示領域に表示するかを決定するステップと、第1の表示領域に表示されていた画像を、決定された表示領域に表示するステップとを実行させる。
さらに他の局面に従うと、上記のプログラムを格納したコンピュータ読み取り可能な記録媒体が提供される。
ある局面によると、表示領域間のオブジェクトの移動を容易に実現できる。また、他の局面によると、表示されているオブジェクトの操作に関する利便性が向上する。
以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。また、異なる実施の形態が説明される場合には、その実施の形態に係る構成の説明は、当該実施の形態に固有な構成を除き、繰り返さない。
図1から図13を参照して、本発明の実施の形態に係る表示装置の一態様について説明する。表示装置は、たとえば、電子機器100として実現される。
<電子機器の外観>
図1は、本実施の形態に係る電子機器100の外観を示した図である。図1を参照して、電子機器100は、第1の筐体100Aと第2の筐体100Bとを含む。
第1の筐体100Aと第2の筐体100Bとは、ヒンジ100Cにより折畳み可能に接続されている。第1の筐体100Aは、光センサ内蔵液晶パネル140を備える。第2の筐体100Bは、光センサ内蔵液晶パネル240を備える。このように、電子機器100は、光センサ内蔵液晶パネルを2つ備える。
なお、電子機器100は、PDA(Personal Digital Assistant)、ノート型のパーソナルコンピュータ、携帯型電話機、電子辞書などの表示機能を有する携帯型デバイスとして構成される。
<ハードウェア構成について>
次に、図2を参照して、電子機器100の具体的構成の一態様について説明する。図2は、電子機器100のハードウェア構成を表わすブロック図である。電子機器100は、主たる構成要素として、本体装置101と、表示装置102と、表示装置103とを含む。
第1の筐体100Aは、表示装置102を含む。第2の筐体100Bは、本体装置101と表示装置103とを含む。なお、電子機器100は、第2の筐体100Bの代わりに第1の筐体100Aに本体装置101を含んでもよい。
本体装置101は、CPU(Central Processing Unit)110と、RAM(Random Access Memory)171と、ROM(Read-Only Memory)172と、メモリカードリーダライタ173と、通信部174と、マイク175と、スピーカ176と、操作キー177とを含む。各構成要素は、相互にデータバスDB1によって接続されている。メモリカードリーダライタ173には、メモリカード1731が装着される。
CPU110は、プログラムを実行する。操作キー177は、電子機器100の使用者による指示の入力を受ける。RAM171は、CPU110によるプログラムの実行により生成されたデータ、または操作キー177を介して入力されたデータを揮発的に格納する。ROM172は、データを不揮発的に格納する。また、ROM172は、EPROM(Erasable Programmable Read-Only Memory)やフラッシュメモリなどのデータの書込みおよび消去が可能なROMである。通信部174は、図示しない他の電子機器との間で無線通信を行う。なお、図2には図示していないが、電子機器100が、他の電子機器に有線により接続するためのインターフェイス(IF)を備える構成としてもよい。
表示装置102は、ドライバ130と、光センサ内蔵液晶パネル140(以下、液晶パネル140と称する)と、内部IF178と、バックライト179と、画像処理エンジン180とを含む。
ドライバ130は、液晶パネル140およびバックライト179を駆動するための駆動回路である。ドライバ130に含まれる各種の駆動回路については、後述する。
液晶パネル140は、液晶ディスプレイの機能と光センサの機能とを備えたデバイスである。つまり、液晶パネル140は、液晶を用いた画像の表示と、光センサを用いたセンシングとを行うことができる。液晶パネル140の詳細については、後述する。
内部IF(Interface)178は、本体装置101と表示装置102との間で、データの遣り取りを仲介する。
バックライト179は、液晶パネル140の裏面に配置された光源である。バックライト179は、当該裏面に対して均一な光を照射する。
画像処理エンジン180は、ドライバ130を介して液晶パネル140の動作を制御する。ここで、当該制御は、内部IF178を介して本体装置101から送られてくる各種データに基づいて行われる。なお、当該各種データは、後述するコマンドを含む。また、画像処理エンジン180は、液晶パネル140から出力されるデータを処理し、処理したデータを内部IF178を介して本体装置101に送る。さらに、画像処理エンジン180は、ドライバ制御部181と、タイマ182と、信号処理部183とを含む。
ドライバ制御部181は、ドライバ130に対して制御信号を送ることによりドライバ130の動作を制御する。また、ドライバ制御部181は、本体装置101から送られてくるコマンドを解析する。そして、ドライバ制御部181は、当該解析の結果に基づいた制御信号をドライバ130に送る。ドライバ130の動作の詳細については、後述する。
タイマ182は、時刻情報を生成し、信号処理部183に対して時刻情報を送る。
信号処理部183は、上記光センサから出力されるデータを受け取る。ここで、上記光センサから出力されるデータはアナログデータであるため、信号処理部183は、まず当該アナログデータをデジタルデータに変換する。さらに、信号処理部183は、当該デジタルデータに対して、本体装置101から送られてくるコマンドの内容に応じたデータ処理を行う。そして、信号処理部183は、上記データ処理を行った後のデータと、タイマ182から取得した時刻情報とを含んだデータ(以下、応答データと称する)を本体装置101に送る。また、信号処理部183は、後述するスキャンデータを連続して複数格納できるRAM(図示せず)を備えている。
上記コマンドは、上記光センサによりセンシングを指示するセンシングコマンドを含む。当該センシングコマンドの詳細および上記応答データの詳細については、後述する(図7〜図9)。
なお、タイマ182は、必ずしも画像処理エンジン180に備えられている必要はない。たとえば、タイマ182は、表示装置102内における、画像処理エンジン180の外部に備えられていてもよい。あるいは、タイマ182は、本体装置101に備えられていてもよい。また、マイク175およびスピーカ176は、電子機器100が常に備える構成ではなく、電子機器100の実施例によっては、マイク175およびスピーカ176のいずれかあるいは両方を有さない構成であってもよい。
ここで、表示装置102は、システム液晶を含んでいる。なお、システム液晶とは、液晶パネル140の周辺機器を当該液晶パネル140のガラス基板上に一体形成することにより得られるデバイスである。本実施の形態では、ドライバ130(バックライト179を駆動する回路を除く)と、内部IF178と、画像処理エンジン180とが、液晶パネル140のガラス基板上に一体形成されている。なお、表示装置102が、必ずしもシステム液晶を用いて構成されている必要はなく、ドライバ130(バックライト179を駆動する回路を除く)と、内部IF178と、画像処理エンジン180とが、上記ガラス基板以外の基板に構成されていてもよい。
表示装置103は、ドライバ230と、光センサ内蔵液晶パネル240(以下、「液晶パネル240」と称する)と、内部IF278と、バックライト279と、画像処理エンジン280とを含む。画像処理エンジン280は、ドライバ制御部281と、タイマ282と、信号処理部283とを含む。
表示装置103は、表示装置102と同様な構成を有する。つまり、ドライバ230、液晶パネル240、内部IF278、バックライト279、および画像処理エンジン280は、表示装置102における、ドライバ130、液晶パネル140、内部IF178、バックライト179、画像処理エンジン180と同じ構成をそれぞれ有する。ドライバ制御部281、タイマ282、および信号処理部283は、表示装置102における、ドライバ制御部181、タイマ182、信号処理部183と同じ構成をそれぞれ有する。したがって、表示装置103に含まれる各機能ブロックについての説明は、繰り返さない。
ところで、電子機器100における処理は、各ハードウェアおよびCPU110により実行されるソフトウェアによって実現される。このようなソフトウェアは、ROM172に予め記憶されている場合がある。また、ソフトウェアは、メモリカード1731その他の記憶媒体に格納されて、プログラム製品として流通している場合もある。あるいは、ソフトウェアは、いわゆるインターネットに接続されている情報提供事業者によってダウンロード可能なプログラム製品として提供される場合もある。このようなソフトウェアは、メモリカードリーダライタ173その他の読取装置によりその記憶媒体から読み取られて、あるいは、通信部174または通信IF(図示せず)を介してダウンロードされた後、ROM172に一旦格納される。そのソフトウェアは、CPU110によってROM172から読み出され、RAM171に実行可能なプログラムの形式で格納される。CPU110は、そのプログラムを実行する。
図2に示される電子機器100の本体装置101を構成する各構成要素は、一般的なものである。したがって、本発明の本質的な部分は、RAM171、ROM172、メモリカード1731その他の記憶媒体に格納されたソフトウェア、あるいはネットワークを介してダウンロード可能なソフトウェアであるともいえる。なお、電子機器100の本体装置101のハードウェアの動作は周知であるので、詳細な説明は繰り返さない。
なお、記憶媒体としては、メモリカードに限られず、CD−ROM、FD(Flexible Disk)、ハードディスク、磁気テープ、カセットテープ、光ディスク(MO(Magnetic Optical Disc)/MD(Mini Disc)/DVD(Digital Versatile Disc))、IC(Integrated Circuit)カード(メモリカードを除く)、光カード、マスクROM、EPROM、EEPROM(Electronically Erasable Programmable Read-Only Memory)、フラッシュROMなどの半導体メモリ等の固定的にプログラムを格納する媒体でもよい。
ここでいうプログラムとは、CPUにより直接実行可能なプログラムだけでなく、ソースプログラム形式のプログラム、圧縮処理されたプログラム、暗号化されたプログラム等を含む。
<光センサ内蔵液晶パネルの構成および駆動について>
次に、液晶パネル140の構成と、当該液晶パネル140の周辺回路の構成とについて説明する。図3は、液晶パネル140の構成と、当該液晶パネル140の周辺回路とを示した図である。
図3を参照して、液晶パネル140は、画素回路141と、光センサ回路144と、走査信号線Giと、データ信号線SRjと、データ信号線SGjと、データ信号線SBjと、センサ信号線SSjと、センサ信号線SDjと、読出信号線RWiと、リセット信号線RSiとを含む。なお、iは、1≦i≦mを満たす自然数であり、jは1≦j≦nを満たす自然数である。
また、図2に示した表示装置102のドライバ130は、液晶パネル140の周辺回路として、走査信号線駆動回路131と、データ信号線駆動回路132と、光センサ駆動回路133と、スイッチ134と、アンプ135とを含む。
走査信号線駆動回路131は、図2に示すドライバ制御部181から制御信号TC1を受ける。そして、走査信号線駆動回路131は、制御信号TC1に基づき、各走査信号線(G1〜Gm)に対して、走査信号線G1から順に予め定められた電圧を印加する。より詳しくは、走査信号線駆動回路131は、単位時間毎に走査信号線(G1〜Gm)の中から1つの走査信号線を順次選択し、当該選択した走査信号線に対して後述するTFT(Thin Film Transistor)142のゲートをターンオンできるだけの電圧(以下、ハイレベル電圧)を印加する。なお、選択されていない走査信号線に対しては、ハイレベル電圧を印加することなく、ローレベル電圧を印加したままとする。
データ信号線駆動回路132は、図2に示すドライバ制御部181から画像データ(DR,DG,DB)を受ける。そして、データ信号線駆動回路132は、3n個のデータ信号線(SR1〜SRn,SG1〜SGn,SB1〜SBn)に対して、上記単位時間毎に、1行分の画像データに対応する電圧を順次印加する。
なお、ここでは、いわゆる線順次方式と呼ばれる駆動方式を用いて説明したが、駆動方式はこれに限定されるものではない。
画素回路141は、1つの画素の輝度(透過率)を設定するための回路である。また、画素回路141は、マトリクス状にm×n個配されている。より詳しくは、画素回路141は、図3の縦方向にm個、横方向にn個配されている。
画素回路141は、Rサブピクセル回路141rと、Gサブピクセル回路141gと、Bサブピクセル回路141bとからなる。これら3つの回路(141r,141g,141b)は、それぞれ、TFT142と、画素電極と対向電極とからなる1組の電極対143と、図示しないコンデンサとを含む。
なお、n型のトランジスタとp型のトランジスタとを作れるCMOS(Complementary Metal Oxide Semiconductor)を実現できること、キャリア(電子または正孔)の移動速度がアモルファスシリコン薄膜トランジスタ(a-Si TFT)に比べて数百倍早いことなどから、表示装置102では、TFT142として多結晶シリコン薄膜トランジスタ(p-Si TFT)が用いられる。なお、TFT142は、n型チャネルの電界効果トランジスタであるとして説明する。ただし、TFT142がp型チャネルの電界効果トランジスタであってもよい。
Rサブピクセル回路141r内のTFT142のソースはデータ信号線SRjに接続されている。また、当該TFT142のゲートは走査信号線Giに接続されている。さらに、当該TFT142のドレインは、電極対143の画素電極に接続される。そして、画素電極と対向電極との間には、液晶が配される。なお、Gサブピクセル回路141gおよびBサブピクセル回路141bについても、各TFT142のソースが接続されるデータ信号線が異なる以外は、画素回路141rと同じ構成である。このため、これら2つの回路(141g,141b)についての説明は、繰り返さない。
ここで、画素回路141における輝度の設定について説明する。まず、走査信号線Giに上記ハイレベル電圧を印加する。当該ハイレベル電圧の印加により、TFT142のゲートがターンオンする。このようにTFT142のゲートがターンオンした状態で、各データ信号線(SRj,SGj,SBj)に対して、それぞれ指定された電圧(1画素分の画像データに対応する電圧)を印加する。これにより、当該指定された電圧に基づいた電圧が画素電極に印加される。その結果、画素電極と対向電極との間に電位差が生じる。この電位差に基づいて、液晶が応答し、画素の輝度は予め定められた輝度に設定される。なお、当該電位差は、上記図示しないコンデンサ(補助容量)によって、次のフレーム期間において走査信号線Giが選択されるまで保持される。
光センサ駆動回路133は、図2に示すドライバ制御部181から制御信号TC2を受ける。
そして、光センサ駆動回路133は、制御信号TC2に基づき、単位時間毎にリセット信号線(RS1〜RSm)の中から1つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧VDDRを印加する。なお、選択されていないリセット信号線に対しては、選択されたリセット信号線に印加した電圧よりも低い電圧VSSRを印加したままとする。たとえば、電圧VDDRを0Vに、電圧VSSRを−5Vに設定すればよい。
また、光センサ駆動回路133は、制御信号TC2に基づき、単位時間毎に読出信号線(RW1〜RWm)の中から1つの信号線を順次選択し、当該選択した信号線に対して、予め定められたタイミングで通常よりもハイレベルな電圧VDDを印加する。なお、選択されていない読出信号線に対しては、上記電圧VSSRを印加したままとする。たとえば、VDDの値を8Vに設定すればよい。
なお、電圧VDDRを印加するタイミング、および電圧VDDを印加するタイミングについては、後述する。
光センサ回路144は、フォトダイオード145と、コンデンサ146と、TFT147とを含む。なお、以下では、TFT147がn型チャネルの電界効果トランジスタであるとして説明する。ただし、TFT147がp型チャネルの電界効果トランジスタであってもよい。
フォトダイオード145のアノードは、リセット信号線RSiに接続されている。一方、フォトダイオード145のカソードは、コンデンサ146の一方の電極に接続されている。また、コンデンサ146の他方の電極は、読出信号線RWiに接続されている。なお、以下では、フォトダイオード145とコンデンサ146との接続点をノードNと称する。
TFT147のゲートは、ノードNに接続されている。また、TFT147のドレインは、センサ信号線SDjに接続されている。さらに、TFT147のソースは、センサ信号線SSjに接続されている。光センサ回路144を用いたセンシングの詳細については、後述する。
スイッチ134は、センサ信号線(SD1〜SDn)に対して、予め定められた電圧を印加するか否かを切り換えるために設けられたスイッチである。スイッチ134の切り換え動作は、光センサ駆動回路133により行われる。なお、スイッチ134が導通状態となった場合にセンサ信号線(SD1〜SDn)に印加される電圧については、後述する。
アンプ135は、各センサ信号線(SS1〜SSn)から出力された電圧を増幅する。なお、増幅された電圧は、図2に示した信号処理部183に送られる。
なお、画素回路141を用いて画像を液晶パネル140に表示させるタイミングと、光センサ回路144を用いてセンシングするタイミングとについては、画像処理エンジン180が制御する。
図4は、液晶パネル140とバックライト179との断面図である。図4を参照して、液晶パネル140は、アクティブマトリクス基板151Aと、対向基板151Bと、液晶層152とを含む。対向基板151Bは、アクティブマトリクス基板151Aに対向して配されている。液晶層152は、アクティブマトリクス基板151Aと対向基板151Bとに挟まれている。バックライト179は、アクティブマトリクス基板151Aに関し液晶層152と反対側に配されている。
アクティブマトリクス基板151Aは、偏光フィルタ161と、ガラス基板162と、電極対143を構成する画素電極143aと、フォトダイオード145と、データ信号線157と、配向膜164とを含む。さらに、図4には示していないが、アクティブマトリクス基板151Aは、図3に示した、コンデンサ146と、TFT147と、TFT142と、走査信号線Giとを含む。
また、アクティブマトリクス基板151Aにおいては、バックライト179側から、偏光フィルタ161、ガラス基板162、画素電極143a、および配向膜164が、この順に配されている。フォトダイオード145とデータ信号線157とは、ガラス基板162の液晶層152側に形成されている。
対向基板151Bは、偏光フィルタ161と、ガラス基板162と、遮光膜163と、カラーフィルタ(153r,153g,153b)と、電極対143を構成する対向電極143bと、配向膜164とを含む。
また、対向基板151Bにおいては、液晶層152側から、配向膜164、対向電極143b、カラーフィルタ(153r,153g,153b)、ガラス基板162、および偏光フィルタ161が、この順に配されている。遮光膜163は、カラーフィルタ(153r,153g,153b)と同一の層に形成されている。
カラーフィルタ153rは、赤色の波長の光を透過させるフィルタである。カラーフィルタ153gは、緑色の波長の光を透過させるフィルタである。カラーフィルタ153bは、青色の波長の光を透過させるフィルタである。ここで、フォトダイオード145は、カラーフィルタ153bに対向する位置に配されている。
液晶パネル140は、外光やバックライト179などの光源により発せられた光を遮ったり又は当該光を透過させたりすることによって、画像の表示をする。具体的には、液晶パネル140は、画素電極143aと対向電極143bとの間に電圧を印加することにより液晶層152の液晶分子の向きを変化させ、上記光を遮ったり、あるいは透過させる。ただし、液晶だけでは光を完全に遮ることができないため、特定の偏光方向の光のみを透過させる偏光フィルタ161を配置している。
なお、フォトダイオード145の位置は、上記の位置に限定されるものではなく、カラーフィルタ153rに対向する位置やカラーフィルタ153gに対向する位置に設けることも可能である。
ここで、光センサ回路144の動作について説明する。図5は、光センサ回路144を動作させる際のタイミングチャートを示した図である。図5において、電圧VINTは、光センサ回路144内のノードNにおける電位を示している。また、電圧VPIXは、図3に示したセンサ信号線SSjからの出力電圧であって、アンプ135によって増幅される前の電圧を示している。
以下では、光センサ回路144をリセットするためのリセット期間と、光センサ回路144を用いて光をセンシングするためのセンシング期間と、センシングした結果を読み出す読出期間とに分けて説明する。
まず、リセット期間について説明する。リセット期間においては、リセット信号線RSiに印加する電圧を、ローレベル(電圧VSSR)からハイレベル(電圧VDDR)へと瞬間的に切り換える。一方、読出信号線RWiに印加する電圧は、ローレベル(電圧VSSR)のままとする。このように、リセット信号線RSiに上記ハイレベルの電圧を印加することにより、フォトダイオード145の順方向(アノード側からカソード側)に電流が流れ始める。その結果、ノードNの電位である電圧VINTは、以下の式(1)で示す値となる。なお、式(1)では、フォトダイオード145における順方向の電圧降下量をVfとしている。
VINT=VSSR+|VDDR−VSSR|−Vf … (1)
それゆえ、ノードNの電位は、図5に示すとおり、電圧VDDRよりもVfだけ小さな値となる。
ここで、電圧VINTは、TFT147のゲートをターンオンさせる閾値以下であるため、センサ信号線SSjからの出力はない。このため、電圧VPIXは変化しない。また、コンデンサ146の電極間には、上記電圧VINT分の差が生じる。このため、コンデンサ146には、当該差に応じた電荷が蓄積される。
次に、センシング期間について説明する。リセット期間に続くセンシング期間においては、リセット信号線RSiに印加する電圧は、ハイレベル(電圧VDDR)からローレベル(電圧VSSR)へと瞬間的に切り換わる。一方、読出信号線RWiに印加する電圧は、ローレベル(電圧VSSR)のままとする。
このように、リセット信号線RSiに印加する電圧をローレベルに変化させることにより、ノードNの電位は、リセット信号線RSiの電圧および読出信号線RWiの電圧よりも高くなる。このため、フォトダイオード145においては、カソード側の電圧がアノード側の電圧よりも高くなる。つまり、フォトダイオード145は、逆バイアスの状態となる。このような逆バイアスの状態において、光源からの光をフォトダイオード145が受光すると、フォトダイオード145のカソード側からアノード側へと電流が流れ始める。その結果、図5に示すとおり、ノードNの電位(つまり、電圧VINT)は時間の経過とともに低くなる。
なお、このように電圧VINTが低下し続けるため、TFT147のゲートはターンオンした状態にはならない。それゆえ、センサ信号線SSjからの出力はない。このため、電圧VPIXは変化しない。
次に、読出期間について説明する。センシング期間に続く読出期間においては、リセット信号線RSiに印加する電圧をローレベル(電圧VSSR)のままとする。一方、読出信号線RWiに印加する電圧は、ローレベル(電圧VSSR)からハイレベル(電圧VDD)へと瞬間的に切り換わる。ここで、電圧VDDは、電圧VDDRよりも高い値である。
このように、読出信号線RWiにハイレベルの電圧を瞬間的に印加することにより、図5に示すとおり、コンデンサ146を介してノードNの電位が引き上げられる。なお、ノードNの電位の上昇幅は、読出信号線RWiに印加する電圧に応じた値となる。ここで、ノードNの電位(つまり、電圧VINT)が、TFT147のゲートをターンオンさせる閾値以上まで引き上げられるため、TFT147のゲートがターンオンする。
この際、TFT147のドレイン側に接続されたセンサ信号線SDj(図3参照)に予め一定電圧を印加しておけば、TFT147のソース側に接続されたセンサ信号線SSjからは、図5のVPIXのグラフに示すとおり、ノードNの電位に応じた電圧が出力される。
ここで、フォトダイオード145が受光する光の量(以下、受光量と称する)が少ないと、図5のVINTのグラフに示す直線の傾きが緩やかになる。その結果、電圧VPIXは、受光量が多い場合に比べて高くなる。このように、光センサ回路144は、フォトダイオード145の受光量に応じて、センサ信号線SSjに出力する電圧の値を変化させる。
ところで、上記においては、m×n個存在する光センサ回路のうち、1つの光センサ回路144に着目して、その動作を説明した。以下では、液晶パネル140における各光センサ回路の動作について説明する。
まず、光センサ駆動回路133は、n個のセンサ信号線(SD1〜SDn)の全てに対して、予め定められた電圧を印加する。次に、光センサ駆動回路133は、リセット信号線RS1に対して、通常よりもハイレベルな電圧VDDRを印加する。なお、他のリセット信号線(RS2〜RSm)および読出信号線(RW1〜RWm)については、ローレベルの電圧を印加したままの状態とする。これにより、図3における1行目のn個の光センサ回路が、上述したリセット期間に入る。その後、1行目のn個の光センサ回路は、センシング期間に入る。さらに、その後、1行目のn個の光センサ回路は、読出期間に入る。
なお、n個のセンサ信号線(SD1〜SDn)の全てに対して予め定められた電圧を印加するタイミングは、上記のタイミングに限定されず、少なくとも読出期間前に印加されるタイミングであればよい。
1行目のn個の光センサ回路の読出期間が終了すると、光センサ駆動回路133は、リセット信号線RS2に対して、通常よりもハイレベルな電圧VDDRを印加する。つまり、2行目のn個の光センサ回路のリセット期間に入る。リセット期間が終了すると、2行目のn個の光センサ回路は、センシング期間に入り、その後は、読出期間に入る。
以降は、上述した処理が、順に、3行目のn個の光センサ回路、4行目のn個の光センサ回路、…m行目のn個の光センサ回路に対して行われる。その結果、センサ信号線(SS1〜SSn)からは、1行目のセンシング結果、2行目のセンシング結果、…、m行目のセンシング結果が、この順に出力される。
なお、表示装置102においては、上記のように行毎にセンシングが行われるとともに、行毎にセンシング結果が液晶パネル140から出力される。このため、以下では、液晶パネル140から出力される1行目からm行目までのm行分の電圧に関するデータに対して、信号処理部183が上述したデータ処理を行った後のデータを、「スキャンデータ」と称する。つまり、スキャンデータとは、スキャン対象物(たとえば、ユーザの指)をスキャンすることにより得られる画像データを指す。また、当該スキャンデータに基づいて表示された画像を、「スキャン画像」と称する。さらに、以下では、センシングを「スキャン」と称する。
また、上記においては、m×n個の光センサ回路全てを用いてスキャンを行う構成を例に挙げたが、これに限定されるものではない。予め選択された光センサ回路を用いて、液晶パネル140の表面の一部の領域に関してスキャンを行うことも構成としてもよい。
以下では、電子機器100が、両構成のいずれの構成をも採れるものとする。さらに、当該構成間の切り換えは、操作キー177を介した入力などに基づく本体装置101から送られてくるコマンドにより行われるものとする。なお、液晶パネル140の表面の一部の領域に関してスキャンを行う場合、画像処理エンジン180が、スキャン対象領域の設定を行う。なお、当該領域の設定を、操作キー177を介してユーザが指定できる構成としてもよい。
このように、液晶パネル140の表面の一部の領域に関してスキャンを行う場合には、画像の表示に関し、以下のような利用の態様がある。1つ目は、上記一部の領域(以下、スキャン領域と称する)以外の表面の領域において、画像を表示させる態様である。2つ目は、上記スキャン領域以外の表面の領域において、画像を表示させない態様である。いずれの態様とするかは、本体装置101から画像処理エンジン180に送られてくるコマンドに基づく。
図6は、液晶パネル140とバックライト179との断面図であって、スキャンの際にフォトダイオード145がバックライト179からの光を受光する構成を示した図である。
図6を参照して、ユーザの指900が液晶パネル140の表面に接触している場合、バックライト179から発せられた光の一部は、当該接触している領域ではユーザの指900(略平面)にて反射される。そして、フォトダイオード145は、当該反射された光を受光する。
また、指900が接触していない領域においても、バックライト179から発せられた光の一部は、ユーザの指900にて反射される。この場合においても、フォトダイオード145は、当該反射された光を受光する。ただし、当該領域においては液晶パネル140の表面に指900が接触していないため、指900が接触している領域よりも、フォトダイオード145の受光量は少なくなる。なお、バックライト179から発せられた光のうち、ユーザの指900に到達しない光のほとんどについては、フォトダイオード145は受光できない。
ここで、バックライト179を、少なくともセンシング期間においては点灯させておくことにより、光センサ回路144は、ユーザの指900により反射した光の光量に応じた電圧をセンサ信号線SSjから出力することができる。このように、バックライト179の点灯と消灯とを制御することにより、液晶パネル140では、指900の接触位置、指900の接触している範囲(指900の押圧力によって定まる)、液晶パネル140の表面に対する指900の方向などに応じて、センサ信号線(SS1からSSn)から出力される電圧が変化することになる。
以上により、表示装置102は、指900によって光が反射されることにより得られる像(以下、反射像とも称する)をスキャンすることができる。
なお、指900以外のスキャン対象物としては、スタイラスなどが挙げられる。
ところで、本実施の形態においては、電子機器100の表示装置として液晶パネルを例に挙げて説明しているが、液晶パネルの代わりに有機EL(Electro-Luminescence)パネルなどの他のパネルを用いてもよい。
<データについて>
次に、センシングコマンドについて説明する。なお、表示装置102においては、画像処理エンジン180は、センシングコマンドの内容を解析し、当該解析の結果に従ったデータ(つまり、応答データ)を本体装置101に送り返す。
図7は、センシングコマンドの概略構成を示した図である。図7を参照して、センシングコマンドは、ヘッダのデータ領域DA01と、タイミングを示すデータ領域DA02と、データ種別を示すデータ領域DA03と、読取方式を示すデータ領域DA04と、画像階調を示すデータ領域DA05と、解像度を示すデータ領域DA06と、予備のデータ領域DA07とを含む。
図8は、センシングコマンドの各領域におけるデータの値と、当該値が示す意味内容とを示した図である。
図8を参照して、タイミングを示すデータ領域に「00」が設定されたセンシングコマンドは、画像処理エンジン180に対して、そのときのスキャンデータの送信を要求する。つまり、センシングコマンドは、当該センシングコマンドを画像処理エンジン180が受信した後に、光センサ回路144を用いてスキャンすることにより得られるスキャンデータの送信を要求する。また、タイミングを示すデータ領域に「01」が設定されたセンシングコマンドは、スキャン結果に変化があったときのスキャンデータの送信を要求する。さらに、タイミングを示すデータ領域に「10」が設定されたセンシングコマンドは、一定周期毎にスキャンデータの送信を要求する。
データ種別を示すデータ領域に「001」が設定されたセンシングコマンドは、部分画像における中心座標の座標値の送信を要求する。また、データ種別を示すデータ領域に「010」が設定されたセンシングコマンドは、スキャン結果が変化した部分画像のみの送信を要求する。なお、スキャン結果が変化したとは、前回のスキャン結果と今回のスキャン結果が異なっていることを指す。さらに、データ種別を示すデータ領域に「100」が設定されたセンシングコマンドは、全体画像の送信を要求する。
ここで、「全体画像」とは、m×n個の光センサ回路を用いてスキャンした際に、各光センサ回路から出力される電圧に基づいて、画像処理エンジン180により生成された画像である。また、「部分画像」とは、全体画像の一部である。部分画像に関して、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由については後述する。
なお、上記座標値と上記部分画像または上記全体画像とを同時に要求する構成としてもよい。また、液晶パネル140の表面の一部の領域に関してスキャンを行う構成の場合には、上記全体画像はスキャンが行われる領域に対応した画像となる。
読取方式を示すデータ領域に「00」が設定されたセンシングコマンドは、バックライト179を点灯してスキャンすることを要求する。また、読取方式を示すデータ領域に「01」が設定されたセンシングコマンドは、バックライト179を消灯してスキャンすることを要求する。なお、バックライト179を消灯してスキャンする構成については後述する(図12)。さらに、読取方式を示すデータ領域に「10」が設定されたセンシングコマンドは、反射と透過とを併用してスキャンすることを要求する。なお、反射と透過とを併用するとは、バックライト179を点灯してスキャンする方式と、バックライトを消灯してスキャンする方式とを切り換えて、スキャン対象物のスキャンを行うことを指す。
画像階調を示すデータ領域に「00」が設定されたセンシングコマンドは、白黒の2値の画像データを要求する。また、画像階調を示すデータ領域に「01」が設定されたセンシングコマンドは、多階調の画像データを要求する。さらに、画像階調を示すデータ領域に「10」が設定されたセンシングコマンドは、RGBのカラーの画像データを要求する。
解像度を示すデータ領域に「0」が設定されたセンシングコマンドは、解像度の高い画像データを要求する。また、解像度を示すデータ領域に「1」が設定されたセンシングコマンドは、解像度の低い画像データを要求する。
また、センシングコマンドには、図7および図8に示したデータ以外に、スキャンを行う領域(光センサ回路144を駆動する画素の領域)の指定、スキャンを行うタイミング、バックライト179の点灯のタイミングなどが記述されている。
図9は、応答データの概略構成を示した図である。応答データは、センシングコマンドの内容に応じたデータであって、表示装置102の画像処理エンジン180が本体装置101に対して送信するデータである。
図9を参照して、応答データは、ヘッダのデータ領域DA11と、座標を示すデータ領域DA12と、時刻を示すデータ領域DA13と、画像を示すデータ領域DA14とを含む。ここで、座標を示すデータ領域DA12には、部分画像の中心座標の値が書き込まれる。また、時刻を示すデータ領域には、画像処理エンジン180のタイマ182から取得した時刻情報が書き込まれる。さらに、画像を示すデータ領域には、画像処理エンジン180により処理がされた後の画像データ(つまり、スキャンデータ)が書き込まれる。
図10は、指900をスキャンすることにより得られた画像(つまり、スキャン画像)を示した図である。図10を参照して、太実線で囲まれた領域W1の画像が全体画像であり、破線で囲まれた領域P1の画像が部分画像である。また、太線で示した十字の中心点C1が、中心座標となる。
本実施の形態では、矩形の領域であって、かつセンサ信号線SSjからの出力電圧が予め定められた値以上となった光センサ回路が備えられた画素(つまり、予め定められた階調または予め定められた輝度以上の画素)全てを含む領域を、部分画像の領域としている。
また、中心座標は、部分画像の領域における各画素の階調を考慮して決定される座標である。具体的には、中心座標は、部分画像内の各画素に関し、画素の階調と、当該画素と上記矩形の中心点(つまり図心)との距離とに基づき、重み付け処理を行うことにより決定される。つまり、中心座標は、部分画像の図心とは必ずしも一致しない。
ただし、必ずしも中心座標の位置は上記に限定されるものではなく、中心座標を上記図心の座標あるいは図心の近傍の座標としてもよい。
センシングコマンドのデータ種別を示すデータ領域に「001」が設定されている場合には、画像処理エンジン180は、座標を示すデータ領域DA12に上記中心座標の値を書き込む。この場合、画像処理エンジン180は、画像を示すデータ領域DA14には画像データを書き込まない。画像処理エンジン180は、上記中心座標の値の書き込みを行なった後、当該中心座標の値を含む応答データを本体装置101に送る。このように、データ種別を示すデータ領域に「001」が設定されている場合には、センシングコマンドは、画像データの出力を要求せずに、中心座標の値の出力を要求する。
また、センシングコマンドのデータ種別を示すデータ領域に「010」が設定されている場合には、画像処理エンジン180は、画像を示すデータ領域DA14に、スキャン結果が変化した部分画像の画像データを書き込む。この場合、画像処理エンジン180は、中心座標の値を座標を示すデータ領域DA12に書き込まない。画像処理エンジン180は、上記スキャン結果が変化した部分画像の画像データの書き込みを行なった後、当該部分画像の画像データを含む応答データを本体装置101に送る。このように、データ種別を示すデータ領域に「010」が設定されている場合には、センシングコマンドは、中心座標の値の出力を要求せずに、スキャン結果が変化した部分画像の画像データの出力を要求する。
なお、上記のように、スキャン結果が変化した部分画像のみの送信を要求する構成とした理由は、スキャンデータのうち部分画像の領域のスキャンデータが、当該領域以外のスキャンデータよりも重要度の高いデータであること、および、指900などのスキャン対象物との接触状態により、スキャンデータのうち部分画像の領域に相当する領域のスキャンデータが変化しやすいことによる。
また、センシングコマンドのデータ種別を示すデータ領域に「011」が設定されている場合には、画像処理エンジン180は、座標を示すデータ領域DA12に中心座標の値を書き込むとともに、画像を示すデータ領域DA14にスキャン結果が変化した部分画像の画像データを書き込む。その後、画像処理エンジン180は、当該中心座標の値と当該部分画像の画像データとを含む応答データを本体装置101に送る。このように、データ種別を示すデータ領域に「011」が設定されている場合には、センシングコマンドは、中心座標の値の出力と、スキャン結果が変化した部分画像の画像データの出力とを要求する。
また、センシングコマンドのデータ種別を示すデータ領域に「100」が設定されている場合には、画像処理エンジン180は、図9に示した応答データの画像を示すデータ領域DA14に、全体画像の画像データを書き込む。この場合、画像処理エンジン180は、中心座標の値を座標を示すデータ領域DA12に書き込まない。画像処理エンジン180は、上記全体画像の画像データの書き込みを行なった後、当該全体画像の画像データを含む応答データを本体装置101に送る。このように、データ種別を示すデータ領域に「100」が設定されている場合には、センシングコマンドは、中心座標の値の出力を要求せずに、全体画像の画像データの出力を要求する。
また、センシングコマンドのデータ種別を示すデータ領域に「101」が設定されている場合には、画像処理エンジン180は、座標を示すデータ領域DA12に中心座標の値を書き込むとともに、画像を示すデータ領域DA14に全体画像の画像データを書き込む。その後、画像処理エンジン180は、当該中心座標の値と当該全体画像の画像データとを含む応答データを本体装置101に送る。このように、データ種別を示すデータ領域に「101」が設定されている場合には、センシングコマンドは、中心座標の値の出力と、全体画像の画像データの出力とを要求する。
<構成の第1の変形例について>
ところで、液晶パネル140の構成は、図3に示した構成に限定されるものではない。以下では、図3とは異なる態様の液晶パネルについて説明する。
図11は、上記異なる態様である光センサ内蔵液晶パネル140Aの回路図である。図11を参照して、光センサ内蔵液晶パネル140A(以下、液晶パネル140Aと称する)は、1画素内に3つの光センサ回路(144r,144g,144b)を含んでいる。このように液晶パネル140Aが1画素内に3つの光センサ回路(144r,144g,144b)を備える点において、液晶パネル140Aは、1画素内に1つの光センサ回路を備える液晶パネル140と異なる。なお、光センサ回路144の構成と、3つの各光センサ回路(144r,144g,144b)との構成は同じである。
また、1画素内における3つのフォトダイオード(145r,145g,145b)は、それぞれ、カラーフィルタ153r、カラーフィルタ153g、カラーフィルタ153bに対向する位置に配されている。それゆえ、フォトダイオード145rは赤色の光を受光し、フォトダイオード145gは緑色の光を受光し、フォトダイオード145bは青色の光を受光する。
また、液晶パネル140は1画素内において1つの光センサ回路144しか含まないため、1画素内に配設されるTFT147用のデータ信号線は、センサ信号線SSjとセンサ信号線SDjとの2本であった。しかしながら、液晶パネル140Aは1画素内において3つの光センサ回路(144r,144g,144b)を含むため、1画素内に配設されるTFT(147r,147g,147b)用のデータ信号線は6本となる。
具体的には、カラーフィルタ153rに対向する位置に配されたフォトダイオード145rのカソードに接続されたTFT147rに対応して、センサ信号線SSRjとセンサ信号線SDRjとが配設される。また、カラーフィルタ153gに対向する位置に配されたフォトダイオード145gのカソードに接続されたTFT147gに対応して、センサ信号線SSGjとセンサ信号線SDGjとが配設される。さらに、カラーフィルタ153bに対向する位置に配されたフォトダイオード145bのカソードに接続されたTFT147bに対応して、センサ信号線SSBjとセンサ信号線SDBjとが配設される。
このような液晶パネル140Aにおいては、バックライト179から照射された白色光は、3つのカラーフィルタ(153r,153g,153b)を透過し、液晶パネル140Aの表面では、赤、緑、および青とが混ざり白色光となる。ここで、スキャン対象物により白色光が反射されると、スキャン対象物の表面の色素に白色光の一部が吸収され、また一部が反射される。そして、反射された光は、再度、3つのカラーフィルタ(153r,153g,153b)を透過する。
この際、カラーフィルタ153rは赤色の波長の光を透過し、フォトダイオード145rは、当該赤色の波長の光を受光する。また、カラーフィルタ153gは緑色の波長の光を透過し、フォトダイオード145gは、当該緑色の波長の光を受光する。また、カラーフィルタ153bは青色の波長の光を透過し、フォトダイオード145bは、当該青色の波長の光を受光する。つまり、スキャン対象物によって反射された光は3つのカラーフィルタ(153r,153g,153b)によって3原色(R,G,B)に色分解され、各フォトダイオード(145r,145g,145b)は、それぞれに対応した色の光を受光する。
スキャン対象物の表面の色素に白色光の一部が吸収されると、各フォトダイオード(145r,145g,145b)の受光量が各フォトダイオード(145r,145g,145b)で異なることになる。このため、センサ信号線SSRjとセンサ信号線SSGjとセンサ信号線SSBjとの出力電圧は互いに異なる。
それゆえ、各出力電圧に応じて、Rの階調とGの階調とBの階調とを画像処理エンジン180が決定することにより、画像処理エンジン180はRGBのカラー画像を本体装置101へ送ることができる。
以上述べたように、電子機器100が液晶パネル140Aを備えた構成とすることにより、スキャン対象物をカラーでスキャンできることになる。
次に、図12を参照して、前述のスキャンの方法(つまり、図6における反射像をスキャンする方法)とは異なるスキャンの方法について説明する。
図12は、スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。図12に示されるように、外光の一部は、指900によって遮られる。それゆえ、指900と接触している液晶パネル140の表面領域の下部に配されたフォトダイオードは、ほとんど外光を受光できない。また、指900の影が形成された表面領域の下部に配されたフォトダイオードは、ある程度の外光を受光できるものの、影が形成されていない表面領域に比べると外光の受光量が少ない。
ここで、バックライト179を、少なくともセンシング期間においては消灯させておくことにより、光センサ回路144は、液晶パネル140の表面に対する指900の位置に応じた電圧をセンサ信号線SSjから出力することができる。このように、バックライト179を点灯と消灯とを制御することにより、液晶パネル140では、指900の接触位置、指900の接触している範囲(指900の押圧力によって定まる)、液晶パネル140の表面に対する指900の方向などに応じて、センサ信号線(SS1からSSn)から出力される電圧が変化することになる。
以上により、表示装置102は、指900によって外光が遮られることにより得られる像(以下、影像とも称する)をスキャンすることができる。
さらに、表示装置102を、バックライト179を点灯させてスキャンを行った後に、バックライト179を消灯させて再度スキャンを行う構成としてもよい。あるいは、表示装置102を、バックライト179を消灯させてスキャンを行った後に、バックライト179を点灯させて再度スキャンを行う構成としてもよい。
この場合には、2つのスキャン方式を併用することになるため、2つのスキャンデータを得ることができる。それゆえ、一方のスキャン方式のみを用いてスキャンする場合に比べて、精度の高い結果を得ることができる。
<表示装置について>
表示装置103の動作は、表示装置102の動作と同様、本体装置101からのコマンド(たとえば、センシングコマンド)に応じて制御される。表示装置103は表示装置102と同様な構成を有する。それゆえ、表示装置103が表示装置102と同じコマンドを本体装置101から受け付けた場合、表示装置103は表示装置102と同様の動作を行う。このため、表示装置103の構成や動作についての説明は繰り返さない。
なお、本体装置101は、表示装置102と表示装置103とに対して、命令が異なるコマンドを送ることができる。この場合、表示装置102と表示装置103とは別々の動作を行う。また、本体装置101は、表示装置102および表示装置103のいずれかに対して、コマンドを送ってもよい。この場合、一方の表示装置のみがコマンドに応じた動作を行う。また、本体装置101が、表示装置102と表示装置103とに命令が同じコマンドを送ってもよい。この場合、表示装置102と表示装置103とは、同じ動作を行う。
なお、表示装置102の液晶パネル140のサイズと表示装置103の液晶パネル240のサイズとは、同じであってもよいし又は異なっていてもよい。また、液晶パネル140の解像度と液晶パネル240の解像度とは、同じであってもよいし又は異なっていてもよい。
<構成の第2の変形例について>
本実施の形態では、電子機器100が、液晶パネル140と液晶パネル240といったそれぞれに光センサを内蔵した液晶パネルを備える構成について説明するが、一方の液晶パネルのみが光センサを内蔵している構成であってもよい。
図13は、電子機器100Aのハードウェア構成を表すブロック図である。電子機器100Aは、電子機器100と同様、第1の筐体100Aと、第2の筐体100Bとを含む。第1の筐体100Aは、表示装置102を含む。第2の筐体100Bは、光センサを内蔵しない液晶パネル(つまり、表示機能のみを有する液晶パネル)を含む。電子機器100Aは、第2の筐体100Bが光センサを内蔵しない液晶パネルを含む点で、第2の筐体100Bが光センサを内蔵した液晶パネル240を含む電子機器100と異なる。このような電子機器100Aは、第1の筐体100Aの表示装置102を用いて上述したセンシングを行なう。
また、第2の筐体100Bは、光センサを内蔵した液晶パネル240の代わりに、たとえば抵抗膜方式や静電容量方式のタッチパネルを備えてもよい。
また、本実施の形態では、表示装置102がタイマ182を備え、表示装置103がタイマ282を備える構成として説明するが、表示装置102と表示装置103とが1つのタイマを共有する構成としてもよい。
また、本実施の形態では、電子機器100を折畳型の機器として説明するが、電子機器100は必ずしも折畳型に限定されるものではない。たとえば、電子機器100は、第1の筐体100Aが第2の筐体100Bに対してスライドする構成のスライド式の機器であってもよい。
<<具体的な実現例>>
次に、上述の構成を用いる電子機器100の具体的な実現例について説明する。
[第1の実施の形態]
機能構成
図14を参照して、本実施の形態に係る電子機器100によって実現される機能について説明する。図14は、電子機器100の機能の構成を表わすブロック図である。電子機器100は、第1の表示部1410と、第2の表示部1420と、選択検知部1430と、位置検知部1440と、表示制御部1450と、記憶部1460とを備える。
第1の表示部1410は、液晶パネル240によって実現される。第2の表示部1420は、液晶パネル140によって実現される。選択検知部1430と位置検知部1440と表示制御部1450とは、CPU110によって実現される。他の局面において、選択検知部1430は、画像処理エンジン280によって実現され得る。位置検知部1440は、画像処理エンジン180によっても実現され得る。
第1の表示部1410には、画像を表示するための表示領域に沿って複数の光センサが内蔵されている。第2の表示部1420には、画像を表示するための表示領域に沿って、複数の光センサが内蔵されている。
なお、本実施の形態において、第1の表示部1410または第2の表示部1420が表示する画像とは、文書、写真、音楽、プログラムその他のファイルを示すサムネイル画像、フォルダを示す画像、ショートカットのための画像等を含み得るが、その他のファイルも含み得る。第1の表示部1410または第2の表示部1420が表示する画像は、少なくとも、電子機器100の使用者がアクセス可能なファイルを示す画像であればよい。
選択検知部1430は、第1の表示部1410からの出力に基づいて、第1の表示部1410の表示領域に表示されている画像が選択されたことを検知する。具体的には、画像を表示する場所として与えている座標値と、第1の表示部1410からの出力に基づいて特定される座標値とを比較する。これらの座標値が一致する場合、あるいはこれらの座標値の差が予め定められた範囲内である場合、選択検知部1430は、当該画像が選択されたことを検知する。
位置検知部1440は、第2の表示部1420において使用者によって選択された位置を検知する。位置の選択は、使用者の指(図示しない)によって、あるいは、後述するスタイラスペンその他の入力装置によって行なわれる。他の局面において、位置検知部1440は、第1の表示部1410において使用者によって選択された位置を検知する。たとえば、使用者の入力操作が終了した場所が、使用者が選択した位置として検知される。この場合、画像の移動は、第1の表示部1410の表示領域内で行われ得る。
表示制御部1450は、第1の表示部1410に内蔵されている複数の光センサからの当該選択後の出力に応じて、当該画像の表示を第1の表示部1410の表示領域から第2の表示部1420の表示領域に切り換えるように構成されている。位置検知部1440は、第2の表示部1420の表示領域において指定された位置の座標値を検出する。この場合、表示制御部1450は、第1の表示部1410に表示されていた画像を、位置検知部1440によって検知された座標値に基づいて第2の表示部1420において指定された位置に表示する。
記憶部1460は、表示制御部1450による判断のために予め準備されたパターンを格納している。当該パターンは、たとえば、自由曲線によって形成されるパターン、文字、図形、記号その他液晶パネル240に入力することが可能な画像であるが、これらに限られない。
好ましくは、表示制御部1450は、当該選択後の出力に基づいて特定される第1の表示部1410における軌跡が予め規定されたパターンに対応するか否かを判断する。表示制御部1450は、その軌跡が予め規定されたパターンに対応する場合に、画像の表示を第1の表示部1410の表示領域から第2の表示部1420の表示領域に切り換える。
他の局面において、液晶パネル240の表示領域のうちの周辺領域として予め設定された領域に画像が表示されている場合、表示制御部1450は、その表示領域における軌跡の検知に応答して、画像を液晶パネル140の表示領域に表示する。
他の局面において、軌跡の終点を含むベクトルの方向に第2の表示部が位置している場合に、表示制御部1450は、第1の表示部の表示領域に表示されていた画像を第2の表示部の表示領域に表示する。
表示態様
図15を参照して本実施の形態に係る電子機器100における画面の表示態様について説明する。図15は、液晶パネル240に表示されている画像を液晶パネル140に移動する場合における画面の切り換わりを表わす図である。
図15(A)を参照して、画像の一態様である画像1500は、液晶パネル240に表示されている。電子機器100の使用者は、スタイラスペン1510を用いて、液晶パネル240に表示されている画像1500を選択し、軌跡1520によって示されるような動作を行なう。このような動作を、「ジェスチャー」ともいう。そうすると、図15(B)に示されるように、使用者がスタイラスペン1510を用いて液晶パネル140の表示領域においてある1点を指定すると、画像1500は、液晶パネル140において画像1530として表示される。その結果、液晶パネル240に表示されていた画像1500の表示は消える。
図16を参照して、本実施の形態に係る電子機器100に対するジェスチャーの種類について説明する。液晶パネル240に表示されている画像を液晶パネル140に移動させるために電子機器100の使用者が行なう操作として、たとえばスタイラスペン1510による曲線1610,1620または曲線1630,1640がそれぞれ考えられる。曲線1610の場合、液晶パネル240に表示されている画像を選択した後に予め規定された時間以上液晶パネル240の表示領域をなぞるように形成される。この形成される曲線は、たとえば、自由曲線であるが、文字、記号その他の線図が用いられてもよい。曲線1610の最後の部分は、液晶パネル240の上部に設けられる液晶パネル140を向いているため、画像処理エンジン280からの信号を受けたCPU110は、液晶パネル240に表示されている画像を液晶パネル140に表示させる命令と解釈する。その結果、図15に示されるように、液晶パネル240に表示されていた画像は、液晶パネル140に表示される。
他の局面において、曲線1620のようなジェスチャーが用いられてもよい。曲線1620は、液晶パネル240に表示されていた画像を選択した後、液晶パネル140が設けられている方向とは逆の方向に表示領域においてなぞられた後、液晶パネル140が設けられている方向に向くように軌跡が描かれている。この場合も、軌跡の終点は、液晶パネル240から液晶パネル140を向いているため、画像処理エンジン280からの信号を受けたCPU110は、液晶パネル240に表示されている画像を液晶パネル140に表示させる命令と判断する。CPU110は、RAM171において、描画データの出力先を、液晶パネル240から液晶パネル140に切り換える。これにより、液晶パネル140は、当該画像を表示することができる。
さらに他の局面において、複数の曲線が画像を移動させるための命令として用いられてもよい。たとえば、曲線1630と直線1640とが、液晶パネル240に表示されている画像を液晶パネル140に移動させるための命令として使用され得る。この場合、複数の曲線1630,1640が予め設定された時間内に入力されることにより、CPU110は、液晶パネル240に表示されている画像を液晶パネル140に表示させる命令と判断する。仮に、複数の曲線1630,1640が描かれた時間が予め設定された時間を上回る場合には、CPU110は、そのような軌跡の入力は画像の移動ではないと判断し、液晶パネル240に表示されている画像の表示を切り換えない。
制御構造
図17を参照して、本実施の形態に係る電子機器100の制御構造について説明する。図17は、CPU110が実行する一連の処理の一部を表わすフローチャートである。
ステップS1710にて、CPU110は、液晶パネル240からの出力に基づいて、液晶パネル240の表示領域におけるジェスチャー(たとえばスタイラスペン1510による入力)を検知する。
ステップS1720にて、CPU110は、予め登録されている軌跡パターンを、ROM172からRAM171にロードする。
ステップS1730にて、CPU110は、画像処理エンジン280からの出力信号に基づいて、液晶パネル240に対するジェスチャーの軌跡を特定する。
ステップS1740にて、CPU110は、そのジェスチャーの始点に基づいて、電子機器100の使用者によって選択された画像(たとえば画像1500)を特定する。
ステップS1750にて、CPU110は、液晶パネル140からの出力に基づいて、液晶パネル140の表示領域に対する入力(たとえば、タップ操作)を検知する。
ステップS1760にて、CPU110は、RAM171にロードされた軌跡パターンと、液晶パネル240に対して与えられた軌跡とが一致するか否かを判断する。CPU110は、これらの軌跡パターンと軌跡とが一致すると判断すると、制御をステップS1770に切り換える。そうでない場合には(ステップS1760にてNO)、CPU110は処理を終了する。
ステップS1770にて、CPU110は、液晶パネル240に対する操作の終了時刻から液晶パネル140に対する操作が行なわれた時刻までのタイミング(入力時間)を算出する。たとえば、CPU110は、画像処理エンジン280および画像処理エンジン180からそれぞれ送られてくる信号に関連付けられているタイムスタンプに基づいて、この時間を算出する。あるいは他の局面において、CPU110は、電子機器100における内部の動作を規定するカウンタの値に基づいて入力時間を算出してもよい。たとえば、CPU110は、液晶パネル240における操作が終了した時と、液晶パネル140に対する操作が与えられた時との差を当該入力時間として算出してもよい。
ステップS1780にて、CPU110は、算出したタイミングが予め設定された一定のタイミング以内であるか否かを判定する。CPU110は、そのタイミングが一定のタイミング以内であると判定すると(ステップS1780にてYES)、制御をステップS1790に切り換える。そうでない場合には(ステップS1780にてNO)、CPU110は、制御を終了する。
ステップS1790にて、CPU110は、液晶パネル140において入力された場所を、画像1500の新たな表示先として指定する。その結果、液晶パネル140は、画像1530として当該画像を液晶パネル140に表示する(図15(B))。
以上のようにして、第1の実施の形態に係る電子機器100によると、2つの表示部のうちの1つに表示されていた画像を、その画像が表示されていた領域に対するスタイラスペン1510の操作に応じて、他の表示部に移動させることができる。これにより、画像の整理が容易になる。あるいは、当該画像を用いたコンテンツファイルの作成が容易になる。
[第2の実施の形態]
以下、本発明の第2の実施の形態について説明する。本実施の形態に係る電子機器100を、画像の移動を与えられたジェスチャーの形成された速さに応じて切り換える点で、前述の第1の実施の形態と異なる。
そこで、図18を参照して、本発明の第2の実施の形態に係る電子機器100を実現する構成について説明する。図18は、本実施の形態に係る電子機器100によって実現される機能の構成を表わすブロック図である。電子機器100は、図14に示される構成に加えて、速さ算出部1810をさらに備える。速さ算出部1810は、第1の表示部1410に対する操作入力として基点の始点から終点までを描くために入力された操作の速さが予め定められた速さを上回るか否かを判断する。ある局面において、速さ算出部1810は、画像処理エンジン280から送られる各画素に基づいて特定される位置情報とその位置情報に関連付けられる時刻情報とを用いて、軌跡の始点から終点までの入力が行なわれた速さを算出する。
第1の表示部1410におけるジェスチャーは、たとえば、第1の表示部1410において画像が選択された後の出力に基づいて特定される。当該ジェスチャーは、使用者によって描かれた軌跡の始点から終点までの操作入力である。この操作入力の速さが予め定められた速さを上回る場合、表示制御部1450は、第1の表示部1410に表示されていた画像を第2の表示部1420において指定された位置に表示する。
あるいは、当該操作入力の速さが予め定められた速さを下回る場合、表示制御部1450は、第1の表示部1410に表示されていた画像を、その第1の表示部1410の表示領域におい当該軌跡の終点によって特定される新たな位置に表示する。この場合、画像の表示は、同一の表示部である第1の表示部1410内で場所が切り換わるに過ぎない。その他の機能は、第1の実施の形態に係る電子機器100によって実現される機能と同じであるため説明は繰り返さない。
次に、図19および図20を参照して、本実施の形態に係る電子機器100における画像の移動について説明する。図19は、液晶パネル240に表示されている画像が液晶パネル140に移動されない場合、すなわち同一の液晶パネル240内での移動に留まる場合を表わす図である。図20は、液晶パネル240に表示されている画像が液晶パネル140に移動される場合を表わす図である。
図19を参照して、たとえば、電子機器100の使用者がスタイラスペン1510を用いて画像1910を選択する。その後、使用者はスタイラスペン1510を軌跡1920のように移動させると、液晶パネル240における操作入力の時間と速度等の関係は、図19(B)のように示される。すなわち、液晶パネル240において軌跡1920の入力が完了するため、画像処理エンジン280からの信号に基づいて算出される操作入力の速さは、最後には「0」となる。この場合、CPU110は、液晶パネル240における入力を当該液晶パネル240内のみ移動と判断する。CPU110は、スタイラスペン1510によって最後に入力された場所を移動先として決定する。CPU110は、その入力された場所を含む信号を、画像1910の移動先としてドライバ制御部281に与える。ドライバ制御部281は、その信号に基づいて液晶パネル240に画像1910に対応する画像を表示する。液晶パネル240に表示されていた画像は、液晶パネル140に表示されなくなる。
図20を参照して、電子機器100の使用者がスタイラスペン1510を用いて液晶パネル240から液晶パネル140まで横断するように軌跡を与えると、液晶パネル240に表示されていた画像2010は、液晶パネル140において画像2020として表示される。この場合、液晶パネル240に対して与えられる操作入力は、表示領域が終わるまで一定の速度によって与えられるため、画像処理エンジン280からの出力に基づいて算出される速さも「0」にはならない(図20(B)参照)。したがって、CPU110は、そのような入力は液晶パネル240に表示されていた画像を液晶パネル140に移動させるための命令であると判定する。CPU110は、液晶パネル240に表示されていた画像2010を、液晶パネル140に対して最後に与えられた入力によって特定される場所に出力先を切り換える。その結果、液晶パネル140は、スタイラスペン1510が最後に接触していた場所に画像2020を表示する。
制御構造
図21を参照して、本実施の形態に係る電子機器100の制御構造について説明する。図21は、電子機器100が備えるCPU110によって実現される一連の処理の一部を表わすフローチャートである。なお、第1の実施の形態に係る処理と同一の処理には同一のステップ番号を付してある。したがってそれらの説明は繰り返さない。
ステップS2110にて、CPU110は、液晶パネル240からの出力に基づいて、液晶パネル240の表示領域におけるジェスチャーの終了を検知する。
ステップS2120にて、CPU110は、液晶パネル240からの出力タイミングに基づいて、液晶パネル240に与えられたジェスチャーの終了時の速度を算出する。
ステップS2140にて、CPU110は、算出した速度が予め設定された速度以上であるか否かを判定する。CPU110は、算出した速度が当該予め設定された速度以上であると判定すると(ステップS2140にてYES)、制御をステップS2150に切り換える。そうでない場合には(ステップS2140にてNO)、CPU110は、制御をステップS2170に切り換える。
ステップS2150にて、CPU110は、電子機器100に対するスタイラスペン1510による操作入力は、液晶パネル240から液晶パネル140へ画像の表示先を切り換える命令であると判断する。
ステップS2160にて、CPU110は、液晶パネル140の表示領域においてタッチされた場所に、その選択された画像の出力先を指定する。液晶パネル140は、ドライバ130からの命令に基づいて対応する画像を表示する。
ステップS2170にて、CPU110は、電子機器100に対する操作入力を、液晶パネル240の表示内での移動と判断する。
ステップS2180にて、CPU110は、液晶パネル240の表示領域においてスタイラスペン1510を用いたジェスチャーが終了した場所(最後に入力された地点)を、当該画像の新たな表示先として指定する。液晶パネル240は、当初表示されていた場所から新たに指定された場所に画像を切り換えて表示する。
以上のようにして、本実施の形態に係る電子機器100によると、画像の表示先の切り換えは、液晶パネル240に対する操作入力の速度に応じて行なわれる。このようにすると、電子機器100の使用者の意図をスタイラスペン1510その他の入力装置に反映することにより、表示先を切り換えることができる。したがって、使用者の直感に従った操作が可能となるため、使用者に対するストレスを抑制することができる。
[第3の実施の形態]
以下、本発明の第3の実施の形態について説明する。本実施の形態に係る電子機器100は、液晶パネル間の画像の移動を、画像が表示されている液晶パネルに対して与えられた軌跡の長さに応じて判断する機能を有する点で、前述の各実施の形態と異なる。
機能構成
そこで、図22を参照して、本発明の第3の実施の形態に係る電子機器を実現する構成について説明する。図22は、本実施の形態に係る電子機器100の機能的構成を表わすブロック図である。本実施の形態に係る電子機器100は、第1の実施の形態に係る電子機器100の構成(図4)に加えて、軌跡長さ算出部2210をさらに備える。軌跡長さ算出部2210は、選択検知部1430からの出力に基づいて、第1の表示部1410に対して与えられたスタイラスペン1510による軌跡の長さを算出する。軌跡長さ算出部2210の出力は、表示制御部1450に入力される。
第1の表示領域における軌跡の長さは、第1の表示部1410における選択後の出力に基づいて特定される。この軌跡の長さが予め定められた長さを上回る場合、表示制御部1450は、第1の表示部1410に表示されていた画像を、第2の表示部1420の表示領域において指定された位置に表示する。第2の表示部1420における表示の位置は、たとえば、スタイラスペン1510によるタッチ操作に基づいて決定される。
他の局面において、当該軌跡の長さが当該予め定められた長さを下回る場合には、表示制御部1450は、第1の表示領域に表示されていた画像を、第2の表示部1420に移動させることなく、第1の表示部1410においてスタイラスペン1510のタッチ操作によって特定される位置に表示する。この場合、画像は、第1の表示部1410の表示領域内の移動に留まる。
制御構造
図23を参照して、本発明の実施の形態に係る電子機器100の制御構造について説明する。図23は、CPU110が実行する一連の動作の一部を表わすフローチャートである。なお、前述の各実施の形態における処理と同一の処理には同一のステップ番号を付してある。したがってそれらの説明は繰り返さない。
ステップS2310にて、CPU110は、画像処理エンジン280からの出力に基づいて、液晶パネル240における軌跡の長さを算出する。ステップS2320にて、CPU110は、その算出した長さが予め設定された長さ以上であるか否かを判定する。CPU110は、その長さが当該設定された長さ以上であると判定すると(ステップS2320にてYES)、制御をステップS2150に切り換える。そうでない場合には(ステップS2320にてNO)、CPU110は、制御をステップS2170に切り換える。
ステップS2150にて、CPU110は、液晶パネル240に対するタッチ操作が液晶パネル240に表示されていた画像を液晶パネル140に移動するための切り換えと判断し、前述のような処理を実行する(ステップS2160)。一方、ステップS2170にて、CPU110は、液晶パネル240に対する操作を、液晶パネル240の表示領域内における画像の移動と判断し、前述の処理を繰り返す(ステップS2180)。
表示態様
図24および図25を参照して、本実施の形態に係る電子機器100における画面の表示態様について説明する。図24は、画像が同一パネル内において移動される場合の状態を表わす図である。図25は、画像が液晶パネル240から液晶パネル140に移動して表示される場合を表わす図である。
・同一画面内の移動
図24(A)を参照して、電子機器100の使用者は、スタイラスペン1510を用いて液晶パネル240に表示されている画像2410を選択する。その後、使用者が、スタイラスペン1510を用いて画像2410を方向2420のようになぞる動作を行なうと、CPU110は、移動距離2440を算出する。この場合、スタイラスペン1510による選択と、なぞる動作との間の時間は、予め設定された時間以内であることが好ましい。すなわち、電子機器が連続した動作として認識できる場合に、画像の移動を行なう。CPU110は、算出した移動距離2440が予め設定された長さ以下であると判定すると(ステップS2320にてNO)、画像2410の移動が、液晶パネル240の表示領域内の移動である判断する(ステップS2170)。その結果、CPU110は、画像2430として液晶パネル240においてスタイラスペン1510によって選択された位置に画像2410を表示する。
・2画面間の移動
一方、図25を参照して、使用者が画像2510を選択して方向2520に向かってスタイラスペン1510を操作する。このとき操作した距離2540が予め設定された距離以上である場合(ステップS2320にてYES)、CPU110は、スタイラスペン1510による操作が液晶パネル240から液晶パネル140に画像の表示を切り換えるための入力であると判断する(ステップS2150)。使用者がスタイラスペン1510を用いて液晶パネル140における1点をタッチすると、CPU110は、そのタッチされた場所に画像2530を表示する(図25(B))。
以上のようにして、本実施の形態に係る電子機器100は、画像の移動の態様を、液晶パネル240に対して入力された軌跡の長さに応じて判断する。このようにすると、たとえば、予め設定された長さよりも長い入力が行なわれた場合に、画像を2画面間で移動させるように構成することができる。その結果、電子機器100の使用者は、移動の態様を直感で判断することができるため、電子機器100の操作性を向上させることができる。
以上詳述した各実施の形態は、移動前の画像は液晶パネル240に表示されており、移動後の画像は液晶パネル140に表示される態様であるが、この態様に限られない。すなわち、液晶パネル140に表示されている画像を液晶パネル240に表示させる態様であってもよい。また、双方向の移動が組み合わされてもよく、また、各方向の移動の判断基準は異なってもよい。
[変形例]
以下、本発明の実施の形態の変形例について説明する。前述の各実施の形態においては、液晶パネル140,240が上下方向に構成されており、スタイラスペン1510を用いた画面間の移動が上下方向に行なわれる場合について説明した。しかしながら、本発明に係る技術的思想は、上下方向に限られて適用されるものではない。たとえば、横方向に並んで配置された複数の表示装置間においても同様に適用することができる。
そこで、図26を参照して、本変形例に係る電子機器について説明する。図26は、液晶パネル140と液晶パネル240とが横方向に並べて配置された構成を表わす図である。たとえば画像2610が液晶パネル240に表示されている場合において、使用者がスタイラスペン1510を用いて軌跡2620のような操作を行なう。この場合、本変形例に係るCPU110は、軌跡2620の最後の方向が液晶パネル240から液晶パネル140に向かっていることを検知する。使用者がスタイラスペン1510を用いて液晶パネル140の1点をタッチすると、CPU150は、そのタッチを検知し、その検知した場所に、画像2630を表示する。これにより、横方向に並べて配置された2画面間の画像の移動を実現することができる。
また、他の局面において、電子機器100が備える液晶パネルは2つに限られず、それよりも多くてもよい。たとえば、4枚の液晶パネルがマトリクス状に配置された構成であってもよい。同様の配列として、9枚の液晶パネルがマトリクス状に配置された構成であってもよい。
また、電子機器100に対する入力操作は、スタイラスペン1510を用いた操作に限られない。たとえば、電子機器100の使用者の指が用いられてもよい。少なくとも、液晶パネルの表示領域において光の入射を妨げることによって画像の選択、移動方向が電子機器100によって認識される入力操作であればよい。
[実施例の効果]
以上詳述したように、各実施の形態に係る電子機器100によると、画像が表示されている液晶パネルにおいて、当該画像を選択した後の液晶パネルに対する入力操作に応じて、当該画像を当該液晶パネルの他の位置に表示し、あるいは、他の液晶パネルに表示することができる。これにより、電子機器100の使用者は、画像の移動を直感的に行なうことができるため、電子機器100の利便性が向上し得る。
なお、上記の説明は、光センサ機能を有する液晶パネルを有する電子機器100を参照して行なわれたが、電子機器100は、必ずしも常に、当該液晶パネルを有する必要はない。すなわち、表示されている画像の移動のための操作入力は、液晶パネル以外の構成によっても受け付けられ得る。たとえば、タッチパネル式の表示装置を有する電子機器、あるいは、ノートブックコンピュータ等が使用するタッチパッドを有する電子機器等も、同様に、表示されている画像の移動のための操作入力を検知し、その検知結果に応じて、画像の表示場所の変更を実現することができる。
今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。
本発明の実施の形態に係る電子機器100の外観を示した図である。 電子機器100のハードウェア構成を表わすブロック図である。 液晶パネル140の構成と、液晶パネル140の周辺回路とを示した図である。 液晶パネル140とバックライト179との断面図である。 光センサ回路144を動作させる際のタイミングチャートを示した図である。 液晶パネル140とバックライト179との断面図であって、スキャンの際にフォトダイオード145がバックライト179からの光を受光する構成を示した図である。 センシングコマンドの概略構成を示した図である。 センシングコマンドの各領域におけるデータの値と、当該値が示す意味内容とを示した図である。 応答データの概略構成を示した図である。 指900をスキャンすることにより得られた画像を示した図である。 構成の変形例に係る光センサ内蔵液晶パネル140Aの回路図である。 スキャンの際にフォトダイオードが外光を受光する構成を示した断面図である。 電子機器100Aのハードウェア構成を表すブロック図である。 電子機器100の機能の構成を表わすブロック図である。 液晶パネル240に表示されている画像を液晶パネル140に移動する場合における画面の切り換わりを表わす図である。 電子機器100に対するジェスチャーを表わす図である。 電子機器100のCPU110が実行する一連の処理の一部を表わすフローチャートである。 本発明の第2の実施の形態に係る電子機器100によって実現される機能の構成を表わすブロック図である。 液晶パネル240に表示されている画像が液晶パネル140に移動されずに液晶パネル240内で移動される場合を表わす図である。 液晶パネル240に表示されている画像が液晶パネル140に移動される場合を表わす図である。 電子機器100が備えるCPU110によって実現される一連の処理の一部を表わすフローチャートである。 本発明の第3の実施の形態に係る電子機器100の機能的構成を表わすブロック図である。 本発明の第3の実施の形態に係る電子機器100のCPU110が実行する一連の動作の一部を表わすフローチャートである。 画像が同一パネル内において移動される場合の状態を表わす図である。 画像が液晶パネル240から液晶パネル140に移動して表示される場合を表わす図である。 液晶パネル140と液晶パネル240とが横方向に並べて配置された構成を表わす図である。
符号の説明
100 電子機器、100A 第1の筐体、100B 第2の筐体、100C ヒンジ、101 本体装置、102,103 表示装置、134 スイッチ、135 アンプ、140,140A,240 光センサ液晶内蔵パネル、141 画素回路、141r Rサブピクセル回路、141g Gサブピクセル回路、141b Bサブピクセル回路、142,147,147r,147g,147b TFT、143 電極対、143a 画素電極、143b 対向電極、144,144r,144g,144b 光センサ回路、145 フォトダイオード、146 コンデンサ、151A アクティブマトリクス基板、151B 対向基板、152 液晶層、153r,153g,153b カラーフィルタ、157 データ信号線、161 偏光フィルタ、162 ガラス基板、163 遮光膜、164 配光膜、177 操作キー、179 バックライト、900 指、1300 電子機器、1500 画像、1510 スタイラスペン、1520 軌跡、1610,1620,1630,1640 曲線、1910 画像、1920 軌跡、2010,2020 画像、2410,2430 画像、2420 方向、2440 移動距離、2510,2530 画像、2520 方向、2540 移動距離、2610,2630 画像、2620 方向、C1 中心点、P1 領域、RWi 読出信号線、SRj,SGj,SBj データ信号線、SSj,SDj,SSRj,SSGj,SSBj,SDRj,SDGj,SDRj センサ信号線、W1 領域。

Claims (9)

  1. 表示装置であって、
    画像を表示するための第1の表示領域を有する第1の表示手段と、
    画像を表示するための第2の表示領域を有する第2の表示手段と、
    前記第1の表示領域に表示されている画像が選択されたことを検知する第1の選択検知手段と、
    選択された前記画像を移動するための操作入力に基づいて、選択された前記画像の表示場所を、前記第1の表示手段から前記第2の表示手段に切り換える表示制御手段とを備え、
    前記表示制御手段は、
    前記操作入力に基づいて特定される前記第1の表示領域における軌跡が予め規定されたパターンに対応するか否かを判断し、
    前記第1の表示領域における操作が終了してから前記第2の表示領域における操作が与えられるまでの時間が予め定められた時間内である場合であって、かつ、前記軌跡が前記予め規定されたパターンに対応する場合に、前記画像の表示を前記第1の表示領域から前記第2の表示領域に切り換える、表示装置。
  2. 前記第1の表示手段は、前記第1の表示領域に沿って内蔵された複数の光センサを含む、請求項1に記載の表示装置。
  3. 前記第2の表示手段は、前記第2の表示領域に沿って内蔵された複数の光センサを含む、請求項1または2に記載の表示装置。
  4. 前記第2の表示領域において指定された位置の座標値を検出する座標値検出手段をさらに備え、
    前記表示制御手段は、前記第1の表示領域に表示されていた画像を、前記座標値に基づいて、前記第2の表示領域において指定された位置に表示する、請求項1からのいずれかに記載の表示装置。
  5. 前記操作入力に基づいて特定される前記第1の表示領域における軌跡の長さが予め定められた長さを下回る場合に、または、前記第1の表示領域における軌跡の始点から終点までの前記操作入力の速さが定められた速さを下回る場合に、前記表示制御手段は、前記第1の表示領域に表示されていた画像を、前記第1の表示領域において前記軌跡の終点により特定される位置に表示する、請求項1から請求項のいずれかに記載の表示装置。
  6. 前記第1の表示領域のうちの周辺領域として予め設定された領域に前記画像が表示されている場合、前記表示制御手段は、前記第1の表示領域における前記軌跡の検知に応答して、前記画像を前記第2の表示領域に表示する、請求項1〜のいずれかに記載の表示装置。
  7. 前記軌跡の終点を含むベクトルの方向に前記第2の表示手段が位置している場合に、前記表示制御手段は、前記第1の表示領域に表示されていた画像を前記第2の表示領域に表示する、請求項1からのいずれかに記載の表示装置。
  8. 第1の表示領域に画像を表示するステップと、
    前記画像を移動するための操作入力に基づいて、前記第1の表示領域に表示された画像が選択されたことを検知するステップと、
    前記選択された画像を、前記第1の表示領域または前記第1の表示領域と異なる第2の表示領域のいずれの表示領域に表示するかを決定するステップと、
    前記第1の表示領域に表示されていた画像を、決定された表示領域に表示するステップとを含み、
    前記表示するステップは、
    前記操作入力に基づいて特定される前記第1の表示領域における軌跡が予め規定されたパターンに対応するか否かを判断するステップと、
    前記第1の表示領域における操作が終了してから前記第2の表示領域における操作が与えられるまでの時間が予め定められた時間内である場合であって、かつ、前記軌跡が前記予め規定されたパターンに対応する場合に、前記画像の表示を前記第1の表示領域から前記第2の表示領域に切り換えるステップとを含む、表示装置の制御方法。
  9. 表示装置を制御するためのプログラムであって、
    前記プログラムは、前記表示装置のコンピュータに、
    第1の表示領域に画像を表示するステップと、
    前記画像を移動するための操作入力に基づいて、前記第1の表示領域に表示された画像が選択されたことを検知するステップと、
    前記選択された画像を、前記第1の表示領域または前記第1の表示領域と異なる第2の表示領域のいずれの表示領域に表示するかを決定するステップと、
    前記第1の表示領域に表示されていた画像を、決定された表示領域に表示するステップとを実行させ、
    前記表示するステップは、
    前記操作入力に基づいて特定される前記第1の表示領域における軌跡が予め規定されたパターンに対応するか否かを判断するステップと、
    前記第1の表示領域における操作が終了してから前記第2の表示領域における操作が与えられるまでの時間が予め定められた時間内である場合であって、かつ、前記軌跡が前記予め規定されたパターンに対応する場合に、前記画像の表示を前記第1の表示領域から前記第2の表示領域に切り換えるステップとを含む、表示装置を制御するためのプログラム
JP2008274607A 2008-10-24 2008-10-24 表示装置、表示装置の制御方法、表示装置を制御するためのプログラム Expired - Fee Related JP5289889B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008274607A JP5289889B2 (ja) 2008-10-24 2008-10-24 表示装置、表示装置の制御方法、表示装置を制御するためのプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008274607A JP5289889B2 (ja) 2008-10-24 2008-10-24 表示装置、表示装置の制御方法、表示装置を制御するためのプログラム

Publications (2)

Publication Number Publication Date
JP2010102581A JP2010102581A (ja) 2010-05-06
JP5289889B2 true JP5289889B2 (ja) 2013-09-11

Family

ID=42293164

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008274607A Expired - Fee Related JP5289889B2 (ja) 2008-10-24 2008-10-24 表示装置、表示装置の制御方法、表示装置を制御するためのプログラム

Country Status (1)

Country Link
JP (1) JP5289889B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012203644A (ja) * 2011-03-25 2012-10-22 Kyocera Corp 電子機器
KR20140041570A (ko) * 2011-06-24 2014-04-04 톰슨 라이센싱 사용자의 눈 이동으로 동작가능한 컴퓨터 장치 및 컴퓨터 장치를 동작하는 방법

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0644001A (ja) * 1992-07-27 1994-02-18 Toshiba Corp 表示制御装置及び表示制御方法
JP2004280319A (ja) * 2003-03-14 2004-10-07 Canon Electronics Inc 座標入力装置
US8046701B2 (en) * 2003-08-07 2011-10-25 Fuji Xerox Co., Ltd. Peer to peer gesture based modular presentation system

Also Published As

Publication number Publication date
JP2010102581A (ja) 2010-05-06

Similar Documents

Publication Publication Date Title
JP5278948B2 (ja) オブジェクト表示装置、オブジェクト表示方法、およびオブジェクト表示プログラム
JP5540344B2 (ja) 電子機器、メニューの選択方法、メニューの選択プログラム
JP5240773B2 (ja) 情報処理装置、情報処理方法および情報処理プログラム
WO2010050477A1 (ja) 2つの表示装置を有する電子機器、その制御方法および記録媒体
JP5322163B2 (ja) 表示装置、表示方法、および表示プログラム
JP2010134625A (ja) 電子機器、表示制御方法、およびプログラム
JP2011008424A (ja) 電子機器、動作モード設定方法、およびプログラム
JP5303785B2 (ja) 表示装置、表示方法、および表示プログラム
JP5526397B2 (ja) コンテンツ表示装置、コンテンツ表示方法、およびコンテンツ表示プログラム
JP5344555B2 (ja) オブジェクト表示装置、オブジェクト表示方法、およびオブジェクト表示プログラム
JP5126895B2 (ja) 電子機器、および表示制御方法
JP2010140329A (ja) 表示装置、表示方法、および表示プログラム
JP5707029B2 (ja) 電子機器、電子機器の制御方法および電子機器の制御プログラム
JP5334171B2 (ja) 電子機器、および表示制御方法
JP5617120B2 (ja) 電子機器、表示制御方法、およびプログラム
JP2010204918A (ja) 電子機器、情報処理システム、電子機器の制御方法および電子機器の制御プログラム
JP5110594B2 (ja) 情報処理装置、情報処理方法、および情報処理プログラム
JP5289889B2 (ja) 表示装置、表示装置の制御方法、表示装置を制御するためのプログラム
JP5380729B2 (ja) 電子機器、表示制御方法、およびプログラム
JP2010204729A (ja) テキスト表示装置、テキスト表示方法、およびテキスト表示プログラム
WO2010103888A1 (ja) コンテンツ表示装置、コンテンツ表示方法、およびコンテンツ表示プログラムを記録するコンピュータ読取可能な記録媒体
JP5257892B2 (ja) 電子機器、画面切替方法および画面切替プログラム
JP5172641B2 (ja) 電子機器、情報処理方法および情報処理プログラム
JP2010108373A (ja) 電子機器、アプリケーションプログラム、情報処理端末およびその制御プログラム
JP2011008425A (ja) 電子機器、動作モード設定方法、およびプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110922

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120717

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120718

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120913

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20130122

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130418

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20130425

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130514

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130605

LAPS Cancellation because of no payment of annual fees