JP2005275644A - Liquid crystal display - Google Patents

Liquid crystal display Download PDF

Info

Publication number
JP2005275644A
JP2005275644A JP2004085999A JP2004085999A JP2005275644A JP 2005275644 A JP2005275644 A JP 2005275644A JP 2004085999 A JP2004085999 A JP 2004085999A JP 2004085999 A JP2004085999 A JP 2004085999A JP 2005275644 A JP2005275644 A JP 2005275644A
Authority
JP
Japan
Prior art keywords
liquid crystal
crystal display
pixel
sensor
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004085999A
Other languages
Japanese (ja)
Inventor
Sueyoshi Oshima
季佳 尾島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2004085999A priority Critical patent/JP2005275644A/en
Publication of JP2005275644A publication Critical patent/JP2005275644A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Liquid Crystal (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)
  • Position Input By Displaying (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a liquid crystal display provided with a touch sensor capable of detecting contact even when force pushing a screen is weak. <P>SOLUTION: The liquid crystal display is provided with a liquid crystal display panel 11 having a backlight 10 emitting an invisible ray and a visible ray, and fist and second principle planes, and the backlight is arranged such that it is positioned in a second principle plane side. The liquid crystal display panel 11 has a first sensor detecting the invisible ray, and it includes a plurality of two-dimensionally arranged picture elements. Positional information of an object on the first principle plane is acquired by detecting reflected light obtained by reflecting the invisible ray emitted from the backlight and transmitted through the liquid crystal display panel by the object contacting or adjacent to the first principle plane of the liquid crystal display panel by the first sensor 25. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は液晶表示装置に関し、画面に情報入力機能が設けられた液晶表示装置に関する。   The present invention relates to a liquid crystal display device, and more particularly to a liquid crystal display device having an information input function on a screen.

指やペンの接触した位置を検出するタッチセンサあるいはタッチパネルが位置情報入力手段として従来より広く用いられている。特に、画面にタッチパネルを設けたタッチパネル付き液晶表示装置は、多くの機能を備えた機器において、変化する選択可能な操作や機能をリアルタイムで画面に表示して説明するとともに、その操作や機能の選択をタッチパネルによって行うことができる。このため、機器の操作が容易で、ユーザフレンドリーな入力装置として、ビデオカメラやカーナビゲーションシステムなどの情報機器や産業用の製造機器などに用いられている。   Conventionally, a touch sensor or a touch panel for detecting a position touched by a finger or a pen has been widely used as position information input means. In particular, a liquid crystal display device with a touch panel provided with a touch panel on the screen is explained in real-time by displaying on the screen the changing selectable operations and functions on a device with many functions, and selecting the operations and functions. Can be performed by a touch panel. For this reason, the operation of equipment is easy, and it is used as a user-friendly input device for information equipment such as a video camera and a car navigation system, industrial manufacturing equipment, and the like.

タッチパネルの位置検出方式としは、抵抗膜方式や静電容量方式などが一般的である。従来のタッチパネル付き液晶表示装置では、位置検出方法から生じる制限により、2箇所以上において接触している接触物の位置情報を取得することが困難であった。この問題を解決するために、たとえば、特許文献1は、帯状の導電性パターンが複数平行に配列された一対のパネルを導電性パターンが交差するように支持し、導電性パターンを走査して、押圧による接触点を検出する方法を開示している。
特開2002−342014号公報 特開平9−199086公報 特許第3224467号明細書
As a touch panel position detection method, a resistance film method or a capacitance method is generally used. In a conventional liquid crystal display device with a touch panel, it has been difficult to acquire position information of a contact object that is in contact at two or more places due to a restriction caused by the position detection method. In order to solve this problem, for example, Patent Document 1 supports a pair of panels in which a plurality of strip-like conductive patterns are arranged in parallel so that the conductive patterns intersect, and scans the conductive patterns. A method for detecting a contact point by pressing is disclosed.
JP 2002-342014 A JP-A-9-199086 Japanese Patent No. 3224467

しかしながら、従来のタッチパネルおよび特許文献1に開示されたタッチパネルでは、位置情報を検出させるために指やペンなどでパネルに圧力をかけて押す必要がある。このため、押す力が弱いと正しく検出されないという問題がある。   However, in the conventional touch panel and the touch panel disclosed in Patent Document 1, it is necessary to press and press the panel with a finger or a pen in order to detect position information. For this reason, there is a problem that if the pushing force is weak, it is not correctly detected.

また、入力動作が繰り返されると、タッチパネルの特定の領域が繰り返し、指やペンと接触するため、表面が劣化しやすいという問題が生じる。   Further, when the input operation is repeated, a specific area of the touch panel is repeatedly contacted with a finger or a pen, so that there is a problem that the surface is easily deteriorated.

また、タッチパネルを表示装置の画面に設けることによって、外光反射が生じたり、表示装置の表示光の透過率が低下するなどが生じ、視認性が低下するという問題も生じる。   In addition, by providing a touch panel on the screen of the display device, external light reflection occurs, the display light transmittance of the display device is reduced, and the visibility is lowered.

本発明はこのような従来の課題の少なくとも1つを解決し、複数の位置情報を取得することが可能な表示装置を提供することを目的としている。   An object of the present invention is to solve at least one of the conventional problems and to provide a display device capable of acquiring a plurality of pieces of position information.

本発明の液晶表示装置は、不可視光線および可視光線を出射するバックライトと、第1および第2の主面を有し、前記第2の主面側に前記バックライトが位置するよう配置された液晶表示パネルであって、前記不可視光線を検出する第1のセンサをそれぞれ有し、二次元的に配置された複数の画素を含む液晶表示パネルとを備え、前記バックライトから出射し、前記液晶表示パネルを透過した不可視光線が前記液晶表示パネルの第1の主面に接触あるいは近接した物体により反射することにより得られる反射光を前記第1のセンサで検出することにより、前記第1の主面上における前記物体の位置情報を取得する。   The liquid crystal display device of the present invention has a backlight that emits invisible light and visible light, and first and second main surfaces, and is arranged such that the backlight is located on the second main surface side. A liquid crystal display panel, each having a first sensor for detecting the invisible light, and including a plurality of pixels arranged two-dimensionally. The liquid crystal display panel emits from the backlight, and the liquid crystal By detecting reflected light obtained by reflecting invisible light transmitted through the display panel by an object that is in contact with or close to the first main surface of the liquid crystal display panel, the first main sensor detects the reflected light. The position information of the object on the surface is acquired.

ある好ましい実施形態において、前記画素は可視光線を検出する第2のセンサをさらに含む。   In a preferred embodiment, the pixel further includes a second sensor that detects visible light.

ある好ましい実施形態において、前記画素は、液晶層と、前記液晶層を挟む一対の偏光板とを含み、前記偏光板は、可視光線を偏光し、不可視光線を偏光しない。   In a preferred embodiment, the pixel includes a liquid crystal layer and a pair of polarizing plates sandwiching the liquid crystal layer, and the polarizing plate polarizes visible light and does not polarize invisible light.

ある好ましい実施形態において、前記画素は、画素電極および前記画素電極と向き合う対向電極とを有し、前記第1のセンサは前記対向電極および画素電極が設けられた領域外の領域に設けられている。   In a preferred embodiment, the pixel includes a pixel electrode and a counter electrode facing the pixel electrode, and the first sensor is provided in a region outside the region where the counter electrode and the pixel electrode are provided. .

ある好ましい実施形態において、前記液晶パネルは、異なる波長領域の光を透過するN種(Nは2以上の整数)以上のフィルタ部が複数設けられたカラーフィルタを含み、隣接するN個の画素ごとにそれぞれ前記N種のフィルタ部を含み、カラー画素を構成している。   In a preferred embodiment, the liquid crystal panel includes a color filter provided with a plurality of N or more (N is an integer of 2 or more) filter portions that transmit light in different wavelength regions, and each adjacent N pixels. Each of which includes the N types of filter sections to constitute a color pixel.

ある好ましい実施形態において、前記カラーフィルタには赤、青、緑の三種のフィルタ部が複数設けられている。   In a preferred embodiment, the color filter is provided with a plurality of three types of filter portions of red, blue, and green.

ある好ましい実施形態において、前記フィルタ部は、前記対向電極および画素電極が設けられた領域および前記第2のセンサが設けられた領域を覆っている。   In a preferred embodiment, the filter section covers a region where the counter electrode and the pixel electrode are provided and a region where the second sensor is provided.

ある好ましい実施形態において、液晶表示装置は、前記画素の第1のセンサで検出した信号から前記物体の位置情報を生成する第1の検出部と、前記物体の位置情報に基づいて、前記物体が位置する領域の画素から前記バックライトの前記可視光線が出射するように、前記液晶表示パネルに表示すべき画像信号を修正する画像合成部と、前記画像合成部から得られる出力に基づいて前記液晶表示パネルを駆動する駆動部と、前記各画素の第2のセンサで検出した信号から2次元画像情報を生成する第2の検出部とをさらに備える。   In a preferred embodiment, the liquid crystal display device includes: a first detection unit that generates position information of the object from a signal detected by a first sensor of the pixel; and the object based on the position information of the object. An image composition unit for correcting an image signal to be displayed on the liquid crystal display panel so that the visible light of the backlight is emitted from a pixel in a region located, and the liquid crystal based on an output obtained from the image composition unit A drive unit that drives the display panel and a second detection unit that generates two-dimensional image information from a signal detected by the second sensor of each pixel are further included.

ある好ましい実施形態において、前記第1の検出部は、前記各カラー画素を構成するN個の画素のうち、1つ画素の第1のセンサで検出した信号に基づいて前記カラー画素の他の画素の第1のセンサで検出した信号を生成する。   In a preferred embodiment, the first detection unit includes other pixels of the color pixel based on a signal detected by a first sensor of one pixel among N pixels constituting the color pixels. A signal detected by the first sensor is generated.

ある好ましい実施形態において、前記バックライトは、可視光線を出射する可視光光源と不可視光線を出射する不可視光光源とを含み、前記不可視光光源は所定の周期で駆動され、前記第1のセンサから得られる検出信号が前記所定の周期と一致する場合に前記物体の位置情報を取得する。   In a preferred embodiment, the backlight includes a visible light source that emits visible light and an invisible light source that emits invisible light, and the invisible light source is driven at a predetermined period, and is from the first sensor. If the obtained detection signal coincides with the predetermined period, the position information of the object is acquired.

本発明によれば、画面に接触する物体を検出するのにバックライトから出射する不可視光線を用いる。このため、物体が画面に強く接触する必要はなく、押す力が弱くても確実に物体の検出を行うことができる。たとえば、写真や絵などの接触も検出することができる。複数の位置を同時に検出することもできる。   According to the present invention, invisible light emitted from the backlight is used to detect an object that touches the screen. For this reason, it is not necessary for the object to come into strong contact with the screen, and the object can be reliably detected even if the pressing force is weak. For example, contact with a photograph or a picture can be detected. A plurality of positions can also be detected simultaneously.

本発明の液晶表示装置は、バックライトから赤外線などの不可視光線を出射し、画面に接触している指などの物体により反射した不可視光線を画素に設けたセンサで検出する。これにより、物体の画面上での位置情報を取得する。バックライトから出射する不可視光線の反射を利用するため、指やペンを画面に強く接触させることなく、位置情報を取得できる。また、本発明の液晶表示装置は画像の取り込みも行うことができる。以下、図面を参照しながら、本発明の液晶表示装置の実施形態を説明する。   The liquid crystal display device of the present invention emits invisible light such as infrared rays from a backlight, and detects the invisible light reflected by an object such as a finger in contact with the screen with a sensor provided in the pixel. Thereby, the position information on the screen of the object is acquired. Since the reflection of the invisible light emitted from the backlight is used, position information can be acquired without bringing a finger or pen into strong contact with the screen. The liquid crystal display device of the present invention can also capture an image. Hereinafter, embodiments of the liquid crystal display device of the present invention will be described with reference to the drawings.

図1(a)および図1(b)は、本実施形態による液晶表示装置100の1画素101の断面構造を模式的に示している。図2に示すように、画素101の直交する1(a)−1(a)断面および1(b)−1(b)断面をそれぞれ図1(a)および図1(b)は示している。図2に示すように、各画素101は領域101a、101b、および101cに分割される。各画素101の領域101aは通常の液晶表示装置と同様、映像を表示する画素領域となる。領域101bには可視光線を検出する検出センサが設けられており、画面に接触した物体の画像を取り込む。領域101cには不可視光線を検出する検出センサが設けられており、画面に接触した物体の位置情報を取得する。   1A and 1B schematically show a cross-sectional structure of one pixel 101 of the liquid crystal display device 100 according to the present embodiment. As shown in FIG. 2, FIG. 1 (a) and FIG. 1 (b) show the 1 (a) -1 (a) and 1 (b) -1 (b) cross sections of the pixel 101 orthogonal to each other. . As shown in FIG. 2, each pixel 101 is divided into regions 101a, 101b, and 101c. A region 101a of each pixel 101 is a pixel region for displaying an image, as in a normal liquid crystal display device. The area 101b is provided with a detection sensor that detects visible light, and captures an image of an object that has touched the screen. The region 101c is provided with a detection sensor that detects invisible light, and acquires position information of an object that has touched the screen.

液晶表示装置100は、透過型であり、バックライト10と、液晶パネル11とを備えている。バックライト10は、各画素101の領域101a、101bおよび101cに設けられ、可視光線および不可視光線を出射する。液晶表示装置100により、カラー画像を表示する場合には可視光線は白色光線であることが好ましい。不可視光線は、位置情報を取得するべき物体を透過しない波長領域を含んでいることが好ましい。赤外線は多くの物質の表面で反射し、また、物質にダメージを与えることがないため、不可視光線として好適に用いることができる。   The liquid crystal display device 100 is a transmissive type, and includes a backlight 10 and a liquid crystal panel 11. The backlight 10 is provided in the regions 101a, 101b, and 101c of each pixel 101, and emits visible light and invisible light. When a color image is displayed by the liquid crystal display device 100, the visible light is preferably white light. The invisible light preferably includes a wavelength region that does not pass through the object whose position information is to be acquired. Infrared rays are reflected on the surface of many substances and do not damage the substances, so that they can be suitably used as invisible rays.

可視光線および不可視光線を出射する光源をバックライト10としても用いてもよいし、可視光線および不可視光線をそれぞれ出射する異なる光源を組み合わせてバックライト10として用いてもよい。たとえば、赤外線領域および可視光線領域の光を出射する光源として特許文献2に開示された冷陰極蛍光ランプを用いることができる。この冷陰極蛍光ランプは、クロム付活アルミン酸イットリウムを蛍光体として用いることによって可視光線および赤外線領域の光を放出することができる。   A light source that emits visible light and invisible light may be used as the backlight 10, or different light sources that emit visible light and invisible light may be used in combination as the backlight 10. For example, the cold cathode fluorescent lamp disclosed in Patent Document 2 can be used as a light source that emits light in an infrared region and a visible light region. This cold cathode fluorescent lamp can emit light in the visible and infrared regions by using chromium-activated yttrium aluminate as a phosphor.

2つ以上の光源を組み合わせてバックライト10を構成する例としては、たとえば、白色LEDと赤外線LEDとの組み合わせを好適に用いることができる。この場合には、白色LEDと赤外線LEDとを異なるタイミングで点灯させることができ、以下で詳細に説明するように、画像表示と独立して物体の位置検出を行うことができる。   As an example of configuring the backlight 10 by combining two or more light sources, for example, a combination of a white LED and an infrared LED can be suitably used. In this case, the white LED and the infrared LED can be turned on at different timings, and the position of the object can be detected independently of the image display, as will be described in detail below.

液晶パネル11は、第1の主面11aおよび第2の主面11bを有し、第2の主面側にバックライト10が位置するよう配置されている。液晶パネル11は、二次元に配列された複数の画素101によって構成され、各画素101は、液晶層17と、液晶層17を挟むように配置された対向電極15および画素電極19と、対向電極15および画素電極19をさらに挟むように配置された偏光板13および20とを含む。また、液晶層17と対向電極15および画素電極19との間には、液晶層17を構成する液晶分子の配向を制御するための配向膜16および17がそれぞれ設けられている。対向電極15および画素電極19は領域101aにのみ設けられる。液晶層17も領域101aにのみあればよいが、領域101bおよび101cに存在していてもよい。   The liquid crystal panel 11 has a first main surface 11a and a second main surface 11b, and is arranged so that the backlight 10 is located on the second main surface side. The liquid crystal panel 11 includes a plurality of pixels 101 arranged in two dimensions. Each pixel 101 includes a liquid crystal layer 17, a counter electrode 15 and a pixel electrode 19 arranged so as to sandwich the liquid crystal layer 17, and a counter electrode. 15 and the polarizing plate 13 and 20 arrange | positioned so that the pixel electrode 19 may be further pinched | interposed. Further, alignment films 16 and 17 for controlling the alignment of liquid crystal molecules constituting the liquid crystal layer 17 are provided between the liquid crystal layer 17 and the counter electrode 15 and the pixel electrode 19, respectively. The counter electrode 15 and the pixel electrode 19 are provided only in the region 101a. The liquid crystal layer 17 may also be present only in the region 101a, but may be present in the regions 101b and 101c.

画素電極19には図示しないTFTなどのスイッチング素子が接続されている。スイッチング素子によるスイッチング動作に応じて対向電極15と画素電極19との間に電圧を印加し、液晶の配向を変化させる。これによりバックライト10から可視光線が出射し、偏光板20を透過した直線偏光が変調され、偏光板13により可視化される。   A switching element such as a TFT (not shown) is connected to the pixel electrode 19. A voltage is applied between the counter electrode 15 and the pixel electrode 19 according to the switching operation by the switching element to change the alignment of the liquid crystal. As a result, visible light is emitted from the backlight 10, and linearly polarized light transmitted through the polarizing plate 20 is modulated and visualized by the polarizing plate 13.

本実施形態では、偏光板13および20と、対向電極15と、画素電極19と、液晶層17と、配向膜16および18とは、可視光線および不可視光線を透過する。偏光板13および20は可視光線を偏光し、不可視光線は偏光しないで透過させる特性を備えている。このような偏光板はたとえば、特許文献3に開示されている。偏光板13および20は、領域101a、101bおよび101cに設けられる。   In the present embodiment, the polarizing plates 13 and 20, the counter electrode 15, the pixel electrode 19, the liquid crystal layer 17, and the alignment films 16 and 18 transmit visible light and invisible light. The polarizing plates 13 and 20 have the property of polarizing visible light and transmitting invisible light without polarization. Such a polarizing plate is disclosed in Patent Document 3, for example. The polarizing plates 13 and 20 are provided in the regions 101a, 101b, and 101c.

液晶層17の厚さはスペーサ21および24によって規定される。各画素101において、画素電極19は領域101aに配置され、スペーサ21およびスペーサ24はそれぞれ領域101bおよび101cに設けられる。領域101bおよび101cの全体にスペーサ21およびスペーサ24が設けてもよいし、これらの領域の一部分にのみスペーサ21およびスペーサ24が設けられてもよい。スペーサ21および24は、可視光線および不可視光線を透過する。   The thickness of the liquid crystal layer 17 is defined by the spacers 21 and 24. In each pixel 101, the pixel electrode 19 is disposed in the region 101a, and the spacer 21 and the spacer 24 are provided in the regions 101b and 101c, respectively. The spacers 21 and 24 may be provided in the entire regions 101b and 101c, or the spacers 21 and 24 may be provided only in a part of these regions. The spacers 21 and 24 transmit visible light and invisible light.

図に示すように、各画素101は、さらに第1のセンサ25および第2のセンサ22とを備える。第1のセンサ25は不可視光線を検出し、第2のセンサ22は可視光線を検出する。第1のセンサ25および第2のセンサ22は、領域101cおよび101b内の偏光板13と偏光板20との間に設けられる。偏光板20とスペーサ24との間および偏光板20とスペーサ21との間にそれぞれ設けられていてもよい。   As shown in the figure, each pixel 101 further includes a first sensor 25 and a second sensor 22. The first sensor 25 detects invisible light, and the second sensor 22 detects visible light. The first sensor 25 and the second sensor 22 are provided between the polarizing plate 13 and the polarizing plate 20 in the regions 101c and 101b. It may be provided between the polarizing plate 20 and the spacer 24 and between the polarizing plate 20 and the spacer 21.

液晶パネル11は、各画素101の対向電極15と偏光板13との間に位置するようにカラーフィルタ14を備えている。カラーフィルタ14は、透過する光の波長領域が異なるN種(2以上の整数)のフィルタ部を複数有している。これらのフィルタ部は領域101aおよび領域101bに配置され、隣接する画素はそれぞれ異なる種類のフィルタ部で覆われる。N種のフィルタ部のうち、少なくとも1つは不可視光線を透過する必要がある。N種のフィルタ部は透過光が加法混色によって白色となるように選択されていることが好ましい。典型的には赤、青、緑のフィルタ部が選ばれるが、バックライト10の特性や実際に液晶表示装置に表示される画像の色彩や明度に応じて他の色のフィルタや白色フィルタなどを追加したり、赤、青、緑に換えて他の色のフィルタを用いてもよい。   The liquid crystal panel 11 includes a color filter 14 so as to be positioned between the counter electrode 15 of each pixel 101 and the polarizing plate 13. The color filter 14 has a plurality of N types (integers of 2 or more) of filter units having different wavelength regions of light to be transmitted. These filter units are arranged in the region 101a and the region 101b, and adjacent pixels are covered with different types of filter units. At least one of the N types of filter units needs to transmit invisible light. The N types of filter sections are preferably selected so that the transmitted light becomes white by additive color mixture. Typically, red, blue, and green filter units are selected. Depending on the characteristics of the backlight 10 and the color and brightness of the image actually displayed on the liquid crystal display device, other color filters, white filters, etc. Filters of other colors may be used instead of red, blue and green.

液晶パネル11は、さらに各画素101の領域101cに設けられる不可視光線用フィルタ27および領域101bに設けられるBM層23を備える。不可視光線用フィルタ27は、不可視光線のみを透過し、可視光線は透過しない。不可視光線用フィルタ27は、カラーフィルタ14の一部として設けられてもよい。BM層23は、第2の光センサ22と偏光板20との間に設けられ、少なくとも可視光線を遮断する。不可視光線をさらに遮断してもよい。BM層23は、バックライト10の光が領域101bから漏れるのを防ぎ、また、第2のセンサ21が裏面側から照射される可視光線を検出するのを防止する機能も果たす。同様に、バックライト10から出射する不可視光線を検出するのを防止するため、領域101cの第1の光センサ25と偏光板20との間に不可視光線を遮断するフィルタやBM層26を設けてもよい。   The liquid crystal panel 11 further includes an invisible light filter 27 provided in the region 101c of each pixel 101 and a BM layer 23 provided in the region 101b. The invisible light filter 27 transmits only invisible light and does not transmit visible light. The invisible light filter 27 may be provided as a part of the color filter 14. The BM layer 23 is provided between the second photosensor 22 and the polarizing plate 20 and blocks at least visible light. Invisible light may be further blocked. The BM layer 23 also functions to prevent light from the backlight 10 from leaking from the region 101b and to prevent the second sensor 21 from detecting visible light emitted from the back side. Similarly, in order to prevent detection of invisible light emitted from the backlight 10, a filter or a BM layer 26 for blocking invisible light is provided between the first optical sensor 25 and the polarizing plate 20 in the region 101c. Also good.

液晶パネル11において、カラー画素201は図5に示すように、2次元的に配置される。カラー画素201の各色の配置が均一となるよう、図4に示すカラー画素201’を一行ごとに交互に配置することが好ましい。カラー画素201’では、赤のフィルタ部を含む画素101Rの青および緑のフィルタ部を含む画素101B、101Gに対する配置が、カラー画素201とは反対になっている。また、各画素における領域101cの配置がカラー画素201とは反転している。   In the liquid crystal panel 11, the color pixels 201 are two-dimensionally arranged as shown in FIG. It is preferable to arrange the color pixels 201 'shown in FIG. 4 alternately for each row so that the arrangement of the colors of the color pixels 201 is uniform. In the color pixel 201 ′, the arrangement of the pixel 101 </ b> R including the red filter portion with respect to the pixels 101 </ b> B and 101 </ b> G including the blue and green filter portions is opposite to that of the color pixel 201. Further, the arrangement of the region 101c in each pixel is inverted from that of the color pixel 201.

次に、図1(a)および(b)を参照して、画素101の各部の機能を説明する。バックライト10は上述したように可視光線および不可視光線を含む光L1を出射する。バックライト10から出射する光L1は、不可視光線用フィルタ27およびBM膜23によって遮られるため、領域101aにおいてのみ第1の主面11a側から外部へ出射する。領域101aでは、画像信号に対応して液晶層17に印加される電圧が切り替えられ、通常の透過型液晶表示装置と同様、映像を表示する画素領域となる。   Next, the function of each part of the pixel 101 will be described with reference to FIGS. As described above, the backlight 10 emits light L1 including visible light and invisible light. Since the light L1 emitted from the backlight 10 is blocked by the invisible light filter 27 and the BM film 23, the light L1 is emitted from the first main surface 11a side to the outside only in the region 101a. In the region 101a, the voltage applied to the liquid crystal layer 17 is switched corresponding to the image signal, and becomes a pixel region for displaying an image as in a normal transmissive liquid crystal display device.

一方、領域101cに設けられた第1のセンサ25は不可視光線を検知する。具体的には、液晶パネル11の第1の主面11aに物体が接触あるいは近接すると、バックライト10から出射する光L1は物体により反射され、第1の主面11aから液晶パネル11内へ戻る。このとき、光L1の反射光中に含まれる不可視光線が第1のセンサ25に入射し検知される。   On the other hand, the first sensor 25 provided in the region 101c detects invisible light. Specifically, when an object comes into contact with or approaches the first main surface 11a of the liquid crystal panel 11, the light L1 emitted from the backlight 10 is reflected by the object and returns from the first main surface 11a into the liquid crystal panel 11. . At this time, the invisible light contained in the reflected light of the light L1 enters the first sensor 25 and is detected.

また、領域101bに設けられた第2のセンサ22は可視光線を検出する。領域101bにはカラーフィルタ14のフィルタ部が設けられているため、それぞれのフィルタ部を介して入射する可視光線を第2のセンサ22は検出する。このため、第2のセンサ22はフィルタ部の種類ごとの光強度を検出することができ、カラー画像を液晶パネル11全体として取り込むことができる。   Further, the second sensor 22 provided in the region 101b detects visible light. Since the filter portion of the color filter 14 is provided in the region 101b, the second sensor 22 detects visible light incident through each filter portion. Therefore, the second sensor 22 can detect the light intensity for each type of filter unit, and can capture a color image as the entire liquid crystal panel 11.

図6は、液晶表示装置100全体の構造を示すブロック図である。各画素のこれらの機能を制御して、接触する物体の位置検出を行ったり、画像を取り込んだりするために、液晶表示装置100は、LCD駆動部151と、画像合成部152と、第1の検出部153と、第2の検出部154と、バックライト駆動部155とをさらに備える。   FIG. 6 is a block diagram showing the overall structure of the liquid crystal display device 100. In order to control the function of each pixel to detect the position of an object in contact with each other and to capture an image, the liquid crystal display device 100 includes an LCD driving unit 151, an image composition unit 152, A detection unit 153, a second detection unit 154, and a backlight drive unit 155 are further provided.

第1の検出部153は、二次元に配列された各画素の第1の光センサ25を順次走査し、液晶パネル11の第1の主面11aに接触した物体により反射した不可視光線を所定の時間間隔で検出する。検出した信号に基づき、画面上における物体の位置情報を生成し、画像合成部152へ出力する。   The first detection unit 153 sequentially scans the first photosensors 25 of the respective pixels arrayed two-dimensionally, and invisible light reflected by an object that has contacted the first main surface 11a of the liquid crystal panel 11 is predetermined. Detect at time intervals. Based on the detected signal, position information of the object on the screen is generated and output to the image composition unit 152.

画像合成部152は、液晶表示装置100に表示すべき画像信号と、物体の位置情報とを受け取る。そして、物体の位置情報に基づき、物体の位置する領域の画素からバックライト10の可視光線が出射するように、画像信号を修正し、LCD駆動部151へ出力する。物体の位置情報が第1の検出部153から得られない場合には、入力された画像信号をそのまま出力する。   The image composition unit 152 receives an image signal to be displayed on the liquid crystal display device 100 and object position information. Then, based on the position information of the object, the image signal is corrected so that the visible light of the backlight 10 is emitted from the pixel in the region where the object is positioned, and is output to the LCD driving unit 151. When the position information of the object cannot be obtained from the first detection unit 153, the input image signal is output as it is.

LCD駆動部151は画像合成部152から受け取った画像信号に基づいて、液晶パネル11を駆動し、画像を表示する。第1の主面11aに物体が接触していない場合には、画像合成部152に入力された画像信号に基づく映像を液晶表示パネル11が表示する。物体が第1の主面11aに接触している場合には、カラー画素201を構成するN種のフィルタ部のすべてから可視光が出射するため、物体が接触している領域内が白色で示され、その他の部分は画像合成部152に入力された画像信号に基づく映像が表示される。   The LCD driving unit 151 drives the liquid crystal panel 11 based on the image signal received from the image composition unit 152 and displays an image. When an object is not in contact with the first main surface 11a, the liquid crystal display panel 11 displays an image based on the image signal input to the image composition unit 152. When the object is in contact with the first main surface 11a, visible light is emitted from all of the N types of filter units constituting the color pixel 201, and therefore the area in contact with the object is shown in white. In other portions, a video based on the image signal input to the image composition unit 152 is displayed.

第2の検出部154は、二次元に配列された各画素の第2の光センサ22を順次走査し、液晶パネル11の第1の主面11aに接触した物体により反射した不可視光線を所定の時間間隔で検出する。バックライトから出射した可視光線はそれぞれのフィルタ部を透過して物体に到達し、反射した後、再び同じ色のフィルタ部を透過して第2のセンサ22に入射する。このため、第2のセンサ22により検出した信号は物体の色情報を正しく反映している。第2の検出部154は検出した信号に基づき、二次元画像情報を生成する。   The second detection unit 154 sequentially scans the second photosensors 22 of the pixels arrayed two-dimensionally, and invisible light reflected by an object that has contacted the first main surface 11a of the liquid crystal panel 11 is predetermined. Detect at time intervals. Visible light emitted from the backlight passes through the respective filter units, reaches the object, is reflected, and then passes again through the filter unit of the same color and enters the second sensor 22. For this reason, the signal detected by the second sensor 22 correctly reflects the color information of the object. The second detection unit 154 generates two-dimensional image information based on the detected signal.

次に、図6、図7、図8、および図9を参照して、液晶表示装置100の画面に接触する物体の検出動作を詳細に説明する。物体の検出には不可視光線を用いる。図7に示すように、バックライト10から出射した不可視光線は偏光板20および13に偏光されることがない。このため、画像表示によって生じる液晶層17の配向状態の変化にかかわらず、一定量の不可視光線L2が液晶表示パネル11の第1の主面11aから出射する。画像表示を行っているため、可視光線が第1の主面11aから出射していてもかまわない。   Next, with reference to FIG. 6, FIG. 7, FIG. 8, and FIG. 9, the detection operation of an object that contacts the screen of the liquid crystal display device 100 will be described in detail. Invisible light is used to detect the object. As shown in FIG. 7, the invisible light emitted from the backlight 10 is not polarized by the polarizing plates 20 and 13. For this reason, a fixed amount of invisible light L2 is emitted from the first main surface 11a of the liquid crystal display panel 11 regardless of the change in the alignment state of the liquid crystal layer 17 caused by image display. Since image display is performed, visible light may be emitted from the first main surface 11a.

第1の主面11aに物体300が接触していると、不可視光線L2は物体300で反射し、反射光R1が液晶表示パネル11内へ戻る。そして第1のセンサ25に到達し、検出される。たとえば、第1のセンサ25が検出する不可視光線の信号強度を一定間隔(たとえば1/60秒間隔)で監視し、所定の値を超えた場合に物体が接触したと判断する。第1の検出部153を用いて各画素の第1のセンサ25を順次走査して検出を行うことにより、実質的に同時に複数の位置における接触を検出できる。これにより、物体300の位置情報を含む信号を第1の検出部153は生成する。   When the object 300 is in contact with the first main surface 11a, the invisible light beam L2 is reflected by the object 300, and the reflected light R1 returns into the liquid crystal display panel 11. Then, it reaches the first sensor 25 and is detected. For example, the signal intensity of the invisible light detected by the first sensor 25 is monitored at a constant interval (for example, 1/60 second interval), and it is determined that the object has touched when exceeding a predetermined value. By performing detection by sequentially scanning the first sensor 25 of each pixel using the first detection unit 153, contact at a plurality of positions can be detected substantially simultaneously. Thereby, the first detection unit 153 generates a signal including the position information of the object 300.

第1のセンサ22による不可視光線の検出は、不可視光線が出射した画素の第1のセンサ22に限られない。図8に示すように、画素101Rから出射した不可視光線L3は、画素101R内の第2のセンサ25により、検出することが可能であり、画素101Rから出射した不可視光線L4は、隣接する画素101B内の第2のセンサ25により、検出することも可能である。さらに図9に示すように、画素101Rから出射した不可視光線L5は、画素101Rに隣接した画素101Gの第2のセンサ25によっても検出し得る。このため、フィルタ部の透過光の波長領域によって出射する不可視光線の強度が弱い場合でも他の画素から出射した強度の強い不可視光線を利用してその画素において物体の検出が可能となる。   The detection of invisible light by the first sensor 22 is not limited to the first sensor 22 of the pixel from which the invisible light is emitted. As shown in FIG. 8, the invisible light beam L3 emitted from the pixel 101R can be detected by the second sensor 25 in the pixel 101R, and the invisible light beam L4 emitted from the pixel 101R is detected by the adjacent pixel 101B. It is also possible to detect by the second sensor 25. Furthermore, as shown in FIG. 9, the invisible light beam L5 emitted from the pixel 101R can also be detected by the second sensor 25 of the pixel 101G adjacent to the pixel 101R. For this reason, even when the intensity of the invisible light emitted by the wavelength region of the transmitted light of the filter unit is weak, it is possible to detect an object in the pixel using the invisible light having a high intensity emitted from another pixel.

なお、本発明の液晶表示装置を使用する環境によっては、外部から液晶パネル11の画面に不可視光線が入射し、画面に接触した物体の位置情報を正しく検出できない場合も考えられる。この場合には、外部から入射する不可視光線の周期とは異なる周期でバックライトから不可視光線を出射し、その周期に一致する検出信号が得られた場合に物体の位置情報を取得すればよい。図6に示すように、たとえば、バックライト10として可視光線を出射するLEDおよび不可視光線を出射するLEDを用いる。バックライト駆動部155は、たとえば、1/30秒の周期で点灯および消灯を繰り返すように不可視光線を出射するLEDを駆動する。第1の検出部153は第1のセンサ25から得られる信号がこの1/30の周期に一致している場合に、物体の位置情報が得られているとして、位置情報を示す信号を生成する。第1のセンサ25から得られる信号が連続していたり、この周期と異なる周期である場合には、外部から入射する不可視光線を検出していると判断し、位置情報を示す信号を生成しない。このような検知をおこなうことによって、外部の影響を遮断し、正しく物体の検知を行うことができる。   Depending on the environment in which the liquid crystal display device of the present invention is used, there may be a case where the invisible light is incident on the screen of the liquid crystal panel 11 from the outside and the position information of the object in contact with the screen cannot be detected correctly. In this case, the position information of the object may be acquired when the invisible light is emitted from the backlight at a period different from the period of the invisible light incident from the outside and a detection signal matching the period is obtained. As shown in FIG. 6, for example, an LED that emits visible light and an LED that emits invisible light are used as the backlight 10. For example, the backlight drive unit 155 drives the LED that emits invisible light so as to repeatedly turn on and off at a period of 1/30 seconds. When the signal obtained from the first sensor 25 coincides with the 1/30 period, the first detection unit 153 generates a signal indicating the position information, assuming that the position information of the object is obtained. . If the signal obtained from the first sensor 25 is continuous or has a period different from this period, it is determined that an invisible light beam incident from the outside is detected, and a signal indicating position information is not generated. By performing such detection, it is possible to block external influences and correctly detect an object.

このように、本発明によれば、画面に接触する物体を検出するのにバックライトから出射する不可視光線を用いる。このため、物体が画面に強く接触する必要はなく、押す力が弱くても確実に物体の検出を行うことができる。たとえは、写真や絵などの接触も検出することができる。複数の位置を同時に検出することもできる。   Thus, according to the present invention, invisible light emitted from the backlight is used to detect an object in contact with the screen. For this reason, it is not necessary for the object to come into strong contact with the screen, and the object can be reliably detected even if the pressing force is weak. For example, it is possible to detect contact with a photograph or a picture. A plurality of positions can also be detected simultaneously.

また、画面を強く押す必要がないため、指やペンの強い接触による液晶パネル表面の劣化も生じない。また、液晶パネル表面には物体を検出するためのタッチパネルなどの付加構造物を設けないため、液晶表示パネルの視認性が低下することもない。   Further, since it is not necessary to press the screen strongly, the surface of the liquid crystal panel is not deteriorated by a strong contact with a finger or a pen. Further, since an additional structure such as a touch panel for detecting an object is not provided on the surface of the liquid crystal panel, the visibility of the liquid crystal display panel is not deteriorated.

なお、本実施形態では、カラー画素201を構成する3つの画素すべてにおいて不可視光線の検出を行っているが、いずれか1つの画素の第1のセンサ25のみを用いて検出を行い、その検出結果をカラー画素201全体の検出結果としてもよい。   In this embodiment, invisible light is detected in all three pixels constituting the color pixel 201, but detection is performed using only the first sensor 25 of any one pixel, and the detection result May be the detection result of the entire color pixel 201.

次に、図6、図7、および図10を参照して、液晶表示装置100の画面に接触する物体の画像を取り込む動作を説明する。   Next, with reference to FIG. 6, FIG. 7, and FIG. 10, an operation for capturing an image of an object that contacts the screen of the liquid crystal display device 100 will be described.

まず、図7に示すように、液晶表示パネル11の画面に物体300を接触させ、上述したように第1の検出部153によって物体300の位置情報を取得する。この際、カラー画素201を構成する画素101R、101G、101Bのそれぞれの第1のセンサ25で不可視光線を検出し、位置情報を得てもよい。あるいは、画素101Rの第1のセンサ25のみを用いて不可視光線を検出し、得られた結果に基づき、他の画素101G、101Bにおいても同様の検出結果が得られたものとして位置情報を生成してもよい。言い換えれば、カラー画素201における不可視光線の検出を画素101Rにて代表しておこなってもよい。このように、画素ごとに物体を検知したかどうかを判断し、位置情報を生成してもよいし、カラー画素201を構成するN種のフィルタ部をそれぞれ有する画素のうち、1つの画素の第1のセンサで検知した信号に基づいて、他の画素の第1のセンサで検知した信号を生成してもよい。   First, as illustrated in FIG. 7, the object 300 is brought into contact with the screen of the liquid crystal display panel 11, and the position information of the object 300 is acquired by the first detection unit 153 as described above. At this time, the invisible light may be detected by the first sensors 25 of the pixels 101R, 101G, and 101B constituting the color pixel 201 to obtain position information. Alternatively, invisible light is detected using only the first sensor 25 of the pixel 101R, and position information is generated based on the obtained result, assuming that similar detection results are obtained in the other pixels 101G and 101B. May be. In other words, the invisible light in the color pixel 201 may be detected by the pixel 101R. In this way, it may be determined whether an object is detected for each pixel, and position information may be generated, or among the pixels each having N types of filter units constituting the color pixel 201, Based on a signal detected by one sensor, a signal detected by a first sensor of another pixel may be generated.

得られた位置情報を含む信号は画像合成部152へ出力される。画像構成部152は、物体300の位置情報に基づいて、物体300が位置する領域の画素からバックライト10の可視光線が出射するように、画像信号を生成する。画面に他の画像を表示する場合には、物体300の位置する領域の画素からバックライト10の可視光線が出射するように画像信号を修正する。上述したように物体300の位置する領域では、カラー画素を構成するすべての画素が点灯するよう駆動されるので、白色で表示されることとなる。   The obtained signal including position information is output to the image composition unit 152. Based on the position information of the object 300, the image construction unit 152 generates an image signal so that visible light from the backlight 10 is emitted from the pixels in the region where the object 300 is located. When displaying another image on the screen, the image signal is corrected so that the visible light of the backlight 10 is emitted from the pixel in the region where the object 300 is located. As described above, in the region where the object 300 is located, all the pixels constituting the color pixel are driven to be lit, so that white is displayed.

修正された画像信号はLCD駆動部151に出力され、LCD駆動部は画像信号に基づいて、液晶パネル11を駆動する。   The corrected image signal is output to the LCD driving unit 151, and the LCD driving unit drives the liquid crystal panel 11 based on the image signal.

この駆動により、不可視光線によって物体300の接触が第1の光センサ25により検知された画素101あるいは物体300の接触が第1の光センサ25により検知された画素101含むカラー画素201において、液晶層17の配向を変化させ、バックライト10の可視光が第1の主面11aから出射する。つまり、赤、青、緑のフィルタ部を有する画素101R、101B、101Gから光が出射し、図10に示すように可視光線L4が物体300の第1の主面11aと接する面に照射される。可視光線L6が物体の表面で反射する際、表面の画像に応じて、可視光線L6が吸収される。したがって、反射光R4は、物体の画像情報を含んでいる。   By this driving, in the pixel 101 in which the contact of the object 300 is detected by the first optical sensor 25 by the invisible light or the color pixel 201 including the pixel 101 in which the contact of the object 300 is detected by the first optical sensor 25, the liquid crystal layer 17, the visible light of the backlight 10 is emitted from the first major surface 11a. That is, light is emitted from the pixels 101R, 101B, and 101G having the red, blue, and green filter portions, and the visible light L4 is irradiated onto the surface that contacts the first main surface 11a of the object 300 as shown in FIG. . When the visible light L6 is reflected by the surface of the object, the visible light L6 is absorbed according to the image on the surface. Therefore, the reflected light R4 includes image information of the object.

反射光R4は、それぞれ可視光線L6が出射した画素に設けられたフィルタ部を透過して第2のセンサ22によって検知される。第2の検出部154は検出した信号に基づき、二次元画像情報を生成する。これにより、物体の画像情報を取得することができる。   The reflected light R4 is detected by the second sensor 22 through the filter unit provided in each pixel from which the visible light L6 is emitted. The second detection unit 154 generates two-dimensional image information based on the detected signal. Thereby, the image information of the object can be acquired.

図11(a)から図11(c)を参照して、液晶表示パネル11の画面に接触する物体の画像を取り込む動作をより具体的に説明する。   With reference to FIG. 11A to FIG. 11C, the operation of capturing an image of an object that contacts the screen of the liquid crystal display panel 11 will be described more specifically.

図11(a)に示すように、たとえば人物が写っているサンプル画像350bがフレームの画像350aに挿入された画像が、液晶表示装置100の画面350に表示されており、液晶表示装置100を用いて、ユーザの写真を画像データとして取り込み、取り込んだ画像をサンプル画像350bと置き換え、フレームの画像350aと合成する操作を行う。   As shown in FIG. 11A, for example, an image in which a sample image 350b in which a person is photographed is inserted into a frame image 350a is displayed on a screen 350 of the liquid crystal display device 100, and the liquid crystal display device 100 is used. Then, the user's photograph is captured as image data, the captured image is replaced with the sample image 350b, and an operation of combining with the frame image 350a is performed.

このために、まず図11(b)に示すように、ユーザの写真300をその画像面が画面350のサンプル画像350bと対向するように配置する。   For this purpose, first, as shown in FIG. 11 (b), the user's photograph 300 is arranged so that its image plane faces the sample image 350 b on the screen 350.

液晶表示装置100は、不可視光線を用いて写真300の位置情報をまず取得する。そして、写真300の位置情報に基づき、写真300が接している領域を白色で表示する。写真300以外の領域では最初に表示した画像、つまり、フレームの画像350aが示される。このときサンプル画像350bの位置に対して配置したユーザの写真300の位置が多少ずれていても、写真300の位置情報に基づき、白色で表示する領域を決定しているため、写真の位置と白色で表示する領域とは一致している。   The liquid crystal display device 100 first acquires position information of the photograph 300 using invisible light. Then, based on the position information of the photograph 300, the area in contact with the photograph 300 is displayed in white. In an area other than the photograph 300, an image displayed first, that is, a frame image 350a is shown. At this time, even if the position of the photograph 300 of the user arranged with respect to the position of the sample image 350b is slightly shifted, the area to be displayed in white is determined based on the position information of the photograph 300. It matches the area displayed by.

次に、液晶表示装置100は、画面から出射した白色光の写真300による反射光を検出し、これにより、ユーザの写真300の二次元画像情報を取得する。得られた二次元画像情報は、たとえば図11(c)に示すように、そのまま、フレーム画像350aと合成し、フレーム画像350aとユーザの写真を取り込んだ画像350dを一緒に表示することができる。   Next, the liquid crystal display device 100 detects reflected light from the white light photograph 300 emitted from the screen, and thereby acquires two-dimensional image information of the user's photograph 300. For example, as shown in FIG. 11C, the obtained two-dimensional image information can be combined with the frame image 350a as it is, and the frame image 350a and the image 350d incorporating the user's photograph can be displayed together.

このように本実施によれば写真の位置を検出して画像を取り込む領域を決定するため、画像の取り込みに際してトリミングが不要となる。また、液晶表示装置の画面上において、画像を取り込む領域以外の領域には、画像を取り込む際にも任意の画像を表示しておくことが可能である。   As described above, according to this embodiment, the position of the photograph is detected to determine the area into which the image is to be captured, so that trimming is not required when capturing the image. In addition, on the screen of the liquid crystal display device, it is possible to display an arbitrary image even when an image is captured in an area other than the area where the image is captured.

また、物体の位置を検出するために用いる不可視光線および画像の取り込みに用いる可視光線を液晶表示装置のバックライトから出射させることができるため、省スペースかつ低コストで画面に接触した複数の物体の位置情報を取得し、画像の取り込みも可能な液晶表示装置が実現する。   In addition, since invisible light used for detecting the position of an object and visible light used for capturing an image can be emitted from the backlight of the liquid crystal display device, a plurality of objects in contact with the screen can be saved in a small space. A liquid crystal display device capable of acquiring position information and capturing an image is realized.

上述の例では、静止した画像を取り込んでいるが、物体は移動していてもよいし、物体の画面に接する部分が時間とともに変化してもよい。たとえば、青や赤など任意の彩色の毛を有する毛筆を用いて、本発明の液晶表示装置の画面に文字を書くと、画面に接触した毛の一本ごとの位置および毛の色を動画として取り込むことができる。取得した動画をその画面あるいは他の画像表示装置の画面にリアルタイムで表示させることによって、「色付きの毛筆文字」を表示することができる。   In the above-described example, a still image is captured, but the object may be moving, or the portion of the object that contacts the screen may change with time. For example, when writing characters on the screen of the liquid crystal display device of the present invention using a brush with arbitrarily colored hair such as blue and red, the position and color of each hair in contact with the screen is converted into a movie. Can be captured. By displaying the acquired moving image on the screen or the screen of another image display device in real time, “colored brushstroke characters” can be displayed.

また、ペン先に2次元バーコードを記したペンを用いて、本発明の液晶表示装置の画面で線画を描くと、バーコードを画像として取り込むことができる。このバーコードの持つ情報を処理し、得られた情報に、たとえば、所定の画像を対応させておけば、バーコードを検出した位置に所定の画像を表示させることができる。つまり、取り込んだ画像を表示させるだけではなく、画像から得られる情報に基づき、他の画像をリアルタイムで表示させることもできる。   Further, when a line drawing is drawn on the screen of the liquid crystal display device of the present invention using a pen in which a two-dimensional barcode is written at the pen tip, the barcode can be captured as an image. If the information held by the barcode is processed and a predetermined image is associated with the obtained information, for example, the predetermined image can be displayed at the position where the barcode is detected. In other words, not only the captured image is displayed, but also other images can be displayed in real time based on information obtained from the image.

なお、上記実施形態において、液晶表示装置はカラー液晶表示パネルを備えていたが、液晶表示パネルは白黒表示を行うものであってもよい。   In the above embodiment, the liquid crystal display device includes a color liquid crystal display panel, but the liquid crystal display panel may perform monochrome display.

本発明は、画面に情報入力機能が設けられた液晶表示装置を備えた種々の機器に用いることができる。特に、ビデオカメラ、カーナビゲーションシステムなどのAV機器や、多機能な産業用の製造機器へ好適に用いることができる。   The present invention can be used for various devices including a liquid crystal display device having an information input function on a screen. In particular, it can be suitably used for AV equipment such as a video camera and a car navigation system, and multifunctional industrial manufacturing equipment.

(a)および(b)は、本発明による液晶表示装置の液晶パネルを構成する画素の断面構造をそれぞれ模式的に示している。(A) And (b) has each shown typically the cross-section of the pixel which comprises the liquid crystal panel of the liquid crystal display device by this invention. 図1に示す画素の平面構造を模式的に示している。2 schematically shows a planar structure of the pixel shown in FIG. 1カラー画素の平面構造を模式的に示している。1 schematically shows a planar structure of one color pixel. 1カラー画素の他の平面構造を模式的に示している。The other planar structure of 1 color pixel is shown typically. カラー画素の配置を説明する平面図である。It is a top view explaining arrangement | positioning of a color pixel. 液晶表示装置の構造を示すブロック図である。It is a block diagram which shows the structure of a liquid crystal display device. 画面に接触した物体の位置検知を説明する断面図である。It is sectional drawing explaining the position detection of the object which contacted the screen. 画面に接触した物体の位置検知を説明する他の断面図である。It is another sectional view explaining position detection of an object which touched the screen. 画面に接触した物体の位置検知を説明する平面図である。It is a top view explaining the position detection of the object which contacted the screen. 画面に接触した物体の画像情報の取得を説明する断面図である。It is sectional drawing explaining acquisition of the image information of the object which contacted the screen. (a)〜(c)は、画像取り込み動作の一例を説明する図である。(A)-(c) is a figure explaining an example of image taking-in operation | movement.

符号の説明Explanation of symbols

10 バックライト
11 液晶表示パネル
13、20 偏光板
14 カラーフィルタ
15 対向電極
19 画素電極
16、18 配向膜
17 液晶層
21、24 スペーサ
22 第2のセンサ
23、26 BM膜
25 第1のセンサ
100 液晶表示装置
101画素
201カラー画素
DESCRIPTION OF SYMBOLS 10 Backlight 11 Liquid crystal display panel 13, 20 Polarizing plate 14 Color filter 15 Counter electrode 19 Pixel electrode 16, 18 Orientation film 17 Liquid crystal layer 21, 24 Spacer 22 Second sensor 23, 26 BM film 25 First sensor 100 Liquid crystal Display device 101 pixels 201 color pixels

Claims (10)

不可視光線および可視光線を出射するバックライトと、
第1および第2の主面を有し、前記第2の主面側に前記バックライトが位置するよう配置された液晶表示パネルであって、前記不可視光線を検出する第1のセンサをそれぞれ有し、二次元的に配置された複数の画素を含む液晶表示パネルと、
を備え、前記バックライトから出射し、前記液晶表示パネルを透過した不可視光線が前記液晶表示パネルの第1の主面に接触あるいは近接した物体により反射することにより得られる反射光を前記第1のセンサで検出することにより、前記第1の主面上における前記物体の位置情報を取得する液晶表示装置。
A backlight that emits invisible and visible light; and
A liquid crystal display panel having a first main surface and a second main surface, wherein the backlight is disposed on the second main surface side, each having a first sensor for detecting the invisible light. A liquid crystal display panel including a plurality of pixels arranged two-dimensionally;
And the reflected light obtained by reflecting the invisible light emitted from the backlight and transmitted through the liquid crystal display panel by an object in contact with or close to the first main surface of the liquid crystal display panel. A liquid crystal display device that acquires position information of the object on the first main surface by detecting with a sensor.
前記画素は、可視光線を検出する第2のセンサをさらに含む請求項1に記載の液晶表示装置。   The liquid crystal display device according to claim 1, wherein the pixel further includes a second sensor that detects visible light. 前記画素は、液晶層と、前記液晶層を挟む一対の偏光板とを含み、前記偏光板は、可視光線を偏光し、不可視光線を偏光しない、請求項1または2に記載の液晶表示装置。   The liquid crystal display device according to claim 1, wherein the pixel includes a liquid crystal layer and a pair of polarizing plates sandwiching the liquid crystal layer, and the polarizing plate polarizes visible light and does not polarize invisible light. 前記画素は、画素電極および前記画素電極と向き合う対向電極とを有し、前記第1のセンサは前記対向電極および画素電極が設けられた領域外の領域に設けられている請求項1から3のいずれかに記載の液晶表示装置。   4. The pixel according to claim 1, wherein the pixel includes a pixel electrode and a counter electrode facing the pixel electrode, and the first sensor is provided in a region outside the region where the counter electrode and the pixel electrode are provided. The liquid crystal display device according to any one of the above. 前記液晶パネルは、異なる波長領域の光を透過するN種(Nは2以上の整数)以上のフィルタ部が複数設けられたカラーフィルタを含み、隣接するN個の画素ごとにそれぞれ前記N種のフィルタ部を含み、カラー画素を構成している請求項1から4のいずれかに記載の液晶表示装置。   The liquid crystal panel includes a color filter provided with a plurality of N or more (N is an integer of 2 or more) filter portions that transmit light in different wavelength regions, and each of the N types of adjacent N pixels has the N types of color filters. The liquid crystal display device according to claim 1, wherein the liquid crystal display device includes a filter unit and constitutes a color pixel. 前記カラーフィルタは赤、青、緑の三種のフィルタ部が複数設けられている請求項5に記載の液晶表示装置。   The liquid crystal display device according to claim 5, wherein the color filter is provided with a plurality of three types of filter portions of red, blue, and green. 前記フィルタ部は、前記対向電極および画素電極が設けられた領域および前記第2のセンサが設けられた領域を覆っている請求項5に記載の液晶表示装置。   The liquid crystal display device according to claim 5, wherein the filter section covers a region where the counter electrode and the pixel electrode are provided and a region where the second sensor is provided. 前記画素の第1のセンサで検出した信号から前記物体の位置情報を生成する第1の検出部と、
前記物体の位置情報に基づいて、前記物体が位置する領域の画素から前記バックライトの前記可視光線が出射するように、前記液晶表示パネルに表示すべき画像信号を修正する画像合成部と、
前記画像合成部から得られる出力に基づいて前記液晶表示パネルを駆動する駆動部と、
前記各画素の第2のセンサで検出した信号から2次元画像情報を生成する第2の検出部と、
をさらに備える請求項5から7のいずれかに記載の液晶表示装置。
A first detection unit that generates position information of the object from a signal detected by a first sensor of the pixel;
An image composition unit for correcting an image signal to be displayed on the liquid crystal display panel so that the visible light of the backlight is emitted from a pixel in a region where the object is located based on the position information of the object;
A drive unit for driving the liquid crystal display panel based on an output obtained from the image synthesis unit;
A second detector that generates two-dimensional image information from a signal detected by the second sensor of each pixel;
The liquid crystal display device according to claim 5, further comprising:
前記第1の検出部は、前記各カラー画素を構成するN個の画素のうち、1つ画素の第1のセンサで検出した信号に基づいて前記カラー画素の他の画素の第1のセンサで検出した信号を生成する請求項8に記載の液晶表示装置。   The first detection unit is a first sensor of another pixel of the color pixel based on a signal detected by a first sensor of one pixel among the N pixels constituting each color pixel. The liquid crystal display device according to claim 8, wherein the detected signal is generated. 前記バックライトは、可視光線を出射する可視光光源と不可視光線を出射する不可視光光源とを含み、
前記不可視光光源は所定の周期で駆動され、前記第1のセンサから得られる検出信号が前記所定の周期と一致する場合に前記物体の位置情報を取得する請求項1に記載の液晶表示装置。
The backlight includes a visible light source that emits visible light and an invisible light source that emits invisible light,
The liquid crystal display device according to claim 1, wherein the invisible light source is driven at a predetermined cycle, and the position information of the object is acquired when a detection signal obtained from the first sensor coincides with the predetermined cycle.
JP2004085999A 2004-03-24 2004-03-24 Liquid crystal display Pending JP2005275644A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004085999A JP2005275644A (en) 2004-03-24 2004-03-24 Liquid crystal display

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004085999A JP2005275644A (en) 2004-03-24 2004-03-24 Liquid crystal display

Publications (1)

Publication Number Publication Date
JP2005275644A true JP2005275644A (en) 2005-10-06

Family

ID=35175278

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004085999A Pending JP2005275644A (en) 2004-03-24 2004-03-24 Liquid crystal display

Country Status (1)

Country Link
JP (1) JP2005275644A (en)

Cited By (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008003296A (en) * 2006-06-22 2008-01-10 Toshiba Matsushita Display Technology Co Ltd Liquid crystal display device
JP2008083677A (en) * 2006-09-26 2008-04-10 Lg Philips Lcd Co Ltd Liquid crystal display having multi-touch sensing function and the driving method therefor
JP2008197148A (en) * 2007-02-08 2008-08-28 Casio Comput Co Ltd Photoelectric conversion device and display panel provided with the same
JP2008237330A (en) * 2007-03-26 2008-10-09 Samii Kk Pinball game machine and display device
JP2008262204A (en) * 2008-04-11 2008-10-30 Sony Corp Image display device
JP2009129317A (en) * 2007-11-27 2009-06-11 Sony Corp Display device and optical device
JP2009128835A (en) * 2007-11-28 2009-06-11 Sony Corp Liquid crystal display device
JP2009151493A (en) * 2007-12-19 2009-07-09 Sony Corp Display device
JP2009169390A (en) * 2007-12-19 2009-07-30 Sony Corp Display apparatus and illumination apparatus
JP2009282303A (en) * 2008-05-22 2009-12-03 Seiko Epson Corp Electro-optical device and electronic apparatus
JP4457163B1 (en) * 2008-10-30 2010-04-28 シャープ株式会社 Display device
JP2010097420A (en) * 2008-10-16 2010-04-30 Sony Corp Display and imaging device and electronic equipment
WO2010095401A1 (en) * 2009-02-19 2010-08-26 シャープ株式会社 Semiconductor device and display device
JP2010198575A (en) * 2009-02-27 2010-09-09 Sony Corp Image input device, image input-output device and electronic apparatus
WO2010109715A1 (en) * 2009-03-24 2010-09-30 シャープ株式会社 Touch panel input system, and input pen
WO2011055638A1 (en) * 2009-11-06 2011-05-12 Semiconductor Energy Laboratory Co., Ltd. Display device
EP2343633A1 (en) * 2008-10-21 2011-07-13 Sony Corporation Imaging device, display image device, and electronic device
US7999259B2 (en) 2007-12-19 2011-08-16 Sony Corporation Display device having a photodiode whose p region has an edge width different than that of the n region
WO2011129441A1 (en) 2010-04-16 2011-10-20 シャープ株式会社 Semiconductor device
EP2390764A1 (en) * 2009-01-20 2011-11-30 Sharp Kabushiki Kaisha Area sensor and liquid crystal display device with area sensor
EP2393299A2 (en) 2010-06-07 2011-12-07 Sony Corporation Information display device and display image control method
US8125580B2 (en) 2008-04-28 2012-02-28 Sony Corporation Liquid crystal display apparatus
CN102376723A (en) * 2010-08-20 2012-03-14 三星电子株式会社 Sensor array substrate, display device including the same, and method of manufacturing the sensor array substrate
JP2012058714A (en) * 2010-09-09 2012-03-22 ▲ぎょく▼瀚科技股▲ふん▼有限公司 Liquid crystal display device
US8152353B2 (en) 2007-12-06 2012-04-10 Sony Corporation Surface emission apparatus, light guide, and method of manufacturing light guide
US8217914B2 (en) 2006-10-13 2012-07-10 Sony Corporation Information display apparatus with proximity detection performance and information display method using the same
US8269927B2 (en) 2008-05-08 2012-09-18 Sony Corporation Liquid crystal display
US8314782B2 (en) 2007-12-05 2012-11-20 Sony Corporation Display apparatus
US8325298B2 (en) 2007-11-28 2012-12-04 Sony Corporation Display apparatus with light detection and fabrication method for display apparatus with light detection
US8358288B2 (en) 2008-03-21 2013-01-22 Sharp Kabushiki Kaisha Touch-sensor-provided liquid crystal display device
CN101971126B (en) * 2008-04-10 2013-04-17 夏普株式会社 Display device having optical sensors and drive method thereof
US8686971B2 (en) 2008-02-20 2014-04-01 Japan Display West Inc. Liquid crystal display device and a method of manufacturing the same
US8816285B2 (en) 2010-07-26 2014-08-26 Sharp Kabushiki Kaisha Display device
US8816973B2 (en) 2010-08-20 2014-08-26 Japan Display West Inc. Position detection apparatus, display apparatus and electronic apparatus
US8890836B2 (en) 2010-07-09 2014-11-18 Japan Display West Inc. Detection device and display apparatus with oscillation control
US8907928B2 (en) 2005-04-19 2014-12-09 Japan Display West Inc. Image display unit and method of detecting object
US8928596B2 (en) 2008-10-01 2015-01-06 Japan Display West Inc. Display panel and display device
JP2015015043A (en) * 2009-08-24 2015-01-22 株式会社半導体エネルギー研究所 Display device
US9018631B2 (en) 2010-06-15 2015-04-28 Sharp Kabushiki Kaisha Semiconductor device and display device equipped with same
US9041692B2 (en) 2010-07-26 2015-05-26 Sharp Kabushiki Kaisha Display device
CN112180627A (en) * 2019-07-05 2021-01-05 中强光电股份有限公司 Display device and display control method

Cited By (76)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8907928B2 (en) 2005-04-19 2014-12-09 Japan Display West Inc. Image display unit and method of detecting object
JP2008003296A (en) * 2006-06-22 2008-01-10 Toshiba Matsushita Display Technology Co Ltd Liquid crystal display device
JP2008083677A (en) * 2006-09-26 2008-04-10 Lg Philips Lcd Co Ltd Liquid crystal display having multi-touch sensing function and the driving method therefor
JP4573856B2 (en) * 2006-09-26 2010-11-04 エルジー ディスプレイ カンパニー リミテッド Liquid crystal display device having multi-touch sensing function and driving method thereof
US9588592B2 (en) 2006-10-13 2017-03-07 Sony Corporation Information display apparatus with proximity detection performance and information display method using the same
US8284165B2 (en) 2006-10-13 2012-10-09 Sony Corporation Information display apparatus with proximity detection performance and information display method using the same
US9110513B2 (en) 2006-10-13 2015-08-18 Sony Corporation Information display apparatus with proximity detection performance and information display method using the same
US8217914B2 (en) 2006-10-13 2012-07-10 Sony Corporation Information display apparatus with proximity detection performance and information display method using the same
US9870065B2 (en) 2006-10-13 2018-01-16 Sony Corporation Information display apparatus with proximity detection performance and information display method using the same
US8665237B2 (en) 2006-10-13 2014-03-04 Sony Corporation Information display apparatus with proximity detection performance and information display method using the same
JP2008197148A (en) * 2007-02-08 2008-08-28 Casio Comput Co Ltd Photoelectric conversion device and display panel provided with the same
JP2008237330A (en) * 2007-03-26 2008-10-09 Samii Kk Pinball game machine and display device
JP2009129317A (en) * 2007-11-27 2009-06-11 Sony Corp Display device and optical device
US7905649B2 (en) 2007-11-27 2011-03-15 Sony Corporation Display device and optical device
JP4626645B2 (en) * 2007-11-27 2011-02-09 ソニー株式会社 Display device and optical device
TWI395170B (en) * 2007-11-28 2013-05-01 Sony Corp Liquid-crystal display apparatus
TWI396897B (en) * 2007-11-28 2013-05-21 Japan Display West Inc Display device and display device
US8519912B2 (en) 2007-11-28 2013-08-27 Sony Corporation Liquid-crystal display apparatus
US8325298B2 (en) 2007-11-28 2012-12-04 Sony Corporation Display apparatus with light detection and fabrication method for display apparatus with light detection
KR101514091B1 (en) * 2007-11-28 2015-04-21 가부시키가이샤 재팬 디스프레이 Display device and display device manufacturing method
JP2009128835A (en) * 2007-11-28 2009-06-11 Sony Corp Liquid crystal display device
US8314782B2 (en) 2007-12-05 2012-11-20 Sony Corporation Display apparatus
US8152353B2 (en) 2007-12-06 2012-04-10 Sony Corporation Surface emission apparatus, light guide, and method of manufacturing light guide
JP2009151493A (en) * 2007-12-19 2009-07-09 Sony Corp Display device
US7999259B2 (en) 2007-12-19 2011-08-16 Sony Corporation Display device having a photodiode whose p region has an edge width different than that of the n region
JP2009169390A (en) * 2007-12-19 2009-07-30 Sony Corp Display apparatus and illumination apparatus
US8686971B2 (en) 2008-02-20 2014-04-01 Japan Display West Inc. Liquid crystal display device and a method of manufacturing the same
JP5148685B2 (en) * 2008-03-21 2013-02-20 シャープ株式会社 LCD device with built-in touch sensor
US8358288B2 (en) 2008-03-21 2013-01-22 Sharp Kabushiki Kaisha Touch-sensor-provided liquid crystal display device
CN101971126B (en) * 2008-04-10 2013-04-17 夏普株式会社 Display device having optical sensors and drive method thereof
JP2008262204A (en) * 2008-04-11 2008-10-30 Sony Corp Image display device
US8125580B2 (en) 2008-04-28 2012-02-28 Sony Corporation Liquid crystal display apparatus
US8269927B2 (en) 2008-05-08 2012-09-18 Sony Corporation Liquid crystal display
KR101528205B1 (en) * 2008-05-08 2015-06-12 가부시키가이샤 재팬 디스프레이 Liquid crystal display
US8446390B2 (en) 2008-05-22 2013-05-21 Sony Corporation Electro-optical device and electronic apparatus
JP2009282303A (en) * 2008-05-22 2009-12-03 Seiko Epson Corp Electro-optical device and electronic apparatus
US9223435B2 (en) 2008-10-01 2015-12-29 Japan Display Inc. Display panel and display device
US8928596B2 (en) 2008-10-01 2015-01-06 Japan Display West Inc. Display panel and display device
JP2010097420A (en) * 2008-10-16 2010-04-30 Sony Corp Display and imaging device and electronic equipment
EP2343633A4 (en) * 2008-10-21 2013-06-12 Sony Corp Imaging device, display image device, and electronic device
EP2343633A1 (en) * 2008-10-21 2011-07-13 Sony Corporation Imaging device, display image device, and electronic device
JP4457163B1 (en) * 2008-10-30 2010-04-28 シャープ株式会社 Display device
JP2010107776A (en) * 2008-10-30 2010-05-13 Sharp Corp Display device
EP2390764A4 (en) * 2009-01-20 2013-06-05 Sharp Kk Area sensor and liquid crystal display device with area sensor
CN102282532A (en) * 2009-01-20 2011-12-14 夏普株式会社 Area sensor and liquid crystal display device with area sensor
US8878817B2 (en) 2009-01-20 2014-11-04 Sharp Kabushiki Kaisha Area sensor and liquid crystal display device with area sensor
EP2390764A1 (en) * 2009-01-20 2011-11-30 Sharp Kabushiki Kaisha Area sensor and liquid crystal display device with area sensor
WO2010095401A1 (en) * 2009-02-19 2010-08-26 シャープ株式会社 Semiconductor device and display device
US8575713B2 (en) 2009-02-19 2013-11-05 Sharp Kabushiki Kaisha Semiconductor device and display device
JP2010198575A (en) * 2009-02-27 2010-09-09 Sony Corp Image input device, image input-output device and electronic apparatus
WO2010109715A1 (en) * 2009-03-24 2010-09-30 シャープ株式会社 Touch panel input system, and input pen
JP2015015043A (en) * 2009-08-24 2015-01-22 株式会社半導体エネルギー研究所 Display device
JP2016095886A (en) * 2009-08-24 2016-05-26 株式会社半導体エネルギー研究所 Display device
US9542022B2 (en) 2009-08-24 2017-01-10 Semiconductor Energy Laboratory Co., Ltd. Touch sensor and method for driving the same and display device
TWI574079B (en) * 2009-11-06 2017-03-11 半導體能源研究所股份有限公司 Display device
JP2014240983A (en) * 2009-11-06 2014-12-25 株式会社半導体エネルギー研究所 Display device
JP2013033275A (en) * 2009-11-06 2013-02-14 Semiconductor Energy Lab Co Ltd Display device
WO2011055638A1 (en) * 2009-11-06 2011-05-12 Semiconductor Energy Laboratory Co., Ltd. Display device
US9639211B2 (en) 2009-11-06 2017-05-02 Semiconductor Energy Laboratory Co., Ltd. Display device
KR101727469B1 (en) * 2009-11-06 2017-04-17 가부시키가이샤 한도오따이 에네루기 켄큐쇼 Display device
JP2016105282A (en) * 2009-11-06 2016-06-09 株式会社半導体エネルギー研究所 Display device
JP2011118888A (en) * 2009-11-06 2011-06-16 Semiconductor Energy Lab Co Ltd Display device
US9368541B2 (en) 2009-11-06 2016-06-14 Semiconductor Energy Laboratory Co., Ltd. Display device
WO2011129441A1 (en) 2010-04-16 2011-10-20 シャープ株式会社 Semiconductor device
US8803151B2 (en) 2010-04-16 2014-08-12 Sharp Kabushiki Kaisha Semiconductor device
US8872821B2 (en) 2010-06-07 2014-10-28 Sony Corporation Information display device and display image control method
EP2393299A2 (en) 2010-06-07 2011-12-07 Sony Corporation Information display device and display image control method
US9018631B2 (en) 2010-06-15 2015-04-28 Sharp Kabushiki Kaisha Semiconductor device and display device equipped with same
US8890836B2 (en) 2010-07-09 2014-11-18 Japan Display West Inc. Detection device and display apparatus with oscillation control
US8816285B2 (en) 2010-07-26 2014-08-26 Sharp Kabushiki Kaisha Display device
US9041692B2 (en) 2010-07-26 2015-05-26 Sharp Kabushiki Kaisha Display device
CN102376723A (en) * 2010-08-20 2012-03-14 三星电子株式会社 Sensor array substrate, display device including the same, and method of manufacturing the sensor array substrate
US8816973B2 (en) 2010-08-20 2014-08-26 Japan Display West Inc. Position detection apparatus, display apparatus and electronic apparatus
JP2012058714A (en) * 2010-09-09 2012-03-22 ▲ぎょく▼瀚科技股▲ふん▼有限公司 Liquid crystal display device
CN112180627B (en) * 2019-07-05 2024-02-02 中强光电股份有限公司 Display device and display control method
CN112180627A (en) * 2019-07-05 2021-01-05 中强光电股份有限公司 Display device and display control method

Similar Documents

Publication Publication Date Title
JP2005275644A (en) Liquid crystal display
WO2009110293A1 (en) Display device with light sensors
KR101543352B1 (en) Display device
US8797297B2 (en) Display device
US8487913B2 (en) Area sensor, liquid crystal display unit, and position detection method
US8416227B2 (en) Display device having optical sensors
US20110037732A1 (en) Detecting device, display device, and object proximity distance measuring method
KR101495918B1 (en) Display device
US8797275B2 (en) Display apparatus and image pickup apparatus
US8847907B2 (en) Display device and display direction switching system
EP2244120A1 (en) Display device provided with optical sensor
TWI395170B (en) Liquid-crystal display apparatus
CN101776836A (en) Projection display system and desktop computer
WO2020152960A1 (en) Liquid crystal display device and electronic apparatus having imaging function
WO2011052261A1 (en) Pointing device
JP2004303172A (en) Optical touch panel and electronic device
JP2011164608A (en) Display device with electrically switchable field of view for embedded light sensor
US7834956B2 (en) Photoluminescent backlighting of and infrared transmissive visible light barrier for light valve
CN107209588A (en) Non-contact input apparatus and method
US20110316771A1 (en) Display apparatus, television reception apparatus and pointing system
JP2007226439A (en) Display device and electronic apparatus
CN101762956A (en) LCOS projection display system
JP2009063803A (en) Display device
CN101750857A (en) LCD (liquid crystal display) projection display system
JP2010152573A (en) Display apparatus and display method