JP2010119017A - Front projection video display device, projection image correction method, and projection image correction program - Google Patents

Front projection video display device, projection image correction method, and projection image correction program Download PDF

Info

Publication number
JP2010119017A
JP2010119017A JP2008292195A JP2008292195A JP2010119017A JP 2010119017 A JP2010119017 A JP 2010119017A JP 2008292195 A JP2008292195 A JP 2008292195A JP 2008292195 A JP2008292195 A JP 2008292195A JP 2010119017 A JP2010119017 A JP 2010119017A
Authority
JP
Japan
Prior art keywords
projection
image
unit
projector
optical system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2008292195A
Other languages
Japanese (ja)
Inventor
Kenji Omori
賢二 大森
Takashi Yamamoto
隆司 山本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Ericsson Mobile Communications Japan Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Ericsson Mobile Communications Japan Inc filed Critical Sony Ericsson Mobile Communications Japan Inc
Priority to JP2008292195A priority Critical patent/JP2010119017A/en
Publication of JP2010119017A publication Critical patent/JP2010119017A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Projection Apparatus (AREA)
  • Video Image Reproduction Devices For Color Tv Systems (AREA)
  • Processing Of Color Television Signals (AREA)
  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To enable accurate color reproduction approximately matched to a source image prior to projection by approximately excluding influences caused by a surrounding environment or a projection screen. <P>SOLUTION: A projector 11 comprises a liquid crystal panel for displaying a projection base image projected on a screen surface, and a projection optical system for projecting the projection base image displayed on the liquid crystal panel on the screen surface. Prior to the projection of image to the projector 11, initial values for a light source of the projection optical system in the projector 11 and for an imaging device and an imaging optical system in a main camera 31 are set. After the initial values are set, a CPU 10 displays a chart image for calibration on the liquid crystal panel of the projector 11 as a projection base image, detects the color reproducibility of the screen surface and surrounding environmental light from an image captured by photographing the chart image using the main camera 31, and applies processing for optimizing the color reproduction of source image data prior to projection on the basis of the detection information. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、前面投影型映像表示装置、投影画像補正方法、及び、投影画像補正プログラムに関する。   The present invention relates to a front projection video display device, a projection image correction method, and a projection image correction program.

従来より、前面投影型映像投影装置（以下、プロジェクタ装置と表記する。）では、例えば明るさや色温度、フォーカスといった各種の設定を手動で行うものが主流となっている。   2. Description of the Related Art Conventionally, front-projection video projection apparatuses (hereinafter referred to as projector apparatuses) have been mainly used to manually perform various settings such as brightness, color temperature, and focus.

また、例えば特開２００６−２７６４６６号の公開特許公報（特許文献１）には、カメラ機能により投射像の投射面を撮影した撮影画像を基に、プロジェクタ機能におけるフォーカスの調整、明るさの調整、ホワイトバランスの調整、台形歪みの補正などを行うプロジェクタ機能付き携帯電話機が開示されている。さらに、この特許文献１には、コントラスト算出用画像や明るさ検出用画像などを投射した投射像をカメラ機能により撮影し、その撮影画像を用いてフォーカス調整、明るさ調整、ホワイトバランス調整を行うようになされている。なお、コントラスト算出用画像としては、例えば縦ラインを複数連ねた形状のパターン画像が挙げられており、フォーカス調整は、その縦ラインを撮影した画像のコントラストに応じてなされる。明るさ検出用画像としては、全体が無色（白色）の画像が挙げられており、明るさ調整は、その白色画像を撮影した画像の明るさが適切になるように、プロジェクタ機能のＬＥＤ光源への供給電流を調整することで行われる。また、白色の明るさ検出用画像は、ホワイトバランス調整にも用いられ、その白色画像を撮影した画像が本来の白色になるように、プロジェクタ機能のＬＥＤ光源への供給電流をＲ，Ｇ，Ｂ各色毎に調整することで行われる。   Further, for example, in Japanese Patent Application Laid-Open No. 2006-276466 (Patent Document 1), based on a photographed image obtained by photographing a projection surface of a projected image by a camera function, focus adjustment in a projector function, brightness adjustment, A mobile phone with a projector function for adjusting white balance, correcting keystone distortion, and the like is disclosed. Further, in Patent Document 1, a projection image obtained by projecting a contrast calculation image, a brightness detection image, or the like is captured by a camera function, and focus adjustment, brightness adjustment, and white balance adjustment are performed using the captured image. It is made like that. As the contrast calculation image, for example, a pattern image having a shape in which a plurality of vertical lines are connected is cited, and focus adjustment is performed according to the contrast of an image obtained by capturing the vertical lines. The brightness detection image includes a colorless (white) image as a whole, and the brightness adjustment is performed on the LED light source of the projector function so that the brightness of the image obtained by photographing the white image is appropriate. This is done by adjusting the supply current. The white brightness detection image is also used for white balance adjustment, and the current supplied to the LED light source of the projector function is set to R, G, B so that the image obtained by photographing the white image becomes the original white color. This is done by adjusting for each color.

特開２００６−２７６４６６号公報（図４，図６，図７）Japanese Patent Laying-Open No. 2006-276466 (FIGS. 4, 6, and 7)

ところで、上述のように携帯電話端末にプロジェクタ装置が搭載された場合には、従来の据え置き型のプロジェクタ装置の場合とは異なる問題が発生する。すなわち、携帯電話端末にプロジェクタ装置が搭載された場合、従来の据え置き型プロジェクタ装置のような専用スクリーンに映像が投影されるとは限らず、例えば室内の壁等のように、その場に存在する様々な物がスクリーンとして用いられる可能性が高い。   By the way, when the projector device is mounted on the mobile phone terminal as described above, a problem different from the case of the conventional stationary projector device occurs. That is, when a projector device is mounted on a mobile phone terminal, an image is not always projected onto a dedicated screen like a conventional stationary projector device, and is present on the spot such as an indoor wall. Various things are likely to be used as screens.

このように壁等の様々な物がスクリーンとして使用された場合、プロジェクタ装置では、上述の特許文献１に記載されているようなホワイトバランス調整や明るさ調整を行っただけでは、必ずしも良い画質の投影映像を得られない可能性が高い。すなわち例えば、壁の色が白色ではない場合や、室内照明が白色光ではないような場合には、上述の特許文献１のようにプロジェクタ機能のＬＥＤ光源によるＲ，Ｇ，Ｂ光を調整するのみでは、投影画像の色再現についても投影前の原画像のものと大きく異なってしまう虞がある。   When various objects such as walls are used as a screen in this way, the projector device does not necessarily have a good image quality simply by performing white balance adjustment and brightness adjustment as described in Patent Document 1 described above. There is a high possibility that the projected image cannot be obtained. That is, for example, when the color of the wall is not white or the room illumination is not white light, only the R, G, B light from the LED light source of the projector function is adjusted as described in Patent Document 1 above. Then, the color reproduction of the projected image may be greatly different from that of the original image before projection.

本発明は、このような実情に鑑みて提案されたものであり、投影前の原画像に略々一致した正確な色再現がなされた投影画像を実現可能な前面投影型映像表示装置、投影画像補正方法、及び、投影画像補正プログラムを提供することを目的とする。   The present invention has been proposed in view of such circumstances, and is a front-projection video display device capable of realizing a projected image with an accurate color reproduction that substantially matches the original image before projection, and a projected image It is an object to provide a correction method and a projection image correction program.

本発明は、スクリーン面上に映し出される投影基画像を表示する投影基画像表示パネル部と、その投影基画像表示パネル部に表示された投影基画像をスクリーン面上に投影させる投影光学系とを備えたプロジェクタ部とを有する前面投影型映像表示装置である。また、本発明の前面投影型映像表示装置は、撮像素子と撮像光学系とを備えたカメラ部により、少なくともスクリーン面を撮影可能となされている。本発明の前面投影型映像表示装置は、投影光学系の光源と撮像素子と撮像光学系の初期値を設定した後、プロジェクタ部によりスクリーン面上に投影されたキャリブレーション用チャート画像の投影画像の撮影画像から、スクリーン面及び周囲環境光の色再現性を検知する。そして、前面投影型映像表示装置は、その検知した色再現性を基に、投影前の原画像データに対して色再現を最適化する加工処理を施し、当該加工処理後の画像を投影基画像表示パネル部に投影基画像として表示させる。   The present invention includes a projection base image display panel unit that displays a projection base image projected on a screen surface, and a projection optical system that projects the projection base image displayed on the projection base image display panel unit onto the screen surface. 1 is a front-projection video display device having a projector unit equipped with the projector. Moreover, the front projection type image display apparatus of the present invention can photograph at least a screen surface by a camera unit including an imaging element and an imaging optical system. The front projection type image display device of the present invention sets the initial values of the light source, the image sensor, and the imaging optical system of the projection optical system, and then the projection chart image of the calibration chart image projected on the screen surface by the projector unit. The color reproducibility of the screen surface and ambient light is detected from the captured image. Then, the front projection type video display device performs a processing process for optimizing the color reproduction on the original image data before the projection based on the detected color reproducibility, and the image after the processing process is used as the projection base image. It is displayed as a projection base image on the display panel unit.

すなわち、本発明によれば、例えば投影光学系の光源光を調整するのではなく、投影前の原画像データに加工処理を施すことで、スクリーン面上に投影された画像の色再現性を最適化している。   That is, according to the present invention, the color reproducibility of the image projected on the screen surface is optimized by processing the original image data before projection, for example, without adjusting the light source light of the projection optical system. It has become.

本発明においては、投影前の原画像データに加工処理を施して、スクリーン面上に投影された画像の色再現を最適化することで、投影前の原画像に略々一致した正確な色再現性を有する投影画像を実現可能としている。   In the present invention, by performing processing on the original image data before projection and optimizing the color reproduction of the image projected on the screen surface, accurate color reproduction substantially matching the original image before projection is achieved. It is possible to realize a projection image having the characteristics.

以下、図面を参照しながら、本発明の一実施形態について説明する。   Hereinafter, an embodiment of the present invention will be described with reference to the drawings.

なお、本実施形態では、本発明が適用される一例として、前面投影型映像表示装置を備えた携帯電話端末を挙げるが、勿論、ここで説明する内容はあくまで一例であり、本発明はこの例に限定されないことは言うまでもない。なお、本実施形態における前面投影型映像表示装置は、携帯電話端末に内蔵された機能であってもよいし、コネクタ等を介して携帯電話端末に接続される超小型の前面投影型映像表示装置であっても良い。また、本実施形態では、後述のように携帯電話端末に画像撮影用のカメラ機能が搭載されている例を挙げているが、画像撮影は別のカメラ装置により行われても良い。   In the present embodiment, as an example to which the present invention is applied, a mobile phone terminal provided with a front projection type video display device is cited. Of course, the contents described here are merely examples, and the present invention is not limited to this example. Needless to say, it is not limited to. Note that the front-projection video display apparatus according to the present embodiment may have a function built in the mobile phone terminal or may be an ultra-compact front-projection video display apparatus connected to the mobile phone terminal via a connector or the like. It may be. Further, in the present embodiment, an example in which a camera function for image capturing is mounted on a mobile phone terminal as described later is given, but image capturing may be performed by another camera device.

［携帯電話端末の概略構成］
図１には、本実施形態の携帯電話端末の概略構成を示す。 [Schematic configuration of mobile phone terminal]
FIG. 1 shows a schematic configuration of a mobile phone terminal according to the present embodiment.

図１において、プロジェクタ１１は、本実施形態の携帯電話端末に内蔵されたプロジェクタ装置である。当該プロジェクタ１１は、前面投影型であり、投影されるべき基画像を表示する液晶パネル、その液晶パネルに投影光を照射する光源、及び、液晶パネル上に表示された投影基画像をスクリーン等に投影させるための投影光学系等を備えている。なお、プロジェクタ装置の具体的構成としては、投影方式により大別して液晶方式とＤＬＰ（Digital Light Processing）方式の２種類を挙げることができ、本発明実施形態のプロジェクタ１１はそれらの何れの方式であっても良い。光源としては、例えばＲ，Ｇ，Ｂ光をそれぞれ発光するＬＥＤ（発光ダイオード）等を挙げることができる。   In FIG. 1, a projector 11 is a projector device built in the mobile phone terminal of this embodiment. The projector 11 is of a front projection type, a liquid crystal panel that displays a base image to be projected, a light source that irradiates the liquid crystal panel with projection light, and a projection base image displayed on the liquid crystal panel on a screen or the like. A projection optical system for projecting is provided. The specific configuration of the projector apparatus can be roughly classified into two types, that is, a liquid crystal method and a DLP (Digital Light Processing) method, depending on the projection method, and the projector 11 according to the embodiment of the present invention is any of those methods. May be. Examples of the light source include an LED (light emitting diode) that emits R, G, and B light, respectively.

メインＬＣＤ(Liquid Crystal Display）１２は、本実施形態の携帯電話端末に搭載されているメイン液晶ディスプレイである。ＬＣＤＣ１３は、上記メインＬＣＤ１２の動作及び表示等を制御する液晶ディスプレイコントローラである。   A main LCD (Liquid Crystal Display) 12 is a main liquid crystal display mounted on the mobile phone terminal of the present embodiment. The LCDC 13 is a liquid crystal display controller that controls the operation and display of the main LCD 12.

ＬＥＤ（発光ダイオード）１４は、例えば着信ランプやキーパット４５の照明ランプなど、本実施形態の携帯電話端末に備えられている各種照明光源である。ＬＥＤドライバ１５は、それら複数のＬＥＤ１４を駆動および制御する。   The LED (light emitting diode) 14 is various illumination light sources provided in the mobile phone terminal of the present embodiment, such as an incoming lamp or an illumination lamp of the keypad 45. The LED driver 15 drives and controls the plurality of LEDs 14.

加速度センサ１６は、本実施形態の携帯電話端末に例えば物理的な振動が加えられた時に、その振動の加速度の大きさ及び向きを検出する。この加速度センサ１６の検出信号はＣＰＵ１０へ送られる。   The acceleration sensor 16 detects the magnitude and direction of the vibration acceleration when, for example, physical vibration is applied to the mobile phone terminal of the present embodiment. The detection signal of the acceleration sensor 16 is sent to the CPU 10.

ジャイロセンサ１７は、本実施形態の携帯電話端末に例えば物理的な振動が加えられた時に、その振動による回転方向の角速度と回転角度を検出する。このジャイロセンサ１７の検出信号はＣＰＵ１０へ送られる。   For example, when physical vibration is applied to the mobile phone terminal according to the present embodiment, the gyro sensor 17 detects an angular velocity and a rotation angle in a rotation direction due to the vibration. The detection signal of the gyro sensor 17 is sent to the CPU 10.

照度センサ１８は、本実施形態の携帯電話端末の周囲環境の明るさを検出する。この照度センサ１８の検出信号はＣＰＵ１０へ送られる。   The illuminance sensor 18 detects the brightness of the surrounding environment of the mobile phone terminal of the present embodiment. The detection signal of the illuminance sensor 18 is sent to the CPU 10.

レシーバ１９は、本実施形態の携帯電話端末にて音声通話等が行われている時に、受話音声を出力するためのスピーカである。   The receiver 19 is a speaker for outputting a received voice when a voice call or the like is performed at the mobile phone terminal of the present embodiment.

マイクロホン２０は、本実施形態の携帯電話端末にて音声通話等が行われている時に、送話音声を入力するための音声入力デバイスである。   The microphone 20 is a voice input device for inputting a transmission voice when a voice call or the like is performed at the mobile phone terminal of the present embodiment.

外部インターフェース（Ｉ／Ｆ）２１は、各種外部コネクタとその外部コネクタとの間で信号等を行うための外部接続部からなる。なお、上記外部コネクタにはいわゆるＵＳＢ２．０（Universal Serial Bus 2.0）規格のコネクタが含まれており、このため本実施形態の携帯電話端末はＵＳＢ２．０コントローラ２２も備えている。   The external interface (I / F) 21 includes an external connection unit for performing signals and the like between various external connectors and the external connectors. The external connector includes a so-called USB 2.0 (Universal Serial Bus 2.0) standard connector. For this reason, the mobile phone terminal of this embodiment also includes a USB 2.0 controller 22.

ＵＳＩＭカードスロット２３は、加入者情報（契約者情報）等が記憶されたいわゆるＵＳＩＭ（Universal Subscriber Identity Module）カードが装填されるＩＣカードスロットである。   The USIM card slot 23 is an IC card slot into which a so-called USIM (Universal Subscriber Identity Module) card storing subscriber information (subscriber information) and the like is loaded.

赤外線通信モジュール２４は、赤外線を用いて情報通信を行うための通信デバイスである。   The infrared communication module 24 is a communication device for performing information communication using infrared rays.

振動モータ２５は、本実施形態の携帯電話端末に振動を発生させるためのいわゆるバイブレータである。   The vibration motor 25 is a so-called vibrator for generating vibration in the mobile phone terminal of the present embodiment.

バッテリ２６は、本実施形態の携帯電話端末の各部で使用する電力用の電源である。   The battery 26 is a power source used for each part of the mobile phone terminal of the present embodiment.

周辺ＩＣ＋電源ＩＣ２７は、上記ＵＳＩＭカードスロット２３、赤外線通信モジュール２４、振動モータ２５、バッテリ２６、外部インターフェース２１と接続されており、それら各部の制御や信号処理の他、バッテリ２６の電源の供給制御などを行う。   The peripheral IC + power supply IC 27 is connected to the USIM card slot 23, the infrared communication module 24, the vibration motor 25, the battery 26, and the external interface 21. In addition to control of these parts and signal processing, power supply control of the battery 26 is performed. And so on.

メインカメラ３１は、本実施形態の携帯電話端末に搭載されたカメラ部であり、撮影光学系や撮像デバイス等からなる。フラッシュ（フラッシュライト）３３は、カメラによる撮影時の撮影補助光を発光するための光源ランプである。フラッシュライトコントローラ３２は、メインカメラ３１による撮影に連動して、フラッシュ３３の発光を制御する。   The main camera 31 is a camera unit mounted on the mobile phone terminal of the present embodiment, and includes a photographing optical system, an imaging device, and the like. The flash (flash light) 33 is a light source lamp for emitting photographing auxiliary light at the time of photographing with the camera. The flash light controller 32 controls light emission of the flash 33 in conjunction with shooting by the main camera 31.

サブカメラ３４は、上記メインカメラ３１とは別に設けられたカメラ部であり、一例として、いわゆる自分撮り時にユーザ自身を撮影したり、テレビ電話による通話の際にユーザ自身を撮影する際などに用いられる。   The sub camera 34 is a camera unit that is provided separately from the main camera 31 and is used, for example, when photographing the user himself during so-called self-portrait or when photographing the user himself during a videophone call. It is done.

ＲＦ回路３５は、本実施形態の携帯電話端末が携帯電話網の基地局と通信する際の無線通信用回路である。アンテナ３６は、本実施形態の携帯電話端末が基地局と無線通信を行う際の無線通信アンテナである。   The RF circuit 35 is a wireless communication circuit used when the mobile phone terminal of the present embodiment communicates with a base station of the mobile phone network. The antenna 36 is a wireless communication antenna when the mobile phone terminal of the present embodiment performs wireless communication with the base station.

非接触通信カードコントローラ３７は、非接触通信ＩＣカードとの間でいわゆる電磁誘導方式により信号通信を行うための各種制御及び信号処理を行う。非接触通信カードアンテナ３８は、上記電磁誘導方式による非接触通信のためのアンテナである。   The non-contact communication card controller 37 performs various controls and signal processing for performing signal communication with the non-contact communication IC card by a so-called electromagnetic induction method. The non-contact communication card antenna 38 is an antenna for non-contact communication by the electromagnetic induction method.

ブルートゥース（Ｂｌｕｅｔｏｏｔｈ：登録商標）コントローラ３９は、いわゆるブルートゥース方式により無線通信を行うための各種制御及び信号処理を行う。ブルートゥースアンテナ４０は、上記ブルートゥース方式の無線通信のためのアンテナである。   The Bluetooth (registered trademark) controller 39 performs various controls and signal processing for wireless communication by a so-called Bluetooth system. The Bluetooth antenna 40 is an antenna for the above-described Bluetooth wireless communication.

デジタルＴＶチューナ４１は、いわゆるデジタルテレビジョン放送用のチューナである。デジタルＴＶアンテナ４２は、当該デジタルテレビジョン放送電波を受信するためのアンテナである。   The digital TV tuner 41 is a so-called tuner for digital television broadcasting. The digital TV antenna 42 is an antenna for receiving the digital television broadcast radio wave.

メモリカードスロット４４は、例えばいわゆるＳＤ（Secure Digital）カード等の外部メモリカードが着脱されるスロットである。メモリカードコントローラ４３は、メモリカードスロット４４に装填されたメモリカードに対するデータの書き込み／読み出し等の制御及び信号処理を行う。   The memory card slot 44 is a slot into which an external memory card such as a so-called SD (Secure Digital) card is attached or detached. The memory card controller 43 performs control and signal processing such as data writing / reading with respect to the memory card loaded in the memory card slot 44.

キーパッド４５は、本実施形態の携帯電話端末に搭載された各種キーと、それら各キーがユーザにより操作された時のキー出力信号を生成する。   The keypad 45 generates various keys mounted on the mobile phone terminal of this embodiment and key output signals when these keys are operated by the user.

内部メモリ４６は、例えばＤＤＲ ＳＤＲＡＭ（Double Data Rate SDRAM）４７と、ＮＡＮＤ型フラッシュメモリ（NAND-type flash memory）４８とを有してなる。上記ＮＡＮＤ型フラッシュメモリ４８には、ＯＳ（Operating System）のプログラムやＣＰＵ１０が各部を制御するための制御プログラム、本発明にかかる投影画像補正プログラムを含む各種のアプリケーションプログラム、圧縮符号化された楽曲・動画像・静止画データコンテンツの他、各種の設定値、フォントデータ、各辞書データ、機種名情報や端末識別情報などが記憶される。ＤＤＲ ＳＤＲＡＭ４７は、ＣＰＵ１０が各種のデータ処理や演算を行う際の作業領域として、随時データを記憶する。   The internal memory 46 includes, for example, a DDR SDRAM (Double Data Rate SDRAM) 47 and a NAND flash memory (NAND-type flash memory) 48. The NAND flash memory 48 includes an OS (Operating System) program, a control program for the CPU 10 to control each unit, various application programs including a projection image correction program according to the present invention, and a compression-coded music / In addition to moving image / still image data content, various setting values, font data, dictionary data, model name information, terminal identification information, and the like are stored. The DDR SDRAM 47 stores data as needed as a work area when the CPU 10 performs various data processing and calculations.

音声チップ４９は、例えば音楽再生などの信号処理を行うためのＩＣ回路である。当該音声チップ４９には、ステレオ音声出力用の右スピーカ５０と左スピーカ５１が接続されている。   The audio chip 49 is an IC circuit for performing signal processing such as music reproduction. A right speaker 50 and a left speaker 51 for stereo sound output are connected to the sound chip 49.

ＣＰＵ（中央処理ユニット）１０は、通信制御、音声処理及びその制御、画像処理及びその制御、その他各種信号処理や各部の制御等を行う。また、ＣＰＵ１０は、内部メモリ４６に蓄積されている各種の制御プログラムやアプリケーションプログラムの実行及びそれに付随する各種データ処理等を行う。特に本実施形態の場合、詳細については後述するが、ＣＰＵ１０は、内部メモリ４６に格納されている本発明にかかる投影画像補正プログラムを実行することにより、プロジェクタ１１とメインカメラ３１の初期値設定や、プロジェクタ１１により映像投影される投影基画像の表示制御、その投影基画像の一つであるキャリブレーション用チャート画像の生成制御等を行う。またこの時のＣＰＵ１０は、上記キャリブレーション用チャート画像の撮影画像を用いて、スクリーン投影面の色や照明光の色等を検知し、その検知情報を基に、スクリーン投影面の色味や照明光の色味を補正した最適な色再現性を実現するために、投影前の原画像データに対して加工処理を施す。   A CPU (Central Processing Unit) 10 performs communication control, audio processing and control, image processing and control, other various signal processing, control of each unit, and the like. The CPU 10 executes various control programs and application programs stored in the internal memory 46 and performs various data processing associated therewith. Particularly in the case of the present embodiment, although details will be described later, the CPU 10 executes the projection image correction program according to the present invention stored in the internal memory 46 to thereby set initial values of the projector 11 and the main camera 31. Then, display control of a projection base image projected by the projector 11 and generation control of a calibration chart image which is one of the projection base images are performed. At this time, the CPU 10 detects the color of the screen projection surface, the color of the illumination light, and the like using the captured image of the calibration chart image, and based on the detection information, the color and illumination of the screen projection surface In order to realize the optimum color reproducibility by correcting the color of light, the original image data before projection is processed.

その他、図１には図示を省略しているが、本実施形態の携帯電話端末は、一般的な携帯電話端末に設けられる各構成要素についても当然ながら備えている。   In addition, although not shown in FIG. 1, the mobile phone terminal of the present embodiment is naturally provided with each component provided in a general mobile phone terminal.

［プロジェクタによる映像投影］
図２には、上述したようなプロジェクタ１１を内蔵した携帯電話端末１によりスクリーン３上に画像４が投影されている状態の一例を示す。なお、図２に例示した投影画像４は、建物画像等の投影対象物画像５が含まれる画像となっている。 [Video projection by projector]
FIG. 2 shows an example of a state in which the image 4 is projected on the screen 3 by the mobile phone terminal 1 incorporating the projector 11 as described above. Note that the projection image 4 illustrated in FIG. 2 is an image including a projection object image 5 such as a building image.

ここで、本実施形態の携帯電話端末１は、プロジェクタ１１により画像を投影する前に、上記照度センサ１８により周囲環境における大凡の照明状態（明るさ）を検知する。また、携帯電話端末１は、プロジェクタ１１による画像投影前に、メインカメラ３１を用いて投影面を撮影した画像から当該投影面の明るさ情報を求める。そして、携帯電話端末１は、それら照明状態の検知情報と上記撮影画像による明るさ情報とから、プロジェクタ１１のブライトネス（出力値）を適正レベルに初期設定、つまり明る過ぎたり暗過ぎない適正な明るさに初期設定する。またこのように、適正なブライトネスが得られるようにした場合、本実施形態の携帯電話端末１では、例えばブライトネスを必要以上に高くし過ぎることでバッテリの電力が消耗してしまうことを防止でき、省電力化を実現可能となる。なお、当該プロジェクタ１１のブライトネス設定の際には、上記照度センサ１８による検知情報とメインカメラ３１による明るさ情報の何れか一方のみを用いてもよいし、それら両者を組み合わせてもよい。両者を組み合わせる場合には、何れか一方、若しくはそれら両者に対し、それぞれ適宜重み付けを行ってもよい。   Here, before projecting an image by the projector 11, the cellular phone terminal 1 of the present embodiment detects an approximate illumination state (brightness) in the surrounding environment by the illuminance sensor 18. In addition, before the image is projected by the projector 11, the mobile phone terminal 1 obtains brightness information of the projection plane from an image obtained by photographing the projection plane using the main camera 31. Then, the cellular phone terminal 1 initially sets the brightness (output value) of the projector 11 to an appropriate level from the detection information of the illumination state and the brightness information based on the captured image, that is, the appropriate brightness that is neither too bright nor too dark. Initial setting. In addition, when appropriate brightness is obtained in this way, in the mobile phone terminal 1 of the present embodiment, for example, it is possible to prevent the battery power from being consumed by increasing the brightness more than necessary, Power saving can be realized. When the brightness of the projector 11 is set, only one of detection information from the illuminance sensor 18 and brightness information from the main camera 31 may be used, or both of them may be combined. When both are combined, one or both of them may be appropriately weighted.

さらに、携帯電話端末１は、プロジェクタ１１の起動後、所定のキャリブレーション用チャート画像をスクリーン面（例えば壁面等）に投影し、その投影画像をメインカメラ３１により撮影する。そして、携帯電話端末１は、上記キャリブレーション用チャート画像の撮影画像を用い、プロジェクタ１１の明るさ調整やフォーカス調整（より詳細な初期設定）を行う。なお、本実施形態において、上記所定のキャリブレーション用チャート画像は、例えば図３に示すように、背景が白色となされ、その背景上に、白色格子エリア、黒色格子エリア、それら白色格子エリアと黒色格子エリアの間に配されてそれぞれ階調差を有する幾つかのグレー色格子エリアと、青色や緑色，赤色，黄色等の幾つかの色からなる各色格子エリアとが配された画像となされる。   Further, after the projector 11 is activated, the mobile phone terminal 1 projects a predetermined calibration chart image on a screen surface (for example, a wall surface) and captures the projected image by the main camera 31. Then, the cellular phone terminal 1 performs brightness adjustment and focus adjustment (more detailed initial setting) of the projector 11 using the captured image of the calibration chart image. In the present embodiment, the predetermined calibration chart image has a white background as shown in FIG. 3, for example, and a white grid area, a black grid area, and the white grid area and black An image in which several gray color lattice areas each having a gradation difference and each color lattice area composed of several colors such as blue, green, red, and yellow are arranged between the lattice areas is formed. .

すなわち、携帯電話端末１は、上記キャリブレーション用チャート画像の撮影画像のうち、白色背景と黒色格子エリアとの間のエッジ部分の例えばコントラストを求め、そのコントラストが例えば閾値以上となるように、メインカメラ３１のレンズ系のフォーカスを調整する初期設定を行う。そして、携帯電話端末１は、当該メインカメラ３１のフォーカス調整後に、同じく白色背景と黒色格子エリアとの間のエッジ部分の例えばコントラストを求め、そのコントラストが例えば閾値以上となるように、プロジェクタ１１の投影光学系のフォーカス調整する初期設定を行う。   That is, the mobile phone terminal 1 obtains, for example, the contrast of the edge portion between the white background and the black lattice area in the captured image of the calibration chart image, and sets the main contrast so that the contrast is, for example, a threshold value or more. An initial setting for adjusting the focus of the lens system of the camera 31 is performed. Then, after the focus adjustment of the main camera 31, the mobile phone terminal 1 obtains, for example, the contrast of the edge portion between the white background and the black lattice area, and the projector 11 Performs initial settings for adjusting the focus of the projection optical system.

また、本実施形態の携帯電話端末１は、上記所定のキャリブレーション用チャート画像の撮影画像のうち、白色背景と黒色格子エリアとの間の輝度差と、及び、各グレー色格子エリア間の階調差を求める。なお、プロジェクタ１１の明るさが強過ぎる場合には、上記黒色格子エリアの黒色がグレー色（いわゆる白浮き）となり階調差が少なくなる（いわゆる階調がつぶれた状態となる）。逆に、プロジェクタ１１の明るさが弱過ぎる場合には、白色背景や白色格子エリアの白色がグレー色となり（いわゆる白が沈んだ状態となる）、やはり階調差が少なくなる。このため、本実施形態の携帯電話端末１は、上記求めた輝度差と階調差とが適正な値になるように、プロジェクタ１１の光源を制御して明るさ調整する初期設定を行う。   In addition, the mobile phone terminal 1 according to the present embodiment includes the luminance difference between the white background and the black grid area and the level between the gray grid areas in the photographed image of the predetermined calibration chart image. Find the difference. If the brightness of the projector 11 is too strong, the black color of the black grid area is gray (so-called white floating), and the gradation difference is reduced (so-called gradation is crushed). On the other hand, when the brightness of the projector 11 is too weak, the white background or white color of the white grid area becomes gray (so-called white sinks), and the gradation difference is also reduced. For this reason, the mobile phone terminal 1 according to the present embodiment performs initial setting for adjusting the brightness by controlling the light source of the projector 11 so that the obtained luminance difference and gradation difference become appropriate values.

さらに、本実施形態の携帯電話端末１は、例えばプロジェクタ１１のＬＥＤ光源によるＲ，Ｇ，Ｂ光を調整することにより、ホワイトバランスを調整することも可能となされている。   Further, the cellular phone terminal 1 of the present embodiment can adjust the white balance by adjusting R, G, B light from the LED light source of the projector 11, for example.

ところで、本実施形態のように、携帯電話端末１のプロジェクタ１１により画像が投影されるスクリーンは、必ずしも白色の投影専用スクリーンであるとは限らず、また、室内照明光の色についても必ずしも白色光であるとは限らない。このように、スクリーンが例えば室内の壁等であったり、室内照明光が白色光でないような場合、プロジェクタ１１のＬＥＤ光源のＲ，Ｇ，Ｂ光を調整するのみでは、必ずしも正確な色再現性が得られない可能性が高い。すなわち例えば、図２の投影対象物画像５の色等が原画像の色等とは異なってしまう虞がある。   By the way, as in the present embodiment, the screen on which an image is projected by the projector 11 of the mobile phone terminal 1 is not necessarily a white projection-only screen, and the color of the room illumination light is not necessarily white light. Not necessarily. As described above, when the screen is, for example, an indoor wall or the room illumination light is not white light, it is not always accurate color reproducibility only by adjusting the R, G, B light of the LED light source of the projector 11. Is likely not to be obtained. That is, for example, the color of the projection object image 5 in FIG. 2 may be different from the color of the original image.

このため、本実施形態の携帯電話端末１は、前述のような各種初期設定が完了した後、上記キャリブレーション用チャート画像のうち白色背景や白色格子エリアの撮影画像を基に、スクリーン投影面の色味および照明光の色味を検知する。但しこの場合、プロジェクタ１１の光源自体が有する色温度特性や、メインカメラ３１のホワイトバランスが変化すると、当該メインカメラ３１の撮影画像から上記スクリーン投影面の色味および照明光の色味を判断することができなくなるため、本実施形態では、前述したように、プロジェクタ１１の光源とメインカメラ３１のホワイトバランスを初期設定により固定している。なお、プロジェクタ１１の光源の色温度特性を変化させない場合（例えば色温度特性が設計仕様により決まっている場合）には、メインカメラ３１のホワイトバランスのみを初期設定により固定してもよい。   For this reason, the mobile phone terminal 1 according to the present embodiment, after completing the various initial settings as described above, on the screen projection surface based on the captured image of the white background or the white lattice area in the calibration chart image. Detect the color and the color of the illumination light. However, in this case, when the color temperature characteristic of the light source of the projector 11 or the white balance of the main camera 31 changes, the color of the screen projection surface and the color of the illumination light are determined from the captured image of the main camera 31. In this embodiment, as described above, the light source of the projector 11 and the white balance of the main camera 31 are fixed by the initial setting. When the color temperature characteristic of the light source of the projector 11 is not changed (for example, when the color temperature characteristic is determined by the design specification), only the white balance of the main camera 31 may be fixed by the initial setting.

また、本実施形態の携帯電話端末１は、上記キャリブレーション用チャート画像の上記各色格子エリアを撮影した撮影画像から、各色の色再現性（それぞれ個々の色が正しく再現されているかの程度）を検出する。   In addition, the mobile phone terminal 1 of the present embodiment has a color reproducibility (a degree of whether each individual color is correctly reproduced) from a photographed image obtained by photographing each color grid area of the calibration chart image. To detect.

そして、本実施形態の携帯電話端末１は、上述のように検知した投影面及び照明光の色味を補正して最適な色再現性が得られる画像加工処理を原画像データに施し、その加工処理後の画像をプロジェクタ１１の液晶パネル上に表示する投影基画像とする。すなわち本実施形態の携帯電話端末１は、上記キャリブレーション用チャート画像の撮影画像を基に、原画像に対して例えば色差信号Ｃｂ，Ｃｒの比率を適宜変えるような画像加工処理を施し、その画像加工処理後の画像を、プロジェクタ１１の液晶パネル上に投影基画像として表示する。これにより、本実施形態によれば、投影面の色味および照明光の色味を補正した最適な色再現の画像をスクリーン面上に投影することが可能となる。   Then, the cellular phone terminal 1 according to the present embodiment performs an image processing process on the original image data to obtain an optimum color reproducibility by correcting the projection plane and the color of the illumination light detected as described above. The processed image is a projection base image displayed on the liquid crystal panel of the projector 11. That is, the cellular phone terminal 1 according to the present embodiment performs an image processing process such that the ratio of the color difference signals Cb and Cr is appropriately changed with respect to the original image based on the captured image of the calibration chart image, and the image The processed image is displayed on the liquid crystal panel of the projector 11 as a projection base image. As a result, according to the present embodiment, it is possible to project an image of optimum color reproduction in which the color of the projection surface and the color of the illumination light are corrected onto the screen surface.

その他、本実施形態に携帯電話端末１において、上述した明るさ調整やフォーカス調整、ホワイトバランス調整、色再現性の調整は、ユーザからの要求に応じて常時実行可能となされている。また、それら各調整の機能は、個別若しくは一括してオン／オフ（有効／無効）設定が可能となされている。   In addition, in the cellular phone terminal 1 according to the present embodiment, the above-described brightness adjustment, focus adjustment, white balance adjustment, and color reproducibility adjustment can be performed at all times in response to a request from the user. Each of these adjustment functions can be turned on / off (valid / invalid) individually or collectively.

［明るさ、ホワイトバランス、色再現性等の調整フロー］
図４には、上述したような明るさ調整やホワイトバランス調整、色再現性の調整がなされる際のフローチャートを示す。なお、この図４のフローチャートの処理は、ＣＰＵ１０が本発明の投影画像補正プログラムを実行することにより行われる。 [Adjustment flow for brightness, white balance, color reproducibility, etc.]
FIG. 4 shows a flowchart when the brightness adjustment, white balance adjustment, and color reproducibility adjustment as described above are performed. Note that the processing of the flowchart of FIG. 4 is performed by the CPU 10 executing the projection image correction program of the present invention.

図４において、プロジェクタ１１による映像投影を行う旨の指示がユーザ等から入力されると、ＣＰＵ１０は、プロジェクタ映像投影を実際に開始する前に、ステップＳ１の処理として、照度センサ１８を用いて周囲環境における大凡の照明状態を検知する。   In FIG. 4, when an instruction to perform image projection by the projector 11 is input from the user or the like, the CPU 10 uses the illuminance sensor 18 as a process in step S1 before actually starting the projector image projection. Detects general lighting conditions in the environment.

また、ＣＰＵ１０は、プロジェクタによる画像投影前に、ステップＳ２の処理として、メインカメラ３１を起動させ、さらにステップＳ３の処理として、当該メインカメラ３１にて投影面を撮影する。   Further, before projecting an image by the projector, the CPU 10 activates the main camera 31 as a process of step S2, and further captures a projection plane with the main camera 31 as a process of step S3.

そして、ＣＰＵ１０は、ステップＳ４の処理として、ステップＳ１にて検知した周囲照明環境による明るさ情報とステップＳ３にて撮影した画像から求めた投影面の明るさ情報とから、プロジェクタ１１のブライトネス（光量）の初期値を設定する。当該光量の初期値は、上記周囲環境の照明状態と撮影面の明るさとに応じた最適な値に設定される。これにより、不必要なブライトネス設定による無駄な電力消費を無くすことができ、省電力化が可能となる。   In step S4, the CPU 10 determines the brightness (light quantity) of the projector 11 from the brightness information based on the ambient illumination environment detected in step S1 and the brightness information of the projection plane obtained from the image captured in step S3. ) Is set to the initial value. The initial value of the light amount is set to an optimum value according to the illumination state of the surrounding environment and the brightness of the photographing surface. Thereby, useless power consumption due to unnecessary brightness setting can be eliminated, and power saving can be achieved.

次に、ＣＰＵ１０は、ステップＳ５の処理として、プロジェクタ１１を起動させ、ステップＳ６の処理として、前述の図３に示したようなキャリブレーション用チャート画像を投影基画像として上記プロジェクタ１１の液晶パネル上に表示させる。   Next, the CPU 10 activates the projector 11 as a process of step S5, and as a process of step S6, the calibration chart image as shown in FIG. 3 is used as a projection base image on the liquid crystal panel of the projector 11 described above. To display.

そして、ＣＰＵ１０は、上記プロジェクタ１１により投影面上に投影された上記キャリブレーション用チャート画像を、メインカメラ３１により撮影させる。   Then, the CPU 10 causes the main camera 31 to capture the calibration chart image projected on the projection plane by the projector 11.

次に、ＣＰＵ１０は、ステップＳ８の処理として、上記キャリブレーション用チャート画像の撮影画像を用いて前述のようにメインカメラ３１のフォーカス調整を行う。   Next, the CPU 10 performs the focus adjustment of the main camera 31 as described above using the captured image of the calibration chart image as the process of step S8.

さらに、上記カメラのフォーカス調整の初期設定完了後、ＣＰＵ１０は、ステップＳ９とステップＳ１０の処理として、上記キャリブレーション用チャート画像の撮影画像を用いたフィードバック制御により、プロジェクタ１１のフォーカス自動調整を行う。すなわち、ＣＰＵ１０は、プロジェクタ１１のフォーカス自動調整時にメインカメラ３１で得られた撮影画像から、プロジェクタ１１のフォーカスが合ったか否か判定するフィードバックフォーカス調整を行う。これらステップＳ９とステップＳ１０の処理において、ＣＰＵ１０は、プロジェクタ１１のフォーカスが合っていない場合にはステップＳ８へ処理を戻し、フォーカスが合った場合にはステップＳ１１へ処理を進める。   Further, after the initial setting of the camera focus adjustment is completed, the CPU 10 performs the automatic focus adjustment of the projector 11 by feedback control using the photographed image of the calibration chart image as the processing of step S9 and step S10. That is, the CPU 10 performs feedback focus adjustment for determining whether or not the projector 11 is in focus from the captured image obtained by the main camera 31 during automatic focus adjustment of the projector 11. In the processes of step S9 and step S10, the CPU 10 returns the process to step S8 if the projector 11 is not in focus, and proceeds to step S11 if the projector 11 is in focus.

ステップＳ１１の処理に進むと、ＣＰＵ１０は、上記キャリブレーション用チャート画像の撮影画像を用いて、前述したようにプロジェクタ１１のより正確な明るさ調整を行う。当該プロジェクタ１１の正確な明るさ調整による初期設定が終わると、ＣＰＵ１０は、ステップＳ１２へ処理を進める。   In step S11, the CPU 10 performs more accurate brightness adjustment of the projector 11 as described above using the captured image of the calibration chart image. When the initial setting by the accurate brightness adjustment of the projector 11 is completed, the CPU 10 advances the process to step S12.

ステップＳ１２の処理に進むと、ＣＰＵ１０は、キャリブレーション用チャート画像の撮影画像を基に、その後にプロジェクタ投影される画像のホワイトバランスと色再現が適正となるように、それらの投影原画像データに対して、例えば色差の比率や位相を適宜変更するようなデータ加工処理を施す。   When the processing proceeds to step S12, the CPU 10 uses the captured image of the calibration chart image as the projection original image data so that the white balance and color reproduction of the image projected thereafter by the projector are appropriate. On the other hand, for example, data processing is performed to appropriately change the color difference ratio and phase.

このステップＳ１２の処理が完了すると、ＣＰＵ１０は、図４のフローチャートの処理を終了する。この後、プロジェクタ１１により実際に画像の投影が開始されることになる。   When the process of step S12 is completed, the CPU 10 ends the process of the flowchart of FIG. Thereafter, the projector 11 actually starts projecting an image.

［まとめ］
以上説明したように、本実施形態の携帯電話端末においては、ブライトネスを適正レベルにすることで省電力化を図ることができ、また、所定のキャリブレーション用チャート画像をカメラ撮影した画像から明るさ調整やホワイトバランス調整を行うことができる。さらに、本実施形態の携帯電話端末によれば、所定のキャリブレーション用チャート画像をカメラ撮影した画像を基に、原画像に対して色再現性を調整するためのデータ加工を施すことにより、スクリーン面上で正確な色再現性を有する画像を投影することが可能となっている。 [Summary]
As described above, in the mobile phone terminal according to the present embodiment, it is possible to save power by setting the brightness to an appropriate level, and the brightness of the predetermined calibration chart image from the image captured by the camera can be improved. Adjustment and white balance adjustment can be performed. Furthermore, according to the mobile phone terminal of the present embodiment, the screen is obtained by performing data processing for adjusting the color reproducibility on the original image based on the image obtained by photographing the predetermined calibration chart image with the camera. It is possible to project an image having accurate color reproducibility on the surface.

なお、上述した実施形態の説明は、本発明の一例である。このため、本発明は上述した各実施形態に限定されることなく、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能であることはもちろんである。例えば、上述の実施形態では、携帯電話端末を例に挙げたが、本発明はプロジェクタ機能を内蔵した他の各種端末等にも適用可能である。   The above description of the embodiment is an example of the present invention. Therefore, the present invention is not limited to the above-described embodiments, and various modifications can be made according to the design and the like as long as they do not depart from the technical idea according to the present invention. . For example, in the above-described embodiment, the mobile phone terminal is taken as an example, but the present invention is also applicable to other various terminals with a built-in projector function.

本実施形態のではキャリブレーション用チャート画像として図３に示す例を挙げたが、その他の既知の各種チャート画像を用いてもよい。また、例えばＲ，Ｇ，Ｂの三原色光をスクリーンに投影し、その投影画像の撮影画像を元にホワイトバランスを調整するようにしても良い。   In the present embodiment, the example shown in FIG. 3 is given as the calibration chart image, but various other known chart images may be used. Further, for example, R, G, and B primary color lights may be projected onto a screen, and the white balance may be adjusted based on the captured image of the projected image.

本発明実施形態の携帯電話端末の概略構成を示すブロック図である。It is a block diagram which shows schematic structure of the mobile telephone terminal of this invention embodiment. プロジェクタを内蔵した携帯電話端末によりスクリーン上に画像が投影されている状態の一例を示す図である。It is a figure which shows an example of the state in which the image is projected on the screen by the mobile telephone terminal incorporating the projector. キャリブレーション用チャート画像の一例を示す図である。It is a figure which shows an example of the chart image for calibration. 明るさ調整、ホワイトバランス調整、色再現性等の調整フローチャートである。6 is an adjustment flowchart for brightness adjustment, white balance adjustment, color reproducibility, and the like.

符号の説明Explanation of symbols

１ 携帯電話端末、３ スクリーン、４ 投影画像、５ 投影対象物画像、１０ ＣＰＵ、１１ プロジェクタ、１２ ＬＣＤ、１３ ＬＣＤＣ、１４ ＬＥＤ、１５ ＬＥＤドライバ、１６ 加速度センサ、１７ ジャイロセンサ、１８ 照度センサ、１９ レシーバ、２０ マイクロホン、２１ 外部インターフェース、２２ ＵＳＢ２．０コントローラ、２３ ＵＳＩＭカードスロット、２４ 赤外線通信モジュール、２５ 振動モータ、２６ バッテリ、２７ 周辺ＩＣ＋電源ＩＣ、３１ メインカメラ、３２ フラッシュライトコントローラ、３３ フラッシュ、３４ サブカメラ、３５ ＲＦ回路、３６ アンテナ、 ３７ 非接触通信カードコントローラ３７、３８ 非接触通信カードアンテナ、３９ ブルートゥースコントローラ、４０ ブルートゥースアンテナ、４１ デジタルＴＶチューナ、４２ デジタルＴＶアンテナ、４３ メモリカードコントローラ、４４ メモリカードスロット、４５ キーパッド、４６ 内部メモリ、４７ ＤＤＲ ＳＤＲＡＭ、４８ ＮＡＮＤ型フラッシュメモリ、４９ 音声チップ、５０ 右スピーカ、５１ 左スピーカ   1 mobile phone terminal, 3 screen, 4 projected image, 5 projected object image, 10 CPU, 11 projector, 12 LCD, 13 LCDC, 14 LED, 15 LED driver, 16 acceleration sensor, 17 gyro sensor, 18 illuminance sensor, 19 Receiver, 20 Microphone, 21 External interface, 22 USB2.0 controller, 23 USIM card slot, 24 Infrared communication module, 25 Vibration motor, 26 Battery, 27 Peripheral IC + power supply IC, 31 Main camera, 32 Flash light controller, 33 Flash, 34 sub camera, 35 RF circuit, 36 antenna, 37 contactless communication card controller 37, 38 contactless communication card antenna, 39 Bluetooth controller, 40 brute Antenna, 41 digital TV tuner, 42 digital TV antenna, 43 memory card controller, 44 memory card slot, 45 keypad, 46 internal memory, 47 DDR SDRAM, 48 NAND flash memory, 49 audio chip, 50 right speaker, 51 left Speaker

Claims (7)

スクリーン面上に映し出される投影基画像を表示する投影基画像表示パネル部と、その投影基画像表示パネル部に表示された投影基画像をスクリーン面上に投影させる投影光学系とを備えたプロジェクタ部と、
所定のキャリブレーション用チャート画像を上記投影基画像として上記プロジェクタ部の投影基画像表示パネル部に表示させるチャート画像表示制御部と、
少なくとも上記スクリーン面を撮影する撮像素子と撮像光学系とを備えたカメラ部と、
上記プロジェクタ部の投影光学系の光源、及び、上記カメラ部の撮像素子及び撮像光学系の初期値を設定する初期値設定部と、
上記初期値設定部による上記初期値設定後、上記プロジェクタ部によりスクリーン面上に投影された上記キャリブレーション用チャート画像の投影画像を上記カメラ部が撮影した画像から、上記スクリーン面及び周囲環境光の色再現性を検知し、その検知した色再現性を基に、投影前の原画像データに対して色再現を最適化する加工処理を施し、当該加工処理後の画像を上記投影基画像表示パネル部に上記投影基画像として表示させる画像加工処理部と、
を有する前面投影型映像表示装置。 Projector unit including a projection base image display panel unit that displays a projection base image projected on a screen surface, and a projection optical system that projects the projection base image displayed on the projection base image display panel unit onto the screen surface When,
A chart image display control unit for displaying a predetermined calibration chart image on the projection base image display panel unit of the projector unit as the projection base image;
A camera unit including at least an imaging element that captures the screen surface and an imaging optical system;
A light source of the projection optical system of the projector unit, and an initial value setting unit for setting initial values of the imaging device and the imaging optical system of the camera unit;
After the initial value is set by the initial value setting unit, the projection of the calibration chart image projected on the screen surface by the projector unit is taken from the image taken by the camera unit, and the screen surface and ambient ambient light Based on the color reproducibility detected, the color reproducibility is detected, the original image data before projection is subjected to a processing process that optimizes the color reproduction, and the processed image is displayed on the projection base image display panel. An image processing unit to be displayed as the projection base image on the unit;
A front-projection video display apparatus having 上記画像加工処理部は、上記原画像データの色差比率を調整する加工処理を行う請求項１記載の前面投影型映像表示装置。   The front-projection image display apparatus according to claim 1, wherein the image processing unit performs a processing for adjusting a color difference ratio of the original image data. 上記初期値設定部は、照度センサにより検知した周囲環境照明状態を基に、上記プロジェクタ部の上記投影光学系の光源の初期値を設定する請求項１記載の前面投影型映像表示装置。   The front projection image display apparatus according to claim 1, wherein the initial value setting unit sets an initial value of a light source of the projection optical system of the projector unit based on an ambient illumination state detected by an illuminance sensor. 上記初期値設定部は、上記カメラ部により上記スクリーン面を撮影した画像を基に、上記プロジェクタ部の上記投影光学系の光源の初期値を設定する請求項２又は請求項３記載の前面投影型映像表示装置。   4. The front projection type according to claim 2, wherein the initial value setting unit sets an initial value of a light source of the projection optical system of the projector unit based on an image obtained by photographing the screen surface by the camera unit. Video display device. 上記初期値設定部は、上記プロジェクタ部によりスクリーン面上に投影された上記所定のキャリブレーション用チャート画像の投影画像を上記カメラ部が撮影した画像から、上記カメラ部の上記撮影光学系のフォーカスと上記撮像素子出力の初期値を設定する請求項４記載の前面投影型映像表示装置。   The initial value setting unit is configured to obtain a focus of the photographing optical system of the camera unit from an image obtained by photographing the projection image of the predetermined calibration chart image projected on the screen surface by the projector unit. The front-projection image display apparatus according to claim 4, wherein an initial value of the image sensor output is set. スクリーン面上に映し出される投影基画像を表示する投影基画像表示パネル部とその投影基画像表示パネル部に表示された投影基画像をスクリーン面上に投影させる投影光学系とを備えたプロジェクタ部に対し、チャート画像表示制御部が、所定のキャリブレーション用チャート画像を上記投影基画像として表示させるステップと、
撮像素子と撮像光学系とを備えたカメラ部が上記スクリーン面を撮影するステップと、
上記プロジェクタ部の投影光学系の光源、及び、上記カメラ部の撮像素子及び撮像光学系の初期値を、初期値設定部が設定するステップと、
上記初期値設定部による上記初期値設定後、画像加工処理部が、上記プロジェクタ部によりスクリーン面上に投影された上記キャリブレーション用チャート画像の投影画像を上記カメラ部が撮影した画像から、上記スクリーン面及び周囲環境光の色再現性を検知し、その検知した色再現性を基に、投影前の原画像データに対して色再現を最適化する加工処理を施し、当該加工処理後の画像を上記投影基画像表示パネル部に上記投影基画像として表示させるステップと、
を有する投影画像補正方法。 A projector unit including a projection base image display panel unit that displays a projection base image projected on a screen surface, and a projection optical system that projects the projection base image displayed on the projection base image display panel unit onto the screen surface On the other hand, the chart image display control unit displays a predetermined calibration chart image as the projection base image;
A camera unit including an imaging element and an imaging optical system photographing the screen surface;
The initial value setting unit sets initial values of the light source of the projection optical system of the projector unit and the imaging device and imaging optical system of the camera unit;
After the initial value setting by the initial value setting unit, the image processing processing unit uses the projection image of the calibration chart image projected on the screen surface by the projector unit from the image captured by the camera unit to the screen. The color reproducibility of the surface and ambient light is detected, and based on the detected color reproducibility, the original image data before projection is processed to optimize color reproduction, and the processed image is processed. Displaying as the projection base image on the projection base image display panel unit;
A projected image correction method comprising: スクリーン面上に映し出される投影基画像を表示する投影基画像表示パネル部とその投影基画像表示パネル部に表示された投影基画像をスクリーン面上に投影させる投影光学系とを備えたプロジェクタ部に対し、所定のキャリブレーション用チャート画像を上記投影基画像として表示させるチャート画像表示制御部と、
撮像素子と撮像光学系とを備えたカメラ部の上記撮像素子及び撮影光学系の初期値と上記プロジェクタ部の投影光学系の光源の初期値を設定する初期値設定部と、
上記初期値設定部による上記初期値設定後、上記プロジェクタ部によりスクリーン面上に投影された上記キャリブレーション用チャート画像の投影画像を上記カメラ部が撮影した画像から、上記スクリーン面及び周囲環境光の色再現性を検知し、その検知した色再現性を基に、投影前の原画像データに対して色再現を最適化する加工処理を施し、当該加工処理後の画像を上記投影基画像表示パネル部に上記投影基画像として表示させる画像加工処理部として、
前面投影型映像表示装置を動作させる投影画像補正プログラム。 A projector unit including a projection base image display panel unit that displays a projection base image projected on a screen surface, and a projection optical system that projects the projection base image displayed on the projection base image display panel unit onto the screen surface On the other hand, a chart image display control unit that displays a predetermined calibration chart image as the projection base image;
An initial value setting unit for setting an initial value of the light source of the projection optical system of the projector unit and an initial value of the imaging device and the imaging optical system of the camera unit including the imaging device and the imaging optical system;
After the initial value is set by the initial value setting unit, the projection of the calibration chart image projected on the screen surface by the projector unit is taken from the image taken by the camera unit, and the screen surface and ambient ambient light Based on the color reproducibility detected, the color reproducibility is detected, the original image data before projection is subjected to a processing process that optimizes the color reproduction, and the processed image is displayed on the projection base image display panel. As an image processing unit to be displayed as the projection base image on the unit,
A projection image correction program for operating a front projection video display device.
JP2008292195A 2008-11-14 2008-11-14 Front projection video display device, projection image correction method, and projection image correction program Withdrawn JP2010119017A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008292195A JP2010119017A (en) 2008-11-14 2008-11-14 Front projection video display device, projection image correction method, and projection image correction program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008292195A JP2010119017A (en) 2008-11-14 2008-11-14 Front projection video display device, projection image correction method, and projection image correction program

Publications (1)

Publication Number Publication Date
JP2010119017A true JP2010119017A (en) 2010-05-27

Family

ID=42306360

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008292195A Withdrawn JP2010119017A (en) 2008-11-14 2008-11-14 Front projection video display device, projection image correction method, and projection image correction program

Country Status (1)

Country Link
JP (1) JP2010119017A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012198460A (en) * 2011-03-23 2012-10-18 Seiko Epson Corp Projector and control method of projector
US9601063B2 (en) 2012-03-23 2017-03-21 Seiko Epson Corporation Device for controlling display apparatus, method for controlling display apparatus, display apparatus, and electronic equipment
US10681317B2 (en) 2018-03-29 2020-06-09 Konica Minolta Laboratory U.S.A., Inc. Color correction method, system, and computer-readable medium
CN113347399A (en) * 2021-06-08 2021-09-03 杭州当贝网络科技有限公司 Borderless projection control method

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012198460A (en) * 2011-03-23 2012-10-18 Seiko Epson Corp Projector and control method of projector
US9601063B2 (en) 2012-03-23 2017-03-21 Seiko Epson Corporation Device for controlling display apparatus, method for controlling display apparatus, display apparatus, and electronic equipment
US10681317B2 (en) 2018-03-29 2020-06-09 Konica Minolta Laboratory U.S.A., Inc. Color correction method, system, and computer-readable medium
CN113347399A (en) * 2021-06-08 2021-09-03 杭州当贝网络科技有限公司 Borderless projection control method
CN113347399B (en) * 2021-06-08 2022-11-22 杭州当贝网络科技有限公司 Borderless projection control method

Similar Documents

Publication Publication Date Title
EP1804518B1 (en) Method and device for adjusting image color in image projector
EP2052551B1 (en) Projector adaptation
US20180139427A1 (en) Projector, its control method, and image projection system
WO2011137731A2 (en) Method for controlling light-emitting device in terminal equipment, apparatus thereof and terminal equipment
WO2006033255A1 (en) Projector device, mobile telephone, and camera
US20100171933A1 (en) Method for compensating for color loss of image in image projector and apparatus thereof
KR20080033755A (en) Method and apparatus for adjusting mage color for beam projector
CN111447322B (en) Method for obtaining external illumination and electronic device applying same
US20130082993A1 (en) Apparatus and method for controlling image output in projector apparatus
JP2005191930A (en) Projector device
US9549160B2 (en) Portable terminal device and image correction method
CN108737806B (en) Projector color correction method and device and computer storage medium
JP2008067080A (en) Portable imaging display device
US20120140093A1 (en) Image capture device and method
JP2010119017A (en) Front projection video display device, projection image correction method, and projection image correction program
US11363193B2 (en) Electronic apparatus and image correction method thereof
JP2010102064A (en) Front projection type video display apparatus, projection image correcting method, and projection image correcting program
JP5556215B2 (en) Image quality adjustment method for display unit using camera for portable device, apparatus and program thereof
JP4961662B2 (en) Projector device, mobile phone, camera
US20120001931A1 (en) Adjusting system, method and projector including the same
US10891098B2 (en) Display device and method for controlling display device
JP2010212917A (en) Projector device, projection method of the same, projection program of the same, and portable terminal device including the same
JP2017129704A (en) Display device, projector, and method for controlling display device
US8532378B2 (en) Imaging device, method of adjusting color shift of display monitor and color shift adjuster of display monitor
CN115631250B (en) Image processing method and electronic equipment

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20120207