JP2008211409A - Mobile terminal - Google Patents

Mobile terminal Download PDF

Info

Publication number
JP2008211409A
JP2008211409A JP2007044835A JP2007044835A JP2008211409A JP 2008211409 A JP2008211409 A JP 2008211409A JP 2007044835 A JP2007044835 A JP 2007044835A JP 2007044835 A JP2007044835 A JP 2007044835A JP 2008211409 A JP2008211409 A JP 2008211409A
Authority
JP
Japan
Prior art keywords
projection
size
image
distance
actual size
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2007044835A
Other languages
Japanese (ja)
Inventor
Yoichiro Tachiki
陽一郎 立木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2007044835A priority Critical patent/JP2008211409A/en
Publication of JP2008211409A publication Critical patent/JP2008211409A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a mobile terminal having a means of projecting a photographed image of the actual size of a subject even in a state wherein the projection distance is changeable. <P>SOLUTION: The mobile terminal 100 has a terminal total control unit 700, an image data/image size storage device 600 which stores photographed image data and the actual size of the image data, a projector unit 200, and a camera unit 300. The camera unit 300 has a photographed image size calculating unit 303 which calculates actual size information of the photographed image based upon information input from an automatic focusing control unit 304 and a photographed image data processing unit 301, and the camera unit 300 uses a contrast detection system as an automatic focusing control method and also uses a system for performing calculation from a lens position determined by the automatic focusing control unit 304 and the number of pixels of the photographed pixels obtained by the photographed image data processing unit 301, as a method of measuring the actual size of the photographed image. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、携帯端末に関し、特に、撮影した画像を実寸サイズで外部に投影可能な携帯端末に関する。   The present invention relates to a mobile terminal, and more particularly to a mobile terminal capable of projecting a photographed image to the outside in an actual size.

近年、無線通信技術の発達及び構成部品の小型化技術の発達に伴い、携帯電話機やＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ）に代表される様々な携帯端末が広く普及している。これら携帯端末は、ユーザが手持ち可能な筐体によって構成され、メニュー画面やユーザが用意した画像を表示するための表示用ディスプレイを有することが一般的に知られている。また、最近では、携帯端末に小型で低消費電力のイメージセンサを内蔵し、内蔵カメラにより撮影した画像を記録、表示、編集することが可能となってきている。   2. Description of the Related Art In recent years, with the development of wireless communication technology and the miniaturization of component parts, various mobile terminals typified by mobile phones and PDAs (Personal Digital Assistants) have become widespread. It is generally known that these portable terminals are configured by a casing that can be held by a user and have a display for displaying a menu screen or an image prepared by the user. In recent years, it has become possible to record, display, and edit images captured by a built-in camera by incorporating a small and low power consumption image sensor in a portable terminal.

しかしながら、携帯端末が小型化しているため、その表示用ディスプレイの大きさは制限され、大きな表示面積のものを採用することができず、これにより表示画像によっては十分な視認性を得られないという問題があった。   However, since the portable terminal is downsized, the size of the display for display is limited, and a display with a large display area cannot be adopted, and thus sufficient visibility cannot be obtained depending on the display image. There was a problem.

この問題点を解決するための技術として、例えば、特許文献１が開示されている。特許文献１に開示された携帯型端末は、画像表示用ディスプレイ、画像投影用プロジェクタ及びこれらの制御手段を具備する。この画像投影用プロジェクタは、投影光源、透過型表示素子、及びレンズから構成され、透過型表示素子を通過した投影光源からの投影光をレンズで拡大して外部壁面等へ投影を行う。これにより、画像表示用ディスプレイに表示される画像の少なくとも一部を画像投影用プロジェクタ内の透過型表示素子に表示することで、本来は画像表示用ディスプレイ上で視認される画像を、画像投影用プロジェクタを介して外部壁面等に拡大投影することが可能となる。その結果、画像表示用ディスプレイの大型化を図ることなく、画像視認性の向上が実現される。   As a technique for solving this problem, for example, Patent Document 1 is disclosed. The portable terminal disclosed in Patent Document 1 includes an image display, an image projector, and control means for these. This image projection projector is composed of a projection light source, a transmissive display element, and a lens. The projection light from the projection light source that has passed through the transmissive display element is magnified by the lens and projected onto an external wall surface or the like. As a result, by displaying at least a part of the image displayed on the image display on the transmissive display element in the image projection projector, an image originally viewed on the image display can be displayed. It is possible to perform an enlarged projection on an external wall surface or the like via a projector. As a result, the image visibility can be improved without increasing the size of the image display.

一方、撮影手段及び表示手段を有する機器では、被写体を画像として記録することを目的としているため、撮影画像における被写体の実寸サイズの記録及び実寸サイズでの表示を行うことはできなかった。このため、ユーザが撮影画像を見る場合、被写体実寸サイズを直感的に把握することが困難という問題があった。この問題を解決するための技術として、例えば、特許文献２が開示されている。特許文献２に開示された実物大画像入出力装置では、撮影手段と、被写体までの距離計測手段と、前記撮影手段のレンズ画角と被写体までの距離に基づいて被写体を実物大表示する為の画像の表示サイズ計算手段と、前記撮影手段によって撮影された画像を前記計算された実物大表示サイズで表示する手段とを具備する。これにより、撮影画像を実寸サイズにて表示することが可能となる。   On the other hand, since the device having the photographing means and the display means aims to record the subject as an image, it cannot record the actual size of the subject in the photographed image and display the actual size. For this reason, there is a problem that it is difficult for the user to intuitively grasp the actual size of the subject when viewing the captured image. As a technique for solving this problem, for example, Patent Document 2 is disclosed. In the full-size image input / output device disclosed in Patent Document 2, a photographing unit, a distance measuring unit to the subject, and a subject for displaying the subject in full size based on the lens angle of view of the photographing unit and the distance to the subject. An image display size calculating unit; and a unit for displaying the image captured by the imaging unit in the calculated actual size display size. As a result, the captured image can be displayed in the actual size.

特開２００１−２１９９２号公報Japanese Patent Laid-Open No. 2001-21992 特開２０００−２２４４５９号公報Japanese Unexamined Patent Publication No. 2000-224459

上記特許文献２に記載されている技術では、撮影画像を外部に投影する場合、投影距離を固定として画像表示サイズ計算処理を行う。しかしながら、この技術を撮影手段及びこの撮影画像投影手段を有する携帯端末へ適用する場合、端末の可搬性を考慮すると、携帯端末から投影面までの投影距離は一定になるとは限らない。従って、投影画面サイズが変化し、被写体実寸サイズなどの所望のサイズでの精度の良い投影が困難になる恐れがある。   In the technique described in Patent Document 2, when a captured image is projected to the outside, an image display size calculation process is performed with the projection distance fixed. However, when this technique is applied to a photographing terminal and a portable terminal having the photographed image projecting means, the projection distance from the portable terminal to the projection plane is not always constant considering the portability of the terminal. Accordingly, the projection screen size changes, and it may be difficult to perform accurate projection with a desired size such as the actual subject size.

本発明は、投影距離が可変となる状況においても撮影画像の被写体実寸サイズにて投影を行う手段を有する携帯端末を提供することを目的とする。   An object of the present invention is to provide a portable terminal having means for projecting a photographed image at the actual size of the subject even in a situation where the projection distance is variable.

本発明の一観点によれば、被写体を撮影する撮影手段と、前記撮影手段から被写体までの距離を計測する撮影距離計測手段と、前記撮影手段における撮影画角と前記撮影距離計測手段により計測された被写体までの距離とに基づいて撮影画像の実寸を計算する撮影画像実寸計算手段と、投影光源と、前記投影光源からの光を変調する投影画像を表示する表示素子と、前記表示素子で変調された光を投影面に投影する投影光学系と、前記投影光学系により投影される投影面までの投影距離を測定する投影距離測定手段と、前記投影距離測定手段により得られる投影距離に基づき投影画像の投影面における投影サイズを計算する投影サイズ計算手段とを具備し、前記撮影画像実寸計算手段及び前記投影サイズ計算手段により得られる情報に基づいて、前記撮影手段によって撮影された画像を拡大縮小処理する投射画像処理手段と、を有することを特徴とする携帯端末が提供される。これにより、撮影時と投影時における画像の倍率を任意に拡大縮小することができる。   According to one aspect of the present invention, an image capturing unit that captures an image of a subject, an image capturing distance measuring unit that measures a distance from the image capturing unit to the object, an image capturing angle of view of the image capturing unit, and an image capturing distance measuring unit. Photographic image actual size calculation means for calculating the actual size of the photographic image based on the distance to the subject, a projection light source, a display element for displaying a projection image for modulating light from the projection light source, and modulation by the display element A projection optical system that projects the projected light onto a projection surface, a projection distance measurement unit that measures a projection distance to the projection surface projected by the projection optical system, and a projection based on the projection distance obtained by the projection distance measurement unit A projection size calculation means for calculating a projection size on the projection plane of the image, and based on information obtained by the photographed image actual size calculation means and the projection size calculation means , The mobile terminal characterized by having a a projection image processing means for scaling processing an image captured by the imaging means. Thereby, the magnification of the image at the time of shooting and projection can be arbitrarily enlarged or reduced.

前記投射画像処理手段は、前記投影面において実寸で投影するように拡大縮小処理を行うことができる。前記撮影手段の撮像焦点を調整する撮像焦点制御手段を有する。また、前記撮影距離計測手段は、前記撮像焦点制御手段により得られる被写体焦点距離より撮影距離を算出する。前記投影距離測定手段は、前記撮像焦点制御手段により投影面を被写体として得られる被写体焦点距離より算出する。   The projection image processing means can perform enlargement / reduction processing so as to project the actual size on the projection plane. Imaging focus control means for adjusting the imaging focus of the imaging means. The photographing distance measuring means calculates the photographing distance from the subject focal distance obtained by the imaging focus control means. The projection distance measuring means calculates from the subject focal distance obtained by using the imaging focus control means as a subject.

また、前記撮影手段により得られる撮影画像の投影時に、撮影画像実寸サイズに対する投影面での投影画像サイズ比率を指定する撮影画像-投影画像サイズ比率指定手段と、該撮影画像-投影画像サイズ比率指定手段により指定された撮影画像実寸サイズに対する投影面での投影画像サイズ比率に基づき、前記実寸投影画像処理手段で得られた画像のサイズ補正を行う手段と、を有することが好ましい。   Further, when projecting a photographed image obtained by the photographing means, a photographed image-projected image size ratio designating unit for designating a projected image size ratio on the projection plane with respect to a photographed image actual size, and the photographed image-projected image size ratio designation It is preferable to include means for correcting the size of the image obtained by the actual size projected image processing means based on the ratio of the projected image size on the projection plane to the actual size of the captured image specified by the means.

前記撮影手段による撮影画像１画素あたりの撮影範囲実寸縦サイズ換算値ｈ０、撮影範囲実寸横サイズ換算値ｗ０を下記の式に基づいて求め、（前記撮影手段の結像範囲の縦画素数をｍとし、横画素数をｎとし、撮影範囲実寸縦算出サイズＨとし、実寸横算出サイズＷであるとする）、ｈ０ ＝ Ｈ／ｍ 、 ｗ０ ＝ Ｗ／ｎ、投影画像の画像投影実寸縦サイズＹ、画像投影実寸横サイズＸを、下記の式により求め、（投影表示素子と投影レンズとの距離Ｔｆ、投影表示素子の横サイズｙ、縦サイズｘとする）、Ｙ ＝ ｙ＊Ｔｐ／Ｔｆ、 Ｘ ＝ ｘ＊Ｔｐ／Ｔｆ、１画素あたりの画像投影実寸縦サイズ換算値ｙ０、画像投影実寸横サイズ換算値ｘ０を、下記の式により求めることを特徴とする。ｙ０ ＝ Ｙ／ｉ、ｘ０ ＝ Ｘ／ｊ。さらに、投影画像サイズと撮影画像実寸サイズとを一致させるための拡大縮小率を下記の式により求めることを特徴とする。縦方向拡大縮小率α＝ｈ０／ｙ０、横方向拡大縮小率β＝ｗ０／ｘ０。さらに、通信機能を有していても良い。   The photographing range actual size vertical size converted value h0 and the photographing range actual size horizontal size converted value w0 per pixel of the photographed image by the photographing means are obtained based on the following equations (the number of vertical pixels in the imaging range of the photographing means is m , Where the number of horizontal pixels is n, the shooting range is the actual size vertical calculation size H, and the actual size horizontal calculation size is W), h0 = H / m, w0 = W / n, the image projection actual size vertical size Y of the projected image , The actual image projection horizontal size X is obtained by the following formula (the distance Tf between the projection display element and the projection lens, the horizontal size y of the projection display element, and the vertical size x), Y = y * Tp / Tf, X = x * Tp / Tf The image projection actual size vertical size conversion value y0 and the image projection actual size horizontal size conversion value x0 per pixel are obtained by the following equations. y0 = Y / i, x0 = X / j. Furthermore, an enlargement / reduction ratio for matching the projected image size with the actual captured image size is obtained by the following equation. The vertical enlargement / reduction ratio α = h0 / y0, and the horizontal enlargement / reduction ratio β = w0 / x0. Further, it may have a communication function.

本発明の他の観点によれば、撮影した被写体までの距離を計測するステップと、撮影画角と計測された被写体までの距離とに基づいて撮影画像の実寸を計算する撮影画像実寸計算ステップと、投影面までの投影距離を測定する投影距離測定し、該投影距離に基づき投影画像の投影面における投影サイズを計算する投影サイズ計算ステップと、前記撮影画像実寸及び前記投影サイズに基づいて画像を拡大縮小処理するステップと、を有することを特徴とする携帯端末における画像処理方法が提供される。本発明は、コンピュータに上記に記載のステップを実行させるためのプログラム又は、そのプログラムを記録するコンピュータ読みとり可能な記録媒体であっても良い。   According to another aspect of the present invention, a step of measuring a distance to a photographed subject, and a photographed image actual size calculating step of calculating an actual size of the photographed image based on a photographing field angle and the measured distance to the subject. A projection distance measurement step for measuring a projection distance to the projection plane, and a projection size calculation step for calculating a projection size on the projection plane of the projection image based on the projection distance; and an image based on the actual captured image size and the projection size. There is provided an image processing method in a portable terminal characterized by comprising a step of enlarging / reducing processing. The present invention may be a program for causing a computer to execute the steps described above, or a computer-readable recording medium for recording the program.

本発明の携帯端末によれば、撮影画像を外部投影する場合、携帯端末から投影面までの投影距離が変化する状況においても、投影距離に応じて撮影画像を適宜リサイズすることで、常に被写体実寸サイズでの投影が可能となる。   According to the mobile terminal of the present invention, when projecting a captured image externally, the actual size of the subject is always obtained by appropriately resizing the captured image according to the projection distance even in a situation where the projection distance from the mobile terminal to the projection plane changes. Projection in size is possible.

以下、本発明の実施形態による携帯端末について図面を参照しながら説明を行う。
（第１の実施の形態）
図１は、本発明の一実施の形態による携帯端末の一構成例を示す図であり、図１（Ａ）は携帯端末の概略構成例を示す斜視図であり、図１（Ｂ）はその携帯端末の背面の概略構成例を示す図であり、図２は、その携帯端末が備えるカメラ撮像機能を使用した場合の側面から見た概略構成例を示す図であり、図３は、その携帯端末が備えるプロジェクタ投影機能を使用した場合の側面から見た概略構成例を示す図である。 Hereinafter, a portable terminal according to an embodiment of the present invention will be described with reference to the drawings.
(First embodiment)
FIG. 1 is a diagram illustrating a configuration example of a mobile terminal according to an embodiment of the present invention, FIG. 1A is a perspective view illustrating a schematic configuration example of a mobile terminal, and FIG. FIG. 2 is a diagram illustrating a schematic configuration example of the back surface of the mobile terminal, FIG. 2 is a diagram illustrating a schematic configuration example viewed from the side when the camera imaging function included in the mobile terminal is used, and FIG. It is a figure which shows the schematic structural example seen from the side surface at the time of using the projector projection function with which a terminal is provided.

図において、符号１００は携帯端末であり、符号２００はプロジェクタ部であり、符号３００はイメージセンサ及びオートフォーカス制御手段から構成されるカメラ部であり、符号４００はカメラ撮影被写体であり、符号５００は投影スクリーンである。図１に示すように、携帯端末１００は、背面にプロジェクタ部２００及びカメラ部３００を備え、カメラ部３００は、図２に示すように、被写体４００の撮像を行うとともに、この際にオートフォーカス制御手段によって得られる撮像焦点距離により被写体４００までの距離を測定する。   In the figure, reference numeral 100 denotes a portable terminal, reference numeral 200 denotes a projector unit, reference numeral 300 denotes a camera unit composed of an image sensor and autofocus control means, reference numeral 400 denotes a camera photographing subject, and reference numeral 500 denotes Projection screen. As shown in FIG. 1, the mobile terminal 100 includes a projector unit 200 and a camera unit 300 on the back surface, and the camera unit 300 captures an object 400 as shown in FIG. The distance to the subject 400 is measured by the imaging focal length obtained by the means.

また、プロジェクタ部２００は、図３に示すように、投影スクリーン５００までの距離測定手段を有し、携帯端末１００が記録保存している投影対象画像をスクリーン５００に拡大投影する。   Further, as shown in FIG. 3, the projector unit 200 includes a distance measuring unit to the projection screen 500 and enlarges and projects the projection target image recorded and stored in the mobile terminal 100 onto the screen 500.

図４は、図１から図３までに示した本実施の形態による携帯端末１００において、カメラ部３００より撮影した画像をプロジェクタ部２００により被写体の実寸サイズで外部投影を行うための動作原理を説明するための一構成例を示す機能ブロック図である。本実施の形態による携帯端末１００は、符号７００で示され携帯端末１００の全体の制御を行う端末全体制御部と、符号６００で示され撮影画像データ及びその画像データ実寸サイズを記憶する画像データ／画像サイズ記憶装置と、符号２００で示されるプロジェクタ部と、符号３００で示されるカメラ部と、を有する。   FIG. 4 illustrates an operation principle for externally projecting an image captured by the camera unit 300 to the actual size of the subject by the projector unit 200 in the portable terminal 100 according to the present embodiment illustrated in FIGS. 1 to 3. It is a functional block diagram which shows the example of 1 structure for doing. A mobile terminal 100 according to the present embodiment includes a terminal overall control unit indicated by reference numeral 700 that controls the entire mobile terminal 100, image data indicated by reference numeral 600, and image data / the actual size of the image data stored therein. An image size storage device, a projector unit denoted by reference numeral 200, and a camera unit denoted by reference numeral 300 are included.

カメラ部３００は、基本構成として、撮像レンズ３０９、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）又はＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型のイメージセンサ３０２、イメージセンサ３０２より入力される撮像データを画像データ／画像サイズ記憶装置６００に記録保存する撮影画像データ処理部３０１、を備える。さらに、イメージセンサ３０２より入力される撮像データのコントラスト値を基にオートフォーカスの処理を行うリードスクリュー部３０８、モータ３０７、モータドライバ３０６、撮像レンズ位置制御部３０５、オートフォーカス制御部３０４を備える。さらに、オートフォーカス制御部３０４及び撮影画像データ処理部３０１から入力される情報を基に、撮影画像の実寸サイズ情報を計算する撮影画像サイズ計算部３０３を備える。   The camera unit 300 basically includes an imaging lens 309, a CCD (Charge Coupled Device) or a CMOS (Complementary Metal Oxide Semiconductor) type image sensor 302, and imaging data input from the image sensor 302 as an image data / image size storage device. A captured image data processing unit 301 that records and saves data in the storage unit 600 is provided. Furthermore, a lead screw unit 308, a motor 307, a motor driver 306, an imaging lens position control unit 305, and an autofocus control unit 304 that perform autofocus processing based on the contrast value of imaging data input from the image sensor 302 are provided. Furthermore, a captured image size calculation unit 303 that calculates actual size information of the captured image based on information input from the autofocus control unit 304 and the captured image data processing unit 301 is provided.

カメラ部３００において、被写体４００の撮像を行う場合のオートフォーカス制御方法としては、オートフォーカス制御部３０４において撮像レンズ３０９及びイメージセンサ３０２を介して得られる結像データのコントラスト算出値が最大になるレンズ位置が見つかるまで撮像レンズ３０９の位置を変化させるコントラスト検出方式を使用する。ここで、撮像レンズ３０９の位置変更は、オートフォーカス制御部３０４が撮像レンズ３０９の移動量を撮像レンズ位置制御部３０５に対して設定し、撮像レンズ位置制御部３０５が前記設定された撮像レンズ移動量を基にモータドライバ３０６及びモータ３０７を駆動し、これによりリードスクリュー部３０８が回転し撮像用レンズ３０９が所望の光軸方向に移動することで実現される。   As an autofocus control method for imaging the subject 400 in the camera unit 300, a lens that maximizes the contrast calculation value of the imaging data obtained through the imaging lens 309 and the image sensor 302 in the autofocus control unit 304 is used. A contrast detection method is used in which the position of the imaging lens 309 is changed until the position is found. Here, when the position of the imaging lens 309 is changed, the autofocus control unit 304 sets the movement amount of the imaging lens 309 to the imaging lens position control unit 305, and the imaging lens position control unit 305 moves the set imaging lens. This is realized by driving the motor driver 306 and the motor 307 based on the amount, whereby the lead screw portion 308 rotates and the imaging lens 309 moves in the desired optical axis direction.

また、カメラ部３００において撮影画像の実寸サイズを測定する方法としては、オートフォーカス制御部３０４において決定されるレンズ位置と、撮影画像データ処理部３０１において得られる撮影画像の画素数と、から算出する方式を用いる。   Further, as a method for measuring the actual size of the photographed image in the camera unit 300, it is calculated from the lens position determined in the autofocus control unit 304 and the number of pixels of the photographed image obtained in the photographed image data processing unit 301. Use the method.

図５（Ａ）は、撮影範囲の実寸サイズ測定の原理を示す補足説明図であり、オートフォーカス制御部３０４により決定される撮像レンズ３０９とイメージセンサ３０２との間の距離、すなわち焦点距離ｄが決まることにより、撮像レンズ３０９の合焦特性から、撮像レンズ３０９と被写体４００との距離、すなわち撮影距離Ｄが確定するため、撮影範囲の実寸縦サイズをＨ、実寸横サイズをＷ、イメージセンサ３０２の実寸縦サイズ（既知）をｈ、実寸横サイズ（既知）をｗとすると、近似的に下記の式（１）が成り立つ。   FIG. 5A is a supplementary explanatory diagram showing the principle of measuring the actual size of the shooting range. The distance between the imaging lens 309 and the image sensor 302 determined by the autofocus control unit 304, that is, the focal length d is shown in FIG. Thus, since the distance between the imaging lens 309 and the subject 400, that is, the shooting distance D is determined from the focusing characteristics of the imaging lens 309, the actual size vertical size of the shooting range is H, the actual size horizontal size is W, and the image sensor 302 is determined. Assuming that the actual size vertical size (known) is h and the actual size horizontal size (known) is w, the following equation (1) is approximately established.

Ｈ ／ ｈ ＝ Ｗ／ｗ ＝ Ｄ ／ ｄ…（ １ ）
撮影画像サイズ計算部３０３では、式（１）に基づき、撮影範囲実寸縦サイズＨ、実寸横サイズＷの値を算出する。また、撮影画像サイズ計算部３０３は、この撮影範囲の実寸算出値Ｈ、Ｗに基づき、画像データ／画像サイズ記憶装置６００に記録する当該撮影画像の１画素あたりの実寸換算値を算出する。 H / h = W / w = D / d (1)
The photographed image size calculation unit 303 calculates values of the photographing range actual size vertical size H and the actual size horizontal size W based on Expression (1). The captured image size calculation unit 303 calculates an actual size conversion value per pixel of the captured image recorded in the image data / image size storage device 600 based on the actual size calculation values H and W of the imaging range.

図５（Ｂ）は、この撮影画像１画素あたりの実寸換算値算出の原理を示す補足説明図として、被写体４００を含む撮影範囲がイメージセンサ３０２に結像された状態を示す図である。イメージセンサ３０２の結像範囲の縦画素数（既知）をｍとし、横画素数（既知）をｎとすると、前述の撮影範囲実寸縦算出サイズＨ、実寸横算出サイズＷより、撮影画像１画素あたりの撮影範囲実寸縦サイズ換算値ｈ０、撮影範囲実寸横サイズ換算値ｗ０は式（２）、式（３）で得られる。   FIG. 5B is a diagram illustrating a state in which the imaging range including the subject 400 is imaged on the image sensor 302 as a supplementary explanatory diagram illustrating the principle of calculating the actual size conversion value per pixel of the captured image. If the number of vertical pixels (known) in the image forming range of the image sensor 302 is m and the number of horizontal pixels (known) is n, one pixel of the captured image is obtained from the above-described shooting range actual size vertical calculation size H and actual size horizontal calculation size W. The shooting range actual size vertical size converted value h0 and the shooting range actual size horizontal size converted value w0 are obtained by Expression (2) and Expression (3).

（撮影に関するサイズ換算値）
ｈ０ ＝ Ｈ／ｍ …（ ２ ）
ｗ０ ＝ Ｗ／ｎ …（ ３ ） (Size conversion value for shooting)
h0 = H / m (2)
w0 = W / n (3)

撮影画像サイズ計算部３０３は、この撮影画像１画素あたりの撮影範囲実寸縦サイズ換算値ｈ０、撮影範囲実寸横サイズｗ０の算出を行う。この算出値は、画像データ／画像サイズ記憶装置６００内の対応する撮影画像データに対して関連付けされた上で画像データ／画像サイズ記憶装置６００に記録（保存）される。   The photographed image size calculation unit 303 calculates the photographing range actual size vertical size converted value h0 and the photographing range actual size horizontal size w0 per pixel of the photographed image. The calculated value is recorded (saved) in the image data / image size storage device 600 after being associated with the corresponding captured image data in the image data / image size storage device 600.

一方、プロジェクタ部２００は、全体の制御を行うプロジェクタ制御部２０８、白色ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ：発光ダイオード）と拡散板により構成される投影光源２０１、投影光源２０１を制御する光源駆動部２０２、投影表示素子２０３、投影表示素子２０３に画像を設定する投影表示素子駆動部２０４、投影表示素子２０３上に表示された画像を投影スクリーン５００上に結像するための投影レンズ２０５を備える。また、投影スクリーン５００までの距離を測定する投影距離測定部２０６、カメラ部３００において得られる画像データ／画像サイズ記憶装置６００に記録保存された撮影画像データ及びその画像データ実寸サイズ情報と、投影距離測定部２０６において得られる投影距離情報を元に、この撮影画像を投影スクリーン５００へ投影する際、投影スクリーン上の投影画像サイズが撮影画像実寸サイズと一致するように画像のリサイズを行う投影画像サイズ補正計算部２０７を備える。   On the other hand, the projector unit 200 includes a projector control unit 208 that performs overall control, a projection light source 201 that includes a white LED (Light Emitting Diode) and a diffusion plate, a light source driving unit 202 that controls the projection light source 201, and a projection. A display element 203, a projection display element driving unit 204 for setting an image on the projection display element 203, and a projection lens 205 for forming an image displayed on the projection display element 203 on the projection screen 500 are provided. Also, the projection distance measuring unit 206 that measures the distance to the projection screen 500, the captured image data recorded in the image data / image size storage device 600 obtained in the camera unit 300, the actual size information of the image data, and the projection distance Based on the projection distance information obtained by the measurement unit 206, when projecting this captured image onto the projection screen 500, the projected image size for resizing the image so that the projected image size on the projection screen matches the actual captured image size. A correction calculation unit 207 is provided.

図６は、投影距離測定部２０６における、投影距離測定原理の補足説明図である。投影距離測定部２０６は、図６（Ａ）に示すように、三角測距方式の構成を採る。符号２０６ａは発光素子であり、符号２０６ｂは位置検出素子、符号２０６ｃは投光レンズ、符号２０６ｄは受光レンズ、符号２０６ｅは三角測距制御部であり、投影距離測定部２０６の三角測距制御部２０６ｅは、投光レンズ２０６ｃを介して発光素子２０６ａより赤外光線を前方に照射し、投影スクリーン５００で反射された赤外光線を、受光レンズ２０６ｄを介して位置検出素子２０６ｂで検出する。ここで、受光レンズ２０６ｄから位置検出素子２０６ｂまでの距離ｔは固定されているため、位置検出素子２０６ｂ上での反射赤外光線検出位置と投影距離との対応情報は、図７に示すように既知として予め三角測距制御部２０６ｅに設定される。これにより、三角測距制御部２０６ｅにおいて投影スクリーン５００での反射赤外光線を位置検出素子２０６ｂで検出した時に、図７に示す対応情報を参照することにより、位置検出素子２０６ｂ上での反射赤外光線検出位置を元に投影距離を得ることが可能となる。   FIG. 6 is a supplementary explanatory diagram of the projection distance measurement principle in the projection distance measurement unit 206. As shown in FIG. 6A, the projection distance measuring unit 206 adopts a triangulation system configuration. Reference numeral 206 a is a light emitting element, reference numeral 206 b is a position detection element, reference numeral 206 c is a light projecting lens, reference numeral 206 d is a light receiving lens, reference numeral 206 e is a triangular distance measuring control unit, and a triangular distance measuring control unit of the projection distance measuring unit 206. 206e irradiates an infrared ray forward from the light emitting element 206a via the light projecting lens 206c, and detects the infrared ray reflected by the projection screen 500 by the position detecting element 206b via the light receiving lens 206d. Here, since the distance t from the light receiving lens 206d to the position detection element 206b is fixed, the correspondence information between the reflected infrared ray detection position on the position detection element 206b and the projection distance is as shown in FIG. It is set in advance in the triangulation distance control unit 206e as known. As a result, when the position detection element 206b detects the reflected infrared ray on the projection screen 500 in the triangular distance measurement control unit 206e, the reflected red light on the position detection element 206b is referred to by referring to the correspondence information shown in FIG. The projection distance can be obtained based on the outside light ray detection position.

例えば、投影スクリーン５００で反射された赤外光線が位置検出素子２０６ｂのＰ１の位置に検出された場合、投影距離はＴ１と検出され、投影スクリーン５００で反射された赤外光線が位置検出素子２０６ｂのＰ２の位置に検出された場合、投影距離はＴ２と検出される。   For example, when an infrared ray reflected by the projection screen 500 is detected at the position P1 of the position detection element 206b, the projection distance is detected as T1, and the infrared ray reflected by the projection screen 500 is detected by the position detection element 206b. Is detected at the position P2, the projection distance is detected as T2.

また、図１０は、投影画像サイズ補正計算部２０７における、投影スクリーン上投影画像サイズと撮影画像実寸サイズとを一致させるための画像サイズ補正計算原理を示すための補足説明図である。図１０（Ａ）に示すように、プロジェクタ部２００による投影スクリーン５００への画像投影状態において、投影距離Ｔｐは上述の通り投影距離測定部２０６により与えられ、また投影表示素子２０３と投影レンズ２０５との距離Ｔｆ、投影表示素子２０３の横サイズｙ、縦サイズｘは既知であるため、投影スクリーン５００上の画像投影実寸縦サイズＹ、画像投影実寸横サイズＸは、下記の式（４）、式（５）で得られる。   FIG. 10 is a supplementary explanatory diagram for illustrating an image size correction calculation principle for causing the projected image size correction calculation unit 207 to match the projected image size on the projection screen with the actual captured image size. As shown in FIG. 10A, in the image projection state on the projection screen 500 by the projector unit 200, the projection distance Tp is given by the projection distance measuring unit 206 as described above, and the projection display element 203, the projection lens 205, and the like. Since the distance Tf of the projection display element 203 and the horizontal size y and the vertical size x of the projection display element 203 are known, the actual image projection actual size vertical size Y and the image projection actual size horizontal size X on the projection screen 500 are expressed by the following equations (4) and Obtained in (5).

Ｙ ＝ ｙ＊Ｔｐ／Ｔｆ …（ ４ ）
Ｘ ＝ ｘ＊Ｔｐ／Ｔｆ …（ ５ ） Y = y * Tp / Tf (4)
X = x * Tp / Tf (5)

これにより、投影表示素子２０３の縦画素数（既知）をｉ、横画素数（既知）をｊとすると、前述の通り算出した投影スクリーン５００上画像投影実寸縦サイズＹ、画像投影実寸横サイズＸより、図１０（Ｂ）に示すように、投影表示素子２０３の１画素あたりの画像投影実寸縦サイズ換算値ｙ０、画像投影実寸横サイズ換算値ｘ０は、下記の式（６）、式（７）で得られる。   Thus, assuming that the vertical pixel number (known) of the projection display element 203 is i and the horizontal pixel number (known) is j, the image projection actual size vertical size Y and the image projection actual size horizontal size X calculated as described above. As shown in FIG. 10B, the image projection actual size vertical size converted value y0 and the image projection actual size horizontal size converted value x0 per pixel of the projection display element 203 are expressed by the following equations (6) and (7). ).

（投射に関する換算値）
ｙ０ ＝ Ｙ／ｉ …（ ６ ）
ｘ０ ＝ Ｘ／ｊ …（ ７ ） (Conversion value for projection)
y0 = Y / i (6)
x0 = X / j (7)

ここで、前述のカメラ部３００により撮影された撮影画像データをプロジェクタ部２００の投影対象画像データとする場合、画像サイズ計算部３０３により画像データ／画像サイズ記憶装置６００へ記録保存された撮影画像１画素あたりの撮影範囲実寸縦サイズ換算値ｈ０、撮影範囲実寸横サイズ換算値ｗ０を考慮すると、投影スクリーン５００上の投影画像サイズと撮影画像実寸サイズとを一致させるためには、画像データ／画像サイズ記憶装置６００に記録保存された撮影画像を縦方向、横方向にそれぞれ（８）、（９）に示す割合で拡大縮小が必要となる。   Here, when the captured image data captured by the camera unit 300 is used as the projection target image data of the projector unit 200, the captured image 1 recorded and stored in the image data / image size storage device 600 by the image size calculation unit 303. Considering the shooting range actual size vertical size conversion value h0 and the shooting range actual size horizontal size conversion value w0 per pixel, in order to make the projection image size on the projection screen 500 coincide with the shooting image actual size size, image data / image size The captured images recorded and stored in the storage device 600 need to be scaled in the ratios shown in (8) and (9) in the vertical and horizontal directions, respectively.

（投影画像サイズと撮影画像実寸サイズとを一致させるための拡大縮小率）
縦方向拡大縮小率α＝ｈ０／ｙ０ ・・・・（ ８ ）
横方向拡大縮小率β＝ｗ０／ｘ０ ・・・・（ ９ ） (Enlargement / reduction ratio to match the projected image size with the actual captured image size)
Vertical scaling factor α = h0 / y0 (8)
Horizontal scaling factor β = w0 / x0 (9)

投影画像サイズ補正計算部２０７は、上述の通り算出された縦方向拡大縮小率α、横方向拡大縮小率βの値をプロジェクタ制御部２０８に設定する。プロジェクタ制御部２０８は、画像サイズ記憶装置６００に記録保存された撮影画像データについてこの縦方向拡大縮小率α、横方向拡大縮小率βの値に基づいてリサイズを行った後に、投影表示素子駆動部２０４にこの画像を設定することで、撮影画像実寸サイズでの投影を実現する。   The projection image size correction calculation unit 207 sets the values of the vertical direction enlargement / reduction rate α and the horizontal direction enlargement / reduction rate β calculated as described above in the projector control unit 208. The projector control unit 208 resizes the captured image data recorded and stored in the image size storage device 600 based on the values of the vertical direction enlargement / reduction rate α and the horizontal direction enlargement / reduction rate β, and then the projection display element driving unit. By setting this image in 204, projection at the actual size of the captured image is realized.

図８は、上述した携帯端末１００内における、撮影時の撮影画像データ記録及び撮影画像データ実寸サイズ記録を行う為の制御処理の一例を示すフローチャート図であり、図９は、上述した携帯端末１００内における、撮影画像を実寸サイズで外部投影を行う為の制御処理の一例を示すフローチャート図である適宜、構成図等を参照しながら説明を行う。   FIG. 8 is a flowchart showing an example of a control process for recording captured image data and actual captured image data size recording at the time of shooting in the mobile terminal 100 described above, and FIG. 9 is a flowchart illustrating the mobile terminal 100 described above. FIG. 5 is a flowchart illustrating an example of a control process for externally projecting a captured image at an actual size, and will be described with reference to a configuration diagram as appropriate.

図８に示すように、まず、携帯端末１００のカメラ部３００が起動され（ステップＳ１０１）、撮影を行う前のビューファインダーモードに移行し（ステップＳ１０２）、ユーザより撮影指示が発生するまではこのモードに留まる（ステップＳ１０３）。ユーザより撮影指示が発生した時点で、オートフォーカス制御部３０４が被写体４００を対象として撮像レンズ３０９の焦点距離を決定し、併せて、この焦点距離より被写体４００までの撮影距離を測定する（ステップＳ１０４）。次に、撮影画像データ処理部３０１が撮影画像データを画像データ／画像サイズ記憶装置６００に記録し（ステップＳ１０５）、その後、撮影画像サイズ計算部３０３において、ステップＳ１０４で得られた撮影距離を元に撮影画像の実寸サイズを算出し、対応する撮影画像データと関連付けを行う形で画像データ／画像サイズ記憶装置６００に記録する（ステップＳ１０６）。最後に、ユーザからのカメラ終了の指示の有無を判定し、カメラ終了指示が発生しない限りはステップＳ１０２以降の処理を繰り返し実行する（ステップＳ１０７）。   As shown in FIG. 8, first, the camera unit 300 of the mobile terminal 100 is activated (step S101), shifts to a viewfinder mode before shooting (step S102), and this is performed until a shooting instruction is issued from the user. The mode remains (step S103). When a shooting instruction is issued from the user, the autofocus control unit 304 determines the focal length of the imaging lens 309 for the subject 400, and measures the shooting distance to the subject 400 from the focal length (step S104). ). Next, the photographed image data processing unit 301 records the photographed image data in the image data / image size storage device 600 (step S105), and then the photographed image size calculation unit 303 uses the photographing distance obtained in step S104 as a source. Then, the actual size of the photographed image is calculated and recorded in the image data / image size storage device 600 in such a manner as to be associated with the corresponding photographed image data (step S106). Finally, it is determined whether or not there is an instruction to end the camera from the user, and unless the camera end instruction is generated, the processes after step S102 are repeatedly executed (step S107).

一方、図９に示すフローチャート図においては、まず、携帯端末１００のプロジェクタ部２００が起動される（ステップＳ２０１）。次に、プロジェクタ部２００が投影する画像として図８のフローチャート図による処理を経た撮影画像がユーザにより選択されたか否かを判定し（ステップＳ２０２）、撮影画像が選択された場合は（Ｙ）、まず投影距離測定部２０６において投影スクリーン５００までの投影距離を測定し（ステップＳ２０３）、この結果として得られる投影距離を元に、投影画像サイズ補正計算部２０７において投影表示素子２０３に表示する画像１画素あたりの投影スクリーン５００上のサイズを算出し（ステップＳ２０４）、この算出値と図８に示す処理におけるステップＳ１０６において画像データ／画像サイズ記憶装置６００に記録保存された撮影画像データ実寸サイズ情報の比を元に、画像データ／画像サイズ記憶装置６００に記録保存された撮影画像データを、この撮影画像データ内の被写体が投影スクリーン５００上で実寸サイズとなるようプロジェクタ制御部２０８がリサイズ処理を行う（ステップＳ２０５）。その後、ステップＳ２０５においてリサイズ処理を実施した撮影画像データを、プロジェクタ制御部２０８が投影表示素子駆動部２０４へ設定し、投影スクリーン５００への撮影画像の実寸投影を行う（ステップＳ２０６）。最後に、ユーザからのプロジェクタ終了の指示の有無を判定し、プロジェクタ終了指示が発生しない限りはステップＳ２０２以降の処理を繰り返し実行する（ステップＳ２０７）。   On the other hand, in the flowchart shown in FIG. 9, first, the projector unit 200 of the portable terminal 100 is activated (step S201). Next, it is determined whether or not the user has selected a captured image that has undergone the processing of the flowchart of FIG. 8 as an image projected by the projector unit 200 (step S202). If a captured image is selected (Y), First, the projection distance measurement unit 206 measures the projection distance to the projection screen 500 (step S203), and the projected image size correction calculation unit 207 displays the image 1 displayed on the projection display element 203 based on the projection distance obtained as a result. The size on the projection screen 500 per pixel is calculated (step S204), and the calculated value and the captured image data actual size information recorded in the image data / image size storage device 600 in step S106 in the process shown in FIG. Based on the ratio, the image data / image size storage device 600 recorded and saved The shadow image data, the projector controller 208 as a subject in the photographed image data is actual size on the projection screen 500 performs resizing processing (step S205). Thereafter, the projector control unit 208 sets the captured image data subjected to the resizing process in step S205 to the projection display element driving unit 204, and performs actual size projection of the captured image on the projection screen 500 (step S206). Finally, it is determined whether or not there is a projector termination instruction from the user, and unless the projector termination instruction is generated, the processing from step S202 is repeatedly executed (step S207).

以上に述べたように、本実施の形態による携帯端末では、撮影画像の記録保存時にこの画像の実寸情報を併せて記録保存することにより、その画像を、プロジェクタを用いて外部投影する際に、画像に含まれる被写体を、投影面上に実寸サイズで投影することが可能となる。   As described above, in the portable terminal according to the present embodiment, when the captured image is recorded and saved, the actual size information of the image is also recorded and saved, so that when the image is externally projected using the projector, The subject included in the image can be projected on the projection surface at the actual size.

尚、上記実施の形態では、撮影した画像を実寸サイズで外部に投影する技術について説明したが、例えば、実寸サイズを含む拡大縮小を行うことができる操作部を設けており、この操作部により拡大・縮小する際に、実寸サイズになった時点で、その旨を表示ランプ、文字表示、音声などにより報知する実寸サイズ報知部を設けるようにしても良い。このようにすると、投影時に拡大縮小処理を行っている場合に、実寸サイズになったことを知ることが出来るため、ユーザにとって便利である。   In the above-described embodiment, the technique for projecting a captured image to the outside in the actual size has been described. For example, an operation unit that can perform enlargement / reduction including the actual size is provided. When the actual size is reduced, an actual size size notification unit may be provided to notify the fact by a display lamp, character display, voice, or the like. This is convenient for the user because the user can know that the actual size has been reached when the enlargement / reduction processing is performed at the time of projection.

また、本実施の形態では、投影距離測定部２０６の測距方式として、赤外光線による三角測距方式を採用しているが、これに代えて、投影スクリーン５００を被写体とした形でカメラ部３００のオートフォーカス制御部３０４を使用することで投影距離を測定する方式、また超音波方式等の種々の他の方式を用いてもよい。また、投影光源２０１についても、白色ＬＥＤの代わりに、レーザー等の他の種々の発光手段を用いてもよい。   In the present embodiment, a triangular distance measurement method using infrared rays is employed as the distance measurement method of the projection distance measurement unit 206. Instead, the camera unit is configured with the projection screen 500 as a subject. Various other methods such as a method of measuring the projection distance by using the 300 autofocus control unit 304 and an ultrasonic method may be used. As for the projection light source 201, various other light emitting means such as a laser may be used instead of the white LED.

本発明は、撮影した画像を実寸サイズで外部に投影可能な携帯端末の利用可能である。   INDUSTRIAL APPLICABILITY The present invention can use a portable terminal that can project a photographed image to the outside at an actual size.

本発明の一実施の形態による携帯端末の外観構成例を示す図である。It is a figure which shows the example of an external appearance structure of the portable terminal by one embodiment of this invention. 携帯端末により被写体を撮影する様子を示す図である。It is a figure which shows a mode that a to-be-photographed object is image | photographed with a portable terminal. 携帯端末により、撮影された画像を投影する様子を示す図である。It is a figure which shows a mode that the image | photographed image is projected with a portable terminal. 本実施の形態による携帯端末における撮影画像の被写体実寸サイズ投影制御の動作原理を説明するための機能ブロック図である。It is a functional block diagram for demonstrating the operation | movement principle of the to-be-photographed object size projection control of the picked-up image in the portable terminal by this Embodiment. 図４に示す撮影画像実寸サイズ測定原理を説明するための図である。It is a figure for demonstrating the measurement principle of the picked-up image actual size shown in FIG. 図４に示す投影距離測定部の構成を示す図である。It is a figure which shows the structure of the projection distance measurement part shown in FIG. 反射赤外光線検出位置と投影距離との対応情報の一例を示す図である。It is a figure which shows an example of the corresponding information of a reflected infrared ray detection position and projection distance. 図１に示した携帯端末における撮影時の撮影画像データ記録及び撮影画像データ実寸サイズ記録を行うための制御処理例を示すフローチャート図である。It is a flowchart figure which shows the control processing example for performing the picked-up image data recording at the time of imaging | photography at the portable terminal shown in FIG. 1, and photographic image data actual size recording. 図１に示した携帯端末における撮影画像を実寸サイズで外部投影を行う為の制御処理例を示すフローチャート図である。It is a flowchart figure which shows the example of a control process for performing the external projection of the picked-up image in the portable terminal shown in FIG. 投影画像サイズ補正計算部における、投影スクリーン上投影画像サイズと撮影画像実寸サイズとを一致させるための画像サイズ補正計算原理を説明するための図である。It is a figure for demonstrating the image size correction | amendment calculation principle for making a projection image size correction | amendment calculation part match the projection image size on a projection screen, and a picked-up image actual size size.

符号の説明Explanation of symbols

１００…携帯端末、２００…プロジェクタ部、２０１…投影光源、２０２…光源駆動部、２０３…投影表示素子、２０４…投影表示素子駆動部、２０５…投影レンズ、２０６…投影距離測定部、２０６ａ…発光素子、２０６ｂ…位置検出素子、２０６ｃ…投光レンズ、２０６ｄ…受光レンズ、２０６ｅ…三角測距制御部、２０７…投影画像サイズ補正計算部、２０８…プロジェクタ制御部、３００…カメラ部、３０１…撮影画像データ処理部、３０２…イメージセンサ、３０３…撮影画像サイズ計算部、３０４…オートフォーカス制御部、３０５…撮像レンズ位置制御部、３０６…モータドライバ、３０７…モータ、３０８…リードスクリュー部、３０９…撮像レンズ、４００…カメラ撮影被写体、５００…投影スクリーン、６００…画像データ／画像サイズ記憶装置、７００…端末全体制御部 DESCRIPTION OF SYMBOLS 100 ... Portable terminal, 200 ... Projector part, 201 ... Projection light source, 202 ... Light source drive part, 203 ... Projection display element, 204 ... Projection display element drive part, 205 ... Projection lens, 206 ... Projection distance measurement part, 206a ... Light emission Element 206b ... Position detection element 206c Projection lens 206d Light receiving lens 206e Triangular distance measurement control unit 207 Projection image size correction calculation unit 208 Projector control unit 300 Camera unit 301 Shooting Image data processing unit 302... Image sensor 303. Shooting image size calculation unit 304. Auto focus control unit 305... Image pickup lens position control unit 306... Motor driver 307 Motor 308 Lead screw unit 309. Imaging lens, 400 ... Camera subject, 500 ... Projection screen, 600 ... Image data Data / image size storage device, 700 ... terminal overall control unit

Claims (12)

被写体を撮影する撮影手段と、
前記撮影手段から被写体までの距離を計測する撮影距離計測手段と、
前記撮影手段における撮影画角と前記撮影距離計測手段により計測された被写体までの距離とに基づいて撮影画像の実寸を計算する撮影画像実寸計算手段と、
投影光源と、
前記投影光源からの光を変調する投影画像を表示する表示素子と、
前記表示素子で変調された光を投影面に投影する投影光学系と、
前記投影光学系により投影される投影面までの投影距離を測定する投影距離測定手段と、
前記投影距離測定手段により得られる投影距離に基づき投影画像の投影面における投影サイズを計算する投影サイズ計算手段とを具備し、
前記撮影画像実寸計算手段及び前記投影サイズ計算手段により得られる情報に基づいて、前記撮影手段によって撮影された画像を拡大縮小処理する投射画像処理手段と
を有することを特徴とする携帯端末。 Photographing means for photographing the subject;
Shooting distance measuring means for measuring the distance from the shooting means to the subject;
A photographed image actual size calculating means for calculating the actual size of the photographed image based on the photographing field angle in the photographing means and the distance to the subject measured by the photographing distance measuring means;
A projection light source;
A display element for displaying a projection image for modulating light from the projection light source;
A projection optical system that projects light modulated by the display element onto a projection surface;
A projection distance measuring means for measuring a projection distance to a projection surface projected by the projection optical system;
A projection size calculation means for calculating a projection size on the projection plane of the projection image based on the projection distance obtained by the projection distance measurement means,
A portable terminal comprising: a projected image processing unit that performs an enlargement / reduction process on an image photographed by the photographing unit based on information obtained by the photographed image actual size calculating unit and the projection size calculating unit. 前記投射画像処理手段は、前記投影面において実寸で投影するように拡大縮小処理を行うことを特徴とする請求項１に記載の携帯端末。   The portable terminal according to claim 1, wherein the projection image processing unit performs an enlargement / reduction process so as to project an actual size on the projection plane. 前記撮影手段の撮像焦点を調整する撮像焦点制御手段を有することを特徴とする請求項１又は２に記載の携帯端末。   The mobile terminal according to claim 1, further comprising an imaging focus control unit that adjusts an imaging focus of the imaging unit. 前記撮影距離計測手段は、前記撮像焦点制御手段により得られる被写体焦点距離より撮影距離を算出することを特徴とする請求項３に記載の携帯端末。   The portable terminal according to claim 3, wherein the photographing distance measuring means calculates a photographing distance from a subject focal distance obtained by the imaging focus control means. 前記投影距離計測手段は、前記撮像焦点制御手段により投影面を被写体として得られる被写体焦点距離より算出することを特徴とする請求項３に記載の携帯端末。   The portable terminal according to claim 3, wherein the projection distance measuring means calculates from a subject focal distance obtained by using the imaging focus control means as a subject. 前記撮影手段により得られる撮影画像の投影時に、撮影画像実寸サイズに対する投影面での投影画像サイズ比率を指定する撮影画像-投影画像サイズ比率指定手段と、
該撮影画像-投影画像サイズ比率指定手段により指定された撮影画像実寸サイズに対する投影面での投影画像サイズ比率に基づき、前記実寸投影画像処理手段で得られた画像のサイズ補正を行う手段と
を有することを特徴とする請求項１から５までのいずれか１項に記載の携帯端末。 When projecting a captured image obtained by the photographing unit, a captured image-projected image size ratio specifying unit that specifies a projected image size ratio on the projection plane with respect to the actual captured image size;
Means for correcting the size of the image obtained by the actual size projected image processing means based on the projected image size ratio on the projection plane with respect to the actual size of the captured image specified by the captured image-projected image size ratio specifying means. The mobile terminal according to claim 1, wherein the mobile terminal is a mobile terminal. 前記撮影手段による撮影画像１画素あたりの撮影範囲実寸縦サイズ換算値ｈ０、撮影範囲実寸横サイズ換算値ｗ０を下記の式に基づいて求め、（前記撮影手段の結像範囲の縦画素数をｍとし、横画素数をｎとし、撮影範囲実寸縦算出サイズＨとし、実寸横算出サイズＷであるとする）、
ｈ０ ＝ Ｈ／ｍ
ｗ０ ＝ Ｗ／ｎ
投影画像の画像投影実寸縦サイズＹ、画像投影実寸横サイズＸを、下記の式により求め、（投影表示素子と投影レンズとの距離Ｔｆ、投影表示素子の横サイズｙ、縦サイズｘとする）、
Ｙ ＝ ｙ＊Ｔｐ／Ｔｆ
Ｘ ＝ ｘ＊Ｔｐ／Ｔｆ
１画素あたりの画像投影実寸縦サイズ換算値ｙ０、画像投影実寸横サイズ換算値ｘ０を、下記の式により求めることを特徴とする請求項１から６までのいずれか１項に記載の携帯端末。
ｙ０ ＝ Ｙ／ｉ
ｘ０ ＝ Ｘ／ｊ The photographing range actual size vertical size converted value h0 and the photographing range actual size horizontal size converted value w0 per pixel of the photographed image by the photographing means are obtained based on the following equations (the number of vertical pixels in the imaging range of the photographing means is m And the number of horizontal pixels is n, the shooting range actual size vertical calculation size H, and the actual size horizontal calculation size W).
h0 = H / m
w0 = W / n
The image projection actual size vertical size Y and the image projection actual size horizontal size X of the projection image are obtained by the following formulas (the distance Tf between the projection display element and the projection lens, the horizontal size y of the projection display element, and the vertical size x): ,
Y = y * Tp / Tf
X = x * Tp / Tf
The portable terminal according to any one of claims 1 to 6, wherein an image projection actual size vertical size converted value y0 and an image projection actual size horizontal size converted value x0 per pixel are obtained by the following equations.
y0 = Y / i
x0 = X / j さらに、投影画像サイズと撮影画像実寸サイズとを一致させるための拡大縮小率を下記の式により求めることを特徴とする請求項７に記載の携帯端末。
縦方向拡大縮小率α＝ｈ０／ｙ０
横方向拡大縮小率β＝ｗ０／ｘ０ 8. The portable terminal according to claim 7, wherein an enlargement / reduction ratio for making the projected image size coincide with the actual captured image size is obtained by the following equation.
Vertical scaling factor α = h0 / y0
Horizontal scaling ratio β = w0 / x0 さらに、通信機能を有することを特徴とする請求項１から８までのいずれか１に記載の携帯端末。   Furthermore, it has a communication function, The portable terminal of any one of Claim 1-8 characterized by the above-mentioned. 撮影した被写体までの距離を計測するステップと、
撮影画角と計測された被写体までの距離とに基づいて撮影画像の実寸を計算する撮影画像実寸計算ステップと、
投影面までの投影距離を測定する投影距離測定し、該投影距離に基づき投影画像の投影面における投影サイズを計算する投影サイズ計算ステップと、
前記撮影画像実寸及び前記投影サイズに基づいて画像を拡大縮小処理するステップと
を有することを特徴とする携帯端末における画像処理方法。 Measuring the distance to the photographed subject,
A captured image actual size calculating step for calculating the actual size of the captured image based on the shooting angle of view and the measured distance to the subject;
A projection size calculation step of measuring a projection distance to measure a projection distance to the projection plane, and calculating a projection size on the projection plane of the projection image based on the projection distance;
And a step of enlarging / reducing the image based on the actual size of the captured image and the projection size. コンピュータに請求項１０に記載のステップを実行させるためのプログラム。   The program for making a computer perform the step of Claim 10. 請求項１１に記載のプログラムを記録するコンピュータ読み取り可能な記録媒体。   The computer-readable recording medium which records the program of Claim 11.
JP2007044835A 2007-02-26 2007-02-26 Mobile terminal Pending JP2008211409A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007044835A JP2008211409A (en) 2007-02-26 2007-02-26 Mobile terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007044835A JP2008211409A (en) 2007-02-26 2007-02-26 Mobile terminal

Publications (1)

Publication Number Publication Date
JP2008211409A true JP2008211409A (en) 2008-09-11

Family

ID=39787359

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007044835A Pending JP2008211409A (en) 2007-02-26 2007-02-26 Mobile terminal

Country Status (1)

Country Link
JP (1) JP2008211409A (en)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010061022A (en) * 2008-09-05 2010-03-18 Nec Corp Article display device, mobile terminal, article display method and article display program
JP2010078677A (en) * 2008-09-24 2010-04-08 Hitachi Information Systems Ltd System and method for displaying image in actual size, and program therefor
JP2011141411A (en) * 2010-01-07 2011-07-21 Seiko Epson Corp Projector and method of controlling the same
EP2434771A1 (en) 2010-09-27 2012-03-28 Sony Corporation Projection device, projection control method and program
WO2013059599A1 (en) * 2011-10-19 2013-04-25 The Regents Of The University Of California Image-based measurement tools
JP2013125506A (en) * 2011-12-16 2013-06-24 Pasuko:Kk Photographing object retrieval system
KR101531507B1 (en) * 2008-10-21 2015-06-25 엘지전자 주식회사 Mobile terminal and method for controlling display thereof
WO2015117404A1 (en) * 2014-07-25 2015-08-13 中兴通讯股份有限公司 Object display method for mobile terminal, and mobile terminal
JP2015163930A (en) * 2014-01-30 2015-09-10 株式会社リコー Image projection device, control method of image projection device, and control program of image projection device
JP2016065798A (en) * 2014-09-25 2016-04-28 日本電気株式会社 Moving body detection device
JP2017106959A (en) * 2015-12-07 2017-06-15 富士通株式会社 Projection device, projection method, and computer program for projection
CN109159099A (en) * 2018-09-14 2019-01-08 深圳市华测实验室技术服务有限公司 Sheet fabrication and size detection ancillary equipment
JP7004057B1 (en) 2020-12-23 2022-01-21 日立金属株式会社 Computer program, information display method, information display device and information display system
WO2023119570A1 (en) * 2021-12-23 2023-06-29 三菱電機ビルソリューションズ株式会社 Projection device and projection system

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010061022A (en) * 2008-09-05 2010-03-18 Nec Corp Article display device, mobile terminal, article display method and article display program
JP2010078677A (en) * 2008-09-24 2010-04-08 Hitachi Information Systems Ltd System and method for displaying image in actual size, and program therefor
KR101531507B1 (en) * 2008-10-21 2015-06-25 엘지전자 주식회사 Mobile terminal and method for controlling display thereof
JP2011141411A (en) * 2010-01-07 2011-07-21 Seiko Epson Corp Projector and method of controlling the same
EP2434771A1 (en) 2010-09-27 2012-03-28 Sony Corporation Projection device, projection control method and program
US10205993B2 (en) 2010-09-27 2019-02-12 Sony Corporation Controlling projection of a screen
US9696897B2 (en) 2011-10-19 2017-07-04 The Regents Of The University Of California Image-based measurement tools
WO2013059599A1 (en) * 2011-10-19 2013-04-25 The Regents Of The University Of California Image-based measurement tools
JP2013125506A (en) * 2011-12-16 2013-06-24 Pasuko:Kk Photographing object retrieval system
JP2015163930A (en) * 2014-01-30 2015-09-10 株式会社リコー Image projection device, control method of image projection device, and control program of image projection device
WO2015117404A1 (en) * 2014-07-25 2015-08-13 中兴通讯股份有限公司 Object display method for mobile terminal, and mobile terminal
CN105320482A (en) * 2014-07-25 2016-02-10 中兴通讯股份有限公司 Object displaying method used for mobile terminal and mobile terminal
JP2016065798A (en) * 2014-09-25 2016-04-28 日本電気株式会社 Moving body detection device
JP2017106959A (en) * 2015-12-07 2017-06-15 富士通株式会社 Projection device, projection method, and computer program for projection
CN109159099A (en) * 2018-09-14 2019-01-08 深圳市华测实验室技术服务有限公司 Sheet fabrication and size detection ancillary equipment
JP7004057B1 (en) 2020-12-23 2022-01-21 日立金属株式会社 Computer program, information display method, information display device and information display system
JP2022099893A (en) * 2020-12-23 2022-07-05 日立金属株式会社 Computer program, information display method, information display device, and information display system
WO2023119570A1 (en) * 2021-12-23 2023-06-29 三菱電機ビルソリューションズ株式会社 Projection device and projection system

Similar Documents

Publication Publication Date Title
JP2008211409A (en) Mobile terminal
US9794478B2 (en) Imaging apparatus for generating composite image using directional indicator image, and method and recording medium with program recorded therein for the same
KR101777354B1 (en) Digital photographing apparatus, method for controlling the same, and computer-readable storage medium
US8462215B2 (en) Photographing control method and apparatus according to motion of digital photographing apparatus
JP5665013B2 (en) Image processing apparatus, image processing method, and program
JP2004343747A (en) Photographing method for mobile communication terminal with camera
JP2005252657A (en) Electronic still camera
JP2010021753A (en) Image processor, image apparatus processing the same and digital still camera
JP4509081B2 (en) Digital camera and digital camera program
JP2007201539A (en) Digital camera
JP2014174185A (en) Control device, control method, and imaging apparatus
JP2005292428A (en) Portable terminal
US6806905B1 (en) Digital camera
JP6188407B2 (en) interchangeable lens
JP2015194680A (en) Imaging apparatus
JP5104645B2 (en) Digital camera
JP2007036843A (en) Imaging apparatus with projection display function, and portable electronic device
JP2013009204A (en) Imaging device, imaging method and program
JP2012165350A (en) Imaging device
KR101700360B1 (en) Digital photographing apparatus, method for controlling the apparatus, and medium for recording the method
JP2011030104A (en) Image capturing apparatus, and method of controlling the same
JP4453540B2 (en) Imaging apparatus and program
KR100395530B1 (en) Digital camera capable of displaying distance information for a subject and method for displaying the same
JP5648563B2 (en) Image processing apparatus, image processing method, and program
JP5641352B2 (en) Image processing apparatus, image processing method, and program