WO2010137513A1 - 電子機器 - Google Patents

電子機器 Download PDF

Info

Publication number
WO2010137513A1
WO2010137513A1 PCT/JP2010/058521 JP2010058521W WO2010137513A1 WO 2010137513 A1 WO2010137513 A1 WO 2010137513A1 JP 2010058521 W JP2010058521 W JP 2010058521W WO 2010137513 A1 WO2010137513 A1 WO 2010137513A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
unit
image processing
imaging
monitor
Prior art date
Application number
PCT/JP2010/058521
Other languages
English (en)
French (fr)
Inventor
史生 長井
洋 波多野
毅 遠藤
哲也 野田
義朗 平原
Original Assignee
コニカミノルタオプト株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by コニカミノルタオプト株式会社 filed Critical コニカミノルタオプト株式会社
Publication of WO2010137513A1 publication Critical patent/WO2010137513A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/19Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays
    • H04N1/195Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays
    • H04N1/19594Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays using a television camera or a still video camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/19Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays
    • H04N1/195Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/04Scanning arrangements
    • H04N2201/0402Arrangements not specific to a particular one of the scanning methods covered by groups H04N1/04 - H04N1/207
    • H04N2201/0436Scanning a picture-bearing surface lying face up on a support

Definitions

  • the present invention relates to an electronic apparatus using a solid-state imaging device such as a CCD (Charge Coupled Devices) type image sensor or a CMOS (Complementary Metal-Oxide Semiconductor) type image sensor.
  • a solid-state imaging device such as a CCD (Charge Coupled Devices) type image sensor or a CMOS (Complementary Metal-Oxide Semiconductor) type image sensor.
  • a scanner as an apparatus conventionally used for digitizing a document.
  • the scanner captures an image plane that faces the imaging optical system, and a large-sized scanner device equipped with a line sensor is often used particularly when a document containing characters is digitized on a desktop.
  • a digital camera may be used instead of a scanner, but in this case, since it is necessary to shoot with the image plane and the digital camera facing each other at a certain distance, There is a problem that it has to be placed on the floor or the like to take an image and is not easy to use.
  • some commercially available personal computers have built-in web cameras for the purpose of video conferencing.
  • This web camera is generally integrated into a display monitor unit or a personal computer main body, and is often used to transmit an image of a user who operates the personal computer to a destination.
  • a web camera can be used to capture an image of a document, it is desirable to capture an image while the document is placed on a desk in consideration of the user's trouble.
  • the imaging axis of the web camera attached to the display monitor unit or the PC main body is inclined with respect to the normal of the document, which causes the image to be trapezoidally distorted, so that state Even if the image is transmitted as it is, there is a problem that it is difficult to see the other party of the transmission destination.
  • Patent Document 1 discloses an imaging system that corrects this trapezoidal distortion in view of the fact that when a sheet of paper is imaged using a camera, the square of the sheet is distorted into a trapezoid. ing.
  • the present invention has been made in view of such a problem, and provides an electronic device that can quickly correct and display an image of a subject without performing complicated image processing, thereby improving user convenience. For the purpose.
  • the electronic device is: A main body installed on the ground surface that is the same as or close to the surface on which the subject is placed; A camera unit having an imaging element and an imaging optical system that forms an optical image on a light receiving surface of the imaging element; Image processing means for performing image processing on an image signal output from the camera unit; A support part which is arranged so as to be swingable with respect to the main body and to which the camera part is attached; Detecting means for detecting a parameter corresponding to a relative positional relationship between the main body and the camera unit; The image processing unit performs keystone correction on an image signal output from the camera unit that captured the subject according to a parameter detected by the detection unit.
  • the image processing unit performs trapezoidal correction on the image signal output from the camera unit that captured the subject according to the parameter detected by the detection unit. Even if complex image processing is not performed, the keystone correction can be performed only by simple calculation and image deformation, and high-precision correction can be performed quickly.
  • the “ground plane close to the surface on which the subject is placed” means, for example, that the surface on which the electronic device is installed and the surface on which the subject is placed are within 1 cm (preferably 5 mm) in the height direction. Including close proximity.
  • the camera unit is fixedly arranged with respect to the support unit, and the detection unit includes the main body and the support unit as the parameters.
  • the image processing means detects at least the distance along the support portion from the surface on which the main body is installed to the image sensor of the camera portion, and the first detected by the detection means.
  • keystone correction is performed on the image signal output from the camera unit.
  • the image processing means includes at least a distance along the support unit from the surface on which the main body is installed to the image sensor of the camera unit.
  • the keystone correction can be performed on the image signal output from the camera unit in accordance with the first tilt angle detected by the detection means.
  • the electronic device when the image processing means determines that the first tilt angle is equal to or greater than a first predetermined angle, the electronic device outputs from the camera unit.
  • the image processing is performed so that the image displayed on the monitor unit is reversed left and right without performing trapezoidal correction on the image signal.
  • the first tilt angle is compared with a first predetermined angle, for example, a conference for imaging the user himself using the camera unit, for example. It is possible to automatically select a mode and a document imaging mode for imaging a document as a subject.
  • the image processing means performs image processing so that the image displayed on the monitor unit is reversed left and right without performing trapezoidal correction, thereby improving user convenience. Can be increased.
  • the technique disclosed in Japanese Patent Laid-Open No. 11-4370 can be used.
  • the first predetermined angle is 90 degrees. If the tilt angle of the support portion with respect to the main body is 90 degrees or more, it is difficult to image the mounted subject on the mounting surface that is the same as or close to the surface on which the main body is installed. This is because it is estimated that the user himself is imaged.
  • the camera unit is disposed so as to be swingable with respect to the support unit, and the detection unit is configured to use the main body as the parameter.
  • a first tilt angle between the support unit and the second tilt angle between the support unit and the optical axis of the imaging optical system of the camera unit, and the image processing means is a surface on which the main body is installed.
  • the image processing means includes a distance along the support unit from the surface on which the main body is installed to the image sensor of the camera unit, and The keystone correction can be performed on the image signal output from the camera unit in accordance with the first tilt angle and the second tilt angle detected by the detecting means.
  • the image processing means when the first inclination angle is ⁇ and the second inclination angle is ⁇ , the image processing means is ( ⁇ + ⁇ ) When it is determined that the angle is equal to or larger than a predetermined angle of 2, the image signal output from the camera unit is not subjected to trapezoidal correction, and image processing is performed so that the image displayed on the monitor unit is horizontally reversed. It is characterized by.
  • a conference mode for imaging the user himself using the camera unit and a document imaging mode for imaging a document as a subject can be automatically selected.
  • the image processing means performs image processing so that the image displayed on the monitor unit is reversed left and right without performing keystone correction, thereby improving user convenience. be able to.
  • the second predetermined angle is 180 degrees. If ( ⁇ + ⁇ ) is 180 degrees or more, it is difficult to image the mounted subject on the mounting surface that is the same as or close to the surface on which the main body is installed. Because it is done.
  • the electronic device is the monitor unit according to any one of claims 1 to 7, wherein the support unit displays an image based on an image signal image-processed by the image processing unit. It is characterized by having. Accordingly, the support portion can be swung while looking at the displayed image and searching for a position suitable for imaging the subject.
  • the electronic device according to claim 9 is characterized in that, in the invention according to claim 8, the monitor section faces an imaging direction. This is convenient because the user operating in front of the electronic device can adjust the inclination of the support portion while viewing the image on the monitor.
  • the monitor unit displays a guideline indicating a position of the subject for which the keystone correction can be performed. This is convenient because the user operating in front of the electronic device can adjust the position of the subject, the inclination of the support portion, and the like while aligning the guideline in the monitor with the image.
  • the image processing means includes a trapezoid only for an image of a subject placed at a predetermined position on the imaging screen. Correction is performed. As a result, the amount of memory required for image processing can be kept small, and image processing can be performed quickly.
  • the present invention it is possible to provide an electronic device that can quickly correct and display an image of a subject without performing complicated image processing, thereby improving user convenience.
  • FIG. 1 It is a perspective view of notebook type personal computer PC carrying imaging device CA concerning this embodiment.
  • FIG. 1 It is a block diagram of notebook type personal computer PC which mounts imaging device CA concerning this embodiment. It is a figure which expands and shows imaging device CA vicinity.
  • (A) is the figure seen from the side in the state which has arrange
  • (b) is a figure which shows the image imaged by imaging device CA in this state.
  • (A) is the figure seen from the side in the state which has arrange
  • (b) is a figure which shows the image imaged by imaging device CA in this state. .
  • FIG. 4 is a diagram illustrating an image obtained by cutting out only a document. It is a figure which shows the state which mounted document DCM on the desk surface on the opposite side to the monitor part PCD with respect to main body PCB.
  • FIG. 1 is a perspective view of a notebook personal computer (electronic device) PC equipped with an imaging device CA according to the present embodiment.
  • FIG. 2 is a block diagram of a notebook personal computer PC equipped with an imaging device (camera unit) CA according to the present embodiment.
  • FIG. 3 is an enlarged view showing the vicinity of the imaging apparatus CA.
  • the notebook personal computer PC can be folded by connecting the main body PCB and the monitor part PCD with a hinge PCH, and the imaging device CA is an upper part of the monitor 112 in the monitor part PCD as a support part. Arranged in the center, that is, the monitor 112 is on the front side of the imaging device CA.
  • the image pickup apparatus CA is incorporated in the notebook personal computer PC, and the monitor 112 is used as a display means, so that the image captured by the monitor 112 can be confirmed and image processing can be performed at high speed using an image processing circuit on the personal computer side. Can be sent, pasted on other materials, extraction of characters and pictures, and reuse.
  • the display unit PCD whose tilt angle with respect to the main body PCB can be adjusted by the hinge PCH can be used as a support unit of the imaging apparatus CA, there is also an advantage that the angle of view at the time of imaging the document DCM placed on the desk can be secured.
  • the imaging device CA is disposed in a notch CT at the upper center of the monitor 112, and is supported to be swingable with respect to the monitor unit 112 via a swing shaft PS.
  • a second sensor 115 is attached to the swing axis PS that swings together with the imaging device CA, and the tilt angle (second tilt angle) of the imaging axis of the imaging device CA (the optical axis of the imaging optical system) with respect to the monitor unit 112. ) ⁇ can be detected.
  • the imaging apparatus CA can swing at least 180 degrees or more.
  • the hinge PCH incorporates a first sensor 114 that detects a relative inclination angle (first inclination angle) ⁇ between the monitor unit PCD and the main body PCB.
  • the imaging apparatus CA includes an imaging optical system 101, a solid-state imaging device 102, and an A / D conversion unit 103.
  • the notebook personal computer PC includes a control unit 104, an optical system driving unit 105, a timing generation unit 106, an image sensor driving unit 107, an image memory 108, an image processing unit 109, an image compression unit 110, The image recording unit 111, the monitor 112, the keyboard 113, and the first sensor 114 and the second sensor 115 serving as detection means are included.
  • a device used for a normal personal computer is provided. I will omit it.
  • the control unit 104 and the image processing unit 109 constitute an image processing unit.
  • the imaging optical system 101 has a function of forming a subject image on the imaging surface (light receiving surface) of the solid-state imaging device 102.
  • the solid-state image sensor 102 is an image sensor such as a CCD or CMOS, and photoelectrically converts incident light for each of R, G, and B and outputs an analog signal thereof.
  • the A / D conversion unit 103 converts an analog signal into digital image data.
  • the control unit 104 has a function of controlling the imaging device CA.
  • the control unit 104 includes a CPU (Central Processing Unit), a RAM (Random Access Memory), a ROM (Read Only Memory), and various programs read from the ROM and expanded in the RAM, and various types in cooperation with the CPU. Execute the process.
  • CPU Central Processing Unit
  • RAM Random Access Memory
  • ROM Read Only Memory
  • the optical system driving unit 105 drives and controls the imaging optical system 101 during focusing, exposure, and the like under the control of the control unit 104.
  • the timing generator 106 outputs an analog signal output timing signal under the control of the controller 104.
  • the image sensor drive unit 107 causes the solid-state image sensor 102 to output an analog signal in synchronization with the timing signal output from the timing generator 106.
  • the image memory 108 stores image data so as to be readable and writable.
  • the image processing unit 109 performs various image processes on the image data.
  • the image compression unit 110 compresses captured image data by a compression method such as JPEG (Joint Photographic Experts Group).
  • the image recording unit 111 records image data on a recording medium such as a memory card set in a hard disk or a slot (not shown).
  • the monitor 112 is a color liquid crystal panel or the like, and can display image data after image processing after shooting, a through image before shooting, and the like.
  • the keyboard 113 includes an imaging mode setting command and various operation keys for inputting information, and outputs information input by the user to the control unit 104.
  • the first sensor 114 detects the inclination angle ⁇ of the monitor unit PCD with respect to the main body PCB as a parameter, and transmits it to the control unit 104.
  • the second sensor 115 detects the tilt angle ⁇ of the imaging axis of the imaging apparatus CA with respect to the monitor unit PCD as a parameter and transmits it to the control unit 104.
  • the operation in the imaging apparatus CA and the notebook personal computer PC will be described. If the edge of the image of the document DCM is not detected when performing the keystone correction, the image processing is simplified and the correction can be performed quickly. However, in order to perform trapezoidal correction without using edge detection, some device is required.
  • FIG. 4 (a) an image of a document DCM captured with the monitor unit PCD standing upright with respect to the main body PCB is shown in FIG. 4 (b). While the difference is relatively small, as shown in FIG. 5 (a), the image of the document DCM captured by placing the monitor unit PCD on the main body PCB is trapezoidal as shown in FIG. 5 (b). The difference between the upper side and the lower side is relatively large. That is, the amount of deformation of the image of the document DCM changes according to the relative positional relationship between the main body PCB and the imaging device CA.
  • FIG. 6 is a side view of the notebook personal computer PC and the document DCM.
  • FIG. 7 is a diagram illustrating an image before correction (dotted line) and an image after correction (solid line).
  • the control unit 104 stores in advance the length H of the monitor unit PCD (the distance along the monitor unit PCD from the desk surface on which the main body PCD is installed to the center of the imaging device of the imaging device CA).
  • control unit 104 obtains the inclination angle ⁇ of the monitor unit PCD with respect to the main body PCB from the signal of the first sensor 114, and the inclination angle ⁇ of the imaging axis of the imaging device CA with respect to the monitor unit PCD based on the signal of the second sensor 115. Can be obtained and output as parameters.
  • the control unit 104 substitutes the stored value H and the obtained parameters ⁇ and ⁇ into the following formula to obtain a conversion formula for trapezoidal correction.
  • the image processing unit 109 based on the obtained conversion formula, the points a i before correction of the image shown by the dotted line ', c ij' of each point of the image after correction shown by the solid line a i, the c ij Transform and transform the image to perform keystone correction.
  • the monitor 112 displays each point of the image after the keystone correction. Note that the image of the document DCM may be flipped up and down and left and right before or after the keystone correction.
  • the imaging device CA can be fixedly arranged with respect to the monitor unit PCD.
  • the control unit 104 since the inclination angle ⁇ of the imaging axis of the imaging apparatus CA with respect to the monitor unit PCD is a fixed value (usually 90 degrees), the control unit 104 stores the inclination angle ⁇ so that the first inclination angle ⁇ is stored. By obtaining only as a parameter, a conversion formula for keystone correction can be obtained.
  • the imaging apparatus CA is configured to be movable relative to the monitor unit PCD, the above-described value H is not a fixed value. In such a case, the value H may be detected using a linear encoder or the like as a parameter and substituted into the conversion formula.
  • the position of the face of the user US as the subject is the state of the imaging apparatus CA with the notebook personal computer PC placed on the desk. It is located above the horizontal line HL (that is, in the vertical direction).
  • the document DCM is positioned below the horizontal line HL (that is, in the vertical direction) of the imaging device CA in a state where it is placed on the desk in the vicinity of the main body PCB of the notebook personal computer PC. . That is, it is possible to determine which subject the user is trying to capture from the inclination angle of the support portion PCD with respect to the main body PCB.
  • the control unit 104 determines the tilt angle (first tilt angle) of the monitor unit PCD with respect to the main body PCB from the output of the first sensor 114. ⁇ is obtained, and when the inclination angle ⁇ is 90 degrees or more, a conference mode for imaging the user is set, and when the inclination angle ⁇ is less than 90 degrees, the document imaging mode for imaging the document DCM is set. Can be set.
  • the control unit 104 determines the tilt angle (first tilt angle) of the monitor unit PCD with respect to the main body PCB from the output of the first sensor 114.
  • an inclination angle (second inclination angle) ⁇ of the imaging axis of the imaging device CA with respect to the monitor unit PCD is obtained from the output of the second sensor 115, and when ( ⁇ + ⁇ ) is 180 degrees or more, the user himself
  • the document capture mode for capturing the document DCM can be set.
  • the conference mode In the conference mode, subject monitoring (through image display) and image shooting execution are performed as necessary.
  • an image of a subject obtained through the imaging optical system 101 is formed on the light receiving surface of the solid-state imaging device 102.
  • the solid-state imaging device 102 disposed behind the imaging optical axis of the imaging optical system 101 is scanned and driven by the timing generation unit 106 and the imaging device driving unit 107.
  • the analog signal is output for one screen.
  • the analog signal is appropriately gain-adjusted for each primary color component of RGB, and then converted into digital data by the A / D conversion unit 103.
  • the digital data is reversed left and right by image processing by the image processing unit 109 and is subjected to color process processing including pixel interpolation processing and ⁇ correction processing to obtain a digital luminance signal Y and color difference signals Cb, Cr (images).
  • Data is generated and stored in the image memory 108, the signal is periodically read out, the video signal is generated, output to the monitor 112, and transmitted to the other party connected via the Internet.
  • the monitor 112 displays the image MG ⁇ b> 1 transmitted from the other party in a full screen, and the image MG ⁇ b> 2 of the user US itself is displayed small in the lower right of the monitor 112.
  • the image MG2 in a mirror image relationship is raised on the same side, so that the user US looks at the mirror and feels uncomfortable.
  • the image MG2 may be displayed on the full screen.
  • the monitor 112 functions as an electronic viewfinder in monitoring and displays captured images in real time. In this state, focusing, exposure, and the like of the imaging optical system 101 are set by the drive of the optical system driving unit 105 as needed by the image plane AF.
  • the user can acquire still image data by operating a predetermined key on the keyboard 113 at a timing when still image shooting is desired.
  • one frame of image data stored in the image memory 108 is read out and compressed by the image compression unit 110.
  • the compressed image data is recorded on a recording medium by the image recording unit 111.
  • the document imaging mode is set and the document DCM is imaged as a subject.
  • subject monitoring through image display
  • image shooting execution are performed as described above.
  • the user tilts the monitor unit PCD and the imaging device CA together while visually recognizing the image displayed on the monitor 112.
  • the guideline GL is determined by the above-described substitution values H, ⁇ , and ⁇ . By aligning the three sides of the document DCM here, the guideline GL is displayed as an appropriate image after the keystone correction.
  • the optical system driving unit 105 is set so that the upper position on the screen (the position farther away in the document DCM) than the optical axis center position (that is, the screen center) of the imaging optical system 101 in the document DCM is the focusing position. It is preferable to drive. Thereby, the depth of field can be used effectively. Focusing is preferably performed automatically by the image plane AF as described above, but a distance measuring device may be provided separately.
  • the user can acquire still image data (image data of the primary acquired image) by operating a predetermined key of the keyboard 113.
  • the control unit 104 can store the obtained conversion formula together with the image data of the primary acquired image G1 in a common file and store it in the image memory 108 which is a storage unit.
  • the image data may be subjected to predetermined compression.
  • Such a file is recorded on a recording medium by the image recording unit 111.
  • image correction is performed by the image processing unit 109
  • keystone correction image processing
  • image processing is performed on the image data of the primary acquired image G1 based on the conversion formula described above to form image data of the image G2 (See FIG. 9B).
  • the document DCM has a rectangular shape with an original aspect ratio.
  • the image processing unit 109 performs image processing so that the image data of the image G2 is trapezoidally corrected and inverted 180 degrees (vertically and horizontally reversed). As shown in (c), an upright image G3 is displayed. Therefore, both the user US and the transmission destination can easily understand the contents of the document DCM, and when the user US moves the document DCM to the right, the image G3 also moves to the right.
  • the characters written by the US in the document DCM can be read immediately.
  • the keystone correction may be performed after the image is flipped vertically and horizontally.
  • the image processing may be performed so as to cut out along the outline of the document DCM to form the image G3 including only the document DCM.
  • the image data of the primary acquired image G1 and the substitution values H, ⁇ , ⁇ , or a conversion formula obtained by substituting these values are transmitted from the notebook personal computer PC via the LAN or the Internet, and the transmission destination image forming apparatus is similar. Keystone correction may be performed.
  • the keystone correction can be performed even when the document DCM is placed on the desk surface opposite to the monitor unit PCD with respect to the main body PCB.
  • the inclination angle of the surface of the main body PCB extending from the back side of the monitor unit PCD and the monitor unit PCD is ⁇ ′
  • the inclination angle of the imaging axis of the imaging device CA with respect to the back surface of the monitor unit PCD is As ⁇ ′
  • the control unit 104 performs preprocessing on the output signals of the first sensor 114 and the second sensor 115. Whether or not to perform the preprocessing can be determined by a signal from an inversion sensor (not shown) that detects that the imaging apparatus CA is inverted (facing the back side of the monitor unit PCD).
  • the pre-processing may be performed manually by the user without using the reverse sensor.
  • the present invention has been described with reference to the embodiment. However, the present invention should not be construed as being limited to the above-described embodiment, and can be appropriately changed or improved.
  • the electronic device is not limited to a personal computer but can be applied to a mobile phone or the like.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

 本発明は、複雑な画像処理を行うことなく被写体の画像を迅速に補正して表示し、ユーザの利便性を高めた電子機器を提供することを目的とする。 制御部104は、求められた代入値H、α、βを所定の式に代入して、台形補正のための変換式を得る。画像処理部109は、得られた変換式に基づき画像の各点において、点線で示す補正前の画像の各点a'、cij'を、実線で示す補正後のa、cijに変換して画像を変形させ、台形補正を行う。これにより画像処理を簡素化でき、迅速な処理を行える。

Description

電子機器
 本発明は、CCD(Charge Coupled Devices)型イメージセンサやCMOS(Complementary Metal-Oxide Semiconductor)型イメージセンサ等の固体撮像素子を用いた電子機器に関する。
 近年、CCD型イメージセンサやCMOS型イメージセンサ等の固体撮像素子を用いた撮像装置が搭載されたビデオカメラ、デジタルカメラの普及が進み、より高画質の画像が得られるよう高画素数を有する固体撮像素子を使用した撮像装置を搭載したものが市揚に供給されるようになってきた。又、インターネットの普及に伴い、パソコンに取り付けて、送信者の画像を取得して相手先に伝送するための、いわゆるウェブカメラなども既に市販されている。
 ところで、情報セキュリティの観点、あるいは手書き書面を用いた遠隔コミュニケーションのために、書類を電子化するニーズが増している。書類を電子化するために従来から用いられている機器としてスキャナがある。しかるにスキャナは、撮像光学系に正対する像面を撮影するものであって、特に文字を含むような書類を卓上で電子化する際にはラインセンサを備えた大型のスキャナ装置を用いることが多いが、装置自体が比較的嵩張るという問題がある。一方、デジタルカメラをスキャナの代わりに用いることもあるが、この場合、像面とデジタルカメラとをある程度距離を置いて正対させながら撮影する必要があるので、被写体となる紙の資料等を、わざわざ床面などに載置して撮像を行わなくてはならず、使い勝手が良くないという問題がある。
 ここで、現在市販されているパソコンには、テレビ会議等を行う目的でウェブ用カメラを内蔵したものもある。このウェブカメラは、一般的に表示モニタ部もしくはパソコン本体に一体化されており、パソコンを操作するユーザの画像を相手先に伝送する為に用いられることが多い。かかるウェブカメラを、書類を撮像するために流用することもできるが、ユーザの手間を考慮すると、書類を机上に載置したまま撮像することが望ましい。ところが、このような撮像によれば、表示モニタ部又はパソコン本体に取り付けられたウェブカメラの撮像軸線は、書類の法線に対して傾くこととなり、これにより画像が台形的に歪むため、その状態のまま画像を伝送しても、伝送先の相手が見にくくなるという問題が生じる。
 これに対し特許文献1には、カメラを用いて用紙を斜めから撮像を行った場合、用紙の四角形が台形に歪んでしまうことに鑑み、この台形歪みを補正するようにした撮影システムが開示されている。
特開2005-269449号公報
 ところで、特許文献1に開示された技術によれば、複雑な画像処理工程を経て、撮影画像から原稿部分のエッジ部分(輪郭)を取得してこの原稿部分を切り出し、切り出した原稿部分の射影変換を行うことにより台形歪みを補正している。しかしながら、かかる従来技術の手法では画像処理に時間がかかると共に、撮像信号によっては輪郭のエッジ検出が困難な場合もある。
 本発明は、このような問題点に鑑みてなされたものであり、複雑な画像処理を行うことなく被写体の画像を迅速に補正して表示し、ユーザの利便性を高めた電子機器を提供することを目的とする。
 請求項1に記載の電子機器は、
 被写体が載置された面と同一もしくは近接した接地面に設置される本体と、
 撮像素子と、前記撮像素子の受光面に光学像を結像させる撮像光学系とを有するカメラ部と、
 前記カメラ部から出力された画像信号を画像処理する画像処理手段と、
 前記本体に対して揺動可能に配置され、前記カメラ部を取り付けてなる支持部と、
 前記本体と前記カメラ部との相対位置関係に対応するパラメータを検出する検出手段と、を有し、
 前記画像処理手段は、前記検出手段の検出したパラメータに応じて、前記被写体を撮像した前記カメラ部から出力された画像信号に対して台形補正を行うことを特徴とする。
 本発明によれば、前記画像処理手段が、前記検出手段の検出したパラメータに応じて、前記被写体を撮像した前記カメラ部から出力された画像信号に対して台形補正を行うので、エッジ検出等の複雑な画像処理を行わずとも、単純な演算と画像の変形のみで台形補正を行うことが出来、高精度な補正を迅速に行うことができる。尚、「被写体が載置された面と近接した接地面」とは、例えば電子機器の設置された面と、被写体の載置された面とが高さ方向に1cm(好ましくは5mm)以内で近接する場合を含む。
 請求項2に記載の電子機器は、請求項1に記載の発明において、前記カメラ部は、前記支持部に対して固定配置されており、前記検出手段は、前記パラメータとして前記本体と前記支持部との第1傾き角を検出し、前記画像処理手段は、少なくとも前記本体が設置された面から前記カメラ部の撮像素子までの前記支持部に沿った距離と、前記検出手段の検出した第1傾き角とに応じて、前記カメラ部から出力された画像信号に対して台形補正を行うことを特徴とする。例えば前記カメラ部が前記支持部に固定されているような場合には、前記画像処理手段は、少なくとも前記本体が設置された面から前記カメラ部の撮像素子までの前記支持部に沿った距離と、前記検出手段の検出した第1傾き角とに応じて、前記カメラ部から出力された画像信号に対して台形補正を行うことができる。
 請求項3に記載の電子機器は、請求項2に記載の発明において、前記画像処理手段が、前記第1傾き角は第1の所定角度以上であると判断したときは、前記カメラ部から出力された画像信号に対して、台形補正を行わず、モニタ部に表示される画像が左右反転するように画像処理を行うことを特徴とする。前記カメラ部と前記支持部との傾きが一定(例えば90度)である場合、第1傾き角を第1の所定角度と比較することで、例えば前記カメラ部を用いてユーザ自身を撮像する会議モードと、被写体としての書類等を撮像する書類撮像モードとを自動的に選択できる。しかるに、会議モード等の設定時に撮像された画像をモニタに表示する場合、通常はユーザの右手はモニタの左側に映し出されることとなる。しかしながら、人間は小さいころから鏡の画像を見慣れているので、ユーザの右手がモニタの右側に映し出されるようにすると、まるで鏡を見ているようで違和感がない。そこで、会議モードが設定されたような場合、前記画像処理手段は、台形補正を行うことなく、前記モニタ部に表示される画像が左右反転するように画像処理を行うことで、ユーザの利便性を高めることができる。尚、左右反転処理については、例えば特開平11-4370号公報に開示された技術を用いることができる。
 請求項4に記載の電子機器は、請求項3に記載の発明において、前記第1の所定角度とは90度であることを特徴とする。前記本体に対する前記支持部の傾き角が90度以上であれば、前記本体が設置された面と同一もしくは近接した載置面に載置被写体を撮像することが困難であるため、かかる場合にはユーザ自身を撮像すると推定されるからである。
 請求項5に記載の電子機器は、請求項1に記載の発明において、前記カメラ部は、前記支持部に対して揺動可能に配置されており、前記検出手段は、前記パラメータとして、前記本体と前記支持部との第1傾き角、及び前記支持部と前記カメラ部の前記撮像光学系の光軸との第2傾き角を検出し、前記画像処理手段は、前記本体が設置された面から前記カメラ部の撮像素子までの前記支持部に沿った距離と、前記検出手段の検出した第1傾き角及び第2傾き角とに応じて、前記カメラ部から出力された画像信号に対して台形補正を行うことを特徴とする。前記カメラ部が前記支持部に対して揺動可能な場合には、前記画像処理手段は、前記本体が設置された面から前記カメラ部の撮像素子までの前記支持部に沿った距離と、前記検出手段の検出した第1傾き角及び第2傾き角とに応じて、前記カメラ部から出力された画像信号に対して台形補正を行うことができる。
 請求項6に記載の電子機器は、請求項5に記載の発明において、前記第1傾き角をα、前記第2傾き角をβとしたときに、前記画像処理手段が、(α+β)は第2の所定角度以上であると判断したときは、前記カメラ部から出力された画像信号に対して、台形補正を行わず、モニタ部に表示される画像が左右反転するように画像処理を行うことを特徴とする。(α+β)を第2の所定角度と比較することで、例えば前記カメラ部を用いてユーザ自身を撮像する会議モードと、被写体としての書類等を撮像する書類撮像モードとを自動的に選択できる。会議モードが設定されたような場合、前記画像処理手段は、台形補正を行うことなく、前記モニタ部に表示される画像が左右反転するように画像処理を行うことで、ユーザの利便性を高めることができる。
 請求項7に記載の電子機器は、請求項6に記載の発明において、前記第2の所定角度とは180度であることを特徴とする。(α+β)が180度以上であれば、前記本体が設置された面と同一もしくは近接した載置面に載置被写体を撮像することが困難であるため、かかる場合にはユーザ自身を撮像すると推定されるからである。
 請求項8に記載の電子機器は、請求項1~7の何れか1項に記載の発明において、前記支持部は、前記画像処理手段によって画像処理された画像信号に基づき画像を表示するモニタ部を備えていることを特徴とする。これにより、表示された画像を見ながら、被写体の撮像に適した位置を探りつつ、前記支持部を揺動させることが出来る。
 請求項9に記載の電子機器は、請求項8に記載の発明において、前記モニタ部は、撮像方向を向いていることを特徴とする。これにより、前記電子機器の前で操作するユーザが、前記モニタ中の画像を見ながら、前記支持部の傾きなどを調整できるので便利である。
 請求項10に記載の電子機器は、請求項8又は9に記載の発明において、前記モニタ部は、台形補正を行える前記被写体の位置を示すガイドラインを表示することを特徴とする。これにより、前記電子機器の前で操作するユーザが、前記モニタ中のガイドラインと画像とを合わせるようにしながら、前記被写体の位置や前記支持部の傾きなどを調整できるので便利である。
 請求項11に記載の電子機器は、請求項1~10の何れか1項に記載の発明において、前記画像処理手段は、撮像画面上の所定の位置に載置された被写体の画像のみについて台形補正を行うことを特徴とする。これにより、画像処理に必要なメモリの量などを小さく抑えることができ、迅速に画像処理を行える。
 本発明によれば、複雑な画像処理を行うことなく被写体の画像を迅速に補正して表示し、ユーザの利便性を高めた電子機器を提供することができる。
本実施の形態にかかる撮像装置CAを搭載したノート型パソコンPCの斜視図である。 本実施の形態にかかる撮像装置CAを搭載したノート型パソコンPCのブロック図である。 撮像装置CA付近を拡大して示す図である。 (a)は、ノート型パソコンPCの近傍に書類DCMを配置した状態で、側方から見た図であり、(b)は、かかる状態で撮像装置CAにより撮像された画像を示す図である。 (a)は、ノート型パソコンPCの近傍に書類DCMを配置した状態で、側方から見た図であり、(b)は、かかる状態で撮像装置CAにより撮像された画像を示す図である。 変形例にかかるノート型パソコンPCの近傍に書類DCMを配置した状態で、側方から見た図であり、代入値H、α、βを示している。 台形補正前の画像と台形補正後の画像の座標を比較して示す図である。 撮像装置CAの撮像軸線の向きを示す図である。 (a)は、補正前の1次取得画像を示す図であり、(b)は、1次取得画像に対して台形補正を施した画像を示す図であり、(c)は、上下左右反転して書類のみを切り抜いた画像を示す図である。 書類DCMを本体PCBに対してモニタ部PCDと反対側の机上面に載置した状態を示す図である。
 以下、本発明の実施の形態を図面に基づいて説明する。図1は、本実施の形態にかかる撮像装置CAを搭載したノート型パソコン(電子機器)PCの斜視図である。図2は、本実施の形態にかかる撮像装置(カメラ部)CAを搭載したノート型パソコンPCのブロック図である。図3は、撮像装置CA付近を拡大して示す図である。
 図1に示すように、ノート型パソコンPCは、本体PCBとモニタ部PCDがヒンジPCHで連結されて折り畳み可能となっており、撮像装置CAは、支持部であるモニタ部PCDにおけるモニタ112の上部中央に配置されており、即ちモニタ112は撮像装置CAの正面側にある。尚、撮像装置CAは、ノート型パソコンPCに内蔵させてモニタ112を表示手段とすることで、モニタ112により取り込んだ画像を確認できると共に、パソコン側の画像処理回路を利用して高速で画像処理を行え、メール送信や他の資料への貼り付け、文字・絵等の抽出や再利用を行えるので好ましい。又、ヒンジPCHにより本体PCBに対する傾き角が調整可能なディスプレイ部PCDを撮像装置CAの支持部として利用できるため、机上に載置した書類DCMの撮像時における画角を確保できるという利点もある。
 図3に示すように、撮像装置CAはモニタ112の上部中央の切欠CT内に配置され、モニタ部112に対して揺動軸PSを介して揺動自在に支持されている。撮像装置CAと共に揺動する揺動軸PSには、第2センサ115が取り付けられており、モニタ部112に対する撮像装置CAの撮像軸線(撮像光学系の光軸)の傾き角(第2傾き角)βを検出可能となっている。後述する図10に示す用途では、撮像装置CAは少なくとも180度以上揺動可能であることが望ましい。尚、図示していないが、ヒンジPCHにはモニタ部PCDと本体PCBの相対傾き角(第1傾き角)αを検出する第1センサ114が内蔵されている。
 図2において、撮像装置CAは、撮像光学系101と、固体撮像素子102と、A/D変換部103とを有する。一方、ノート型パソコンPCは、制御部104と、光学系駆動部105と、タイミング発生部106と、撮像素子駆動部107と、画像メモリ108と、画像処理部109と、画像圧縮部110と、画像記録部111と、モニタ112と、キーボード113と、検出手段である第1センサ114及び第2センサ115を備えて構成され、それ以外にも通常のパソコンに用いるデバイスを備えているが、ここでは省略する。制御部104と画像処理部109とで画像処理手段を構成する。
 撮像光学系101は、被写体像を固体撮像素子102の撮像面(受光面)に結像させる機能を有する。固体撮像素子102は、CCDやCMOS等の撮像素子であり、入射光をR、G、B毎に光電変換してそのアナログ信号を出力する。A/D変換部103は、アナログ信号をデジタルの画像データに変換する。
 制御部104は、撮像装置CAを制御する機能を有する。制御部104は、CPU(Central Processing Unit)、RAM(Random Access Memory)、ROM(Read Only Memory)を含み、ROMから読み出されてRAMに展開された各種プログラムと、CPUとの協働で各種処理を実行する。
 光学系駆動部105は、制御部104の制御により、合焦、露出等において、撮像光学系101を駆動制御する。タイミング発生部106は、制御部104の制御により、アナログ信号出力用のタイミング信号を出力する。撮像素子駆動部107は、タイミング発生部106から出力されたタイミング信号に同期して、固体撮像素子102よりアナログ信号を出力させる。
 画像メモリ108は、画像データを読み出し及び書き込み可能に記憶する。画像処理部109は、画像データに各種画像処理を施す。画像圧縮部110は、JPEG(Joint Photographic Experts Group)等の圧縮方式により、撮像画像データを圧縮する。画像記録部111は、ハードディスクや図示しないスロットにセットされた、メモリカード等の記録メディアに画像データを記録する。
 モニタ112は、カラー液晶パネル等であり、撮影後画像処理された画像データ、撮影前のスルー画像等を表示することができる。キーボード113は、撮像モード設定コマンドや、情報を入力するための各種操作キーを含み、ユーザにより操作入力された情報を制御部104に出力する。
 第1センサ114は、パラメータとして本体PCBに対するモニタ部PCDの傾き角αを検出して制御部104に送信する。第2センサ115は、パラメータとしてモニタ部PCDに対する撮像装置CAの撮像軸線の傾き角βを検出して制御部104に送信する。
 ここで、撮像装置CA及びノート型パソコンPCにおける動作を説明する。台形補正を行うに際し、書類DCMの画像のエッジ検出を行わなければ、画像処理が簡素化され、迅速に補正を行うことができる。しかるに、エッジ検出を用いることなく台形補正を行うためには、何らかの工夫が必要になる。
 例えば、図4(a)に示すように、本体PCBに対してモニタ部PCDを垂直に立てて撮像した書類DCMの画像は、図4(b)に示すように、台形の上辺と下辺との差が比較的小さくなるのに対し、図5(a)に示すように、本体PCBに対してモニタ部PCDを寝かせて撮像した書類DCMの画像は、図5(b)に示すように、台形の上辺と下辺との差が比較的大きくなる。すなわち、本体PCBと撮像装置CAとの相対位置関係に応じて、書類DCMの画像の変形量が変化することとなる。
 そこで、本実施の形態においては、以下のようにして台形補正のためのパラメータを求めている。図6は、ノート型パソコンPCと書類DCMとを側方から見た図である。図7は、補正前画像(点線)と補正後画像(実線)とを示す図である。ここで制御部104は、予めモニタ部PCDの長さH(本体PCDが設置された机上面から撮像装置CAの撮像素子中心までのモニタ部PCDに沿った距離)を記憶している。更に制御部104は、第1センサ114の信号により、本体PCBに対するモニタ部PCDの傾き角αを求め、且つ第2センサ115の信号により、モニタ部PCDに対する撮像装置CAの撮像軸線の傾き角βを求め、それぞれパラメータとして出力することができる。制御部104は、記憶していた値Hと、得られたパラメータα、βを以下の式に代入して、台形補正のための変換式を得る。画像処理部109は、得られた変換式に基づいて、点線で示す補正前の画像の各点a’、cij’を、実線で示す補正後の画像の各点a、cijに変換して画像を変形させ、台形補正を行う。すなわち書類DCMのエッジ検出を行わずに、単純な演算で画面全体の座標を変換することによって、結果として書類DCMについては台形補正を行うことができるから、画像処理を簡素化でき、迅速な処理を行える。モニタ112は、台形補正後の画像の各点を表示する。尚、台形補正の前もしくは後に、書類DCMの画像を上下左右反転させても良い。
Figure JPOXMLDOC01-appb-M000001
 図7に示す例において、H=246mm、α=100度、β=53度の条件下にて、A4サイズの書類を書類撮像モードで撮像したときの台形補正の例を説明する。このとき、撮像光学系の軸線が書類の紙面中央を通過するようにし、また書類の紙面中央を原点とする。各値を数1式に代入したときに、台形補正前の値と台形補正後の値は、以下の表1に示すものとなり、正確に台形補正を行えることがわかる。
Figure JPOXMLDOC01-appb-T000002
 本実施の形態の変形例としては、モニタ部PCDに対して撮像装置CAを固定配置することもできる。かかる場合、モニタ部PCDに対する撮像装置CAの撮像軸線の傾き角βは固定値(通常は90度)になるので、制御部104は傾き角βを記憶しておくことで、第1傾き角αのみをパラメータとして求めることで、台形補正のための変換式を得ることができる。尚、撮像装置CAがモニタ部PCDに対して相対移動可能な構成とした場合、上述の値Hは固定値ではなくなる。かかる場合、リニアエンコーダ等を用いて値Hを検出してパラメータとし、変換式に代入するようにしてもよい。
 ところで、TV会議等でユーザUS自身を撮像する場合、図8に示すように、被写体となるユーザUSの顔の位置は、ノート型パソコンPCが机上に載置された状態で、撮像装置CAの水平線HLより(即ち鉛直方向)上方に位置する。一方、書類DCMの位置は、図8に示すように、ノート型パソコンPCの本体PCBの近傍における机上に載置された状態で、撮像装置CAの水平線HLより(即ち鉛直方向)下方に位置する。つまり、本体PCBに対する支持部PCDの傾き角から、ユーザがいずれの被写体を撮像しようとしているかを判別できる。
 ここで、モニタ部PCDに撮像装置CAが90度で固定配置されているときは、制御部104は、第1のセンサ114の出力から本体PCBに対するモニタ部PCDの傾き角(第1傾き角)αを求め、傾き角αが90度以上である場合には、ユーザ自身を撮像する会議モードを設定し、傾き角αが90度未満である場合には、書類DCMを撮像する書類撮像モードを設定できる。一方、モニタ部PCDに対して撮像装置CAが揺動可能となっているときは、制御部104は、第1のセンサ114の出力から本体PCBに対するモニタ部PCDの傾き角(第1傾き角)αを求め、第2のセンサ115の出力からモニタ部PCDに対する撮像装置CAの撮像軸線の傾き角(第2傾き角)βを求め、(α+β)が180度以上である場合には、ユーザ自身を撮像する会議モードを設定し、(α+β)が180度未満である場合には、書類DCMを撮像する書類撮像モードを設定できる。
 まず、会議モードを設定し、ユーザUS自身を被写体として撮像した場合について説明する。会議モードでは、被写体のモニタリング(スルー画像表示)と、必要に応じて画像撮影実行とが行われる。モニタリングにおいては、撮像光学系101を介して得られた被写体の像が、固体撮像素子102の受光面に結像される。撮像光学系101の撮影光軸後方に配置された固体撮像素子102が、タイミング発生部106、撮像素子駆動部107によって走査駆動され、一定周期毎に結像した光像に対応する光電変換出力としてのアナログ信号を1画面分出力する。
 このアナログ信号は、RGBの各原色成分毎に適宜ゲイン調整された後に、A/D変換部103でデジタルデータに変換される。そのデジタルデータは、画像処理部109により、画像処理により左右反転され、且つ画素補間処理及びγ補正処理を含むカラープロセス処理が行われて、デジタル値の輝度信号Y及び色差信号Cb、Cr(画像データ)が生成されて画像メモリ108に格納され、定期的にその信号が読み出されてそのビデオ信号が生成されて、モニタ112に出力され、またインターネットを介して接続された相手先に伝送される。図1の例では、モニタ112は、相手から送信された画像MG1を画面一杯に表示すると共に、ユーザUS自身の画像MG2はモニタ112の右下に小さく表示している。このとき、ユーザUSが左手を挙げると、鏡像の関係になる画像MG2は同じ側の手を挙げるようになっているので、ユーザUSは鏡を見ているようで違和感が少ない。尚、画像MG2を画面一杯に表示しても良い。
 このモニタ112は、モニタリングにおいては電子ファインダとして機能し、撮像画像をリアルタイムに表示することとなる。この状態で、随時、像面AFにより、光学系駆動部105の駆動により撮像光学系101の合焦、露出等が設定される。
 このようなモニタリング状態において、静止画撮影を行いたいタイミングで、ユーザがキーボード113の所定のキーを操作することにより、静止画像データを取得することもできる。かかるキー操作に応じて、画像メモリ108に格納された1コマの画像データが読み出されて、画像圧縮部110により圧縮される。その圧縮された画像データが、画像記録部111により記録メディアに記録される。
 次に、書類撮像モードを設定し、被写体として書類DCMを撮像する場合について説明する。書類撮像モードでも、上述と同様に、被写体のモニタリング(スルー画像表示)と、画像撮影実行とが行われる。ここで、書類DCMを撮像しやすいように、ユーザがモニタ112に表示される画像を視認しながら、モニタ部PCDと撮像装置CAと一体で傾ける。かかる状態で、図9(a)に示すように、モニタ112にガイドラインGLを表示すると好ましい。ガイドラインGLは、上述の代入値H、α、βによって決定されるものであり、ここに書類DCMの3辺を合わせることで、台形補正後に適正な画像として表示されることとなる。尚、書類DCMにおける、撮像光学系101の光軸中心位置(即ち画面中心)よりも、画面上で上方(書類DCMで遠方の位置)を合焦位置とするように、光学系駆動部105を駆動すると好ましい。これにより被写界深度を有効に利用できる。合焦は、上述したように像面AFで自動的に行うと良いが、別に測距装置を設けても良い。
 かかる状態で、ユーザがキーボード113の所定のキーを操作することにより、静止画像データ(1次取得画像の画像データ)を取得することができる。ここで、制御部104は、得られた変換式を1次取得画像G1の画像データとともに共通のファイルに収容して、記憶手段である画像メモリ108に格納することができる。画像データは所定の圧縮を行って良い。かかるファイルが、画像記録部111により記録メディアに記録される。
 画像処理部109で画像補正を行う場合には、1次取得画像G1の画像データに対して上述した変換式に基づいて台形補正(画像処理)を行って、画像G2の画像データを形成する(図9(b)参照)。かかる補正により、書類DCMは本来の縦横比の矩形状となる。その後、画像処理部109は、画像G2の画像データを台形補正すると共に180度反転(上下左右反転)するように画像処理を施すので、台形補正された画像データに基づき、モニタ112には図9(c)に示すように、正立した画像G3が表示される。従って、ユーザUS自身も伝送先の相手も書類DCMの内容を理解しやすくなり、またユーザUSが書類DCMを右に移動させると、画像G3も右に移動するので直感的に分かりやすく、更にユーザUSが書類DCMに書き込んだ文字なども即座に読み取ることができる。尚、図9(a)に示すガイドラインGLで囲まれた範囲(撮像画面上の所定位置)内のみを画像処理するようにしても良い。また画像を上下左右反転した後、台形補正を行っても良い。又、書類DCMの輪郭に沿って切り抜くように画像処理を施して、書類DCMのみの画像G3を形成しても良い。
 或いは、1次取得画像G1の画像データと、代入値H、α、β又はこれらを代入した変換式を、ノート型パソコンPCからLANやインターネットにより伝送して、伝送先の画像形成装置で同様な台形補正を行ってもよい。
 更に、図10に示すように、書類DCMを本体PCBに対してモニタ部PCDと反対側の机上面に載置した場合でも、台形補正を行うことは可能である。かかる場合、図6の例と異なり、本体PCBをモニタ部PCDの裏側に延長した面とモニタ部PCDの傾き角をα’とし、モニタ部PCDの裏面に対する撮像装置CAの撮像軸線の傾き角をβ’として、上述した数1式のα、βに置換して代入すればよい。
 しかるに、ここで用いるα’、β’として、上述の実施の形態の第1センサ114及び第2センサ115の出力信号を直接用いることはできない。そこで、図10に示す撮像の場合には、制御部104は、第1センサ114及び第2センサ115の出力信号に対して前処理を行う。前処理を行うか否かは、撮像装置CAが反転した(モニタ部PCDの裏面側を向いた)ことを検出する反転センサ(不図示)の信号により判断できる。すなわち制御部104は、反転センサの検出に応じて、第1センサ114及び第2センサ115の出力信号に基づく傾き角α、βとしたときに、前処理として、それぞれα’=(180度-α)、β’=(360度-β)を演算して、その演算結果を第1傾き角α’及び第2傾き角β’として数1式に代入する。但し反転センサを用いず、ユーザの手動により前処理を行っても良い。
 以上、本発明を実施の形態を参照して説明してきたが、本発明は上記実施の形態に限定して解釈されるべきではなく、適宜変更・改良が可能であることはもちろんである。例えば電子機器とはパソコンに限らず、携帯電話等にも適用可能である。
 101 撮像光学系
 102 固体撮像素子
 103 変換部
 104 制御部
 105 光学系駆動部
 106 タイミング発生部
 107 撮像素子駆動部
 108 画像メモリ
 109 画像処理部
 110 画像圧縮部
 111 画像記録部
 112 モニタ
 113 キーボード
 114 第1のセンサ
 115 第2のセンサ
 CA 撮像装置
 DCM 書類
 PC ノート型パソコン
 PCB 本体
 PCD モニタ部
 PCH ヒンジ部

Claims (11)

  1.  被写体が載置された面と同一もしくは近接した接地面に設置される本体と、
     撮像素子と、前記撮像素子の受光面に光学像を結像させる撮像光学系とを有するカメラ部と、
     前記カメラ部から出力された画像信号を画像処理する画像処理手段と、
     前記本体に対して揺動可能に配置され、前記カメラ部を取り付けてなる支持部と、
     前記本体と前記カメラ部との相対位置関係に対応するパラメータを検出する検出手段と、を有し、
     前記画像処理手段は、前記検出手段の検出したパラメータに応じて、前記被写体を撮像した前記カメラ部から出力された画像信号に対して台形補正を行うことを特徴とする電子機器。
  2.  前記カメラ部は、前記支持部に対して固定配置されており、前記検出手段は、前記パラメータとして前記本体と前記支持部との第1傾き角を検出し、前記画像処理手段は、少なくとも前記本体が設置された面から前記カメラ部の撮像素子までの前記支持部に沿った距離と、前記検出手段の検出した第1傾き角とに応じて、前記カメラ部から出力された画像信号に対して台形補正を行うことを特徴とする請求項1に記載の電子機器。
  3.  前記画像処理手段が、前記第1傾き角は第1の所定角度以上であると判断したときは、前記カメラ部から出力された画像信号に対して、台形補正を行わず、モニタ部に表示される画像が左右反転するように画像処理を行うことを特徴とする請求項2に記載の電子機器。
  4.  前記第1の所定角度とは90度であることを特徴とする請求項3に記載の電子機器。
  5.  前記カメラ部は、前記支持部に対して揺動可能に配置されており、前記検出手段は、前記パラメータとして、前記本体と前記支持部との第1傾き角、及び前記支持部と前記カメラ部の前記撮像光学系の光軸との第2傾き角を検出し、前記画像処理手段は、前記本体が設置された面から前記カメラ部の撮像素子までの前記支持部に沿った距離と、前記検出手段の検出した第1傾き角及び第2傾き角とに応じて、前記カメラ部から出力された画像信号に対して台形補正を行うことを特徴とする請求項1に記載の電子機器。
  6.  前記第1傾き角をα、前記第2傾き角をβとしたときに、前記画像処理手段が、(α+β)は第2の所定角度以上であると判断したときは、前記カメラ部から出力された画像信号に対して、台形補正を行わず、モニタ部に表示される画像が左右反転するように画像処理を行うことを特徴とする請求項5に記載の電子機器。
  7.  前記第2の所定角度とは180度であることを特徴とする請求項6に記載の電子機器。
  8.  前記支持部は、前記画像処理手段によって画像処理された画像信号に基づき画像を表示するモニタ部を備えていることを特徴とする請求項1~7の何れか1項に記載の電子機器。
  9.  前記モニタ部は、撮像方向を向いていることを特徴とする請求項8に記載の電子機器。
  10.  前記モニタは、台形補正を行える前記被写体の位置を示すガイドラインを表示することを特徴とする請求項8又は9に記載の電子機器。
  11.  前記画像処理手段は、撮像画面上の所定の位置に載置された被写体の画像のみについて台形補正を行うことを特徴とする請求項1~10の何れか1項に記載の電子機器。
PCT/JP2010/058521 2009-05-26 2010-05-20 電子機器 WO2010137513A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2009-126303 2009-05-26
JP2009126303 2009-05-26

Publications (1)

Publication Number Publication Date
WO2010137513A1 true WO2010137513A1 (ja) 2010-12-02

Family

ID=43222623

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2010/058521 WO2010137513A1 (ja) 2009-05-26 2010-05-20 電子機器

Country Status (1)

Country Link
WO (1) WO2010137513A1 (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109726777A (zh) * 2017-10-30 2019-05-07 东莞理工学院 基于互联网的pcb外观检测***及检测方法
WO2023049388A1 (en) * 2021-09-24 2023-03-30 Apple Inc. Wide angle video conference
US11770600B2 (en) 2021-09-24 2023-09-26 Apple Inc. Wide angle video conference
US11822761B2 (en) 2021-05-15 2023-11-21 Apple Inc. Shared-content session user interfaces
US11849255B2 (en) 2018-05-07 2023-12-19 Apple Inc. Multi-participant live communication user interface
US11893214B2 (en) 2021-05-15 2024-02-06 Apple Inc. Real-time communication user interface
US11895391B2 (en) 2018-09-28 2024-02-06 Apple Inc. Capturing and displaying images with multiple focal planes
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007243241A (ja) * 2006-03-03 2007-09-20 Casio Hitachi Mobile Communications Co Ltd 移動体通信端末、および、プログラム
JP2007251700A (ja) * 2006-03-17 2007-09-27 Casio Comput Co Ltd デジタルカメラ及び画像処理プログラム
JP2008092548A (ja) * 2006-09-06 2008-04-17 Casio Comput Co Ltd 撮像装置、撮影方法及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007243241A (ja) * 2006-03-03 2007-09-20 Casio Hitachi Mobile Communications Co Ltd 移動体通信端末、および、プログラム
JP2007251700A (ja) * 2006-03-17 2007-09-27 Casio Comput Co Ltd デジタルカメラ及び画像処理プログラム
JP2008092548A (ja) * 2006-09-06 2008-04-17 Casio Comput Co Ltd 撮像装置、撮影方法及びプログラム

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109726777A (zh) * 2017-10-30 2019-05-07 东莞理工学院 基于互联网的pcb外观检测***及检测方法
US11849255B2 (en) 2018-05-07 2023-12-19 Apple Inc. Multi-participant live communication user interface
US11895391B2 (en) 2018-09-28 2024-02-06 Apple Inc. Capturing and displaying images with multiple focal planes
US11822761B2 (en) 2021-05-15 2023-11-21 Apple Inc. Shared-content session user interfaces
US11893214B2 (en) 2021-05-15 2024-02-06 Apple Inc. Real-time communication user interface
US11907605B2 (en) 2021-05-15 2024-02-20 Apple Inc. Shared-content session user interfaces
US11928303B2 (en) 2021-05-15 2024-03-12 Apple Inc. Shared-content session user interfaces
WO2023049388A1 (en) * 2021-09-24 2023-03-30 Apple Inc. Wide angle video conference
US11770600B2 (en) 2021-09-24 2023-09-26 Apple Inc. Wide angle video conference
US11812135B2 (en) 2021-09-24 2023-11-07 Apple Inc. Wide angle video conference

Similar Documents

Publication Publication Date Title
WO2010137513A1 (ja) 電子機器
US8009929B2 (en) Image-capturing apparatus, method, and program which correct distortion of a captured image based on an angle formed between a direction of an image-capturing apparatus and a gravitational direction
JP4341629B2 (ja) 撮像装置、画像処理方法及びプログラム
US7590335B2 (en) Digital camera, composition correction device, and composition correction method
JP5397751B2 (ja) カメラおよび画像補正方法
WO2015081870A1 (zh) 一种图像处理方法、装置及终端
JP2004343476A (ja) 撮像装置、撮像結果の処理装置及び撮像結果の処理方法
EP2009907A1 (en) Camera apparatus, and image processing apparatus and image processing method
JP2007324655A (ja) 画像データ取得システム、画像処理装置および画像データ取得方法
JP4655708B2 (ja) カメラ、カメラの手ブレ状態表示方法、及びプログラム
JP2010130181A (ja) 画像取得装置
JP4735166B2 (ja) 画像表示装置及びプログラム
KR20050109190A (ko) 듀얼 카메라를 이용한 와이드 이미지 생성 장치 및 방법
JP3875133B2 (ja) 画像送信方法および装置並びにプログラム
WO2018196854A1 (zh) 一种拍照方法、拍照装置及移动终端
JP2014123881A (ja) 情報処理装置、情報処理方法、コンピュータプログラム
JP2010124406A (ja) 撮像装置及び電子機器
JP4844353B2 (ja) 撮像装置
JP2010278511A (ja) 電子機器
JP2006203732A (ja) デジタルカメラ、縦横撮影切替え方法、及びプログラム
KR100686310B1 (ko) 이미지 기울임 보정 방법, 프로세서 및 이를 위한프로그램이 기록된 기록매체
US20070085925A1 (en) Digital camera apparatus
JP2010130182A (ja) 撮像装置及び電子機器
JP2006287365A (ja) デジタルカメラ
JP2011071572A (ja) 撮像装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 10780468

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 10780468

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP