JP5223792B2 - Image processing apparatus, photographing apparatus, photographing system, and program - Google Patents

Image processing apparatus, photographing apparatus, photographing system, and program Download PDF

Info

Publication number
JP5223792B2
JP5223792B2 JP2009149564A JP2009149564A JP5223792B2 JP 5223792 B2 JP5223792 B2 JP 5223792B2 JP 2009149564 A JP2009149564 A JP 2009149564A JP 2009149564 A JP2009149564 A JP 2009149564A JP 5223792 B2 JP5223792 B2 JP 5223792B2
Authority
JP
Japan
Prior art keywords
distortion
image
processing
captured image
photographing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009149564A
Other languages
Japanese (ja)
Other versions
JP2011009908A (en
JP2011009908A5 (en
Inventor
晃一 藤井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Fujifilm Business Innovation Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd, Fujifilm Business Innovation Corp filed Critical Fuji Xerox Co Ltd
Priority to JP2009149564A priority Critical patent/JP5223792B2/en
Publication of JP2011009908A publication Critical patent/JP2011009908A/en
Publication of JP2011009908A5 publication Critical patent/JP2011009908A5/ja
Application granted granted Critical
Publication of JP5223792B2 publication Critical patent/JP5223792B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Description

本発明は、画像処理装置、撮影装置およびプログラムに関する。   The present invention relates to an image processing apparatus, a photographing apparatus, and a program.

電子化して保管する対象の紙文書を画像読み取り（スキャン）し、その読み取り画像を電子文書として記憶する文書管理システムが実現されている。
例えば特許文献１には、スキャンサーバに原稿のスキャン条件、文書の登録先、補正の有無、メール通知の有無等を設定したジョブテンプレートを登録し、ネットワークスキャナがジョブテンプレートを使用して原稿のスキャンを行い、スキャンサーバを介してＷＷＷサーバに転送し、ＷＷＷサーバがジョブテンプレートに基づいて文書の補正、登録、メールによる登録通知等を行う発明が開示されている。 2. Description of the Related Art There has been realized a document management system that reads (scans) an image of a paper document to be stored electronically and stores the read image as an electronic document.
For example, Patent Document 1 registers a job template in which a scan condition of a document, a document registration destination, whether correction is performed, whether mail notification is set, and the like are registered in the scan server, and the network scanner scans the document using the job template. Is transferred to the WWW server via the scan server, and the WWW server performs document correction, registration, registration notification by e-mail, and the like based on the job template.

また、被写体の光学像を撮像素子により画像信号に変換して撮影画像を得る撮影装置（以下、デジタルカメラという）により得た画像を文書として保存すること、例えば、紙文書やホワイトボードなどをデジタルカメラにより撮影し、その撮影画像から文書部分を切り出して電子文書として記録することが行われている。   Also, an image obtained by a photographing device (hereinafter referred to as a digital camera) that obtains a photographed image by converting an optical image of a subject into an image signal by an image sensor is stored as a document, for example, a paper document or a whiteboard is digitally stored An image is taken by a camera, and a document portion is cut out from the taken image and recorded as an electronic document.

例えば、特許文献２には、画像を撮像し電気信号に変換する撮像手段と、上記撮像手段により撮像された画像データの歪みを検出する歪み検出手段と、上記歪み検出手段により検出された歪みの情報に基づいて上記画像データの歪みを補正する歪み補正手段と、を具備する画像取り込み装置の発明が提案されている。   For example, Patent Document 2 discloses an imaging unit that captures an image and converts it into an electrical signal, a distortion detection unit that detects distortion of image data captured by the imaging unit, and a distortion detected by the distortion detection unit. There has been proposed an invention of an image capturing device comprising distortion correction means for correcting distortion of the image data based on information.

また、撮影画像に対して処理を行う先行技術として、例えば、特許文献３には、撮影対象が置かれる台座の一部に回転指示用のマークを予め設けておき、当該台座に撮影対象を置いて撮影した画像におけるマークの有無に応じて、その撮影画像に対して回転処理を行うか否かを判断する発明が開示されており、例えば、特許文献４には、撮影対象が置かれる台座の一部に互いに異なる任意の分類を示す複数の分類マークを予め設けておき、当該台座に撮影対象を置いて撮影した画像において隠れている分類マークに基づいて、その撮影画像を分類する発明が開示されている。   Also, as a prior art for processing a captured image, for example, in Patent Document 3, a rotation instruction mark is provided in advance on a part of a pedestal on which a photographing target is placed, and the photographing target is placed on the pedestal. An invention for determining whether or not to perform rotation processing on a photographed image according to the presence or absence of a mark in the photographed image is disclosed. For example, Patent Document 4 discloses a pedestal on which a subject to be photographed is placed. An invention is disclosed in which a plurality of classification marks indicating arbitrary classifications that are different from each other are provided in advance, and the captured image is classified based on a classification mark that is hidden in an image captured by placing an imaging target on the pedestal. Has been.

特開２００１−２１７９８０号公報JP 2001-217980 A 特開平０５−３０３６３４号公報Japanese Patent Laid-Open No. 05-303634 特開２００６−２３７７５８号公報JP 2006-237758 A 特開２００６−２３７９３７号公報JP 2006-237937 A

本発明は、被写体を撮影する際に被写体の歪ませ方を撮影者が選択するだけで、その撮影画像に対して行う処理を選択できるようにする技術を提案することを目的とする。   An object of the present invention is to propose a technique that allows a photographer to select a process to be performed on a photographed image only by selecting how to distort the subject when photographing the subject.

第１の本発明は、撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、処理対象の撮影画像に対して、撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記対応関係に基づき定まる処理を行う処理手段と、を備えたことを特徴とする画像処理装置である。   According to a first aspect of the present invention, there is provided setting means for setting a correspondence relationship between distortion of a subject in a captured image and processing to be performed on the captured image in which the distortion is detected; An image processing apparatus comprising: distortion correction according to distortion of a subject; and processing means for performing processing determined based on the distortion and the correspondence.

第２の本発明は、撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、対象領域を撮影する撮影手段と、前記撮影手段による撮影の対象領域を表示する表示部に、前記設定された対応関係を表示させる表示手段と、前記撮影手段により撮影された撮影画像に対して、当該撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記対応関係に基づき定まる処理を行う処理手段と、を備えたことを特徴とする撮影装置である。   According to a second aspect of the present invention, there is provided setting means for setting a correspondence relationship between distortion of a subject in a photographed image and processing performed on the photographed image in which the distortion is detected, photographing means for photographing a target area, and the photographing means Display means for displaying the set correspondence relationship on a display unit that displays a target area for shooting by the camera, and distortion correction corresponding to the distortion of the subject in the shot image for the shot image shot by the shooting means And a processing means for performing processing determined based on the distortion and the correspondence relationship.

第３の本発明は、撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、対象領域を撮影する撮影手段と、前記撮影手段による撮影の対象領域を表示する表示部に、前記対象領域における被写体の歪み及び前記対応関係に基づき定まる処理の情報を表示させる表示手段と、前記撮影手段により撮影された撮影画像に対して、当該撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記対応関係に基づき定まる処理を行う処理手段と、を備えたことを特徴とする撮影装置である。   According to a third aspect of the present invention, there is provided setting means for setting a correspondence relationship between distortion of a subject in a photographed image and processing performed on the photographed image in which the distortion is detected, photographing means for photographing a target area, and the photographing means Display means for displaying information on processing determined based on the distortion of the subject in the target area and the correspondence relationship on a display unit that displays the target area of shooting by the imaging unit, and for the shot image shot by the shooting unit, An imaging apparatus comprising: distortion correction according to subject distortion in a captured image; and processing means for performing processing determined based on the distortion and the correspondence relationship.

第４の本発明は、撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、対象領域を撮影する撮影手段と、前記撮影手段による撮影の対象領域を表示する表示部に、前記設定された対応関係を表示させる表示手段と、撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記対応関係に基づき定まる処理を当該撮影画像に対して行う画像処理装置に、前記撮影手段により撮影された撮影画像を出力する出力手段と、を備えたことを特徴とする撮影装置である。   According to a fourth aspect of the present invention, there is provided setting means for setting a correspondence relationship between distortion of a subject in a photographed image and processing performed on the photographed image in which the distortion is detected, photographing means for photographing a target area, and the photographing means Display means for displaying the set correspondence relationship on a display unit that displays a target region for photographing by the camera, distortion correction according to subject distortion in the photographed image, and processing determined based on the distortion and the correspondence relationship An image processing apparatus comprising: an image processing apparatus that performs an image; and an output unit that outputs a captured image captured by the image capturing unit.

第５の本発明は、撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、対象領域を撮影する撮影手段と、撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記対応関係に基づき定まる処理を当該撮影画像に対して行う画像処理装置に、前記撮影手段により撮影された撮影画像を出力する出力手段と、前記出力手段による出力対象の撮影画像における被写体の歪み及び前記対応関係に基づいて定まる、前記出力手段による出力対象の撮影画像に対して前記画像処理装置により行われる処理の情報を、前記出力手段による出力対象の撮影画像を表示する表示部に表示させる表示手段と、を備えたことを特徴とする撮影装置である。   According to a fifth aspect of the present invention, there is provided a setting means for setting a correspondence relationship between a distortion of a subject in a photographed image and a process performed on the photographed image in which the distortion is detected, a photographing means for photographing a target area, An output unit that outputs a captured image captured by the imaging unit to an image processing apparatus that performs distortion correction according to the distortion of the subject and processing determined based on the distortion and the correspondence relationship on the captured image; and the output Information on processing performed by the image processing apparatus on the captured image to be output by the output unit, which is determined based on the distortion of the subject in the captured image to be output by the unit and the correspondence, is output by the output unit. And a display means for displaying on the display section for displaying the captured image.

第６の本発明は、撮影装置と画像処理装置とを含み、前記撮影装置は、撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、対象領域を撮影する撮影手段と、前記撮影手段による撮影の対象領域を表示する表示部に、前記設定された対応関係を表示させる表示手段と、前記画像処理装置に前記撮影手段により撮影された撮影画像及び前記対応関係を出力する出力手段と、を備え、前記画像処理装置は、前記撮影装置が出力した撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記撮影装置が出力した対応関係に基づき定まる処理を当該撮影画像に対して行う、ことを特徴とする撮影システムである。   A sixth aspect of the present invention includes a photographing device and an image processing device, and the photographing device sets a correspondence relationship between a subject distortion in a photographed image and a process to be performed on the photographed image in which the distortion is detected. Photographing means for photographing the target area; display means for displaying the set correspondence on a display section for displaying the target area for photographing by the photographing means; and photographing by the photographing means for the image processing apparatus. Output means for outputting the captured image and the correspondence relationship, and the image processing device outputs distortion correction according to subject distortion in the captured image output by the imaging device, and the distortion and the imaging device output The imaging system is characterized in that a process determined based on the corresponding relationship is performed on the captured image.

第７の本発明は、撮影装置と画像処理装置とを含み、前記撮影装置は、撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、対象領域を撮影する撮影手段と、前記撮影手段による撮影の対象領域を表示する表示部に、出力手段による出力対象の撮影画像に対して前記画像処理装置により行われる処理を表示させる表示手段と、前記画像処理装置に前記撮影手段により撮影された撮影画像及び前記対応関係を出力する出力手段と、を備え、前記画像処理装置は、前記撮影装置が出力した撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記撮影装置が出力した対応関係に基づき定まる処理を当該撮影画像に対して行う、ことを特徴とする撮影システムである。   A seventh aspect of the present invention includes a photographing device and an image processing device, and the photographing device is configured to set a correspondence relationship between a subject distortion in a photographed image and a process performed on the photographed image in which the distortion is detected. A display for displaying the processing performed by the image processing device on the captured image to be output by the output means on the display means for capturing the target area, the photographing means for photographing the target area, and the target area for photographing by the photographing means And an output means for outputting the photographed image photographed by the photographing means and the correspondence relationship to the image processing apparatus, and the image processing apparatus detects distortion of a subject in the photographed image output by the photographing apparatus. According to another aspect of the present invention, there is provided a photographing system that performs a process determined on the basis of the corresponding distortion correction, the distortion, and a correspondence relationship output from the photographing apparatus on the photographed image.

第８の本発明は、処理対象の撮影画像における被写体の歪みを検出する検出機能と、撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係が設定された関係情報および前記検出機能により検出された歪みに基づいて、前記処理対象の撮影画像に対して行う処理を決定する決定機能と、前記処理対象の撮影画像に対して、前記検出機能により検出された歪みに応じた歪み補正と前記決定機能により決定された処理を行う処理機能と、をコンピュータに実現させるためのプログラムである。   In the eighth aspect of the present invention, a correspondence relationship between a detection function for detecting distortion of a subject in a captured image to be processed and a process performed on a captured image in which the distortion of the subject in the captured image is detected is set. A determination function for determining a process to be performed on the captured image to be processed based on the relationship information and the distortion detected by the detection function, and a detection function for the captured image to be processed. This is a program for causing a computer to realize a distortion correction according to the distortion and a processing function for performing the processing determined by the determination function.

第１の本発明によると、被写体を撮影する際に被写体の歪ませ方を撮影者が調整するだけで、その撮影画像に対する処理を選択することができるようになる。   According to the first aspect of the present invention, it is possible to select processing for a captured image only by the photographer adjusting how to distort the subject when photographing the subject.

第２の本発明によると、撮影装置による画像撮影の際に、撮影画像に対する処理とその処理を行うために要求される被写体の歪みとの関係を利用者に知らしめることができる。   According to the second aspect of the present invention, the user can be informed of the relationship between the processing on the captured image and the distortion of the subject required to perform the processing when the image is captured by the photographing apparatus.

第３の本発明によると、撮影装置による画像撮影の際に、その撮影により得られる撮影画像に対して行われる処理を利用者に知らしめることができる。   According to the third aspect of the present invention, when an image is taken by the photographing apparatus, the user can be informed of the processing to be performed on the photographed image obtained by the photographing.

第４、６の本発明によると、撮影装置による画像撮影の際に、撮影画像に対する処理とその処理を行うために要求される被写体の歪みとの関係を利用者に知らしめることができる。   According to the fourth and sixth aspects of the present invention, the user can be informed of the relationship between the processing on the captured image and the distortion of the subject required to perform the processing when capturing an image with the photographing apparatus.

第５、７の本発明によると、撮影装置から画像処理装置に処理対象の撮影画像を出力する前に、その出力対象の撮影画像に対して行われる処理を利用者に知らしめることができる。   According to the fifth and seventh aspects of the present invention, the user can be informed of the processing to be performed on the output target captured image before outputting the target captured image from the imaging device to the image processing apparatus.

第８の本発明によると、被写体を撮影する際に被写体の歪ませ方を撮影者が調整するだけで、その撮影画像に対する処理を選択することができるようになる。   According to the eighth aspect of the present invention, it is possible to select a process for a photographed image only by the photographer adjusting how to distort the subject when photographing the subject.

本発明の一実施形態に係る画像処理装置の機能ブロックを例示する図である。It is a figure which illustrates the functional block of the image processing apparatus which concerns on one Embodiment of this invention. 本発明の一実施形態に係る回転角度／処理内容関係テーブルを例示する図である。It is a figure which illustrates the rotation angle / processing content relationship table which concerns on one Embodiment of this invention. 本発明の一実施形態に係る台形歪み／処理内容関係テーブルを例示する図である。It is a figure which illustrates the trapezoid distortion / processing content relationship table which concerns on one Embodiment of this invention. 本発明の一実施形態に係る撮影画像に対する処理を例示する図である。It is a figure which illustrates the process with respect to the picked-up image which concerns on one Embodiment of this invention. 本発明の一実施形態に係る画像処理装置のハードウェア構成を例示する図である。It is a figure which illustrates the hardware constitutions of the image processing apparatus which concerns on one Embodiment of this invention. 本発明の第１実施例に係るデジタルカメラの機能ブロックを例示する図である。It is a figure which illustrates the functional block of the digital camera which concerns on 1st Example of this invention. 本発明の第２実施例に係るデジタルカメラ及びサーバ装置の機能ブロックを例示する図である。It is a figure which illustrates the functional block of the digital camera and server apparatus which concern on 2nd Example of this invention.

本発明の一実施形態について、図面を参照して説明する。
図１には、本発明の一実施形態に係る画像処理装置の機能ブロックを例示してある。
本例の画像処理装置は、画像入力部１１、歪み検知部１２、歪み補正部１３、画像処理部１４、保存部１５、歪み／処理内容関係保持部１６、処理決定部１７等の機能部を有している。 An embodiment of the present invention will be described with reference to the drawings.
FIG. 1 illustrates functional blocks of an image processing apparatus according to an embodiment of the present invention.
The image processing apparatus of this example includes functional units such as an image input unit 11, a distortion detection unit 12, a distortion correction unit 13, an image processing unit 14, a storage unit 15, a distortion / processing content relationship holding unit 16, and a processing determination unit 17. Have.

画像入力部１１は、各種文書を被写体として撮影した撮影画像の入力を処理対象として受け付ける。なお、画像処理装置が撮影手段を有する場合には、当該撮影手段による撮影画像を受け付け、画像処理装置が撮影手段を有しない場合には、他の撮影装置による撮影画像を当該撮影装置との有線又は無線通信により受け付け、或いはメモリーカード等の携帯型記憶媒体を介して受け付ける。
ここで、被写体の文書としては、例えば、業務文書、本、雑誌、新聞、領収書、各種申請フォーム、ホワイトボード、イーゼルパッド、付箋、手書きメモ、名刺等の種々のものを対象としてもよい。 The image input unit 11 receives input of a captured image obtained by shooting various documents as subjects. When the image processing apparatus has a photographing unit, the photographed image by the photographing unit is accepted. When the image processing apparatus does not have the photographing unit, a photographed image by another photographing apparatus is wired to the photographing apparatus. Alternatively, it can be received by wireless communication or via a portable storage medium such as a memory card.
Here, the subject document may be various documents such as business documents, books, magazines, newspapers, receipts, various application forms, whiteboards, easel pads, sticky notes, handwritten memos, and business cards.

歪み検知部１２は、画像入力部１１により受け付けられた撮影画像における被写体の歪みを検出する。すなわち、例えば、画像平面における被写体の回転角度（基準方向に対する傾き）の検出や、被写体に生じた台形歪み（例えば、矩形をなす被写体の上又は下が短く台形状に歪んだ状態）の歪み方向及び歪みの程度の検出などを行う。   The distortion detection unit 12 detects the distortion of the subject in the captured image received by the image input unit 11. That is, for example, detection of the rotation angle (tilt with respect to the reference direction) of the subject on the image plane, and the distortion direction of trapezoidal distortion (for example, a state where the top or bottom of a rectangular subject is shortly distorted into a trapezoid) And the degree of distortion is detected.

歪み補正部１３は、画像入力部１１により受け付けられた撮影画像に対し、歪み検知部１２により検出された歪みに応じた歪み補正を行う。すなわち、例えば、歪み検知部１２により検出された被写体の回転角度に応じた回転歪み補正や、歪み検知部１２により検出された被写体の台形歪みの方向及びその程度に応じた台形歪み補正などを撮影画像に対して行って、被写体の領域部分を正対させた画像へと加工する。   The distortion correction unit 13 performs distortion correction on the captured image received by the image input unit 11 according to the distortion detected by the distortion detection unit 12. In other words, for example, rotational distortion correction according to the rotation angle of the subject detected by the distortion detection unit 12, and trapezoidal distortion correction according to the direction and degree of the trapezoidal distortion of the subject detected by the distortion detection unit 12 are taken. The process is performed on the image, and the image is processed into an image in which the area portion of the subject is directly opposed.

歪み／処理内容関係保持部１６は、撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理内容との対応関係を設定する対応関係情報を記憶する。
対応関係情報の例として、図２には、画像平面における被写体の回転角度と、フルカラー／グレー／白黒２値等の保存画像の使用色（カラーモード）に関する設定との対応関係が設定された回転角度／処理内容関係テーブルを例示してあり、図３には、被写体の台形歪みの方向と、フルカラー／グレー／白黒２値等の保存画像の使用色（カラーモード）及びＪＰＥＧ／ＴＩＦＦ／ＰＤＦ等の保存画像のファイル形式に関する設定との対応関係が設定された回転角度／処理内容関係テーブルを例示してある。 The distortion / processing content relationship holding unit 16 stores correspondence information for setting a correspondence relationship between the distortion of the subject in the captured image and the processing content to be performed on the captured image in which the distortion is detected.
As an example of the correspondence information, FIG. 2 shows a rotation in which the correspondence between the rotation angle of the subject on the image plane and the setting relating to the use color (color mode) of the saved image such as full color / gray / monochrome binary is set. An angle / processing content relationship table is illustrated, and FIG. 3 shows the direction of the trapezoidal distortion of the subject, the use color (color mode) of the stored image such as full color / gray / monochrome binary, and JPEG / TIFF / PDF. 6 illustrates a rotation angle / processing content relationship table in which a correspondence relationship with a setting related to the file format of the stored image is set.

図２の例によると、被写体の回転角度が０度の場合には、その撮影画像に対してフルカラー画像に関する処理を行うことが設定され、被写体の回転角度が４５度の場合には、その撮影画像に対して白黒画像に関する処理を行うことが設定されている。
また、図３の例によると、被写体の上側が奥へ傾いた台形歪み（上に凸）の場合には、その撮影画像に対してフルカラー画像に関する処理を行い且つＰＤＦ形式として保存することが設定され、被写体の下側が奥へ傾いた台形歪み（下に凸）の場合には、その撮影画像に対して白黒画像に関する処理を行い且つＰＤＦ形式として保存することが設定され、被写体の右側が奥へ傾いた台形歪み（右に凸）の場合には、その撮影画像に対してフルカラー画像に関する処理を行い且つＪＰＥＧ形式として保存することが設定され、被写体の左側が奥へ傾いた台形歪み（左に凸）の場合には、その撮影画像に対して白黒画像に関する処理を行い且つＴＩＦＦ形式として保存することが設定されている。
なお、上記の説明は一例に過ぎず、歪みと処理との関連付けは種々の態様とすることができ、例えば、回転角度及び台形歪みの組み合わせと処理とを関連付けする等のように、異なる種類の歪みの組み合わせと処理とを関連付けしてもよい。
以下では、歪み／処理内容関係保持部１６に、対応関係情報として、図２の回転角度／処理内容関係テーブルが記憶されている場合を例に説明する。 According to the example of FIG. 2, when the rotation angle of the subject is 0 degree, processing for a full color image is set to the captured image, and when the rotation angle of the subject is 45 degrees, the shooting is performed. It is set to perform processing related to a monochrome image on the image.
Further, according to the example of FIG. 3, when trapezoidal distortion (upward convex) in which the upper side of the subject is tilted to the back, processing for a full-color image is performed on the captured image and saved as a PDF format. In the case of trapezoidal distortion (convex downward) in which the lower side of the subject is tilted to the back, it is set to process the black and white image on the captured image and save it as a PDF format. In the case of trapezoidal distortion tilted to the right (convex to the right), processing for a full-color image is set for the captured image and saved as a JPEG format. In the case of (convex), it is set to perform processing related to the black and white image on the photographed image and save it in the TIFF format.
The above description is merely an example, and the association between the distortion and the processing can be in various modes. For example, the combination of the rotation angle and the trapezoidal distortion is associated with the processing. A combination of distortion and processing may be associated.
Hereinafter, a case where the rotation angle / processing content relationship table of FIG. 2 is stored as correspondence information in the distortion / processing content relationship holding unit 16 will be described as an example.

処理決定部１７は、歪み／処理内容関係保持部１６に記憶されている対応関係情報および歪み検知部１２により検出された歪みに基づいて、画像入力部１１により受け付けられた撮影画像に対して行う処理を決定する。
具体例を挙げると、例えば、検知部１２により被写体の回転角度として０度が検出された場合には、その撮影画像に対してフルカラー画像に関する処理を行うことを決定し、被写体の回転角度として４５度が検出された場合には、その撮影画像に対して白黒画像に関する処理を行うことを決定する。
なお、検出された回転角度（検出角度）と回転角度／処理内容関係テーブルに設定された回転角度（設定角度）とが厳密に一致することを要件とする必要は無く、例えば、検出角度と設定角度との誤差が予め設定された範囲（例えば±１０度）の場合には当該設定角度に関連付けられた処理を行うことを決定するようにしてもよく、或いは、検出角度に最も近い設定角度に関連付けられた処理を行うことを決定するようにしてもよい。 The processing determining unit 17 performs the processing on the captured image received by the image input unit 11 based on the correspondence information stored in the distortion / processing content relationship holding unit 16 and the distortion detected by the distortion detecting unit 12. Determine processing.
As a specific example, for example, when 0 degree is detected as the rotation angle of the subject by the detection unit 12, it is determined to perform processing related to the full-color image on the captured image, and the rotation angle of the subject is 45. When the degree is detected, it is determined to perform processing related to the monochrome image with respect to the captured image.
Note that it is not necessary that the detected rotation angle (detection angle) and the rotation angle (set angle) set in the rotation angle / processing content relationship table exactly match, for example, the detection angle and the setting If the error from the angle is within a preset range (eg, ± 10 degrees), it may be determined to perform processing associated with the set angle, or the set angle closest to the detected angle may be set. You may make it determine performing the process linked | related.

画像処理部１４は、歪み補正部１３により歪み補正された撮影画像に対し、処理決定部１７により決定された処理を行う。
具体例を挙げると、例えば、検知部１２により被写体の回転角度として０度が検出された撮像画像についてフルカラー画像に関する処理を行い、被写体の回転角度として４５度が検出された撮像画像について白黒画像に関する処理を行う。
なお、本例の画像処理部１４では、歪み補正された撮影画像から被写体の領域部分を抽出し（切り出し）、当該抽出された被写体の領域部分の画像に対して、処理決定部１７により決定された処理を行うようにしている。 The image processing unit 14 performs the process determined by the process determining unit 17 on the captured image whose distortion is corrected by the distortion correcting unit 13.
As a specific example, for example, a process related to a full-color image is performed for a captured image in which 0 degree is detected as the rotation angle of the subject by the detection unit 12, and a black-and-white image is related to a captured image in which 45 degrees is detected as the rotation angle of the subject. Process.
Note that the image processing unit 14 of the present example extracts (cuts out) a subject region from the distortion-corrected captured image, and the processing determining unit 17 determines the extracted image of the subject region. The process is done.

また、本例の画像処理部１４では、ファイル形式の指定が特にない場合には、前記処理後の画像をＪＰＥＧ形式として出力するが、例えば、処理決定部１７によりファイル形式についても決定された場合には、前記処理後の画像を該当するファイル形式に変換して出力する。また、その電子文書の保存先の指定が特にない場合には、保存部１５において予め保存先に設定されているフォルダへ出力するが、例えば、処理決定部１７により保存先についても決定された場合には、保存部１５（或いは他の記憶装置）の該当フォルダへ出力して記憶（保存）させる。また、例えば、処理決定部１７により配信先についても決定された場合には、その配信先へ電子メール等により配信する。その他、処理決定部１７により決定された種々の処理を行う。   Further, in the image processing unit 14 of this example, when the file format is not specified, the processed image is output as the JPEG format. For example, when the file format is also determined by the processing determination unit 17 In this case, the processed image is converted into a corresponding file format and output. If there is no particular designation of the storage destination of the electronic document, the storage unit 15 outputs the folder to a folder set in advance as the storage destination. For example, when the storage destination is also determined by the processing determination unit 17 Are output to the corresponding folder of the storage unit 15 (or other storage device) and stored (saved). Further, for example, when the distribution destination is also determined by the process determination unit 17, the distribution is performed to the distribution destination by e-mail or the like. In addition, various processes determined by the process determination unit 17 are performed.

本例の画像処理装置による処理を、図４を参照して説明する。
例えば、図４（ａ）に例示するように、被写体Ｔを回転せずに撮影した撮影画像Ｐ１が画像入力部１１に入力されると、その画像平面における被写体Ｔの回転角度が歪み検知部１２により検出され、当該検出された回転角度（本例では０度）および歪み／処理内容関係保持部１６の設定内容（本例では図２の回転角度／処理内容関係テーブル）に基づいて、撮影画像Ｐ１に対して行う処理としてフルカラー画像に係る処理が処理決定部１７により決定される。また、撮影画像Ｐ１に対して、被写体Ｔの歪み量に応じた歪み補正（本例では、被写体の回転角度が０度で歪みがないので、実質的な処理はない）が歪み補正部１３により行われて、被写体の領域部分を正対させた画像へと加工された後に、画像処理部１４により、前記加工後（歪み補正後）の撮影画像から被写体Ｔの領域部分が抽出され、この被写体Ｔの領域部分の画像に対して、処理決定部１７にて決定されたフルカラー画像に関する処理が行われ、その結果の画像Ｐ２が出力される。 Processing performed by the image processing apparatus of this example will be described with reference to FIG.
For example, as illustrated in FIG. 4A, when a captured image P <b> 1 captured without rotating the subject T is input to the image input unit 11, the rotation angle of the subject T on the image plane is determined by the distortion detection unit 12. Based on the detected rotation angle (0 degrees in this example) and the setting contents of the distortion / processing content relationship holding unit 16 (rotation angle / processing content relationship table in FIG. 2 in this example). The process determining unit 17 determines a process related to a full color image as a process to be performed on P1. Further, the distortion correction unit 13 performs distortion correction on the captured image P1 according to the distortion amount of the subject T (in this example, since the rotation angle of the subject is 0 degree and there is no distortion, there is no substantial processing). After being processed into an image in which the region of the subject is directly opposed, the image processing unit 14 extracts the region of the subject T from the photographed image after processing (after distortion correction). A process related to the full-color image determined by the process determining unit 17 is performed on the image of the T area portion, and the resulting image P2 is output.

また、例えば、図４（ｂ）に例示するように、被写体Ｔを右に４５度回転させて撮影した撮影画像Ｐ１が画像入力部１１に入力されると、その画像平面における被写体Ｔの回転角度が歪み検知部１２により検出され、当該検出された回転角度（本例では＋４５度）および歪み／処理内容関係保持部１６の設定内容（本例では図２の回転角度／処理内容関係テーブル）に基づいて、撮影画像Ｐ１に対して行う処理として白黒画像に係る処理が処理決定部１７により決定される。また、撮影画像Ｐ１に対して、被写体Ｔの歪み量に応じた歪み補正（本例では、被写体の回転角度が右に４５度なので、撮像画像Ｐ１を左に４５度回転させる処理）が歪み補正部１３により行われて、被写体の領域部分を正対させた画像へと加工された後に、画像処理部１４により、前記加工後（歪み補正後）の撮影画像から被写体Ｔの領域部分が抽出され、この被写体Ｔの領域部分の画像に対して、処理決定部１７にて決定された白黒画像に関する処理が行われ、その結果の画像Ｐ２が出力される。   Further, for example, as illustrated in FIG. 4B, when a photographed image P1 obtained by rotating the subject T to the right by 45 degrees is input to the image input unit 11, the rotation angle of the subject T on the image plane is input. Is detected by the distortion detection unit 12, and the detected rotation angle (+45 degrees in this example) and the setting contents of the distortion / processing content relationship holding unit 16 (rotation angle / processing content relationship table in FIG. 2 in this example) are included. Based on this, the process determining unit 17 determines a process related to a black and white image as a process to be performed on the captured image P1. Further, distortion correction is performed on the captured image P1 according to the amount of distortion of the subject T (in this example, the rotation angle of the subject is 45 degrees to the right, so the process of rotating the captured image P1 to 45 degrees to the left). After being processed by the unit 13 and processed into an image in which the region portion of the subject is directly opposed, the region portion of the subject T is extracted from the processed image (after distortion correction) by the image processing unit 14. Then, a process related to the black and white image determined by the process determining unit 17 is performed on the image of the area portion of the subject T, and the resulting image P2 is output.

このように、本例の画像処理装置では、撮影画像における被写体の歪みを当該撮影画像に対して行う処理を決定するための要因として取り扱う。すなわち、撮影者が調整した被写体の撮影の仕方に応じて、その撮影画像に対する処理が選択される。   Thus, in the image processing apparatus of this example, the distortion of the subject in the captured image is handled as a factor for determining the processing to be performed on the captured image. That is, processing for the captured image is selected according to the method of capturing the subject adjusted by the photographer.

なお、上記の説明では、撮影画像に対し、歪み補正部１３が歪み補正を行った後に、画像処理部１４が処理決定部１７により決定された処理を行っているが、このような処理手順に限定するものではない。すなわち、例えば、撮影画像に対してフルカラー画像に関する処理を行い且つＰＤＦ形式として保存することが決定された場合において、まず、画像処理部１４が撮影画像に対して白黒画像に関する処理を行い、当該処理後の撮影画像に対して歪み補正部１３が歪み補正を行い、その後、画像処理部１４が、歪み補正後の撮影画像から被写体の領域部分を抽出し、当該領域部分の画像をＰＤＦ形式の電子文書に変換して出力する。   In the above description, the image processing unit 14 performs the processing determined by the processing determination unit 17 after the distortion correction unit 13 performs distortion correction on the captured image. It is not limited. That is, for example, when it is determined that a process relating to a full-color image is to be performed on a captured image and it is determined that the captured image is to be saved as a PDF format, first, the image processing unit 14 performs a process regarding a monochrome image to the captured image. The distortion correction unit 13 performs distortion correction on the subsequent photographed image, and thereafter, the image processing unit 14 extracts a region portion of the subject from the photographed image after distortion correction, and the image of the region portion is converted into an electronic format in PDF format. Convert to document and output.

図５には、本例に係る画像処理装置を構成するコンピュータの主要なハードウェアを例示している。
本例では、各種演算処理を行うＣＰＵ３１、ＣＰＵ３１の作業領域となるＲＡＭ３２、基本的な制御プログラムを記録したＲＯＭ３３、本発明の一実施形態に係るプログラムや各種データを記憶する補助記憶装置（例えば、ＨＤＤ等の磁気ディスクや、フラッシュメモリ等の書き換え可能な不揮発性メモリなど）３４、各種情報を表示出力するための表示装置や操作者により入力操作に用いられるキーボードやマウス等の入力機器とのインターフェースである入出力Ｉ／Ｆ３５、他の装置との間で有線又は無線により通信を行うインターフェースである通信Ｉ／Ｆ３６、等のハードウェア資源を有するコンピュータにより構成されている。
そして、本発明の一実施形態に係るプログラムを補助記憶装置３４等から読み出してＲＡＭ３２に展開し、これをＣＰＵ３１により実行させることで、本発明の一実施形態に係る画像処理装置をコンピュータ上に実現している。 FIG. 5 exemplifies main hardware of a computer constituting the image processing apparatus according to this example.
In this example, a CPU 31 that performs various arithmetic processing, a RAM 32 that is a work area of the CPU 31, a ROM 33 that records a basic control program, an auxiliary storage device that stores programs and various data according to an embodiment of the present invention (for example, 34) interface with a display device for displaying and outputting various information and an input device such as a keyboard and a mouse used for an input operation by an operator. The input / output I / F 35 is a computer having hardware resources such as a communication I / F 36 that is an interface for performing wired or wireless communication with other devices.
Then, the program according to the embodiment of the present invention is read from the auxiliary storage device 34 and the like, loaded into the RAM 32, and executed by the CPU 31, thereby realizing the image processing apparatus according to the embodiment of the present invention on the computer. doing.

なお、１台のコンピュータにより画像処理装置を実現してもよく、各機能部を複数台のコンピュータに分散して設けて画像処理装置を実現してもよい。
また、本発明の一実施形態に係るプログラムは、例えば、当該プログラムを記憶したＣＤ−ＲＯＭ等の外部記憶媒体から読み込む形式や、通信回線等を介して受信する形式などにより、本例に係るコンピュータに設定される。
また、本例のようなソフトウェア構成により各機能部を実現する態様に限られず、それぞれの機能部を専用のハードウエアモジュールで実現するようにしてもよい。 Note that the image processing apparatus may be realized by a single computer, or each functional unit may be distributed and provided in a plurality of computers to realize the image processing apparatus.
In addition, the program according to the embodiment of the present invention may be a computer according to the present example, for example, in a format read from an external storage medium such as a CD-ROM storing the program or a format received via a communication line. Set to
Moreover, it is not restricted to the aspect which implement | achieves each function part by software configuration like this example, You may make it implement | achieve each function part with a dedicated hardware module.

図６には、本発明の第１実施例に係るデジタルカメラ（画像処理装置の一例）の機能ブロックを例示してある。
本例では、被写体の光学像を撮像素子により画像信号に変換して撮影画像を得る撮影機能部２１を有するデジタルカメラが、前述した画像入力部１１、歪み検知部１２、歪み補正部１３、画像処理部１４、保存部１５、歪み／処理内容関係保持部１６、処理決定部１７等の画像処理装置に係る機能部を有している。 FIG. 6 illustrates functional blocks of a digital camera (an example of an image processing apparatus) according to the first embodiment of the present invention.
In this example, a digital camera having a photographing function unit 21 that obtains a photographed image by converting an optical image of a subject into an image signal by an imaging element includes the above-described image input unit 11, distortion detection unit 12, distortion correction unit 13, and image. The processing unit 14, the storage unit 15, the distortion / processing content relationship holding unit 16, and the processing determination unit 17 have functional units related to the image processing apparatus.

すなわち、本例のデジタルカメラでは、被写体を配置された対象領域が撮影機能部２１により撮影されると、その撮影により得られた撮影画像が処理対象として画像入力部１１に入力されて、歪み検知部１２により、撮影画像における被写体の歪みが検出され、処理決定部１７により、歪み／処理内容関係保持部１６の対応関係情報および歪みの検出値に基づいて、撮影画像に対して行う処理が決定される。また、歪み補正部１３により、歪みの検出値に応じた歪み補正が撮影画像に対して行われ、画像処理部１４により、歪み補正後の撮影画像から被写体の領域部分が抽出され、この被写体の領域部分の画像に対して、処理決定部１７にて決定された処理が行われ、その結果の画像が保存部１５へ出力されて記憶（保存）される。   That is, in the digital camera of this example, when the target area where the subject is placed is shot by the shooting function unit 21, a shot image obtained by the shooting is input to the image input unit 11 as a processing target, and distortion detection is performed. The distortion of the subject in the captured image is detected by the unit 12, and the processing to be performed on the captured image is determined by the processing determination unit 17 based on the correspondence information and the detected distortion value of the distortion / processing content relationship holding unit 16. Is done. In addition, the distortion correction unit 13 performs distortion correction according to the distortion detection value on the captured image, and the image processing unit 14 extracts a region area of the subject from the captured image after distortion correction. The processing determined by the processing determination unit 17 is performed on the image of the region portion, and the resulting image is output to the storage unit 15 and stored (saved).

ここで、本例のデジタルカメラには、撮影機能部２１による撮影の対象領域を表示する表示部を設けてあり、どのような画像が撮影されるかが表示される。
更に、本例のデジタルカメラには、前記表示部に、歪み／処理内容関係保持部１６の対応関係情報の設定内容を表示させる機能を有しており、撮影画像に対する処理としてどのような処理があるか、また、その処理を行うためにはどのような仕方で撮影をすればよいか（その処理を行うために要求される撮影画像における被写体の歪み）が撮影の際に表示される。 Here, the digital camera of this example is provided with a display unit that displays a target area for shooting by the shooting function unit 21, and displays what kind of image is shot.
Further, the digital camera of the present example has a function of causing the display unit to display the setting contents of the correspondence information of the distortion / processing content relationship holding unit 16, and what kind of processing is performed as processing on the captured image. Whether or not the image is captured and how the image should be captured for the processing (distortion of the subject in the captured image required for performing the processing) is displayed at the time of capturing.

また、本例のデジタルカメラには、前記表示部に、現在の撮影状況により得られる撮影画像に対して行われる処理の情報を表示させる機能を有しており、撮影画像に対してどのような処理が行われるかを撮影の際に表示するようにしてある。なお、この機能を実現するために、本例のデジタルカメラでは、被写体にフォーカスを合わせた状態における予め定められたタイミングで（例えば、予め設定された時間が経過する度に）、撮影機能部２１による撮影の対象領域における被写体の歪みを歪み検知部１２により検出して処理決定部１７により処理を決定し、当該決定された処理の情報を表示部に表示させるようにしている。   In addition, the digital camera of this example has a function of causing the display unit to display information on processing performed on a captured image obtained according to the current shooting situation. Whether or not the processing is to be performed is displayed at the time of shooting. In order to realize this function, in the digital camera of this example, the photographing function unit 21 is set at a predetermined timing in a state where the subject is focused (for example, every time a preset time elapses). The distortion detection unit 12 detects the distortion of the subject in the shooting target area by the process, the process determining unit 17 determines the process, and the information of the determined process is displayed on the display unit.

図７には、本発明の第２実施例に係るデジタルカメラ及びサーバ装置（画像処理装置の一例）の機能ブロックを例示してある。
本例では、サーバ装置が、前述した画像入力部１１、歪み検知部１２、歪み補正部１３、画像処理部１４、保存部１５、歪み／処理内容関係保持部１６、処理決定部１７等の画像処理装置に係る機能部を有しており、被写体の光学像を撮像素子により画像信号に変換して撮影画像を得る撮影機能部２１を有するデジタルカメラとの間で有線又は無線による通信を可能に構成してある。 FIG. 7 illustrates functional blocks of a digital camera and a server apparatus (an example of an image processing apparatus) according to the second embodiment of the present invention.
In this example, the server device is an image such as the image input unit 11, the distortion detection unit 12, the distortion correction unit 13, the image processing unit 14, the storage unit 15, the distortion / processing content relationship holding unit 16, and the processing determination unit 17. It has a functional unit related to the processing device, and enables wired or wireless communication with a digital camera having a photographing function unit 21 that obtains a photographed image by converting an optical image of a subject into an image signal by an image sensor. It is configured.

すなわち、本例では、被写体を配置された対象領域がデジタルカメラの撮影機能部２１により撮影されると、その撮影により得られた撮影画像がデジタルカメラからサーバ装置へ送信される。サーバ装置では、デジタルカメラから受信した撮影画像が処理対象として画像入力部１１に入力されて、歪み検知部１２により、撮影画像における被写体の歪みが検出され、処理決定部１７により、歪み／処理内容関係保持部１６の対応関係情報および歪みの検出値に基づいて、撮影画像に対して行う処理が決定される。また、歪み補正部１３により、歪みの検出値に応じた歪み補正が撮影画像に対して行われ、画像処理部１４により、歪み補正後の撮影画像から被写体の領域部分が抽出され、この被写体の領域部分の画像に対して、処理決定部１７にて決定された処理が行われ、その結果の画像が保存部１５へ出力されて記憶（保存）される。   That is, in this example, when the target area where the subject is placed is photographed by the photographing function unit 21 of the digital camera, the photographed image obtained by the photographing is transmitted from the digital camera to the server device. In the server device, the captured image received from the digital camera is input as a processing target to the image input unit 11, the distortion of the captured image is detected by the distortion detection unit 12, and the distortion / processing content is detected by the processing determination unit 17. The processing to be performed on the captured image is determined based on the correspondence information of the relationship holding unit 16 and the detected value of distortion. In addition, the distortion correction unit 13 performs distortion correction according to the distortion detection value on the captured image, and the image processing unit 14 extracts a region area of the subject from the captured image after distortion correction. The processing determined by the processing determination unit 17 is performed on the image of the region portion, and the resulting image is output to the storage unit 15 and stored (saved).

ここで、本例のデジタルカメラには、撮影機能部２１による撮影の対象領域を表示する表示部を設けてあり、どのような画像が撮影されるかを表示するようにしてある。
更に、本例のデジタルカメラには、サーバ装置における歪み／処理内容関係保持部１６の対応関係情報と同様な情報を記憶する記憶部を有すると共に、デジタルカメラの表示部に、当該記憶部の設定内容（歪み／処理内容関係保持部１６の対応関係情報と同様な情報）を表示させる機能を有しており、撮影画像に対する処理としてどのような処理があるか、また、その処理を行うためにはどのような仕方で撮影をすればよいか（その処理を行うために要求される撮影画像における被写体の歪み）を撮影の際に表示するようにしてある。なお、本例では、デジタルカメラとサーバ装置との間の通信により、デジタルカメラの記憶部とサーバ装置の歪み／処理内容関係保持部１６との記憶内容を自動的に同期させているが、例えば、歪み／処理内容関係保持部１６の対応関係情報をメモリーカード等の携帯型記憶媒体を介してデジタルカメラに入力して同期させてもよく、或いは、デジタルカメラの利用者がキーボタンや操作パネル等により手動で入力して同期させる等の他の方法を採用してもよい。 Here, the digital camera of the present example is provided with a display unit that displays a target area for shooting by the shooting function unit 21, and displays what kind of image is shot.
Furthermore, the digital camera of this example has a storage unit that stores information similar to the correspondence information of the distortion / processing content relationship holding unit 16 in the server device, and the setting of the storage unit is set on the display unit of the digital camera. It has a function of displaying the contents (information similar to the correspondence information of the distortion / processing content relationship holding unit 16), and what kind of processing is performed as processing on the captured image, and for performing the processing The method for displaying the image (distortion of the subject in the captured image required for performing the processing) is displayed at the time of shooting. In this example, the communication contents between the digital camera and the server apparatus automatically synchronize the storage contents of the storage section of the digital camera and the distortion / processing content relationship holding section 16 of the server apparatus. The correspondence information of the distortion / processing content relationship holding unit 16 may be synchronized by inputting it to the digital camera via a portable storage medium such as a memory card, or the user of the digital camera may use a key button or an operation panel. Other methods such as manual input and synchronization may be employed.

また、本例のデジタルカメラには、前記表示部に、サーバ装置に送信する撮影画像を選択するために送信前の撮影画像を表示させる機能を有すると共に、その撮影画像の表示において、当該撮影画像に対してサーバ装置により行われる処理の情報を表示させる機能を有しており、撮影画像に対してどのような処理が行われるかを画像送信の前に表示するようにしてある。なお、この機能を実現するために、本例のデジタルカメラには、撮影画像における被写体の歪み（或いは、撮影機能部２１による撮影の対象領域における被写体の歪み）を検出する機能や、前記記憶部の設定内容および歪みの検出値に基づいて処理を決定する機能を設けてある。また、歪み絵を検出する機能や処理を決定する機能を持たせる代わりに、例えば撮影画像の表示時に、歪み／処理内容関係保持部１６の内容を併せて表示するよう構成してもよい。   Further, the digital camera of this example has a function of causing the display unit to display a photographed image before transmission in order to select a photographed image to be transmitted to the server device. In displaying the photographed image, the photographed image is displayed. The function of displaying information on processing performed by the server device is displayed, and what kind of processing is performed on the captured image is displayed before image transmission. In order to realize this function, the digital camera of this example includes a function for detecting distortion of a subject in a captured image (or distortion of a subject in a region to be imaged by the imaging function unit 21), and the storage unit. A function for determining the processing based on the set contents and the detected value of distortion is provided. Further, instead of providing a function for detecting a distorted picture and a function for determining a process, the contents of the distortion / process content relation holding unit 16 may be displayed together when, for example, a captured image is displayed.

なお、デジタルカメラに代えて、撮影機能付き携帯電話端末等の他の撮影装置を用いるようにしてもよい。一例として、携帯電話端末による撮影画像を本発明に係る画像処理装置へ宛てた電子メールにより送信するように構成してもよい。   Instead of the digital camera, another photographing device such as a mobile phone terminal with a photographing function may be used. As an example, an image taken by a mobile phone terminal may be transmitted by an e-mail addressed to the image processing apparatus according to the present invention.

１１：画像入力部、 １２：歪み検知部、 １３：歪み補正部、 １４：画像処理部、１５：保存部、 １６：歪み／処理内容関係保持部、 １７：処理決定部   11: Image input unit, 12: Distortion detection unit, 13: Distortion correction unit, 14: Image processing unit, 15: Storage unit, 16: Distortion / processing content relationship holding unit, 17: Processing determination unit

Claims (8)

撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、
処理対象の撮影画像に対して、撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記対応関係に基づき定まる処理を行う処理手段と、
を備えたことを特徴とする画像処理装置。 Setting means for setting a correspondence relationship between the distortion of the subject in the captured image and the processing to be performed on the captured image in which the distortion is detected;
A processing unit that performs distortion correction on the captured image to be processed according to the distortion of the subject in the captured image and processing determined based on the distortion and the correspondence relationship;
An image processing apparatus comprising: 撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して、歪みの状態と保存形式であるカラーモードまたはファイル形式との対応関係を設定する設定手段と、
処理対象の撮影画像に対して、撮影画像における被写体の歪みに応じた歪み補正と前記設定手段により設定された対応関係に基づき定まる処理を行う処理手段と、
を備えたことを特徴とする画像処理装置。
A setting means for setting a correspondence between a distortion state and a color mode or a file format as a storage format for the subject image in the photographed image and the photographed image in which the distortion is detected;
Processing means for performing processing determined on the captured image to be processed based on the distortion correction according to the distortion of the subject in the captured image and the correspondence set by the setting means ;
An image processing apparatus comprising:
撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、
対象領域を撮影する撮影手段と、
前記撮影手段による撮影の対象領域を表示する表示部に、前記対象領域における被写体の歪み及び前記対応関係に基づき定まる処理の情報を表示させる表示手段と、
前記撮影手段により撮影された撮影画像に対して、当該撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記対応関係に基づき定まる処理を行う処理手段と、
を備えたことを特徴とする撮影装置。 Setting means for setting a correspondence relationship between the distortion of the subject in the captured image and the processing to be performed on the captured image in which the distortion is detected;
Photographing means for photographing the target area;
Display means for displaying information on processing determined based on the distortion of the subject in the target area and the correspondence relationship on a display unit that displays the target area of the photographing by the photographing means;
Processing means for performing, on the photographed image photographed by the photographing means, distortion correction according to subject distortion in the photographed image and processing determined based on the distortion and the correspondence relationship;
An imaging apparatus comprising: 撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、
対象領域を撮影する撮影手段と、
前記撮影手段による撮影の対象領域を表示する表示部に、前記設定された対応関係を表示させる表示手段と、
撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記対応関係に基づき定まる処理を当該撮影画像に対して行う画像処理装置に、前記撮影手段により撮影された撮影画像を出力する出力手段と、
を備えたことを特徴とする撮影装置。 Setting means for setting a correspondence relationship between the distortion of the subject in the captured image and the processing to be performed on the captured image in which the distortion is detected;
Photographing means for photographing the target area;
Display means for displaying the set correspondence relationship on a display section for displaying a target area for photographing by the photographing means;
An output unit that outputs the captured image captured by the imaging unit to an image processing apparatus that performs distortion correction according to the distortion of the subject in the captured image and processing determined based on the distortion and the correspondence relationship on the captured image; ,
An imaging apparatus comprising: 撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、
対象領域を撮影する撮影手段と、
撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記対応関係に基づき定まる処理を当該撮影画像に対して行う画像処理装置に、前記撮影手段により撮影された撮影画像を出力する出力手段と、
前記出力手段による出力対象の撮影画像における被写体の歪み及び前記対応関係に基づいて定まる、前記出力手段による出力対象の撮影画像に対して前記画像処理装置により行われる処理の情報を、前記出力手段による出力対象の撮影画像を表示する表示部に表示させる表示手段と、
を備えたことを特徴とする撮影装置。 Setting means for setting a correspondence relationship between the distortion of the subject in the captured image and the processing to be performed on the captured image in which the distortion is detected;
Photographing means for photographing the target area;
An output unit that outputs the captured image captured by the imaging unit to an image processing apparatus that performs distortion correction according to the distortion of the subject in the captured image and processing determined based on the distortion and the correspondence relationship on the captured image; ,
Information about processing performed by the image processing apparatus on the photographic image to be output by the output unit, which is determined based on the distortion of the subject in the photographic image to be output by the output unit and the correspondence, is provided by the output unit. Display means for displaying on a display unit for displaying a photographed image to be output;
An imaging apparatus comprising: 撮影装置と画像処理装置とを含み、
前記撮影装置は、
撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、
対象領域を撮影する撮影手段と、
前記撮影手段による撮影の対象領域を表示する表示部に、前記設定された対応関係を表示させる表示手段と、
前記画像処理装置に前記撮影手段により撮影された撮影画像及び前記対応関係を出力する出力手段と、を備え、
前記画像処理装置は、前記撮影装置が出力した撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記撮影装置が出力した対応関係に基づき定まる処理を当該撮影画像に対して行う、
ことを特徴とする撮影システム。 Including a photographing device and an image processing device,
The imaging device
Setting means for setting a correspondence relationship between the distortion of the subject in the captured image and the processing to be performed on the captured image in which the distortion is detected;
Photographing means for photographing the target area;
Display means for displaying the set correspondence relationship on a display section for displaying a target area for photographing by the photographing means;
An output unit that outputs the captured image captured by the imaging unit and the correspondence relationship to the image processing apparatus;
The image processing apparatus performs distortion correction on the captured image output from the imaging apparatus and processing determined based on the distortion and a correspondence relationship output from the imaging apparatus on the captured image.
An imaging system characterized by that. 撮影装置と画像処理装置とを含み、
前記撮影装置は、
撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係を設定する設定手段と、
対象領域を撮影する撮影手段と、
前記撮影手段による撮影の対象領域を表示する表示部に、出力手段による出力対象の撮影画像に対して前記画像処理装置により行われる処理を表示させる表示手段と、
前記画像処理装置に前記撮影手段により撮影された撮影画像及び前記対応関係を出力する出力手段と、を備え、
前記画像処理装置は、前記撮影装置が出力した撮影画像における被写体の歪みに応じた歪み補正と当該歪み及び前記撮影装置が出力した対応関係に基づき定まる処理を当該撮影画像に対して行う、
ことを特徴とする撮影システム。 Including a photographing device and an image processing device,
The imaging device
Setting means for setting a correspondence relationship between the distortion of the subject in the captured image and the processing to be performed on the captured image in which the distortion is detected;
Photographing means for photographing the target area;
Display means for displaying processing performed by the image processing apparatus on a photographed image to be output by the output means on a display section that displays a target area for photographing by the photographing means;
An output unit that outputs the captured image captured by the imaging unit and the correspondence relationship to the image processing apparatus;
The image processing apparatus performs distortion correction on the captured image output from the imaging apparatus and processing determined based on the distortion and a correspondence relationship output from the imaging apparatus on the captured image.
An imaging system characterized by that. 処理対象の撮影画像における被写体の歪みを検出する検出機能と、
撮影画像における被写体の歪みとその歪みが検出された撮影画像に対して行う処理との対応関係が設定された関係情報および前記検出機能により検出された歪みに基づいて、前記処理対象の撮影画像に対して行う処理を決定する決定機能と、
前記処理対象の撮影画像に対して、前記検出機能により検出された歪みに応じた歪み補正と前記決定機能により決定された処理を行う処理機能と、
をコンピュータに実現させるためのプログラム。 A detection function for detecting distortion of a subject in a captured image to be processed;
Based on the relationship information in which the correspondence between the distortion of the subject in the captured image and the processing to be performed on the captured image in which the distortion is detected, and the distortion detected by the detection function, the captured image of the processing target A decision function that decides the processing to be performed,
A processing function for performing a distortion correction according to the distortion detected by the detection function and a process determined by the determination function on the captured image to be processed;
A program to make a computer realize.
JP2009149564A 2009-06-24 2009-06-24 Image processing apparatus, photographing apparatus, photographing system, and program Active JP5223792B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009149564A JP5223792B2 (en) 2009-06-24 2009-06-24 Image processing apparatus, photographing apparatus, photographing system, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009149564A JP5223792B2 (en) 2009-06-24 2009-06-24 Image processing apparatus, photographing apparatus, photographing system, and program

Publications (3)

Publication Number Publication Date
JP2011009908A JP2011009908A (en) 2011-01-13
JP2011009908A5 JP2011009908A5 (en) 2013-02-07
JP5223792B2 true JP5223792B2 (en) 2013-06-26

Family

ID=43566083

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009149564A Active JP5223792B2 (en) 2009-06-24 2009-06-24 Image processing apparatus, photographing apparatus, photographing system, and program

Country Status (1)

Country Link
JP (1) JP5223792B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5886265B2 (en) * 2013-11-28 2016-03-16 シャープ株式会社 Portable terminal device, program, and recording medium

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4201812B2 (en) * 2004-03-25 2008-12-24 三洋電機株式会社 Information data providing apparatus and image processing apparatus
JP2005328279A (en) * 2004-05-13 2005-11-24 Canon Inc Recording device

Also Published As

Publication number Publication date
JP2011009908A (en) 2011-01-13

Similar Documents

Publication Publication Date Title
US9525868B2 (en) Mobile terminal apparatus which displays captured images
JP6233356B2 (en) Sheet size specifying system, sheet size specifying method, sheet size specifying program, and image forming apparatus
JP2000350077A (en) Digital camera and method for photographing and transferring document
WO2014002689A1 (en) Image processing device and recording medium
US9282206B2 (en) Portable information terminal and recording medium
US20190370539A1 (en) Image processing apparatus, image processing method, and storage medium
US9756196B2 (en) Image processing apparatus and system and method for transmitting an image
JP2015103915A (en) Image processing system and image processing method
JP2010130181A (en) Image acquiring apparatus
JP2014123881A (en) Information processing device, information processing method, and computer program
JP2007266921A (en) Image forming apparatus, and image forming method and program
US20190058805A1 (en) Image processing apparatus, and method of controlling the same
US11436733B2 (en) Image processing apparatus, image processing method and storage medium
US20150244900A1 (en) Image processing device and method, image processing system, and non-transitory computer-readable medium
JP5223792B2 (en) Image processing apparatus, photographing apparatus, photographing system, and program
US9712697B1 (en) Detecting sizes of documents scanned using handheld devices
US10291805B1 (en) Image processing apparatus
KR101511818B1 (en) Image processing apparatus, method for controlling the same, and storage medium
JP6516225B2 (en) Image forming apparatus and image forming method
JP2014239367A (en) Image processor, image processing method, and program
JP6288487B2 (en) Image processing apparatus and program
JP6067040B2 (en) Information processing apparatus, information processing method, and program
JP2008187596A (en) Print system, printing method, and program
JP2009060271A (en) Image processor
JP2016171475A (en) Image processing system, method, and program

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20101119

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20110505

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120518

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121213

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20121213

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20121221

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20130118

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20130124

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130212

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130225

R150 Certificate of patent or registration of utility model

Ref document number: 5223792

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160322

Year of fee payment: 3

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350