JP6143199B2 - 画像補正装置、画像補正方法、及びプログラム - Google Patents
画像補正装置、画像補正方法、及びプログラム Download PDFInfo
- Publication number
- JP6143199B2 JP6143199B2 JP2015054266A JP2015054266A JP6143199B2 JP 6143199 B2 JP6143199 B2 JP 6143199B2 JP 2015054266 A JP2015054266 A JP 2015054266A JP 2015054266 A JP2015054266 A JP 2015054266A JP 6143199 B2 JP6143199 B2 JP 6143199B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- correction
- mesh
- coordinates
- processed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 43
- 238000003702 image correction Methods 0.000 title claims description 23
- 238000012937 correction Methods 0.000 claims description 103
- 238000006243 chemical reaction Methods 0.000 claims description 84
- 239000011159 matrix material Substances 0.000 claims description 55
- 238000012545 processing Methods 0.000 claims description 15
- 230000009466 transformation Effects 0.000 claims description 14
- 238000012905 input function Methods 0.000 claims description 3
- 230000001131 transforming effect Effects 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 22
- 238000003384 imaging method Methods 0.000 description 8
- 238000005452 bending Methods 0.000 description 4
- 230000015556 catabolic process Effects 0.000 description 4
- 238000006731 degradation reaction Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 230000006866 deterioration Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000012804 iterative process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/18—Image warping, e.g. rearranging pixels individually
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/06—Topological mapping of higher dimensional structures onto lower dimensional surfaces
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
- G06T17/20—Finite element generation, e.g. wire-frame surface description, tesselation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/40—Document-oriented image-based pattern recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/24—Aligning, centring, orientation detection or correction of the image
- G06V10/247—Aligning, centring, orientation detection or correction of the image by affine transforms, e.g. correction due to perspective effects; Quadrilaterals, e.g. trapezoids
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Artificial Intelligence (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Image Processing (AREA)
- Editing Of Facsimile Originals (AREA)
- Studio Devices (AREA)
- Processing Or Creating Images (AREA)
Description
図1は、本発明の実施形態による画像補正装置としての携帯情報端末1の構成を示すブロック図である。図において、携帯情報端末1は、例えば、スマートフォンや、タブレット端末などからなる。携帯情報端末1は、通信部10、撮像部11、ROM12、RAM13、表示部14、操作部(タッチパネル)15、記録媒体16、及びCPU17を備えている。
次に、上述した実施形態の動作について説明する。
図2は、本実施形態の携帯情報端末1による全体動作を説明するためのフローチャートである。携帯情報端末1において、CPU17は、まず、撮影された本の頁からなる元画像を記録媒体16からRAM13に入力し(ステップS10)、元画像と当該元画像上に重畳させた初期の歪んでいないメッシュ画像とを表示部14に出力する(ステップS12)。
図11は、本実施形態による記録用マップテーブル31の更新処理で用いたバイリニア法について説明するための概念図である。本実施形態では、バイリニア法を用いて、周囲の4つの画素の座標値から、その座標(実数値)に応じて線形の座標補間を行う。図11に示すc1、c2、c3、c4は、変換後の座標である。したがって、変換用マップテーブル30(n)の4つの画素の座標を、c1(x,y)=c1(1,2)、c2(x+1,y)=c2(2,2)、c3(x,y+1)=c3(1,3)、c4(x+1,y+1)=c4(2,3)に設定する。すなわち、x=1、y=2である。
d=c1*(1.0−x_s)+c2*x_s …(1)
e=c3*(1.0−x_s)+c4*x_s …(2)
C_p=d*(1.0−y_s)+e*y_s …(3)
となる。
以下に、本願出願の特許請求の範囲に記載された発明を付記する。
付記1に記載の発明は、処理対象の画像と当該画像に重畳させたメッシュ画像とを表示手段に表示させる表示制御手段と、ユーザからの指示入力を受け付ける入力手段と、前記入力手段からのユーザの指示入力に基づいて、前記メッシュ画像の形状を変形させる設定手段と、前記メッシュ画像の形状に基づいて、前記画像を構成する画素の湾曲補正後の座標を表す変換用行列を作成する変換用行列作成手段と、前記変換用行列作成手段によって作成された前記変換用行列が表す座標に基づいて、前記画像を構成する画素の変換履歴を表す記録用行列を更新する更新手段と、前記更新手段によって更新された前記記録用行列に基づいて、前記画像に対して湾曲補正を行う補正手段と、を備えることを特徴とする画像補正装置である。
付記2に記載の発明は、前記更新手段は、前記補正手段による2回目以降の湾曲補正に際しては、前記補正手段による1回前の湾曲補正に用いた前記記録用行列が表す座標を、前記変換用行列が表す対応する画素の座標に置き換えることにより、前記記録用行列が表す座標を更新する、ことを特徴とする付記1に記載の画像補正装置である。
付記3に記載の発明は、前記表示制御手段は、2回目以降の湾曲補正に際しては、前記補正手段によって湾曲補正された処理画像と当該処理画像に重畳させた前記メッシュ画像とを前記表示手段に表示させる、ことを特徴とする付記1又は2に記載の画像補正装置である。
付記4に記載の発明は、前記補正手段は、前記更新手段によって更新された前記記録用行列に基づいて前記画像に対して透視変換を行うことによって湾曲補正を行う、ことを特徴とする付記1乃至3のいずれか一項に記載の画像補正装置である。
付記5に記載の発明は、前記表示制御手段は、前記メッシュ画像を4次のベジェ曲線で描画し、前記設定手段は、前記入力手段からのユーザの指示入力に基づいて、前記ベジェ曲線の制御点を移動させることによって、前記メッシュ画像を変形させる、ことを特徴とする付記1乃至4のいずれか一項に記載の画像補正装置である。
付記6に記載の発明は、処理対象の画像と当該画像に重畳させたメッシュ画像とを表示部に表示させるステップと、ユーザからの指示入力を受け付けるステップと、前記ユーザの指示入力に基づいて、前記メッシュ画像の形状を変形させるステップと、前記メッシュ画像の形状に基づいて、前記画像を構成する画素の湾曲補正後の座標を表す変換用行列を作成するステップと、前記作成された変換用行列が表す座標に基づいて、前記画像を構成する画素の変換履歴を表す記録用行列を更新するステップと、前記更新された記録用行列に基づいて、前記画像に対して湾曲補正を行うステップと、を含むことを特徴とする画像補正方法である。
付記7に記載の発明は、画像補正装置を制御するコンピュータに、処理対象の画像と当該画像に重畳させたメッシュ画像とを表示部に表示させる表示制御機能、ユーザからの指示入力を受け付ける入力機能、前記ユーザの指示入力に基づいて、前記メッシュ画像の形状を変形させる設定機能、前記メッシュ画像の形状に基づいて、前記画像を構成する画素の湾曲補正後の座標を表す変換用行列を作成する変換用行列作成機能、前記作成された変換用行列が表す座標に基づいて、前記画像を構成する画素の変換履歴を表す記録用行列を更新する更新機能、前記更新された記録用行列に基づいて、前記画像に対して湾曲補正を行う補正機能、を実現させることを特徴とするプログラムである。
Claims (6)
- 処理対象の画像と当該画像に重畳させたメッシュ画像とを表示手段に表示させる表示制御手段と、
ユーザからの指示入力を受け付ける入力手段と、
前記入力手段からのユーザの指示入力に基づいて、前記メッシュ画像の形状を変形させる変形手段と、
前記変形されたメッシュ画像の形状に基づいて、処理対象の前記画像を構成する画素の湾曲補正後の座標を表す変換用行列を作成する変換用行列作成手段と、
前記変換用行列作成手段によって作成された前記変換用行列が表す座標に基づいて、元画像を構成する画素の変換履歴を表す記録用行列を更新する更新手段と、
前記更新手段によって更新された前記記録用行列に基づいて、前記元画像に対して湾曲補正を行う補正手段と、
を備え、
前記表示制御手段は、2回目以降の湾曲補正に際しては、始めに、前記補正手段によって湾曲補正された処理画像と当該処理画像に重畳させた直交する前記メッシュ画像とを前記表示手段に表示させる、
ことを特徴とする画像補正装置。 - 前記更新手段は、前記補正手段による2回目以降の湾曲補正に際しては、前記補正手段による1回前の湾曲補正に用いた前記記録用行列が表す座標を、前記変換用行列が表す対応する画素の座標に置き換えることにより、前記記録用行列を更新する、
ことを特徴とする請求項1に記載の画像補正装置。 - 前記補正手段は、前記更新手段によって更新された前記記録用行列に基づいて前記元画像に対して透視変換を行うことによって前記湾曲補正を行う、
ことを特徴とする請求項1又は2に記載の画像補正装置。 - 前記表示制御手段は、前記メッシュ画像を4次のベジェ曲線で描画し、
前記変形手段は、前記入力手段からのユーザの指示入力に基づいて、前記ベジェ曲線の制御点を移動させることによって、前記メッシュ画像の形状を変形させる、
ことを特徴とする請求項1乃至3のいずれか一項に記載の画像補正装置。 - 処理対象の画像と当該画像に重畳させたメッシュ画像とを表示部に表示させるステップと、
ユーザからの指示入力を受け付けるステップと、
前記ユーザの指示入力に基づいて、前記メッシュ画像の形状を変形させるステップと、
前記変形されたメッシュ画像の形状に基づいて、処理対象の前記画像を構成する画素の湾曲補正後の座標を表す変換用行列を作成するステップと、
前記作成された変換用行列が表す座標に基づいて、元画像を構成する画素の変換履歴を表す記録用行列を更新するステップと、
前記更新された記録用行列に基づいて、前記元画像に対して湾曲補正を行うステップと、
を含み、
前記表示させるステップでは、2回目以降の湾曲補正に際しては、始めに、前記湾曲補正された処理画像と当該処理画像に重畳させた直交する前記メッシュ画像とを前記表示部に表示させる、
ことを特徴とする画像補正方法。 - 画像補正装置を制御するコンピュータに、
処理対象の画像と当該画像に重畳させたメッシュ画像とを表示部に表示させる表示制御機能、
ユーザからの指示入力を受け付ける入力機能、
前記ユーザの指示入力に基づいて、前記メッシュ画像の形状を変形させる変形機能、
前記変形されたメッシュ画像の形状に基づいて、処理対象の前記画像を構成する画素の湾曲補正後の座標を表す変換用行列を作成する変換用行列作成機能、
前記作成された変換用行列が表す座標に基づいて、元画像を構成する画素の変換履歴を表す記録用行列を更新する更新機能、
前記更新された記録用行列に基づいて、前記元画像に対して湾曲補正を行う補正機能、
を実現させるプログラムであって、
前記表示制御機能は、2回目以降の湾曲補正に際しては、始めに、前記補正機能によって湾曲補正された処理画像と当該処理画像に重畳させた直交する前記メッシュ画像とを前記表示部に表示させる、
ことを特徴とするプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015054266A JP6143199B2 (ja) | 2015-03-18 | 2015-03-18 | 画像補正装置、画像補正方法、及びプログラム |
US15/002,149 US9652891B2 (en) | 2015-03-18 | 2016-01-20 | Image correcting apparatus, image correcting method and storage medium |
CN201610093404.9A CN105989576A (zh) | 2015-03-18 | 2016-02-19 | 校正图像的装置及其方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015054266A JP6143199B2 (ja) | 2015-03-18 | 2015-03-18 | 画像補正装置、画像補正方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016174323A JP2016174323A (ja) | 2016-09-29 |
JP6143199B2 true JP6143199B2 (ja) | 2017-06-07 |
Family
ID=56924137
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015054266A Expired - Fee Related JP6143199B2 (ja) | 2015-03-18 | 2015-03-18 | 画像補正装置、画像補正方法、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US9652891B2 (ja) |
JP (1) | JP6143199B2 (ja) |
CN (1) | CN105989576A (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109087238B (zh) * | 2018-07-04 | 2021-04-23 | 北京市商汤科技开发有限公司 | 图像处理方法和装置、电子设备以及计算机可读存储介质 |
CN110766607A (zh) * | 2018-07-25 | 2020-02-07 | 北京市商汤科技开发有限公司 | 一种图像处理方法、装置和计算机存储介质 |
CN111798420A (zh) * | 2020-06-28 | 2020-10-20 | 苏州精濑光电有限公司 | 一种点屏位置定位方法、装置、设备及存储介质 |
JP2023061557A (ja) * | 2021-10-20 | 2023-05-02 | セイコーエプソン株式会社 | 画像投射方法及びプロジェクター |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62125470A (ja) * | 1985-11-27 | 1987-06-06 | Hitachi Ltd | 図形処理方法 |
JP3455301B2 (ja) * | 1994-09-14 | 2003-10-14 | 花王株式会社 | Cadシステムにおける形状修正装置および方法 |
JP4082303B2 (ja) * | 2003-07-25 | 2008-04-30 | 富士ゼロックス株式会社 | 画像補正装置 |
JP4772281B2 (ja) * | 2003-07-28 | 2011-09-14 | オリンパス株式会社 | 画像処理装置及び画像処理方法 |
WO2007072695A1 (ja) * | 2005-12-22 | 2007-06-28 | Matsushita Electric Industrial Co., Ltd. | 画像投射装置 |
JP4747219B2 (ja) * | 2009-04-08 | 2011-08-17 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
US8457403B2 (en) * | 2011-05-19 | 2013-06-04 | Seiko Epson Corporation | Method of detecting and correcting digital images of books in the book spine area |
JP5925579B2 (ja) * | 2012-04-25 | 2016-05-25 | ルネサスエレクトロニクス株式会社 | 半導体装置、電子装置、及び画像処理方法 |
US9317893B2 (en) * | 2013-03-26 | 2016-04-19 | Sharp Laboratories Of America, Inc. | Methods and systems for correcting a document image |
-
2015
- 2015-03-18 JP JP2015054266A patent/JP6143199B2/ja not_active Expired - Fee Related
-
2016
- 2016-01-20 US US15/002,149 patent/US9652891B2/en not_active Expired - Fee Related
- 2016-02-19 CN CN201610093404.9A patent/CN105989576A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
CN105989576A (zh) | 2016-10-05 |
JP2016174323A (ja) | 2016-09-29 |
US9652891B2 (en) | 2017-05-16 |
US20160275659A1 (en) | 2016-09-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110557557B (zh) | 非线性延展裁切图像的方法及*** | |
JP6143199B2 (ja) | 画像補正装置、画像補正方法、及びプログラム | |
JP5722482B2 (ja) | 画像処理システムおよび画像処理方法 | |
JP2011170838A (ja) | 画像処理装置及び電子機器 | |
JP2919428B2 (ja) | 画像変形装置 | |
KR101450782B1 (ko) | 화상 처리 장치 및 프로그램 | |
EP4207051A1 (en) | Image super-resolution method and electronic device | |
JP6213903B2 (ja) | 画像補正装置、画像補正方法、及びプログラム | |
KR102493492B1 (ko) | 초해상도 모델의 메타 러닝을 통한 빠른 적응 방법 및 장치 | |
CN105511712A (zh) | 一种图片呈现方法及装置 | |
JP6236908B2 (ja) | 撮像装置、撮像システムおよび撮像方法 | |
JP6676299B2 (ja) | 画像処理装置、画像処理方法、コンピュータプログラム | |
JP6304609B2 (ja) | データ量推定方法、プログラム、及び情報処理装置 | |
JP5455728B2 (ja) | 撮像装置、画像処理装置、及び画像処理方法 | |
JP6838918B2 (ja) | 画像データ処理装置及び方法 | |
US8902257B2 (en) | Apparatus and method for producing a thumbnail image including a magnified characteristic region and another deformed region and non-transitory computer-readable medium thereof | |
JP2018092502A (ja) | プログラム及びシステム | |
JP2006285655A (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
WO2011089996A1 (ja) | 画像処理装置及び電子機器 | |
CN110692235B (zh) | 图像处理装置、图像处理程序及图像处理方法 | |
JP2019200485A (ja) | 出力装置、出力方法、出力プログラム及び出力システム | |
JP6937722B2 (ja) | 画像処理装置および画像処理方法 | |
CN111383310B (zh) | 一种图片***方法及装置 | |
JP2020061662A (ja) | 映像処理装置、映像処理方法、及びプログラム | |
JP2016171429A (ja) | 画像補正装置、画像補正方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170126 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170131 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170403 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170414 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170427 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6143199 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |