JP4508553B2 - 撮影画像投影装置、及び撮影画像の補正方法 - Google Patents
撮影画像投影装置、及び撮影画像の補正方法 Download PDFInfo
- Publication number
- JP4508553B2 JP4508553B2 JP2003157384A JP2003157384A JP4508553B2 JP 4508553 B2 JP4508553 B2 JP 4508553B2 JP 2003157384 A JP2003157384 A JP 2003157384A JP 2003157384 A JP2003157384 A JP 2003157384A JP 4508553 B2 JP4508553 B2 JP 4508553B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- document
- photographed image
- document material
- captured image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/04—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
- H04N1/19—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays
- H04N1/195—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays
- H04N1/19594—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays using a television camera or a still video camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/04—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
- H04N1/19—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays
- H04N1/195—Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/387—Composing, repositioning or otherwise geometrically modifying originals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Projection Apparatus (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Image Processing (AREA)
- Accessories Of Cameras (AREA)
- Liquid Crystal Display Device Control (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、撮影画像投影装置、及び撮影画像の補正方法に関する。
【０００２】
【従来の技術】
近年、プレゼンテーションや会議等においては、パーソナルコンピュータにデータとして記憶しあるドキュメント（文字や図表等）をプロジェクタを用いてスクリーン上に拡大して投影することが行われている。プロジェクタは、ＰＣ等から映像信号として入力したドキュメントの画像情報を液晶やマイクロミラーアレイ等の画像変換素子により投影光に変換する構成を備えたものが一般的である。
【０００３】
また、会議等でプロジェクタを使用する場合には、ドキュメント以外にも手持ちの書面資料（新聞、雑誌の記事、プレゼン用紙、書面原稿等）を投影することもある。その場合には書面資料をデジタル（画像データ）化する必要があるため、現状では、書面資料をいわゆる書画カメラ等により撮影することが行われる。書画カメラとしては、例えばＣＣＤやＭＯＳ型の撮像素子を備えたデジタルカメラとしての構成を有するものが用いられている。
【０００４】
一方、デジタル化に際して上記書画カメラにより書面資料を撮影する際には、紙の向きと書画カメラの向きとを合わせることが必要となる。例えば撮影時に、カメラに傾きがある場合、つまりレンズの中心軸が書面資料に対して垂直でない場合には、撮影した画像が台形歪みが生じ矩形の画像にならない。これを解決する方法については、例えば下記の特許文献１に以下の技術が記載されている。すなわち、原稿台に支柱を介してカメラ部が支持された構成の画像撮影装置において、原稿台に対するカメラ部の傾き角度を検出する角度検出センサを設けておき、この角度検出センサによって検出した傾き角度を用いて撮影画像における台形歪みを補正するというものである。
【０００５】
【特許文献１】
特開２００２−３５４３３１号公報（図６参照）
【０００６】
【発明が解決しようとする課題】
しかしながら、上記のようにカメラ部の傾き角度のみに基づいて撮影画像を補正する方法では、投影に先立ち撮影画像を適正化する場合の用途が台形歪み補正に限られてしまう。例えばスクリーンへの投影を目的として書面資料を撮影したとき、撮影画像には台形歪み以外にも被写体（書面資料）の大きさを合わせることは困難であるが、そのような撮影画像を適正化することができなかった。
【０００８】
本発明は、かかる従来の課題に鑑みてなされたものであり、投影に先立つ撮影画像の適正化に必要な補正に対応することができる撮影画像投影装置、及び撮影画像の補正方法を提供することを目的とする。
【０００９】
【課題を解決するための手段】
前記課題を解決するために本発明にあっては、書面資料が撮影された撮影画像から、該撮影画像の外周から最も近い４直線を撮影対象のエッジ情報として取得する取得手段と、この取得手段により取得されたエッジ情報から前記４直線の４つの交点を求めて四角形の書面資料領域とし、該４交点を前記書面資料領域に外接する最小の矩形の４頂点に移動させるよう前記書面資料領域を補正する補正手段と、この補正手段による補正後の撮影画像から書面資料の画像領域を切り抜く切り抜き手段と、該切り抜いた矩形部分をスクリーンに投影する投影手段とを備えたことを特徴とする撮影画像投影装置、及びその撮影画像投影装置等により実現される撮影画像の補正方法とした。
【００１０】
かかる発明においては、撮影画像から取得された該撮影画像の外周から最も近い４直線である撮影対象のエッジ情報から４つの交点を求め、該４交点を前記書面資料領域に外接する最小の矩形の４頂点に移動させるよう前記撮影画像を補正し、当該矩形部分を切り抜いて投影するため、矩形歪みがなく、しかも無用の外枠部分が存在しない良好な撮影画像をスクリーンＳに投影することができる。
【００１５】
【発明の実施の形態】
以下、本発明の一実施の形態を図にしたがって説明する。
【００１６】
（第１の実施の形態）
図１は、本発明に係る撮影画像投影装置を示す構成図である。撮影画像投影装置はプロジェクタ１とノート型のパーソナルコンピュータ（以下、ＰＣ）２と書画カメラ３とから構成されており、プロジェクタ１とＰＣ２はＲＧＢケーブル４を介して接続されるとともに、ＰＣ２と書画カメラ３がＵＳＢケーブル５を介して接続されている。
【００１７】
プロジェクタ１は、投影レンズ等の光学系が収容された投影部１ａが本体正面に設けられた構造であって、投影部１ａから照射した光によってスクリーンＳ（又はホワイトボード等）にドキュメントや画像を投影する。
【００１８】
書画カメラ３は、カメラ台３ａに立設された支柱３ｂの上端部にカメラ３ｃが上下左右に回動自在に設けられた構成である。そして、使用時には、図示したようにカメラ台３ａの上に新聞や、雑誌の記事、プレゼン用紙、書面原稿等の書面資料Ａを載置し、それをカメラ３ｃによって撮影するようになっている。
【００１９】
図２は、撮影画像投影装置の電気的構成の概略を示すブロック図である。プロジェクタ１は、主としてＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、表示部１４、キー入力部１５から構成されるとともに、前記ＲＧＢケーブル４が接続されたＲＢＧ信号の入力端子１６を有している。
【００２０】
前記表示部１４は本発明の投影手段であって、クリプトンランプ等の光源、光源の光を投影光に変換するための液晶やマイクロミラーアレイ等の画像変換素子、その画像変換素子を、入力端子１６から入力したＲＢＧ信号に応じて駆動する駆動回路、投影レンズ等の光学系を含み、ＰＣ２から送られたドキュメントや撮影画像をスクリーンＳに投影する。キー入力部１５は、ユーザーがプロジェクタ１の操作を行うために用意された、複数の操作ボタンにより構成されている。
【００２１】
ＣＰＵ１１は、ＲＯＭ１２に格納されているプログラムに従い、ＲＡＭ１３を作業用メモリとして前述した各部を制御する。なお、前記入力端子１６は、ＣＰＵ１１に接続された図示しない入力画像処理回路に設けられている。
【００２２】
一方、ＰＣ２は主としてＣＰＵ２１、ＲＡＭ２２、記憶装置２３、本体に設けられた複数のキーや、本体に接続されたマウス等の入力装置２４、ＬＣＤ及びその駆動回路等からなる表示装置２５から構成されている。また、ＲＧＢケーブル４が接続されたＲＢＧ出力端子２６、及びＵＳＢケーブル５が接続されたＵＳＢ接続端子２７とを有している。
【００２３】
前記記憶装置２３は記憶容量の比較的大きなハードディスク等であり、記憶装置２３には、後述する撮影画像に対する各種の画像処理を行うための画像処理プログラム、及び画像データに基づく画像を自己の表示装置２５で表示したり、プロジェクタ１によって投影させたりするための画像表示プログラムが格納されている。なお、前記ＲＢＧ出力端子２６は、ＣＰＵ１１に接続された図示しない画像信号処理回路に設けられ、前記ＵＳＢ接続端子２７はＣＰＵ１１に接続された図示しないＵＳＢ入出力インターフェース回路に設けられている。
【００２４】
図３は、書画カメラ３（本実施の形態では、主としてカメラ３ｃ）における電気的構成を示すブロック図である。書画カメラ３は、図示しないレンズを介して前記書面資料Ａを撮像する撮像素子であるＣＣＤ３１と、ＣＣＤ３１から出力されたアナログの撮像信号に各種の信号処理を施した後、デジタルの画像信号として出力する信号処理部３２とを有している。信号処理部３２から出力された画像信号は、撮影待機状態にあるときＬＣＤ３３に送られて被写体画像として表示される。また、撮影操作時には、ＣＰＵ３４によりＪＰＥＧ等の所定フォーマットに従い圧縮され画像メモリ３５に記録される一方、ＵＳＢインターフェース３６から前記ＵＳＢケーブル５を介してＰＣ２へ出力される。
【００２５】
画像メモリ３５に記録された圧縮後の画像データは、必要に応じＣＰＵ３４により読み出され、いったん伸張された後ＬＣＤ３３において静止画像として再生表示されたり、ＰＣ２へ出力されたりする。なお、前記画像メモリ３５は、カメラ３ｃに内蔵又は着脱自在なフラッシュメモリ等の不揮発性メモリである。また、書画カメラ３には、ＣＰＵ３４が上記画像データの圧縮・伸張、及び装置全体の制御に必要とする各種の制御プログラムが記録されたＲＯＭ３７と、ＣＰＵ３４の作業用メモリであるＲＡＭ３８、シャッターキー及び他の複数の操作キーからなるキー入力部３９が設けられている。
【００２６】
次に、以上の構成からなる撮影画像投影装置における動作の概略について説明する。図４は、本実施の形態、及び後述する他の実施の形態に共通する基本的動作を示すフローチャートである。
【００２７】
すなわち撮影画像投影装置において、書画カメラ３は任意のドキュメント等（書面資料Ａ）を撮影し、撮影したドキュメントの画像データをＰＣ２へ出力する（ステップＳ１０１）。また、ＰＣ２では、前記画像処理プログラムによって、入力した画像データに対して歪み補正処理、回転処理、切り抜き処理等の各種の画像処理により撮影画像の補正を行った後（ステップＳ１０２〜Ｓ１０４）、処理後の画像データを表示プログラムによってプロジェクタ１へ出力する（ステップＳ１０５）。なお、前記画像処理は必要に応じて１部又は全部を行う。そして、プロジェクタ１は、ＰＣ２から入力した画像データに基づき、前記ドキュメント等の撮影画像をスクリーンＳに投射する（ステップＳ１０６）。
【００２８】
次に、本実施の形態において、書画カメラ３により撮影した書面資料Ａの撮影画像を適正化してスクリーンＳに投影するときの動作について説明する。
【００２９】
すなわち、撮影画像投影装置においては、書画カメラ３から撮影画像がＰＣ２へ出力されると、ＰＣ２は矩形変形処理を実行する。図５は、その処理手順を示すフローチャート、図６は説明図である。
【００３０】
ＰＣ２は、まず撮影画像Ｇ１に対して色と輝度の変化によるエッジを確認する（ステップＳ１１１、図６（ａ））。次に、認識したエッジの中から外周の４辺Ｌ１〜Ｌ４に近い直線Ｍ１〜Ｍ４を求め（ステップＳ１１２、図６（ｂ））、さらに直線Ｍ１〜Ｍ４の交点つまり４頂点を求める（ステップＳ１１３）。しかる後、図７に示したように、上記４頂点からなる４角形を撮影画像Ｇ１における書面資料領域Ｇａとし、その４頂点を書面資料領域Ｇａに外接する最小の矩形Ｂの４頂点に移動させるよう、書面資料領域Ｇａの形状を変換する（ステップＳ１１４、図６（ｃ））。これにより、書面資料領域Ｇａに矩形歪みのない補正後の画像Ｇ２を得る。当然、書面資料領域Ｇａの矩形歪みが台形歪みであった場合であっても、上記処理によって補正される。
【００３１】
引き続き、ＰＣ２は縦横比変形処理を実行する。図８は、その処理手順を示すフローチャートである。係る変形処理では、まずユーザーに用紙の選択操作を行わせて用紙の設定を行う（ステップＳ１２１）。ここで、ユーザーにより定型用紙が選択されなければ、そのまま縦横比変形処理を終了する（ステップＳ１１２でＮＯ）。また、定型用紙が用紙が選択され、かつそれが縦置きであったときには（ステップＳ１２２、ステップＳ１２３が共にＹＥＳ）、縦横比を「１．４１：１」に設定し（ステップＳ１２４）、それが横置きであれば（ステップＳ１２でＮＯ、ステップＳ１２５がＹＥＳ）、縦横比を「１：１．４１」に設定する（ステップＳ１２６）。
【００３２】
しかる後、設定したいずれかの縦横比で、矩形歪み補正後の書面資料部分Ｇａを変形する（ステップＳ１２７）。係る処理では、先に説明した矩形変形処理の変換処理（ステップＳ１１４）で使用した最小の矩形Ｂの４頂点の座標データに基づき、例えば定型用紙として横置きが設定されたときには、図９に示したように、書面資料領域Ｇａの縦横比が「１：１．４１」となるように上下方向に引き延ばす変形を行う。また、定型用紙として縦置きが設定された場合には、縦横比が「１．４１：１」となるように左右方向に引き延ばす変形を行う。これにより、書面資料領域Ｇａが定型用紙の縦横比を有する画像Ｇ３を得る。
【００３３】
しかる後、図１０に示したように、ＰＣ２は、上述した画像変形が行われた画像Ｇ３から、矩形変形処理の変換処理（ステップＳ１１４）で使用した最小の矩形Ｂの４頂点の座標データに基づき用紙部分を切り抜き（ステップＳ１３１、図１１参照）、切り抜いた画像、すなわち書面資料領域Ｇａのみからなる適正化後の画像Ｇ４を表示ソフトに送る（ステップＳ１３２）。
【００３４】
これにより、書画カメラ３により書面資料Ａを撮影してスクリーンＳに投影するとき、矩形歪みがなく、しかも無用の外枠部分が存在しない良好な撮影画像をスクリーンＳに投影することができる。
【００３５】
（第２の実施の形態）
次に、本発明の第２の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、前述した書面資料Ａの撮影画像の適正化に際し、第１の実施の形態と異なり、撮影画像における書面資料Ａが縦置きであるか、横置きであるかの別を検出するものである。
【００３６】
本実施の形態では、ＰＣ２が、書面資料Ａの撮影時点における書画カメラ３の画角、及び書画カメラ３から出力された画像の解像度を取得可能な構成を有するとともに、ＰＣ２の前記記憶装置２３に、ＰＣ２に以下の方向検出処理を実行させるためのプログラムが格納されているものである。
【００３７】
以下、ＰＣ２による方向検出処理の内容を図１２のフローチャートにしたがって説明する。すなわちＰＣ２は、まず書画カメラ３の画角を取得し（ステップＳ１４１）、さらに画像データの解像度を取得する（ステップＳ１４２）。引き続き、撮影画像から用紙部分（書面資料領域Ｇａ）に該当する四角形の４頂点を取得する（ステップＳ１４３）。係る処理は、第１の実施の形態で既説した矩形変形処理（図５参照）における処理と同様である。
【００３８】
次に、先に取得した画角と解像度を用いて取得した４頂点の座標から画像の歪み量を計算する（ステップＳ１４４）。以下に、その計算方法を説明する。まず画像に歪みは、通常、図１３（ａ）に示したように、例えば用紙（書面資料Ａ）を真上から見たとき、書画カメラ３のカメラ部３ａが用紙の外周部側に位置した状態で、用紙を斜めに撮影した場合に発生し、撮影された画像においては、同図（ｂ）に示したように、用紙部分（書面資料領域Ｇａ）が台形となる。また、そのとき書画カメラ３を横から見ると同図（ｃ）に示した状態である。
【００３９】
ここで、図示したように、
・カメラの画角 ：α
・画像の解像度 ：Ｈ（ピクセル値）
・用紙部分の上辺の長さ：Ｌ（ピクセル値）
・用紙部分の下辺の長さ：Ｍ（ピクセル値）
・用紙部分の高さ ：ｈ（ピクセル値）
である場合、
・用紙部分の画角 ：β＝α×ｈ／Ｈ
【００４０】
・カメラの傾き ：Δ
とした時
【数１】
であり、これからΔを求める。
しかる後、下辺長（Ｍ）に対する用紙高さ（Ｎ）を、
【数２】
で求める。
【００４１】
そして、上記のように求めた歪み量を、用紙部分の縦、横の長さにそれぞれ加える（ステップＳ１４５）。しかる後、縦の長さが横の長さよりも大きい場合には（ステップＳ１４６でＹＥＳ）、縦置きと判定し（ステップＳ１４７）、そうでなければ（ステップＳ１４６でＮＯ）、横置きと判定する（ステップＳ１４７）。
【００４２】
以上のように、本実施の形態によれば、書面資料Ａが縦置きであるか、横置きであるかの別を自動検出することができる。したがって、ユーザーに書面資料Ａの向きを指定させることなく、前述した撮影画像の適正化を行うことができる。
【００４３】
（第３の実施の形態）
次に、本発明の第３の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、前述した書面資料Ａの撮影画像の適正化に用いる撮影角度を自動的に取得する方法に関するものである。本実施の形態では、書面資料Ａの撮影時点における書画カメラ３の画角、及び書画カメラ３から出力された画像の解像度を取得可能な構成を有するとともに、ＰＣ２の前記記憶装置２３に、ＰＣ２に後述する傾き測定処理を実行させるためのプログラムが格納されている。
【００４４】
次に、本実施の形態において、撮影角度を取得する際の手順を図１４のフローチャートにしたがって説明する。まず、準備段階として、図１５に示すように、予め書画カメラ３のカメラ台３ａにカメラ３ｃから垂線ＶＬを下したポイントに特定のマークＭを置く（ステップＳ１５１）。なお、図１５（ａ）は、そのとき状態を示す正面図、同図（ｂ）は左側面図である。次に、そのマークＭが画角内に入るようにカメラ３ｃの向きを設定し（ステップＳ１５２）、その状態でカメラ台３ａを撮影する（ステップＳ１５３）。引き続き、ＰＣ２に自動又は手動で傾き測定処理を開始させる。ＰＣ２においては、まず撮影画像Ｇ１に対してエッジ認識を行ってマークＭの位置を取得する（ステップＳ１５４）。なお、取得する位置データはピクセル単位の座標値である。次に、撮影画像Ｇ１の中心座標とマークＭのまでの距離（ピクセル数）を計算した後（ステップＳ１５５）、書画カメラ３の画角を元に、カメラ３ｃの傾き、すなわちカメラ台３ａの上面に対する撮影角度を計算する（ステップＳ１５６）。
【００４５】
その際の角度計算は、以下により行う。すなわち図１５（ｂ）において、
・カメラの画角 ：α
・円弧Ａ、Ｂの長さ：Ｌ
・円弧Ｃ、Ｄの長さ：Ｍ
としたとき、求めるカメラ３ｃの傾き（撮影角度Δ）は、
傾き（Δ）＝α×Ｍ／Ｌ
である。
また、円弧Ａ、Ｂの長さ（Ｌ）、円弧Ｃ、Ｄの長さ（Ｍ）は、撮影画像Ｇ１の線分ａ，ｂ、線分ｃ，ｄの長さに対応する。したがって
傾き（Δ）＝α×線分ａ，ｂ／線分ｃ，ｄ
によりカメラ３ｃの傾き（Δ）を求める。
【００４６】
したがって、本実施の形態においては、上述した手順により取得した撮影角度（Δ）を用いることにより撮影画像の適正化を行うことができる。つまりカメラ台３ａに置いた書面資料Ａの撮影画像に対し、撮影角度（Δ）を用いて縦、横方向の台形補正を行うことにより、書面資料Ａを垂直方向から撮影したとき得られるものと同様の画像を取得することができる。
【００４７】
（第４の実施の形態）
次に、本発明の第４の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、書面資料Ａの撮影画像の適正化に用いる撮影角度を、第３の実施の形態とは異なる方法によって自動的に取得する方法に関するものである。本実施の形態では、書画カメラ３においてカメラ台３ａに対するカメラ部ｃの高さが任意に調整でき、かつその高さの情報をＰＣ２が取得可能であるとともに、ＰＣ２の前記記憶装置２３に、ＰＣ２に後述する傾き測定処理を実行させるためのプログラムが格納されている。
【００４８】
次に、本実施の形態において、撮影角度を取得する際の手順を図１６のフローチャートにしたがって説明する。まず、準備段階として、図１７に示すように、ＸＹ座標の升目が印刷等されている用紙（基準用紙）Ｔを用意し、それを予め書画カメラ３のカメラ台３ａに、カメラ３ｃから垂線ＶＬを下したポイントが原点Ｏ（０，０）となるように調整する（ステップＳ１６１）。なお、図１７（ａ）は、そのとき状態を示す正面図、同図（ｂ）は左側面図である。次に、カメラ３ｃの向きを任意に設定し（ステップＳ１６２）、その状態で用紙Ｔを撮影する（ステップＳ１６３）。引き続き、ＰＣ２に自動又は手動で傾き測定処理を開始させる。ＰＣ２においては、まず撮影画像Ｇ１に対してエッジ認識を行って升目座標を取得する（ステップＳ１６４）。次に、撮影画像Ｇ１の中心座標と升目座標の原点Ｏとの距離をピクセル数で取得した後（ステップＳ１６５）、その距離と、カメラ３ｃの高さとに基づき撮影角度を計算する（ステップＳ１６６）。
【００４９】
その際の角度計算は、以下により行う。すなわち図１７（ｂ）において、
・カメラ高さ：Ｈ
・シフト量 ：Ｗ（撮影画像Ｇ１の中心座標と升目座標の原点Ｏとの距離）
とし、カメラ３ｃの傾きΔ（撮影角度）を
傾き：Δ＝ａｔａｎ（Ｗ／Ｈ）
により求める。
【００５０】
したがって、本実施の形態においても、上述した手順により取得した撮影角度（Δ）を用いることにより、撮影画像の適正化を行うことができる。つまりカメラ台３ａに置いた書面資料Ａの撮影画像に対し、撮影角度（Δ）を用いて縦、横方向の台形補正を行うことにより、書面資料Ａを垂直方向から撮影したとき得られるものと同様の画像を取得することができる。
【００５１】
（第５の実施の形態）
次に、本発明の第５の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、書面資料Ａとカメラ３ｃとにおける向き（回転方向の傾き）の違いに起因する書面資料Ａの撮影画像の向きを補正する方法に関するものであり、ＰＣ２の前記記憶装置２３に、ＰＣ２に後述する回転補正処理を実行させるためのプログラムが格納されているものである。
【００５２】
図１８は、ＰＣ２における回転補正処理の手順を示すフローチャートであって、ＰＣ２は、例えば第１の実施の形態で説明した方法により、まず書画カメラ３から入力した撮影画像における矩形歪みを補正する（ステップＳ１８１）。次に、補正した撮影画像について、図１９に示したような所定の順番で、異なる走査方向から文字列の周辺分布を調査する（ステップＳ１８２）。そして、各々の走査方向での周辺分布を得る毎に、それが正規分布であるか否かを確認する（ステップＳ１８３）。ここで、書面資料Ａにおけるドキュメント（文字列）が、例えば図２０（ａ）に示したものであるとき、撮影画像が走査方向に対して回転していなければ同図（ｂ）に示したような正規の周辺分布Ｅ１を得ることができる。また、撮影画像が走査方向に対して回転していた場合には図２１（ａ）に示したような正規でない周辺分布Ｅ２が得られることとなる。
【００５３】
そして、いずれかの走査方向で正規の周辺分布Ｅが得られたら（ステップＳ１８３でＹＥＳ、図２１（ｂ））、その時の走査方向の角度を補正角度とする（ステップＳ１８４）。しかる後、撮影画像を上記の補正角度に合わせて回転させることにより、撮影画像の向きを補正する（ステップＳ１８５）。これにより、図２０（ａ）に示したようなドキュメントＤの傾きなくして水平とする撮影画像の適正化を行うことができる。なお、通常、ドキュメントは縦書きと横書きと（図示した例）の２種類に大別されるが、ドキュメントが縦書きであったときには、ドキュメントを垂直に合わせることができる。
【００５４】
（第６の実施の形態）
次に、本発明の第６の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、書面資料Ａとカメラ３ｃとにおける向き（回転方向の傾き）の違いに起因する書面資料Ａの撮影画像の向きを、第５の実施の形態とは異なる方法によって補正するものであり、ＰＣ２の前記記憶装置２３には、ＰＣ２に後述する回転補正処理を実行させるためのプログラムが格納されている。
【００５５】
図２２は、ＰＣ２における回転補正処理の手順を示すフローチャートであって、ＰＣ２は、例えば第１の実施の形態で説明した方法により、まず書画カメラ３から入力した撮影画像Ｇ１における矩形歪みを補正する（ステップＳ１９１、図２３（ａ））。次に、補正した撮影画像に対して色と輝度の変化によるエッジを認識し（ステップＳ１９２）、認識したエッジの中から外周部分に該当する直線Ｌを少なくとも１辺求める（ステップＳ１９３、図２３（ｂ））。引き続き、その直線Ｌから画像の傾きを求める（ステップＳ１９４）。ここで求める傾きは、直線Ｌの垂直に対する角度、又は水平に対する角度のどちらか小さい方の角度、及びその回転方向である。そして、求めた傾きの値（角度と回転方向）を元に撮影画像Ｇ１を回転させることにより、それを垂直又は水平に合わせる（ステップＳ１９５、図２３（ｃ））。
【００５６】
したがって、書面資料Ａがドキュメントでなくとも、さらには全く文字がないような絵や写真であっても、それらをいずれか１辺が入るよう撮影しさえすれば、適正化された撮影画像Ｇ２を自動的に取得することができる。
【００５７】
（第７の実施の形態）
次に、本発明の第７の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、書面資料Ａとカメラ３ｃとにおける向き（回転方向の傾き）の違いに起因する書面資料Ａの撮影画像の向きを、第５、第６の実施の形態とは異なる方法によって補正するものであり、ＰＣ２の前記記憶装置２３には、ＰＣ２に後述する回転補正処理を実行させるためのプログラムが格納されている。
【００５８】
図２４は、ＰＣ２における回転補正処理の手順を示すフローチャートであって、ＰＣ２は、例えば第１の実施の形態で説明した方法により矩形歪みを補正した後の撮影画像Ｇ１の中から、文字に該当する画像領域Ｇａを抽出する（ステップＳ２０１、図２５（ａ））。なお、このとき、撮影画像Ｇ１全体を文字に該当する領域とすることによって係る処理を省略してもよい。次に、抽出した領域Ｇａの画像を９０°ずつ４方向に回転し、文字認識を実施し（ステップＳ２０２）、文字として認識可能な角度を求める（ステップＳ２０３、図２５（ｂ））。そして、求めた角度に合わせて撮影画像Ｇ１全体を回転させる（ステップＳ２０４、図２５（ｃ））。したがって、本実施の形態によれば、文字の向きが正しい適正化された撮影画像Ｇ２を取得することができる。
【００５９】
（第８の実施の形態）
次に、本発明の第８の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、書面資料Ａの撮影画像の適正化に際し、ＰＣ２が、図２６のフローチャートに示した処理を実施するものであり、そのためのプログラムがＰＣ２の前記記憶装置２３に格納された構成を備えている。
【００６０】
本実施の形態においてＰＣ２は、まず撮影画像Ｇ１に対して色と輝度の変化によるエッジを確認し（ステップＳ２１１）、認識したエッジの中から外周の４辺が認識可能であるときには（ステップＳ２１２でＹＥＳ）、第１の実施の形態と同様の手順で、認識したエッジの中から外周の４辺の直線及び４頂点を求めた後、既説した処理によって撮影画像Ｇ１における書面資料領域（用紙部分）のみからなる画像Ｇ２を取得する（ステップＳ２１３、図２７（ａ））。
【００６１】
また、ステップＳ２１２がＮＯであって、撮影画像Ｇ１において、認識したエッジの中から外周の４辺が認識できないときには、以下の処理を行う。まず、図２７（ｂ）に示したように、ユーザーに、撮影画像Ｇ１に対し、用紙部分の４頂点をマウス等の操作によって直接指定させ、その４頂点の位置を求めた後（ステップＳ２１４）、それによる４角形（用紙部分）に外接する最小の矩形に画像を変換する（ステップＳ２１５）。
【００６２】
したがって、本実施の形態によれば、例えば書面資料領域とその周囲の部分との色や明るさの違いが僅かであって、認識したエッジの中から外周の４辺が認識できないようなときであっても、簡単な操作で、適正化された撮影画像Ｇ２を取得することができる。
【００６３】
（第９の実施の形態）
次に、本発明の第９の実施の形態を説明する。本実施の形態は、例えば前述した第３〜第７の実施の形態における撮影画像投影装置において、画角内に全てが収まらない書面資料Ａが撮影された撮影画像に対して前述したように、矩形歪みや傾きの補正を行った後、必要な用紙部分を切り抜くときのＰＣ２の処理に関するものである。
【００６４】
すなわち本実施の形態においてＰＣ２は、図２８のフローチャートに示したように、上記補正済み（画像変換後）の画像Ｇ２に対して、ユーザーに必要な用紙部分を矩形領域で指定する操作を行わせる（ステップＳ２２１）。用紙部分の指定は、例えば図２９（ａ）に示したように、マウス操作によりユーザーが投影したい矩形領域の対角線沿い２頂点を指定させることにより行う。次に、上記画像Ｇ２から、指定された用紙部分を切り抜き（ステップＳ２２２）、切り抜いた用紙部分の画像Ｇｂを表示ソフトに送る（ステップＳ２２３、図２９（ｂ））。
【００６５】
したがって、画角内に全てが収まらない書面資料Ａが撮影された撮影画像に対しても、最終的な最適化を行うことができる。
【００６６】
（第１０の実施の形態）
次に、本発明の第１０の実施の形態を説明する。本実施の形態も、例えば前述した第３〜第７の実施の形態における撮影画像投影装置において、画角内に全てが収まらない書面資料Ａが撮影された撮影画像に対して前述したように、矩形歪みや傾きの補正を行った後、必要な用紙部分を切り抜くときのＰＣ２の処理に関するものである。
【００６７】
すなわち本実施の形態においてＰＣ２は、図３０のフローチャートに示したように、上記補正済み（画像変換後）の画像Ｇ２に対して、ユーザーに必要な用紙部分を、多角形領域で指定する操作を行わせる（ステップＳ２３１）。用紙部分の指定は、例えば図３１（ａ）に示したように、マウス操作によりユーザーが投影したい多角形領域の各頂点を指定させることにより行う。次に、上記画像Ｇ２から、多角形で指定された領域に外接する最小矩形で画像を切り出し（ステップＳ２３２）、その画像から、ユーザーが指定していない部分の画像（領域）Ｇｃを削除（又は白塗り）した後（ステップＳ２３３）、ステップＳ２３２で切り抜いた画像Ｇｂを表示ソフトに送る（ステップＳ２３４、図３１（ｂ））。
【００６８】
したがって、画角内に全てが収まらない書面資料Ａが撮影された撮影画像に対しても最終的な最適化を行うことができ、しかもユーザーが必要な領域が矩形でない場合にも対応することができる。
【００６９】
（第１１の実施の形態）
次に、本発明の第１１の実施の形態を説明する。本実施の形態は、前述した書面資料Ａの撮影画像の適正化に用いる撮影角度を自動的にリアルタイムで、かつ正確に取得する方法に関するものである。本実施の形態においては、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、前記書画カメラ３に、図３３に示したように、前記カメラ３ｃに固定された第１の重力センサ４０と、前記カメラ台３ａに固定された第２の重力センサ４１とが付加されるとともに、ＰＣ２の前記記憶装置２３に、ＰＣ２に後述する撮影角度取得処理を実行させるためのプログラムが格納されている。
【００７０】
以下、本実施の形態のＰＣ２における撮影角度取得処理の内容を図３４のフローチャートに従って説明する。すなわちＰＣ２は、カメラ３ｃに付加した第１の重力センサ４０から鉛直方向Ｌ１を取得し（ステップＳ２５１）、その鉛直方向Ｌ１を基準としてカメラ３ｃの角度αを取得する（ステップＳ２５２）。次に、カメラ台３ａに付加した第２の重力センサ４１から鉛直方向Ｌ２を取得し（ステップＳ２５３）、その鉛直方向Ｌ２を基準としてカメラ台３ａの角度βを取得する（ステップＳ２５４）。しかる後、カメラの傾きの角度αからカメラ台の傾きの角度βを差し引くことで、カメラ３ｃの真の傾きの角度（撮影角度）Δを取得する（ステップＳ２５５）。
【００７１】
したがって、本実施の形態においても、上述した手順により取得した撮影角度（Δ）を用いることにより撮影画像の適正化を行うことができる。つまりカメラ台３ａに置いた書面資料Ａの撮影画像に対し、撮影角度（Δ）を用いて縦、横方向の台形補正を行うことにより、書面資料Ａを垂直方向から撮影したとき得られるものと同様の画像を取得することができる。
【００７２】
しかも、前述した第３及び第４の実施の形態のような事前準備を行うことなく、撮影角度（Δ）を自動的にリアルタイムで、かつ正確に取得することができるため、使い勝手がよい。
【００７３】
なお、以上説明した各実施の形態における撮影画像投影装置においては、プロジェクタ１によって本発明の投影手段が実現され、かつＰＣ２によって本発明の補正手段が実現されたものであって、撮影画像の補正に関する種々の画像処理がＰＣ２によって行われるものについて説明したが、前述した種々の画像処理をプロジェクタ１や書画カメラ３に行わせるようにしてもよい。その場合にはＰＣ２を廃止することもできる。さらには、プロジェクタ１と書画カメラ３とを一体化させた構成とすることもできる。
【００７４】
【発明の効果】
以上説明したように第１の発明においては、撮影画像から取得された該撮影画像の外周から最も近い４直線である撮影対象のエッジ情報から４つの交点を求め、該４交点を前記書面資料領域に外接する最小の矩形の４頂点に移動させるよう前記撮影画像を補正し、当該矩形部分を切り抜いて投影するため、矩形歪みがなく、しかも無用の外枠部分が存在しない良好な撮影画像をスクリーンＳに投影することができる。
【図面の簡単な説明】
【図１】本発明の各実施の形態に共通する撮影画像投影装置の構成図である。
【図２】同撮影画像投影装置の電気的構成の概略を示すブロック図である。
【図３】第１〜第１０の実施の形態における書画カメラの電気的構成の概略を示すブロック図である。
【図４】各実施の形態に共通する撮影画像投影装置の基本動作を示すフローチャートである。
【図５】第１の実施の形態におけるＰＣによる矩形変形処理の手順を示すフローチャートである。
【図６】同矩形変形処理の説明図である。
【図７】同矩形変形処理による形状変換の内容を示す説明図である。
【図８】ＰＣによる縦横比変形処理の手順を示すフローチャートである。
【図９】同縦横比変形処理の内容を示す説明図である。
【図１０】同縦横比変形処理の終了後におけるＰＣの動作を示すフローチャートである。
【図１１】ＰＣによる切り抜き処理の内容を示す説明図である。
【図１２】第２の実施の形態を示す、ＰＣ２による方向検出処理の内容を示すフローチャートである。
【図１３】撮影画像に歪みが発生する理由、及びその状態を示す説明図である。
【図１４】第３の実施の形態における撮影角度を取得する際の手順を示すフローチャートである。
【図１５】撮影角度を取得する際の書画カメラの状態等を示す説明図である。
【図１６】第４の実施の形態における撮影角度を取得する際の手順を示すフローチャートである。
【図１７】撮影角度を取得する際の書画カメラの状態等を示す説明図である。
【図１８】本発明の第５実施の形態におけるＰＣによる回転補正処理の手順を示すフローチャートである。
【図１９】撮影画像に対する走査方向の順番を示す説明図である。
【図２０】ドキュメントと走査方向と周辺分布との関係を示す模式図である。
【図２１】周辺分布が正規でないときのドキュメントと走査方向と周辺分布との関係を示す模式図である。
【図２２】本発明の第６実施の形態におけるＰＣによる回転補正処理の手順を示すフローチャートである。
【図２３】同回転補正処理の説明図である。
【図２４】本発明の第７実施の形態におけるＰＣによる回転補正処理の手順を示すフローチャートである。
【図２５】同回転補正処理の説明図である。
【図２６】本発明の第８実施の形態におけるＰＣの動作を示すフローチャートである。
【図２７】同ＰＣの動作を示す説明図である。
【図２８】本発明の第９実施の形態におけるＰＣの動作を示すフローチャートである。
【図２９】同ＰＣの動作を示す説明図である。
【図３０】本発明の第１０実施の形態におけるＰＣの動作を示すフローチャートである。
【図３１】同ＰＣの動作を示す説明図である。
【図３２】第１１の実施の形態における書画カメラの電気的構成の概略を示すブロック図である。
【図３３】同実施の形態におけるＰＣの撮影角度取得処理の内容を示すフローチャートである。
【図３４】撮影角度を取得する際の書画カメラの状態等を示す説明図である。
【符号の説明】
１ プロジェクタ
２ パーソナルコンピュータ（ＰＣ）
３ 書画カメラ
３ａ カメラ台
３ｂ 支柱
３ｃ カメラ
４ ＲＧＢケーブル
５ ＵＳＢケーブル
２１ ＣＰＵ
２２ ＲＡＭ
２３ 記憶装置
２４ 入力装置
３１ ＣＣＤ
４０ 第１の重力センサ
４１ 第２の重力センサ
Ａ 書面資料
Ｇ１ 撮影画像
Ｇａ 書面資料領域
Ｓ スクリーン
【発明の属する技術分野】
本発明は、撮影画像投影装置、及び撮影画像の補正方法に関する。
【０００２】
【従来の技術】
近年、プレゼンテーションや会議等においては、パーソナルコンピュータにデータとして記憶しあるドキュメント（文字や図表等）をプロジェクタを用いてスクリーン上に拡大して投影することが行われている。プロジェクタは、ＰＣ等から映像信号として入力したドキュメントの画像情報を液晶やマイクロミラーアレイ等の画像変換素子により投影光に変換する構成を備えたものが一般的である。
【０００３】
また、会議等でプロジェクタを使用する場合には、ドキュメント以外にも手持ちの書面資料（新聞、雑誌の記事、プレゼン用紙、書面原稿等）を投影することもある。その場合には書面資料をデジタル（画像データ）化する必要があるため、現状では、書面資料をいわゆる書画カメラ等により撮影することが行われる。書画カメラとしては、例えばＣＣＤやＭＯＳ型の撮像素子を備えたデジタルカメラとしての構成を有するものが用いられている。
【０００４】
一方、デジタル化に際して上記書画カメラにより書面資料を撮影する際には、紙の向きと書画カメラの向きとを合わせることが必要となる。例えば撮影時に、カメラに傾きがある場合、つまりレンズの中心軸が書面資料に対して垂直でない場合には、撮影した画像が台形歪みが生じ矩形の画像にならない。これを解決する方法については、例えば下記の特許文献１に以下の技術が記載されている。すなわち、原稿台に支柱を介してカメラ部が支持された構成の画像撮影装置において、原稿台に対するカメラ部の傾き角度を検出する角度検出センサを設けておき、この角度検出センサによって検出した傾き角度を用いて撮影画像における台形歪みを補正するというものである。
【０００５】
【特許文献１】
特開２００２−３５４３３１号公報（図６参照）
【０００６】
【発明が解決しようとする課題】
しかしながら、上記のようにカメラ部の傾き角度のみに基づいて撮影画像を補正する方法では、投影に先立ち撮影画像を適正化する場合の用途が台形歪み補正に限られてしまう。例えばスクリーンへの投影を目的として書面資料を撮影したとき、撮影画像には台形歪み以外にも被写体（書面資料）の大きさを合わせることは困難であるが、そのような撮影画像を適正化することができなかった。
【０００８】
本発明は、かかる従来の課題に鑑みてなされたものであり、投影に先立つ撮影画像の適正化に必要な補正に対応することができる撮影画像投影装置、及び撮影画像の補正方法を提供することを目的とする。
【０００９】
【課題を解決するための手段】
前記課題を解決するために本発明にあっては、書面資料が撮影された撮影画像から、該撮影画像の外周から最も近い４直線を撮影対象のエッジ情報として取得する取得手段と、この取得手段により取得されたエッジ情報から前記４直線の４つの交点を求めて四角形の書面資料領域とし、該４交点を前記書面資料領域に外接する最小の矩形の４頂点に移動させるよう前記書面資料領域を補正する補正手段と、この補正手段による補正後の撮影画像から書面資料の画像領域を切り抜く切り抜き手段と、該切り抜いた矩形部分をスクリーンに投影する投影手段とを備えたことを特徴とする撮影画像投影装置、及びその撮影画像投影装置等により実現される撮影画像の補正方法とした。
【００１０】
かかる発明においては、撮影画像から取得された該撮影画像の外周から最も近い４直線である撮影対象のエッジ情報から４つの交点を求め、該４交点を前記書面資料領域に外接する最小の矩形の４頂点に移動させるよう前記撮影画像を補正し、当該矩形部分を切り抜いて投影するため、矩形歪みがなく、しかも無用の外枠部分が存在しない良好な撮影画像をスクリーンＳに投影することができる。
【００１５】
【発明の実施の形態】
以下、本発明の一実施の形態を図にしたがって説明する。
【００１６】
（第１の実施の形態）
図１は、本発明に係る撮影画像投影装置を示す構成図である。撮影画像投影装置はプロジェクタ１とノート型のパーソナルコンピュータ（以下、ＰＣ）２と書画カメラ３とから構成されており、プロジェクタ１とＰＣ２はＲＧＢケーブル４を介して接続されるとともに、ＰＣ２と書画カメラ３がＵＳＢケーブル５を介して接続されている。
【００１７】
プロジェクタ１は、投影レンズ等の光学系が収容された投影部１ａが本体正面に設けられた構造であって、投影部１ａから照射した光によってスクリーンＳ（又はホワイトボード等）にドキュメントや画像を投影する。
【００１８】
書画カメラ３は、カメラ台３ａに立設された支柱３ｂの上端部にカメラ３ｃが上下左右に回動自在に設けられた構成である。そして、使用時には、図示したようにカメラ台３ａの上に新聞や、雑誌の記事、プレゼン用紙、書面原稿等の書面資料Ａを載置し、それをカメラ３ｃによって撮影するようになっている。
【００１９】
図２は、撮影画像投影装置の電気的構成の概略を示すブロック図である。プロジェクタ１は、主としてＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３、表示部１４、キー入力部１５から構成されるとともに、前記ＲＧＢケーブル４が接続されたＲＢＧ信号の入力端子１６を有している。
【００２０】
前記表示部１４は本発明の投影手段であって、クリプトンランプ等の光源、光源の光を投影光に変換するための液晶やマイクロミラーアレイ等の画像変換素子、その画像変換素子を、入力端子１６から入力したＲＢＧ信号に応じて駆動する駆動回路、投影レンズ等の光学系を含み、ＰＣ２から送られたドキュメントや撮影画像をスクリーンＳに投影する。キー入力部１５は、ユーザーがプロジェクタ１の操作を行うために用意された、複数の操作ボタンにより構成されている。
【００２１】
ＣＰＵ１１は、ＲＯＭ１２に格納されているプログラムに従い、ＲＡＭ１３を作業用メモリとして前述した各部を制御する。なお、前記入力端子１６は、ＣＰＵ１１に接続された図示しない入力画像処理回路に設けられている。
【００２２】
一方、ＰＣ２は主としてＣＰＵ２１、ＲＡＭ２２、記憶装置２３、本体に設けられた複数のキーや、本体に接続されたマウス等の入力装置２４、ＬＣＤ及びその駆動回路等からなる表示装置２５から構成されている。また、ＲＧＢケーブル４が接続されたＲＢＧ出力端子２６、及びＵＳＢケーブル５が接続されたＵＳＢ接続端子２７とを有している。
【００２３】
前記記憶装置２３は記憶容量の比較的大きなハードディスク等であり、記憶装置２３には、後述する撮影画像に対する各種の画像処理を行うための画像処理プログラム、及び画像データに基づく画像を自己の表示装置２５で表示したり、プロジェクタ１によって投影させたりするための画像表示プログラムが格納されている。なお、前記ＲＢＧ出力端子２６は、ＣＰＵ１１に接続された図示しない画像信号処理回路に設けられ、前記ＵＳＢ接続端子２７はＣＰＵ１１に接続された図示しないＵＳＢ入出力インターフェース回路に設けられている。
【００２４】
図３は、書画カメラ３（本実施の形態では、主としてカメラ３ｃ）における電気的構成を示すブロック図である。書画カメラ３は、図示しないレンズを介して前記書面資料Ａを撮像する撮像素子であるＣＣＤ３１と、ＣＣＤ３１から出力されたアナログの撮像信号に各種の信号処理を施した後、デジタルの画像信号として出力する信号処理部３２とを有している。信号処理部３２から出力された画像信号は、撮影待機状態にあるときＬＣＤ３３に送られて被写体画像として表示される。また、撮影操作時には、ＣＰＵ３４によりＪＰＥＧ等の所定フォーマットに従い圧縮され画像メモリ３５に記録される一方、ＵＳＢインターフェース３６から前記ＵＳＢケーブル５を介してＰＣ２へ出力される。
【００２５】
画像メモリ３５に記録された圧縮後の画像データは、必要に応じＣＰＵ３４により読み出され、いったん伸張された後ＬＣＤ３３において静止画像として再生表示されたり、ＰＣ２へ出力されたりする。なお、前記画像メモリ３５は、カメラ３ｃに内蔵又は着脱自在なフラッシュメモリ等の不揮発性メモリである。また、書画カメラ３には、ＣＰＵ３４が上記画像データの圧縮・伸張、及び装置全体の制御に必要とする各種の制御プログラムが記録されたＲＯＭ３７と、ＣＰＵ３４の作業用メモリであるＲＡＭ３８、シャッターキー及び他の複数の操作キーからなるキー入力部３９が設けられている。
【００２６】
次に、以上の構成からなる撮影画像投影装置における動作の概略について説明する。図４は、本実施の形態、及び後述する他の実施の形態に共通する基本的動作を示すフローチャートである。
【００２７】
すなわち撮影画像投影装置において、書画カメラ３は任意のドキュメント等（書面資料Ａ）を撮影し、撮影したドキュメントの画像データをＰＣ２へ出力する（ステップＳ１０１）。また、ＰＣ２では、前記画像処理プログラムによって、入力した画像データに対して歪み補正処理、回転処理、切り抜き処理等の各種の画像処理により撮影画像の補正を行った後（ステップＳ１０２〜Ｓ１０４）、処理後の画像データを表示プログラムによってプロジェクタ１へ出力する（ステップＳ１０５）。なお、前記画像処理は必要に応じて１部又は全部を行う。そして、プロジェクタ１は、ＰＣ２から入力した画像データに基づき、前記ドキュメント等の撮影画像をスクリーンＳに投射する（ステップＳ１０６）。
【００２８】
次に、本実施の形態において、書画カメラ３により撮影した書面資料Ａの撮影画像を適正化してスクリーンＳに投影するときの動作について説明する。
【００２９】
すなわち、撮影画像投影装置においては、書画カメラ３から撮影画像がＰＣ２へ出力されると、ＰＣ２は矩形変形処理を実行する。図５は、その処理手順を示すフローチャート、図６は説明図である。
【００３０】
ＰＣ２は、まず撮影画像Ｇ１に対して色と輝度の変化によるエッジを確認する（ステップＳ１１１、図６（ａ））。次に、認識したエッジの中から外周の４辺Ｌ１〜Ｌ４に近い直線Ｍ１〜Ｍ４を求め（ステップＳ１１２、図６（ｂ））、さらに直線Ｍ１〜Ｍ４の交点つまり４頂点を求める（ステップＳ１１３）。しかる後、図７に示したように、上記４頂点からなる４角形を撮影画像Ｇ１における書面資料領域Ｇａとし、その４頂点を書面資料領域Ｇａに外接する最小の矩形Ｂの４頂点に移動させるよう、書面資料領域Ｇａの形状を変換する（ステップＳ１１４、図６（ｃ））。これにより、書面資料領域Ｇａに矩形歪みのない補正後の画像Ｇ２を得る。当然、書面資料領域Ｇａの矩形歪みが台形歪みであった場合であっても、上記処理によって補正される。
【００３１】
引き続き、ＰＣ２は縦横比変形処理を実行する。図８は、その処理手順を示すフローチャートである。係る変形処理では、まずユーザーに用紙の選択操作を行わせて用紙の設定を行う（ステップＳ１２１）。ここで、ユーザーにより定型用紙が選択されなければ、そのまま縦横比変形処理を終了する（ステップＳ１１２でＮＯ）。また、定型用紙が用紙が選択され、かつそれが縦置きであったときには（ステップＳ１２２、ステップＳ１２３が共にＹＥＳ）、縦横比を「１．４１：１」に設定し（ステップＳ１２４）、それが横置きであれば（ステップＳ１２でＮＯ、ステップＳ１２５がＹＥＳ）、縦横比を「１：１．４１」に設定する（ステップＳ１２６）。
【００３２】
しかる後、設定したいずれかの縦横比で、矩形歪み補正後の書面資料部分Ｇａを変形する（ステップＳ１２７）。係る処理では、先に説明した矩形変形処理の変換処理（ステップＳ１１４）で使用した最小の矩形Ｂの４頂点の座標データに基づき、例えば定型用紙として横置きが設定されたときには、図９に示したように、書面資料領域Ｇａの縦横比が「１：１．４１」となるように上下方向に引き延ばす変形を行う。また、定型用紙として縦置きが設定された場合には、縦横比が「１．４１：１」となるように左右方向に引き延ばす変形を行う。これにより、書面資料領域Ｇａが定型用紙の縦横比を有する画像Ｇ３を得る。
【００３３】
しかる後、図１０に示したように、ＰＣ２は、上述した画像変形が行われた画像Ｇ３から、矩形変形処理の変換処理（ステップＳ１１４）で使用した最小の矩形Ｂの４頂点の座標データに基づき用紙部分を切り抜き（ステップＳ１３１、図１１参照）、切り抜いた画像、すなわち書面資料領域Ｇａのみからなる適正化後の画像Ｇ４を表示ソフトに送る（ステップＳ１３２）。
【００３４】
これにより、書画カメラ３により書面資料Ａを撮影してスクリーンＳに投影するとき、矩形歪みがなく、しかも無用の外枠部分が存在しない良好な撮影画像をスクリーンＳに投影することができる。
【００３５】
（第２の実施の形態）
次に、本発明の第２の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、前述した書面資料Ａの撮影画像の適正化に際し、第１の実施の形態と異なり、撮影画像における書面資料Ａが縦置きであるか、横置きであるかの別を検出するものである。
【００３６】
本実施の形態では、ＰＣ２が、書面資料Ａの撮影時点における書画カメラ３の画角、及び書画カメラ３から出力された画像の解像度を取得可能な構成を有するとともに、ＰＣ２の前記記憶装置２３に、ＰＣ２に以下の方向検出処理を実行させるためのプログラムが格納されているものである。
【００３７】
以下、ＰＣ２による方向検出処理の内容を図１２のフローチャートにしたがって説明する。すなわちＰＣ２は、まず書画カメラ３の画角を取得し（ステップＳ１４１）、さらに画像データの解像度を取得する（ステップＳ１４２）。引き続き、撮影画像から用紙部分（書面資料領域Ｇａ）に該当する四角形の４頂点を取得する（ステップＳ１４３）。係る処理は、第１の実施の形態で既説した矩形変形処理（図５参照）における処理と同様である。
【００３８】
次に、先に取得した画角と解像度を用いて取得した４頂点の座標から画像の歪み量を計算する（ステップＳ１４４）。以下に、その計算方法を説明する。まず画像に歪みは、通常、図１３（ａ）に示したように、例えば用紙（書面資料Ａ）を真上から見たとき、書画カメラ３のカメラ部３ａが用紙の外周部側に位置した状態で、用紙を斜めに撮影した場合に発生し、撮影された画像においては、同図（ｂ）に示したように、用紙部分（書面資料領域Ｇａ）が台形となる。また、そのとき書画カメラ３を横から見ると同図（ｃ）に示した状態である。
【００３９】
ここで、図示したように、
・カメラの画角 ：α
・画像の解像度 ：Ｈ（ピクセル値）
・用紙部分の上辺の長さ：Ｌ（ピクセル値）
・用紙部分の下辺の長さ：Ｍ（ピクセル値）
・用紙部分の高さ ：ｈ（ピクセル値）
である場合、
・用紙部分の画角 ：β＝α×ｈ／Ｈ
【００４０】
・カメラの傾き ：Δ
とした時
【数１】
しかる後、下辺長（Ｍ）に対する用紙高さ（Ｎ）を、
【数２】
【００４１】
そして、上記のように求めた歪み量を、用紙部分の縦、横の長さにそれぞれ加える（ステップＳ１４５）。しかる後、縦の長さが横の長さよりも大きい場合には（ステップＳ１４６でＹＥＳ）、縦置きと判定し（ステップＳ１４７）、そうでなければ（ステップＳ１４６でＮＯ）、横置きと判定する（ステップＳ１４７）。
【００４２】
以上のように、本実施の形態によれば、書面資料Ａが縦置きであるか、横置きであるかの別を自動検出することができる。したがって、ユーザーに書面資料Ａの向きを指定させることなく、前述した撮影画像の適正化を行うことができる。
【００４３】
（第３の実施の形態）
次に、本発明の第３の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、前述した書面資料Ａの撮影画像の適正化に用いる撮影角度を自動的に取得する方法に関するものである。本実施の形態では、書面資料Ａの撮影時点における書画カメラ３の画角、及び書画カメラ３から出力された画像の解像度を取得可能な構成を有するとともに、ＰＣ２の前記記憶装置２３に、ＰＣ２に後述する傾き測定処理を実行させるためのプログラムが格納されている。
【００４４】
次に、本実施の形態において、撮影角度を取得する際の手順を図１４のフローチャートにしたがって説明する。まず、準備段階として、図１５に示すように、予め書画カメラ３のカメラ台３ａにカメラ３ｃから垂線ＶＬを下したポイントに特定のマークＭを置く（ステップＳ１５１）。なお、図１５（ａ）は、そのとき状態を示す正面図、同図（ｂ）は左側面図である。次に、そのマークＭが画角内に入るようにカメラ３ｃの向きを設定し（ステップＳ１５２）、その状態でカメラ台３ａを撮影する（ステップＳ１５３）。引き続き、ＰＣ２に自動又は手動で傾き測定処理を開始させる。ＰＣ２においては、まず撮影画像Ｇ１に対してエッジ認識を行ってマークＭの位置を取得する（ステップＳ１５４）。なお、取得する位置データはピクセル単位の座標値である。次に、撮影画像Ｇ１の中心座標とマークＭのまでの距離（ピクセル数）を計算した後（ステップＳ１５５）、書画カメラ３の画角を元に、カメラ３ｃの傾き、すなわちカメラ台３ａの上面に対する撮影角度を計算する（ステップＳ１５６）。
【００４５】
その際の角度計算は、以下により行う。すなわち図１５（ｂ）において、
・カメラの画角 ：α
・円弧Ａ、Ｂの長さ：Ｌ
・円弧Ｃ、Ｄの長さ：Ｍ
としたとき、求めるカメラ３ｃの傾き（撮影角度Δ）は、
傾き（Δ）＝α×Ｍ／Ｌ
である。
また、円弧Ａ、Ｂの長さ（Ｌ）、円弧Ｃ、Ｄの長さ（Ｍ）は、撮影画像Ｇ１の線分ａ，ｂ、線分ｃ，ｄの長さに対応する。したがって
傾き（Δ）＝α×線分ａ，ｂ／線分ｃ，ｄ
によりカメラ３ｃの傾き（Δ）を求める。
【００４６】
したがって、本実施の形態においては、上述した手順により取得した撮影角度（Δ）を用いることにより撮影画像の適正化を行うことができる。つまりカメラ台３ａに置いた書面資料Ａの撮影画像に対し、撮影角度（Δ）を用いて縦、横方向の台形補正を行うことにより、書面資料Ａを垂直方向から撮影したとき得られるものと同様の画像を取得することができる。
【００４７】
（第４の実施の形態）
次に、本発明の第４の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、書面資料Ａの撮影画像の適正化に用いる撮影角度を、第３の実施の形態とは異なる方法によって自動的に取得する方法に関するものである。本実施の形態では、書画カメラ３においてカメラ台３ａに対するカメラ部ｃの高さが任意に調整でき、かつその高さの情報をＰＣ２が取得可能であるとともに、ＰＣ２の前記記憶装置２３に、ＰＣ２に後述する傾き測定処理を実行させるためのプログラムが格納されている。
【００４８】
次に、本実施の形態において、撮影角度を取得する際の手順を図１６のフローチャートにしたがって説明する。まず、準備段階として、図１７に示すように、ＸＹ座標の升目が印刷等されている用紙（基準用紙）Ｔを用意し、それを予め書画カメラ３のカメラ台３ａに、カメラ３ｃから垂線ＶＬを下したポイントが原点Ｏ（０，０）となるように調整する（ステップＳ１６１）。なお、図１７（ａ）は、そのとき状態を示す正面図、同図（ｂ）は左側面図である。次に、カメラ３ｃの向きを任意に設定し（ステップＳ１６２）、その状態で用紙Ｔを撮影する（ステップＳ１６３）。引き続き、ＰＣ２に自動又は手動で傾き測定処理を開始させる。ＰＣ２においては、まず撮影画像Ｇ１に対してエッジ認識を行って升目座標を取得する（ステップＳ１６４）。次に、撮影画像Ｇ１の中心座標と升目座標の原点Ｏとの距離をピクセル数で取得した後（ステップＳ１６５）、その距離と、カメラ３ｃの高さとに基づき撮影角度を計算する（ステップＳ１６６）。
【００４９】
その際の角度計算は、以下により行う。すなわち図１７（ｂ）において、
・カメラ高さ：Ｈ
・シフト量 ：Ｗ（撮影画像Ｇ１の中心座標と升目座標の原点Ｏとの距離）
とし、カメラ３ｃの傾きΔ（撮影角度）を
傾き：Δ＝ａｔａｎ（Ｗ／Ｈ）
により求める。
【００５０】
したがって、本実施の形態においても、上述した手順により取得した撮影角度（Δ）を用いることにより、撮影画像の適正化を行うことができる。つまりカメラ台３ａに置いた書面資料Ａの撮影画像に対し、撮影角度（Δ）を用いて縦、横方向の台形補正を行うことにより、書面資料Ａを垂直方向から撮影したとき得られるものと同様の画像を取得することができる。
【００５１】
（第５の実施の形態）
次に、本発明の第５の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、書面資料Ａとカメラ３ｃとにおける向き（回転方向の傾き）の違いに起因する書面資料Ａの撮影画像の向きを補正する方法に関するものであり、ＰＣ２の前記記憶装置２３に、ＰＣ２に後述する回転補正処理を実行させるためのプログラムが格納されているものである。
【００５２】
図１８は、ＰＣ２における回転補正処理の手順を示すフローチャートであって、ＰＣ２は、例えば第１の実施の形態で説明した方法により、まず書画カメラ３から入力した撮影画像における矩形歪みを補正する（ステップＳ１８１）。次に、補正した撮影画像について、図１９に示したような所定の順番で、異なる走査方向から文字列の周辺分布を調査する（ステップＳ１８２）。そして、各々の走査方向での周辺分布を得る毎に、それが正規分布であるか否かを確認する（ステップＳ１８３）。ここで、書面資料Ａにおけるドキュメント（文字列）が、例えば図２０（ａ）に示したものであるとき、撮影画像が走査方向に対して回転していなければ同図（ｂ）に示したような正規の周辺分布Ｅ１を得ることができる。また、撮影画像が走査方向に対して回転していた場合には図２１（ａ）に示したような正規でない周辺分布Ｅ２が得られることとなる。
【００５３】
そして、いずれかの走査方向で正規の周辺分布Ｅが得られたら（ステップＳ１８３でＹＥＳ、図２１（ｂ））、その時の走査方向の角度を補正角度とする（ステップＳ１８４）。しかる後、撮影画像を上記の補正角度に合わせて回転させることにより、撮影画像の向きを補正する（ステップＳ１８５）。これにより、図２０（ａ）に示したようなドキュメントＤの傾きなくして水平とする撮影画像の適正化を行うことができる。なお、通常、ドキュメントは縦書きと横書きと（図示した例）の２種類に大別されるが、ドキュメントが縦書きであったときには、ドキュメントを垂直に合わせることができる。
【００５４】
（第６の実施の形態）
次に、本発明の第６の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、書面資料Ａとカメラ３ｃとにおける向き（回転方向の傾き）の違いに起因する書面資料Ａの撮影画像の向きを、第５の実施の形態とは異なる方法によって補正するものであり、ＰＣ２の前記記憶装置２３には、ＰＣ２に後述する回転補正処理を実行させるためのプログラムが格納されている。
【００５５】
図２２は、ＰＣ２における回転補正処理の手順を示すフローチャートであって、ＰＣ２は、例えば第１の実施の形態で説明した方法により、まず書画カメラ３から入力した撮影画像Ｇ１における矩形歪みを補正する（ステップＳ１９１、図２３（ａ））。次に、補正した撮影画像に対して色と輝度の変化によるエッジを認識し（ステップＳ１９２）、認識したエッジの中から外周部分に該当する直線Ｌを少なくとも１辺求める（ステップＳ１９３、図２３（ｂ））。引き続き、その直線Ｌから画像の傾きを求める（ステップＳ１９４）。ここで求める傾きは、直線Ｌの垂直に対する角度、又は水平に対する角度のどちらか小さい方の角度、及びその回転方向である。そして、求めた傾きの値（角度と回転方向）を元に撮影画像Ｇ１を回転させることにより、それを垂直又は水平に合わせる（ステップＳ１９５、図２３（ｃ））。
【００５６】
したがって、書面資料Ａがドキュメントでなくとも、さらには全く文字がないような絵や写真であっても、それらをいずれか１辺が入るよう撮影しさえすれば、適正化された撮影画像Ｇ２を自動的に取得することができる。
【００５７】
（第７の実施の形態）
次に、本発明の第７の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、書面資料Ａとカメラ３ｃとにおける向き（回転方向の傾き）の違いに起因する書面資料Ａの撮影画像の向きを、第５、第６の実施の形態とは異なる方法によって補正するものであり、ＰＣ２の前記記憶装置２３には、ＰＣ２に後述する回転補正処理を実行させるためのプログラムが格納されている。
【００５８】
図２４は、ＰＣ２における回転補正処理の手順を示すフローチャートであって、ＰＣ２は、例えば第１の実施の形態で説明した方法により矩形歪みを補正した後の撮影画像Ｇ１の中から、文字に該当する画像領域Ｇａを抽出する（ステップＳ２０１、図２５（ａ））。なお、このとき、撮影画像Ｇ１全体を文字に該当する領域とすることによって係る処理を省略してもよい。次に、抽出した領域Ｇａの画像を９０°ずつ４方向に回転し、文字認識を実施し（ステップＳ２０２）、文字として認識可能な角度を求める（ステップＳ２０３、図２５（ｂ））。そして、求めた角度に合わせて撮影画像Ｇ１全体を回転させる（ステップＳ２０４、図２５（ｃ））。したがって、本実施の形態によれば、文字の向きが正しい適正化された撮影画像Ｇ２を取得することができる。
【００５９】
（第８の実施の形態）
次に、本発明の第８の実施の形態を説明する。本実施の形態は、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、書面資料Ａの撮影画像の適正化に際し、ＰＣ２が、図２６のフローチャートに示した処理を実施するものであり、そのためのプログラムがＰＣ２の前記記憶装置２３に格納された構成を備えている。
【００６０】
本実施の形態においてＰＣ２は、まず撮影画像Ｇ１に対して色と輝度の変化によるエッジを確認し（ステップＳ２１１）、認識したエッジの中から外周の４辺が認識可能であるときには（ステップＳ２１２でＹＥＳ）、第１の実施の形態と同様の手順で、認識したエッジの中から外周の４辺の直線及び４頂点を求めた後、既説した処理によって撮影画像Ｇ１における書面資料領域（用紙部分）のみからなる画像Ｇ２を取得する（ステップＳ２１３、図２７（ａ））。
【００６１】
また、ステップＳ２１２がＮＯであって、撮影画像Ｇ１において、認識したエッジの中から外周の４辺が認識できないときには、以下の処理を行う。まず、図２７（ｂ）に示したように、ユーザーに、撮影画像Ｇ１に対し、用紙部分の４頂点をマウス等の操作によって直接指定させ、その４頂点の位置を求めた後（ステップＳ２１４）、それによる４角形（用紙部分）に外接する最小の矩形に画像を変換する（ステップＳ２１５）。
【００６２】
したがって、本実施の形態によれば、例えば書面資料領域とその周囲の部分との色や明るさの違いが僅かであって、認識したエッジの中から外周の４辺が認識できないようなときであっても、簡単な操作で、適正化された撮影画像Ｇ２を取得することができる。
【００６３】
（第９の実施の形態）
次に、本発明の第９の実施の形態を説明する。本実施の形態は、例えば前述した第３〜第７の実施の形態における撮影画像投影装置において、画角内に全てが収まらない書面資料Ａが撮影された撮影画像に対して前述したように、矩形歪みや傾きの補正を行った後、必要な用紙部分を切り抜くときのＰＣ２の処理に関するものである。
【００６４】
すなわち本実施の形態においてＰＣ２は、図２８のフローチャートに示したように、上記補正済み（画像変換後）の画像Ｇ２に対して、ユーザーに必要な用紙部分を矩形領域で指定する操作を行わせる（ステップＳ２２１）。用紙部分の指定は、例えば図２９（ａ）に示したように、マウス操作によりユーザーが投影したい矩形領域の対角線沿い２頂点を指定させることにより行う。次に、上記画像Ｇ２から、指定された用紙部分を切り抜き（ステップＳ２２２）、切り抜いた用紙部分の画像Ｇｂを表示ソフトに送る（ステップＳ２２３、図２９（ｂ））。
【００６５】
したがって、画角内に全てが収まらない書面資料Ａが撮影された撮影画像に対しても、最終的な最適化を行うことができる。
【００６６】
（第１０の実施の形態）
次に、本発明の第１０の実施の形態を説明する。本実施の形態も、例えば前述した第３〜第７の実施の形態における撮影画像投影装置において、画角内に全てが収まらない書面資料Ａが撮影された撮影画像に対して前述したように、矩形歪みや傾きの補正を行った後、必要な用紙部分を切り抜くときのＰＣ２の処理に関するものである。
【００６７】
すなわち本実施の形態においてＰＣ２は、図３０のフローチャートに示したように、上記補正済み（画像変換後）の画像Ｇ２に対して、ユーザーに必要な用紙部分を、多角形領域で指定する操作を行わせる（ステップＳ２３１）。用紙部分の指定は、例えば図３１（ａ）に示したように、マウス操作によりユーザーが投影したい多角形領域の各頂点を指定させることにより行う。次に、上記画像Ｇ２から、多角形で指定された領域に外接する最小矩形で画像を切り出し（ステップＳ２３２）、その画像から、ユーザーが指定していない部分の画像（領域）Ｇｃを削除（又は白塗り）した後（ステップＳ２３３）、ステップＳ２３２で切り抜いた画像Ｇｂを表示ソフトに送る（ステップＳ２３４、図３１（ｂ））。
【００６８】
したがって、画角内に全てが収まらない書面資料Ａが撮影された撮影画像に対しても最終的な最適化を行うことができ、しかもユーザーが必要な領域が矩形でない場合にも対応することができる。
【００６９】
（第１１の実施の形態）
次に、本発明の第１１の実施の形態を説明する。本実施の形態は、前述した書面資料Ａの撮影画像の適正化に用いる撮影角度を自動的にリアルタイムで、かつ正確に取得する方法に関するものである。本実施の形態においては、図１〜図３に示したと同様の構成を備えた撮影画像投影装置において、前記書画カメラ３に、図３３に示したように、前記カメラ３ｃに固定された第１の重力センサ４０と、前記カメラ台３ａに固定された第２の重力センサ４１とが付加されるとともに、ＰＣ２の前記記憶装置２３に、ＰＣ２に後述する撮影角度取得処理を実行させるためのプログラムが格納されている。
【００７０】
以下、本実施の形態のＰＣ２における撮影角度取得処理の内容を図３４のフローチャートに従って説明する。すなわちＰＣ２は、カメラ３ｃに付加した第１の重力センサ４０から鉛直方向Ｌ１を取得し（ステップＳ２５１）、その鉛直方向Ｌ１を基準としてカメラ３ｃの角度αを取得する（ステップＳ２５２）。次に、カメラ台３ａに付加した第２の重力センサ４１から鉛直方向Ｌ２を取得し（ステップＳ２５３）、その鉛直方向Ｌ２を基準としてカメラ台３ａの角度βを取得する（ステップＳ２５４）。しかる後、カメラの傾きの角度αからカメラ台の傾きの角度βを差し引くことで、カメラ３ｃの真の傾きの角度（撮影角度）Δを取得する（ステップＳ２５５）。
【００７１】
したがって、本実施の形態においても、上述した手順により取得した撮影角度（Δ）を用いることにより撮影画像の適正化を行うことができる。つまりカメラ台３ａに置いた書面資料Ａの撮影画像に対し、撮影角度（Δ）を用いて縦、横方向の台形補正を行うことにより、書面資料Ａを垂直方向から撮影したとき得られるものと同様の画像を取得することができる。
【００７２】
しかも、前述した第３及び第４の実施の形態のような事前準備を行うことなく、撮影角度（Δ）を自動的にリアルタイムで、かつ正確に取得することができるため、使い勝手がよい。
【００７３】
なお、以上説明した各実施の形態における撮影画像投影装置においては、プロジェクタ１によって本発明の投影手段が実現され、かつＰＣ２によって本発明の補正手段が実現されたものであって、撮影画像の補正に関する種々の画像処理がＰＣ２によって行われるものについて説明したが、前述した種々の画像処理をプロジェクタ１や書画カメラ３に行わせるようにしてもよい。その場合にはＰＣ２を廃止することもできる。さらには、プロジェクタ１と書画カメラ３とを一体化させた構成とすることもできる。
【００７４】
【発明の効果】
以上説明したように第１の発明においては、撮影画像から取得された該撮影画像の外周から最も近い４直線である撮影対象のエッジ情報から４つの交点を求め、該４交点を前記書面資料領域に外接する最小の矩形の４頂点に移動させるよう前記撮影画像を補正し、当該矩形部分を切り抜いて投影するため、矩形歪みがなく、しかも無用の外枠部分が存在しない良好な撮影画像をスクリーンＳに投影することができる。
【図面の簡単な説明】
【図１】本発明の各実施の形態に共通する撮影画像投影装置の構成図である。
【図２】同撮影画像投影装置の電気的構成の概略を示すブロック図である。
【図３】第１〜第１０の実施の形態における書画カメラの電気的構成の概略を示すブロック図である。
【図４】各実施の形態に共通する撮影画像投影装置の基本動作を示すフローチャートである。
【図５】第１の実施の形態におけるＰＣによる矩形変形処理の手順を示すフローチャートである。
【図６】同矩形変形処理の説明図である。
【図７】同矩形変形処理による形状変換の内容を示す説明図である。
【図８】ＰＣによる縦横比変形処理の手順を示すフローチャートである。
【図９】同縦横比変形処理の内容を示す説明図である。
【図１０】同縦横比変形処理の終了後におけるＰＣの動作を示すフローチャートである。
【図１１】ＰＣによる切り抜き処理の内容を示す説明図である。
【図１２】第２の実施の形態を示す、ＰＣ２による方向検出処理の内容を示すフローチャートである。
【図１３】撮影画像に歪みが発生する理由、及びその状態を示す説明図である。
【図１４】第３の実施の形態における撮影角度を取得する際の手順を示すフローチャートである。
【図１５】撮影角度を取得する際の書画カメラの状態等を示す説明図である。
【図１６】第４の実施の形態における撮影角度を取得する際の手順を示すフローチャートである。
【図１７】撮影角度を取得する際の書画カメラの状態等を示す説明図である。
【図１８】本発明の第５実施の形態におけるＰＣによる回転補正処理の手順を示すフローチャートである。
【図１９】撮影画像に対する走査方向の順番を示す説明図である。
【図２０】ドキュメントと走査方向と周辺分布との関係を示す模式図である。
【図２１】周辺分布が正規でないときのドキュメントと走査方向と周辺分布との関係を示す模式図である。
【図２２】本発明の第６実施の形態におけるＰＣによる回転補正処理の手順を示すフローチャートである。
【図２３】同回転補正処理の説明図である。
【図２４】本発明の第７実施の形態におけるＰＣによる回転補正処理の手順を示すフローチャートである。
【図２５】同回転補正処理の説明図である。
【図２６】本発明の第８実施の形態におけるＰＣの動作を示すフローチャートである。
【図２７】同ＰＣの動作を示す説明図である。
【図２８】本発明の第９実施の形態におけるＰＣの動作を示すフローチャートである。
【図２９】同ＰＣの動作を示す説明図である。
【図３０】本発明の第１０実施の形態におけるＰＣの動作を示すフローチャートである。
【図３１】同ＰＣの動作を示す説明図である。
【図３２】第１１の実施の形態における書画カメラの電気的構成の概略を示すブロック図である。
【図３３】同実施の形態におけるＰＣの撮影角度取得処理の内容を示すフローチャートである。
【図３４】撮影角度を取得する際の書画カメラの状態等を示す説明図である。
【符号の説明】
１ プロジェクタ
２ パーソナルコンピュータ（ＰＣ）
３ 書画カメラ
３ａ カメラ台
３ｂ 支柱
３ｃ カメラ
４ ＲＧＢケーブル
５ ＵＳＢケーブル
２１ ＣＰＵ
２２ ＲＡＭ
２３ 記憶装置
２４ 入力装置
３１ ＣＣＤ
４０ 第１の重力センサ
４１ 第２の重力センサ
Ａ 書面資料
Ｇ１ 撮影画像
Ｇａ 書面資料領域
Ｓ スクリーン
Claims (5)
- 書面資料が撮影された撮影画像から、該撮影画像の外周から最も近い４直線を撮影対象のエッジ情報として取得する取得手段と、
この取得手段により取得されたエッジ情報から前記４直線の４つの交点を求めて四角形の書面資料領域とし、該４交点を前記書面資料領域に外接する最小の矩形の４頂点に移動させるよう前記書面資料領域を補正する補正手段と、
この補正手段による補正後の撮影画像から書面資料の画像領域を切り抜く切り抜き手段と、
該切り抜いた矩形部分をスクリーンに投影する投影手段と
を備えたことを特徴とする撮影画像投影装置。 - 前記補正手段は、前記撮影画像における書面資料の画像領域の矩形歪みを補正することを特徴とする請求項１記載の撮影画像投影装置。
- 前記補正手段は、さらに前記撮影画像における書面資料の画像領域の縦横比を補正することを特徴とする請求項１又は２記載の撮影画像投影装置。
- 撮影画像投影装置における撮影画像の補正方法であって、
書面資料が撮影された撮影画像から、該撮影画像の外周から最も近い４直線を撮影対象のエッジ情報として取得する工程と、
この取得する工程により取得されたエッジ情報から前記４直線の４つの交点を求めて四角形の書面資料領域とし、該４交点を前記書面資料領域に外接する最小の矩形の４頂点に移動させるよう前記書面資料領域を補正する工程と、
この補正する工程による補正後の撮影画像から、書面資料の画像領域を切り抜く工程と、
この切り抜く工程で切り抜いた矩形部分をスクリーンに投影する工程と
を含むことを特徴とする撮影画像の補正方法。 - 撮影画像投影装置が有するコンピュータに、
書面資料が撮影された撮影画像から、該撮影画像の外周から最も近い４直線を撮影対象のエッジ情報として取得する取得手段と、
この取得手段により取得されたエッジ情報から前記４直線の４つの交点を求めて四角形の書面資料領域とし、該４交点を前記書面資料領域に外接する最小の矩形の４頂点に移動させるよう前記書面資料領域を補正する補正手段と、
この補正手段による補正後の撮影画像から、書面資料の画像領域を切り抜く切り抜き手段と、
該切り抜いた矩形部分をスクリーンに投影する投影手段と
して機能させるためのプログラム。
Priority Applications (8)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003157384A JP4508553B2 (ja) | 2003-06-02 | 2003-06-02 | 撮影画像投影装置、及び撮影画像の補正方法 |
| US10/858,708 US7412113B2 (en) | 2003-06-02 | 2004-06-01 | Captured image projection apparatus and captured image correction method |
| KR1020057022966A KR100792106B1 (ko) | 2003-06-02 | 2004-06-02 | 포착 이미지 투사장치 및 포착 이미지 정정방법 |
| PCT/JP2004/007999 WO2004107735A1 (en) | 2003-06-02 | 2004-06-02 | Captured image projection apparatus and captured image correction method |
| TW093115728A TWI248761B (en) | 2003-06-02 | 2004-06-02 | Device projecting for photograph image and correction method of the photographing image |
| EP04745695A EP1629665A1 (en) | 2003-06-02 | 2004-06-02 | Captured image projection apparatus and captured image correction method |
| CNB2004800153603A CN100414958C (zh) | 2003-06-02 | 2004-06-02 | 采集图像投影装置以及采集图像校正方法 |
| US12/174,508 US20080285878A1 (en) | 2003-06-02 | 2008-07-16 | Image capturing apparatus and method for correcting captured image |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2003157384A JP4508553B2 (ja) | 2003-06-02 | 2003-06-02 | 撮影画像投影装置、及び撮影画像の補正方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004363736A JP2004363736A (ja) | 2004-12-24 |
| JP4508553B2 true JP4508553B2 (ja) | 2010-07-21 |
Family
ID=33487397
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2003157384A Expired - Fee Related JP4508553B2 (ja) | 2003-06-02 | 2003-06-02 | 撮影画像投影装置、及び撮影画像の補正方法 |
Country Status (7)
| Country | Link |
|---|---|
| US (2) | US7412113B2 (ja) |
| EP (1) | EP1629665A1 (ja) |
| JP (1) | JP4508553B2 (ja) |
| KR (1) | KR100792106B1 (ja) |
| CN (1) | CN100414958C (ja) |
| TW (1) | TWI248761B (ja) |
| WO (1) | WO2004107735A1 (ja) |
Families Citing this family (58)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004198858A (ja) * | 2002-12-20 | 2004-07-15 | Casio Comput Co Ltd | 投影装置 |
| JP2005006228A (ja) * | 2003-06-13 | 2005-01-06 | Casio Comput Co Ltd | プロジェクタ |
| JP4155890B2 (ja) * | 2003-07-15 | 2008-09-24 | カシオ計算機株式会社 | プロジェクタ、プロジェクタの傾斜角度取得方法及び投影像補正方法 |
| JP3969363B2 (ja) * | 2003-07-30 | 2007-09-05 | カシオ計算機株式会社 | プロジェクタ及びプロジェクタの投影像補正方法 |
| JP4631261B2 (ja) * | 2003-09-29 | 2011-02-16 | カシオ計算機株式会社 | 撮影画像投影装置、その画像処理方法及びプログラム |
| JP4561397B2 (ja) * | 2005-02-23 | 2010-10-13 | カシオ計算機株式会社 | 画像取得方法、及びカメラ装置 |
| JP4561399B2 (ja) * | 2005-02-24 | 2010-10-13 | カシオ計算機株式会社 | 画像記録方法、及びカメラ装置 |
| JP2006254271A (ja) * | 2005-03-14 | 2006-09-21 | Times Corporation | 拡大読書器 |
| JP4535381B2 (ja) * | 2005-06-22 | 2010-09-01 | 株式会社エルモ社 | 資料提示装置 |
| WO2007030026A1 (en) * | 2005-09-09 | 2007-03-15 | Industrial Research Limited | A 3d scene scanner and a position and orientation system |
| JP2007078821A (ja) * | 2005-09-12 | 2007-03-29 | Casio Comput Co Ltd | 投影装置、投影方法及びプログラム |
| JP4588000B2 (ja) * | 2006-09-04 | 2010-11-24 | 三星デジタルイメージング株式会社 | 撮像装置および撮像方法 |
| JP4854539B2 (ja) | 2007-02-21 | 2012-01-18 | キヤノン株式会社 | 画像処理装置、その制御方法、及びプログラム |
| US20080226281A1 (en) * | 2007-03-13 | 2008-09-18 | Real D | Business system for three-dimensional snapshots |
| KR100768776B1 (ko) * | 2007-04-20 | 2007-10-22 | 유니챌(주) | 단어 이미지를 입력하는 시스템 및 단어 이미지를 입력하는방법 |
| US8007111B2 (en) * | 2007-10-22 | 2011-08-30 | Seiko Epson Corporation | Projector having image pickup unit, distance measuring unit, image signal processing unit, and projection unit and projection display method |
| JP5217537B2 (ja) * | 2008-03-18 | 2013-06-19 | セイコーエプソン株式会社 | プロジェクタ、電子機器、および、プロジェクタの制御方法 |
| CN101271357B (zh) * | 2008-05-12 | 2011-02-16 | 北京中星微电子有限公司 | 写字板上内容记录方法及装置 |
| JP4583478B2 (ja) | 2008-06-11 | 2010-11-17 | ルネサスエレクトロニクス株式会社 | 設計像と撮影像との重ね合わせ表示方法、表示装置および表示プログラム |
| JP5413002B2 (ja) * | 2008-09-08 | 2014-02-12 | ソニー株式会社 | 撮像装置および方法、並びにプログラム |
| JP5240093B2 (ja) * | 2009-06-25 | 2013-07-17 | 株式会社リコー | 身分証明書撮影システム、身分証明書撮影方法およびプログラム |
| TWI439788B (zh) * | 2010-01-04 | 2014-06-01 | Ind Tech Res Inst | 投影校正系統及方法 |
| JP5141701B2 (ja) * | 2010-02-25 | 2013-02-13 | 株式会社ニコン | プロジェクタ |
| US8212945B2 (en) | 2010-04-01 | 2012-07-03 | Seiko Epson Corporation | Method and apparatus for calibrating a projector for image warping |
| WO2011152166A1 (ja) * | 2010-05-31 | 2011-12-08 | 株式会社Pfu | オーバーヘッドスキャナ装置、画像処理方法、および、プログラム |
| JP4932930B2 (ja) * | 2010-07-02 | 2012-05-16 | ルネサスエレクトロニクス株式会社 | 設計像と撮影像との重ね合わせ表示方法、表示装置および表示プログラム |
| JP5839785B2 (ja) * | 2010-07-06 | 2016-01-06 | キヤノン株式会社 | 投影システム、投影装置及び撮像装置 |
| CN102156972B (zh) * | 2011-04-19 | 2012-07-25 | 清华大学 | 图像倾斜纠正方法及*** |
| JP2013009304A (ja) * | 2011-05-20 | 2013-01-10 | Ricoh Co Ltd | 画像入力装置、会議装置、画像処理制御プログラム、記録媒体 |
| CN102831578B (zh) | 2011-06-15 | 2014-12-17 | 富士通株式会社 | 图像处理方法和图像处理设备 |
| CN102855482A (zh) * | 2012-08-16 | 2013-01-02 | 东莞宇龙通信科技有限公司 | 图片处理方法及装置 |
| CN103593643B (zh) * | 2012-08-16 | 2019-02-12 | 百度在线网络技术（北京）有限公司 | 一种图像识别的方法及*** |
| JP6154109B2 (ja) * | 2012-09-03 | 2017-06-28 | プラス株式会社 | ホワイトボード及び画像補正方法 |
| CN103220482B (zh) * | 2013-03-12 | 2016-07-27 | 广东威创视讯科技股份有限公司 | 一种全自由度调整投影画面位置及尺寸的方法 |
| US9317893B2 (en) | 2013-03-26 | 2016-04-19 | Sharp Laboratories Of America, Inc. | Methods and systems for correcting a document image |
| CN103679638A (zh) * | 2013-12-25 | 2014-03-26 | 广州广电运通金融电子股份有限公司 | 残缺或变形的四边形图像的校正方法 |
| CN103679901B (zh) * | 2013-12-30 | 2017-01-04 | 威海北洋电气集团股份有限公司 | 提高ocr证件识别效率的方法及访客登记一体机 |
| DE102015000377A1 (de) * | 2014-02-07 | 2015-08-13 | Adobe Systems, Inc. | Bereitstellen einer Zeichenhilfe unter Nutzung einer Merkmalserfassung und eines semantischen Kennzeichnens |
| CN103957370B (zh) * | 2014-03-28 | 2017-06-06 | 苏州佳世达光电有限公司 | 具有梯形校正功能的投影***及其梯形校正方法 |
| CN105022983A (zh) * | 2014-04-30 | 2015-11-04 | 聚晶半导体股份有限公司 | 使用多镜头辅助的影像辨识***及其方法 |
| KR102233316B1 (ko) * | 2014-07-31 | 2021-03-29 | 삼성전자주식회사 | 디스플레이 장치, 디스플레이 보정 장치, 디스플레이 보정 시스템 및 디스플레이 보정 방법 |
| US20160110599A1 (en) * | 2014-10-20 | 2016-04-21 | Lexmark International Technology, SA | Document Classification with Prominent Objects |
| WO2017013720A1 (ja) * | 2015-07-17 | 2017-01-26 | 楽天株式会社 | 基準線設定装置、基準線設定方法及び基準線設定プログラム |
| CN105141866B (zh) * | 2015-09-06 | 2018-10-16 | 青岛海信电器股份有限公司 | 一种投影图像校正方法和装置 |
| US20200099864A1 (en) * | 2017-01-26 | 2020-03-26 | Sony Olympus Medical Solutions Inc. | Medical observation apparatus and control method |
| CN110463177A (zh) * | 2017-04-06 | 2019-11-15 | 华为技术有限公司 | 文档图像的校正方法及装置 |
| CN107396076A (zh) * | 2017-08-21 | 2017-11-24 | 深圳大学 | 一种便携式投影校正***、设备及其控制方法 |
| CN110506252B (zh) * | 2017-11-27 | 2021-01-29 | 华为技术有限公司 | 基于图样中标志图形点坐标的转换关系定位终端屏幕 |
| US10477034B2 (en) * | 2018-04-09 | 2019-11-12 | Xerox Corporation | Digital image-paper registration error correction through image shear |
| CN109271981A (zh) * | 2018-09-05 | 2019-01-25 | 广东小天才科技有限公司 | 一种图像处理方法、装置及终端设备 |
| CN109005394B (zh) * | 2018-09-19 | 2019-11-29 | 青岛海信激光显示股份有限公司 | 一种投影图像的校正方法及投影机 |
| CN110276427A (zh) * | 2019-07-05 | 2019-09-24 | 华东师范大学 | 一种基于二维码定位的书法教学转播***及转播方法 |
| CN110460769B (zh) * | 2019-07-05 | 2021-08-17 | 浙江大华技术股份有限公司 | 图像矫正方法、装置、计算机设备和存储介质 |
| CN112437250A (zh) * | 2019-08-26 | 2021-03-02 | 北京三好互动教育科技有限公司 | 一种倾斜拍摄的教学设备 |
| CN112435172A (zh) * | 2019-08-26 | 2021-03-02 | 北京三好互动教育科技有限公司 | 一种图像矫正的方法、装置、存储介质及电子设备 |
| CN113206987B (zh) * | 2021-05-06 | 2023-01-24 | 北京有竹居网络技术有限公司 | 投影显示的方法、装置、终端及非暂时性存储介质 |
| CN113340266A (zh) * | 2021-06-02 | 2021-09-03 | 江苏豪杰测绘科技有限公司 | 一种室内空间测绘***及方法 |
| CN114222188A (zh) * | 2021-12-28 | 2022-03-22 | 深圳小湃科技有限公司 | 基于旋转屏的全屏显示方法、装置、设备及存储介质 |
Family Cites Families (27)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4964066A (en) * | 1986-09-05 | 1990-10-16 | Sharp Kabushiki Kaisha | Device for editing and displaying data recorded on specialized sheets or records |
| JPS6444430A (en) * | 1987-08-12 | 1989-02-16 | Canon Kk | Image inputting device |
| US5187753A (en) | 1989-12-08 | 1993-02-16 | Xerox Corporation | Method and apparatus for identification and correction of document skew |
| US5077811A (en) | 1990-10-10 | 1991-12-31 | Fuji Xerox Co., Ltd. | Character and picture image data processing system |
| DE4318526C2 (de) * | 1992-06-10 | 1999-11-25 | Canon Kk | Bildeingabevorrichtung |
| JPH0620089A (ja) * | 1992-06-30 | 1994-01-28 | Canon Inc | データ入力装置及びデータ処理装置 |
| GB2305050A (en) * | 1995-09-08 | 1997-03-26 | Orad Hi Tec Systems Ltd | Determining the position of a television camera for use in a virtual studio employing chroma keying |
| JP3497660B2 (ja) * | 1996-04-26 | 2004-02-16 | 株式会社東芝 | 液晶プロジェクタ装置 |
| US5940420A (en) * | 1996-10-08 | 1999-08-17 | Trimedyne, Inc. | Split-flow laser cooling cavity |
| GB9711022D0 (en) | 1997-05-28 | 1997-07-23 | Rank Xerox Ltd | Text/image selection from document images |
| JP3436473B2 (ja) * | 1997-06-20 | 2003-08-11 | シャープ株式会社 | 画像処理装置 |
| KR100256973B1 (ko) * | 1997-08-01 | 2000-05-15 | 구자홍 | 플래쉬 메모리의 프로그램 다운로딩 장치 |
| US6310984B2 (en) * | 1998-04-09 | 2001-10-30 | Hewlett-Packard Company | Image processing system with image cropping and skew correction |
| KR100607018B1 (ko) | 1998-06-23 | 2006-08-01 | 샤프 가부시키가이샤 | 화상 처리 장치, 화상 처리 방법 및 화상 처리 프로그램을기록한 매체 |
| JP2000201261A (ja) * | 1998-10-28 | 2000-07-18 | Fujitsu Ltd | 画像読取装置 |
| JP2000341501A (ja) * | 1999-03-23 | 2000-12-08 | Minolta Co Ltd | 画像処理装置および画像処理方法、ならびに画像処理プログラムを記録した記録媒体 |
| US7324139B2 (en) * | 2000-01-20 | 2008-01-29 | Ricoh Company, Ltd. | Digital camera, a method of shooting and transferring text |
| JP3603737B2 (ja) * | 2000-03-30 | 2004-12-22 | 日本電気株式会社 | 移動体追尾方法及びその装置 |
| US7016551B1 (en) * | 2000-04-10 | 2006-03-21 | Fuji Xerox Co., Ltd. | Image reader |
| JP4012710B2 (ja) * | 2001-02-14 | 2007-11-21 | 株式会社リコー | 画像入力装置 |
| JP2002354331A (ja) | 2001-05-25 | 2002-12-06 | Canon Inc | 画像撮影装置および電子機器 |
| US6873732B2 (en) | 2001-07-09 | 2005-03-29 | Xerox Corporation | Method and apparatus for resolving perspective distortion in a document image and for calculating line sums in images |
| US6781618B2 (en) | 2001-08-06 | 2004-08-24 | Mitsubishi Electric Research Laboratories, Inc. | Hand-held 3D vision system |
| US7171630B2 (en) * | 2001-11-06 | 2007-01-30 | Zinio Systems, Inc. | Electronic simulation of interaction with printed matter |
| US7301564B2 (en) * | 2002-07-17 | 2007-11-27 | Hewlett-Packard Development Company, L.P. | Systems and methods for processing a digital captured image |
| US7133573B2 (en) * | 2002-11-26 | 2006-11-07 | Eastman Kodak Company | Document skew accommodation |
| US7171056B2 (en) * | 2003-02-22 | 2007-01-30 | Microsoft Corp. | System and method for converting whiteboard content into an electronic document |
-
2003
- 2003-06-02 JP JP2003157384A patent/JP4508553B2/ja not_active Expired - Fee Related
-
2004
- 2004-06-01 US US10/858,708 patent/US7412113B2/en active Active
- 2004-06-02 CN CNB2004800153603A patent/CN100414958C/zh not_active Expired - Fee Related
- 2004-06-02 EP EP04745695A patent/EP1629665A1/en not_active Ceased
- 2004-06-02 KR KR1020057022966A patent/KR100792106B1/ko active IP Right Grant
- 2004-06-02 WO PCT/JP2004/007999 patent/WO2004107735A1/en active Application Filing
- 2004-06-02 TW TW093115728A patent/TWI248761B/zh not_active IP Right Cessation
-
2008
- 2008-07-16 US US12/174,508 patent/US20080285878A1/en not_active Abandoned
Also Published As
| Publication number | Publication date |
|---|---|
| US20050163396A1 (en) | 2005-07-28 |
| EP1629665A1 (en) | 2006-03-01 |
| TWI248761B (en) | 2006-02-01 |
| CN100414958C (zh) | 2008-08-27 |
| WO2004107735A1 (en) | 2004-12-09 |
| CN1799252A (zh) | 2006-07-05 |
| TW200503531A (en) | 2005-01-16 |
| US20080285878A1 (en) | 2008-11-20 |
| KR20060015327A (ko) | 2006-02-16 |
| US7412113B2 (en) | 2008-08-12 |
| JP2004363736A (ja) | 2004-12-24 |
| KR100792106B1 (ko) | 2008-01-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4508553B2 (ja) | 撮影画像投影装置、及び撮影画像の補正方法 | |
| KR100682651B1 (ko) | 화상처리장치, 화상투영장치, 화상처리방법 및 관련 프로그램이 저장된 기록매체 | |
| US9736441B2 (en) | Display image generating device comprising converting function of resolution | |
| JP4388367B2 (ja) | 電子画像の傾きを修正する方法及び画像処理システム、画像取り込みシステム、並びに、カメラ | |
| JP4363151B2 (ja) | 撮影装置、その画像処理方法及びプログラム | |
| US5596346A (en) | Method and apparatus for applying a function to a localized area of a digital image using a window | |
| KR101343220B1 (ko) | 파노라마 이미지에 대한 실시간 미리 보기 | |
| JP4010754B2 (ja) | 画像処理装置と画像処理方法及びコンピュータ読み取り可能な記録媒体 | |
| TW200419186A (en) | Image processing system, projector, portable device and image processing method | |
| JP2008503121A (ja) | 多種類のアスペクト比で機能する画像センサーおよび表示装置 | |
| JP3206060B2 (ja) | 画像編集装置 | |
| JP2001177716A (ja) | 画像処理方法と画像処理装置 | |
| JPH11215498A (ja) | 画像処理装置および画像処理方法およびプログラム記憶媒体 | |
| JP2005275447A (ja) | 画像処理装置、画像処理方法及びプログラム | |
| JP4561399B2 (ja) | 画像記録方法、及びカメラ装置 | |
| JP4363154B2 (ja) | 撮影装置、その画像処理方法及びプログラム | |
| JP2005303941A (ja) | 補正基準指定装置、及び補正基準指定方法 | |
| JP2004349842A (ja) | 合成画像の補正方法及びプログラム | |
| JP4363153B2 (ja) | 撮影装置、その画像処理方法及びプログラム | |
| JP2005267465A (ja) | 画像処理装置、撮影画像投影装置、画像処理方法及びプログラム | |
| JP2003187257A (ja) | 画像作成システム | |
| JP5061762B2 (ja) | 書画カメラ装置、画像処理方法及びプログラム | |
| JP2007148612A (ja) | 撮影装置、画像処理方法および画像処理プログラム | |
| JPH09130574A (ja) | デジタルカメラ | |
| JP2003233491A (ja) | プリント処理システム、及びプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060519 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080122 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20080527 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080724 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20080806 |
|
| A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20080829 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100308 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100427 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130514 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4508553 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130514 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |