JP3733199B2 - Imaging system and storage medium - Google Patents
Imaging system and storage medium Download PDFInfo
- Publication number
- JP3733199B2 JP3733199B2 JP11962797A JP11962797A JP3733199B2 JP 3733199 B2 JP3733199 B2 JP 3733199B2 JP 11962797 A JP11962797 A JP 11962797A JP 11962797 A JP11962797 A JP 11962797A JP 3733199 B2 JP3733199 B2 JP 3733199B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- imaging
- image
- frames
- storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、撮像プログラムに従って撮像装置で撮像して得られた画像データをコンピュータに転送し、該コンピュータで所定の画像処理を行う画像処理システム等に適用される撮像システム、及び上記撮像プログラムが記憶された記憶媒体に関するものである。
【０００２】
【従来の技術】
従来より、例えば、電荷結合素子（ＣＣＤ：Charge Coupled Device ）で被写体を撮像して画像データを得る撮像装置（撮像ユニット）と、該撮像装置に接続されたコンピュータとから構成された画像処理システムがある。
【０００３】
この画像処理システムでは、撮像装置からコンピュータへのデータ転送処理やコンピュータでの各種処理等を制御するための撮像プログラムがコンピュータで実行されることにより、撮像装置で得られた１フレーム分の画像データをコンピュータに転送し、コンピュータ上で画面表示したり、圧縮処理を行って画像ファイルとして記録媒体に記録する等、所定の画像処理を行うようになされている。
【０００４】
具体的には、先ず、撮像装置は、ＣＣＤで被写体を撮像し、ＣＣＤに蓄積された電荷を１フレーム分の画像データとして一旦メモリに記憶する。このメモリに記憶された１フレーム分の画像データが、コンピュータ内のメインメモリに転送され、コンピュータで所定の画像処理が行われる。
【０００５】
図１０は、この画像処理システムにおいて、使用者からの撮像指示を受けた後に、撮像装置のＣＣＤで撮像して得られた１フレーム分の画像データをコンピュータに転送するまでの流れを時間軸上で示した図である。
【０００６】
上記図１０では、ＣＣＤでの露光期間の終了タイミングを「ｚT ，ａT ，ｂT ，ｃT ，ｄT ，・・・」（黒三角印）で示している。
そして、タイミングｚT とタイミングａT の期間ａCCD というように、あるタイミングとその次のタイミングの期間にＣＣＤに蓄積された電荷が、１フレーム分の画像データとなる。
【０００７】
ここで、ＣＣＤは、使用者からの撮像指示が送られるより以前に稼動するようになされており、例えば、１秒間で３０フレームの画像を得るというように、一定の周期で露光を繰り返している。
【０００８】
そこで、上記図１０に示すように、タイミングｚT とタイミングａT の期間ａCCD 中に使用者からの撮像指示を受け、期間ａCCD にＣＣＤで撮像して得られた画像データをコンピュータに転送するものとすると、先ず、ＣＣＤは、タイミングａT で露光を終了する。
【０００９】
次に、期間ａCCD にＣＣＤに蓄積された電荷（画素情報）は、タイミングａT とタイミングｂT の期間ｂCCD と同じ期間ａMEM に、ＣＣＤの全画素に関して、順番にディジタル変換処理や所定の信号処理等が行われ、１フレーム分の画像データとして撮像装置内のメモリに一旦蓄積される。
【００１０】
次に、撮像装置内のメモリに蓄積された１フレーム分の画像データは、期間ａMEM 後の期間ａPCにコンピュータ内のメインメモリに転送されて蓄積される。
【００１１】
そして、期間ａPC後の期間ａDISP/SAVE に、コンピュータは、そのメインメモリに蓄積された１フレーム分の画像データを画面表示したり、画像ファイルとして記録媒体に記録する等、所定の画像処理を行う。
【００１２】
上述のようにして、撮像装置のＣＣＤでの電荷の蓄積から始まって、その撮像装置で得られた１フレーム分の画像データをコンピュータ内のメインメモリに取り込み、コンピュータ上で画面表示する、という動作を繰り返すことにより、この画像処理システムは、電子的なビュー・ファインダ機能を提供することができる。
また、コンピュータで、撮像装置から転送されてきた１フレーム分の画像データを画像ファイルとして記録媒体に記録することによって、静止画像の撮像も行うことができる。
【００１３】
【発明が解決しようとする課題】
しかしながら、従来の画像処理システムは、１フレームのみの画像の撮像しか行うことができず、連続した複数フレームの画像や、所定数フレームおきの複数フレームの画像を撮像することができなかった。
仮に、従来の画像処理システムで連続した複数フレームの画像や、所定数フレームおきの複数フレームの画像を撮像しようとすると、使用者は、上記図１０に示したようなＣＣＤでの露光のタイミングに合わせて、撮像指示をシステムに与える必要がある。これは、非常に困難であり、実際に、３０フレーム／秒というタイミングに合わせるということは不可能である。
また、コンピュータ上での画面表示や、画像ファイルとして保存する処理も、撮像して得られた１フレームの画像に対してしか行うことができず、これは、システム全体の性能を落とす結果となっていた。
【００１４】
そこで、本発明は、上記の欠点を除去するために成されたもので、連続した複数フレームの画像や所定数フレームおきの複数フレームの画像を容易に撮像可能とし、システムの性能を向上させた撮像システムを提供することを目的とする。
また、連続した複数フレームの画像や所定数フレームおきの複数フレームの画像を容易に撮像可能とすることができ、撮像システムの性能を向上させることができる記録媒体を提供することを目的とする。
【００１５】
【課題を解決するための手段】
本発明は、撮像指示を与える指示手段と、上記指示手段の撮像指示に基づいて、被写体を撮像して得た連続した複数のフレームより構成された画像データを記憶手段に一旦蓄積する撮像手段と、上記撮像手段と通信手段により接続可能であり、上記撮像手段から転送されてきた画像データに所定の画像処理を行う画像処理手段と、上記撮像手段による画像データの任意のフレーム画像データの全て又は一部の上記記憶手段への蓄積が完了したかを検出する検出手段と、上記検出手段の検出結果に基づいて、上記撮像手段が上記指示手段からの撮像指示を受けた後に、上記記憶手段への蓄積が完了した上記任意のフレームの画像データの全て又は一部を上記画像処理手段に転送する転送制御手段と、上記画像処理手段によって処理された画像データを表示する表示手段と、を有し、上記画像処理手段は、上記撮像手段で１度の上記撮像指示により得られた全てのフレームの画像データのうち所定数のフレームの画像データが上記撮像手段から転送された後に、その転送されてきた画像データに順次画像処理を行い上記表示手段に表示することを上記全てのフレームの画像データに対して繰り返し行うことを特徴とする。
また本発明は、コンピュータを、撮像指示を与える指示手段と、上記指示手段の撮像指示に基づいて、被写体を撮像して得た連続した複数のフレームより構成された画像データを記憶手段に一旦蓄積する撮像手段と、上記撮像手段と通信手段により接続可能であり、上記撮像手段から転送されてきた画像データに所定の画像処理を行う画像処理手段と、上記撮像手段による画像データの任意のフレーム画像データの全て又は一部の上記記憶手段への蓄積が完了したかを検出する検出手段と、上記検出手段の検出結果に基づいて、上記撮像手段が上記指示手段からの撮像指示を受けた後に、上記記憶手段への蓄積が完了した上記任意のフレームの画像データの全て又は一部を上記画像処理手段に転送する転送制御手段と、上記画像処理手段によって処理された画像データを表示する表示手段と、して機能させる撮像プログラムを記憶したコンピュータ読み取り可能な記憶媒体であって、上記画像処理手段は、上記撮像手段で１度の上記撮像指示により得られた全てのフレームの画像データのうち所定数のフレームの画像データが上記撮像手段から転送された後に、その転送されてきた画像データに順次画像処理を行い上記表示手段に表示することを上記全てのフレームの画像データに対して繰り返し行うことを特徴とする。
【００１６】
【発明の実施の形態】
以下、本発明の実施の形態について図面を用いて説明する。
【００１７】
まず、第１の実施の形態について説明する。
【００１８】
本発明に係る撮像システムは、例えば、図１に示すような画像処理システム１００に適用される。
【００１９】
この画像処理システム１００は、上記図１に示すように、撮像装置（撮像ユニット）１０と、コンピュータ２０とを備え、撮像装置１０は、コンピュータ２０に接続された構成としている。
【００２０】
撮像装置１０は、レンズユニット１１と、レンズユニット１１の出射光が結像される撮像素子１２と、撮像素子１２の出力が供給されるアナログ／ディジタル（Ａ／Ｄ）コンバータ１３と、Ａ／Ｄコンバータ１３の出力が供給される撮像信号処理ユニット１４と、撮像信号処理ユニット１４の出力が各々供給される変換テーブル１５及び記録媒体１７とを備えている。
また、撮像装置１０は、撮像信号処理ユニット１４、変換テーブル１５、及び記録媒体１７を各々制御する制御ユニット１６と、記録媒体１７及び制御ユニット１６と各々接続された外部接続用インターフェース回路１８とを備えている。
【００２１】
一方、コンピュータ２０は、外部接続用インターフェース回路２１と、外部接続用インターフェース回路２１に各々接続されたＣＰＵ（Central Processing Unit ）２３、表示装置２４、及び記録装置２５及びメインメモリ２５と、メインメモリ２５に対して出力するＲＯＭ（Read Only Memory）等の内部記憶装置２７とを備えている。
【００２２】
上述のような画像処理システム１００では、コンピュータ２０の内部記憶装置２６に撮像プログラムが予め設定されており、この撮像プログラムをコンピュータ２０が実行することにより、撮像装置１０で撮像して得られた画像データがコンピュータ２０に転送され、コンピュータ２０で所定の画像処理が行われるようになされている。
【００２３】
尚、撮像プログラムについての詳細は後述するが、この撮像プログラムが設定された内部記憶装置２６は、本発明に係る記憶媒体を適用したものである。
また、内部記憶装置２６をコンピュータ２０内部に設ける構成としたが、外部記憶装置としてコンピュータ２０外部に設けるようにしてもよい。
【００２４】
まず、画像処理システム１００の一連の動作について説明する。
【００２５】
撮像装置１０において、図示していない被写体からの光は、レンズユニット１１を介して撮像素子１２に対して出射される。
【００２６】
撮像素子１２は、例えば、電荷結合素子（ＣＣＤ：Charge Coupled Device ）からなる。このＣＣＤ１２の図示していないセンサ部で、レンズユニット１１の出射光（撮像画像の情報）が露光され、ＣＣＤ１２内に電荷として蓄積される。
【００２７】
Ａ／Ｄコンバータ１３は、ＣＣＤ１２に蓄積された電荷を、ＣＣＤ１２の全画素に関して順番に読み出し、ディジタル化して撮像信号処理ユニット１４に供給する。
【００２８】
撮像信号処理ユニット１４は、例えば、ＤＳＰ（Digital Signal Processor）からなり、制御ユニット１６の制御に従って、Ａ／Ｄコンバータ１３からの画像データに所定の信号処理を行って輝度／色差データに変換する。
【００２９】
撮像信号処理ユニット１４で得られた輝度／色差データは、制御ユニット１６の制御により、特定の横方向の大きさと縦方向の大きさを持った矩形領域の輝度／色差データ、例えば、横方向３２０、縦方向２４０画素の大きさの輝度／色差データのみを、ＣＣＤ１２における読出順序に従ってメモリ１７に一旦保存する。
【００３０】
したがって、撮像装置１０のメモリ１７には、ＣＣＤ１２に蓄積された電荷が、横方向３２０、縦方向２４０画素の大きさの輝度／色差で表現された１フレーム分の画像データとして一旦記憶されることとなる。
【００３１】
ここで、詳細は後述するが、撮像装置１０のメモリ１７は、複数フレーム分の画像データを蓄積できるようになされている。
【００３２】
そこで、この画像処理システム１００では、撮像装置１０において、上述したようにして１フレーム分の画像データをメモリ１７に蓄積した後、同様にして次に得られた１フレーム分の画像データをメモリ１７に蓄積する。このようにして、撮像装置１０は、順次１フレーム分の画像データをメモリ１７に蓄積する。
この結果、撮像装置１０のメモリ１７には、複数フレーム分の画像データが蓄積されることとなる。
【００３３】
一方、コンピュータ２０においては、上述したように、撮像装置１０のメモリ１７に記憶された複数フレーム分の画像データを取り込むための処理や、その取り込んだ画像データに対する各種処理等を行うための撮像プログラムが、内部記憶装置２７に予め設定されている。
【００３４】
そこで、内部記憶装置２７の撮像プログラムは、メインメモリ２６にロードされる。
【００３５】
メインメモリ２６は、撮像プログラムをロードしたり、その撮像プログラムを実行するためのメモリであり、また、撮像装置１０からの画像データが転送されるメモリでもある。
【００３６】
そして、ＣＰＵ２２が、メインメモリ２６にロードされた撮像プログラムを実行することにより、画像処理システム１００は、以下のように動作する。
【００３７】
先ず、上述のようにして撮像装置１０のメモリ１７に記憶された画像データ、すなわち各々が横方向３２０、縦方向２４０画素の大きさの輝度／色差で表現された複数フレーム分の画像データは、制御ユニット１６の制御により、外部接続用インターフェース回路１８を介して、コンピュータ２０に対して読み出される。
【００３８】
撮像装置１０の外部接続用インターフェース回路１８は、例えば、日米共通の規格でできたＩＣカードであるＰＣカード（Personal Computer Memory Card ）規格に準拠したものであり、コンピュータ２０の外部接続用インターフェース回路２１も同規格に準拠したものである。
したがって、撮像装置１０とコンピュータ２０は、これらの外部接続用インターフェース回路１８及び２１により、データのやり取りが行われることとなる。
【００３９】
これらの外部接続用インターフェース回路１８及び２１により、撮像装置１０からコンピュータ２０に転送された複数フレーム分の画像データは、コンピュータ２０のメインメモリ２６に記憶される。
【００４０】
そして、メインメモリ２６に記憶された複数フレーム分の画像データは、例えば、表示装置２４で画面表示されたり、或いは、記録装置２５で画像ファイルとして図示していない記録媒体に記録される。
【００４１】
つぎに、この画像処理システム１００での複数フレーム分の画像の撮像について具体的に説明する。
【００４２】
尚、以下の説明では、例えば、最大で４フレーム分の画像を撮像するものとする。
また、横方向３２０、縦方向２４０画素の大きさの１フレーム分の画像データにおいて、１画素当たりの情報は、例えば、２ｂｙｔｅからなるものとする。
【００４３】
まず、上述した撮像装置１０のメモリ１７は、少なくとも６１４，４００ｂｙｔｅ（１５３，６００ｂｙｔｅ×４フレーム）の容量を有するものである。これは、１フレーム分の画像データ量が１５３，６００ｂｙｔｅであるため、この画像データを最大４フレーム分蓄積するためには、少なくとも６１４，４００ｂｙｔｅ（１５３，６００ｂｙｔｅ×４フレーム）分必要であるためである。
【００４４】
また、この画像処理システム１００では、使用者の指示に基づいて、コンピュータ２０が上述した撮像プログラムを実行することにより、撮像装置１０のメモリ１７に蓄積する画像のフレーム数ＣＳと、メモリ１７に蓄積する画像のフレーム間隔ＣＴとを撮像装置１０に設定するようになされている。
これにより、撮像装置１０は、連続した複数フレームの画像データをメモリ１７に蓄積したり、一定のフレーム間隔で複数フレームの画像データをメモリ１７に蓄積する。
【００４５】
例えば、撮像装置１０に、フレーム数ＣＳ「４」、フレーム間隔ＣＴ「１」が設定された場合、撮像装置１０は、１フレーム間隔で４フレーム分の画像データをメモリ１７に蓄積する。
【００４６】
この結果、メモリ１７は、図２に示すように、領域Ｍ１（アドレス０〜１５３，６００）にあるフレームの画像データが蓄積され、その次の領域Ｍ２（アドレス１５３，６００〜３０７，２００）に１フレームおいた次のフレームの画像データが蓄積され、次の領域Ｍ３（アドレス３０７，２００〜４６０，８００）に１フレームおいた次のフレームの画像データが蓄積され、次の領域Ｍ４（アドレス４６０，８００〜６１４，４００）に１フレームおいた次のフレームの画像データが蓄積されることとなる。
そして、領域Ｍ４以降の領域、すなわち６１４，４００ｂｙｔｅ目以降の領域は、画像データが蓄積されない空き領域Ｅとなる。
【００４７】
また、この画像処理システム１００では、使用者の指示に基づいて、コンピュータ２０が上述した撮像プログラムを実行することにより、メモリ１７へ画像データを蓄積する際のモード（画像蓄積モード）を撮像装置１０に設定するようになされている。
これにより、撮像装置１０は、設定された画像蓄積モードに基づいて、メモリ１７へ画像データを蓄積する。
【００４８】
具体的には、画像蓄積モードとして、例えば、「上書モード」、「画像蓄積後停止モード」、「蓄積停止モード」が用意されている。
【００４９】
そこで、コンピュータ２０により撮像装置１０に、例えば、フレーム数ＣＳ「４」、フレーム間隔ＣＴ「１」が設定され、画像蓄積モードが「上書モード」に設定された場合、撮像装置１０は、図３（ａ）に示すように、メモリ１７の領域Ｍ１にフレームＦ(n+0) の画像データを蓄積し、領域Ｍ２にフレームＦ(n+0) から１フレームおいたフレームＦ(n+2) の画像データを蓄積し、領域Ｍ３にフレームＦ(n+2) から１フレームおいたフレームＦ(n+4) の画像データを蓄積し、領域Ｍ４にフレームＦ(n+4) から１フレームおいたフレームＦ(n+6) の画像データを蓄積する。
そして、フレームＦ(n+0) 、Ｆ(n+2) 、Ｆ(n+4) 、Ｆ(n+6) の４フレーム分の画像データをメモリ１７の領域Ｍ１〜Ｍ４に蓄積した後、続けて、フレームＦ(n+6) から１フレームおいたフレームＦ(n+8) を領域Ｍ１に上書きする。以降のフレームについても同様にして、領域Ｍ２〜Ｍ４に上書きする。
【００５０】
上述のように、撮像装置１０に「上書モード」が設定されると、メモリ１７の領域Ｍ１〜Ｍ４には、フレーム間隔ＣＴ毎に、フレーム数ＣＳ分の画像データが上書きされる。
【００５１】
また、コンピュータ２０により撮像装置１０に、例えば、フレーム数ＣＳ「４」、フレーム間隔ＣＴ「２」が設定され、画像蓄積モードが「画像蓄積後停止モード」に設定された場合、撮像装置１０は、上記図３（ｂ）に示すように、メモリ１７の領域Ｍ１にフレームＦ(n+0) の画像データを蓄積し、領域Ｍ２にフレームＦ(n+0) から２フレームおいたフレームＦ(n+3) の画像データを蓄積し、領域Ｍ３にフレームＦ(n+3) から２フレームおいたフレームＦ(n+6) の画像データを蓄積し、領域Ｍ４にフレームＦ(n+6) から２フレームおいたフレームＦ(n+9) の画像データを蓄積する。
そして、フレームＦ(n+0) 、Ｆ(n+3) 、Ｆ(n+6) 、Ｆ(n+9) の４フレーム分の画像データをメモリ１７の領域Ｍ１〜Ｍ４に蓄積した後、メモリ１７への画像データの蓄積を停止する。
【００５２】
また、コンピュータ２０により撮像装置１０に、画像蓄積モードが「蓄積停止モード」に設定された場合、撮像装置１０は、メモリ１７への画像データの蓄積は行わない。
【００５３】
つぎに、上述のようにして撮像装置１０のメモリ１７に蓄積された画像データをコンピュータ１０に転送するための上述した撮像プログラムについて具体的に説明する。
【００５４】
この撮像プログラムは、例えば、図４に示すフローチャートに従ったプログラムであり、この撮像プログラムがコンピュータ２０のＣＰＵ２３で実行されることにより、撮像装置１０のメモリ１７に記憶された画像データがコンピュータ２０のメインメモリ２６に転送されるようになされている。
【００５５】
すなわち、例えば、使用者により、連続した４フレームの画像を撮像する撮像モードが画像処理システム１００に予め設定されているものとすると、先ず、使用者は、画像処理システム１００に撮像指示を与えるために、コンピュータ１０に設けられている図示していない所定のキーを押下する（ステップＳ４０１）。尚、上記所定のキーは、予めレリーズボタンに割り当てられているものとする。
【００５６】
次に、上記撮像モードにより、撮像装置１０の制御ユニット１６に、フレーム数ＣＳ「４」、フレーム間隔ＣＴ「０」を設定すると共に、画像蓄積モードを「画像蓄積後停止モード」に設定する（ステップＳ４０２）。
これにより、撮像装置１０は、ＣＣＤ１２で連続した４フレームの画像データを得てメモリ１７の領域Ｍ１〜Ｍ４に順次蓄積した後、新たな画像データの蓄積は行わない。
【００５７】
次に、カウンタｎに、初期値として「１」を設定する（ステップＳ４０３）。
【００５８】
次に、撮像装置１０のメモリ１７のｎ番目の領域Ｍｎに１フレーム分の画像データが蓄積されたか否かを判別し（ステップＳ４０４）、１フレーム分の画像データが未だ蓄積中であった場合には、次のステップには進まず、蓄積終了待ち状態となる。
【００５９】
ステップＳ４０４の判別の結果、撮像装置１０のメモリ１７のｎ番目の領域Ｍｎに１フレーム分の画像データが蓄積終了と判別された場合、そのｎ番目の領域Ｍｎに蓄積された１フレーム分の画像データを、コンピュータ２０のメインメモリ２６に転送する（ステップＳ４０５）。
【００６０】
次に、次の領域Ｍ（ｎ＋１）に蓄積された１フレーム分の画像データに対する処理を行うために、フレームカウンタｎをカウントアップ（ｎ＝ｎ＋１）する（ステップＳ４０６）。
【００６１】
そして、ステップＳ４０６でフレームカウンタｎがカウントアップされた結果、そのｎの値が、ステップＳ４０２で設定されたフレーム数ＣＳ（＝４）よりも大きいか否かを判別する（ステップＳ４０７）。
【００６２】
ステップＳ４０７の判別の結果、「ｎ＞ＣＳ（＝４）」であった場合、すなわち撮像装置１０のメモリ１７に蓄積された４フレーム分の画像データ全てをコンピュータ２０に転送終了した場合、本処理を終了する。
【００６３】
また、ステップＳ４０７の判別の結果、「ｎ＞ＣＳ（＝４）」でなかった場合、すなわち撮像装置１０のメモリ１７に蓄積された４フレーム分の画像データをコンピュータ２０に転送中であった場合、ステップＳ４０４に戻り、次のフレームの画像データをコンピュータ２０に転送する処理を行う。
【００６４】
上述のような撮像プログラムを実行した結果、撮像装置１０のメモリ１７の各領域Ｍ１〜Ｍ４に蓄積された４フレーム分の画像データがコンピュータ２０に転送されることとなる。
【００６５】
つぎに、図５は、上述のようにして使用者から撮像指示を受けた後、撮像装置１０のＣＣＤ１２で４フレーム分の画像を露光して、この結果得られた４フレーム分の画像データがコンピュータ２０に取り込まれるまでの流れを時間軸上で示した図である。
【００６６】
上記図５では、ＣＣＤ１２での露光期間の終了タイミングを「ＺT ，ＡT ，ＢT ，ＣT ，ＤT ，・・・」（黒三角印）で示している。
そして、タイミングＺT とタイミングＡT の期間ＡCCD というように、あるタイミングとその次のタイミングの期間にＣＣＤ１２に蓄積された電荷が、１フレーム分の画像データとなる。
【００６７】
ここで、ＣＣＤ１２は、使用者からの撮像指示が送られるより以前に稼動するようになされており、例えば、１秒間で３０フレームの画像を得るというように、一定の周期で露光を繰り返している。
【００６８】
そこで、上記図５に示すように、タイミングＺT とタイミングＡT の期間ＡCCD 中に使用者からの撮像指示を受け、その期間ＡCCD 、タイミングＡT とタイミングＢT の期間ＢCCD 、タイミングＢT とタイミングＣT の期間ＣCCD 、及びタイミングＣT とタイミングＤT の期間ＤCCD にＣＣＤ１２で得られた４フレーム分の画像データをコンピュータに転送するものとすると、先ず、ＣＣＤは、タイミングＡT ，ＢT ，ＣT ，ＤT で露光を順次終了する。
【００６９】
このとき、期間ＡCCD にＣＣＤ１２に蓄積された電荷（画素情報）は、期間ＢCCD と同じ期間ＡMEM に、ＣＣＤ１２の全画素に関して、順番にＡ／Ｄコンバータ１３及び撮像信号処理ユニット１４を介して、１フレーム分の画像データとして、すなわち横方向３２０、縦方向２４０画素の大きさの輝度／色差で表現された画像データとしてメモリ１７の領域Ｍ１に蓄積される。
また、期間ＢCCD にＣＣＤ１２に蓄積された電荷（画素情報）も同様にして、期間ＣCCD と同じ期間ＢMEM に、ＣＣＤ１２の全画素に関して、順番にＡ／Ｄコンバータ１３及び撮像信号処理ユニット１４を介して、１フレーム分の画像データとしてメモリ１７の領域Ｍ２に蓄積される。
また、期間ＣCCD にＣＣＤ１２に蓄積された電荷（画素情報）も同様にして、期間ＤCCD と同じ期間ＣMEM に、ＣＣＤ１２の全画素に関して、順番にＡ／Ｄコンバータ１３及び撮像信号処理ユニット１４を介して、１フレーム分の画像データとしてメモリ１７の領域Ｍ３に蓄積される。
また、期間ＤCCD にＣＣＤ１２に蓄積された電荷（画素情報）も同様にして、タイミングＤT とタイミングＥT の期間ＥCCD と同じ期間ＤMEM に、ＣＣＤ１２の全画素に関して、順番にＡ／Ｄコンバータ１３及び撮像信号処理ユニット１４を介して、１フレーム分の画像データとしてメモリ１７の領域Ｍ４に蓄積される。
【００７０】
つぎに、コンピュータ２０で行われる画像処理について具体的に説明する。
【００７１】
例えば、コンピュータ２０は、上述のようにして撮像装置１０から転送されてきた４フレーム分の画像データ全てを、所定フォーマット方式により画像ファイルとしてコンピュータ２０に内蔵されたハードディスク（記録装置２５）に記録する、或いは、記録装置２５により、図示していない記録媒体に記録することができるようになされている。
【００７２】
このとき、コンピュータ２０は、表示装置２４に、例えば、図６に示すような使用者に記録する画像を選択させるための画面を表示する。
【００７３】
すなわち、表示装置２４には、上記図６に示すウィンドウが画面表示される。この画面は、コンピュータ２０に転送されたきた４フレームの画像データに基づいた画像６０１〜６０３と、各画像に対応したプッシュボタン６０４〜６０５からなる。
尚、上記図６では、３つの画像６０１〜６０３のみが表示されいるが、残りの１つの画像は、例えば、同じ画面上のキー６０５を操作することにより、画面が移動して表示されるようになされている。
【００７４】
そこで、使用者は、表示装置２４に表示された画面を見ながら、図示していないマウスやキーボード等のコンピュータ２０の入力デバイスを用いて、プッシュボタン６０４〜６０５を押すことによって、所望の画像を選択する。
【００７５】
これにより、コンピュータ２０は、画面上でどのプッシュボタンが押されたかを認識し、押されたプッシュボタンに対応する画像をファイルとして、上述したハードディスク等に保存する。
【００７６】
上述のように、第１の実施の形態では、撮像装置１０に複数フレームの画像データが蓄積可能なメモリ１７を設け、ＣＣＤ１２で撮像して得られた１フレームの画像データを順次メモリ１７に蓄積するように構成したことにより、この画像処理システム１００は、複数フレームの画像を容易に撮像することができる。これにより、コンピュータ２０でも、複数フレームの画像に対して所定の画像処理を行うことができるため、システム性能を向上させることができる。
【００７７】
また、撮像装置１０のメモリ１７に蓄積する画像のフレーム数ＣＳ、及びメモリ１７に蓄積する画像のフレーム間隔ＣＴを設定し、この設定に従って撮像装置１０がメモリ１７に画像データを蓄積するように構成したことにより、この画像処理システム１００は、連続した複数フレームの画像や、一定フレームおきの複数フレームの画像を容易に撮像することができる。したがって、コンピュータ２０でも、連続した複数フレームの画像や、一定フレームおきの複数フレームの画像に対して所定の画像処理を行うことができるため、システム性能をさらに向上させることができる。
【００７８】
さらに、撮像装置１０からコンピュータ２０に転送された連続した複数フレームの画像データ、或いは一定フレームおきの複数フレームの画像データのうち、どの画像データをコンピュータ２０で処理するかを、コンピュータ２０の表示装置２４の画面上で選択できるように構成したことにより、使用者は、撮像装置１０で得られた複数フレームの画像のうち所望する画像を容易に選択することができ、選択した画像を画像ファイルとして保存したり、その画像に対してのみ所定の画像処理等を行うことができる。したがって、システム性能をさらに向上させることができる。
【００７９】
尚、上述した第１の実施の形態では、４フレームの画像を撮像する場合を例としたが、これに限らず、撮像装置１０のメモリ１７に蓄積する画像のフレーム数ＣＳ、及びメモリ１７に蓄積する画像のフレーム間隔ＣＴを任意に設定することによって、撮像装置１０のメモリ１７に蓄積可能なフレーム数であれば、任意のフレーム数分の画像を、任意のフレーム間隔で撮像してコンピュータ２０に取り込むことができるのは言うまでもない。
【００８０】
また、上記図４に示したフローチャート（撮像プログラム）において、撮像装置１０のメモリ１７に１フレーム分の画像データが蓄積済か否かを判別し（ステップＳ４０４）、蓄積済であった場合に、その蓄積された１フレーム分の画像データをコンピュータ２０に転送する（ステップＳ４０５）ようにしたが、例えば、ステップＳ４０４で、１フレーム分の画像データのうちどれだけメモリ１７に蓄積されたかを検出するようにし、ステップＳ４０５で、メモリ１７に蓄積された画像データが１フレーム分に満たない場合でも、その蓄積された分の画像データを順次コンピュータ２０に転送するようにしてもよい。
これにより、コンピュータ２０の転送すべき全ての画像データの転送を終了するまでの時間を短縮することができるため、システム全体の処理時間を短縮することができる。
【００８１】
また、撮像装置１０で得られた複数フレームの画像データ全てをコンピュータ２０に転送した後に、コンピュータ２０の表示装置２４で画面表示するようにしたが、例えば、先ず、あるフレームの画像データをコンピュータ２０に転送した後、その画像データをコンピュータ２０の表示装置２４で画面表示し、次に、その次のフレームの画像データをコンピュータ２０に転送した後、その画像データをコンピュータ２０の表示装置２４で画面表示する、というように、画像データの転送と画面表示を順次繰り返して行うようにしてもよい。
これにより、使用者は、撮像装置１０で１フレーム分の画像が撮像される度に、どのような画像が撮像されたかを画面上で確認することができる。例えば、４フレームの画像データ全てがコンピュータ２０に転送されていなくても、１フレーム目の画像データの転送が終了した時点で、使用者は即座に、その１フレーム目の画像を確認することができる。
【００８２】
また、撮像装置１０では、輝度／色差で表現された画像データを得るようにしたが、例えば、Ｒ５ｂｉｔ、Ｇ５ｂｉｔ、Ｂ５ｂｉｔの形式の画像データや、パレット番号形式の画像データを得るようにしてもよい。
この場合、撮像装置１０において、撮像信号処理ユニット１４で得られた輝度／色差データは、制御ユニット１６の制御により、輝度／色差データをＲ５ｂｉｔ、Ｇ５ｂｉｔ、Ｂ５ｂｉｔの形式のデータに変換したり、２５６色のパレットの色番号に変換するための変換テーブル１５の入力に与えられ、この変換テーブル１５の出力データのうち、特定の横方向の大きさと縦方向の大きさを持った矩形領域のデータのみが、ＣＣＤ１２における読出順序に従ってメモリ１７に一旦保存される。
【００８３】
つぎに、第２の実施の形態について説明する。
【００８４】
上述した第１の実施の形態では、使用者からの撮像指示を受けた後の連続した複数フレームの画像、或いは、一定フレームおきの複数フレームの画像を撮像することとしたが、この第２の実施の形態では、例えば、使用者から撮像指示を受けた時点での画像と、その画像に連続した１フレーム前の画像と、１フレーム後の画像との３つの画像を撮像する。
【００８５】
尚、この第２の実施の形態で用いる画像処理システムの構成は、上記図１に示した画像処理システム１００と同様であるため、その詳細は省略し、上記図１を用いて以下の説明を行う。また、第１の実施の形態と異なる部分についてのみ具体的に説明する。
【００８６】
まず、撮像装置１０で得られる１フレームの画像データは、上述した第１の実施の形態と同様に、例えば、輝度／色差で表現された横方向３２０、縦方向２４０画素の大きさのデータであり、１画素当たりの情報は、２ｂｙｔｅからなるものとする。
【００８７】
そこで、撮像装置１０のメモリ１７は、少なくとも４６０，８００ｂｙｔｅ（１５３，６００ｂｙｔｅ×３フレーム）の容量を有する。これは、１フレーム分の画像データ量が１５３，６００ｂｙｔｅであるため、この画像データを３フレーム分蓄積するためには、少なくとも４６０，８００ｂｙｔｅ（１５３，６００ｂｙｔｅ×３フレーム）分必要であるためである。
【００８８】
このメモリ１７には、上述した第１の実施の形態と同様にして撮像装置１０に設定されたフレーム数ＣＳとフレーム間隔ＣＴに従って、３フレーム分の画像データが蓄積される。
【００８９】
この結果、メモリ１７は、図７に示すように、領域Ｍ１（アドレス０〜１５３，６００）に１フレーム分の画像データが蓄積され、その次の領域Ｍ２（アドレス１５３，６００〜３０７，２００）に１フレーム分の画像データが蓄積され、次の領域Ｍ３（アドレス３０７，２００〜４６０，８００）に１フレーム分の画像データが蓄積されることとなる。
そして、領域Ｍ３以降の領域、すなわち４６０，８００ｂｙｔｅ目以降の領域は、画像データが蓄積されない空き領域Ｅとなる。
【００９０】
上述のようなメモリ１７に蓄積された３フレーム分の画像データは、例えば、図８に示すフローチャートに従った撮像プログラムにより、コンピュータ２０に転送されるようになされている。
【００９１】
すなわち、コンピュータ２０の内部記憶装置２６には、上述した第１の実施の形態で扱った上記図４の撮像プログラムの代わりに、上記図８の撮像プログラムが予め設定されており、この撮像プログラムをコンピュータ２０が実行することにより、撮像装置１０で撮像して得られた３フレーム分の画像データがコンピュータ２０に転送されるようになされている。
【００９２】
尚、上記図８の撮像プログラムが設定された内部記憶装置２６は、本発明に係る記憶媒体を適用したものである。
【００９３】
具体的には、使用者からの撮像指示を受けた時点を中心とする連続した３フレームの画像を撮像する撮像モード、及び画像蓄積モードとして「上書モード」が画像処理システム１００に予め設定されているものとすると、先ず、使用者からの撮像指示を受ける前において、上記撮像モードにより、撮像装置１０の制御ユニット１６に、フレーム数ＣＳ「３」、フレーム間隔ＣＴ「０」を設定すると共に、画像蓄積モードを「上書モード」に設定する（ステップＳ８０１）。
これにより、撮像装置１０は、使用者からの撮像指示を受けるまで、ＣＣＤ１２で順次得られた１フレーム分の画像データを順次メモリ１７の領域Ｍ１〜Ｍ３に蓄積し、その後、次のフレームの画像データをメモリ１７の領域Ｍ１に上書きすると、いうように、メモリ１７へ画像データを蓄積し続ける。
【００９４】
次に、使用者は、画像処理システム１００に撮像指示を与えるために、コンピュータ１０に設けられている図示していない所定のキーを押下する。
この操作が行われたか否かをコンピュータ１０は判別し（ステップＳ８０２）、この判別の結果、使用者からの撮像指示がなかった場合には、撮像指示待ち状態となり、使用者からの撮像指示があった場合に次のステップＳ８０３に進む。尚、上記所定のキーは、予めレリーズボタンに割り当てられているものとする。
【００９５】
次のステップＳ８０３では、撮像装置１０の制御ユニット１６に、フレーム数ＣＳ「１」、フレーム間隔ＣＴ「０」を設定すると共に、画像蓄積モードを「画像蓄積後停止モード」に設定する（ステップＳ８０３）。
【００９６】
このステップＳ８０３の処理により、撮像装置１０は、使用者からの撮像指示を受けた時点に、蓄積中のフレームの画像データを蓄積し終えた後、次に連続する１フレーム分の画像データをメモリ１７に蓄積して、その後の蓄積は行わないこととなる。
【００９７】
また、ステップＳ８０３では、撮像装置１０がメモリ１７への画像データの蓄積を停止したとき、最後に蓄積を行った領域の次の領域を領域情報Ｍｍに設定する。
例えば、最後に蓄積が行われた領域が領域Ｍ１であった場合には領域Ｍ２を領域情報Ｍｍに設定し、最後に蓄積が行われた領域が領域Ｍ２であった場合には領域Ｍ３を領域情報Ｍｍに設定し、最後に蓄積が行われた領域が領域Ｍ３であった場合には領域Ｍ１を領域情報Ｍｍに設定する。
したがって、このときの領域情報Ｍｍには、メモリ１７に蓄積した複数フレームの画像データのうち最も過去フレームの画像データが蓄積されている領域が設定される。
このような領域情報Ｍｍは、ステップＳ８０３以降の後述する処理ステップで、Ｍ１→Ｍ２→Ｍ３→Ｍ１→Ｍ２・・・の順で更新される、すなわち画像データの蓄積順序に更新される。
【００９８】
次に、転送カウンタｎに、初期値として「１」を設定する（ステップＳ８０４）。
【００９９】
次に、上述した領域情報Ｍｍで示されるメモリ１７の領域（以下、領域Ｍｍと言う）に、１フレーム分の画像データが蓄積されたか否かを判別し（ステップＳ８０５）、１フレーム分の画像データが未だ蓄積中であった場合には、次のステップには進まず、蓄積終了待ち状態となる。
【０１００】
ステップＳ８０５の判別の結果、撮像装置１０のメモリ１７の領域Ｍｍに１フレーム分の画像データが蓄積終了と判別された場合、その領域Ｍｍに蓄積された１フレーム分の画像データを、コンピュータ２０のメインメモリ２６に転送する（ステップＳ８０６）。
【０１０１】
次に、領域Ｍｍの次の領域に蓄積された１フレーム分の画像データに対する処理を行うために、領域Ｍｍをその次の領域に更新する。また、転送カウンタｎをカウントアップ（ｎ＝ｎ＋１）する（ステップＳ８０７）。
【０１０２】
そして、ステップＳ８０７で転送カウンタｎがカウントアップされた結果、そのｎの値が「３」より大きいか否かを判別する（ステップＳ８０８）。
【０１０３】
ステップＳ８０８の判別の結果、「ｎ＞３」であった場合、すなわち撮像装置１０のメモリ１７に蓄積された３フレーム分の画像データ全てをコンピュータ２０に転送終了した場合、本処理を終了する。
【０１０４】
また、ステップＳ８０８の判別の結果、「ｎ＞３」でなかった場合、すなわち撮像装置１０のメモリ１７に蓄積された３フレーム分の画像データをコンピュータ２０に転送中であった場合、ステップＳ８０５に戻り、次の領域に蓄積された画像データをコンピュータ２０に転送する処理を行う。
【０１０５】
上述のような撮像プログラムを実行した結果、撮像装置１０のメモリ１７には、使用者から撮像指示を受けた時点を中心とする連続した３フレームの画像データが蓄積され、その３フレームの画像データが最も過去のフレームから順次コンピュータ２０に転送されることとなる。
【０１０６】
つぎに、図９は、上述のようにして使用者から撮像指示を受ける以前の撮像装置１０の動作と、使用者から撮像指示を受けた以降の撮像装置１０の動作と、撮像装置１０で得られた３フレーム分の画像データがコンピュータ２０に取り込まれるまでの流れを時間軸上で示した図である。
【０１０７】
この図９を用いて、使用者から撮像指示を受けた時点を中心とする連続した３フレーム分の画像をＣＣＤ１２で露光してからコンピュータ２０に転送するまでの流れを時間軸に沿って以下説明する。
【０１０８】
上記図９では、ＣＣＤ１２での露光期間の終了タイミングを「ＡT ，ＢT ，ＣT ，ＤT ，ＥT ，・・・」（黒三角印）で示している。
そして、タイミングＡT とタイミングＢT の期間ＢCCD というように、あるタイミングとその次のタイミングの期間にＣＣＤ１２に蓄積された電荷が、１フレーム分の画像データとなる。
【０１０９】
先ず、タイミングＤT とタイミングＥT の期間ＥCCD 中に使用者からの撮像指示を受けるものとすると、その撮像指示を受ける以前において、ＣＣＤ１２は、タイミングＡT ，ＢT ，ＣT ，ＤT ，ＥT で露光を順次終了する。
【０１１０】
このとき、期間ＡCCD にＣＣＤ１２に蓄積された電荷（画素情報）は、期間ＢCCD と同じ期間ＡMEM に、ＣＣＤ１２の全画素に関して、順番にＡ／Ｄコンバータ１３及び撮像信号処理ユニット１４を介して、１フレーム分の画像データとして、すなわち横方向３２０、縦方向２４０画素の大きさの輝度／色差で表現された画像データとしてメモリ１７の領域Ｍ１に蓄積される。
また、期間ＢCCD にＣＣＤ１２に蓄積された電荷（画素情報）も同様にして、期間ＣCCD と同じ期間ＢMEM に、１フレーム分の画像データとしてメモリ１７の領域Ｍ２に蓄積される。
また、期間ＣCCD にＣＣＤ１２に蓄積された電荷（画素情報）も同様にして、期間ＤCCD と同じ期間ＣMEM に、１フレーム分の画像データとしてメモリ１７の領域Ｍ３に蓄積される。
さらに、期間ＤCCD にＣＣＤ１２に蓄積された電荷（画素情報）も同様にして、期間ＥCCD と同じ期間ＤMEM に、１フレーム分の画像データとしてメモリ１７の領域Ｍ１に上書きして蓄積される。
【０１１１】
尚、期間ＡCCD 以前にＣＣＤ１２で露光して得られた画像データについても同様の動作をするものとする。
【０１１２】
したがって、使用者からの撮像指示を受ける以前は、常に最新の３フレーム分の画像データがメモリ１７の各領域Ｍ１〜Ｍ３に蓄積されていることとなる。
【０１１３】
そこで、期間ＥCCD 中にＣＣＤ１２で露光しているタイミングで使用者からの撮像指示を受けると、その時点でメモリ１７に蓄積中の１フレームの画像データと、その前後の各１フレームの画像をメモリ１７に蓄積することから、その時点で蓄積中の１フレームの画像データをメモリ１７に蓄積終了した後、タイミングＥT でＣＣＤ１２の露光が終了する次の期間ＥMEM で次のフレームの画像データを蓄積し、その後の蓄積動作を終了する。
【０１１４】
この結果、メモリ１７は、期間ＣCCD ，ＤCCD ，ＥCCD にＣＣＤ１２で露光して得られた３フレーム分の画像データ、すなわち使用者からの撮像指示を受けた時点を中心とする連続した３フレーム分の画像データが蓄積された状態となる。
【０１１５】
そして、使用者からの撮像指示を受けた後の期間ＣPCに、期間ＣCCD にＣＣＤ１２で露光して得られた１フレーム分の画像データが撮像装置１０からコンピュータ２０に転送され、コンピュータ２０は、その転送されてきた１フレーム分の画像データを画面表示したり、画像ファイルとして記録媒体に記録する等、所定の画像処理を行う。
また、期間ＣPCの後の期間ＤPCも同様にして、期間ＤCCD にＣＣＤ１２で露光して得られた１フレーム分の画像データが撮像装置１０からコンピュータ２０に転送され、コンピュータ２０は、その転送されてきた１フレーム分の画像データに所定の画像処理を行う。
また、期間ＤPCの後の期間ＥPCも同様にして、期間ＥCCD にＣＣＤ１２で露光して得られた１フレーム分の画像データが撮像装置１０からコンピュータ２０に転送され、コンピュータ２０は、その転送されてきた１フレーム分の画像データに所定の画像処理を行う。
【０１１６】
上述のように、第２の実施の形態では、使用者からの撮像指示を受けた時点で、その時点に撮像装置１０のメモリ１７に蓄積中の１フレームの画像データと、その前フレームの画像データと、その後フレームの画像データとをメモリ１７に蓄積するように構成したことにより、この画像処理システム１００は、使用者からの撮像指示を受けた時点を中心とする連続した３フレームの画像を撮像することもできる。したがって、システム性能をさらに向上させることができる。
【０１１７】
尚、上述した第２の実施の形態では、上記図８に示したフローチャート（撮像プログラム）において、画像蓄積モードを「画像蓄積後停止モード」に設定する（ステップＳ８０３）ようにしたが、このステップＳ８０３で、例えば、画像蓄積モードを「蓄積停止モード」に設定するようにしてもよい。
これにより、使用者が撮像指示をシステムに与えた時点に、撮像装置１０でメモリ１７に蓄積されているフレームを最後のフレームとする、３フレーム分の画像を得ることもできる。
【０１１８】
【発明の効果】
以上説明したように本発明によれば、連続した複数フレームの画像や所定数フレームおきの複数フレームの画像を容易に撮像可能とし、システムの性能を向上させた撮像システムを提供することができる。
また、連続した複数フレームの画像や所定数フレームおきの複数フレームの画像を容易に撮像可能とすることができ、撮像システムの性能を向上させることができる記憶媒体を提供することができる。
【図面の簡単な説明】
【図１】第１の実施の形態において、本発明に係る撮像システムを適用した画像処理システムの構成を示すブロック図である。
【図２】上記画像処理システムの撮像装置内のメモリ構成を説明するための図である。
【図３】画像蓄積モードを説明するための図である。
【図４】上記画像処理システムで実行される撮像プログラムを説明するためのフローチャートである。
【図５】上記画像処理システムでの撮像及び画像データの蓄積動作を説明するための図である。
【図６】上記画像処理システムにおいて、画像処理する画像を選択するための画面を説明するための図である。
【図７】第２の実施の形態において、本発明に係る撮像システムを適用した画像処理システムの撮像装置内のメモリ構成を説明するための図である。
【図８】上記画像処理システムで実行される撮像プログラムを説明するためのフローチャートである。
【図９】上記画像処理システムでの撮像及び画像データの蓄積動作を説明するための図である。
【図１０】従来の画像処理システムでの撮像及び画像データの蓄積動作を説明するための図である。
【符号の説明】
１０ 撮像装置
１１ レンズユニット
１２ ＣＣＤ
１３ Ａ／Ｄコンバータ
１４ 撮像信号処理ユニット
１５ 変換テーブル
１６ 制御ユニット
１７ メモリ
１８ 外部接続用インターフェース回路
２０ コンピュータ
２１ 外部接続用インターフェース回路
２３ ＣＰＵ
２４ 表示装置
２５ 記録装置
２６ メインメモリ
２７ 内部記憶装置
１００ 画像処理システム[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an imaging system that is applied to an image processing system or the like that transfers image data obtained by imaging with an imaging device according to an imaging program to a computer and performs predetermined image processing by the computer, and the imaging program is stored The present invention relates to a recorded storage medium.
[0002]
[Prior art]
2. Description of the Related Art Conventionally, for example, there has been an image processing system including an imaging device (imaging unit) that captures an image of a subject by using a charge coupled device (CCD) and obtains image data, and a computer connected to the imaging device. is there.
[0003]
In this image processing system, image data for one frame obtained by the imaging apparatus is obtained by executing an imaging program for controlling data transfer processing from the imaging apparatus to the computer, various processes in the computer, and the like. Are transferred to a computer and displayed on a computer screen, or subjected to compression processing and recorded as an image file on a recording medium.
[0004]
Specifically, first, the imaging apparatus images a subject with a CCD, and temporarily stores the charge accumulated in the CCD as image data for one frame in a memory. The image data for one frame stored in the memory is transferred to a main memory in the computer, and predetermined image processing is performed by the computer.
[0005]
FIG. 10 shows the flow from the time of receiving an imaging instruction from the user to the transfer of one frame of image data obtained by imaging with the CCD of the imaging apparatus to the computer in this image processing system on the time axis. It is the figure shown by.
[0006]
In FIG. 10, the end timing of the exposure period in the CCD is “z”. T , A T , B T , C T , D T , ... "(black triangle mark).
And timing z T And timing a T Period a CCD Thus, the charge accumulated in the CCD during a certain timing and the next timing becomes image data for one frame.
[0007]
Here, the CCD is operated before an imaging instruction is sent from the user, and for example, exposure is repeated at a constant cycle so that an image of 30 frames is obtained in one second. .
[0008]
Therefore, as shown in FIG. T And timing a T Period a CCD In response to an imaging instruction from the user during period a CCD Assume that image data obtained by imaging with a CCD is transferred to a computer. T To end the exposure.
[0009]
Next, period a CCD The charge (pixel information) accumulated in the CCD at the timing a T And timing b T Period b CCD Same period a MEM In addition, all the pixels of the CCD are sequentially subjected to digital conversion processing, predetermined signal processing, and the like, and are temporarily stored in a memory in the imaging apparatus as image data for one frame.
[0010]
Next, the image data for one frame stored in the memory in the imaging apparatus is stored in the period a. MEM Later period a PC Are transferred to and stored in the main memory in the computer.
[0011]
And period a PC Later period a DISP / SAVE In addition, the computer performs predetermined image processing such as displaying one frame of image data stored in the main memory on a screen or recording it as an image file on a recording medium.
[0012]
As described above, starting from the accumulation of electric charges in the CCD of the image pickup apparatus, the image data for one frame obtained by the image pickup apparatus is taken into the main memory in the computer and displayed on the computer screen. By repeating the above, this image processing system can provide an electronic view finder function.
Further, a still image can be captured by recording image data for one frame transferred from the imaging apparatus on a recording medium as an image file by a computer.
[0013]
[Problems to be solved by the invention]
However, the conventional image processing system can only capture an image of only one frame, and cannot capture images of a plurality of consecutive frames or a plurality of frames every predetermined number of frames.
If a conventional image processing system is used to capture a plurality of consecutive frames or a plurality of frames every predetermined number of frames, the user can use the CCD exposure timing as shown in FIG. In addition, it is necessary to give an imaging instruction to the system. This is very difficult and, in fact, it is impossible to match the timing of 30 frames / second.
In addition, screen display on a computer and processing for saving as an image file can be performed only on an image of one frame obtained by imaging, which results in a decrease in the performance of the entire system. It was.
[0014]
Therefore, the present invention was made to eliminate the above-described drawbacks, and can easily capture continuous multiple frame images and multiple frame images every predetermined number of frames, thereby improving the performance of the system. An object is to provide an imaging system.
It is another object of the present invention to provide a recording medium that can easily capture a plurality of consecutive frames or a plurality of frames every predetermined number of frames and improve the performance of the imaging system.
[0015]
[Means for Solving the Problems]
The present invention provides an instruction means for giving an imaging instruction, and an imaging means for temporarily storing in the storage means image data composed of a plurality of consecutive frames obtained by imaging the subject based on the imaging instruction of the instruction means. The image pickup means and the communication means can be connected, and image processing means for performing predetermined image processing on the image data transferred from the image pickup means, and all or any frame image data of the image data by the image pickup means Detecting means for detecting whether or not accumulation in some of the storage means is completed, and to the storage means after the imaging means receives an imaging instruction from the instruction means based on a detection result of the detection means; Transfer control means for transferring all or part of the image data of the arbitrary frame for which image storage has been completed to the image processing means, and image data processed by the image processing means. Display means for displaying data, and the image processing means captures the image data of a predetermined number of frames among the image data of all the frames obtained by the imaging instruction once by the imaging means. After the image data is transferred from the means, image processing is sequentially performed on the transferred image data and the display on the display means is repeated for the image data of all the frames.
According to the present invention, the storage unit temporarily stores image data composed of a plurality of consecutive frames obtained by imaging a subject based on an imaging unit that gives an imaging instruction and an imaging instruction from the instruction unit. An image processing unit that can be connected by the image capturing unit and the communication unit and that performs predetermined image processing on the image data transferred from the image capturing unit, and an arbitrary frame image of the image data by the image capturing unit Based on the detection result of the detection means that detects whether or not all or part of the data has been accumulated in the storage means, and after the imaging means receives an imaging instruction from the instruction means, A transfer control means for transferring all or part of the image data of the arbitrary frame that has been stored in the storage means to the image processing means; and the image processing means. And a computer-readable storage medium storing an imaging program to function as display means for displaying the processed image data. The image processing means is obtained by the imaging instruction once by the imaging means. After the image data of a predetermined number of frames is transferred from the image pickup means among the image data of all the received frames, the image processing is sequentially performed on the transferred image data and displayed on the display means. It is characterized in that it is repeated for the image data of the frame.
[0016]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0017]
First, the first embodiment will be described.
[0018]
The imaging system according to the present invention is applied to, for example, an image processing system 100 as shown in FIG.
[0019]
As shown in FIG. 1, the image processing system 100 includes an imaging device (imaging unit) 10 and a computer 20, and the imaging device 10 is connected to the computer 20.
[0020]
The imaging device 10 includes a lens unit 11, an imaging element 12 on which the emitted light from the lens unit 11 is imaged, an analog / digital (A / D) converter 13 to which an output of the imaging element 12 is supplied, and an A / D The imaging signal processing unit 14 to which the output of the converter 13 is supplied, and the conversion table 15 and the recording medium 17 to which the output of the imaging signal processing unit 14 is supplied are provided.
In addition, the imaging apparatus 10 includes a control unit 16 that controls the imaging signal processing unit 14, the conversion table 15, and the recording medium 17, and an external connection interface circuit 18 that is connected to the recording medium 17 and the control unit 16. I have.
[0021]
On the other hand, the computer 20 includes an external connection interface circuit 21, a CPU (Central Processing Unit) 23 connected to the external connection interface circuit 21, a display device 24, a recording device 25, a main memory 25, and a main memory 25. And an internal storage device 27 such as a ROM (Read Only Memory).
[0022]
In the image processing system 100 as described above, an imaging program is set in advance in the internal storage device 26 of the computer 20, and an image obtained by imaging by the imaging device 10 when the computer 20 executes this imaging program. Data is transferred to the computer 20 so that the computer 20 performs predetermined image processing.
[0023]
Although details of the imaging program will be described later, the internal storage device 26 in which the imaging program is set is an application of the storage medium according to the present invention.
Further, although the internal storage device 26 is provided inside the computer 20, it may be provided outside the computer 20 as an external storage device.
[0024]
First, a series of operations of the image processing system 100 will be described.
[0025]
In the imaging apparatus 10, light from a subject (not shown) is emitted to the imaging element 12 through the lens unit 11.
[0026]
The imaging device 12 is composed of, for example, a charge coupled device (CCD). The sensor unit (not shown) of the CCD 12 exposes the light emitted from the lens unit 11 (information of the captured image) and accumulates it as charges in the CCD 12.
[0027]
The A / D converter 13 sequentially reads out the charges accumulated in the CCD 12 with respect to all the pixels of the CCD 12, digitizes them, and supplies them to the imaging signal processing unit 14.
[0028]
The imaging signal processing unit 14 is composed of, for example, a DSP (Digital Signal Processor), and performs predetermined signal processing on the image data from the A / D converter 13 under the control of the control unit 16 to convert it into luminance / color difference data.
[0029]
The luminance / color difference data obtained by the imaging signal processing unit 14 is controlled by the control unit 16 so that the luminance / color difference data of a rectangular area having a specific horizontal size and vertical size, for example, horizontal 320 Only the luminance / color difference data having a size of 240 pixels in the vertical direction is temporarily stored in the memory 17 in accordance with the reading order in the CCD 12.
[0030]
Therefore, the electric charge accumulated in the CCD 12 is temporarily stored in the memory 17 of the imaging device 10 as image data for one frame expressed by luminance / color difference having a size of 240 pixels in the horizontal direction and 240 pixels in the vertical direction. It becomes.
[0031]
Here, although details will be described later, the memory 17 of the imaging apparatus 10 is configured to be able to store image data for a plurality of frames.
[0032]
Therefore, in the image processing system 100, after the image data for one frame is stored in the memory 17 in the imaging device 10 as described above, the image data for one frame obtained in the same manner is stored in the memory 17 in the same manner. To accumulate. In this manner, the imaging device 10 sequentially stores image data for one frame in the memory 17.
As a result, image data for a plurality of frames is accumulated in the memory 17 of the imaging apparatus 10.
[0033]
On the other hand, in the computer 20, as described above, an imaging program for performing processing for capturing image data for a plurality of frames stored in the memory 17 of the imaging device 10, various processing for the captured image data, and the like. Is preset in the internal storage device 27.
[0034]
Therefore, the imaging program in the internal storage device 27 is loaded into the main memory 26.
[0035]
The main memory 26 is a memory for loading an imaging program and executing the imaging program, and is also a memory to which image data from the imaging device 10 is transferred.
[0036]
Then, when the CPU 22 executes the imaging program loaded in the main memory 26, the image processing system 100 operates as follows.
[0037]
First, the image data stored in the memory 17 of the imaging apparatus 10 as described above, that is, the image data for a plurality of frames each represented by the luminance / color difference having a size of 320 pixels in the horizontal direction and 240 pixels in the vertical direction, Under the control of the control unit 16, the data is read out to the computer 20 via the external connection interface circuit 18.
[0038]
The external connection interface circuit 18 of the imaging apparatus 10 is compliant with, for example, a PC card (Personal Computer Memory Card) standard, which is an IC card made according to a standard common to Japan and the United States. 21 also complies with the standard.
Therefore, the image capturing apparatus 10 and the computer 20 exchange data by using these external connection interface circuits 18 and 21.
[0039]
The image data for a plurality of frames transferred from the imaging device 10 to the computer 20 by these external connection interface circuits 18 and 21 is stored in the main memory 26 of the computer 20.
[0040]
The image data for a plurality of frames stored in the main memory 26 is displayed on the screen of the display device 24 or recorded on a recording medium (not shown) as an image file by the recording device 25, for example.
[0041]
Next, imaging of a plurality of frames of images in the image processing system 100 will be specifically described.
[0042]
In the following description, for example, it is assumed that images of up to four frames are captured.
Further, in the image data for one frame having a size of 320 pixels in the horizontal direction and 240 pixels in the vertical direction, the information per pixel is, for example, 2 bytes.
[0043]
First, the memory 17 of the imaging device 10 described above has a capacity of at least 614,400 bytes (153,600 bytes × 4 frames). This is because the amount of image data for one frame is 153,600 bytes, and it is necessary to store at least 614,400 bytes (153,600 bytes × 4 frames) in order to store this image data for a maximum of four frames. is there.
[0044]
In the image processing system 100, the computer 20 executes the above-described imaging program based on a user's instruction, whereby the number of image frames CS stored in the memory 17 of the imaging apparatus 10 and the memory 17 are stored. The frame interval CT of the image to be set is set in the imaging device 10.
As a result, the imaging apparatus 10 accumulates continuous plural frames of image data in the memory 17 or accumulates plural frames of image data in the memory 17 at regular frame intervals.
[0045]
For example, when the number of frames CS “4” and the frame interval CT “1” are set in the imaging device 10, the imaging device 10 stores image data for four frames in the memory 17 at one frame interval.
[0046]
As a result, as shown in FIG. 2, the memory 17 stores the image data of the frame in the area M1 (addresses 0 to 153, 600), and the next area M2 (addresses 153, 600 to 307, 200). The image data of the next frame after one frame is accumulated, the image data of the next frame after one frame is accumulated in the next region M3 (addresses 307, 200 to 460, 800), and the next region M4 (address 460). , 800 to 614, 400), the image data of the next frame after one frame is accumulated.
An area after the area M4, that is, an area after the 614th and 400th bytes is an empty area E in which image data is not accumulated.
[0047]
Further, in this image processing system 100, the computer 20 executes the above-described imaging program based on a user's instruction so that a mode (image accumulation mode) for accumulating image data in the memory 17 is set as the imaging apparatus 10. Has been made to set to.
As a result, the imaging apparatus 10 accumulates image data in the memory 17 based on the set image accumulation mode.
[0048]
Specifically, for example, “overwrite mode”, “stop mode after image accumulation”, and “accumulation stop mode” are prepared as image accumulation modes.
[0049]
Therefore, when the computer 20 sets, for example, the number of frames CS “4”, the frame interval CT “1”, and the image accumulation mode is set to “overwrite mode”, the imaging device 10 As shown in FIG. 3A, the frame F is stored in the area M1 of the memory 17. (n + 0) Image data is accumulated, and frame F is stored in area M2. (n + 0) Frame F 1 frame from (n + 2) Image data is accumulated, and frame F (n + 2) Frame F 1 frame from (n + 4) Image data is accumulated and frame F is stored in area M4. (n + 4) Frame F 1 frame from (n + 6) Image data is stored.
And frame F (n + 0) , F (n + 2) , F (n + 4) , F (n + 6) Are stored in the areas M1 to M4 of the memory 17, and then the frame F (n + 6) Frame F 1 frame from (n + 8) Is overwritten in the area M1. Similarly, the subsequent frames are overwritten in the areas M2 to M4.
[0050]
As described above, when the “overwrite mode” is set in the imaging apparatus 10, image data for the number of frames CS is overwritten in the areas M1 to M4 of the memory 17 for each frame interval CT.
[0051]
For example, when the computer 20 sets the number of frames CS “4”, the frame interval CT “2”, and the image accumulation mode is set to “stop mode after image accumulation”, the imaging apparatus 10 As shown in FIG. 3B, the frame F is stored in the area M1 of the memory 17. (n + 0) Image data is accumulated, and frame F (n + 0) Frame F 2 frames away from (n + 3) Image data is accumulated and frame F is stored in area M3. (n + 3) Frame F 2 frames away from (n + 6) Image data is accumulated and frame F is stored in area M4. (n + 6) Frame F 2 frames away from (n + 9) Image data is stored.
And frame F (n + 0) , F (n + 3) , F (n + 6) , F (n + 9) Are stored in the areas M1 to M4 of the memory 17, and then the storage of the image data in the memory 17 is stopped.
[0052]
Further, when the image accumulation mode is set to “accumulation stop mode” in the imaging apparatus 10 by the computer 20, the imaging apparatus 10 does not accumulate image data in the memory 17.
[0053]
Next, the above-described imaging program for transferring the image data stored in the memory 17 of the imaging device 10 as described above to the computer 10 will be specifically described.
[0054]
This imaging program is, for example, a program according to the flowchart shown in FIG. 4. When this imaging program is executed by the CPU 23 of the computer 20, the image data stored in the memory 17 of the imaging device 10 is stored in the computer 20. The data is transferred to the main memory 26.
[0055]
That is, for example, assuming that an imaging mode for capturing images of four consecutive frames is preset in the image processing system 100 by the user, first, the user gives an imaging instruction to the image processing system 100. Then, a predetermined key (not shown) provided in the computer 10 is pressed (step S401). The predetermined key is assigned to the release button in advance.
[0056]
Next, according to the imaging mode, the number of frames CS “4” and the frame interval CT “0” are set in the control unit 16 of the imaging apparatus 10 and the image accumulation mode is set to “stop mode after image accumulation” ( Step S402).
As a result, the imaging apparatus 10 obtains four consecutive frames of image data by the CCD 12 and sequentially accumulates them in the areas M1 to M4 of the memory 17, and then does not accumulate new image data.
[0057]
Next, “1” is set as an initial value in the counter n (step S403).
[0058]
Next, it is determined whether or not one frame of image data has been stored in the nth region Mn of the memory 17 of the imaging device 10 (step S404). In this case, the process does not proceed to the next step and enters a state of waiting for completion of accumulation.
[0059]
As a result of the determination in step S404, when it is determined that one frame of image data has been accumulated in the nth area Mn of the memory 17 of the imaging device 10, an image of one frame accumulated in the nth area Mn. Data is transferred to the main memory 26 of the computer 20 (step S405).
[0060]
Next, the frame counter n is counted up (n = n + 1) in order to process one frame worth of image data stored in the next area M (n + 1) (step S406).
[0061]
Then, as a result of counting up the frame counter n in step S406, it is determined whether or not the value of n is larger than the number of frames CS (= 4) set in step S402 (step S407).
[0062]
As a result of the determination in step S407, if “n> CS (= 4)”, that is, if all of the four frames of image data stored in the memory 17 of the imaging apparatus 10 have been transferred to the computer 20, this processing is performed. Exit.
[0063]
If the result of determination in step S407 is not “n> CS (= 4)”, that is, if four frames of image data stored in the memory 17 of the imaging device 10 are being transferred to the computer 20. Returning to step S404, processing for transferring the image data of the next frame to the computer 20 is performed.
[0064]
As a result of executing the imaging program as described above, the image data for four frames stored in the areas M1 to M4 of the memory 17 of the imaging apparatus 10 are transferred to the computer 20.
[0065]
Next, in FIG. 5, after receiving an imaging instruction from the user as described above, an image of 4 frames is exposed by the CCD 12 of the imaging apparatus 10, and the resulting image data of 4 frames is obtained. It is the figure which showed on the time-axis the flow until it is taken in by the computer 20.
[0066]
In FIG. 5, the end timing of the exposure period in the CCD 12 is “Z T , A T , B T , C T , D T , ... "(black triangle mark).
And timing Z T And timing A T Period A CCD Thus, the charge accumulated in the CCD 12 during a certain timing and the next timing becomes image data for one frame.
[0067]
Here, the CCD 12 is operated before the imaging instruction from the user is sent, and for example, exposure is repeated at a constant cycle so that an image of 30 frames is obtained in one second. .
[0068]
Therefore, as shown in FIG. T And timing A T Period A CCD During the period A CCD , Timing A T And timing B T Period B CCD , Timing B T And timing C T Period C CCD And timing C T And timing D T Period D CCD Assume that the image data for 4 frames obtained by the CCD 12 is transferred to the computer. T , B T , C T , D T Then, the exposure is sequentially terminated.
[0069]
At this time, period A CCD The charge (pixel information) accumulated in the CCD 12 in the period B CCD Same period A MEM In addition, with respect to all the pixels of the CCD 12, the image data for one frame is sequentially transmitted through the A / D converter 13 and the imaging signal processing unit 14, that is, with the luminance / color difference of the size of 320 pixels in the horizontal direction and 240 pixels in the vertical direction. The expressed image data is stored in the area M1 of the memory 17.
Period B CCD Similarly, the charge (pixel information) stored in the CCD 12 is also stored in the period C. CCD Same period B MEM In addition, all the pixels of the CCD 12 are sequentially stored in the area M2 of the memory 17 as image data for one frame via the A / D converter 13 and the imaging signal processing unit 14.
Period C CCD Similarly, the charge (pixel information) stored in the CCD 12 is also similar to the period D. CCD Same period C MEM In addition, all the pixels of the CCD 12 are sequentially stored in the area M3 of the memory 17 as image data for one frame via the A / D converter 13 and the imaging signal processing unit 14.
Period D CCD Similarly, the charge (pixel information) stored in the CCD 12 is also processed at the timing D. T And timing E T Period E CCD Same period D MEM In addition, all the pixels of the CCD 12 are sequentially stored in the area M4 of the memory 17 as image data for one frame via the A / D converter 13 and the imaging signal processing unit 14.
[0070]
Next, the image processing performed by the computer 20 will be specifically described.
[0071]
For example, the computer 20 records all the image data for four frames transferred from the imaging device 10 as described above, as an image file on a hard disk (recording device 25) built in the computer 20 by a predetermined format method. Alternatively, the recording device 25 can perform recording on a recording medium (not shown).
[0072]
At this time, the computer 20 displays a screen for allowing the user to select an image to be recorded as shown in FIG.
[0073]
In other words, the window shown in FIG. 6 is displayed on the display device 24. This screen includes images 601 to 603 based on the four frames of image data transferred to the computer 20 and push buttons 604 to 605 corresponding to the images.
In FIG. 6, only three images 601 to 603 are displayed. However, the remaining one image is displayed by moving the screen by, for example, operating the key 605 on the same screen. Has been made.
[0074]
Therefore, the user uses the input device of the computer 20 such as a mouse or a keyboard (not shown) while viewing the screen displayed on the display device 24, and presses the push buttons 604 to 605 to display a desired image. select.
[0075]
As a result, the computer 20 recognizes which push button is pressed on the screen, and stores the image corresponding to the pressed push button as a file in the above-described hard disk or the like.
[0076]
As described above, in the first embodiment, the image capturing apparatus 10 is provided with the memory 17 capable of storing a plurality of frames of image data, and one frame of image data obtained by the CCD 12 is sequentially stored in the memory 17. With this configuration, the image processing system 100 can easily capture images of a plurality of frames. As a result, the computer 20 can also perform predetermined image processing on a plurality of frames of images, so that system performance can be improved.
[0077]
Further, the frame number CS of the image stored in the memory 17 of the image pickup device 10 and the frame interval CT of the image stored in the memory 17 are set, and the image pickup device 10 stores the image data in the memory 17 according to the settings. As a result, the image processing system 100 can easily capture a plurality of continuous frames of images or a plurality of frames of images at regular intervals. Accordingly, the computer 20 can perform predetermined image processing on a plurality of continuous frames of images or a plurality of frames of a predetermined frame, so that the system performance can be further improved.
[0078]
Further, the display device of the computer 20 indicates which image data is to be processed by the computer 20 among the continuous plural frames of image data transferred from the imaging device 10 to the computer 20 or the plural frames of image data at fixed intervals. By being configured so that it can be selected on the 24 screens, the user can easily select a desired image among the images of a plurality of frames obtained by the imaging device 10, and the selected image can be selected as an image file. It is possible to store or perform predetermined image processing only on the image. Therefore, the system performance can be further improved.
[0079]
In the first embodiment described above, the case where an image of four frames is captured is taken as an example. However, the present invention is not limited to this, and the number of image frames CS stored in the memory 17 of the imaging device 10 and the memory 17 are not limited. If the number of frames that can be stored in the memory 17 of the imaging apparatus 10 is arbitrarily set by setting the frame interval CT of the images to be stored, images of an arbitrary number of frames are captured at arbitrary frame intervals, and the computer 20 It goes without saying that it can be incorporated into.
[0080]
Further, in the flowchart (imaging program) shown in FIG. 4, it is determined whether or not one frame of image data has been accumulated in the memory 17 of the imaging apparatus 10 (step S404). The stored image data for one frame is transferred to the computer 20 (step S405). For example, in step S404, how much of the image data for one frame is stored in the memory 17 is detected. In this way, even if the image data stored in the memory 17 is less than one frame in step S405, the stored image data may be sequentially transferred to the computer 20.
As a result, the time required to complete the transfer of all the image data to be transferred by the computer 20 can be shortened, so that the processing time of the entire system can be shortened.
[0081]
In addition, after all the image data of a plurality of frames obtained by the imaging device 10 is transferred to the computer 20, the image is displayed on the display device 24 of the computer 20; The image data is displayed on the screen of the display device 24 of the computer 20, and then the image data of the next frame is transferred to the computer 20, and then the image data is displayed on the screen of the display device 24 of the computer 20. For example, the image data transfer and the screen display may be sequentially repeated.
As a result, the user can check on the screen what kind of image has been captured each time an image for one frame is captured by the imaging apparatus 10. For example, even if not all of the four frames of image data have been transferred to the computer 20, the user can immediately confirm the image of the first frame when the transfer of the image data of the first frame is completed. it can.
[0082]
In the imaging apparatus 10, image data expressed by luminance / color difference is obtained. However, for example, image data in the format of R5bit, G5bit, B5bit, or image data in the palette number format may be obtained. .
In this case, in the imaging apparatus 10, the luminance / color difference data obtained by the imaging signal processing unit 14 is converted into data in the format of R5bit, G5bit, B5bit under the control of the control unit 16 or 256. Given to the input of the conversion table 15 for conversion to the color number of the color palette, of the output data of this conversion table 15, only the data of the rectangular area having a specific horizontal size and vertical size Are temporarily stored in the memory 17 in accordance with the reading order in the CCD 12.
[0083]
Next, a second embodiment will be described.
[0084]
In the first embodiment described above, images of a plurality of consecutive frames after receiving an imaging instruction from the user or images of a plurality of frames every predetermined frame are captured. In the embodiment, for example, three images are captured: an image at the time when an imaging instruction is received from the user, an image one frame before the image, and an image after one frame.
[0085]
Since the configuration of the image processing system used in the second embodiment is the same as that of the image processing system 100 shown in FIG. 1, the details thereof will be omitted, and the following description will be given using FIG. Do. Further, only different portions from the first embodiment will be specifically described.
[0086]
First, the image data of one frame obtained by the imaging device 10 is, for example, data having a size of 320 pixels in the horizontal direction and 240 pixels in the vertical direction expressed by luminance / color difference, as in the first embodiment described above. Yes, information per pixel consists of 2 bytes.
[0087]
Therefore, the memory 17 of the imaging device 10 has a capacity of at least 460,800 bytes (153,600 bytes × 3 frames). This is because the amount of image data for one frame is 153,600 bytes, and in order to store this image data for three frames, at least 460,800 bytes (153,600 bytes × 3 frames) are required. .
[0088]
The memory 17 stores image data for three frames according to the number of frames CS and the frame interval CT set in the imaging apparatus 10 in the same manner as in the first embodiment described above.
[0089]
As a result, as shown in FIG. 7, the memory 17 stores image data for one frame in the area M1 (addresses 0 to 153, 600), and the next area M2 (addresses 153, 600 to 307, 200). One frame of image data is stored in the memory area, and one frame of image data is stored in the next area M3 (addresses 307, 200 to 460, 800).
The area after the area M3, that is, the area after the 460th and 800th bytes is an empty area E in which image data is not accumulated.
[0090]
The image data for three frames stored in the memory 17 as described above is transferred to the computer 20 by, for example, an imaging program according to the flowchart shown in FIG.
[0091]
That is, the internal storage device 26 of the computer 20 is preset with the imaging program of FIG. 8 instead of the imaging program of FIG. 4 handled in the first embodiment described above. When executed by the computer 20, image data for three frames obtained by imaging with the imaging device 10 is transferred to the computer 20.
[0092]
Note that the internal storage device 26 in which the imaging program of FIG. 8 is set is an application of the storage medium according to the present invention.
[0093]
Specifically, an “overwrite mode” is set in advance in the image processing system 100 as an imaging mode for capturing images of three consecutive frames centering on a point in time when an imaging instruction is received from the user. First, before receiving an imaging instruction from the user, the number of frames CS “3” and the frame interval CT “0” are set in the control unit 16 of the imaging apparatus 10 according to the imaging mode. Then, the image accumulation mode is set to “overwrite mode” (step S801).
As a result, the imaging device 10 sequentially stores image data for one frame sequentially obtained by the CCD 12 in the areas M1 to M3 of the memory 17 until receiving an imaging instruction from the user, and then the image of the next frame. As the data is overwritten in the area M1 of the memory 17, the image data is continuously stored in the memory 17, as described above.
[0094]
Next, the user presses a predetermined key (not shown) provided in the computer 10 in order to give an imaging instruction to the image processing system 100.
The computer 10 determines whether or not this operation has been performed (step S802). If there is no imaging instruction from the user as a result of the determination, the computer 10 waits for an imaging instruction, and the imaging instruction from the user is received. If there is, the process proceeds to the next step S803. The predetermined key is assigned to the release button in advance.
[0095]
In the next step S803, the number of frames CS “1” and the frame interval CT “0” are set in the control unit 16 of the imaging apparatus 10, and the image accumulation mode is set to “stop mode after image accumulation” (step S803). ).
[0096]
With the processing in step S803, the imaging apparatus 10 stores the image data for the next continuous frame in the memory after completing the accumulation of the image data of the frame being accumulated at the time when the imaging instruction is received from the user. 17 is accumulated, and the subsequent accumulation is not performed.
[0097]
In step S803, when the imaging apparatus 10 stops storing image data in the memory 17, the area next to the area where the image data was last stored is set as the area information Mm.
For example, if the last accumulated area is the area M1, the area M2 is set as the area information Mm, and if the last accumulated area is the area M2, the area M3 is set as the area. When the area M3 is set as the information Mm and the area where the storage is performed last is the area M3, the area M1 is set as the area information Mm.
Therefore, the area in which the image data of the past frame is accumulated among the plurality of frames of image data accumulated in the memory 17 is set as the area information Mm at this time.
Such region information Mm is updated in the order of M1 → M2 → M3 → M1 → M2... In the processing steps to be described later from step S803.
[0098]
Next, “1” is set as an initial value in the transfer counter n (step S804).
[0099]
Next, it is determined whether or not image data for one frame has been accumulated in the area of the memory 17 (hereinafter referred to as area Mm) indicated by the area information Mm (step S805). If the data is still being accumulated, the process does not proceed to the next step and enters the accumulation end waiting state.
[0100]
If it is determined in step S805 that the image data for one frame has been accumulated in the area Mm of the memory 17 of the imaging device 10, the image data for one frame accumulated in the area Mm Transfer to the main memory 26 (step S806).
[0101]
Next, the region Mm is updated to the next region in order to perform processing on the image data for one frame accumulated in the region subsequent to the region Mm. Further, the transfer counter n is counted up (n = n + 1) (step S807).
[0102]
Then, as a result of counting up the transfer counter n in step S807, it is determined whether or not the value of n is larger than “3” (step S808).
[0103]
As a result of the determination in step S808, if “n> 3”, that is, if all of the three frames of image data stored in the memory 17 of the imaging apparatus 10 have been transferred to the computer 20, this processing ends.
[0104]
If it is determined in step S808 that “n> 3” is not satisfied, that is, if three frames of image data stored in the memory 17 of the imaging device 10 are being transferred to the computer 20, the process proceeds to step S805. Returning, the image data stored in the next area is transferred to the computer 20.
[0105]
As a result of executing the imaging program as described above, the memory 17 of the imaging apparatus 10 accumulates continuous three frames of image data centered on the time when an imaging instruction is received from the user, and the three frames of image data. Are sequentially transferred to the computer 20 from the oldest frame.
[0106]
Next, FIG. 9 shows the operation of the imaging apparatus 10 before receiving the imaging instruction from the user as described above, the operation of the imaging apparatus 10 after receiving the imaging instruction from the user, and the imaging apparatus 10. It is the figure which showed on the time-axis the flow until the image data for 3 frames obtained were taken in into the computer 20. FIG.
[0107]
With reference to FIG. 9, the flow from exposure of the image for three consecutive frames centering on the time point when the imaging instruction is received from the user by the CCD 12 to transfer to the computer 20 will be described along the time axis. To do.
[0108]
In FIG. 9, the end timing of the exposure period in the CCD 12 is “A T , B T , C T , D T , E T , ... "(black triangle mark).
And timing A T And timing B T Period B CCD Thus, the charge accumulated in the CCD 12 during a certain timing and the next timing becomes image data for one frame.
[0109]
First, timing D T And timing E T Period E CCD Assuming that the imaging instruction is received from the user during the period before the imaging instruction is received, the CCD 12 T , B T , C T , D T , E T Then, the exposure is sequentially terminated.
[0110]
At this time, period A CCD The charge (pixel information) accumulated in the CCD 12 in the period B CCD Same period A MEM In addition, with respect to all the pixels of the CCD 12, the image data for one frame is sequentially transmitted through the A / D converter 13 and the imaging signal processing unit 14, that is, with the luminance / color difference of the size of 320 pixels in the horizontal direction and 240 pixels in the vertical direction. The expressed image data is stored in the area M1 of the memory 17.
Period B CCD Similarly, the charge (pixel information) stored in the CCD 12 is also stored in the period C. CCD Same period B MEM The image data for one frame is stored in the area M2 of the memory 17.
Period C CCD Similarly, the charge (pixel information) stored in the CCD 12 is also similar to the period D. CCD Same period C MEM The image data for one frame is stored in the area M3 of the memory 17.
Furthermore, period D CCD Similarly, the charge (pixel information) accumulated in the CCD 12 is also similar to the period E. CCD Same period D MEM The image data for one frame is overwritten and accumulated in the area M1 of the memory 17.
[0111]
Period A CCD It is assumed that the same operation is performed on image data obtained by exposure with the CCD 12 before.
[0112]
Therefore, before receiving an imaging instruction from the user, the latest three frames of image data are always stored in the areas M1 to M3 of the memory 17.
[0113]
Therefore, period E CCD When an imaging instruction is received from the user at the timing when the CCD 12 is exposed, one frame of image data being stored in the memory 17 at that time and one frame before and after that are stored in the memory 17. Therefore, after the storage of one frame of image data being stored at that time in the memory 17, the timing E T The next period E when the exposure of the CCD 12 is completed MEM Then, the image data of the next frame is accumulated, and the subsequent accumulation operation is terminated.
[0114]
As a result, the memory 17 stores the period C CCD , D CCD , E CCD Then, image data for three frames obtained by exposure with the CCD 12, that is, image data for three consecutive frames centering on the point of time when an imaging instruction is received from the user is accumulated.
[0115]
A period C after receiving an imaging instruction from the user PC And period C CCD The image data for one frame obtained by exposure with the CCD 12 is transferred from the imaging device 10 to the computer 20, and the computer 20 displays the transferred image data for one frame on the screen or as an image file. Predetermined image processing such as recording on a recording medium is performed.
Period C PC Period D after PC Similarly, period D CCD The image data for one frame obtained by exposure with the CCD 12 is transferred from the imaging device 10 to the computer 20, and the computer 20 performs predetermined image processing on the transferred image data for one frame.
Period D PC After period E PC Similarly, period E CCD The image data for one frame obtained by exposure with the CCD 12 is transferred from the imaging device 10 to the computer 20, and the computer 20 performs predetermined image processing on the transferred image data for one frame.
[0116]
As described above, in the second embodiment, when an imaging instruction is received from the user, one frame of image data stored in the memory 17 of the imaging device 10 at that time and the image of the previous frame are received. Since the data and the image data of the subsequent frames are stored in the memory 17, the image processing system 100 can display three consecutive frames centered on the time point when the imaging instruction is received from the user. It is also possible to take an image. Therefore, the system performance can be further improved.
[0117]
In the second embodiment described above, the image accumulation mode is set to the “post-image accumulation stop mode” in the flowchart (imaging program) shown in FIG. 8 (step S803). In S803, for example, the image accumulation mode may be set to “accumulation stop mode”.
As a result, when the user gives an imaging instruction to the system, it is also possible to obtain an image for three frames with the frame stored in the memory 17 in the imaging device 10 as the last frame.
[0118]
【The invention's effect】
As described above, according to the present invention, it is possible to provide an imaging system that can easily capture images of a plurality of consecutive frames or a plurality of frames every predetermined number of frames and improve the performance of the system.
In addition, it is possible to provide a storage medium that can easily capture a plurality of continuous frames or a plurality of frames every predetermined number of frames and improve the performance of the imaging system.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of an image processing system to which an imaging system according to the present invention is applied in a first embodiment.
FIG. 2 is a diagram for explaining a memory configuration in an imaging apparatus of the image processing system.
FIG. 3 is a diagram for explaining an image accumulation mode;
FIG. 4 is a flowchart for explaining an imaging program executed by the image processing system.
FIG. 5 is a diagram for describing an imaging operation and an image data accumulation operation in the image processing system.
FIG. 6 is a diagram for explaining a screen for selecting an image to be image-processed in the image processing system.
FIG. 7 is a diagram for explaining a memory configuration in an imaging apparatus of an image processing system to which an imaging system according to the present invention is applied in a second embodiment.
FIG. 8 is a flowchart for explaining an imaging program executed by the image processing system.
FIG. 9 is a diagram for explaining an imaging operation and an image data accumulation operation in the image processing system.
FIG. 10 is a diagram for explaining an imaging and image data accumulation operation in a conventional image processing system.
[Explanation of symbols]
10 Imaging device
11 Lens unit
12 CCD
13 A / D converter
14 Imaging signal processing unit
15 Conversion table
16 Control unit
17 memory
18 Interface circuit for external connection
20 computers
21 Interface circuit for external connection
23 CPU
24 display devices
25 Recording device
26 Main memory
27 Internal storage
100 Image processing system
Claims (22)
上記指示手段の撮像指示に基づいて、被写体を撮像して得た連続した複数のフレームより構成された画像データを記憶手段に一旦蓄積する撮像手段と、
上記撮像手段と通信手段により接続可能であり、上記撮像手段から転送されてきた画像データに所定の画像処理を行う画像処理手段と、
上記撮像手段による画像データの任意のフレーム画像データの全て又は一部の上記記憶手段への蓄積が完了したかを検出する検出手段と、
上記検出手段の検出結果に基づいて、上記撮像手段が上記指示手段からの撮像指示を受けた後に、上記記憶手段への蓄積が完了した上記任意のフレームの画像データの全て又は一部を上記画像処理手段に転送する転送制御手段と、
上記画像処理手段によって処理された画像データを表示する表示手段と、
を有し、
上記画像処理手段は、上記撮像手段で１度の上記撮像指示により得られた全てのフレームの画像データのうち所定数のフレームの画像データが上記撮像手段から転送された後に、その転送されてきた画像データに順次画像処理を行い上記表示手段に表示することを上記全てのフレームの画像データに対して繰り返し行うことを特徴とする撮像システム。Instruction means for giving an imaging instruction;
An imaging unit that temporarily stores in the storage unit image data composed of a plurality of consecutive frames obtained by imaging the subject based on the imaging instruction of the instruction unit;
Image processing means connectable by the imaging means and communication means, and performing predetermined image processing on the image data transferred from the imaging means;
Detecting means for detecting whether or not all or part of arbitrary frame image data of the image data by the imaging means has been accumulated in the storage means;
Based on the detection result of the detection means, after the imaging means receives an imaging instruction from the instruction means, all or part of the image data of the arbitrary frame that has been accumulated in the storage means is displayed as the image. Transfer control means for transferring to the processing means;
Display means for displaying the image data processed by the image processing means;
Have
The image processing means has been transferred after image data of a predetermined number of frames of image data of all frames obtained by the imaging instruction once by the imaging means is transferred from the imaging means. An image pickup system characterized by sequentially performing image processing on image data and displaying the image data on the display means on the image data of all the frames.
上記撮像手段は、上記モード設定手段で設定された蓄積モードに基づいて、上記記憶手段への画像データの蓄積を行うことを特徴とする請求項１記載の撮像システム。There are at least two modes: a mode in which image data of a past frame stored in the storage means is overwritten with image data of a current frame, and a mode in which the storage is stopped after completion of image data storage of a predetermined number of frames in the storage means. Comprising mode setting means for setting an arbitrary accumulation mode among a plurality of accumulation modes including,
2. The imaging system according to claim 1, wherein the imaging unit accumulates image data in the storage unit based on the accumulation mode set by the mode setting unit.
上記画像処理手段は、上記選択手段で選択された画像に対して所定の画像処理を行うことを特徴とする請求項１記載の撮像システム。Selecting means for selecting an arbitrary image from the images displayed on the screen of the display means;
The imaging system according to claim 1, wherein the image processing unit performs predetermined image processing on the image selected by the selection unit.
撮像指示を与える指示手段と、
上記指示手段の撮像指示に基づいて、被写体を撮像して得た連続した複数のフレームより構成された画像データを記憶手段に一旦蓄積する撮像手段と、
上記撮像手段と通信手段により接続可能であり、上記撮像手段から転送されてきた画像データに所定の画像処理を行う画像処理手段と、
上記撮像手段による画像データの任意のフレーム画像データの全て又は一部の上記記憶手段への蓄積が完了したかを検出する検出手段と、
上記検出手段の検出結果に基づいて、上記撮像手段が上記指示手段からの撮像指示を受けた後に、上記記憶手段への蓄積が完了した上記任意のフレームの画像データの全て又は一部を上記画像処理手段に転送する転送制御手段と、
上記画像処理手段によって処理された画像データを表示する表示手段と、
して機能させる撮像プログラムを記憶したコンピュータ読み取り可能な記憶媒体であって、
上記画像処理手段は、上記撮像手段で１度の上記撮像指示により得られた全てのフレームの画像データのうち所定数のフレームの画像データが上記撮像手段から転送された後に、その転送されてきた画像データに順次画像処理を行い上記表示手段に表示することを上記全てのフレームの画像データに対して繰り返し行うことを特徴とする記憶媒体。Computer
Instruction means for giving an imaging instruction;
An imaging unit that temporarily stores in the storage unit image data composed of a plurality of consecutive frames obtained by imaging the subject based on the imaging instruction of the instruction unit;
Image processing means connectable by the imaging means and communication means, and performing predetermined image processing on the image data transferred from the imaging means;
Detecting means for detecting whether or not all or part of arbitrary frame image data of the image data by the imaging means has been accumulated in the storage means;
Based on the detection result of the detection means, after the imaging means receives an imaging instruction from the instruction means, all or part of the image data of the arbitrary frame that has been accumulated in the storage means is displayed as the image. Transfer control means for transferring to the processing means;
Display means for displaying the image data processed by the image processing means;
A computer-readable storage medium storing an imaging program to function as
The image processing means has been transferred after image data of a predetermined number of frames of image data of all frames obtained by the imaging instruction once by the imaging means is transferred from the imaging means. A storage medium characterized by sequentially performing image processing on image data and displaying the image data on the display means for image data of all the frames.
上記撮像手段は、上記モード設定手段で設定された蓄積モードに基づいて、上記記憶手段への画像データの蓄積を行うことを特徴とする請求項１２記載の記憶媒体。There are at least two modes: a mode in which image data of a past frame stored in the storage means is overwritten with image data of a current frame, and a mode in which the storage is stopped after completion of image data storage of a predetermined number of frames in the storage means. Comprising mode setting means for setting an arbitrary accumulation mode among a plurality of accumulation modes including,
13. The storage medium according to claim 12, wherein the imaging means accumulates image data in the storage means based on the accumulation mode set by the mode setting means.
上記画像処理手段は、上記選択手段で選択された画像に対して所定の画像処理を行うことを特徴とする請求項１２記載の記憶媒体。Selecting means for selecting an arbitrary image from the images displayed on the screen of the display means;
13. The storage medium according to claim 12, wherein the image processing means performs predetermined image processing on the image selected by the selection means.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11962797A JP3733199B2 (en) | 1997-05-09 | 1997-05-09 | Imaging system and storage medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11962797A JP3733199B2 (en) | 1997-05-09 | 1997-05-09 | Imaging system and storage medium |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH10308919A JPH10308919A (en) | 1998-11-17 |
| JP3733199B2 true JP3733199B2 (en) | 2006-01-11 |
Family
ID=14766134
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP11962797A Expired - Fee Related JP3733199B2 (en) | 1997-05-09 | 1997-05-09 | Imaging system and storage medium |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3733199B2 (en) |
-
1997
- 1997-05-09 JP JP11962797A patent/JP3733199B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH10308919A (en) | 1998-11-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7612807B2 (en) | Image capture device | |
| US20050104975A1 (en) | Electronic camera having continuous shooting function | |
| JP2003189165A (en) | Digital camera | |
| JP2001086395A (en) | Image pickup unit | |
| US20100225784A1 (en) | Camera | |
| US8786721B2 (en) | Image capturing device | |
| US20100211589A1 (en) | Imaging apparatus | |
| EP1313305A1 (en) | electronic camera | |
| JP2009027647A (en) | Captured image recording system, photographic device, captured image recording method | |
| EP0884681A2 (en) | Digital camera | |
| US7193647B2 (en) | Filtering still image data from a multimode stream | |
| EP1580985B1 (en) | Image capture apparatus, image capture method, and image capture control program | |
| JP3733199B2 (en) | Imaging system and storage medium | |
| CN113454977B (en) | Imaging element, image pickup apparatus, method of operating imaging element, and computer-readable storage medium | |
| JPH11122569A (en) | Electronic camera | |
| JP2004072374A (en) | Electronic still camera and image pickup method | |
| JP2000041170A (en) | Image pickup device and method | |
| JP2007104501A (en) | Apparatus and method for recording still image, program, and recording medium | |
| JP3713907B2 (en) | Image display device, image transfer method, and storage medium | |
| JP2000253280A (en) | Image pickup device | |
| CN114208159A (en) | Imaging element, imaging device, method for operating imaging element, and program | |
| JP2003235000A (en) | Digital still camera | |
| JP2001320608A (en) | Image pickup device and its control method | |
| JP5733615B2 (en) | Image display device, image display program, and image display system | |
| JPH0530457A (en) | Electronic still camera device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050602 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050621 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050817 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20051004 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20051017 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091021 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091021 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101021 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101021 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111021 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111021 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121021 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131021 Year of fee payment: 8 |
|
| LAPS | Cancellation because of no payment of annual fees |