JPH09186940A - Image input device - Google Patents

Abstract

PROBLEM TO BE SOLVED: To input high resolution still image information without provision of a huge capacity memory or consumption of many processing times. SOLUTION: The device is made up of a picture element shift information input means B, a temporary storage means C, a storage command means D, a write means E, a read means F, an arithmetic means G, and an output means H or the like. An image whose picture element at an optional position shifted by the picture element shift control means A is stored in the temporary storage means C, a difference image between the stored image in the temporary storage means C and each picture element shift image is generated and then the difference image between the picture element shift images very similar to each other is generated and outputted.

Description

【発明の詳細な説明】Detailed Description of the Invention

【０００１】[0001]

【発明の属する技術分野】本発明は、画像情報を入力す
る画像入力装置に関わるものであり、より具体的には、
画素ずらし制御による高解像度静止画像データを入力す
る画像入力装置に関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image input device for inputting image information, and more specifically,
The present invention relates to an image input device for inputting high resolution still image data by pixel shift control.

【０００２】[0002]

【従来の技術】近年、パーソナル・コンピュータの高性
能化やマルチメディア化、また、プリンタ、モニタ等の
カラー化や高解像度化などに伴い、文書やカラー図面、
写真などの高精細なカラー静止画像を手軽に扱える環境
が整いつつある。2. Description of the Related Art In recent years, as personal computers have become more sophisticated and multimedia, and printers, monitors, etc. have become more colorized and have higher resolution, documents, color drawings,
The environment for easily handling high-definition color still images such as photographs is being established.

【０００３】従来、高解像度な静止画像を入力する手段
としてはスキャナが広く普及している。上記スキャナ
は、データの取り込み時間が多くかかったり、あるいは
平面画像しか入力できないなどといった欠点があった。
このため、近年はスキャナに代わって様々な手法による
高解像度カメラが種々提案されている。Conventionally, a scanner has been widely used as a means for inputting a high-resolution still image. The above-mentioned scanner has drawbacks that it takes a long time to capture data, or only a plane image can be input.
Therefore, in recent years, various high-resolution cameras have been proposed by various methods in place of the scanner.

【０００４】中でも、標準的な解像度のカメラを用いて
高解像度の静止画像入力を実現する画像入力装置が注目
を集めている。例えば、標準的な解像度のカメラを用い
てより高解像度の静止画像を取り込む手法として、光軸
を水平・垂直方向に小数画素単位でずらして取り込んだ
後に合成する方式がある。Above all, an image input device which realizes high-resolution still image input by using a standard resolution camera has been attracting attention. For example, as a method of capturing a still image of higher resolution using a camera of standard resolution, there is a method of shifting the optical axis in units of a few pixels in the horizontal and vertical directions, capturing, and then combining.

【０００５】図６は、画素ずらしによる入力画像の合成
手順（高解像度画像の形成）を説明する概念図である。
なお、光軸をずらす手法としては、傾斜可能な平行平板
を用いるものや可変プリズムを用いるものなどが一般的
である。次に、画素ずらし制御による高解像度画像入力
を可能にする画像入力装置について、簡単な例を挙げて
説明する。FIG. 6 is a conceptual diagram for explaining a procedure of synthesizing input images by shifting pixels (formation of a high resolution image).
As a method of shifting the optical axis, a method using a tiltable parallel plate or a variable prism is generally used. Next, an image input device that enables high resolution image input by pixel shift control will be described with reference to a simple example.

【０００６】図７は、画素ずらし制御が可能な画像入力
装置の構成例を示すブロック図である。ここでは、１／
２画素ピッチの光軸移動制御を行うものとする。図７に
おいて、７０１は光軸カメラへ機能を有するレンズ部で
ある。FIG. 7 is a block diagram showing a configuration example of an image input device capable of pixel shift control. Here, 1 /
The optical axis movement control with a 2-pixel pitch is performed. In FIG. 7, reference numeral 701 is a lens unit having a function for the optical axis camera.

【０００７】７０２は撮像部である。７０３は各種フィ
ルタ処理等を施す画像処理部である。７０４は入力され
た画像情報を一時格納するためのメモリ部である。７０
５はメモリ部７０４への入力制御を行うメモリ入力制御
部である。７０６はメモリ部７０４から出力制御を行う
メモリ出力制御部である。Reference numeral 702 is an image pickup section. An image processing unit 703 performs various filter processes and the like. A memory unit 704 temporarily stores the input image information. 70
Reference numeral 5 denotes a memory input control unit that controls input to the memory unit 704. A memory output control unit 706 controls output from the memory unit 704.

【０００８】７０７はレンズ部７０１の光軸移動制御を
行うレンズ制御部である。７０８はメモリ部７０４に一
時格納された高解像度画像情報を圧縮符号化する符号化
部である。７０９は符号化画像データを出力する出力部
である。７１０は各部の状態を監視し、全体の動作制御
やタイミング制御を行う全体制御部である。Reference numeral 707 is a lens control unit for controlling the movement of the optical axis of the lens unit 701. An encoding unit 708 compresses and encodes the high-resolution image information temporarily stored in the memory unit 704. An output unit 709 outputs encoded image data. Reference numeral 710 is an overall control unit that monitors the state of each unit and performs overall operation control and timing control.

【０００９】上記画像入力装置においては、画像入力に
先立ち、レンズ部７０１において、レンズ制御部７０７
の光軸移動制御がなされる。また、メモリ部７０４にお
いては、メモリ入力制御部７０５の格納領域制御がなさ
れる。そして、入力動作が開始されると、まず、水平・
垂直方向共に画素ずらしなしの原点画像（ｆｒａｍｅ♯
０）の静止画像の入力制御が行われる。In the above image input device, the lens control unit 707 is provided in the lens unit 701 prior to image input.
The optical axis movement control of is performed. In the memory unit 704, storage area control of the memory input control unit 705 is performed. Then, when the input operation is started, first,
An origin image (frame # without pixel shifting in both vertical directions)
Input control of the still image of 0) is performed.

【００１０】レンズ部７０１、撮像部７０２、画像処理
部７０３を経て入力された画像情報は、メモリ入力制御
部７０５によりメモリ部７０４の所定領域に格納され
る。続いて、水平方向のみ１／２画素ピッチずらした位
置（ｆｒａｍｅ ♯１）、水平・垂直方向共に１／２画
素ピッチずらした位置（ｆｒａｍｅ ♯２）、垂直方向
のみ１／２画素ずらした位置（ｆｒａｍｅ ♯３）、と
いった順序で画像入力を実行する。The image information input through the lens unit 701, the image pickup unit 702, and the image processing unit 703 is stored in a predetermined area of the memory unit 704 by the memory input control unit 705. Subsequently, a position shifted by a 1/2 pixel pitch only in the horizontal direction (frame # 1), a position shifted by a 1/2 pixel pitch in both the horizontal and vertical directions (frame # 2), and a position shifted by 1/2 pixel only in the vertical direction ( Image input is performed in the order of frame # 3).

【００１１】ここで、画像入力および格納に際し、メモ
リ入力制御部７０５により撮像位置に対応した格納位置
制御が行われ、４画面（ｆｒａｍｅ ♯０〜♯３）から
なる画素ずらし画像の合成処理が行われメモリ部７０４
に格納される。メモリ部７０４に格納された高解像度画
像は、そのまま出力されたり、あるいは符号化部７０８
により圧縮符号化されて、出力部７０９を介して出力さ
れる。Here, at the time of inputting and storing an image, the memory input control unit 705 controls the storage position corresponding to the image pickup position, and the pixel shift image composed of four screens (frames # 0 to # 3) is combined. Memory section 704
Stored in. The high resolution image stored in the memory unit 704 is output as it is, or the encoding unit 708.
It is compressed and encoded by and output via the output unit 709.

【００１２】符号化部７０８においては、さまざまな圧
縮符号化方式が用いられているが、いずれも画像の空間
的な冗長度を削減することによりデータ量を圧縮する処
理を行う。また、１／４画素ピッチの光軸移動制御の場
合においては、同様に１６フレームからなる画素ずらし
画像の入力および合成処理を行う。Although various compression encoding methods are used in the encoding unit 708, all of them perform the processing of compressing the data amount by reducing the spatial redundancy of the image. Further, in the case of the optical axis movement control of the 1/4 pixel pitch, similarly, the pixel shift image composed of 16 frames is input and combined.

【００１３】以上のような動作を行うことにより、単体
の固体撮像素子による有効画素数よりも大きな画素数の
静止画像情報、すなわち、解像度を高めた静止画像情報
の取り込みを実現するようにしている。By performing the above-described operation, still image information having a number of pixels larger than the number of effective pixels by a single solid-state image pickup element, that is, still image information having a higher resolution can be captured. .

【００１４】このようにして取り込まれた静止画像情報
については、モニタに表示したり、あるいはプリンタ等
により外部に出力したりするだけでなく、圧縮符号化さ
れたデータとしてＨＤ（ハード・ディスク）などの各種
記憶媒体に蓄積する。The still image information thus fetched is not only displayed on a monitor or output to the outside by a printer or the like, but also as HD (hard disk) as compressed and encoded data. Accumulated in various storage media.

【００１５】[0015]

【発明が解決しようとする課題】上記従来の画像入力装
置においては、次のような問題点があった。すなわち、
例えば水平・垂直１／４画素ずらしの１６画面の入力・
合成処理による高解像度静止画像の場合、各画面の有効
画面サイズを水平７６８×垂直４９４画素とすれば、構
成される高解像度静止画像情報の画像サイズは水平３，
０７２×垂直１，９７６画素となり、一画素あたり１６
ｂｉｔとすると１２ＭＢｙｔｅを超える莫大なデータ量
になる。The above-mentioned conventional image input device has the following problems. That is,
For example, input of 16 screens with horizontal / vertical 1/4 pixel shift
In the case of a high-resolution still image by combining processing, if the effective screen size of each screen is horizontal 768 × vertical 494 pixels, the image size of the constituted high-resolution still image information is horizontal 3.
072 x vertical 1,976 pixels, 16 per pixel
If it is set to bit, the amount of data exceeds 12 MBytes.

【００１６】従来の画像入力装置においては、圧縮符号
化処理のためにメモリ上に高解像度画像を一旦構成する
ようにしていたので、内部に大容量のメモリを必要とす
るといった問題点があった（第一の問題点）。In the conventional image input device, since a high resolution image is once constructed on the memory for compression encoding processing, there is a problem that a large capacity memory is required inside. (First problem).

【００１７】更に、画素を微小単位ずつずらした複数の
画像情報を入力、および格納するのには多大な時間を必
要とする。例えば、上述のような１／４画素ピッチの画
素ずらしによる高解像度画像をメモリに格納するために
は、数秒間に及ぶ処理時間が必要であった。Further, it takes a lot of time to input and store a plurality of image information in which pixels are shifted by a minute unit. For example, in order to store a high-resolution image in which a pixel is shifted by a quarter pixel pitch as described above in a memory, a processing time of several seconds is required.

【００１８】また、従来の画像入力装置においては、全
ての画素ずらし画面をメモリに格納した後に圧縮符号化
処理を開始するようにしていた。したがって、画素ずら
し入力および格納処理を開始してから圧縮符号化処理完
了までに必要な時間は全体として、各々の処理を単純に
足し合わせた時間となってしまい、結果として多大な入
力処理時間を必要とするといった問題点があった（第二
の問題点）。Further, in the conventional image input device, the compression encoding process is started after all the pixel shift screens are stored in the memory. Therefore, the time required from the start of the pixel shift input and storage processing to the completion of the compression encoding processing is the time obtained by simply adding up the respective processing, resulting in a large input processing time. There was a problem that it was necessary (the second problem).

【００１９】本発明は上記従来の課題に鑑みなされたも
のであり、画像情報の画素ずらし入力装置において、必
要なメモリ容量を小さくできるようにするとともに、処
理時間を短くすることができるようにすることを目的と
する。The present invention has been made in view of the above problems of the prior art. In the pixel shift input device for image information, the required memory capacity can be reduced and the processing time can be shortened. The purpose is to

【００２０】[0020]

【課題を解決するための手段】本発明の画像入力装置
は、撮像光の光軸を水平または／および垂直方向に微小
単位ずつずらして撮像した複数の画像情報を入力するこ
とにより解像度を高めた高解像度画像情報を取り込むよ
うにした画像入力装置において、上記撮像光の光軸を水
平または／および垂直方向に微小にずらす量を制御して
画素ずらし処理を行う画素ずらし制御手段と、上記画素
ずらし制御手段により画素ずらし処理された画像情報を
入力する画像情報入力手段と、上記画像情報入力手段に
より入力された入力画像情報を一時記憶する一時格納手
段と、上記画像情報入力手段により順次入力される入力
画像情報に対して、上記一時格納手段に格納する画像情
報を選択するとともに、上記選択した画像情報を上記一
時格納手段に格納するようにするための格納指示情報を
生成して出力する格納指示手段と、上記格納指示手段か
ら出力される格納指示情報に基づいて上記入力画像情報
を上記一時格納手段へ書き込むようにする書き込み手段
と、上記一時格納手段に格納されている画像情報を読み
出す読み出し手段と、上記読み出し手段によって上記一
時格納手段から読み出された格納画像情報と上記画像情
報入力手段により入力された入力画像情報との間の画素
間の差分演算を行って差分画像情報を生成する演算手段
と、上記入力画像情報または／および上記差分画像情報
を出力する出力手段とを備えていることを特徴としてい
る。According to the image input device of the present invention, the resolution is increased by inputting a plurality of image information obtained by shifting the optical axis of the image pickup light in the horizontal and / or vertical directions by a small unit. In an image input device adapted to capture high-resolution image information, a pixel shift control means for performing pixel shift processing by controlling an amount by which the optical axis of the image pickup light is slightly shifted in the horizontal and / or vertical directions, and the pixel shift. Image information input means for inputting image information pixel-shifted by the control means, temporary storage means for temporarily storing input image information input by the image information input means, and sequential input by the image information input means For the input image information, the image information to be stored in the temporary storage means is selected, and the selected image information is stored in the temporary storage means. Storage instruction means for generating and outputting the storage instruction information for the above, and writing means for writing the input image information in the temporary storage means based on the storage instruction information output from the storage instruction means. Reading means for reading out the image information stored in the temporary storage means, between the stored image information read out from the temporary storage means by the reading means and the input image information input by the image information input means The calculation means for performing difference calculation between the pixels to generate difference image information, and the output means for outputting the input image information and / or the difference image information.

【００２１】また、本発明の他の特徴とするところは、
撮像光の光軸を水平または／および垂直方向に微小単位
ずつずらして撮像した複数の画像情報を入力することに
より解像度を高めた高解像度画像情報を取り込むように
した画像入力装置において、上記撮像光の光軸を水平ま
たは／および垂直方向に微小にずらす量を制御して画素
ずらし処理を行う画素ずらし制御手段と、上記画素ずら
し制御手段により画素ずらし処理された画像情報を入力
する画像情報入力手段と、上記画像情報入力手段により
入力された入力画像情報を一時記憶する一時格納手段
と、上記画像情報入力手段により順次入力される入力画
像情報に対して、上記一時格納手段に格納する画像情報
を選択するとともに、上記選択した画像情報を上記一時
格納手段に格納するようにするための格納指示情報を生
成して出力する格納指示手段と、上記格納指示手段から
出力される格納指示情報に基づいて上記入力画像情報を
上記一時格納手段へ書き込むようにする書き込み手段
と、上記一時格納手段に格納されている画像情報を読み
出す読み出し手段と、上記読み出し手段によって上記一
時格納手段から読み出された格納画像情報と上記画像情
報入力手段により入力された入力画像情報との間の画素
間の差分演算を行って差分画像情報を生成する演算手段
と、上記入力画像情報と上記差分画像情報とを選択的に
圧縮符号化処理する符号化手段と、上記符号化手段によ
って符号化された符号化画像情報を出力する出力手段と
を備えている。Another feature of the present invention is that
In an image input device adapted to capture high resolution image information having a higher resolution by inputting a plurality of image information captured by shifting the optical axis of the imaging light horizontally or / and vertically by a small unit, Pixel shift control means for performing pixel shift processing by controlling the amount of minute shift of the optical axis of the pixel in the horizontal and / or vertical direction, and image information input means for inputting image information subjected to pixel shift processing by the pixel shift control means. A temporary storage unit for temporarily storing the input image information input by the image information input unit; and image information stored in the temporary storage unit for the input image information sequentially input by the image information input unit. A storage for selecting and generating and outputting storage instruction information for storing the selected image information in the temporary storage means. Indicating means, writing means for writing the input image information to the temporary storage means based on the storage instruction information output from the storage instruction means, and reading for reading the image information stored in the temporary storage means. Means and the difference image information between the stored image information read from the temporary storage means by the reading means and the input image information input by the image information input means to generate difference image information. Comprising arithmetic means, encoding means for selectively compressing and encoding the input image information and the difference image information, and output means for outputting the encoded image information encoded by the encoding means. There is.

【００２２】また、本発明のその他の特徴とするところ
は、上記格納指示手段は、上記画素ずらし制御手段によ
り画素ずらしされた所定位置の入力画像情報に対して格
納指示情報を生成して出力し、上記一時格納手段は、上
記書き込み手段による制御に基づいて上記所定位置の入
力画像情報を一時記憶することを特徴としている。Another feature of the present invention is that the storage instruction means generates storage instruction information for input image information at a predetermined position pixel-shifted by the pixel shift control means and outputs the storage instruction information. The temporary storage means is characterized by temporarily storing the input image information at the predetermined position under the control of the writing means.

【００２３】また、本発明のその他の特徴とするところ
は、上記格納指示手段は、上記画素ずらし制御手段によ
る画素ずらし処理の完了に応答して上記格納指示情報を
生成して出力するとともに、上記一時格納手段は、上記
書き込み手段による書き込み制御により、画素ずらし位
置毎に上記格納した画像情報を更新することを特徴とし
ている。Another feature of the present invention is that the storage instruction means generates and outputs the storage instruction information in response to the completion of the pixel shift processing by the pixel shift control means, and The temporary storage means is characterized by updating the stored image information for each pixel shift position by the writing control by the writing means.

【００２４】また、本発明のその他の特徴とするところ
は、解像度を高めた画像情報の取り込み開始を監視する
ための開始タイミング監視手段を更に備え、上記格納指
示手段は、上記開始タイミング監視手段の監視結果に基
づいて上記画素ずらし制御手段による最初の画素ずらし
位置の入力画像情報に対して格納指示情報を生成して出
力し、上記一時格納手段は、上記書き込み手段による書
き込み制御により、最初の画素ずらし位置の入力画像情
報を一時記憶することを特徴としている。Another feature of the present invention is that it further comprises start timing monitoring means for monitoring the start of capturing the image information having a higher resolution, and the storage instructing means is the start timing monitoring means. Based on the monitoring result, the pixel shift control means generates and outputs storage instruction information for the input image information at the first pixel shift position, and the temporary storage means performs the write control by the write means to control the first pixel. It is characterized in that the input image information at the shifted position is temporarily stored.

【００２５】また、本発明のその他の特徴とするところ
は、上記格納指示手段の動作を制御するための制御情報
を外部から入力する制御情報入力手段を更に備え、上記
格納指示手段は、上記制御情報入力手段により入力され
る入力制御情報に基づいて上記格納指示情報を生成して
出力することを特徴としている。Another feature of the present invention is that it further comprises control information input means for externally inputting control information for controlling the operation of the storage instruction means, and the storage instruction means is provided with the control information. It is characterized in that the storage instruction information is generated and output based on the input control information input by the information input means.

【００２６】また、本発明のその他の特徴とするところ
は、上記画像情報入力手段は撮像素子を有し、レンズを
介して入射される撮像対象物からの光を上記撮像素子の
受光面に結像させるとともに、光電変換して入力するも
のであって、上記画素ずらし制御手段は、上記レンズの
光軸に対して傾斜可能となるようにして上記レンズの光
軸上に設けられた光透過性物質の平板と、上記平板の傾
斜量を変化させて撮像対象物の結像位置を制御する位置
制御手段とを有している。Another feature of the present invention is that the image information input means has an image pickup device, and the light from the image pickup object incident through the lens is coupled to the light receiving surface of the image pickup device. The pixel shift control means is arranged to be tilted with respect to the optical axis of the lens so as to be image-converted and photoelectrically converted and input. It has a flat plate of a substance and a position control means for controlling the image forming position of the image pickup object by changing the inclination amount of the flat plate.

【００２７】[0027]

【作用】本発明は上記技術手段を有するので、入力され
る任意の画像をメモリに格納するとともに、上記メモリ
に格納した画像と、順次入力される画素ずらし画像との
間の差分画像を生成して、非常に似通った画素ずらし画
面間の差分画像を生成して出力することが可能となる。Since the present invention has the above technical means, it stores an arbitrary image to be input in the memory and generates a difference image between the image stored in the memory and the pixel-shifted images sequentially input. Therefore, it is possible to generate and output a difference image between pixel shift screens that are very similar.

【００２８】また、本発明の他の特徴によれば、非常に
似通った画素ずらし画面間の差分画像を生成することが
可能になるとともに、上記生成された入力画像間の差分
画像を圧縮符号化することが可能になる。According to another feature of the present invention, it is possible to generate a difference image between pixel shift screens that are very similar to each other, and compression-encode the difference image between the generated input images. It becomes possible to do.

【００２９】また、本発明のその他の特徴によれば、入
力された画素ずらし画像とあらかじめ決められた位置の
画素ずらし画像との間の差分画像を生成して出力するこ
とが可能になる。According to another feature of the present invention, it is possible to generate and output a difference image between the input pixel-shifted image and the pixel-shifted image at a predetermined position.

【００３０】また、本発明のその他の特徴によれば、入
力された画素ずらし画像と直前に入力されて格納された
画素ずらし画像との間の差分画像を生成して出力するこ
とが可能になる。Further, according to another feature of the present invention, it becomes possible to generate and output a difference image between the input pixel shift image and the pixel shift image input and stored immediately before. .

【００３１】また、本発明のその他の特徴によれば、高
解像度画像の取り込みを開始する第一番目の画素ずらし
位置の画像と第二番目以降の画素ずらし位置の画像との
間の差分画像を生成して出力することが可能になる。Further, according to another feature of the present invention, the difference image between the image at the first pixel shift position and the image at the second and subsequent pixel shift positions at which the high-resolution image capture is started. It is possible to generate and output.

【００３２】また、本発明のその他の特徴によれば、入
力された画素ずらし画像と外部からの制御に従い格納さ
れた画素ずらし画像との間の差分画像を生成して出力す
ることが可能になる。Further, according to another feature of the present invention, it becomes possible to generate and output a difference image between the input pixel-shifted image and the pixel-shifted image stored according to control from the outside. .

【００３３】また、本発明のその他の特徴によれば、平
板を用いた画素ずらし制御による高解像度画像を入力す
ることが可能になる。According to another feature of the present invention, it becomes possible to input a high resolution image by pixel shift control using a flat plate.

【００３４】[0034]

【発明の実施の形態】以下、図面を参照しながら本発明
の画像入力装置の実施形態を説明する。図１は、本実施
形態の画像入力装置の要部を示す機能構成図である。図
１において、Ａは画素ずらし制御手段、Ｂは画像情報入
力手段、Ｃは一時格納手段、Ｄは格納指示手段、Ｅは書
き込み手段、Ｆは読み出し手段、Ｇは演算手段、Ｈは出
力手段、Ｉは符号化手段、Ｊは制御情報入力手段、Ｋは
開始タイミング監視手段である。BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of an image input device of the present invention will be described below with reference to the drawings. FIG. 1 is a functional configuration diagram showing a main part of the image input device according to the present embodiment. In FIG. 1, A is a pixel shift control unit, B is an image information input unit, C is a temporary storage unit, D is a storage instruction unit, E is a writing unit, F is a reading unit, G is a computing unit, and H is an output unit. I is an encoding unit, J is a control information input unit, and K is a start timing monitoring unit.

【００３５】上記画素ずらし制御手段Ａは、水平または
／および垂直方向の微小なずらし量を制御して、画素ず
らし処理するためのものである。また、上記画素ずらし
制御手段Ａは、上記レンズの光軸に対して傾斜可能なよ
うにして、上記光軸上に取り付けられた光透過性物質の
平板と、上記平板の傾斜量を変化させて撮像対象物の結
像位置を制御するための位置制御手段とを具備してい
る。The pixel shift control means A is for controlling a minute shift amount in the horizontal and / or vertical direction to perform pixel shift processing. Further, the pixel shift control means A is configured to be tiltable with respect to the optical axis of the lens, and to change the tilt amount of the flat plate of the light transmissive material attached on the optical axis and the flat plate. And a position control means for controlling the image forming position of the image pickup object.

【００３６】上記画像情報入力手段Ｂは、上記画素ずら
し制御手段Ａにより画素ずらし処理された画像情報を入
力するためのものである。上記一時格納手段Ｃは、上記
画像情報入力手段Ｂにより入力された入力画像情報を一
時記憶するためのものである。上記格納指示手段Ｄは、
上記画像情報入力手段Ｂにより順次入力される入力画像
情報Ｐ１に対して、上記一時格納手段Ｃに格納する画像
情報を選択し、上記選択した画像情報を上記一時格納手
段に格納するようにするための格納指示情報Ｐ２を生成
して出力するためのものである。The image information input means B is for inputting the image information subjected to the pixel shift processing by the pixel shift control means A. The temporary storage means C is for temporarily storing the input image information input by the image information input means B. The storage instruction means D is
In order to select the image information to be stored in the temporary storage means C with respect to the input image information P1 sequentially input by the image information input means B, and to store the selected image information in the temporary storage means. Is for generating and outputting the storage instruction information P2.

【００３７】上記書き込み手段Ｅは、上記格納指示手段
Ｄから出力される格納指示情報Ｐ２に基づいて上記一時
格納手段Ｃへ画像情報を書き込むためのものである。上
記読み出し手段Ｆは、上記一時格納手段Ｃから画像情報
を読み出すためのものである。The writing means E is for writing image information into the temporary storage means C based on the storage instruction information P2 output from the storage instruction means D. The reading means F is for reading image information from the temporary storage means C.

【００３８】上記演算手段Ｇは、上記読み出し手段Ｆに
よって上記一時格納手段Ｃから読み出された格納画像情
報Ｐ３と上記画像情報入力手段Ｂにより入力された入力
画像情報Ｐ１との間の画素間の差分演算を行って差分画
像情報Ｐ４を生成するためのものである。The calculating means G is arranged between pixels between the stored image information P3 read from the temporary storage means C by the reading means F and the input image information P1 input by the image information input means B. This is for performing difference calculation to generate difference image information P4.

【００３９】上記出力手段Ｈは、上記入力画像情報Ｐ１
または／および上記差分画像情報Ｐ４を出力するための
ものである。上記符号化手段Ｉは、上記入力画像情報Ｐ
１と上記差分画像情報Ｐ４とを選択的に圧縮符号化処理
するためのものである。The output means H has the input image information P1.
Alternatively, and / or for outputting the difference image information P4. The encoding means I has the input image information P.
1 and the differential image information P4 are selectively subjected to compression coding processing.

【００４０】上記制御情報入力手段Ｊは、制御情報Ｐ６
を外部から入力するためのものであり、上記開始タイミ
ング監視手段Ｋは、解像度を高めた画像情報の取り込み
開始タイミングを監視するためのものである。The control information input means J has the control information P6.
Is input from the outside, and the start timing monitoring means K is for monitoring the start timing of capturing the image information whose resolution is increased.

【００４１】上述のように構成された本実施形態の画像
入力装置によれば、任意の画素ずらし位置画像を上記一
時格納手段Ｃに格納し、順次入力される各画素ずらし画
像に対して上記一時格納手段Ｃに格納した画像との間の
差分画像を生成し、非常に似通った画素ずらし画面間の
差分画像を生成して出力することができる。According to the image input apparatus of the present embodiment configured as described above, an arbitrary pixel shift position image is stored in the temporary storage means C, and the temporary shift is performed for each sequentially input pixel shift image. It is possible to generate a difference image with the image stored in the storage unit C, generate a difference image between pixel shift screens that are very similar, and output the difference image.

【００４２】これにより、全ての画素ずらし位置の画像
情報からなる高解像度画像を形成するための大容量のメ
モリおよび合成回路等を用いることなく、効率的な高解
像度画像の入力（後段処理回路への転送）処理を行うよ
うにすることができ、システム全体の処理の効率化およ
び高速化を実現することができる。As a result, efficient input of a high-resolution image (to the post-stage processing circuit) is achieved without using a large-capacity memory and a synthesizing circuit for forming a high-resolution image composed of image information of all pixel shift positions. Transfer) processing, and the efficiency and speed of the processing of the entire system can be realized.

【００４３】また、任意の画素ずらし位置画像を上記一
時格納手段Ｃに格納し、順次入力される各画素ずらし画
像に対して上記格納画像との間の差分画像を生成し、非
常に似通った画素ずらし画面間の差分画像を用いた圧縮
符号化処理が可能となる。Further, an arbitrary pixel shift position image is stored in the temporary storage means C, and a difference image between the sequentially input pixel shift images and the stored image is generated, and very similar pixels are generated. The compression encoding process using the difference image between the shifted screens is possible.

【００４４】これにより、画素ずらし画面間の相関を利
用した効率的な圧縮符号化処理を実現することができる
とともに、画素ずらし制御・入力処理と並行した圧縮符
号化処理を行うことができ、効率的かつ高速な入力処理
および圧縮符号化処理を実現することができる。As a result, it is possible to realize efficient compression coding processing utilizing the correlation between pixel shift screens, and to perform compression coding processing in parallel with pixel shift control / input processing. It is possible to realize the objective and high-speed input processing and compression encoding processing.

【００４５】また、あらかじめ決められた画素ずらし位
置画像に対して画面間差分画像を生成し、所定位置画像
および各々の画面間差分画像を生成して出力したり、圧
縮符号化画像情報Ｐ５を出力したりすることができる。
これにより、メモリ容量および周辺回路の規模を大幅に
削減するだけでなく、システム全体の処理の効率化およ
び高速化を実現することができるようになる。Further, an inter-screen difference image is generated with respect to a predetermined pixel shift position image, and a predetermined position image and each inter-screen difference image are generated and output, or compression coded image information P5 is output. You can
As a result, not only the memory capacity and the scale of the peripheral circuits can be significantly reduced, but also the efficiency and speed of the processing of the entire system can be realized.

【００４６】また、取り込み開始から第一番目の画素ず
らし位置画像に対して画面間差分画像情報Ｐ４を生成
し、上記第一番目の画素ずらし位置画像および第二番目
以降の各々の画面間差分画像を生成して出力したり、圧
縮符号化画像情報Ｐ５を出力したりすることができる。Further, the inter-screen difference image information P4 is generated for the first pixel shift position image from the start of capturing, and the first pixel shift position image and the second and subsequent inter-screen difference images are generated. Can be generated and output, or the compression-coded image information P5 can be output.

【００４７】また、外部から入力された制御情報Ｐ６に
従い上記一時格納手段Ｃに格納されている格納画像情報
Ｐ３に対して画面間の差分画像情報Ｐ４を生成して、外
部制御により上記格納画像情報Ｐ３と各々の画面間の差
分画像情報Ｐ４を出力したり、あるいはこれを圧縮符号
化して出力したりすることができる。Further, the difference image information P4 between the screens is generated for the stored image information P3 stored in the temporary storage means C according to the control information P6 input from the outside, and the stored image information is controlled by the external control. The difference image information P4 between P3 and each screen can be output, or can be compression-encoded and output.

【００４８】次に、本発明の画像入力装置の構成および
動作をより具体的に説明する。図２は、本発明の第１の
実施形態の画像入力装置の全体構成例を示すブロック図
である。なお、図２において、図７と同一部分は同一の
符号を付して詳細な説明を省略する。７０１は光軸可変
機能を有するレンズ部であり、７０２は撮像部である。
これらのレンズ部７０１と撮像部７０２に関連した詳細
な構成については後述する。Next, the structure and operation of the image input apparatus of the present invention will be described more specifically. FIG. 2 is a block diagram showing an example of the overall configuration of the image input device according to the first embodiment of the present invention. In FIG. 2, the same parts as those in FIG. 7 are designated by the same reference numerals, and detailed description thereof will be omitted. Reference numeral 701 is a lens unit having a variable optical axis function, and 702 is an image pickup unit.
Detailed configurations related to the lens unit 701 and the imaging unit 702 will be described later.

【００４９】７０３は、上記撮像部７０２から出力され
る信号に各種のフィルタ処理等の画像処理を施す画像処
理部である。１０４は入力された画像情報を一時格納す
るメモリ部である。１０５は、上記メモリ部７０４への
入力制御を行うメモリ入力制御部である。１０６は、上
記メモリ部７０４からの出力制御を行うメモリ出力制御
部である。An image processing unit 703 performs image processing such as various filter processing on the signal output from the image pickup unit 702. A memory unit 104 temporarily stores the input image information. Reference numeral 105 denotes a memory input control unit that controls input to the memory unit 704. Reference numeral 106 denotes a memory output control unit that controls output from the memory unit 704.

【００５０】７０７は、上記レンズ部７０１の光軸移動
制御を行うレンズ制御部である。１０８は、画像情報を
圧縮符号化処理する符号化部である。１１１は、上記メ
モリ部１０４の出力と上記画像処理部７０３の出力との
間の減算処理を行う減算部であり、上記符号化部１０８
の内部に設けられている。７０９は、符号化画像データ
を出力する出力部である。１１０は各部の状態を監視
し、全体の動作制御やタイミング制御を行う全体制御部
である。Reference numeral 707 is a lens control section for controlling the optical axis movement of the lens section 701. Reference numeral 108 denotes an encoding unit that performs compression encoding processing on image information. Reference numeral 111 denotes a subtraction unit that performs a subtraction process between the output of the memory unit 104 and the output of the image processing unit 703, and the encoding unit 108.
It is provided inside. An output unit 709 outputs the encoded image data. Reference numeral 110 denotes an overall control unit that monitors the state of each unit and performs overall operation control and timing control.

【００５１】ここで、本実施形態における画像入力装置
は、水平・垂直方向共に１／２画素ピッチの画素ずらし
入力の制御が可能であり、これを圧縮符号化処理して出
力するものである。Here, the image input apparatus according to the present embodiment can control pixel shift input with a 1/2 pixel pitch in both the horizontal and vertical directions, and performs compression encoding processing and outputs the compressed input processing.

【００５２】次に、光軸可変機能を有するレンズ部７０
１と撮像部７０２、レンズ制御部７０７による光軸移動
制御と動作について説明する。図５（ａ）および（ｂ）
は、本実施形態による光軸移動制御可能なレンズ・撮像
素子周辺の概略ブロック図である。Next, the lens section 70 having a variable optical axis function.
1, the optical axis movement control and operation by the image pickup unit 702 and the lens control unit 707 will be described. FIG. 5 (a) and (b)
FIG. 3 is a schematic block diagram of the periphery of a lens / imaging device capable of optical axis movement control according to the present embodiment.

【００５３】図５に示したように、本実施形態のレンズ
部７０１は、レンズとその後段に配置された平行平板を
有している。すなわち、図５において、４０１はレンズ
であり、４０２は光軸に対して傾斜可能に設けられた平
行平板であり、４０３は固体撮像素子である。As shown in FIG. 5, the lens unit 701 of this embodiment has a lens and a parallel plate arranged in the subsequent stage. That is, in FIG. 5, reference numeral 401 is a lens, 402 is a parallel plate that is tiltable with respect to the optical axis, and 403 is a solid-state image sensor.

【００５４】このような構成において、レンズ制御部７
０７が上記平行平板４０２の光軸に対する傾きを制御し
て上記固体撮像素子４０３の結像位置を移動させるよう
に動作することにより、結像位置の異なる複数枚の画像
情報を得ることができるようにしている。In such a configuration, the lens controller 7
07 controls the inclination of the parallel plate 402 with respect to the optical axis and operates so as to move the image forming position of the solid-state image sensor 403, so that a plurality of pieces of image information having different image forming positions can be obtained. I have to.

【００５５】なお、本実施形態においては、水平・垂直
の両方向ともに１／２画素ピッチの画素ずらしを行うも
のであり、原点位置、水平１／２画素ずらし位置、垂直
１／２画素ずらし位置、水平／垂直１／２画素ずらし位
置の４フレームの画像情報を入力することにより、水平
・垂直の各々の方向について、画素密度（分解能）が２
倍の画像が得られることになる。In the present embodiment, pixel shifts of 1/2 pixel pitch are performed in both the horizontal and vertical directions. The origin position, horizontal 1/2 pixel shift position, vertical 1/2 pixel shift position, By inputting image information of 4 frames at horizontal / vertical 1/2 pixel shift positions, the pixel density (resolution) is 2 in each of the horizontal and vertical directions.
Double the image will be obtained.

【００５６】次に、以上の構成における本実施形態の画
像入力装置の高解像度画像の入力、圧縮符号化動作を説
明する。図４は、画素ずらし入力処理の様子を説明する
概念図である。図４に示すように、順次入力される原点
位置画像（ｆｒａｍｅ ♯０）〜垂直方向一画素ずらし
画像（ｆｒａｍｅ ♯３）のそれぞれについて、入力処
理および圧縮符号化処理を詳細に説明する。Next, the operation of inputting the high resolution image and the compression encoding of the image input apparatus of the present embodiment having the above-mentioned configuration will be described. FIG. 4 is a conceptual diagram illustrating a state of pixel shift input processing. As shown in FIG. 4, the input processing and the compression encoding processing will be described in detail for each of the sequentially input origin position image (frame # 0) to vertical one-pixel shifted image (frame # 3).

【００５７】はじめに、原点位置画像（図４：ｆｒａｍ
ｅ ♯０）入力および圧縮符号化動作について説明す
る。まず、レンズ部７０１においては、レンズ制御部７
０７の光軸移動制御がなされ、水平・垂直方向共に画素
ずらしなしの原点画像の静止画像（ｆｒａｍｅ ♯０）
の入力制御が行われる。First, the origin position image (FIG. 4: frame
e # 0) Input and compression encoding operation will be described. First, in the lens unit 701, the lens control unit 7
The optical axis movement control of 07 is performed, and the still image of the origin image (frame # 0) without pixel shifting in both the horizontal and vertical directions
Input control is performed.

【００５８】上記のようにして入力された原点位置画像
（ｆｒａｍｅ ♯０）は、画像処理部７０３において色
処理や各種フィルタ処理等の画像処理がなされる。ま
た、符号化部１０８により圧縮符号化処理されるととも
に、メモリ入力制御部１０５の入力制御によりメモリ部
１０４に格納される。ここで、メモリ入力制御部１０５
によるメモリ部１０４への入力画像の格納は、原点位置
画像（ｆｒａｍｅ ♯０）に対してのみ実行される。The origin position image (frame # 0) input as described above is subjected to image processing such as color processing and various filter processing in the image processing unit 703. Further, the data is compression-encoded by the encoding unit 108 and stored in the memory unit 104 under the input control of the memory input control unit 105. Here, the memory input control unit 105
The storage of the input image in the memory unit 104 by is executed only for the origin position image (frame # 0).

【００５９】一方、メモリ出力制御部１０６によるメモ
リ部１０４から各画像の出力処理および減算部１１１に
よる減算処理は、原点位置画像（ｆｒａｍｅ ♯０）の
入力時および符号化処理時には稼働しない。なお、全て
の動作制御およびタイミング制御は全体制御部１１０に
よって行われる。On the other hand, the output process of each image from the memory unit 104 by the memory output control unit 106 and the subtraction process by the subtraction unit 111 do not operate at the time of input of the origin position image (frame # 0) and the encoding process. Note that all operation control and timing control are performed by the overall control unit 110.

【００６０】次に、水平方向１／２画素ずらし位置画像
（図４：ｆｒａｍｅ ♯１）の入力および圧縮符号化動
作について説明する。はじめに、レンズ部７０１におい
ては、レンズ制御部７０７の光軸移動制御がなされ、水
平方向１／２画素ずらし位置画像（ｆｒａｍｅ ♯１）
の入力制御が行われる。Next, the operation of inputting and compressing the image of the position shifted by 1/2 pixel in the horizontal direction (FIG. 4: frame # 1) will be described. First, in the lens unit 701, the optical axis movement control of the lens control unit 707 is performed, and a 1/2 pixel shift position image in the horizontal direction (frame # 1) is obtained.
Input control is performed.

【００６１】そして、水平方向１／２画素ずらし位置画
像（ｆｒａｍｅ ♯１）の入力処理を行うと同時に、メ
モリ出力制御部１０６によりメモリ部１０４から原点位
置画像（ｆｒａｍｅ ♯０）を読み出し処理が行われ
る。Then, at the same time as the input processing of the 1/2 pixel shifted position image (frame # 1) in the horizontal direction is performed, the memory output control unit 106 reads the origin position image (frame # 0) from the memory unit 104. Be seen.

【００６２】これにより、画像処理部７０３の出力であ
る入力画像（ｆｒａｍｅ ♯１）、およびメモリ出力制
御部１０６の出力である原点位置画像（ｆｒａｍｅ ♯
０）が符号化部１０８内部に設けられている減算部１１
１に入力される。As a result, the input image (frame # 1) output from the image processing unit 703 and the origin position image (frame # 1) output from the memory output control unit 106 are output.
0) is a subtraction unit 11 provided inside the encoding unit 108.
1 is input.

【００６３】上記減算部１１１においては、画像処理部
７０３の出力である水平方向１／２画素ずらし画像（ｆ
ｒａｍｅ ♯１）と、メモリ出力制御部１０６による出
力画像である原点位置画像（ｆｒａｍｅ ♯０）との間
の差分演算を行い、差分画像を生成する。In the subtracting section 111, the horizontal half-pixel shifted image (f) output from the image processing section 703 is output.
The difference calculation between the frame # 1) and the origin position image (frame # 0) which is the output image by the memory output control unit 106 is performed to generate a difference image.

【００６４】上述のようにして生成された差分画像は符
号化部１０８に与えられる。上記符号化部１０８におい
ては、差分画像を圧縮符号化する処理を行う。これらの
全ての動作制御およびタイミング制御は全体制御部１１
０によって行われる。The difference image generated as described above is given to the encoding unit 108. The encoding unit 108 performs a process of compressing and encoding the difference image. All of these operation controls and timing controls are performed by the overall control unit 11
Performed by 0.

【００６５】ここで、各画素ずらし画像の対応する画素
間は非常によく似ている。例えば、自然画像において
も、その多くは低周波数領域に集中しており、各画素ず
らし画像の間には大きな相関がある。Here, the corresponding pixels of the pixel-shifted images are very similar. For example, even in natural images, most of them are concentrated in the low frequency region, and there is a large correlation between the pixel-shifted images.

【００６６】したがって、上述した原点位置画像（ｆｒ
ａｍｅ ♯０）と水平１／２画素ずらし位置画像（ｆｒ
ａｍｅ ♯１）との差分画像はほとんど０に近い値に集
中することになり、データの圧縮に非常に有効である。
続いて、水平・垂直方向１／２画素ずらし位置画像（ｆ
ｒａｍｅ ♯２）の入力および圧縮符号化動作について
説明する。Therefore, the origin position image (fr
ame # 0) and horizontal 1/2 pixel shift position image (fr
The difference image from ame # 1) is concentrated on a value close to 0, which is very effective for data compression.
Next, the horizontal / vertical 1/2 pixel shift position image (f
The input of frame # 2) and the compression encoding operation will be described.

【００６７】水平方向１／２画素ずらし位置画像（ｆｒ
ａｍｅ ♯１）を入力する場合と同様にして、まず、レ
ンズ部７０１においてはレンズ制御部７０７の光軸移動
制御がなされ、画像処理部７０３を介して入力された水
平・垂直１／２画素ずらし位置画像（ｆｒａｍｅ ♯
２）と、メモリ部１０４に格納された原点位置画像（ｆ
ｒａｍｅ ♯０）との間の減算処理を行う。更に、この
差分画像の圧縮符号化処理を実行する。この場合も、全
ての動作制御およびタイミング制御は全体制御部１１０
によって行われる。Horizontal half pixel shift position image (fr
Similarly to the case of inputting the image name # 1), first, in the lens unit 701, the optical axis movement control of the lens control unit 707 is performed, and the horizontal / vertical 1/2 pixel shift input via the image processing unit 703 is performed. Position image (frame #
2) and the origin position image (f
The subtraction process with the frame # 0) is performed. Furthermore, the compression encoding process of this difference image is performed. Also in this case, all operation control and timing control are performed by the overall control unit 110.
Done by

【００６８】続いて、垂直方向１／２画素ずらし画像
（ｆｒａｍｅ ♯３）の入力および圧縮符号化動作につ
いて説明する。この場合も、水平方向１／２画素ずらし
画像（ｆｒａｍｅ ♯１）の場合と同様にして、まず、
レンズ部７０１においてはレンズ制御部７０７の光軸移
動制御がなされ、画像処理部７０３を介して入力された
垂直１／２画素ずらし位置画像（ｆｒａｍｅ ♯３）
と、メモリ部１０４に格納された原点位置画像（ｆｒａ
ｍｅ ♯０）との間の減算処理を行う。更に、この差分
画像の圧縮符号化処理を実行する。Next, the input and compression encoding operation of the vertically shifted image (frame # 3) by 1/2 pixel will be described. Also in this case, first, in the same manner as in the case of the image shifted by 1/2 pixel in the horizontal direction (frame # 1),
In the lens unit 701, the optical axis movement control of the lens control unit 707 is performed, and the vertical 1/2 pixel shift position image (frame # 3) input via the image processing unit 703.
And the origin position image (fra) stored in the memory unit 104.
me # 0). Furthermore, the compression encoding process of this difference image is performed.

【００６９】このようにして、本実施形態の画像入力装
置は単体の固体撮像素子４０３による画素数よりも大き
な画素数の画像、すなわち、解像度を高めた画像の取り
込みを実現し、同時に、原点位置画像（ｆｒａｍｅ ♯
０）はそのまま、原点位置以外の画像（ｆｒａｍｅ ♯
１〜♯３）を原点位置画像（ｆｒａｍｅ ♯０）との間
の差分画像を符号化処理するようにしている。In this way, the image input apparatus according to the present embodiment realizes the capturing of an image having a larger number of pixels than the single solid-state image sensor 403, that is, an image having a higher resolution, and at the same time, the origin position. Image (frame #
0) remains as it is, and the image (frame #
1 to # 3) and the difference image between the origin position image (frame # 0) is encoded.

【００７０】図３は、上述した各画素ずらし画面毎の入
力処理および圧縮符号化処理の動作手順を示すフロー・
チャートである。まず、全体制御部１１０より、各部に
対して入力処理すべき位置情報が通知される。これに従
い、レンズ制御部７０７の光軸移動制御がなされ、ある
画素ずらし位置の画像情報が撮像部７０２を介して入力
される（ステップＳ１）。FIG. 3 is a flow chart showing the operation procedure of the input processing and compression encoding processing for each pixel shift screen described above.
It is a chart. First, the overall control unit 110 notifies each unit of position information to be input processed. According to this, the optical axis movement control of the lens control unit 707 is performed, and image information of a certain pixel shift position is input via the image pickup unit 702 (step S1).

【００７１】次に、画像処理部７０３により、色処理お
よび各種フィルタ処理等の画像処理が実行される（ステ
ップＳ２）。次に、ステップＳ３において、画素ずらし
位置が原点位置か否かが判断される。ステップＳ３の判
断の結果、画素ずらし位置が原点位置であった場合は、
ステップＳ４に進み、メモリ入力制御部１０５の入力制
御により、画像処理部７０３の出力である原点位置画像
（ｆｒａｍｅ ♯０）をメモリ部１０４へ格納する処理
が実行される。Next, the image processing unit 703 executes image processing such as color processing and various filter processing (step S2). Next, in step S3, it is determined whether the pixel shift position is the origin position. As a result of the determination in step S3, if the pixel shift position is the origin position,
In step S4, the input control of the memory input control unit 105 executes a process of storing the origin position image (frame # 0) output from the image processing unit 703 in the memory unit 104.

【００７２】また、ステップＳ３の判断の結果、画素ず
らし位置が原点以外の位置、すなわち、水平１／２画素
ずらし位置（ｆｒａｍｅ ♯１）、水平・垂直１／２画
素ずらし位置（ｆｒａｍｅ ♯２）または垂直１／２画
素ずらし位置（ｆｒａｍｅ♯３）であった場合はステッ
プＳ６に進む。As a result of the determination in step S3, the pixel shift position is a position other than the origin, that is, the horizontal 1/2 pixel shift position (frame # 1) and the horizontal / vertical 1/2 pixel shift position (frame # 2). Alternatively, if the position is the vertical 1/2 pixel shift position (frame # 3), the process proceeds to step S6.

【００７３】ステップＳ６においては、メモリ部１０４
への入力画像の格納は行わない。すなわち、原点位置以
外の画素ずらし画像（ｆｒａｍｅ ♯１〜♯３）に対し
ては入力画像の格納は行わず、メモリ出力制御部１０６
によりメモリ部１０４に格納されている原点位置画像
（ｆｒａｍｅ ♯０）を読み出す処理を行う。次に、ス
テップＳ７に進み、原点位置画像と画素ずらし画像（ｆ
ｒａｍｅ ♯１〜♯３）との間の減算処理を減算部１１
１によって実行する。In step S6, the memory unit 104
The input image is not stored in. That is, the input image is not stored for the pixel-shifted images (frames # 1 to # 3) other than the origin position, and the memory output control unit 106 is not used.
The origin position image (frame # 0) stored in the memory unit 104 is read out. Next, in step S7, the origin position image and the pixel shift image (f
the subtraction processing between the frames # 1 to # 3).
Run by 1.

【００７４】一方、原点位置画像（ｆｒａｍｅ ♯０）
に対しては、減算処理は行わない。更に、符号化部１０
８において、原点位置画像（ｆｒａｍｅ ♯０）に対し
てはそのまま符号化処理が実行され（ステップＳ５）、
原点位置以外の画素ずらし画像（ｆｒａｍｅ ♯１〜♯
３）に対しては、減算部１１１の出力である原点位置画
像（ｆｒａｍｅ ♯０）との間の差分画像に対して符号
化処理が実行される（ステップＳ８）。そして、符号化
部１０８による圧縮符号化出力は、出力部７０９によっ
て出力処理される（ステップＳ９）。On the other hand, the origin position image (frame # 0)
Is not subtracted. Furthermore, the encoding unit 10
8, the encoding process is executed as it is on the origin position image (frame # 0) (step S5),
Pixel-shifted images other than the origin position (frame # 1 to #
For 3), the encoding process is performed on the difference image between the origin position image (frame # 0) output from the subtraction unit 111 (step S8). Then, the compression-encoded output by the encoding unit 108 is output by the output unit 709 (step S9).

【００７５】上述のとおり、画面間差分演算を含む圧縮
符号化処理は、各画素ずらし画面の入力のための入力制
御および入力動作との並行処理が可能であるため、符号
化部の無駄な待機時間が減少し、全体として高速な入力
・圧縮処理を可能となる。As described above, the compression encoding process including the inter-screen difference calculation can be performed in parallel with the input control and the input operation for inputting each pixel shift screen, so that the encoding unit waits wastefully. Time is reduced, and high-speed input / compression processing is possible as a whole.

【００７６】さらに、本実施形態においては、画素ずら
し画面間の相関を利用して圧縮符号化処理することによ
り、高解像度画像をメモリ上に一旦合成する必要がない
ため、全画面分の大容量のメモリが不要となるだけでな
く、メモリ入出力制御を簡略化することができる。これ
により、メモリ容量を大幅に削減できるとともに、回路
規模の簡素化を可能にすることができる。Further, in this embodiment, since the high-resolution image does not need to be once synthesized on the memory by performing the compression coding processing by utilizing the correlation between the pixel-shifted screens, a large capacity for the entire screen is obtained. Not only is the memory unnecessary, but the memory input / output control can be simplified. As a result, the memory capacity can be significantly reduced and the circuit scale can be simplified.

【００７７】以上説明したように、本実施形態の画像入
力装置においては、画素ずらし入力による高解像度画像
情報の入力処理および圧縮処理において、順次入力され
る各画素ずらし画面に対して、原点位置画像はメモリに
格納すると同時にそのまま圧縮符号化処理する。As described above, in the image input apparatus according to this embodiment, in the input processing and compression processing of the high resolution image information by the pixel shift input, the origin position image for each pixel shift screen sequentially input. Is stored in the memory and simultaneously subjected to compression encoding processing.

【００７８】また、原点以外の位置の画素ずらし画像が
入力された場合には、メモリ部１０４に格納された原点
位置画像との間の差分画像を生成して圧縮符号化処理す
ることにより、メモリ部１０４上に高解像度画像を構築
（合成）しなくても済むようにしている。これにより、
画素ずらし制御（光軸移動制御）動作中において並行し
て圧縮符号化処理を実行することができる。When a pixel shift image at a position other than the origin is input, a difference image between the pixel shift image and the origin position image stored in the memory unit 104 is generated and compression-encoded. It is not necessary to construct (compose) a high resolution image on the unit 104. This allows
The compression encoding processing can be executed in parallel during the pixel shift control (optical axis movement control) operation.

【００７９】さらに、各画素ずらし画像間の相関を効率
的に利用して圧縮処理を行うようにしているので、高解
像度画像を生成するために必要なメモリ容量を大幅に削
減することができるとともに、メモリ入力制御部１０５
等の回路を簡素化することができ、更には全体としての
入力・圧縮処理の効率化および高速化を実現することが
できる。Furthermore, since the compression processing is performed by efficiently utilizing the correlation between the pixel-shifted images, it is possible to significantly reduce the memory capacity required to generate a high resolution image. , Memory input control unit 105
It is possible to simplify the circuits such as the above, and further to realize the efficiency and speedup of the input / compression processing as a whole.

【００８０】なお、上記実施形態においては、水平方向
と垂直方向に１／２画素ずらした４枚の画像を合成する
ことにより高解像度な静止画像を入力する場合について
説明した。しかし、本発明は、１／２画素ずらしに限定
されるものではなく、１／３画素ずらしや、１／４画素
ずらしなどをはじめとする様々な画素ずらし量に適用す
ることができる。また、水平方向と垂直方向の分割数が
異なるものにも良好に適用することができる。In the above embodiment, the case where a high-resolution still image is input by synthesizing four images shifted by 1/2 pixel in the horizontal and vertical directions has been described. However, the present invention is not limited to 1/2 pixel shift, and can be applied to various pixel shift amounts such as 1/3 pixel shift and 1/4 pixel shift. Further, the present invention can be favorably applied to those having different numbers of divisions in the horizontal direction and the vertical direction.

【００８１】また、上記実施形態においては、平行平板
４０２を用いた画素ずらし方式について説明したが、プ
リズムを用いた方式や撮像素子を振動させる方法など、
その他のあらゆる画素ずらし手法について適用できるこ
とは明らかである。また、上記実施形態においては、図
４に示す入力順序を例に挙げて説明したが、入力順序は
これに限定されるものではない。In the above embodiment, the pixel shifting method using the parallel plate 402 has been described, but a method using a prism, a method of vibrating the image pickup element, etc.
Obviously, it can be applied to all other pixel shift techniques. Further, in the above embodiment, the input order shown in FIG. 4 has been described as an example, but the input order is not limited to this.

【００８２】また、上記実施形態においては、原点位置
の入力画像を参照画像としてメモリに格納する場合につ
いて説明したが、参照画像を原点位置以外の画素ずらし
位置の画像としたり、参照画像を各画素ずらし位置毎に
更新したり、あるいは取り込み時の最初の画素ずらし画
像を参照画像とする場合などにおいても適用できる。ま
た、外部制御により参照画像を更新するようにしてもよ
い。In the above embodiment, the case where the input image at the origin position is stored in the memory as the reference image has been described. However, the reference image may be an image at a pixel shift position other than the origin position, or the reference image may be a pixel at each pixel. It can also be applied when updating for each shift position, or when the first pixel shift image at the time of capturing is used as a reference image. Further, the reference image may be updated by external control.

【００８３】[0083]

【発明の効果】本発明は上述したように、本発明に係わ
る第一の発明によれば、撮像光の光軸を水平または／お
よび垂直方向に微小にずらす量を制御して画素ずらし処
理を行う画素ずらし制御手段と、上記画素ずらし制御手
段により画素ずらし処理された画像情報を入力する画像
情報入力手段と、上記画像情報入力手段により入力され
た入力画像情報を一時記憶する一時格納手段と、上記画
像情報入力手段により順次入力される入力画像情報に対
して、上記一時格納手段に格納する画像情報を選択する
とともに、上記選択した画像情報を上記一時格納手段に
格納するようにするための格納指示情報を生成して出力
する格納指示手段と、上記格納指示手段から出力される
格納指示情報に基づいて上記入力画像情報を上記一時格
納手段へ書き込むようにする書き込み手段と、上記一時
格納手段に格納されている画像情報を読み出す読み出し
手段と、上記読み出し手段によって上記一時格納手段か
ら読み出された格納画像情報と上記画像情報入力手段に
より入力された入力画像情報との間の画素間の差分演算
を行って差分画像情報を生成する演算手段と、上記入力
画像情報または／および上記差分画像情報を出力する出
力手段とを設け、任意の画素ずらし位置の画像をメモリ
に格納するとともに、順次入力される各画素ずらし画像
に対して、上記メモリに格納した画像との間の差分画像
を生成して出力するようにしたので、全ての画素ずらし
位置の画像情報からなる高解像度画像を形成するための
大容量のメモリおよび合成回路等を用いることなく、効
率的な高解像度画像の入力（後段処理回路への転送）処
理を行うことができ、システム全体の処理の効率化およ
び高速化を実現することができる。As described above, according to the first aspect of the present invention, the pixel shift processing is performed by controlling the amount of minute shift of the optical axis of the image pickup light in the horizontal and / or vertical directions. Pixel shift control means for performing, image information input means for inputting image information subjected to pixel shift processing by the pixel shift control means, temporary storage means for temporarily storing the input image information input by the image information input means, A storage for selecting the image information to be stored in the temporary storage means with respect to the input image information sequentially input by the image information input means, and storing the selected image information in the temporary storage means Storage instruction means for generating and outputting instruction information, and writing the input image information in the temporary storage means based on the storage instruction information output from the storage instruction means Writing means, reading means for reading the image information stored in the temporary storage means, stored image information read from the temporary storage means by the reading means and input input by the image information input means Arithmetic means for generating difference image information by performing a difference calculation between pixels with respect to the image information and output means for outputting the input image information and / or the difference image information are provided, and an arbitrary pixel shift position The image is stored in the memory, and for each pixel shift image that is sequentially input, the difference image between the image stored in the memory and the image is generated and output. Efficient input of a high-resolution image without using a large-capacity memory and a synthesizing circuit for forming a high-resolution image of information (post-processing) Can transfer) process to the circuit, it is possible to realize efficient and faster processing of the entire system.

【００８４】更に、本発明に係わる第二の発明によれ
ば、上記第一の発明の画像入力装置に、入力画像情報と
上記差分画像情報とを選択的に圧縮符号化処理する符号
化手段を更に設けたので、画素ずらし入力による高解像
度画像情報の入力処理において、任意の画素ずらし位置
画像をメモリに格納し、順次入力される各画素ずらし画
像に対してメモリ格納画像との間の差分画像を生成する
とともに、上記画素ずらし画面間の差分画像を圧縮符号
化処理するようにしたので、全ての画素ずらし位置の画
像情報からなる高解像度画像を形成するための大容量の
メモリおよび合成回路等を用いることなく、画素ずらし
画面間の相関を利用した効率的な圧縮符号化処理を行う
ことができるとともに、画素ずらし制御・入力処理と並
行した圧縮符号化処理を行うことができ、効率的かつ高
速な入力処理および圧縮符号化処理を実現することがで
きる。Further, according to the second invention of the present invention, the image input device of the first invention is provided with a coding means for selectively compressing and coding the input image information and the difference image information. Since it is further provided, in the process of inputting high-resolution image information by pixel shift input, an arbitrary pixel shift position image is stored in the memory, and a difference image between the pixel shift image sequentially input and the memory storage image is input. In addition to generating the above, the difference image between the pixel-shifted screens is compression-encoded, so a large-capacity memory and synthesis circuit for forming a high-resolution image composed of image information of all pixel-shifted positions, etc. It is possible to perform efficient compression coding processing that uses the correlation between pixel shift screens without using the pixel shift control, and to perform compression coding processing that is in parallel with pixel shift control / input processing. Can be performed, it is possible to realize an efficient and fast line processing and compression coding processing.

【００８５】本発明に係わる第三の発明によれば、上記
格納指示手段は、上記画素ずらし制御手段による所定位
置の入力画像情報に対して格納指示情報を生成して出力
するとともに、上記一時格納手段は、上記書き込み手段
による書き込み制御により所定位置入力画像情報を一時
記憶するようにしたので、あらかじめ決められた画素ず
らし位置画像に対して画面間差分画像を生成し、所定位
置画像および各々の画面間の差分画像を生成して出力し
たり、あるいは圧縮符号化して出力したりすることがで
きる。これにより、メモリ容量および周辺回路規模を大
幅に削減するだけでなく、システム全体の処理の効率化
および高速化を実現することができる。According to the third aspect of the present invention, the storage instruction means generates and outputs the storage instruction information for the input image information at the predetermined position by the pixel shift control means, and the temporary storage is also performed. Since the means is configured to temporarily store the predetermined position input image information by the writing control by the writing means, an inter-screen difference image is generated for a predetermined pixel shift position image, and the predetermined position image and each screen are generated. A difference image between them can be generated and output, or can be compression-encoded and output. As a result, not only the memory capacity and the peripheral circuit scale can be significantly reduced, but also the efficiency and speed of the processing of the entire system can be realized.

【００８６】本発明に係わる第四の発明によれば、上記
格納指示手段は、上記画素ずらし制御手段による画素ず
らし処理の完了に応答して格納指示情報を生成して出力
し、上記一時格納手段は、上記書き込み手段による書き
込み制御により画素ずらし位置毎に格納画像情報を更新
するようにしたので、直前の画素ずらし入力画像に対し
て画面間差分画像を生成してこれを出力したり、あるい
は圧縮符号化して出力したりすることができる。これに
より、メモリ容量および周辺回路規模を大幅に削減する
ことができるとともに、システム全体の処理の効率化お
よび高速化を図ることができる。According to a fourth aspect of the present invention, the storage instructing means generates and outputs storage instruction information in response to the completion of the pixel shift processing by the pixel shift control means, and the temporary storage means. Since the stored image information is updated for each pixel shift position by the writing control by the writing means, an inter-screen difference image is generated with respect to the immediately preceding pixel shift input image, and this is output or compressed. It can be encoded and output. As a result, the memory capacity and the scale of peripheral circuits can be significantly reduced, and the efficiency and speed of processing of the entire system can be improved.

【００８７】本発明に係わる第五の発明によれば、上記
解像度を高めた画像情報の取り込み開始を監視する開始
タイミング監視手段を更に備え、上記格納指示手段は、
上記開始タイミング監視手段の監視結果に基づいて上記
画素ずらし制御手段による最初の画素ずらし位置の入力
画像情報に対して格納指示情報を出力し、上記一時格納
手段は、上記書き込み手段による書き込み制御により、
最初の画素ずらし位置入力画像情報を一時記憶するよう
にしたので、取り込み開始から第一番目の画素ずらし位
置画像に対して画面間の差分画像を生成し、第一番目の
画素ずらし位置画像および第二番目以降の各々の画面間
の差分画像を生成して出力したり、あるいは圧縮符号化
して出力したりすることができ、メモリ容量および周辺
回路規模を大幅に削減することができるとともに、シス
テム全体の処理の効率化および高速化を実現することが
できる。According to a fifth aspect of the present invention, the storage instruction means further comprises start timing monitoring means for monitoring the start of capturing the image information having the higher resolution.
Based on the monitoring result of the start timing monitoring means, the storage instruction information is output for the input image information of the first pixel shift position by the pixel shift control means, and the temporary storage means, by the write control by the writing means,
Since the first pixel shift position input image information is temporarily stored, a difference image between screens is generated for the first pixel shift position image from the start of capturing, and the first pixel shift position image and the first pixel shift position image and the first pixel shift position image are displayed. It is possible to generate and output the difference image between each screen after the second one, or to output by compressing and encoding it, and it is possible to significantly reduce the memory capacity and the peripheral circuit scale, and also the entire system. It is possible to realize the efficiency and speedup of the processing of.

【００８８】本発明に係わる第六の発明によれば、外部
から制御情報を入力する制御情報入力手段を更に備え、
上記格納指示手段は、上記制御情報入力手段による入力
制御情報に基づいて格納指示情報を生成して出力するよ
うにしたので、外部制御に従い格納された画素ずらし画
像に対して画面間の差分画像を生成し、外部制御による
格納画像と各々の画面間の差分画像を生成して出力した
り、あるいは圧縮符号化して出力したりすることができ
る。これにより、メモリ容量および周辺回路規模を大幅
に削減するだけでなく、システム全体の処理の効率化お
よび高速化を実現することができる。According to a sixth aspect of the present invention, there is further provided control information input means for inputting control information from the outside,
Since the storage instructing means is configured to generate and output the storage instructing information based on the input control information by the control information inputting means, the difference image between the screens can be displayed with respect to the pixel shift image stored according to the external control. It is possible to generate and output a stored image under external control and a difference image between the respective screens, or output by compression encoding. As a result, not only the memory capacity and the peripheral circuit scale can be significantly reduced, but also the efficiency and speed of the processing of the entire system can be realized.

【００８９】本発明に係わる第七の発明によれば、上記
画像情報入力手段に撮像素子を設け、レンズを介して入
射される撮像対象物からの光を上記撮像素子の受光面に
結像させるとともに光電変換して入力するようにし、ま
た、上記画素ずらし制御手段に、上記レンズの光軸に対
して傾斜可能に光軸上に設けられた光透過性物質の平板
と、上記平板の傾斜量を変化させて撮像対象物の結像位
置を制御する位置制御手段とを設けたので、入力された
画素ずらし画像と外部からの制御に従い格納された画素
ずらし画像との間の差分画像を生成して出力することが
できる。According to the seventh aspect of the present invention, the image information input means is provided with an image pickup device, and the light from the image pickup object incident through the lens is imaged on the light receiving surface of the image pickup device. And a photoelectric conversion device for inputting the same, and the pixel shift control means is provided with a flat plate of a light-transmissive material provided on the optical axis so as to be tiltable with respect to the optical axis of the lens, and the tilt amount of the flat plate. And a position control means for controlling the image formation position of the imaging object by changing the value of the image pickup target, so that a difference image between the input pixel shift image and the pixel shift image stored according to external control is generated. Can be output.

【図面の簡単な説明】[Brief description of the drawings]

【図１】本発明の画像入力装置の要部の概略構成を示す
機能構成図である。FIG. 1 is a functional configuration diagram showing a schematic configuration of a main part of an image input apparatus of the present invention.

【図２】本発明の実施形態における画像入力装置の概略
を示すブロック図である。FIG. 2 is a block diagram showing an outline of an image input device according to an embodiment of the present invention.

【図３】本発明の実施形態における各画素ずらし画面毎
の入力処理・圧縮処理の動作を示すフローチャートであ
る。FIG. 3 is a flowchart showing an operation of an input process / compression process for each pixel shift screen in the embodiment of the present invention.

【図４】本発明の実施形態における画素ずらし（１／２
画素）による高解像度画像入力装置処理の様子（手順）
を説明する図である。FIG. 4 is a diagram illustrating a pixel shift (1/2) according to the embodiment of the present invention.
High-resolution image input device processing by (pixels) (procedure)
FIG.

【図５】本発明の実施形態におけるレンズ部および撮像
部の概略構成を説明する構成図である。FIG. 5 is a configuration diagram illustrating a schematic configuration of a lens unit and an imaging unit according to the embodiment of the present invention.

【図６】画素ずらし（１／２画素）による各画素ずらし
画像の合成処理（高解像度画像の形成）の様子を説明す
る図である。FIG. 6 is a diagram illustrating a state of a combination process (formation of a high-resolution image) of each pixel-shifted image by pixel shift (1/2 pixel).

【図７】従来例における画像入力装置の全体の概略構成
を示すブロック図である。FIG. 7 is a block diagram showing a schematic configuration of an entire image input device in a conventional example.

【符号の説明】[Explanation of symbols]

Ａ 画素ずらし制御手段 Ｂ 画像情報入力手段 Ｃ 一時格納手段 Ｄ 格納指示手段 Ｅ 書き込み手段 Ｆ 読み出し手段 Ｇ 演算手段 Ｈ 出力手段 Ｉ 符号化手段 Ｊ 制御情報入力手段 Ｋ 開始タイミング監視手段 A Pixel shift control means B Image information input means C Temporary storage means D Storage instruction means E Writing means F Reading means G Computing means H Output means I Encoding means J Control information input means K Start timing monitoring means

Claims (18)

【特許請求の範囲】[Claims] 【請求項１】 撮像光の光軸を水平または／および垂直
方向に微小単位ずつずらして撮像した複数の画像情報を
入力することにより解像度を高めた高解像度画像情報を
取り込むようにした画像入力装置において、 上記撮像光の光軸を水平または／および垂直方向に微小
にずらす量を制御して画素ずらし処理を行う画素ずらし
制御手段と、 上記画素ずらし制御手段により画素ずらし処理された画
像情報を入力する画像情報入力手段と、 上記画像情報入力手段により入力された入力画像情報を
一時記憶する一時格納手段と、 上記画像情報入力手段により順次入力される入力画像情
報に対して、上記一時格納手段に格納する画像情報を選
択するとともに、上記選択した画像情報を上記一時格納
手段に格納するようにするための格納指示情報を生成し
て出力する格納指示手段と、 上記格納指示手段から出力される格納指示情報に基づい
て上記入力画像情報を上記一時格納手段へ書き込むよう
にする書き込み手段と、 上記一時格納手段に格納されている画像情報を読み出す
読み出し手段と、 上記読み出し手段によって上記一時格納手段から読み出
された格納画像情報と上記画像情報入力手段により入力
された入力画像情報との間の画素間の差分演算を行って
差分画像情報を生成する演算手段と、 上記入力画像情報または／および上記差分画像情報を出
力する出力手段とを備えることを特徴とする画像入力装
置。1. An image input device adapted to capture high-resolution image information having a higher resolution by inputting a plurality of image information obtained by shifting the optical axis of the image pickup light horizontally or / and vertically by a small unit. In, the pixel shift control means for performing pixel shift processing by controlling the amount of slight shift of the optical axis of the imaging light in the horizontal and / or vertical direction, and the image information subjected to pixel shift processing by the pixel shift control means are input. Image information input means, a temporary storage means for temporarily storing the input image information input by the image information input means, and the temporary storage means for the input image information sequentially input by the image information input means. Generates storage instruction information for selecting the image information to be stored and storing the selected image information in the temporary storage means. Storage instruction means for outputting the input image information to the temporary storage means based on the storage instruction information output from the storage instruction means, and an image stored in the temporary storage means. A read-out means for reading out information, and a difference image by performing a difference calculation between pixels between the stored image information read out from the temporary storage means by the read-out means and the input image information input by the image information input means. An image input device comprising: an arithmetic means for generating information; and an output means for outputting the input image information and / or the difference image information. 【請求項２】 撮像光の光軸を水平または／および垂直
方向に微小単位ずつずらして撮像した複数の画像情報を
入力することにより解像度を高めた高解像度画像情報を
取り込むようにした画像入力装置において、 上記撮像光の光軸を水平または／および垂直方向に微小
にずらす量を制御して画素ずらし処理を行う画素ずらし
制御手段と、 上記画素ずらし制御手段により画素ずらし処理された画
像情報を入力する画像情報入力手段と、 上記画像情報入力手段により入力された入力画像情報を
一時記憶する一時格納手段と、 上記画像情報入力手段により順次入力される入力画像情
報に対して、上記一時格納手段に格納する画像情報を選
択するとともに、上記選択した画像情報を上記一時格納
手段に格納するようにするための格納指示情報を生成し
て出力する格納指示手段と、 上記格納指示手段から出力される格納指示情報に基づい
て上記入力画像情報を上記一時格納手段へ書き込むよう
にする書き込み手段と、 上記一時格納手段に格納されている画像情報を読み出す
読み出し手段と、 上記読み出し手段によって上記一時格納手段から読み出
された格納画像情報と上記画像情報入力手段により入力
された入力画像情報との間の画素間の差分演算を行って
差分画像情報を生成する演算手段と、 上記入力画像情報と上記差分画像情報とを選択的に圧縮
符号化処理する符号化手段と、 上記符号化手段によって符号化された符号化画像情報を
出力する出力手段とを備えることを特徴とする画像入力
装置。2. An image input device adapted to capture high resolution image information having a higher resolution by inputting a plurality of image information obtained by shifting the optical axis of the image pickup light horizontally or / and vertically and by minute units. In, the pixel shift control means for performing pixel shift processing by controlling the amount of slight shift of the optical axis of the imaging light in the horizontal and / or vertical direction, and the image information subjected to pixel shift processing by the pixel shift control means are input. Image information input means, a temporary storage means for temporarily storing the input image information input by the image information input means, and the temporary storage means for the input image information sequentially input by the image information input means. Generates storage instruction information for selecting the image information to be stored and storing the selected image information in the temporary storage means. Storage instruction means for outputting the input image information to the temporary storage means based on the storage instruction information output from the storage instruction means, and an image stored in the temporary storage means. A read-out means for reading out information, and a difference image by performing a pixel-to-pixel difference calculation between the stored image information read out from the temporary storage means by the read-out means and the input image information input by the image information input means. An arithmetic means for generating information, an encoding means for selectively compressing and encoding the input image information and the difference image information, and an output means for outputting the encoded image information encoded by the encoding means. An image input device comprising: 【請求項３】 上記格納指示手段は、上記画素ずらし制
御手段により画素ずらしされた所定位置の入力画像情報
に対して格納指示情報を生成して出力し、 上記一時格納手段は、上記書き込み手段による制御に基
づいて上記所定位置の入力画像情報を一時記憶すること
を特徴とする請求項１に記載の画像入力装置。3. The storage instructing means generates and outputs storage instruction information with respect to the input image information at a predetermined position pixel-shifted by the pixel shift control means, and the temporary storage means uses the writing means. The image input device according to claim 1, wherein the input image information at the predetermined position is temporarily stored under control. 【請求項４】 上記格納指示手段は、上記画素ずらし制
御手段により画素ずらしされた所定位置の入力画像情報
に対して格納指示情報を生成して出力し、 上記一時格納手段は、上記書き込み手段による制御に基
づいて上記所定位置の入力画像情報を一時記憶すること
を特徴とする請求項２に記載の画像入力装置。4. The storage instructing means generates and outputs storage instruction information with respect to the input image information at a predetermined position pixel-shifted by the pixel shift control means, and the temporary storage means uses the writing means. The image input device according to claim 2, wherein the input image information at the predetermined position is temporarily stored under control. 【請求項５】 上記格納指示手段は、上記画素ずらし制
御手段による画素ずらし処理の完了に応答して上記格納
指示情報を生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、画素ずらし位置毎に上記格納した画像情報
を更新することを特徴とする請求項１に記載の画像入力
装置。5. The storage instructing means generates and outputs the storage instructing information in response to the completion of the pixel shifting processing by the pixel shifting control means, and the temporary storage means controls writing by the writing means. The image input device according to claim 1, wherein the stored image information is updated for each pixel shift position. 【請求項６】 上記格納指示手段は、上記画素ずらし制
御手段による画素ずらし処理の完了に応答して上記格納
指示情報を生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、画素ずらし位置毎に上記格納した画像情報
を更新することを特徴とする請求項２に記載の画像入力
装置。6. The storage instructing means generates and outputs the storage instructing information in response to the completion of the pixel shifting processing by the pixel shifting control means, and the temporary storing means controls writing by the writing means. The image input device according to claim 2, wherein the stored image information is updated for each pixel shift position. 【請求項７】 上記格納指示手段は、上記画素ずらし制
御手段による画素ずらし処理の完了に応答して上記格納
指示情報を生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、画素ずらし位置毎に上記格納した画像情報
を更新することを特徴とする請求項３に記載の画像入力
装置。7. The storage instructing means generates and outputs the storage instructing information in response to the completion of the pixel shifting processing by the pixel shifting control means, and the temporary storing means controls writing by the writing means. The image input device according to claim 3, wherein the stored image information is updated for each pixel shift position. 【請求項８】 上記格納指示手段は、上記画素ずらし制
御手段による画素ずらし処理の完了に応答して上記格納
指示情報を生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、画素ずらし位置毎に上記格納した画像情報
を更新することを特徴とする請求項４に記載の画像入力
装置。8. The storage instructing means generates and outputs the storage instructing information in response to the completion of the pixel shifting processing by the pixel shifting control means, and the temporary storing means controls writing by the writing means. The image input device according to claim 4, wherein the stored image information is updated for each pixel shift position. 【請求項９】 解像度を高めた画像情報の取り込み開始
を監視するための開始タイミング監視手段を更に備え、 上記格納指示手段は、上記開始タイミング監視手段の監
視結果に基づいて上記画素ずらし制御手段による最初の
画素ずらし位置の入力画像情報に対して格納指示情報を
生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、最初の画素ずらし位置の入力画像情報を一
時記憶することを特徴とする請求項１に記載の画像入力
装置。9. A start timing monitoring means for monitoring the start of capturing of image information having a higher resolution, wherein said storage instructing means is controlled by said pixel shift control means based on the monitoring result of said start timing monitoring means. The storage instruction information is generated and output for the input image information at the first pixel shift position, and the temporary storage means temporarily stores the input image information at the first pixel shift position by the write control by the writing means. The image input device according to claim 1. 【請求項１０】 解像度を高めた画像情報の取り込み開
始を監視するための開始タイミング監視手段を更に備
え、 上記格納指示手段は、上記開始タイミング監視手段の監
視結果に基づいて上記画素ずらし制御手段による最初の
画素ずらし位置の入力画像情報に対して格納指示情報を
生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、最初の画素ずらし位置の入力画像情報を一
時記憶することを特徴とする請求項２に記載の画像入力
装置。10. A start timing monitoring means for monitoring the start of capturing of image information having an increased resolution is further provided, and the storage instructing means is based on the monitoring result of the start timing monitoring means, and is controlled by the pixel shift control means. The storage instruction information is generated and output for the input image information at the first pixel shift position, and the temporary storage means temporarily stores the input image information at the first pixel shift position by the write control by the writing means. The image input device according to claim 2. 【請求項１１】 解像度を高めた画像情報の取り込み開
始を監視するための開始タイミング監視手段を更に備
え、 上記格納指示手段は、上記開始タイミング監視手段の監
視結果に基づいて上記画素ずらし制御手段による最初の
画素ずらし位置の入力画像情報に対して格納指示情報を
生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、最初の画素ずらし位置の入力画像情報を一
時記憶することを特徴とする請求項３に記載の画像入力
装置。11. A start timing monitoring means for monitoring the start of capturing of image information having a higher resolution, wherein said storage instructing means is controlled by said pixel shift control means based on the monitoring result of said start timing monitoring means. The storage instruction information is generated and output for the input image information at the first pixel shift position, and the temporary storage means temporarily stores the input image information at the first pixel shift position by the write control by the writing means. The image input device according to claim 3. 【請求項１２】 解像度を高めた画像情報の取り込み開
始を監視するための開始タイミング監視手段を更に備
え、 上記格納指示手段は、上記開始タイミング監視手段の監
視結果に基づいて上記画素ずらし制御手段による最初の
画素ずらし位置の入力画像情報に対して格納指示情報を
生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、最初の画素ずらし位置の入力画像情報を一
時記憶することを特徴とする請求項４に記載の画像入力
装置。12. The apparatus further comprises start timing monitoring means for monitoring the start of fetching the image information having a higher resolution, wherein the storage instructing means is based on the monitoring result of the start timing monitoring means and is controlled by the pixel shift control means. The storage instruction information is generated and output for the input image information at the first pixel shift position, and the temporary storage means temporarily stores the input image information at the first pixel shift position by the write control by the writing means. The image input device according to claim 4. 【請求項１３】 解像度を高めた画像情報の取り込み開
始を監視するための開始タイミング監視手段を更に備
え、 上記格納指示手段は、上記開始タイミング監視手段の監
視結果に基づいて上記画素ずらし制御手段による最初の
画素ずらし位置の入力画像情報に対して格納指示情報を
生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、最初の画素ずらし位置の入力画像情報を一
時記憶することを特徴とする請求項５に記載の画像入力
装置。13. The apparatus further comprises start timing monitoring means for monitoring the start of capturing the image information having a higher resolution, wherein the storage instructing means is controlled by the pixel shift control means based on the monitoring result of the start timing monitoring means. The storage instruction information is generated and output for the input image information at the first pixel shift position, and the temporary storage means temporarily stores the input image information at the first pixel shift position by the write control by the writing means. The image input device according to claim 5. 【請求項１４】 解像度を高めた画像情報の取り込み開
始を監視するための開始タイミング監視手段を更に備
え、 上記格納指示手段は、上記開始タイミング監視手段の監
視結果に基づいて上記画素ずらし制御手段による最初の
画素ずらし位置の入力画像情報に対して格納指示情報を
生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、最初の画素ずらし位置の入力画像情報を一
時記憶することを特徴とする請求項６に記載の画像入力
装置。14. A start timing monitoring means for monitoring the start of capturing of image information having a higher resolution, wherein said storage instructing means is controlled by said pixel shift control means based on a monitoring result of said start timing monitoring means. The storage instruction information is generated and output for the input image information at the first pixel shift position, and the temporary storage means temporarily stores the input image information at the first pixel shift position by the write control by the writing means. The image input device according to claim 6. 【請求項１５】 解像度を高めた画像情報の取り込み開
始を監視するための開始タイミング監視手段を更に備
え、 上記格納指示手段は、上記開始タイミング監視手段の監
視結果に基づいて上記画素ずらし制御手段による最初の
画素ずらし位置の入力画像情報に対して格納指示情報を
生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、最初の画素ずらし位置の入力画像情報を一
時記憶することを特徴とする請求項７に記載の画像入力
装置。15. The apparatus further comprises start timing monitoring means for monitoring the start of fetching the image information having a higher resolution, wherein the storage instructing means is based on the monitoring result of the start timing monitoring means and is controlled by the pixel shift control means. The storage instruction information is generated and output for the input image information at the first pixel shift position, and the temporary storage means temporarily stores the input image information at the first pixel shift position by the write control by the writing means. The image input device according to claim 7. 【請求項１６】 解像度を高めた画像情報の取り込み開
始を監視するための開始タイミング監視手段を更に備
え、 上記格納指示手段は、上記開始タイミング監視手段の監
視結果に基づいて上記画素ずらし制御手段による最初の
画素ずらし位置の入力画像情報に対して格納指示情報を
生成して出力し、 上記一時格納手段は、上記書き込み手段による書き込み
制御により、最初の画素ずらし位置の入力画像情報を一
時記憶することを特徴とする請求項８に記載の画像入力
装置。16. A start timing monitoring means for monitoring the start of capturing of image information having an increased resolution is further provided, and the storage instruction means is based on the monitoring result of the start timing monitoring means, and is controlled by the pixel shift control means. The storage instruction information is generated and output for the input image information at the first pixel shift position, and the temporary storage means temporarily stores the input image information at the first pixel shift position by the write control by the writing means. The image input device according to claim 8. 【請求項１７】 上記格納指示手段の動作を制御するた
めの制御情報を外部から入力する制御情報入力手段を更
に備え、 上記格納指示手段は、上記制御情報入力手段により入力
される入力制御情報に基づいて上記格納指示情報を生成
して出力することを特徴とする請求項１〜１６のいずれ
か１項に記載の画像入力装置。17. A control information input means for externally inputting control information for controlling the operation of the storage instructing means, wherein the storage instructing means converts the input control information input by the control information inputting means. The image input device according to claim 1, wherein the storage instruction information is generated and output based on the storage instruction information. 【請求項１８】 上記画像情報入力手段は撮像素子を有
し、レンズを介して入射される撮像対象物からの光を上
記撮像素子の受光面に結像させるとともに、光電変換し
て入力するものであって、 上記画素ずらし制御手段は、上記レンズの光軸に対して
傾斜可能となるようにして上記レンズの光軸上に設けら
れた光透過性物質の平板と、上記平板の傾斜量を変化さ
せて撮像対象物の結像位置を制御する位置制御手段とを
有することを特徴とする請求項１〜１７のいずれか１項
に記載の画像入力装置。18. The image information input means has an image pickup device, and forms light on a light receiving surface of the image pickup device, which is incident from an image pickup object through a lens, and photoelectrically converts and inputs the light. Wherein the pixel shift control means controls the tilt amount of the flat plate of the light transmissive material provided on the optical axis of the lens so as to be tiltable with respect to the optical axis of the lens, and the flat plate. The image input device according to any one of claims 1 to 17, further comprising: a position control unit that controls the image formation position of the imaging target by changing the position.