JPH06105232A - Picture synthesis device - Google Patents
Picture synthesis deviceInfo
- Publication number
- JPH06105232A JPH06105232A JP4279384A JP27938492A JPH06105232A JP H06105232 A JPH06105232 A JP H06105232A JP 4279384 A JP4279384 A JP 4279384A JP 27938492 A JP27938492 A JP 27938492A JP H06105232 A JPH06105232 A JP H06105232A
- Authority
- JP
- Japan
- Prior art keywords
- image
- video camera
- computer graphics
- detecting means
- detecting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Processing (AREA)
- Studio Circuits (AREA)
- Controls And Circuits For Display Device (AREA)
- Processing Or Creating Images (AREA)
Abstract
Description
【0001】[0001]
【産業上の利用分野】本発明は、ズーミング機能付きの
ビデオカメラで撮像された実画像とコンピュータグラフ
ィックス画像(以下CG画像という)とを合成して表示
する画像合成装置に関し、特にビデオカメラのズーミン
グによる画像サイズにCG画像サイズを揃えてスーパイ
ンポーズできるようにした画像合成装置に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image synthesizing apparatus for synthesizing and displaying a real image picked up by a video camera with a zooming function and a computer graphics image (hereinafter referred to as CG image), and more particularly to a video camera. The present invention relates to an image synthesizing device in which a CG image size is aligned with a zooming image size and superimposing is possible.
【0002】[0002]
【従来の技術】例えば、建設予定地に建設される建造物
の予想完成状況を映像で表示する場合は、建造物の予想
完成状況をCGで作成し、このCG画像をモニタ画像に
表示して見るのが一般である。また、最近では、建設予
定地をビデオカメラで撮影し、この撮影実画像に前記C
G画像を合成してモニタに表示する表示方式も出現して
きている。2. Description of the Related Art For example, when the expected completion status of a building to be constructed at a construction site is to be displayed as a video, the expected completion status of the building is created by CG and this CG image is displayed on a monitor image. It is common to see. In addition, recently, the planned construction site was photographed with a video camera, and the C
A display method in which G images are combined and displayed on a monitor has also appeared.
【0003】[0003]
【発明が解決しようとする課題】ところで、建設予定地
の景観などを撮影するビデオカメラは、被写物に焦点を
合わせたままズームレンズを操作して被写物ウインドを
拡大、縮小できるようになっているのが一般である。こ
のため、ビデオカメラのズーミングによるウインドの大
きさおよびビデオカメラからビューポイントまでの距離
と方向に合わせてCG画像のウインドサイズおよびビュ
ーポイントを設定する必要がある。By the way, a video camera for photographing a landscape of a planned construction site is designed so that a zoom lens can be operated while the object is in focus to enlarge or reduce the object window. It is generally the case. Therefore, it is necessary to set the window size and the viewpoint of the CG image according to the size of the window by zooming the video camera and the distance and direction from the video camera to the viewpoint.
【0004】しかるに、この種従来の画像合成装置を建
設現場のように撮影対象である被写物が大きく、かつ視
界が広大な場所に適用した場合、被写物に対するビデオ
カメラの視点、位置および方向等がCG画像に反映でき
ないため、ビデオカメラで撮像した実画像とこれに対応
するCG画像とを合成しても、両画像の位置関係および
サイズが微妙にずれ、計画予想と異なる画像になってし
まい、実用性にほど遠いものとなってまう問題があっ
た。本発明は、上述のような事情に鑑みなされたもので
あり、ズーム付きビデオカメラの視点,方向および撮影
倍率に一致するCG画像を確実に得ることができるとと
もに、ビデオカメラで撮像された実画像とこれに対応す
るCG画像とをずれなく計画予想画像通りに合成できる
画像合成装置を提供することを目的とする。However, when this kind of conventional image synthesizing apparatus is applied to a large object to be photographed and a wide field of view such as a construction site, the video camera's viewpoint, position and Since the direction and the like cannot be reflected in the CG image, even if the real image captured by the video camera and the corresponding CG image are combined, the positional relationship and the size of the two images are slightly deviated, and the images are different from those projected. However, there was a problem that it became far from practicality. The present invention has been made in view of the above circumstances, and it is possible to reliably obtain a CG image that matches the viewpoint, direction, and shooting magnification of a video camera with zoom, and at the same time, obtain an actual image captured by the video camera. It is an object of the present invention to provide an image synthesizing device capable of synthesizing a CG image corresponding to this and a CG image corresponding to this according to a planned predicted image.
【0005】[0005]
【課題を解決するための手段】上記目的を達成するため
に本発明は、被写物を撮像するズームレンズ付きのビデ
オカメラと、前記被写物が存在する領域に対する前記ビ
デオカメラの絶対位置を検出する位置検出手段と、前記
ビデオカメラにより撮像される被写物までの被写物距離
を検出する距離検出手段と、前記ビデオカメラのズーム
レンズのズーム量を検出するズーム量検出手段と、前記
ビデオカメラの被写物に対する撮像方向を検出する方向
検出手段と、前記被写物に対応させたコンピュータグラ
フィックス画像を作成するコンピュータグラフィックス
手段と、前記位置検出手段で検出したビデオカメラの絶
対位置データに基づいてコンピュータグラフィックス手
段で作成されるコンピュータグラフィックス画像上の視
点を設定するとともに、前記方向検出手段で検出した撮
像方向データに基づいて前記コンピュータグラフィック
ス画像上の視点に対する描画領域を設定し、前記ズーム
量検出手段で検出したズーム量と前記距離検出手段で検
出した被写物距離に基づいて前記コンピュータグラフィ
ックス画像の倍率を設定する処理手段と、前記ビデオカ
メラから出力される映像信号を離散的なデジタル信号に
変換して実画像データを生成する画像処理手段と、前記
処理手段により処理されてコンピュータグラフィックス
手段から出力されるコンピュータグラフィックス画像と
前記画像処理手段から出力される実画像とを合成する画
像合成手段とを備えたことを特徴とする。In order to achieve the above object, the present invention provides a video camera with a zoom lens for picking up an object and an absolute position of the video camera with respect to an area where the object is present. Position detecting means for detecting, distance detecting means for detecting an object distance to an object imaged by the video camera, zoom amount detecting means for detecting a zoom amount of a zoom lens of the video camera, Direction detecting means for detecting an imaging direction of the video camera with respect to the object, computer graphics means for creating a computer graphics image corresponding to the object, and absolute position of the video camera detected by the position detecting means Setting the viewpoint on a computer graphics image created by computer graphics means based on the data A drawing area for the viewpoint on the computer graphics image based on the image pickup direction data detected by the direction detecting means, and the zoom amount detected by the zoom amount detecting means and the object detected by the distance detecting means. Processing means for setting a magnification of the computer graphics image based on a physical distance; image processing means for converting a video signal output from the video camera into a discrete digital signal to generate real image data; An image synthesizing unit for synthesizing a computer graphics image processed by the processing unit and output from the computer graphics unit and an actual image output from the image processing unit are provided.
【0006】[0006]
【実施例】以下、本発明の実施例を図面に基づいて説明
する。図1は、本発明による画像合成装置の一実施例を
示す全体の構成図である。図1において、1は建設現場
などの比較的広大な領域の所定の場所に設置されたビデ
オカメラであり、このビデオカメラ1はオートフォーカ
ス機構を内蔵するズームレンス2を備える。このズーム
レンズ2はステッピングモータなどのモータ3によりス
ーミングできるようになっているとともに、モータ3に
はズームレンズ2のズーム量を検出するエンコーダ4が
設けられている。Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is an overall configuration diagram showing an embodiment of an image synthesizing apparatus according to the present invention. In FIG. 1, reference numeral 1 denotes a video camera installed at a predetermined place in a relatively large area such as a construction site. The video camera 1 includes a zoom lens 2 having an autofocus mechanism built therein. The zoom lens 2 can be zoomed by a motor 3 such as a stepping motor, and the motor 3 is provided with an encoder 4 for detecting the zoom amount of the zoom lens 2.
【0007】ビデオカメラ1は、ビデオカメラを水平方
向および俯仰方向に動作させる雲台5上に設置され、こ
の雲台5には、この動きからビデオカメラ1の水平方向
の角度を検出する水平角センサ6および俯仰方向の角度
を検出する俯仰角センサ7がそれぞれ設けられている。The video camera 1 is installed on a pan head 5 for operating the video camera in the horizontal direction and the elevation direction, and the pan head 5 has a horizontal angle for detecting the horizontal angle of the video camera 1 from this movement. A sensor 6 and a depression / elevation angle sensor 7 that detects an angle in the depression / protrusion direction are provided.
【0008】図1において、8はビデオカメラ1により
撮影される被写物までの距離に応じた距離情報を検出す
る測距部、9は建設現場におけるビデオカメラ1の絶対
位置および向きを検出する位置センサであり、この位置
センサ9はGPSおよび地磁気センサなどを組合わせた
ものから構成される。前記エンコーダ4、水平角センサ
6、俯仰角センサ7、測距部8および位置センサ9は信
号処理回路10に接続され、この信号処理回路10に
は、ビデオカメラ1で撮像された実画像に対応したCG
画像を作成するCG装置11が接続されており、このC
G装置11は、図2に示すような描画用のCG画像デー
タを格納するグラフィックスメモリ12を備える。In FIG. 1, 8 is a distance measuring unit for detecting distance information according to the distance to the object photographed by the video camera 1, and 9 is an absolute position and orientation of the video camera 1 at a construction site. This is a position sensor, and the position sensor 9 is composed of a combination of a GPS and a geomagnetic sensor. The encoder 4, the horizontal angle sensor 6, the elevation angle sensor 7, the distance measuring unit 8 and the position sensor 9 are connected to a signal processing circuit 10, and the signal processing circuit 10 corresponds to an actual image captured by the video camera 1. CG
A CG device 11 for creating an image is connected to this C
The G device 11 includes a graphics memory 12 that stores CG image data for drawing as shown in FIG.
【0009】信号処理回路10は、位置センサ9から出
力される絶対位置データに基づいてCG上のビューポイ
ント(視点)を設定するとともに、絶対位置データと水
平角センサ6および俯仰角センサ7からの検出信号に基
づいて、ビューポイント設定されたCG上の描画領域を
設定し、さらにエンコーダ4で検出されたズーム量と測
距部8で検出された被写物距離情報を基に算出される画
像倍率に前記描画領域の画像サイズを設定するものであ
り、CG装置11は、この信号処理回路10から出力さ
れる各設定指令信号に応じてCG画像を作成する。ま
た、作成されたCG画像データはフレームメモリ13に
格納される。The signal processing circuit 10 sets the view point (viewpoint) on the CG based on the absolute position data output from the position sensor 9, and the absolute position data and the horizontal angle sensor 6 and the elevation angle sensor 7 are used. An image calculated based on the detection signal by setting the drawing area on the CG for which the viewpoint is set, and further based on the zoom amount detected by the encoder 4 and the object distance information detected by the distance measuring unit 8. The image size of the drawing area is set to the magnification, and the CG device 11 creates a CG image according to each setting command signal output from the signal processing circuit 10. Further, the created CG image data is stored in the frame memory 13.
【0010】図1において、15はNTSC/RGB変
換部であり、ビデオカメラ1から出力されるNTSC方
式の映像信号をコンピュータ処理に適合するRGB信号
に変換する。NTSC/RGB変換部15にはA−Dコ
ンバータ16が接続され、アナログRGB信号を離散的
なデジタル信号に変換する。A−Dコンバータ16に
は、デジタル信号に変換された実画像データを格納する
実画像用フレームメモリ17が接続されている。また、
18はグラフィック用フレームメモリ13から読み出さ
れるCG画像データと、実画像用フレームメモリ17か
ら読み出される実画像データとを合成する画像合成回路
であり、この画像合成回路18で合成された合成画像デ
ータはD−Aコンバータ19を介してモニタ表示装置2
0に出力される。In FIG. 1, reference numeral 15 denotes an NTSC / RGB converter which converts an NTSC video signal output from the video camera 1 into an RGB signal suitable for computer processing. An AD converter 16 is connected to the NTSC / RGB conversion unit 15 and converts an analog RGB signal into a discrete digital signal. To the A / D converter 16, a real image frame memory 17 that stores the real image data converted into a digital signal is connected. Also,
Reference numeral 18 denotes an image synthesizing circuit for synthesizing the CG image data read from the graphic frame memory 13 and the actual image data read from the actual image frame memory 17, and the synthetic image data synthesized by the image synthesizing circuit 18 is Monitor display device 2 via D-A converter 19
It is output to 0.
【0011】次に、上記のように構成された本実施例の
動作について説明する。ビデオカメラ1を建設現場内の
所定の被写物に向けた状態でズーミングモータ3に外部
からズーム指令信号を入力すると、ズーミングモータ3
が起動され、ズームレンズ2はワイド端またはテレ端側
へズーミングされる。このとき、ズームレンズ2のズー
ム量はエンコーダ4により検出され、信号処理回路10
に出力される。ズームレンズ2が希望するズーム位置に
ズーミングされると、これに連動してズームレンズ2を
含む撮影レンズの焦点距離も被写物に合わされる。これ
に伴い撮影レンズを通してビデオカメラ1で撮影された
被写物画像は水平走査タイミングに合わせて画像信号と
して取り出され、NTSC/RGB変換部15に入力さ
れる。このNTSC/RGB変換部15では、NTSC
方式で取り込まれる画像信号をRGB信号に変換してA
−Dコンバータ16に出力する。A−Dコンバータ16
では、水平走査タイミングに合わせて取り込まれる画像
信号を所定の周波数でサンプリングし、1画素当たり複
数ビットの離散的なデジタル信号に変換して実画像用フ
レームメモリ17に格納する。なお、フレームメモリ1
7は1フレームないしそれ以上の画像データを格納でき
る容量のものから構成される。Next, the operation of this embodiment configured as described above will be described. When a zoom command signal is externally input to the zooming motor 3 with the video camera 1 facing the predetermined object in the construction site, the zooming motor 3
Is started, and the zoom lens 2 is zoomed toward the wide end or the tele end. At this time, the zoom amount of the zoom lens 2 is detected by the encoder 4, and the signal processing circuit 10
Is output to. When the zoom lens 2 is zoomed to a desired zoom position, the focal length of the taking lens including the zoom lens 2 is also adjusted to the object in conjunction with this. Along with this, the object image photographed by the video camera 1 through the photographing lens is taken out as an image signal in accordance with the horizontal scanning timing, and is input to the NTSC / RGB conversion unit 15. In this NTSC / RGB conversion unit 15, the NTSC
The image signal captured by the method is converted into an RGB signal and A
-Output to the D converter 16. A-D converter 16
Then, the image signal taken in at the horizontal scanning timing is sampled at a predetermined frequency, converted into a discrete digital signal of a plurality of bits per pixel, and stored in the actual image frame memory 17. The frame memory 1
7 is composed of a capacity capable of storing one frame or more of image data.
【0012】一方、建設現場内におけるビデオカメラ1
の絶対位置は位置センサ9により検出され、その検出結
果は初期データとして信号処理回路10に取り込まれ
る。同様にして、水平角センサ6により検出された基準
点からのビデオカメラ1の水平角度、および俯仰角セン
サ7により検出された基準点からのビデオカメラ1の俯
仰角度も信号処理回路10に取り込まれる。さらに測距
部8で検出された被写物距離情報も信号処理回路10に
取り込まれる。On the other hand, the video camera 1 in the construction site
The absolute position of is detected by the position sensor 9, and the detection result is taken into the signal processing circuit 10 as initial data. Similarly, the horizontal angle of the video camera 1 from the reference point detected by the horizontal angle sensor 6 and the vertical angle of the video camera 1 from the reference point detected by the vertical angle sensor 7 are also captured in the signal processing circuit 10. . Further, the object distance information detected by the distance measuring unit 8 is also fetched by the signal processing circuit 10.
【0013】各入力情報を取り込んだ信号処理回路10
では、絶対位置データに基づいて、ビデオカメラ1の被
写物に対する視点と同様な視点をCG上に設定するため
の信号を生成してCG装置11に出力する。また、絶対
位置データと水平角データおよび俯仰角データに基づい
てビューポイント(視点)からのCG上の描画領域を設
定する信号を生成してCG装置11に出力する。さら
に、ズーム量および被写物距離情報に基づいて算出され
る撮影倍率から、前記設定された描画領域の画像サイズ
を設定する信号を生成してCG装置11に出力する。A signal processing circuit 10 which takes in each input information.
Then, based on the absolute position data, a signal for setting a viewpoint similar to that of the video camera 1 on the object on the CG is generated and output to the CG device 11. In addition, a signal for setting a drawing area on the CG from the viewpoint (viewpoint) is generated based on the absolute position data, the horizontal angle data, and the elevation angle data, and is output to the CG device 11. Further, a signal for setting the image size of the set drawing area is generated from the shooting magnification calculated based on the zoom amount and the object distance information, and is output to the CG device 11.
【0014】CG装置11では、図2に示すようにグラ
フィックスメモリ12上のCGオブジェクトデータ領域
に対しビデオカメラ1と同様なビューポイントVPを設
定し、さらに、ビューポイントVPからのCG上の描画
領域をビデオカメラ1の向きに対応して図2の四角枠3
0または31で示すように設定する。その後、四角枠3
0また31で示す描画領域の画像サイズを信号処理回路
10で算出した撮影倍率、例えば、ズームレンズがテレ
端にあるときは図2および図3の四角枠30に示す大き
さに縮小し、また、ズームレンズがワイド端にあるとき
は図3の四角枠31’に示す大きさに拡大させる。そし
て、CG装置11で縮小または拡大されたCG画像デー
タはフレームメモリ13に格納される。In the CG device 11, as shown in FIG. 2, a view point VP similar to that of the video camera 1 is set in the CG object data area on the graphics memory 12, and drawing on the CG from the view point VP is performed. The area corresponds to the direction of the video camera 1 and the rectangular frame 3 in FIG.
Set as indicated by 0 or 31. After that, square frame 3
The image size of the drawing area indicated by 0 or 31 is reduced to the photographing magnification calculated by the signal processing circuit 10, for example, when the zoom lens is at the tele end, the image size is reduced to the size indicated by the square frame 30 in FIGS. 2 and 3. When the zoom lens is at the wide end, it is enlarged to the size shown in the rectangular frame 31 'in FIG. Then, the CG image data reduced or enlarged by the CG device 11 is stored in the frame memory 13.
【0015】他方、画像合成回路18では、グラフィッ
クスフレームメモリ13および実画像用フレームメモリ
17からFIFO方式などにより順次読み出されるCG
画像データおよび実画像データのうち、例えば、奇数ラ
インでは奇数画素子にCG画像データを配列するととも
に偶数画素に実画像データを配列し、また、偶数ライン
では奇数画素に実画像データを配列し、偶数画素にCG
画像データを配列することでCG画像と実画像とを合成
する。そして、画像合成回路18で合成された画像デー
タはD−Aコンバータ19によりNTSC方式のアナロ
グ信号に変換されてモニタ表示装置20に出力し、再生
表示する。On the other hand, in the image synthesizing circuit 18, CG which is sequentially read from the graphics frame memory 13 and the actual image frame memory 17 by the FIFO method or the like.
Of the image data and the actual image data, for example, in the odd line, the CG image data is arranged in the odd-numbered image element, the actual image data is arranged in the even pixel, and in the even line, the actual image data is arranged in the odd pixel. CG for even pixels
The CG image and the real image are combined by arranging the image data. Then, the image data synthesized by the image synthesizing circuit 18 is converted into an NTSC analog signal by the DA converter 19 and output to the monitor display device 20 for reproduction and display.
【0016】このような本実施例の画像合成装置におい
ては、ビデオカメラの絶対位置データに基づいてCG上
のビューポイントを設定するとともに、ビデオカメラの
絶対位置データと水平角および俯仰角を基に設定ビュー
ポイントからのCG上の描画領域を設定し、さらにズー
ムレンズのズーム量と被写物距離情報とから撮影倍率を
求め、設定された描画領域のサイズを求めた倍率にフレ
ーミングしてCG画像を作成し、このCG画像をビデオ
カメラからの実画像にオーバーレイさせるようにしたの
で、ビデオカメラの視点、方向および撮影倍率に一致す
るCG画像を確実に得ることができるほか、ビデオカメ
ラからの実画像とこれに対向するCG画像とをずれなく
計画予想画像通りに合成することができる。これに伴い
実用化が容易になるとともに、観察、監視等に好適な画
像情報を提供することができる。In the image synthesizing apparatus of this embodiment as described above, the view point on the CG is set based on the absolute position data of the video camera, and the absolute position data of the video camera and the horizontal angle and the elevation angle are set. The drawing area on the CG from the set viewpoint is set, the shooting magnification is obtained from the zoom amount of the zoom lens and the object distance information, and the size of the set drawing area is framed to the obtained magnification to create a CG image. Since this is created and the CG image is overlaid on the actual image from the video camera, it is possible to reliably obtain the CG image that matches the viewpoint, direction and shooting magnification of the video camera, as well as the actual image from the video camera. It is possible to synthesize the image and the CG image opposite to the image according to the planned image without any deviation. Along with this, practical application is facilitated, and image information suitable for observation, monitoring, etc. can be provided.
【0017】なお、上記実施例では、ズームレンズ付き
のビデオカメラ1を1台使用した場合について述べた
が、本発明はこれに限定されない、例えば、左右2台の
ビデオカメラを用いて立体視画像を得るものにも適用で
きる。この場合、各ビデオカメラに対応した左右のCG
画像が必要となり、また、モニタ表示装置に立体鏡を組
合わせることで立体視できる。また、本発明は、上記実
施例に示す構成のものに限定されず、請求項に記載した
範囲を逸脱しない限り、種々の変形が可能である。In the above embodiment, the case where one video camera 1 with a zoom lens is used has been described, but the present invention is not limited to this. For example, a stereoscopic image using two left and right video cameras. It is also applicable to those who get. In this case, the left and right CG corresponding to each video camera
Images are required, and stereoscopic viewing is possible by combining a stereoscopic mirror with the monitor display device. Further, the present invention is not limited to the configurations shown in the above embodiments, and various modifications can be made without departing from the scope of the claims.
【0018】[0018]
【発明の効果】以上説明したように本発明によれば、被
写物を撮像するズームレンズ付きのビデオカメラと、前
記被写物が存在する領域に対する前記ビデオカメラの絶
対位置を検出する位置検出手段と、前記ビデオカメラに
より撮像される被写物までの被写物距離を検出する距離
検出手段と、前記ビデオカメラのズームレンズのズーム
量を検出するズーム量検出手段と、前記ビデオカメラの
被写物に対する撮像方向を検出する方向検出手段と、前
記被写物に対応させたコンピュータグラフィックス画像
を作成するコンピュータグラフィックス手段と、前記位
置検出手段で検出したビデオカメラの絶対位置データに
基づいてコンピュータグラフィックス手段で作成される
コンピュータグラフィックス画像上の視点を設定すると
ともに、前記方向検出手段で検出した撮像方向データに
基づいて前記コンピュータグラフィックス画像上の視点
に対する描画領域を設定し、前記ズーム量検出手段で検
出したズーム量と前記距離検出手段で検出した被写物距
離に基づいて前記コンピュータグラフィックス画像の倍
率を設定する処理手段と、前記ビデオカメラから出力さ
れる映像信号を離散的なデジタル信号に変換して実画像
データを生成する画像処理手段と、前記処理手段により
処理されてコンピュータグラフィックス手段から出力さ
れるコンピュータグラフィックス画像と前記画像処理手
段から出力される実画像とを合成する画像合成手段とを
備える構成としたので、ズームレンズ付きビデオカメラ
の視点、方向および撮影倍率に一致するCG画像を確実
に得ることができるとともに、ビデオカメラで撮像され
た実画像とこれに対応するCG画像とをずれなく計画予
想画像通りに合成することができ、実用化も容易に実現
できるという効果がある。As described above, according to the present invention, a video camera with a zoom lens for picking up an object and position detection for detecting the absolute position of the video camera with respect to the area where the object exists. Means, a distance detecting means for detecting an object distance to an object imaged by the video camera, a zoom amount detecting means for detecting a zoom amount of a zoom lens of the video camera, and an object of the video camera. Based on direction detection means for detecting an imaging direction with respect to the object, computer graphics means for creating a computer graphics image corresponding to the object, and absolute position data of the video camera detected by the position detection means. Setting the viewpoint on the computer graphics image created by the computer graphics means, and the direction A drawing area for a viewpoint on the computer graphics image is set based on the imaging direction data detected by the output means, and based on the zoom amount detected by the zoom amount detection means and the object distance detected by the distance detection means. Processing means for setting the magnification of the computer graphics image, image processing means for converting a video signal output from the video camera into a discrete digital signal to generate real image data, and processing by the processing means. Since it is configured to include an image synthesizing unit for synthesizing the computer graphics image output from the computer graphics unit and the actual image output from the image processing unit, the viewpoint, direction, and A CG image that matches the shooting magnification can be reliably obtained, and the video The camera can be synthesized in plan expected imagewise without displacement and CG image corresponding to the real image captured by an effect that practically can be easily realized.
【図1】本発明の一実施例による画像合成装置のブロッ
ク図である。FIG. 1 is a block diagram of an image synthesizing apparatus according to an embodiment of the present invention.
【図2】本実施例のズーム時におけるCGデータ領域に
対するビューポイントおよびCG描画のフレーミング状
態を示す説明図である。FIG. 2 is an explanatory diagram showing a framing state of a viewpoint and CG drawing with respect to a CG data area during zooming according to the present embodiment.
【図3】本実施例のズーム時におけるCG描画のフレー
ミング状態を示す説明図である。FIG. 3 is an explanatory diagram showing a framing state of CG drawing during zooming according to the present exemplary embodiment.
1 ビデオカメラ 2 ズームレンズ 4 エンコーダ(ズーム量検出手段) 6 水平角センサ 7 俯仰角センサ 8 測距部(距離検出手段) 9 位置センサ 10 信号処理回路(処理手段) 11 CG装置 DESCRIPTION OF SYMBOLS 1 Video camera 2 Zoom lens 4 Encoder (zoom amount detecting means) 6 Horizontal angle sensor 7 Depression angle sensor 8 Distance measuring section (distance detecting means) 9 Position sensor 10 Signal processing circuit (processing means) 11 CG device
Claims (1)
デオカメラと、 前記被写物が存在する領域に対する前記ビデオカメラの
絶対位置を検出する位置検出手段と、 前記ビデオカメラにより撮像される被写物までの被写物
距離を検出する距離検出手段と、 前記ビデオカメラのズームレンズのズーム量を検出する
ズーム量検出手段と、 前記ビデオカメラの被写物に対する撮像方向を検出する
方向検出手段と、 前記被写物に対応させたコンピュータグラフィックス画
像を作成するコンピュータグラフィックス手段と、 前記位置検出手段で検出したビデオカメラの絶対位置デ
ータに基づいて前記コンピュータグラフィックス手段で
作成されるコンピュータグラフィックス画像上の視点を
設定するとともに、前記方向検出手段で検出した撮像方
向データに基づいて前記コンピュータグラフィックス画
像上の視点に対する描画領域を設定し、前記ズーム量検
出手段で検出したズーム量と前記距離検出手段で検出し
た被写物距離に基づいて前記コンピュータグラフィック
ス画像の倍率を設定する処理手段と、 前記ビデオカメラから出力される映像信号を離散的なデ
ジタル信号に変換して実画像データを生成する画像処理
手段と、 前記処理手段により処理されてコンピュータグラフィッ
クス手段から出力されるコンピュータグラフィックス画
像と前記画像処理手段から出力される実画像とを合成す
る画像合成手段と、 を備えたことを特徴とする画像合成装置。1. A video camera with a zoom lens for picking up an object, position detecting means for detecting an absolute position of the video camera with respect to an area where the object exists, and an object picked up by the video camera. Distance detecting means for detecting an object distance to an object, zoom amount detecting means for detecting a zoom amount of a zoom lens of the video camera, and direction detecting means for detecting an image pickup direction of the video camera with respect to the object. A computer graphics means for creating a computer graphics image corresponding to the object, and a computer graphic created by the computer graphics means based on absolute position data of the video camera detected by the position detecting means. The viewpoint on the video image is set and the imaging direction data detected by the direction detecting means is set. A drawing area for a viewpoint on the computer graphics image based on the computer graphics image, and the computer graphics image based on the zoom amount detected by the zoom amount detecting means and the object distance detected by the distance detecting means. , A processing means for setting a magnification, an image processing means for converting a video signal output from the video camera into a discrete digital signal to generate actual image data, and a computer graphics means processed by the processing means. An image synthesizing apparatus comprising: an image synthesizing unit that synthesizes a computer graphics image output from the image processing unit and an actual image output from the image processing unit.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP4279384A JPH06105232A (en) | 1992-09-24 | 1992-09-24 | Picture synthesis device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP4279384A JPH06105232A (en) | 1992-09-24 | 1992-09-24 | Picture synthesis device |
Publications (1)
Publication Number | Publication Date |
---|---|
JPH06105232A true JPH06105232A (en) | 1994-04-15 |
Family
ID=17610394
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP4279384A Pending JPH06105232A (en) | 1992-09-24 | 1992-09-24 | Picture synthesis device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JPH06105232A (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1998030029A1 (en) * | 1996-12-26 | 1998-07-09 | Sony Corporation | Device and method for synthesizing image |
JPH11234563A (en) * | 1998-02-13 | 1999-08-27 | For A Co Ltd | Studio equipment and television camera |
US6990429B2 (en) | 2002-12-27 | 2006-01-24 | Canon Kabushiki Kaisha | Information processing apparatus, and information processing method |
JP2007212674A (en) * | 2006-02-08 | 2007-08-23 | Fujinon Corp | Lens system |
-
1992
- 1992-09-24 JP JP4279384A patent/JPH06105232A/en active Pending
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO1998030029A1 (en) * | 1996-12-26 | 1998-07-09 | Sony Corporation | Device and method for synthesizing image |
US6104438A (en) * | 1996-12-26 | 2000-08-15 | Sony Corporation | Image synthesizer and image synthesizing method for synthesizing according to movement |
JPH11234563A (en) * | 1998-02-13 | 1999-08-27 | For A Co Ltd | Studio equipment and television camera |
US6990429B2 (en) | 2002-12-27 | 2006-01-24 | Canon Kabushiki Kaisha | Information processing apparatus, and information processing method |
JP2007212674A (en) * | 2006-02-08 | 2007-08-23 | Fujinon Corp | Lens system |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7529430B2 (en) | System and method for displaying an image indicating a positional relation between partially overlapping images | |
US6002430A (en) | Method and apparatus for simultaneous capture of a spherical image | |
US20090040291A1 (en) | Omniview motionless camera orientation system | |
JPH06222481A (en) | Panoramic-camera device | |
JP2003134375A (en) | Image pickup system | |
US6876387B1 (en) | Digital zoom-out processing apparatus | |
JPH11257953A (en) | Tunnel wall surface observing apparatus | |
JP3730450B2 (en) | Image input apparatus and image input method | |
JPH06105232A (en) | Picture synthesis device | |
JPH06292052A (en) | Still picture image pickup device | |
JP4001233B2 (en) | Panorama shooting method and image processing apparatus and image pickup apparatus capable of using the method | |
JP2010263269A (en) | Imaging apparatus | |
JP2004088558A (en) | Monitoring system, method, program, and recording medium | |
US20050030581A1 (en) | Imaging apparatus, imaging method, imaging system, program | |
JPH10304227A (en) | Electronic still camera | |
JPH11331833A (en) | Wide visual field monitoring camera system | |
JP4124995B2 (en) | Video composition apparatus and information processing method | |
JP2000078467A (en) | Picture compositing method | |
JP2011055084A (en) | Imaging apparatus and electronic device | |
JP4298947B2 (en) | Image display method and television camera apparatus | |
JP2006115091A (en) | Imaging device | |
JP3087236B2 (en) | Stereoscopic image synthesis display device | |
JP3066594U (en) | Image conversion device | |
WO2022168501A1 (en) | Camera module, photographing method, and electronic apparatus | |
JPH11122521A (en) | Digital image pickup device and image pickup method |