JPH11187302A - Video telephone conference system and image forming method used therefor - Google Patents
Video telephone conference system and image forming method used thereforInfo
- Publication number
- JPH11187302A JPH11187302A JP9353601A JP35360197A JPH11187302A JP H11187302 A JPH11187302 A JP H11187302A JP 9353601 A JP9353601 A JP 9353601A JP 35360197 A JP35360197 A JP 35360197A JP H11187302 A JPH11187302 A JP H11187302A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- unit
- conference system
- camera
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は、双方向のデータ通
信が可能な通信回線と当該通信回線により接続された複
数の端末装置とを備えたテレビ電話会議システム、及び
それに用いられる画像形成方法に関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a videophone conference system having a communication line capable of bidirectional data communication and a plurality of terminal devices connected by the communication line, and an image forming method used in the system. .
【０００２】[0002]
【従来の技術】近年、コンピュータ技術とデジタル技術
の進歩に伴って、テレビカメラや撮像素子を含むカメラ
のインテリジェント化が進み、さらにこれらのカメラに
より撮影した光学像をデジタル形式の映像信号に変換
し、多種多様な用途に応じて変換したデジタルデータを
蓄積、処理することが行われている。一方、テレビ放送
と通信とを融合したテレビ放送システムに代表されるよ
うに、デジタルデータ化した動画像や静止画像を含む映
像信号、及び音声信号を既存の通信回線を利用してイン
タラクティブにデータ通信を行うことが確立されてい
る。テレビ電話会議システムは、上述のような技術を基
礎として構築されたシステムであり、例えば２つの地点
（場所）の間で会議を行うためのシステムである。詳細
に言えば、テレビ電話会議システムは、映像及び音声の
入出力装置を備えた複数の端末装置を通信回線により接
続し、それら端末装置の間で映像信号、及び音声信号の
送受信を行う。そして、テレビ電話会議システムは、映
像及び音声の再生を行い、それらの端末装置が設置され
た場所の間での会議を進める。尚、このようなテレビ電
話会議システムに用いられる通信回線は、有線方式や無
線方式に限定されるものではなく、例えば光ケーブルや
デジタル放送衛星などを用いた電話回線、またはＬＡＮ
（Local Area Network）、あるいは類似のコンピュータ
ネットワークにより構成されている。従来のテレビ電話
会議システムには、専用の通信回線を用いたテレビ電話
会議システム、ＰＣ（パーソナルコンピュータ）を使用
したテレビ電話会議システム、あるいは携帯端末を使用
したテレビ電話会議システムなどが知られている。2. Description of the Related Art In recent years, with the advancement of computer technology and digital technology, television cameras and cameras including image pickup devices have become more intelligent, and optical images taken by these cameras are converted into digital video signals. 2. Description of the Related Art Digital data converted according to various uses is stored and processed. On the other hand, as represented by a television broadcasting system that combines television broadcasting and communication, video signals and audio signals including moving images and still images that have been converted into digital data are interactively communicated using existing communication lines. It has been established to do. The video conference system is a system constructed on the basis of the above-described technology, and is, for example, a system for holding a conference between two points (locations). More specifically, the video conference system connects a plurality of terminal devices provided with video and audio input / output devices via a communication line, and transmits and receives video signals and audio signals between the terminal devices. Then, the video conference system reproduces the video and the audio, and advances the conference between the places where the terminal devices are installed. The communication line used in such a video conference system is not limited to a wired system or a wireless system, and may be, for example, a telephone line using an optical cable or a digital broadcasting satellite, or a LAN.
(Local Area Network) or a similar computer network. As a conventional video conference system, a video conference system using a dedicated communication line, a video conference system using a PC (personal computer), a video conference system using a portable terminal, and the like are known. .
【０００３】ここで、第１の従来例のテレビ電話会議シ
ステムに用いられた端末装置について、図１０を参照し
て具体的に説明する。図１０は、第１の従来例のテレビ
電話会議システムでの端末装置の構成を示すブロック図
である。図１０において、第１の従来例のテレビ電話会
議システムは、一の端末装置のカメラ部７５により撮
影、形成した映像、例えば会議の映像を音声とともに図
示しない通信回線によって他の端末装置に転送し、他の
端末装置にて再生、表示することにより会議の模様を聞
き手、または視聴者に伝えるものである。同図に示すよ
うに、この従来例での端末装置は、手元操作部７０、前
記手元操作部７０から指示信号を受信するコンソールパ
ネル７１、前記コンソールパネル７１に接続され、コン
ソールパネル７１からの指示信号に基づいてカメラ部７
５での移動量を計算し、駆動信号として出力するマイク
ロコントローラ部７２、前記マイクロコントローラ部７
２からの駆動信号を入力して、制御信号を出力する制御
部７３、制御部７３からの制御信号に基づいてカメラ部
７５を駆動するアクチュエータ７４、及び話し手などの
被写体を撮影するカメラ部７５を備えている。[0003] Here, a terminal device used in the video conference system of the first conventional example will be specifically described with reference to FIG. FIG. 10 is a block diagram showing a configuration of a terminal device in the video conference system of the first conventional example. In FIG. 10, a video conference system according to a first conventional example transfers an image captured and formed by a camera unit 75 of one terminal device, for example, a video of a conference together with audio to another terminal device via a communication line (not shown). This is to convey to the listener or the viewer the pattern of the conference by reproducing and displaying the same on another terminal device. As shown in FIG. 1, the terminal device in the conventional example includes a hand operation unit 70, a console panel 71 that receives an instruction signal from the hand operation unit 70, and is connected to the console panel 71. Camera unit 7 based on signal
A microcontroller unit 72 for calculating the amount of movement at 5 and outputting it as a drive signal;
2, a control unit 73 that receives a drive signal from the control unit 2 and outputs a control signal, an actuator 74 that drives a camera unit 75 based on the control signal from the control unit 73, and a camera unit 75 that captures a subject such as a speaker. Have.
【０００４】手元操作部７０は、話し手、またはカメラ
部７５を操作するカメラオペレータが所持し、それらの
操作者がカメラ部７５のレンズ（図示せず）のアングル
及びズームを遠隔操作するための指示信号を出力する。
具体的には、指示信号に応じて、カメラ部７５は、その
撮影方向が図の矢印”７５ｕｐ”、”７５ｄｎ”で示し
た上、下方向、図の矢印”７５ｌｔ”、”７５ｒｔ”で
示した左、右方向、及び図の矢印”７５ｚｈ”、”７５
ｚｂ”で示した被写体とカメラ部７５とを結ぶズームの
方向に駆動される。尚、指示信号は、専用ケーブルを用
いた有線、あるいは赤外線信号などの無線によってコン
ソールパネル７１に出力される。カメラ部７５は、撮影
した光学像をデジタルデータに変換して、図示しない通
信回線を用いて他の端末装置に出力する。このことによ
り、カメラ部７５によって形成された映像が他の端末装
置にて再生、表示される。このように、第１の従来例の
テレビ電話会議システムでは、話し手、またはカメラオ
ペレータが手元操作部７０を用いてカメラ部７５の遠隔
操作を行い、聞き手側の端末装置に表示する映像を変更
する。[0004] The hand operation unit 70 is carried by a speaker or a camera operator who operates the camera unit 75, and an instruction for those operators to remotely control the angle and zoom of a lens (not shown) of the camera unit 75. Output a signal.
More specifically, in response to the instruction signal, the camera unit 75 has its shooting direction indicated by arrows “75up” and “75dn” in the figure, and upward and downward, and arrows “75lt” and “75rt” in the figure. Left, right, and arrows "75zh", "75"
The camera is driven in a zooming direction connecting the subject indicated by zb ″ to the camera unit 75. The instruction signal is output to the console panel 71 by wire using a dedicated cable or wirelessly such as an infrared signal. The unit 75 converts the photographed optical image into digital data and outputs the digital data to another terminal device using a communication line (not shown), whereby the image formed by the camera unit 75 is transmitted to the other terminal device. As described above, in the video conference system of the first conventional example, the speaker or the camera operator remotely controls the camera unit 75 using the local operation unit 70, and transmits the remote control to the terminal device on the listener side. Change the image to be displayed.
【０００５】次に、第２の従来例のテレビ電話会議シス
テムについて図１１を参照して具体的に説明する。図１
１は、第２の従来例のテレビ電話会議システムの構成を
示すブロック図である。この第２の従来例は、第１の従
来例のものと異なり、他の端末装置で視聴している聞き
手が指示信号を通信回線を経てカメラ部に出力、転送し
て、聞き手が所望する撮影方向、ズームにより被写体を
撮影するようカメラ部を駆動する。尚、以下の説明で
は、第１の従来例のものと異なる構成についてのみ説明
し、図１０に示した第１の従来例のものと同一の構成に
は同一の符号を付してその重複した説明は省略する。図
１１に示すように、この従来例の端末装置には、カメラ
部７５の撮像カメラ７５’からの映像信号と、マイク、
または類似装置により構成された音声入力装置７６から
の音声信号とを入力し、それらの映像信号及び音声信号
のデータに所定のデータ処理を行う送信信号処理部７
７、前記送信信号処理部７７からの出力データにプロト
コル変換を施す送信データ変換部７８、及び前記送信デ
ータ変換部７８からの出力データを通信回線８０を介し
て他の端末装置に出力する送信部７９が設けられてい
る。送信信号処理部７７でのデータ処理には、公知のデ
ータ圧縮技法に基づいて入力したデータを圧縮するデー
タの圧縮処理、及びデータの順番を並べ替えるデータの
並べ替え処理が含まれている。Next, a second conventional video conference system will be specifically described with reference to FIG. FIG.
FIG. 1 is a block diagram showing a configuration of a video conference system according to a second conventional example. The second conventional example is different from the first conventional example in that a listener who is watching on another terminal device outputs an instruction signal to a camera unit via a communication line and transfers the instruction signal to the camera unit to obtain a desired image. The camera unit is driven so as to photograph the subject by the direction and the zoom. In the following description, only the configuration different from that of the first conventional example will be described, and the same components as those of the first conventional example shown in FIG. Description is omitted. As shown in FIG. 11, a video signal from an imaging camera 75 'of a camera unit 75, a microphone,
Alternatively, a transmission signal processing unit 7 which receives an audio signal from an audio input device 76 constituted by a similar device and performs predetermined data processing on the data of the video signal and the audio signal.
7. A transmission data conversion unit 78 that performs protocol conversion on output data from the transmission signal processing unit 77, and a transmission unit that outputs output data from the transmission data conversion unit 78 to another terminal device via a communication line 80. 79 are provided. The data processing in the transmission signal processing unit 77 includes a data compression process for compressing input data based on a known data compression technique, and a data rearrangement process for rearranging the order of data.
【０００６】さらに、この従来例の端末装置は、他の端
末装置の送信部から送信された出力データを通信回線８
０を介して受信する受信部８１、前記受信部８１からの
受信データにプロトコル変換を施す受信データ変換部８
２、及び前記受信データ変換部８２からの出力データを
入力し所定のデータ処理を施す受信信号処理部８３を備
えている。受信信号処理部８３でのデータ処理には、入
力したデータを伸張するデータの伸張処理、及びデータ
を正しい順番に並べ替えるデータの並べ替え処理が含ま
れている。また、受信信号処理部８３は、ＣＲＴ、ＰＣ
のディスプレイ、または類似装置により構成された映像
表示装置８４、スピーカにより構成された音声出力装置
８５、及びマイクロコントローラ部７２に接続され、上
記のようなデータ処理を施した後、信号の種類を判別し
て、映像信号、音声信号、及び指示信号を映像表示装置
８４、音声出力装置８５、及びマイクロコントローラ部
７２にそれぞれ出力する。Further, in this conventional terminal device, output data transmitted from a transmission unit of another terminal device is transmitted to a communication line 8.
0, a reception data conversion unit 8 for performing protocol conversion on the reception data from the reception unit 81
2, and a reception signal processing unit 83 which receives output data from the reception data conversion unit 82 and performs predetermined data processing. The data processing in the reception signal processing unit 83 includes data expansion processing for expanding input data, and data rearrangement processing for rearranging data in a correct order. Further, the reception signal processing unit 83 includes a CRT, a PC,
Is connected to a video display device 84 composed of a display or a similar device, an audio output device 85 composed of a speaker, and the microcontroller unit 72, and performs the data processing as described above to determine the type of signal. Then, the video signal, the audio signal, and the instruction signal are output to the video display device 84, the audio output device 85, and the microcontroller unit 72, respectively.
【０００７】次に、この第２の従来例のテレビ電話会議
システムの動作について説明する。まず、話し手側の一
の端末装置から聞き手側の他の端末装置に話し手側の映
像、及び音声を伝達する動作について説明する。話し手
側に設置された端末装置は、その撮像カメラ７５’によ
って取り込んだ映像信号を送信信号処理部７７に出力す
る。送信信号処理部７７は、撮像カメラ７５’、及び音
声入力装置７６からそれぞれ入力した映像信号、及び音
声信号のデータにデータの圧縮処理等を施して、送信デ
ータ変換部７８に出力する。送信データ変換部７８は、
後段の通信回線８０でデータ通信を行うのに適した形式
に変換するプロトコル変換を入力したデータに施し、送
信部７９に出力する。送信部７９は、聞き手側に設けら
れた端末装置の受信部に映像信号、及び音声信号のデー
タを転送する。このことにより、聞き手側の端末装置に
おいて、その映像表示装置、及び音声出力装置が、話し
手側からの映像、及び音声をそれぞれ再生し表示、発音
する。Next, the operation of the second conventional video telephone conference system will be described. First, an operation of transmitting a video and a voice of the speaker from one terminal device of the speaker to another terminal device of the listener will be described. The terminal device installed on the speaker side outputs the video signal captured by the imaging camera 75 ′ to the transmission signal processing unit 77. The transmission signal processing unit 77 performs data compression processing or the like on the video signal and audio signal data input from the imaging camera 75 ′ and the audio input device 76, respectively, and outputs the data to the transmission data conversion unit 78. The transmission data conversion unit 78
The input data is subjected to protocol conversion for conversion into a format suitable for performing data communication through the communication line 80 at the subsequent stage, and the result is output to the transmission unit 79. The transmission unit 79 transfers the data of the video signal and the audio signal to the reception unit of the terminal device provided on the listener side. Thus, in the terminal device on the listener side, the video display device and the audio output device reproduce, display, and sound the video and audio from the speaker side, respectively.
【０００８】次に、聞き手が話し手側の撮像カメラ７
５’を駆動して、所望の映像を表示させる動作について
説明する。この場合、聞き手は端末装置を動作して、そ
の端末装置の送信部から通信回線８０を介して指示信号
のデータを話し手側の端末装置の受信部８１に出力す
る。受信部８１は、入力した指示信号のデータを受信デ
ータ変換部８２に出力する。受信データ変換部８２は、
当該端末装置内でのデータ処理を行うのに適した形式に
変換するプロトコル変換を入力したデータに施し、受信
信号処理部８３に出力する。受信信号処理部８３は、入
力したデータにデータの伸張処理等を施した後、指示信
号としてマイクロコントローラ部７２に出力する。マイ
クロコントローラ部７２が入力した指示信号は、図１０
に示した第１の従来例のものと同様に、制御部７３、及
びアクチュエータ７４を経てカメラ部７５に伝えられ、
撮像カメラ７５’は聞き手が所望する撮影方向、及びズ
ームに一致するように駆動される。このように、第２の
従来例のテレビ電話会議システムは、聞き手が端末装置
を動作して通信回線８０を用いたデータ通信を行うこと
によって、話し手側のカメラ部７５の遠隔操作を行うこ
とができ、聞き手が所望する映像に変更することができ
る。[0008] Next, the listener is the imaging camera 7 on the speaker side.
An operation of driving 5 ′ to display a desired image will be described. In this case, the listener operates the terminal device, and outputs the data of the instruction signal from the transmission unit of the terminal device via the communication line 80 to the reception unit 81 of the terminal device on the speaker side. The receiving unit 81 outputs the data of the input instruction signal to the received data converting unit 82. The reception data conversion unit 82
The input data is subjected to protocol conversion for converting the data into a format suitable for performing data processing in the terminal device, and is output to the reception signal processing unit 83. The received signal processing unit 83 performs a data decompression process or the like on the input data, and then outputs the instruction data to the microcontroller unit 72 as an instruction signal. The instruction signal input by the microcontroller unit 72 is shown in FIG.
Is transmitted to the camera unit 75 via the control unit 73 and the actuator 74, similarly to the first conventional example shown in FIG.
The imaging camera 75 'is driven so as to match the imaging direction and zoom desired by the listener. As described above, in the video teleconferencing system of the second conventional example, the listener operates the terminal device to perform data communication using the communication line 80, thereby performing remote control of the camera unit 75 on the speaker side. It is possible to change to a video desired by the listener.
【０００９】次に、第３の従来例のテレビ電話会議シス
テムについて説明する。この第３の従来例は、ＣＣＤ
（Charge Coupled Device）センサやＣＭＯＳ（Complem
entary Metal Oxide Semiconductor）センサなどの撮像
センサを用いて、静止画を撮影するカメラ部を構成した
ものである。尚、以下の説明では、ＣＣＤセンサを用い
たものについて説明する。また、カメラ部以外の構成
は、上述の第２の従来例のものと同様であるので、その
重複した説明は省略する。まず、図１２、図１３の
（ａ）、及び図１３の（ｂ）を参照して、ＣＣＤセンサ
について具体的に説明する。図１２は、第３の従来例の
テレビ電話会議システムに用いられるＣＣＤセンサのセ
ルの配列例を示す構造図である。図１３の（ａ）は図１
２に示したＣＣＤセンサのセルの構成を示す平面図であ
り、図１３の（ｂ）は図１３の（ａ）のXIIIｂ−XIIIｂ
線で断面をとった断面図である。図１２に示すように、
ＣＣＤセンサ８６は、縦方向及び横方向にそれぞれ配列
したＭ×Ｌ個（Ｍ、Ｌは４の倍数）のセル８６ｐにより
構成されている。セル８６ｐは、イエロー、マゼンダ、
シアン、及びグリーンの４色のそれぞれの色の入射光を
検知する。尚、検知する入射光の色は、各セル８６ｐ内
に設けられ、特定波長の光のみを通過する補色カラーフ
ィルタ８８（図１３の（ｂ））により定まる。また、上
述の４色の入射光をそれぞれ検知するセル８６ｙ，８６
ｍ，８６ｃ，８６ｇは、互いに隣り合うように配列さ
れ、隣り合う４つのセル８６ｙ，８６ｍ，８６ｃ，８６
ｇを１組として、１つの画素が構成される。このため、
Ｍ×Ｌ個のセル８６ｐを縦横に配列したＣＣＤセンサ８
６の場合、（Ｍ−１）×（Ｌ−１）個の画素が縦方向及
び横方向に構成され、１つの静止画面が形成される。
尚、図１２の斜線部分ｓは、各セル８６ｐでの有効面
積、つまり後述の受光部９０ａに入射する光を受ける有
効部分の面積を示すものであり、その総和有効面積Ｓに
よってＣＣＤセンサ８６の解像度が規定される。Next, a third conventional video conference system will be described. This third conventional example uses a CCD
(Charge Coupled Device) sensors and CMOS (Complem
An image sensor, such as an entary metal oxide semiconductor (sensor) sensor, is used to configure a camera unit that captures a still image. In the following description, an example using a CCD sensor will be described. The configuration other than the camera unit is the same as that of the above-described second conventional example, and a duplicate description thereof will be omitted. First, the CCD sensor will be specifically described with reference to FIGS. 12, 13A and 13B. FIG. 12 is a structural diagram showing an example of an arrangement of cells of a CCD sensor used in a third conventional video conference system. FIG. 13A shows FIG.
FIG. 13B is a plan view showing the configuration of the cell of the CCD sensor shown in FIG. 2, and FIG. 13B shows XIIIb-XIIIb in FIG.
It is sectional drawing which took the cross section by the line. As shown in FIG.
The CCD sensor 86 is composed of M × L cells (M and L are multiples of 4) 86p arranged in the vertical and horizontal directions, respectively. Cell 86p is yellow, magenta,
The incident light of each of the four colors of cyan and green is detected. The color of the incident light to be detected is determined by the complementary color filter 88 (FIG. 13 (b)) provided in each cell 86p and passing only light of a specific wavelength. Cells 86y and 86 for detecting the above-mentioned four colors of incident light, respectively.
m, 86c, 86g are arranged so as to be adjacent to each other, and four adjacent cells 86y, 86m, 86c, 86
One pixel is configured with g as one set. For this reason,
CCD sensor 8 in which M × L cells 86p are arranged vertically and horizontally
In the case of 6, (M−1) × (L−1) pixels are configured in the vertical direction and the horizontal direction, and one still screen is formed.
The shaded portion s in FIG. 12 indicates the effective area of each cell 86p, that is, the area of the effective portion that receives light incident on the light receiving portion 90a described later. Resolution is specified.
【００１０】図１３の（ａ）、及び図１３の（ｂ）に示
すように、セル８６ｐは、光の入射側から順番に配置さ
れたマイクロレンズ８７、補色カラーフィルタ８８、遮
光膜８９、及びフォトダイオード９０を備えている。フ
ォトダイオード９０は、光を受光する受光部９０ａ、ｐ
形の半導体層９０ｂ、及びｎ形の半導体基板９０ｃを有
している。遮光膜８９は、マイクロレンズ８７と補色カ
ラーフィルタ８８とを通過した光のみを受光部９０ａに
入射するためのものであり、それ以外の光が受光部９０
ａに入射するのを防止する。このことにより、各セル８
６ｐは対応する色の入射光だけを検知することができ
る。このように構成されたＣＣＤセンサ８６では、周知
のように、各セル８６ｐにて検知した対応する色の入射
光の検知信号に所定の信号処理を施すことにより、（Ｍ
−１）×（Ｌ−１）個の画素を有する静止画像を形成し
ている。また、静止画像を形成する際、上述の各画素で
の輝度Ｙ、及び色差Ｒ−Ｙを下記の（１）式、及び
（２）式を用いてそれぞれ計算している。尚、（１）
式、及び（２）式では、４つのセル８６ｙ，８６ｍ，８
６ｃ，８６ｇにそれぞれ入射したイエロー、マゼンダ、
シアン、及びグリーンの各色の入射光の光量をＹｅ，Ｍ
ｇ，Ｃｙ，Ｇで示している。また、（１）式、及び
（２）式に示すＲ，Ｂは、赤、及び青色の光の光量を示
している。As shown in FIGS. 13A and 13B, the cell 86p is composed of a microlens 87, a complementary color filter 88, a light-shielding film 89, and a microlens 87 arranged in order from the light incident side. A photodiode 90 is provided. The photodiode 90 includes a light receiving unit 90a, p for receiving light.
It has a semiconductor layer 90b of n-type and an n-type semiconductor substrate 90c. The light-shielding film 89 is for allowing only light that has passed through the microlens 87 and the complementary color filter 88 to be incident on the light receiving portion 90a, and the other light is not incident on the light receiving portion 90a.
a. As a result, each cell 8
6p can detect only the incident light of the corresponding color. In the CCD sensor 86 configured as described above, as is well known, by performing a predetermined signal processing on the detection signal of the incident light of the corresponding color detected in each cell 86p, (M
A still image having (-1) × (L-1) pixels is formed. When a still image is formed, the luminance Y and the color difference RY at each pixel are calculated using the following equations (1) and (2). In addition, (1)
In the formula and the formula (2), the four cells 86y, 86m, 8
6c, 86g, respectively, yellow, magenta,
The amounts of incident light of cyan and green are represented by Ye, M
g, Cy and G are shown. Also, R and B shown in the equations (1) and (2) indicate the amounts of red and blue light.
【００１１】 （Ｙｅ＋Ｍｇ）＋（Ｃｙ＋Ｇ） ＝ ２Ｒ＋３Ｇ＋２Ｂ Ｙ −−（１） （Ｙｅ＋Ｍｇ）−（Ｃｙ＋Ｇ） ＝ ２Ｒ−Ｇ Ｒ−Ｙ −−（２）(Ye + Mg) + (Cy + G) = 2R + 3G + 2B Y − (1) (Ye + Mg) − (Cy + G) = 2R−G RY − (2)
【００１２】次に、図１４、図１５の（ａ）、図１５の
（ｂ）、及び図１５の（ｃ）を参照して、この従来例の
カメラ部９１の構成について具体的に説明する。図１４
は、第３の従来例のテレビ電話会議システムに用いられ
るカメラ部の構成を示すブロック図である。図１５の
（ａ）は図１４に示した縦プリズムからの出射光を示す
説明図であり、図１５の（ｂ）は図１４に示した横プリ
ズムからの出射光を示す説明図である。図１５の（ｃ）
は、図１４に示したＣＣＤセンサでの４倍の解像度を有
する静止画像の画像形成方法を示す説明図である。図１
４に示すように、カメラ部９１は、ＣＣＤセンサ８６、
当該ＣＣＤセンサ８６にて撮影される静止画像の解像度
を変更するための横プリズム９２及び縦プリズム９３、
及びカメラ部９１の入射レンズであるレンズ９４を備え
ている。入射光は、同図に示すように、レンズ９４、縦
プリズム９３、及び横プリズム９２の順番に通過してＣ
ＣＤセンサ８６に入射する。横プリズム９２及び縦プリ
ズム９３は、図示しないムービングコイルにより、それ
ぞれ微少角度駆動される。詳細に言えば、縦プリズム９
３は、上記ムービングコイルによって駆動され、図１５
の（ａ）の”９３ｒ”、及び”９３ｌ”で示した２つの
異なる方向の光路を構成する。同様に、横プリズム９２
は、上記ムービングコイルによって駆動され、図１５の
（ｂ）の”９２ｕ”、及び”９２ｄ”で示した２つの異
なる方向の光路を構成する。このことにより、各セル８
６ｐに入射する入射光は、横プリズム９２、及び縦プリ
ズム９３の角度変化による４通りの光路のいずれかの１
つの光路を通って各セル８６ｐに入射される。つまり、
図１５の（ｃ）に示すように、各セル８６ｐは、実線の
円で囲んだ部分（９３ｌ，９２ｕ）の光路を通過した入
射光だけでなく、破線の円で囲んだ部分（９３ｒ，９２
ｕ）、（９３ｒ，９２ｄ）、及び（９３ｌ，９２ｄ）の
光路を通過した入射光の入射も検知していた。このよう
に、各セル８６ｐにおいて４通りの入射光を検知するこ
とは、上述の総和有効面積Ｓを４倍である４Ｓとしたこ
とに相当することである。この従来例のカメラ部９１
は、４通りの入射光に基づいてそれぞれ撮影、形成した
４つの静止画像を重ね合わせ、既知の信号処理を行うこ
とによって、４倍の解像度を持つ静止画像を形成してい
た。このように、第３の従来例のテレビ電話会議システ
ムでは、ＣＣＤセンサ８６を用い静止画像を撮影、形成
するカメラ部９１を構成して、さらに解像度を変更する
ための横プリズム９２、及び縦プリズム９３をレンズ９
４とＣＣＤセンサ８６との間に配置し横プリズム９２、
及び縦プリズム９３の各々の角度を変更することによ
り、カメラ部９１で撮影される静止画像の解像度を向上
していた。Next, with reference to FIGS. 14, 15A, 15B, and 15C, the configuration of the camera section 91 of this conventional example will be specifically described. . FIG.
FIG. 11 is a block diagram showing a configuration of a camera unit used in a video conference system of a third conventional example. FIG. 15A is an explanatory diagram showing light emitted from the vertical prism shown in FIG. 14, and FIG. 15B is an explanatory diagram showing light emitted from the horizontal prism shown in FIG. (C) of FIG.
FIG. 15 is an explanatory diagram showing an image forming method of a still image having four times the resolution of the CCD sensor shown in FIG. FIG.
As shown in FIG. 4, the camera unit 91 includes a CCD sensor 86,
A horizontal prism 92 and a vertical prism 93 for changing the resolution of a still image captured by the CCD sensor 86;
And a lens 94 that is an incident lens of the camera unit 91. The incident light passes through the lens 94, the vertical prism 93, and the horizontal prism 92 in this order as shown in FIG.
The light enters the CD sensor 86. The horizontal prism 92 and the vertical prism 93 are each driven by a small angle by a moving coil (not shown). Specifically, the vertical prism 9
3 is driven by the moving coil, and FIG.
In (a), optical paths in two different directions indicated by “93r” and “93l” are formed. Similarly, the horizontal prism 92
Are driven by the moving coil, and constitute optical paths in two different directions indicated by “92u” and “92d” in FIG. 15B. As a result, each cell 8
6p is incident on one of four optical paths due to a change in angle of the horizontal prism 92 and the vertical prism 93.
The light enters each cell 86p through one optical path. That is,
As shown in FIG. 15C, each cell 86p includes not only the incident light passing through the optical path of the portion (93l, 92u) surrounded by the solid line circle, but also the portion (93r, 92) surrounded by the broken line circle.
u), (93r, 92d), and (93l, 92d), the incidence of incident light passing through the optical path was also detected. Thus, detecting four types of incident light in each cell 86p is equivalent to setting the total effective area S to 4S, which is four times as large. This conventional camera section 91
Has formed a still image having four times the resolution by superimposing four still images, each of which has been photographed and formed based on four types of incident light, and performing known signal processing. As described above, in the video conference system according to the third conventional example, the camera unit 91 for photographing and forming a still image using the CCD sensor 86 is configured, and the horizontal prism 92 and the vertical prism 92 for further changing the resolution are formed. 93 to lens 9
4 and a CCD 92 and a horizontal prism 92
By changing the angle of each of the vertical prisms 93 and the angle of the vertical prism 93, the resolution of a still image captured by the camera unit 91 is improved.
【００１３】[0013]
【発明が解決しようとする課題】第１の従来例のテレビ
電話会議システムでは、話し手、及びカメラオペレータ
がカメラ部を駆動、操作していたので、これらの操作者
は、他の端末装置で視聴している聞き手のことを考えて
カメラ部を操作し撮影する必要があった。特に、話し手
がカメラ部を操作する場合、話し手は説明と撮影方向、
及びズームの変更などのカメラ部の操作を同時に行う必
要があり、話し手に課せられる負担が増大するという問
題点を生じた。第２の従来例のテレビ電話会議システム
では、話し手、または聞き手がカメラ部を遠隔操作し撮
影していた。このため、第１の従来例のものと同様に、
話し手は説明とカメラ部の操作とを同時に行う必要があ
った。また、聞き手は端末装置に表示、再生される映
像、音声を視聴しながら、カメラ部の操作を行う必要が
あった。特に、聞き手が移動する被写体、例えば話し手
をその動きに応じてカメラ部により撮影する場合、聞き
手には大きな負担がかかった。さらに、聞き手がカメラ
部を操作する場合にも、話し手がそのカメラ部による映
像を確認しながら説明を行うことも要求される場合があ
った。第３の従来例のテレビ電話会議システムでは、静
止画像の解像度を向上するために、レンズ、プリズム、
及びムービングコイル等を設ける必要があり、カメラ部
を小型化することが困難であった。さらに、横長の静止
画像、いわゆるパノラマ画や縦長の静止画像を容易に撮
影、形成することができなかった。また、上述の第１乃
至第３の従来例のテレビ電話会議システムでは、一の端
末装置のカメラ部を用いて映像表示装置の画面、例えば
ＣＲＴやＰＣの画面を撮影して、他の端末装置の映像表
示装置に表示する場合、他の端末装置の映像表示装置に
表示される映像の画質が低下するという問題点があっ
た。具体的には、カメラ部に撮影された映像表示装置で
のブランキング期間が１本の水平の黒いすじとして他の
端末装置の映像表示装置に表示された。In the first conventional video telephone conference system, a speaker and a camera operator drive and operate the camera unit, so that these operators can view and listen on another terminal device. It was necessary to operate the camera unit and take a picture in consideration of the listener who was doing it. In particular, when the speaker operates the camera unit, the speaker
In addition, it is necessary to simultaneously operate the camera unit, such as changing the zoom, and the like, which causes a problem that the burden imposed on the speaker increases. In the video conference system of the second conventional example, a speaker or a listener remotely operates a camera unit to take a picture. Therefore, similar to the first conventional example,
The speaker had to perform the explanation and the operation of the camera unit at the same time. Also, the listener has to operate the camera unit while watching the video and audio displayed and reproduced on the terminal device. In particular, in the case where an image is taken by a camera unit according to the movement of a subject to which the listener moves, for example, the speaker, a heavy burden is imposed on the listener. Furthermore, even when the listener operates the camera unit, there is a case where the speaker is required to give an explanation while checking the image by the camera unit. In a third conventional video conference system, a lens, a prism,
In addition, it is necessary to provide a moving coil and the like, and it is difficult to reduce the size of the camera unit. Further, a horizontally long still image, a so-called panoramic image or a vertically long still image, cannot be easily photographed and formed. In the above-described first to third conventional video conference systems, the screen of a video display device, for example, the screen of a CRT or a PC is photographed using the camera unit of one terminal device, and the other terminal device is photographed. However, when the image is displayed on the video display device, there is a problem that the image quality of the video displayed on the video display device of another terminal device is deteriorated. Specifically, the blanking period of the video display device photographed by the camera unit was displayed on the video display device of another terminal device as one horizontal black streak.
【００１４】この発明は、上記のような問題点を解決す
るためになされたものであり、カメラ部により撮影され
る被写体が移動する場合でも、カメラ部が自動的に被写
体を追尾して撮影することができ、話し手及び聞き手に
負担を与えないテレビ電話会議システム、及びそれに用
いられる画像形成方法を提供することを目的とする。SUMMARY OF THE INVENTION The present invention has been made to solve the above-described problems. Even when a subject to be photographed by a camera moves, the camera automatically tracks the subject to photograph. It is an object of the present invention to provide a video conference system capable of giving a burden to a speaker and a listener, and an image forming method used for the video conference system.
【００１５】[0015]
【課題を解決するための手段】本発明のテレビ電話会議
システムは、通信回線により接続された複数の端末装置
を備えたテレビ電話会議システムであって、前記複数の
各端末装置は、被写体を撮影するカメラ部、前記カメラ
部の方向を駆動するアクチュエータ、前記被写体に取り
付けられた信号発生装置、前記信号発生装置からの信号
を検知するセンサ、及び前記センサの検知結果に基づい
て、カメラ部を駆動する制御信号をアクチュエータに出
力する駆動制御部を備えている。このように構成するこ
とにより、被写体が移動する場合でも、ユーザが操作す
ることなく、カメラ部が自動的に被写体を追尾して撮影
することができる。A video telephone conference system according to the present invention is a video telephone conference system including a plurality of terminal devices connected by a communication line, wherein each of the plurality of terminal devices captures an object. A camera unit, an actuator that drives the direction of the camera unit, a signal generator attached to the subject, a sensor that detects a signal from the signal generator, and a camera unit that is driven based on a detection result of the sensor. And a drive control unit for outputting a control signal to the actuator to the actuator. With this configuration, even when the subject moves, the camera section can automatically track and shoot the subject without any operation by the user.
【００１６】別の観点による発明のテレビ電話会議シス
テムは、前記端末装置が、外部から映像信号及び音声信
号を入力する外部入力回路部、前記カメラ部と外部入力
回路部とに接続され、カメラ部から出力された映像信号
と外部入力回路部からの映像信号との同期をとり、駆動
制御部からの切り換え信号に基づいて、カメラ部、及び
外部入力回路部のいずれか一方からの映像信号を出力す
るスイッチ部、及び前記通信回線に接続され、スイッチ
部からの出力データを他の端末装置に送信し、他の端末
装置からの出力データを受信する送受信部を備えてい
る。このように構成することにより、外部入力回路部に
接続された外部の映像表示装置をカメラ部を用いて撮影
した場合でも、カメラ部が外部の映像表示装置のブラン
キング期間を撮影するのを防止することができる。According to another aspect of the invention, there is provided a video conference system wherein the terminal device is connected to an external input circuit for inputting a video signal and an audio signal from the outside, the camera and the external input circuit, and Synchronizes the video signal output from the external control circuit with the video signal output from the external input circuit unit, and outputs the video signal from one of the camera unit and the external input circuit unit based on the switching signal from the drive control unit. And a transmission / reception unit connected to the communication line for transmitting output data from the switch unit to another terminal device and receiving output data from another terminal device. With this configuration, even when an external video display device connected to the external input circuit unit is captured using the camera unit, the camera unit prevents the external video display device from capturing a blanking period. can do.
【００１７】別の観点による発明のテレビ電話会議シス
テムは、前記端末装置が、前記信号発生装置と異なる信
号を発生する別の信号発生装置、及び前記カメラ部から
の映像信号を処理して、別の信号発生装置からの信号を
検出する信号処理部を備えている。このように構成する
ことにより、被写体とカメラ部とを結ぶ方向でカメラ部
を駆動することができ、カメラ部のズームを最適、かつ
自動的に変更することができる。According to another aspect of the present invention, there is provided a video conference system wherein the terminal device processes another signal generating device for generating a signal different from the signal generating device and a video signal from the camera section, and And a signal processing unit for detecting a signal from the signal generator. With this configuration, the camera unit can be driven in the direction connecting the subject and the camera unit, and the zoom of the camera unit can be optimally and automatically changed.
【００１８】別の観点による発明のテレビ電話会議シス
テムは、前記端末装置が、被写体から発生する熱、及び
被写体からの特定の色の波長の少なくとも一方を検知す
るセンサを備えている。このように構成することによ
り、信号発生装置を用いることなく、被写体を追尾して
自動的に撮影することができる。According to another aspect of the invention, the terminal device includes a sensor for detecting at least one of heat generated from the subject and a wavelength of a specific color from the subject. With this configuration, the subject can be tracked and automatically photographed without using a signal generator.
【００１９】別の観点による発明のテレビ電話会議シス
テムは、前記アクチュエータが、０.１゜±０.０１゜の
精度にてカメラ部の方向を駆動する高精度アクチュエー
タにより構成されている。このように構成することによ
り、解像度の向上、及び横長や縦長の静止画像を容易に
形成することができる。According to another aspect of the invention, the actuator comprises a high-precision actuator that drives the direction of the camera unit with an accuracy of 0.1 {± 0.01}. With this configuration, it is possible to improve the resolution and easily form a horizontally long or vertically long still image.
【００２０】本発明のテレビ電話会議システムに用いら
れる画像形成方法は、通信回線により接続された複数の
端末装置を備えたテレビ電話会議システムに用いられる
画像形成方法であって、被写体に取り付けた信号発生装
置からの信号を少なくとも２つのセンサにより検知する
工程、前記少なくとも２つのセンサにより検知したそれ
ぞれの信号の強度を比較する工程、及び前記比較する工
程での比較結果に基づいて、被写体とカメラ部との位置
関係を認識して、カメラ部の方向を駆動する工程を備え
ている。このように構成することにより、被写体が移動
する場合でも、ユーザが操作することなく、カメラ部が
自動的に被写体を追尾して撮影することができる。An image forming method used in the video conference system according to the present invention is an image forming method used in a video conference system having a plurality of terminal devices connected by a communication line, and includes a signal attached to a subject. Detecting the signal from the generator by at least two sensors, comparing the intensities of the respective signals detected by the at least two sensors, and based on the comparison result in the comparing step, the subject and the camera unit And recognizing the positional relationship between the two and driving the direction of the camera unit. With this configuration, even when the subject moves, the camera section can automatically track and shoot the subject without any operation by the user.
【００２１】別の観点による発明のテレビ電話会議シス
テムに用いられる画像形成方法は、通信回線により接続
された複数の端末装置を備えたテレビ電話会議システム
に用いられる画像形成方法であって、所望の解像度に基
づいて、静止画像を複数個の画面分に分割する工程、前
記分割する工程により分割した各画面に対応する被写体
の部分をカメラ部により撮影する工程、及び前記撮影す
る工程で撮影した被写体の各部分の映像信号を合成し
て、１つの静止画像を形成する工程を備えている。この
ように構成することにより、カメラ部を大型化すること
なく、形成する静止画像の解像度を容易に向上すること
ができる。An image forming method used in a video conference system according to another aspect of the present invention is an image forming method used in a video conference system having a plurality of terminal devices connected by a communication line. A step of dividing a still image into a plurality of screens based on a resolution, a step of photographing a part of a subject corresponding to each screen divided by the dividing step by a camera unit, and a subject photographed in the photographing step And forming one still image by synthesizing the video signals of the respective portions. With this configuration, the resolution of the still image to be formed can be easily improved without increasing the size of the camera unit.
【００２２】別の観点による発明のテレビ電話会議シス
テムに用いられる画像形成方法は、通信回線により接続
された複数の端末装置を備えたテレビ電話会議システム
に用いられる画像形成方法であって、カメラ部を一の方
向で水平に駆動するとともに、その駆動中に被写体を複
数回カメラ部により撮影する工程、及び前記撮影する工
程で撮影した被写体の各部分の映像信号を合成して、１
つの静止画像を形成する工程を備えている。このように
構成することにより、カメラ部を大型化することなく、
横長、及び縦長の静止画像を容易に形成することができ
る。An image forming method used in a video conference system according to another aspect of the invention is an image forming method used in a video conference system having a plurality of terminal devices connected by a communication line, and includes a camera unit. Is driven horizontally in one direction, and a step of photographing the subject a plurality of times by the camera unit during the driving, and synthesizing the video signals of the respective parts of the subject photographed in the photographing step to obtain 1
Forming two still images. With such a configuration, without increasing the size of the camera unit,
Horizontal and vertical still images can be easily formed.
【００２３】別の観点による発明のテレビ電話会議シス
テムに用いられる画像形成方法は、複数のカメラ部を用
いて、前記被写体の各部分の映像信号を形成することを
特徴とする。このように構成することにより、解像度の
向上、及び横長や縦長の静止画像を容易に形成すること
ができる。An image forming method used in the video conference system according to another aspect of the invention is characterized in that a video signal of each portion of the subject is formed using a plurality of camera units. With this configuration, it is possible to improve the resolution and easily form a horizontally long or vertically long still image.
【００２４】[0024]
【発明の実施の形態】以下、本発明のテレビ電話会議シ
ステムの好ましい実施例について、図面を参照しながら
説明する。DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS A preferred embodiment of the video conference system according to the present invention will be described below with reference to the drawings.
【００２５】《第１の実施例》図１は、本発明のテレビ
電話会議システムの全体構成を示すブロック図である。
図１に示すように、テレビ電話会議システムは、複数の
端末装置１とこれらの端末装置１を互いに接続した通信
回線１００とにより構成されている。複数の各端末装置
１は、家庭、職場などの場所に設置され、映像、及び音
声の入出力装置と映像信号及び音声信号を含む信号のデ
ジタルデータの送受信を行うデータ処理装置などにより
構成されている（詳細は後述）。通信回線１００は、光
ケーブル、電話回線、あるいはコンピュータネットワー
クなどの有線方式、あるいは衛星放送、地上無線局を利
用した無線方式のチャネルにより構成されている。各端
末装置１は、話し手や聞き手などのユーザにより操作さ
れ、通信回線１００を用いた双方向のデータ通信を行う
ことにより、上述のデジタルデータを互いに転送して映
像、及び音声を再生する。このことにより、テレビ電話
会議システムは、端末装置１が設置された複数の場所を
つないで、例えば複数のユーザの間で会議を行うことを
可能とする。<< First Embodiment >> FIG. 1 is a block diagram showing the overall configuration of a video conference system according to the present invention.
As shown in FIG. 1, the video conference system includes a plurality of terminal devices 1 and a communication line 100 connecting these terminal devices 1 to each other. Each of the plurality of terminal devices 1 is installed at a place such as a home or a work place, and is configured by a data processing device that transmits and receives video and audio input / output devices and digital data of signals including video and audio signals. (Details will be described later). The communication line 100 is configured by a channel of a cable system such as an optical cable, a telephone line, or a computer network, or a channel of a wireless system using a satellite broadcast or a terrestrial radio station. Each of the terminal devices 1 is operated by a user such as a speaker or a listener, and performs bidirectional data communication using the communication line 100, thereby transferring the above-described digital data to each other to reproduce video and audio. Thus, the video conference system enables a conference between a plurality of users, for example, by connecting a plurality of places where the terminal devices 1 are installed.
【００２６】《端末装置の構成》次に、第１の実施例の
テレビ電話会議システムでの端末装置について、図２を
参照して具体的に説明する。図２は、本発明の第１の実
施例であるテレビ電話会議システムでの端末装置の構成
を示すブロック図である。図２に示すように、端末装置
１は、話し手などの被写体を撮影するカメラ部２、及び
被写体に取り付けられ、赤外線信号を所定の時間間隔で
発生する赤外線信号発生装置５を備えている。カメラ部
２は、上記赤外線信号発生装置５からの赤外線信号を検
知する赤外線センサ３、及び撮像素子あるいは類似装置
により構成され、被写体を撮影してデジタル形式の映像
信号（デジタルデータ）を出力する撮像カメラ４を有し
ている。尚、上記映像信号には、動画像及び静止画像の
ものが含まれている。また、端末装置１には、カメラ部
２を駆動する機構として、ユーザが保持する手元操作部
６、手元操作部６からの指示信号を受信するコンソール
パネル７、前記コンソールパネル７に接続され、コンソ
ールパネル７からの指示信号を入力するマイクロコント
ローラ部８、前記マイクロコントローラ部８に接続さ
れ、マイクロコントロール部８からの駆動信号を入力す
る制御部９、及び前記カメラ部２を保持し、制御部９か
らの制御信号を入力するアクチュエータ１０が設けられ
ている。<< Configuration of Terminal Device >> Next, a terminal device in the video conference system of the first embodiment will be specifically described with reference to FIG. FIG. 2 is a block diagram showing a configuration of a terminal device in the video conference system according to the first embodiment of the present invention. As shown in FIG. 2, the terminal device 1 includes a camera unit 2 for photographing a subject such as a speaker, and an infrared signal generator 5 attached to the subject and generating an infrared signal at predetermined time intervals. The camera unit 2 includes an infrared sensor 3 for detecting an infrared signal from the infrared signal generator 5 and an image sensor or similar device, and captures an image of a subject and outputs a digital video signal (digital data). It has a camera 4. The video signals include those of moving images and still images. Further, the terminal device 1 includes, as a mechanism for driving the camera unit 2, a hand operation unit 6 held by a user, a console panel 7 for receiving an instruction signal from the hand operation unit 6, and a console connected to the console panel 7. A microcontroller section 8 for inputting an instruction signal from the panel 7, a control section 9 connected to the microcontroller section 8 for inputting a drive signal from the microcontroller section 8, and a control section 9 for holding the camera section 2; An actuator 10 for inputting a control signal from the controller 10 is provided.
【００２７】赤外線センサ３は、薄膜焦電型センサある
いは類似のセンサ素子により構成され、例えば３個のセ
ンサ、右上センサ３ａ、左上センサ３ｂ、及び左下セン
サ３ｃを備えている。これらのセンサ３ａ，３ｂ，３ｃ
は、撮像カメラ４のレンズ４ａ（図３）の中心に対して
互いに等距離となるよう撮像カメラ４に固定され、検知
した赤外線信号の強度をマイクロコントローラ部８に出
力する。このことにより、カメラ部２は、赤外線信号発
生装置５を取り付けた被写体の動きに追従して駆動さ
れ、被写体を自動的に追尾して撮影することができる
（詳細は後述）。赤外線信号発生装置５は、ＧａＡｓ赤
外ダイオード（ピーク波長、９５０ｎｍ）、または類似
素子を用いて構成され、例えば１次電池により１ミリ秒
毎に赤外線信号（インパルス）を発生する。赤外線信号
発生装置５は、例えば重量８ｇ、寸法縦、横、高さがそ
れぞれ２５ｍｍ，２５ｍｍ，１０ｍｍの箱体状に構成さ
れ、上述のようにカメラ部２に撮影される被写体に取り
付けられている。より具体的に言えば、被写体が話し手
である場合、赤外線信号発生装置５はネクタイピンの構
造により話し手の顔近くの衣服に取り付けられる。ま
た、被写体がホワイトボード、あるいはＯＨＰ（Over H
ead Projector）のスクリーンなどである場合、赤外線
信号発生装置５は両面テープまたは磁石によりそれらの
ホワイトボードやＯＨＰのスクリーンの中心に取り付け
られる。The infrared sensor 3 is constituted by a thin film pyroelectric sensor or a similar sensor element, and includes, for example, three sensors, an upper right sensor 3a, an upper left sensor 3b, and a lower left sensor 3c. These sensors 3a, 3b, 3c
Are fixed to the imaging camera 4 so as to be equidistant from the center of the lens 4a (FIG. 3) of the imaging camera 4, and output the intensity of the detected infrared signal to the microcontroller unit 8. Accordingly, the camera unit 2 is driven to follow the movement of the subject to which the infrared signal generator 5 is attached, and can automatically track and photograph the subject (details will be described later). The infrared signal generator 5 is configured using a GaAs infrared diode (peak wavelength, 950 nm) or a similar element, and generates an infrared signal (impulse) every millisecond using, for example, a primary battery. The infrared signal generator 5 has a box shape with a weight of, for example, 8 g and dimensions of 25 mm, 25 mm, and 10 mm in height, width, and height, respectively, and is attached to the subject photographed by the camera unit 2 as described above. . More specifically, when the subject is a speaker, the infrared signal generator 5 is attached to clothes near the speaker's face by a tie-pin structure. If the subject is a whiteboard or OHP (Over H
In the case of an ead projector screen, the infrared signal generator 5 is attached to the center of the whiteboard or OHP screen by double-sided tape or a magnet.
【００２８】手元操作部６は、ユーザがカメラ部２を遠
隔操作するための指示信号を入力する入力機器であり、
専用ケーブルを用いた有線、あるいは赤外線信号などの
無線によってコンソールパネル７に指示信号を出力す
る。また、手元操作部６を操作することにより、端末装
置１のユーザは通信回線１００によって接続された他の
端末装置のカメラ部の遠隔操作、あるいは他の端末装置
のユーザにメッセージなどを送ることも可能である。さ
らに、上記カメラ部２の撮影モード、赤外線センサ３の
各センサ３ａ，３ｂ，３ｃのバラツキの補正、撮像カメ
ラ４にて撮影される映像の画面上での中心、あるいは後
述のスイッチ部１２への切り換え指示などについても、
入力、設定することができる。コンソールパネル７は、
上述の指示信号やメッセージなどを手元操作部６から受
信、入力するだけでなく、例えばキー入力部（図示せ
ず）を備え、ユーザがそれらの信号やメッセージを直接
的に入力できるよう構成されている。The hand operation unit 6 is an input device for inputting an instruction signal for a user to remotely operate the camera unit 2.
An instruction signal is output to the console panel 7 by wire using a dedicated cable or wirelessly such as an infrared signal. By operating the hand operation unit 6, the user of the terminal device 1 can also remotely control the camera unit of another terminal device connected via the communication line 100 or send a message or the like to the user of another terminal device. It is possible. Further, the photographing mode of the camera unit 2, correction of variations of the sensors 3 a, 3 b, 3 c of the infrared sensor 3, the center of the image photographed by the photographing camera 4 on the screen, or the switch 12 For switching instructions, etc.
Can be entered and set. The console panel 7
In addition to receiving and inputting the above-mentioned instruction signals, messages, and the like from the hand operation unit 6, for example, a key input unit (not shown) is provided so that the user can directly input those signals and messages. I have.
【００２９】マイクロコントローラ部８は、コンソール
パネル７からの指示信号に基づいてカメラ部２での移動
量を計算し、駆動信号として制御部９に出力する。同様
に、マイクロコントローラ部８は、後述の受信信号処理
部１９等を経て入力した他の端末装置からの指示信号に
基づいてカメラ部２での移動量を計算し、駆動信号とし
て制御部９に出力する。さらに、被写体を自動的に追尾
して撮影するために、マイクロコントローラ部８は、上
述のように、赤外線センサ３の各センサ３ａ，３ｂ，３
ｃが検知した赤外線信号の強度を入力する。マイクロコ
ントローラ部８は、入力した強度を比較することによ
り、赤外線信号発生装置５（被写体）と各センサ３ａ，
３ｂ，３ｃとの位置関係を把握し、被写体の動きに追従
してカメラ部２を駆動し被写体を自動的に追尾して撮影
することができる。制御部９は、マイクロコントローラ
部８から駆動信号を入力して、アクチュエータ１０を駆
動するための制御信号を出力する。また、制御部９は、
切り換え信号をスイッチ部１２に出力して、ユーザが要
求する映像信号が出力されるようスイッチ部１２を制御
する。アクチュエータ１０は、制御部９からの制御信号
に基づいてカメラ部２を三次元的に駆動する。三次元的
というのは、アクチュエータ１０が、カメラ部２を上下
方向、左右方向、及びカメラのレンズのズーム調整手段
（図示せず）による画角変化の方向（すなわち等価的に
被写体とカメラ部２との距離変化の）方向の３つの方向
に駆動し、撮像カメラ４のアングル（撮影方向）の二次
元的駆動と被写体とカメラ部２と間の距離の等価的変更
をする。尚、マイクロコントローラ部８及び制御部９
は、ユーザの指示、及び赤外線センサ３の検知結果に基
づいて、アクチュエータ１０を用いてカメラ部２を駆動
する駆動制御部を構成するものである。また、上述の説
明では、マイクロコントローラ部８と制御部９とを別個
に構成した例について説明したが、１つのコンピュータ
を用いてマイクロコントローラ部８と制御部９とを一体
的に構成してもよい。The microcontroller unit 8 calculates the amount of movement of the camera unit 2 based on an instruction signal from the console panel 7 and outputs the calculated amount to the control unit 9 as a drive signal. Similarly, the microcontroller unit 8 calculates the amount of movement of the camera unit 2 based on an instruction signal from another terminal device input via a later-described reception signal processing unit 19 and the like, and sends the movement amount to the control unit 9 as a drive signal. Output. Further, in order to automatically track and photograph the subject, the microcontroller unit 8 controls the sensors 3a, 3b, 3 of the infrared sensor 3 as described above.
Input the intensity of the infrared signal detected by c. The microcontroller unit 8 compares the input intensity with the infrared signal generator 5 (subject) and each sensor 3a,
By grasping the positional relationship between the camera 3b and 3c, the camera unit 2 can be driven by following the movement of the subject, and the subject can be automatically tracked and photographed. The control unit 9 receives a drive signal from the microcontroller unit 8 and outputs a control signal for driving the actuator 10. Also, the control unit 9
A switching signal is output to the switch unit 12, and the switch unit 12 is controlled so that a video signal requested by the user is output. The actuator 10 drives the camera unit 2 three-dimensionally based on a control signal from the control unit 9. Three-dimensionally means that the actuator 10 moves the camera unit 2 up and down, left and right, and the direction of the angle of view change by the zoom adjustment means (not shown) of the camera lens (that is, equivalently, the subject and the camera unit 2). In this case, the camera is driven in three directions (distance change), two-dimensional driving of the angle (photographing direction) of the imaging camera 4 and equivalently changing the distance between the subject and the camera unit 2. The microcontroller unit 8 and the control unit 9
Configures a drive control unit that drives the camera unit 2 using the actuator 10 based on a user's instruction and a detection result of the infrared sensor 3. In the above description, an example in which the microcontroller unit 8 and the control unit 9 are separately configured has been described. However, the microcontroller unit 8 and the control unit 9 may be integrally configured using one computer. Good.
【００３０】また、端末装置１には、他の端末装置に映
像信号、音声信号、及び指示信号等を出力する機構とし
て、撮像カメラ４、制御部９、及び外部入力回路部１１
に接続されたスイッチ部１２、スイッチ部１２と音声入
力装置１４に接続された送信信号処理部１３、前記送信
信号処理部１３に接続された送信データ変換部１５、及
び前記送信データ変換部１５及び通信回線１００に接続
された送信部１６が設けられている。外部入力回路部１
１は、図示しない外部の映像表示装置、あるいは映像再
生装置等に接続され、それらの装置からの映像信号を入
力する。スイッチ部１２は、制御部９からの切り換え信
号に基づいて、撮像カメラ４と外部入力回路部１１から
の映像信号を切り換える。スイッチ部１２は、撮像カメ
ラ４からの映像信号と外部入力回路部１１からの映像信
号との同期をとり、制御部９から指定されたいずれかの
映像信号を送信信号処理部１３に出力する。このように
同期をとることにより、本実施例のテレビ電話会議シス
テムでは、外部入力回路部１１に接続された外部の映像
表示装置をカメラ部２を用いて撮影した場合でも、カメ
ラ部２が上記映像表示装置のブランキング期間を撮影す
るのを防止することができる。その結果、本実施例のテ
レビ電話会議システムでは、［発明が解決しようとする
課題］の欄に記載した他の端末装置の映像表示装置に表
示される映像の画質が低下するという従来の問題点を解
消することができる。また、このスイッチ部１２では、
外部入力回路部１１からの音声信号と後述の音声入力装
置１４からの音声信号が重畳、またはいずれかを優先す
るように、外部入力回路部１１からの音声信号を送信信
号処理部１３に出力する。The terminal device 1 includes an imaging camera 4, a control unit 9, and an external input circuit unit 11 as a mechanism for outputting a video signal, an audio signal, an instruction signal, and the like to another terminal device.
, A transmission signal processing unit 13 connected to the switch unit 12 and the voice input device 14, a transmission data conversion unit 15 connected to the transmission signal processing unit 13, and the transmission data conversion unit 15. A transmission unit 16 connected to the communication line 100 is provided. External input circuit 1
1 is connected to an external video display device or a video playback device (not shown), and inputs a video signal from those devices. The switch unit 12 switches a video signal from the imaging camera 4 and the external input circuit unit 11 based on a switching signal from the control unit 9. The switch unit 12 synchronizes the video signal from the imaging camera 4 with the video signal from the external input circuit unit 11 and outputs one of the video signals specified by the control unit 9 to the transmission signal processing unit 13. By synchronizing in this way, in the video conference system of the present embodiment, even when the external video display device connected to the external input circuit unit 11 is photographed using the camera unit 2, It is possible to prevent the image display device from photographing during the blanking period. As a result, in the video conference system according to the present embodiment, the conventional problem that the image quality of the image displayed on the image display device of another terminal device described in the column of [Problems to be Solved by the Invention] is reduced. Can be eliminated. Also, in this switch section 12,
The audio signal from the external input circuit unit 11 is output to the transmission signal processing unit 13 so that the audio signal from the external input circuit unit 11 and the audio signal from the audio input device 14 to be described later are superimposed, or one of them is prioritized. .
【００３１】送信信号処理部１３は、スイッチ部１２か
らの映像信号と、マイク、または類似装置により構成さ
れた音声入力装置１４からの音声信号とを入力し、それ
らの映像信号及び音声信号のデータに所定のデータ処理
を行う。送信信号処理部１３でのデータ処理には、既知
のデータ圧縮技法に基づいて入力したデータを圧縮する
データの圧縮処理、及びデータの順番を並べ替えるデー
タの並べ替え処理が含まれている。送信データ変換部１
５は、通信回線１００によって他の端末装置に送信信号
処理部１３からの出力データを転送するために、送信信
号処理部１３からの出力データにプロトコル変換を施し
て、送信部１６に出力する。The transmission signal processing unit 13 receives a video signal from the switch unit 12 and an audio signal from an audio input device 14 composed of a microphone or a similar device, and outputs data of the video signal and the audio signal. Performs predetermined data processing. The data processing in the transmission signal processing unit 13 includes a data compression process for compressing input data based on a known data compression technique, and a data rearrangement process for rearranging the order of data. Transmission data converter 1
5 performs protocol conversion on the output data from the transmission signal processing unit 13 to transfer the output data from the transmission signal processing unit 13 to another terminal device via the communication line 100 and outputs the data to the transmission unit 16.
【００３２】さらに、端末装置１には、他の端末装置か
らの映像信号、音声信号、及び指示信号等を入力する機
構として、通信回線１００に接続された受信部１７、前
記受信部１７に接続された受信データ変換部１８、及び
前記受信データ変換部１８に接続された受信信号処理部
１９が設けられている。受信部１７は、他の端末装置の
送信部から送信された出力データを通信回線１００を介
して受信する。受信データ変換部１８は、当該端末装置
１内で受信したデータを処理するために、受信部１７か
らの受信データにプロトコル変換を施し、受信信号処理
部１９に出力する。受信信号処理部１９は、受信データ
変換部１８から入力した信号のデータに所定のデータ処
理、例えば入力したデータを伸張するデータの伸張処理
あるいはデータを正しい順番に並べ替えるデータの並べ
替えなどのデータ処理を行う。さらに、受信信号処理部
１９は、例えばＣＲＴ、ＰＣのディスプレイ、または類
似装置である映像表示装置２０、例えばスピーカである
音声出力装置２１、及びマイクロコントローラ部８に接
続されている。受信信号処理部１９は、上記のようなデ
ータ処理を施した後、入力した信号の種類を判別して、
映像信号、音声信号、及び指示信号を映像表示装置２
０、音声出力装置２１、及びマイクロコントローラ部８
にそれぞれ出力する。Further, the terminal device 1 has a receiving unit 17 connected to the communication line 100 as a mechanism for inputting video signals, audio signals, instruction signals, and the like from other terminal devices. The received data converter 18 is provided, and a received signal processor 19 connected to the received data converter 18 is provided. The receiving unit 17 receives the output data transmitted from the transmitting unit of another terminal device via the communication line 100. The reception data conversion unit 18 performs protocol conversion on the reception data from the reception unit 17 in order to process the data received in the terminal device 1 and outputs the data to the reception signal processing unit 19. The reception signal processing unit 19 performs predetermined data processing on the data of the signal input from the reception data conversion unit 18, such as data expansion processing for expanding the input data or data rearrangement for rearranging the data in a correct order. Perform processing. Further, the reception signal processing unit 19 is connected to a video display device 20 which is, for example, a CRT or a PC display or a similar device, an audio output device 21 which is a speaker, for example, and the microcontroller unit 8. After performing the data processing as described above, the reception signal processing unit 19 determines the type of the input signal,
The video signal, the audio signal, and the instruction signal are displayed on the video display device 2
0, audio output device 21, and microcontroller unit 8
Respectively.
【００３３】《動作》以下、本実施例のテレビ電話会議
システムの動作について説明する。まず、話し手側の一
の端末装置から聞き手側の他の端末装置に話し手側の映
像、及び音声を伝達する動作について説明する。話し手
側に設置された端末装置１は、カメラ部２の撮像カメラ
４によって取り込んだ映像信号をスイッチ部１２を経て
送信信号処理部１３に出力する。送信信号処理部１３
は、撮像カメラ４、及び音声入力装置１４からそれぞれ
入力した映像信号、及び音声信号のデータにデータの圧
縮処理等を施して、送信データ変換部１５に出力する。
送信データ変換部１５は、後段の通信回線１００でデー
タ通信を行うのに適した形式に変換するプロトコル変換
を入力したデータに施し、送信部１６に出力する。送信
部１６は、聞き手側に設けられた端末装置の受信部に映
像信号、及び音声信号のデータを転送する。このことに
より、聞き手側の端末装置において、その映像表示装
置、及び音声出力装置が、話し手側からの映像、及び音
声をそれぞれ再生し表示、発音する。<< Operation >> The operation of the video conference system of the present embodiment will be described below. First, an operation of transmitting a video and a voice of the speaker from one terminal device of the speaker to another terminal device of the listener will be described. The terminal device 1 installed on the speaker side outputs the video signal captured by the imaging camera 4 of the camera unit 2 to the transmission signal processing unit 13 via the switch unit 12. Transmission signal processing unit 13
Performs data compression processing and the like on the video signal and audio signal data input from the imaging camera 4 and the audio input device 14, respectively, and outputs the data to the transmission data conversion unit 15.
The transmission data conversion unit 15 performs a protocol conversion for converting the input data into a format suitable for performing data communication through the communication line 100 at the subsequent stage, and outputs the data to the transmission unit 16. The transmitting unit 16 transfers the video signal and the audio signal data to the receiving unit of the terminal device provided on the listener side. Thus, in the terminal device on the listener side, the video display device and the audio output device reproduce, display, and sound the video and audio from the speaker side, respectively.
【００３４】次に、聞き手が話し手側の撮像カメラ４を
駆動して、所望の映像を表示させる動作について説明す
る。この場合、聞き手は端末装置を動作して、その端末
装置の送信部から通信回線１００を介して指示信号のデ
ータを話し手側の端末装置の受信部１７に出力する。受
信部１７は、入力した指示信号のデータを受信データ変
換部１８に出力する。受信データ変換部１８は、当該端
末装置１内でのデータ処理を行うのに適した形式に変換
するプロトコル変換を入力したデータに施し、受信信号
処理部１９に出力する。受信信号処理部１９は、入力し
たデータにデータの伸張処理等を施した後、指示信号と
してマイクロコントローラ部８に出力する。マイクロコ
ントローラ部８が入力した指示信号は、制御部９、及び
アクチュエータ１０を経てカメラ部２に伝えられ、その
撮像カメラ４は聞き手が所望する撮影方向、及びズーム
に一致するように駆動される。Next, an operation in which the listener drives the imaging camera 4 on the speaker side to display a desired image will be described. In this case, the listener operates the terminal device, and outputs the data of the instruction signal from the transmission unit of the terminal device to the reception unit 17 of the terminal device on the speaker side via the communication line 100. The receiving unit 17 outputs the data of the input instruction signal to the received data converting unit 18. The reception data conversion unit 18 performs a protocol conversion for converting the input data into a format suitable for performing data processing in the terminal device 1, and outputs the data to the reception signal processing unit 19. The received signal processing unit 19 subjects the input data to data expansion processing and the like, and then outputs it to the microcontroller unit 8 as an instruction signal. The instruction signal input by the microcontroller unit 8 is transmitted to the camera unit 2 via the control unit 9 and the actuator 10, and the imaging camera 4 is driven so as to match the photographing direction and zoom desired by the listener.
【００３５】カメラ部２がマイクロコントローラ部８の
動作により、被写体を自動的に追尾して撮影する動作原
理について図３を参照して具体的に説明する。図３は、
図２に示したカメラ部の駆動方法の一例を示す説明図で
ある。図３において、右上センサ３ａ、左上センサ３
ｂ、左下センサ３ｃは、撮像カメラ４のレンズ４ａの中
心に対して互いに等距離となるように、撮像カメラ４の
同一平面（以下、”センサの設置面”という）上に固定
されている。これらのセンサ３ａ，３ｂ，３ｃは、上述
のように、赤外線信号発生装置５からの赤外線信号を検
知して、検知した赤外線信号の強度をマイクロコントロ
ーラ部８（図２）に出力する。マイクロコントローラ部
８は、センサ３ａ，３ｂ，３ｃから入力した強度を比較
することにより、図の矢印”Ｈ”にて示す左右方向、及
び図の矢印”Ｖ”にて示す上下方向の各方向において、
撮像カメラ４のレンズ４ａと赤外線信号発生装置５を取
り付けた被写体との位置関係を把握、判断する。尚、上
記左右方向とは右上センサ３ａ及び左上センサ３ｂの各
中心を結ぶ直線と平行な方向であり、上下方向とは左上
センサ３ｂ及び左下センサ３ｃの各中心を結ぶ直線と平
行な方向である。また、以下の説明では、赤外線センサ
３と赤外線信号発生装置５との位置関係について、例え
ば赤外線センサ３から赤外線信号発生装置５を見た方向
で赤外線センサ３と赤外線信号発生装置５とを結ぶ直線
が上記設置面に対してなす角度を用いて説明する。具体
的に言えば、例えば図３に示すように、左右方向におい
て、赤外線信号発生装置５が右上センサ３ａの右方向で
６０゜、かつ左上センサ３ｂ及び左下センサ３ｃの右方
向で５０゜に位置し、上下方向において、赤外線信号発
生装置５が右上センサ３ａ及び左上センサ３ｂの下方向
で８５゜、かつ左下センサ３ｃの上方向で７５゜に位置
している場合、マイクロコントローラ部８は上述のレン
ズ４ａと被写体との位置関係を下記のように判断する。
マイクロコントローラ部８は、左右方向では、右上セン
サ３ａによって検知された赤外線信号の強度が左上セン
サ３ｂ及び左下センサ３ｃによって検知されたものより
大きいので、左上センサ３ｂ及び左下センサ３ｃよりも
右上センサ３ａの方が赤外線信号発生装置５に近いと判
断する。同様に、マイクロコントローラ部８は、上下方
向では、右上センサ３ａ及び左上センサ３ｂによって検
知された赤外線信号の強度が左下センサ３ｃによって検
知されたものより大きいので、左下センサ３ｃよりも右
上センサ３ａ及び左上センサ３ｂの方が赤外線信号発生
装置５に近いと判断する。そして、マイクロコントロー
ラ部８は、検知した強度の大きいセンサの方向にカメラ
部２を駆動する駆動信号を制御部９（図２）に出力す
る。その結果、カメラ部２は、アクチュエータ１０によ
り、左右方向では右上センサ３ａの方向に移動され、上
下方向では右上センサ３ａ及び左上センサ３ｂの方向に
移動される。カメラ部２は、各センサ３ａ，３ｂ，３ｃ
にて検知した強度が同じとなるまで移動され、被写体を
撮影する。Referring to FIG. 3, the operation principle of the camera unit 2 for automatically tracking and photographing a subject by the operation of the microcontroller unit 8 will be specifically described. FIG.
FIG. 3 is an explanatory diagram illustrating an example of a driving method of the camera unit illustrated in FIG. 2. In FIG. 3, the upper right sensor 3a and the upper left sensor 3
b, the lower left sensor 3c is fixed on the same plane of the imaging camera 4 (hereinafter referred to as “sensor installation surface”) so as to be equidistant from the center of the lens 4a of the imaging camera 4. As described above, these sensors 3a, 3b, and 3c detect the infrared signal from the infrared signal generator 5, and output the intensity of the detected infrared signal to the microcontroller unit 8 (FIG. 2). The microcontroller unit 8 compares the intensities input from the sensors 3a, 3b, and 3c to determine the horizontal direction indicated by an arrow "H" in the figure and the vertical direction indicated by an arrow "V" in the figure. ,
The positional relationship between the lens 4a of the imaging camera 4 and the subject to which the infrared signal generator 5 is attached is grasped and determined. The left-right direction is a direction parallel to a straight line connecting the centers of the upper right sensor 3a and the upper left sensor 3b, and the up-down direction is a direction parallel to a straight line connecting the centers of the upper left sensor 3b and the lower left sensor 3c. . In the following description, the positional relationship between the infrared sensor 3 and the infrared signal generator 5 is described, for example, by a straight line connecting the infrared sensor 3 and the infrared signal generator 5 in the direction in which the infrared signal 3 is viewed from the infrared sensor 3. Will be described using an angle formed with respect to the installation surface. More specifically, as shown in FIG. 3, for example, in the horizontal direction, the infrared signal generator 5 is located at 60 ° in the right direction of the upper right sensor 3a and at 50 ° in the right direction of the upper left sensor 3b and the lower left sensor 3c. In the vertical direction, when the infrared signal generator 5 is located at an angle of 85 ° below the upper right sensor 3a and the upper left sensor 3b and at an angle of 75 ° above the lower left sensor 3c, the microcontroller unit 8 performs the above-described operation. The positional relationship between the lens 4a and the subject is determined as follows.
In the left-right direction, since the intensity of the infrared signal detected by the upper right sensor 3a in the left-right direction is greater than that detected by the upper left sensor 3b and the lower left sensor 3c, the upper right sensor 3a is higher than the upper left sensor 3b and the lower left sensor 3c. Is closer to the infrared signal generator 5. Similarly, in the vertical direction, the intensity of the infrared signal detected by the upper right sensor 3a and the upper left sensor 3b in the vertical direction is larger than that detected by the lower left sensor 3c. It is determined that the upper left sensor 3b is closer to the infrared signal generator 5. Then, the microcontroller unit 8 outputs a drive signal for driving the camera unit 2 in the direction of the detected sensor having a high intensity to the control unit 9 (FIG. 2). As a result, the camera unit 2 is moved by the actuator 10 in the left-right direction in the direction of the upper right sensor 3a, and in the up-down direction, in the direction of the upper right sensor 3a and the upper left sensor 3b. The camera unit 2 includes sensors 3a, 3b, 3c
Is moved until the detected intensity becomes the same, and the subject is photographed.
【００３６】このように、本実施例のテレビ電話会議シ
ステムでは、マイクロコントローラ部８が上下方向、及
び左右方向の２つの各方向において、２つの赤外線セン
サ３にて検知した赤外線信号の強度を比較することによ
り、撮像カメラ４のレンズ４ａと赤外線信号発生装置５
を取り付けた被写体との位置関係を把握する。そして、
マイクロコントローラ部８は、検知した強度の大きいセ
ンサの方向にカメラ部２を駆動している。このことによ
り、本実施例のテレビ電話会議システムでは、被写体が
移動する場合でも、ユーザが操作することなく、カメラ
部が自動的に被写体を追尾して撮影することができる。As described above, in the video telephone conference system of the present embodiment, the microcontroller unit 8 compares the intensities of the infrared signals detected by the two infrared sensors 3 in the two directions of the vertical direction and the horizontal direction. By doing so, the lens 4a of the imaging camera 4 and the infrared signal generator 5
Understand the positional relationship with the subject to which is attached. And
The microcontroller unit 8 drives the camera unit 2 in the direction of the detected sensor having a high intensity. As a result, in the video conference system of the present embodiment, even when the subject moves, the camera unit can automatically track and shoot the subject without operation by the user.
【００３７】尚、カメラ部２が赤外線信号発生装置５を
取り付けた被写体の動きに追従して自動的に追尾し撮影
する構成において、赤外線信号発生装置５と当該赤外線
信号発生装置５からの赤外線信号を検知する赤外線セン
サ３を用いた構成について説明したが、赤外線信号には
限定されない。つまり、被写体に取り付けられる信号発
生装置とこの信号発生装置からの信号を検知することが
できるセンサであればよい。また、レンズ４ａの中心に
対して互いに等距離に配置した右上センサ３ａ、左上セ
ンサ３ｂ、左下センサ３ｃを用いた構成について説明し
たが、左右、及び上下方向の各方向でレンズ中心４ａを
挟むよう配置した複数のセンサであればよい。レンズ４
ａの中心に対して互いに等距離に配置しない複数のセン
サを用いる場合、例えばマイクロコントローラ部８にて
演算を行うことにより、上述のレンズ４ａと被写体との
位置関係を把握することができる。また、左右方向、上
下方向へ移動するカメラ部２を用いた構成について説明
したが、カメラ部２を中心軸として左右回転、上下回転
するカメラ部２であればよい。In the configuration in which the camera section 2 automatically tracks and shoots the subject with the infrared signal generator 5 attached thereto, the infrared signal generator 5 and the infrared signal from the infrared signal generator 5 are provided. Although the configuration using the infrared sensor 3 for detecting the signal has been described, the invention is not limited to the infrared signal. That is, a signal generator attached to a subject and a sensor capable of detecting a signal from the signal generator may be used. Further, the configuration using the upper right sensor 3a, the upper left sensor 3b, and the lower left sensor 3c arranged at the same distance from the center of the lens 4a has been described, but the lens center 4a is sandwiched in each of the left, right, and up and down directions. What is necessary is just a plurality of arranged sensors. Lens 4
When a plurality of sensors that are not arranged at the same distance from each other with respect to the center of “a” are used, the positional relationship between the above-mentioned lens 4a and the subject can be grasped, for example, by performing calculations in the microcontroller unit 8. Further, the configuration using the camera unit 2 that moves in the left-right direction and the up-down direction has been described.
【００３８】《第２の実施例》図４は、本発明の第２の
実施例であるテレビ電話会議システムでの端末装置の構
成を示すブロック図である。この実施例では、テレビ電
話会議システムの構成において、所定の信号を発生する
信号発生装置と、カメラ部からの映像信号を処理し、上
記信号発生装置の所定の信号を検出する信号処理部を設
けた。それ以外の各部は、第１の実施例のものと同様で
あるのでそれらの重複した説明は省略する。図４に示す
ように、本実施例のテレビ電話会議システムでの端末装
置３１には、互いに異なる波長の赤外線信号を発生する
赤外線信号発生装置５ａ，５ｂが設けられ、さらに撮像
カメラ４からの映像信号を入力して赤外線信号発生装置
５ｂの赤外線信号を検出する信号処理部２２が設けられ
ている。一方の赤外線信号発生装置５ａは、第１の実施
例に示した赤外線信号発生装置５と同一のものであり、
発生した赤外線信号はカメラ部２の赤外線センサ３によ
り検知される。また、他方の赤外線信号発生装置５ｂ
は、一方の赤外線信号発生装置５ａと異なる時間間隔で
赤外線信号を発生する。具体的に言えば、例えば赤外線
信号発生装置５ａは１ミリ秒毎に発生し、赤外線信号発
生装置５ｂは５ミリ秒毎に発生する。また、これらの赤
外線信号発生装置５ａ，５ｂは、第１の実施例の赤外線
信号発生装置５と同様に、被写体に取り付けられてい
る。<< Second Embodiment >> FIG. 4 is a block diagram showing a configuration of a terminal device in a video conference system according to a second embodiment of the present invention. In this embodiment, in the configuration of the video conference system, a signal generating device for generating a predetermined signal and a signal processing unit for processing a video signal from a camera unit and detecting the predetermined signal of the signal generating device are provided. Was. The other parts are the same as those of the first embodiment, and the duplicated description thereof will be omitted. As shown in FIG. 4, the terminal device 31 in the video conference system of the present embodiment is provided with infrared signal generators 5a and 5b for generating infrared signals having different wavelengths. A signal processing unit 22 for inputting a signal and detecting an infrared signal of the infrared signal generator 5b is provided. One infrared signal generator 5a is the same as the infrared signal generator 5 shown in the first embodiment,
The generated infrared signal is detected by the infrared sensor 3 of the camera unit 2. The other infrared signal generator 5b
Generates an infrared signal at a time interval different from that of one infrared signal generator 5a. Specifically, for example, the infrared signal generator 5a generates every 1 millisecond, and the infrared signal generator 5b generates every 5 milliseconds. These infrared signal generators 5a and 5b are attached to the subject similarly to the infrared signal generator 5 of the first embodiment.
【００３９】信号処理部２２は、赤外線信号発生装置５
ｂの赤外線信号が撮像カメラ４からの映像信号に含まれ
ているかどうかについての検出処理を行う。信号処理部
２２は、検出処理の結果に基づいて、アクチュエータ１
０を操作するための指令信号をマイクロコントローラ部
８に出力する。具体的には、上記赤外線信号が検出され
なかった場合、信号処理部２２は被写体に対する撮像カ
メラ４のズームが適切なものでないと判断して、被写体
の光学像が大きくなるよう撮像カメラ４のレンズのズー
ムを変更する指令信号をマイクロコントローラ部８に出
力する。このことにより、アクチュエータ１０がレンズ
のズームを調整する手段を駆動し、撮像カメラ４のズー
ムレンズの画角が変更される。そして、信号処理部２２
が赤外線信号を検出するまで、ズームを変更する指令信
号をマイクロコントローラ部８に出力する。赤外線信号
を検出したとき、信号処理部２２は撮像カメラ４のズー
ムが適当なものであると判断して、マイクロコントロー
ラ部８にアクチュエータ１０の動作を停止する指令信号
を出力してズームを固定する。その結果、カメラ部２
は、被写体を最適な画角により撮影することができる。
また、ズームレンズの画角を最小のものに変更した場合
でも、信号処理部２２が赤外線信号を検出できないとき
はアクチュエータ１０の動作を停止してその最小のズー
ムにて固定する。尚、信号処理部２２での検出処理は、
第１の実施例のものと同様に、赤外線信号発生装置５ａ
の赤外線信号が赤外線センサ３により検出され、カメラ
部２が被写体を中心とした映像を形成するよう移動され
た後に行われる。以上のように、本実施例のテレビ電話
会議システムでは、赤外線信号発生装置５ｂと信号処理
部２２とを用いた構成により、撮像カメラ４のズームを
最適、かつ自動的に変更することができる。The signal processing section 22 includes the infrared signal generator 5
A detection process is performed to determine whether or not the infrared signal b is included in the video signal from the imaging camera 4. The signal processing unit 22 determines whether the actuator 1
A command signal for operating 0 is output to the microcontroller unit 8. Specifically, when the infrared signal is not detected, the signal processing unit 22 determines that the zoom of the imaging camera 4 with respect to the subject is not appropriate, and sets the lens of the imaging camera 4 so that the optical image of the subject becomes large. A command signal for changing the zoom is output to the microcontroller unit 8. As a result, the actuator 10 drives the means for adjusting the zoom of the lens, and the angle of view of the zoom lens of the imaging camera 4 is changed. Then, the signal processing unit 22
Outputs a command signal for changing the zoom to the microcontroller unit 8 until the microcomputer detects an infrared signal. When detecting the infrared signal, the signal processing unit 22 determines that the zoom of the imaging camera 4 is appropriate, and outputs a command signal to stop the operation of the actuator 10 to the microcontroller unit 8 to fix the zoom. . As a result, the camera unit 2
Can photograph a subject at an optimum angle of view.
Even when the angle of view of the zoom lens is changed to the minimum, if the signal processing unit 22 cannot detect the infrared signal, the operation of the actuator 10 is stopped and the zoom is fixed at the minimum zoom. Note that the detection processing in the signal processing unit 22 is as follows.
As in the first embodiment, the infrared signal generator 5a
The infrared signal is detected by the infrared sensor 3 and is performed after the camera unit 2 is moved to form an image centered on the subject. As described above, in the video conference system of the present embodiment, the zoom of the imaging camera 4 can be optimally and automatically changed by the configuration using the infrared signal generator 5b and the signal processing unit 22.
【００４０】《第３の実施例》図５は、本発明の第３の
実施例であるテレビ電話会議システムでの端末装置の構
成を示すブロック図である。この実施例では、テレビ電
話会議システムの構成において、被写体から発生する
熱、及び被写体からの特定の色の波長の少なくとも一方
を検知するセンサを用い、赤外線信号発生装置を用いる
ことなく、被写体を自動的に追尾する構成とした。それ
以外の各部は、第２の実施例のものと同様であるのでそ
れらの重複した説明は省略する。図５において、赤外線
センサ３の右上センサ３ａ、左上センサ３ｂ、及び左下
センサ３ｃは、例えば松下電子部品株式会社製、薄膜焦
電型センサにより構成された高精度なセンサであり、被
写体２３の表面温度を０.１度単位で検知できるセンサ
である。このようなセンサを用いたことにより、本実施
例のテレビ電話会議システムでの端末装置３２では、例
えば被写体２３である話し手の体温を検知することがで
き、第１の実施例のものと同様に、カメラ部２が話し手
を自動的に追尾して撮影することができる。尚、特定の
色の波長を検出するセンサを用いて、例えばホワイトボ
ード等の被写体を検知して撮影する構成としてもよい。Third Embodiment FIG. 5 is a block diagram showing a configuration of a terminal device in a video conference system according to a third embodiment of the present invention. In this embodiment, in the configuration of the video conference system, a sensor that detects at least one of heat generated from a subject and a wavelength of a specific color from the subject is used, and the subject is automatically detected without using an infrared signal generator. It was configured to track manually. The other parts are the same as those of the second embodiment, and the duplicated description thereof will be omitted. In FIG. 5, the upper right sensor 3a, the upper left sensor 3b, and the lower left sensor 3c of the infrared sensor 3 are high-precision sensors composed of, for example, a thin-film pyroelectric sensor manufactured by Matsushita Electronic Components Co., Ltd. It is a sensor that can detect temperature in units of 0.1 degrees. By using such a sensor, the terminal device 32 of the video conference system according to the present embodiment can detect, for example, the body temperature of the speaker, which is the subject 23, as in the first embodiment. The camera unit 2 can automatically track and photograph the talker. Note that a configuration may be employed in which an object such as a whiteboard is detected and photographed using a sensor that detects the wavelength of a specific color.
【００４１】次に、本実施例のテレビ電話会議システム
での端末装置３２の動作について、具体的に説明する。
この端末装置３２では、カメラ部２の撮影条件が手元操
作部６、コンソールパネル７、あるいは他の端末装置に
よる聞き手からの指示信号によって、マイクロコントロ
ーラ部８に予め設定される。具体的には、例えば話し手
（被写体２３）の最も温度の高い箇所を中心とした映像
を形成する撮影条件、あるいは所定温度（例えば話し手
の体温、３６.５度）以上の温度を有する被写体２３を
追尾して映像を形成する撮影条件がマイクロコントロー
ラ部８に設定される。マイクロコントローラ部８は、設
定された撮影条件に基づいて、駆動信号を制御部９に出
力し、アクチュエータ１０を駆動する。このことによ
り、カメラ部２は、上記撮影条件を満足した映像を形成
することができる。尚、撮影条件には、アクチュエータ
１０の動作を規定する駆動モードが含まれている。より
具体的に言えば、この駆動モードには、アクチュエータ
１０を左から右、左下、及び右下方向に順次駆動する駆
動モード、あるいは上下方向に駆動し、その上下方向に
駆動したときに赤外線センサ３にて検知した最も温度の
高い箇所まで戻して、右方向に最大限に駆動し次に左方
向に最大限に駆動して最も温度の高い箇所を見いだすと
いう駆動モードがある。さらに、最も温度の高い話し手
の部分を見いだした後、その話し手を自動的に追尾する
駆動モード、あるいは上記最も温度の高い部分が見いだ
されている限りカメラ部２を駆動しない駆動モードがあ
る。Next, the operation of the terminal device 32 in the video conference system of the present embodiment will be specifically described.
In the terminal device 32, the shooting conditions of the camera unit 2 are preset in the microcontroller unit 8 by an instruction signal from the hand operation unit 6, the console panel 7, or a listener from another terminal device. More specifically, for example, shooting conditions for forming an image centered on the hottest point of the speaker (subject 23), or the subject 23 having a temperature equal to or higher than a predetermined temperature (for example, the body temperature of the speaker, 36.5 degrees) are selected. Shooting conditions for tracking and forming an image are set in the microcontroller unit 8. The microcontroller unit 8 outputs a drive signal to the control unit 9 based on the set imaging conditions, and drives the actuator 10. Accordingly, the camera unit 2 can form an image satisfying the above-described shooting conditions. Note that the photographing conditions include a drive mode that defines the operation of the actuator 10. More specifically, the driving mode includes a driving mode in which the actuator 10 is sequentially driven from left to right, a lower left, and a lower right, or an infrared sensor when the actuator 10 is driven in a vertical direction and the actuator is driven in the vertical direction. There is a drive mode in which the highest temperature detected in step 3 is returned, the rightmost drive is performed, and then the leftmost drive is performed to find the highest temperature. Further, there is a drive mode in which the speaker with the highest temperature is found and then the speaker is automatically tracked, or a drive mode in which the camera section 2 is not driven as long as the hottest part is found.
【００４２】《第４の実施例》図６は、本発明の第４の
実施例であるテレビ電話会議システムでの端末装置の構
成を示すブロック図である。この実施例では、テレビ電
話会議システムの構成において、カメラ部の撮像カメラ
を駆動するアクチュエータに高精度な動作を行うことが
できる高精度アクチュエータを用いた。それ以外の各部
は、第３の実施例のものと同様であるのでそれらの重複
した説明は省略する。図６に示すように、本実施例のテ
レビ電話会議システムの端末装置３３では、例えば０.
１゜±０.０１゜の精度にてカメラ部２の撮像カメラ４
を駆動することができる高精度アクチュエータ２４が用
いられている。この高精度アクチュエータ２４は、具体
的例としては、松下電器産業株式会社製、超音波モータ
アクチュエータがある。このような高精度アクチュエー
タ２４を用いたことにより、本実施例のテレビ電話会議
システムでの端末装置３３では、カメラ部２を大型化す
ることなく、静止画像の解像度を容易に向上することが
でき、さらに横長の静止画像、いわゆるパノラマ画や縦
長の静止画像を容易に形成することができる。Fourth Embodiment FIG. 6 is a block diagram showing a configuration of a terminal device in a video conference system according to a fourth embodiment of the present invention. In this embodiment, in the configuration of the video conference system, a high-precision actuator capable of performing a high-precision operation is used as an actuator for driving the imaging camera of the camera unit. The other parts are the same as those of the third embodiment, and the duplicated description thereof will be omitted. As shown in FIG. 6, in the terminal device 33 of the video conference system of the present embodiment, for example,
The imaging camera 4 of the camera unit 2 with an accuracy of 1 ゜ ± 0.01 ゜
Is used. As a specific example of the high-precision actuator 24, there is an ultrasonic motor actuator manufactured by Matsushita Electric Industrial Co., Ltd. By using such a high-precision actuator 24, the resolution of a still image can be easily improved without increasing the size of the camera unit 2 in the terminal device 33 in the video conference system of the present embodiment. Further, a horizontally long still image, that is, a so-called panoramic image or a vertically long still image can be easily formed.
【００４３】ここで、本実施例のテレビ電話会議システ
ムでの端末装置３３における画像形成方法について、具
体的に説明するまず、図７の（ａ）、図７の（ｂ）、及
び図７の（ｃ）を参照して、本実施例の端末装置３３で
の高い解像度の静止画像を形成する画像形成方法につい
て、具体的に説明する。図７の（ａ）は図６に示した端
末装置での４倍の解像度の静止画像を形成するときの撮
影方法を示す説明図であり、図７の（ｂ）は図６に示し
た端末装置での４倍の解像度の静止画像を形成する画像
形成方法を示す説明図である。図７の（ｃ）は、図６に
示した端末装置での標準の解像度の静止画像を形成する
画像形成方法を示す説明図である。４倍の解像度の静止
画像を形成する場合、マイクロコントローラ部８（図
６）は、被写体である曲線４０を含む静止画像４１を撮
像カメラ４（図６）を用いて、図７の（ａ）に示すよう
に、４つの画面４１Ａ，４１Ｂ，４１Ｃ，４１Ｄ分に静
止画像４１を分解する。続いて、マイクロコントローラ
部８は、左右上下の４つの方向に微少量、高精度アクチ
ュエータ２４（図６）を駆動して、各々４倍のズームに
よって画面４１Ａ，４１Ｂ，４１Ｃ，４１Ｄに対応する
被写体の部分を撮像カメラ４（図６）により撮影する。
次に、撮像カメラ４、スイッチ部１２（図６）、または
送信信号処理部１３（図６）が、撮影した画面４１
Ａ’，４１Ｂ’，４１Ｃ’，４１Ｄ’分の映像信号を合
成して、図７の（ｂ）に示す静止画像４１’を形成す
る。この静止画像４１’は、図７の（ｃ）に示した標準
の解像度で形成した静止画像４３に比べて、解像度を４
倍に向上したものであり、図７の（ｂ）、及び図７の
（ｃ）にそれぞれ示すように、曲線４０’は曲線４２に
比べて多くの画素（ドット）により表されている。尚、
撮影した画面４１Ａ’，４１Ｂ’，４１Ｃ’，４１Ｄ’
分の映像信号を合成する処理の具体例としては、４つの
画面４１Ａ，４１Ｂ，４１Ｃ，４１Ｄのつなぎ目部分に
おいて、大きさと色合いとに変化が生じるのを防止する
つなぎ目の処理がある。さらに、静止画像４１’の全体
部分での色調調整、及びコントラスト調整の処理があ
る。以上のように、本実施例のテレビ電話会議システム
では、マイクロコントローラ部８が所望の解像度に基づ
いて、静止画像を複数個の画面分に分割し、高精度アク
チュエータ２４によって駆動したカメラ部２を用いて分
割した各画面に対応する被写体の部分を撮影する。その
後、撮影した被写体の各部分の映像信号を合成すること
により、所望の解像度の静止画像を形成している。この
ため、本実施例のテレビ電話会議システムでは、カメラ
部２の構成を大型化することなく、撮影、形成する静止
画像の解像度を容易に向上することができる。Here, the image forming method in the terminal device 33 in the video conference system according to the present embodiment will be specifically described. First, FIG. 7A, FIG. 7B and FIG. With reference to (c), an image forming method for forming a high-resolution still image in the terminal device 33 of the present embodiment will be specifically described. FIG. 7A is an explanatory view showing a shooting method when forming a still image of 4 times resolution in the terminal device shown in FIG. 6, and FIG. 7B is a diagram showing the terminal device shown in FIG. FIG. 4 is an explanatory diagram illustrating an image forming method for forming a still image with four times resolution in the apparatus. FIG. 7C is an explanatory diagram showing an image forming method for forming a still image with a standard resolution in the terminal device shown in FIG. When forming a still image of 4 times resolution, the microcontroller unit 8 (FIG. 6) uses the imaging camera 4 (FIG. 6) to convert a still image 41 including the curve 40 as a subject using the imaging camera 4 (FIG. 6). , The still image 41 is decomposed into four screens 41A, 41B, 41C and 41D. Subsequently, the microcontroller unit 8 drives the high-precision actuator 24 (FIG. 6) in a small amount in the four directions of left, right, up, and down, and subjects the objects corresponding to the screens 41A, 41B, 41C, 41D by zooming four times each. Is photographed by the imaging camera 4 (FIG. 6).
Next, the imaging camera 4, the switch unit 12 (FIG. 6), or the transmission signal processing unit 13 (FIG. 6)
The video signals for A ', 41B', 41C ', and 41D' are combined to form a still image 41 'shown in FIG. 7B. This still image 41 'has a resolution of 4 compared to the still image 43 formed at the standard resolution shown in FIG.
The curve 40 'is represented by more pixels (dots) than the curve 42, as shown in FIGS. 7B and 7C, respectively. still,
Photographed screens 41A ', 41B', 41C ', 41D'
As a specific example of the process of synthesizing the video signals of the minutes, there is a seam process for preventing a change in size and color at a seam portion of the four screens 41A, 41B, 41C, 41D. Further, there is a process of color tone adjustment and contrast adjustment for the entire still image 41 '. As described above, in the video conference system of the present embodiment, the microcontroller unit 8 divides a still image into a plurality of screens based on a desired resolution, and controls the camera unit 2 driven by the high-precision actuator 24. The part of the subject corresponding to each of the divided screens is photographed. Thereafter, a still image having a desired resolution is formed by synthesizing the video signals of the respective portions of the photographed subject. Therefore, in the video conference system of the present embodiment, the resolution of a still image to be photographed and formed can be easily improved without increasing the size of the camera unit 2.
【００４４】次に、図８の（ａ）、及び図８の（ｂ）を
参照して、本実施例の端末装置３３でのパノラマ画を形
成する画像形成方法について、具体的に説明する。図８
の（ａ）は図６に示した端末装置での標準のサイズの静
止画像を形成する画像形成方法を示す説明図であり、図
８の（ｂ）は図６に示した端末装置での横長のサイズの
静止画像を形成する画像形成方法を示す説明図である。
図８の（ａ）、及び図８の（ｂ）において、標準のサイ
ズの静止画像４５を横（左右）方向に４倍に拡げた静止
画像４７の形成が要求された場合、マイクロコントロー
ラ部８（図６）は、高精度アクチュエータ２４（図６）
を横方向で水平に駆動する。このとき、撮像カメラ４
（図６）は、マイクロコントローラ部８の指示に基づい
て、被写体である曲線４４を適切なズームによって互い
にずれた位置で４回撮影する。次に、撮像カメラ４、ス
イッチ部１２（図６）、または送信信号処理部１３（図
６）が、撮影した４回分の映像信号を合成して、横長の
静止画像４７を形成する。この静止画像４７では、標準
サイズでの曲線４４が図８の（ｂ）に示すように、横方
向で４倍に拡げられた曲線４６として撮影されている。
尚、高精度アクチュエータ２４を縦方向で水平に駆動
し、この駆動中に被写体を複数回撮影することにより、
縦長の静止画像も形成することができる。以上のよう
に、本実施例のテレビ電話会議システムでは、マイクロ
コントローラ部８が高精度アクチュエータ２４を一の方
向で水平に駆動するとともに、その駆動中にカメラ部２
により被写体を複数回撮影する。その後、複数回撮影し
た被写体の各部分の映像信号を合成することにより、一
の方向で所望のサイズに拡げた静止画像を形成してい
る。このため、本実施例のテレビ電話会議システムで
は、カメラ部２の構成を大型化することなく、横長、及
び縦長の静止画像を容易に形成することができる。Next, with reference to FIGS. 8A and 8B, an image forming method for forming a panoramic image on the terminal device 33 of this embodiment will be specifically described. FIG.
8A is an explanatory view showing an image forming method for forming a standard size still image in the terminal device shown in FIG. 6, and FIG. 8B is a horizontally long image in the terminal device shown in FIG. FIG. 4 is an explanatory diagram illustrating an image forming method for forming a still image having a size of FIG.
In FIGS. 8A and 8B, when it is requested to form a still image 47 in which a standard size still image 45 is expanded four times in the horizontal (left / right) direction, the microcontroller unit 8 is required. (FIG. 6) is a high-precision actuator 24 (FIG. 6).
Is driven horizontally in the horizontal direction. At this time, the imaging camera 4
In FIG. 6, based on an instruction from the microcontroller unit 8, the subject curve 44 is photographed four times at positions shifted from each other by appropriate zooming. Next, the imaging camera 4, the switch unit 12 (FIG. 6), or the transmission signal processing unit 13 (FIG. 6) combines the four captured video signals to form a horizontally long still image 47. In the still image 47, the curve 44 in the standard size is photographed as a curve 46 expanded four times in the horizontal direction, as shown in FIG.
Note that by driving the high-precision actuator 24 horizontally in the vertical direction and photographing the subject a plurality of times during this driving,
A vertically long still image can also be formed. As described above, in the video conference call system of the present embodiment, the microcontroller unit 8 drives the high-precision actuator 24 horizontally in one direction, and the camera unit 2
To photograph the subject a plurality of times. Thereafter, a still image enlarged to a desired size in one direction is formed by synthesizing the video signals of the respective portions of the subject photographed a plurality of times. For this reason, in the video conference system of the present embodiment, horizontally and vertically long still images can be easily formed without increasing the size of the camera unit 2.
【００４５】《第６の実施例》図９は、本発明の第６の
実施例であるテレビ電話会議システムでの端末装置の構
成を示すブロック図である。この実施例では、テレビ電
話会議システムの構成において、複数組のカメラ部、信
号処理部、及び高精度アクチュエータを設けた。それ以
外の各部は、第５の実施例と同様であるのでそれらの重
複した説明は省略する。図９に示すように、本実施例の
端末装置３４には、３組のカメラ部２，２’，２”、信
号処理部２２，２２’，２２”、及び高精度アクチュエ
ータ２４，２４’２４”が設けられている。カメラ部
２，２’，２”は、被写体２３、２３’２３”をそれぞ
れ撮影する。このように構成することにより、本実施例
のテレビ電話会議システムでは、手元操作部６、コンソ
ールパネル７、あるいは他の端末装置による聞き手から
の指示信号によってスイッチ部１２を操作して、カメラ
部２，２’，２”により撮影された映像を適宜切り換え
ることができる。また、本実施例のテレビ電話会議シス
テムでは、例えばカメラ部２，２’により撮影した２つ
の映像を合成して１つの画像を形成することも容易に行
うことができる。さらに、Ｎ個（Ｎは自然数）のカメラ
部にて撮影、形成したＮ個の画像を用いて、上記第５の
実施例のものと同様な映像信号を合成する処理を行うこ
とにより、解像度の向上、及び横長や縦長の静止画像を
容易に形成することができる。<< Sixth Embodiment >> FIG. 9 is a block diagram showing a configuration of a terminal device in a video conference system according to a sixth embodiment of the present invention. In this embodiment, a plurality of camera units, signal processing units, and high-precision actuators were provided in the configuration of the video conference system. The other parts are the same as those of the fifth embodiment, and the duplicated description thereof will be omitted. As shown in FIG. 9, the terminal device 34 of the present embodiment includes three sets of camera units 2, 2 ′, 2 ″, signal processing units 22, 22 ′, 22 ″, and high-precision actuators 24, 24 ′ 24. Are provided. The camera units 2, 2 ', and 2 "respectively capture images of the subjects 23 and 23' and 23". With this configuration, in the video conference system of the present embodiment, the operation at hand is performed. By operating the switch unit 12 in response to an instruction signal from a listener via the unit 6, the console panel 7, or another terminal device, the images captured by the camera units 2, 2 ', 2 "can be appropriately switched. Further, in the video conference system of the present embodiment, it is possible to easily form one image by synthesizing two videos captured by the camera units 2 and 2 ′, for example. Furthermore, by using N (N is a natural number) camera units to perform a process of synthesizing a video signal similar to that of the fifth embodiment using the N images captured and formed, the resolution is improved. It is possible to easily form a horizontal or vertical still image.
【００４６】[0046]
【発明の効果】本発明のテレビ電話会議システムは、マ
イクロコントローラ部が上下方向、及び左右方向の２つ
の各方向において、２つのセンサにて検知した信号の強
度を比較することにより、撮像カメラのレンズとその信
号を発生する信号発生装置を取り付けた被写体との位置
関係を把握する。マイクロコントローラ部は、検知した
強度の大きいセンサの方向にカメラ部を駆動している。
このことにより、本発明のテレビ電話会議システムで
は、被写体が移動する場合でも、ユーザが操作すること
なく、カメラ部が自動的に被写体を追尾して撮影するこ
とができる。他の観点の発明のテレビ電話会議システム
は、マイクロコントローラ部が所望の解像度に基づい
て、静止画像を複数個の画面分に分割し、高精度アクチ
ュエータによって駆動したカメラ部を用いて分割した各
画面に対応する被写体の部分を撮影する。その後、撮影
した被写体の各部分の映像信号を合成することにより、
所望の解像度の静止画像を形成している。このため、本
発明のテレビ電話会議システムでは、カメラ部の構成を
大型化することなく、撮影、形成する静止画像の解像度
を容易に向上することができる。他の観点の発明のテレ
ビ電話会議システムは、マイクロコントローラ部が高精
度アクチュエータを一の方向に水平に駆動するととも
に、その駆動中にカメラ部により被写体を複数回撮影す
る。その後、複数回撮影した被写体の各部分の映像信号
を合成することにより、一の方向で所望のサイズに拡げ
た静止画像を形成している。このため、本発明のテレビ
電話会議システムでは、カメラ部の構成を大型化するこ
となく、横長、及び縦長の静止画像を容易に形成するこ
とができる。According to the video conference system of the present invention, the microcontroller unit compares the strengths of signals detected by the two sensors in two directions, that is, the vertical direction and the horizontal direction. The positional relationship between the lens and the subject to which the signal generator for generating the signal is attached is grasped. The microcontroller unit drives the camera unit in the direction of the detected sensor having a high intensity.
Thus, in the video conference system of the present invention, even when the subject moves, the camera unit can automatically track and shoot the subject without any operation by the user. According to another aspect of the present invention, there is provided a video conference system in which a microcontroller unit divides a still image into a plurality of screens based on a desired resolution, and uses a camera unit driven by a high-precision actuator to divide each screen. The part of the subject corresponding to is photographed. Then, by synthesizing the video signal of each part of the photographed subject,
A still image with a desired resolution is formed. For this reason, in the video conference system of the present invention, the resolution of a still image to be photographed and formed can be easily improved without increasing the size of the camera unit. In a video conference system according to another aspect of the present invention, the microcontroller unit drives the high-precision actuator horizontally in one direction, and captures an image of the subject a plurality of times by the camera unit during the driving. Thereafter, a still image enlarged to a desired size in one direction is formed by synthesizing the video signals of the respective portions of the subject photographed a plurality of times. Therefore, in the video conference system of the present invention, horizontally and vertically long still images can be easily formed without increasing the size of the camera section.
【図１】本発明のテレビ電話会議システムの全体構成を
示すブロック図FIG. 1 is a block diagram showing the overall configuration of a video conference system according to the present invention;
【図２】本発明の第１の実施例であるテレビ電話会議シ
ステムでの端末装置の構成を示すブロック図FIG. 2 is a block diagram showing the configuration of a terminal device in the video conference system according to the first embodiment of the present invention;
【図３】図２に示したカメラ部の駆動方法の一例を示す
説明図FIG. 3 is an explanatory diagram showing an example of a driving method of the camera unit shown in FIG. 2;
【図４】本発明の第２の実施例であるテレビ電話会議シ
ステムでの端末装置の構成を示すブロック図FIG. 4 is a block diagram showing a configuration of a terminal device in a video conference system according to a second embodiment of the present invention;
【図５】本発明の第３の実施例であるテレビ電話会議シ
ステムでの端末装置の構成を示すブロック図FIG. 5 is a block diagram showing a configuration of a terminal device in a video conference system according to a third embodiment of the present invention;
【図６】本発明の第４の実施例であるテレビ電話会議シ
ステムでの端末装置の構成を示すブロック図FIG. 6 is a block diagram showing a configuration of a terminal device in a video conference system according to a fourth embodiment of the present invention;
【図７】図６に示した端末装置での画像形成方法を示す
説明図FIG. 7 is an explanatory diagram showing an image forming method in the terminal device shown in FIG. 6;
【図８】図６に示した端末装置での他の画像形成方法を
示す説明図FIG. 8 is an explanatory view showing another image forming method in the terminal device shown in FIG. 6;
【図９】本発明の第５の実施例であるテレビ電話会議シ
ステムでの端末装置の構成を示すブロック図FIG. 9 is a block diagram illustrating a configuration of a terminal device in a video conference system according to a fifth embodiment of the present invention;
【図１０】 第１の従来例のテレビ電話会議システ
ムでの端末装置の構成を示すブロック図FIG. 10 is a block diagram showing a configuration of a terminal device in a video conference system according to a first conventional example;
【図１１】第２の従来例のテレビ電話会議システムの構
成を示すブロック図FIG. 11 is a block diagram showing a configuration of a video conference system according to a second conventional example.
【図１２】第３の従来例のテレビ電話会議システムに用
いられるＣＣＤセンサのセルの配列例を示す構造図FIG. 12 is a structural diagram showing an example of an array of cells of a CCD sensor used in a third conventional video conference system;
【図１３】図１２に示したＣＣＤセンサのセルの構成を
示す構造図13 is a structural diagram showing a configuration of a cell of the CCD sensor shown in FIG.
【図１４】第３の従来例のテレビ電話会議システムに用
いられるカメラ部の構成を示すブロック図FIG. 14 is a block diagram showing a configuration of a camera unit used in a video conference system according to a third conventional example.
【図１５】図１２に示したＣＣＤセンサでの４倍の解像
度を有する静止画像の画像形成方法を示す説明図FIG. 15 is an explanatory diagram showing a method of forming a still image having four times the resolution of the CCD sensor shown in FIG. 12;
１、３１、３２、３３、３４ 端末装置 ２、２’、２” カメラ部 ３ 赤外線センサ ４ 撮像カメラ ５、５ａ、５ｂ 赤外線信号発生装置 ８ マイクロコントローラ
部 ９ 制御部 １０ アクチュエータ １１ 外部入力回路部 １２ スイッチ部 １３ 送信信号処理部 １５ 送信データ変換部 １６ 送信部 １７ 受信部 １８ 受信データ変換部 １９ 受信信号処理部 ２３、２３’、２３” 被写体 ２４、２４’、２４” 高精度アクチュエータ １００ 通信回線1, 31, 32, 33, 34 Terminal device 2, 2 ', 2 "camera unit 3 Infrared sensor 4 Imaging camera 5, 5a, 5b Infrared signal generator 8 Microcontroller unit 9 Control unit 10 Actuator 11 External input circuit unit 12 Switch unit 13 Transmission signal processing unit 15 Transmission data conversion unit 16 Transmission unit 17 Receiving unit 18 Received data conversion unit 19 Received signal processing unit 23, 23 ', 23 "Subject 24, 24', 24" High-precision actuator 100 Communication line
Claims (9)
置を備えたテレビ電話会議システムであって、 前記複数の各端末装置は、被写体を撮影するカメラ部、 前記カメラ部の方向を駆動するアクチュエータ、 前記被写体に取り付けられた信号発生装置、 前記信号発生装置からの信号を検知するセンサ、及び前
記センサの検知結果に基づいて、カメラ部を駆動する制
御信号をアクチュエータに出力する駆動制御部を具備す
ることを特徴とするテレビ電話会議システム。1. A videophone conference system comprising a plurality of terminal devices connected by a communication line, wherein each of the plurality of terminal devices is a camera unit for photographing a subject, and an actuator for driving a direction of the camera unit. A signal generation device attached to the subject; a sensor for detecting a signal from the signal generation device; and a drive control unit for outputting a control signal for driving a camera unit to the actuator based on a detection result of the sensor. A video conference call system.
音声信号を入力する外部入力回路部、 前記カメラ部と外部入力回路部とに接続され、カメラ部
から出力された映像信号と外部入力回路部からの映像信
号との同期をとり、駆動制御部からの切り換え信号に基
づいて、カメラ部、及び外部入力回路部のいずれか一方
からの映像信号を出力するスイッチ部、及び前記通信回
線に接続され、スイッチ部からの出力データを他の端末
装置に送信し、他の端末装置からの出力データを受信す
る送受信部を具備することを特徴とする請求項１に記載
のテレビ電話会議システム。2. An external input circuit for inputting a video signal and an audio signal from outside, wherein the terminal device is connected to the camera and the external input circuit, and a video signal output from the camera and an external input circuit. A switch unit that synchronizes with a video signal from the unit and outputs a video signal from one of the camera unit and the external input circuit unit based on a switching signal from the drive control unit, and is connected to the communication line. The videophone conference system according to claim 1, further comprising a transmission / reception unit configured to transmit output data from the switch unit to another terminal device and receive output data from the other terminal device.
なる信号を発生する別の信号発生装置、及び前記カメラ
部からの映像信号を処理して、別の信号発生装置からの
信号を検出する信号処理部を具備することを特徴とする
請求項１または請求項２に記載のテレビ電話会議システ
ム。3. The signal processing apparatus according to claim 1, wherein the terminal device processes another signal generating device that generates a signal different from the signal generating device, and detects a signal from another signal generating device by processing a video signal from the camera unit. 3. The video conference system according to claim 1, further comprising a signal processing unit.
熱、及び被写体からの特定の色の波長の少なくとも一方
を検知するセンサを具備することを特徴とする請求項１
または請求項２に記載のテレビ電話会議システム。4. The terminal device according to claim 1, wherein the terminal device includes a sensor that detects at least one of heat generated from the subject and a wavelength of a specific color from the subject.
Or the video conference system according to claim 2.
１゜の精度にてカメラ部の方向を駆動する高精度アクチ
ュエータにより構成されたことを特徴とする請求項１ま
たは請求項２に記載のテレビ電話会議システム。5. The apparatus according to claim 1, wherein the actuator is 0.1 ± 0.0.
3. The video conference system according to claim 1, comprising a high-precision actuator that drives the direction of the camera unit with an accuracy of 1 °.
置を備えたテレビ電話会議システムに用いられる画像形
成方法であって、 被写体に取り付けた信号発生装置からの信号を少なくと
も２つのセンサにより検知する工程、 前記少なくとも２つのセンサにより検知したそれぞれの
信号の強度を比較する工程、及び前記比較する工程での
比較結果に基づいて、被写体とカメラ部との位置関係を
認識して、カメラ部の方向を駆動する工程、 を具備することを特徴とするテレビ電話会議システムに
用いられる画像形成方法。6. An image forming method used in a video conference system having a plurality of terminal devices connected by a communication line, wherein a signal from a signal generator attached to a subject is detected by at least two sensors. A step of comparing the intensities of the respective signals detected by the at least two sensors; and, based on a result of the comparison in the comparing step, recognizing a positional relationship between the subject and the camera unit, and Driving the image forming apparatus. An image forming method used in a video conference system.
置を備えたテレビ電話会議システムに用いられる画像形
成方法であって、 所望の解像度に基づいて、静止画像を複数個の画面分に
分割する工程、 前記分割する工程により分割した各画面に対応する被写
体の部分をカメラ部により撮影する工程、及び前記撮影
する工程で撮影した被写体の各部分の映像信号を合成し
て、１つの静止画像を形成する工程を具備することを特
徴とするテレビ電話会議システムに用いられる画像形成
方法。7. An image forming method used in a video conference system having a plurality of terminal devices connected by a communication line, wherein a still image is divided into a plurality of screens based on a desired resolution. A step of photographing a part of the subject corresponding to each screen divided by the dividing step by a camera unit, and synthesizing a video signal of each part of the subject photographed in the photographing step to form one still image An image forming method for use in a video conference system, comprising a forming step.
置を備えたテレビ電話会議システムに用いられる画像形
成方法であって、 カメラ部を一の方向で水平に駆動するとともに、その駆
動中に被写体を複数回カメラ部により撮影する工程、及
び前記撮影する工程で撮影した被写体の各部分の映像信
号を合成して、１つの静止画像を形成する工程を具備す
ることを特徴とするテレビ電話会議システムに用いられ
る画像形成方法。8. An image forming method for use in a video conference system having a plurality of terminal devices connected by a communication line, wherein the camera unit is driven horizontally in one direction and an object is driven during the driving. A videophone conference system comprising: a step of photographing a plurality of times by a camera unit; and a step of forming one still image by synthesizing video signals of respective portions of the subject photographed in the photographing step. Image forming method used for
各部分の映像信号を形成することを特徴とする請求項７
または請求項８に記載のテレビ電話会議システムに用い
られる画像形成方法。9. The video signal of each portion of the subject is formed by using a plurality of camera units.
An image forming method used in the video conference system according to claim 8.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9353601A JPH11187302A (en) | 1997-12-22 | 1997-12-22 | Video telephone conference system and image forming method used therefor |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP9353601A JPH11187302A (en) | 1997-12-22 | 1997-12-22 | Video telephone conference system and image forming method used therefor |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH11187302A true JPH11187302A (en) | 1999-07-09 |
Family
ID=18431947
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP9353601A Pending JPH11187302A (en) | 1997-12-22 | 1997-12-22 | Video telephone conference system and image forming method used therefor |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH11187302A (en) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002290960A (en) * | 2001-03-26 | 2002-10-04 | Matsushita Electric Works Ltd | Open space monitor system |
| JP2008543196A (en) * | 2005-06-03 | 2008-11-27 | フランス テレコム | Method and apparatus for controlling movement in viewing direction, video conference system, terminal, and program for implementing this method |
-
1997
- 1997-12-22 JP JP9353601A patent/JPH11187302A/en active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002290960A (en) * | 2001-03-26 | 2002-10-04 | Matsushita Electric Works Ltd | Open space monitor system |
| JP2008543196A (en) * | 2005-06-03 | 2008-11-27 | フランス テレコム | Method and apparatus for controlling movement in viewing direction, video conference system, terminal, and program for implementing this method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR950014509B1 (en) | Image sensing apparatus having plurality of optical systems | |
| US8077194B2 (en) | System and method for high resolution videoconferencing | |
| US8467886B2 (en) | Mobile object apparatus, mobile object system, imaging device and method, and alerting device and method | |
| WO2009142332A1 (en) | Hybrid video camera syste | |
| JPH09130820A (en) | Digital camera apparatus | |
| KR20050051575A (en) | Photographing apparatus and method, supervising system, program and recording medium | |
| JP2005517331A (en) | Apparatus and method for providing electronic image manipulation in a video conference application | |
| JP2011216948A (en) | Camera system, video processing apparatus, and camera apparatus | |
| CN102077575A (en) | Zoom by multiple image capture | |
| US20050200726A1 (en) | Digital camera and image signal generating method | |
| JPH09289631A (en) | Image pickup control method and device, image pickup system and storage medium storing program to execute the method | |
| JP2020025305A (en) | Imaging apparatus | |
| JP2010171625A (en) | Imaging apparatus, sound recorder, and motion picture photographing system | |
| JP2007288354A (en) | Camera device, image processing apparatus, and image processing method | |
| JP4019235B2 (en) | Imaging device driving method and electronic camera | |
| JP2006238326A (en) | Camera device system and photographed moving image reproduction method | |
| JPH05344408A (en) | Method for magnifying and recording specific part and device therefor | |
| JPH09233483A (en) | Method and device for transmitting digital color video signal | |
| JPH11187302A (en) | Video telephone conference system and image forming method used therefor | |
| JP2009027626A (en) | Microphone device, video capturing device, and remote video capturing system | |
| JPH0715646A (en) | Network camera | |
| JPH11220653A (en) | Picture processor and camera system | |
| JPH10290412A (en) | Image pickup, storage, processing, display, reproduction transmitter and recording medium | |
| JP4140006B2 (en) | Composite image generation system | |
| JP2013251617A (en) | Camera |