JP4842678B2 - Communication system, information processing apparatus, and program - Google Patents
Communication system, information processing apparatus, and program Download PDFInfo
- Publication number
- JP4842678B2 JP4842678B2 JP2006084678A JP2006084678A JP4842678B2 JP 4842678 B2 JP4842678 B2 JP 4842678B2 JP 2006084678 A JP2006084678 A JP 2006084678A JP 2006084678 A JP2006084678 A JP 2006084678A JP 4842678 B2 JP4842678 B2 JP 4842678B2
- Authority
- JP
- Japan
- Prior art keywords
- terminal device
- video data
- setting
- bit rate
- wireless communication
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Mobile Radio Communication Systems (AREA)
Description
本発明は、撮影装置に接続された端末装置の複数と、各端末装置と通信可能な情報処理装置と、を備える通信システムに関する。 The present invention relates to a communication system including a plurality of terminal devices connected to an imaging device and an information processing device capable of communicating with each terminal device.
従来より、通信システムとしては、監視対象を撮影するための撮影装置を内蔵する端末装置と、この端末装置にて生成された映像データを受信して再生処理し、この映像データが表す映像を、表示装置に出力する情報処理装置と、からなるシステムが知られている。 Conventionally, as a communication system, a terminal device incorporating a photographing device for photographing a monitoring target, and video data generated by the terminal device is received and processed for reproduction. There is known a system including an information processing apparatus that outputs to a display device.
また、この種の通信システムとしては、複数の端末装置を備え、情報処理装置が、各端末装置にて生成された映像データの夫々を、並列受信して、これらを再生処理し、各端末装置が撮影する監視対象の映像を、表示装置に同時表示するものが知られている（例えば、特許文献１参照）。上記通信システムでは、映像データの送受信時に、ネットワークトラフィックが大きいと、映像データの受信遅れが発生するため、ネットワークトラフィックに応じて、映像データのフレームレート等を設定することが行われている。 In addition, this type of communication system includes a plurality of terminal devices, and the information processing device receives in parallel each of the video data generated by each terminal device, reproduces them, and each terminal device Is known that simultaneously displays a video to be monitored on a display device (see, for example, Patent Document 1). In the above communication system, when network traffic is large when video data is transmitted / received, reception delay of the video data occurs. Therefore, the frame rate of the video data is set according to the network traffic.
また、通信方式としては、有線及び無線の方式が知られ、無線通信システムとしては、ノイズ環境に応じて、変調速度や、変調方式を設定し、データ伝送速度を自動的に切り替えるものが知られている（例えば、特許文献２参照）。
ところで、従来システムでは、映像データを送受信する際、ネットワークトラフィックに応じて、各端末装置に対しフレームレート等を設定する程度であるため、同時表示されている映像の一つが、ユーザにとって重要な映像であって、他の映像は重要でない場合でも、各映像の画質が、フレームレートの低下により、一律に低下するといった問題があった。 By the way, in the conventional system, when transmitting and receiving video data, the frame rate and the like are set for each terminal device according to the network traffic, so one of the simultaneously displayed videos is an important video for the user. However, even when other images are not important, there is a problem that the image quality of each image is uniformly reduced due to a decrease in the frame rate.
本発明は、こうした問題に鑑みなされたものであり、無線通信にて映像データの送受信を行う通信システムにおいて、通信環境の変動の影響をあまり受けることなく良好に、重要映像を出力することが可能な技術を提供することを目的とする。 The present invention has been made in view of these problems, and in a communication system that transmits and receives video data by wireless communication, it is possible to output important video satisfactorily without being significantly affected by fluctuations in the communication environment. Aims to provide a new technology.
かかる目的を達成するためになされた請求項１記載の通信システムは、
撮影装置に接続された、無線通信手段を備える端末装置、
を複数備えると共に、
前記各端末装置と無線通信可能な無線通信手段を備える情報処理装置、
を備える通信システムであって、
前記各端末装置は、
自装置に接続された撮影装置からの入力信号に基づき、予め設定されたビットレートの映像データを生成し、生成した映像データを順次、自装置内蔵の前記無線通信手段を介して、前記情報処理装置に送信する生成送信手段、
を備え、
少なくとも予め定められた特定の端末装置を除く前記各端末装置は、
前記情報処理装置から送信される設定指令信号を、自装置内蔵の前記無線通信手段を介して受信すると、受信した設定指令信号に従って、自装置における前記ビットレートの設定値を変更する設定変更手段、
を備え、
前記情報処理装置は、
表示装置における区画化された出力画面であって、前記特定の端末装置から受信した映像データに基づく映像を表示するための区画が、他の端末装置から受信した映像データに基づく映像を表示するための区画よりも広く設定された画面を通じて、前記各端末装置から受信した映像データに基づく映像を同時表示する手段であって、前記各端末装置から送信される映像データを、自装置内蔵の前記無線通信手段を介して受信し、受信した映像データを順次、再生処理して、前記映像データに基づく映像を、前記表示装置の出力画面を通じて同時表示する受信再生手段と、
前記受信再生手段が前記特定の端末装置から受信する映像データの受信状態の良否を、判定する判定手段と、
前記判定手段にて前記受信状態が良くないと判定されると、ビットレートの設定値を下げるように指示する設定指令信号を、自装置内蔵の前記無線通信手段を介して、前記特定の端末装置を除く各端末装置に、送信する設定修正手段と、
を備えることを特徴とする。
The communication system according to
A terminal device provided with wireless communication means connected to the photographing device;
Including a plurality of
An information processing device comprising wireless communication means capable of wireless communication with each of the terminal devices;
A communication system comprising:
Each terminal device is
Based on an input signal from a photographing device connected to the own device, video data of a preset bit rate is generated, and the generated video data is sequentially transmitted through the wireless communication means built in the own device. Generating and transmitting means for transmitting to the device;
With
Each of the terminal devices excluding at least a specific terminal device determined in advance is
When the setting command signal transmitted from the information processing device is received via the wireless communication unit built in the device, a setting change unit that changes the setting value of the bit rate in the device according to the received setting command signal;
With
The information processing apparatus includes:
A partitioned output screen in a display device, wherein a partition for displaying video based on video data received from the specific terminal device displays video based on video data received from another terminal device Means for simultaneously displaying video based on video data received from each of the terminal devices through a screen set wider than the section of the video data transmitted from each of the terminal devices. Receiving and reproducing means for sequentially receiving the video data received through the communication means, processing the received video data sequentially, and displaying the video based on the video data through the output screen of the display device ;
Determination means for determining whether the reception state of the video data received by the reception / playback means from the specific terminal device is good;
If the determination means determines that the reception state is not good, a setting command signal for instructing to lower the set value of the bit rate is sent to the specific terminal device via the wireless communication means built in the device itself. Setting correction means for transmitting to each terminal device except for,
It is characterized by providing.
また、請求項２記載の通信システムは、
前記設定修正手段が、前記判定手段にて前記受信状態が良くないと判定されると、前記判定手段にて前記受信状態が良いと判定されるまで、前記ビットレートの設定値を下げるように指示する設定指令信号を、段階的に、前記特定の端末装置を除く各端末装置に対して送信する構成にされていることを特徴とする。
The communication system according to
When the setting correction means determines that the reception state is not good by the determination means, an instruction is given to lower the set value of the bit rate until the determination means determines that the reception state is good. The setting command signal to be transmitted is transmitted step by step to each terminal device except the specific terminal device.
また、請求項３記載の通信システムは、
前記情報処理装置に、
前記各端末装置にてビットレートの設定変更が行われていない状態で、所定時間、前記判定手段にて前記受信状態が良いと判定され続けると、初期値を超えない範囲で、前記ビットレートの設定値を上げるように指示する設定指令信号を、自装置内蔵の前記無線通信手段を介して、前記特定の端末装置を除く各端末装置に送信する設定復元手段、
を設けたことを特徴とする。
The communication system according to
In the information processing apparatus,
If it is determined that the reception state is good by the determination unit for a predetermined time without changing the bit rate setting in each terminal device, the bit rate is within a range not exceeding the initial value. A setting restoration means for transmitting a setting command signal for instructing to increase a setting value to each terminal device except the specific terminal device via the wireless communication means built in the device itself;
Is provided.
また、請求項４記載の通信システムは、
前記設定復元手段が、前記各端末装置にてビットレートの設定変更が行われていない状態で、所定時間、前記判定手段にて前記受信状態が良いと判定され続けることにより、設定指令信号の送信タイミングが到来する度に、前記設定指令信号として、前記ビットレートの設定値を、一段階上げるように指示する設定指令信号を、自装置内蔵の前記無線通信手段を介して、前記特定の端末装置を除く各端末装置に送信する構成にされていることを特徴とする。
The communication system according to
When the setting restoration unit continues to determine that the reception state is good by the determination unit for a predetermined time in a state where the bit rate setting is not changed in each terminal device, the setting command signal is transmitted. Each time the timing arrives, as the setting command signal, a setting command signal for instructing to increase the setting value of the bit rate by one step is sent to the specific terminal device via the wireless communication means built in the device itself. It is configured to transmit to each terminal device except for.
また、請求項５記載の情報処理装置は、
撮影装置に接続された、無線通信手段を備える端末装置、の複数と無線通信可能な無線通信手段を備える情報処理装置であって、
前記各端末装置は、
自装置に接続された撮影装置からの入力信号に基づき、予め設定されたビットレートの映像データを生成し、生成した映像データを順次、自装置内蔵の前記無線通信手段を介して、前記情報処理装置に送信する生成送信手段、
を備え、
少なくとも予め定められた特定の端末装置を除く前記各端末装置は、
前記情報処理装置から送信される設定指令信号を、自装置内蔵の前記無線通信手段を介して受信すると、受信した設定指令信号に従って、自装置における前記ビットレートの設定値を変更する設定変更手段、
を備え、
当該情報処理装置は、
表示装置における区画化された出力画面であって、前記特定の端末装置から受信した映像データに基づく映像を表示するための区画が、他の端末装置から受信した映像データに基づく映像を表示するための区画よりも広く設定された画面を通じて、前記各端末装置から受信した映像データに基づく映像を同時表示する手段であって、前記各端末装置から送信される映像データを、自装置内蔵の前記無線通信手段を介して受信し、受信した映像データを順次、再生処理して、前記映像データに基づく映像を、前記表示装置の出力画面を通じて同時表示する受信再生手段と、
前記受信再生手段が前記特定の端末装置から受信する映像データの受信状態の良否を、判定する判定手段と、
前記判定手段にて前記受信状態が良くないと判定されると、ビットレートの設定値を下げるように指示する設定指令信号を、自装置内蔵の前記無線通信手段を介して、前記特定の端末装置を除く各端末装置に、送信する設定修正手段と、
を備えることを特徴とする。
An information processing apparatus according to
An information processing apparatus including a wireless communication unit capable of wireless communication with a plurality of terminal devices connected to an imaging device and including a wireless communication unit,
Each terminal device is
Based on an input signal from a photographing device connected to the own device, video data of a preset bit rate is generated, and the generated video data is sequentially transmitted through the wireless communication means built in the own device. Generating and transmitting means for transmitting to the device;
With
Each of the terminal devices excluding at least a specific terminal device determined in advance is
When the setting command signal transmitted from the information processing device is received via the wireless communication unit built in the device, a setting change unit that changes the setting value of the bit rate in the device according to the received setting command signal;
With
The information processing apparatus
A partitioned output screen in a display device, wherein a partition for displaying video based on video data received from the specific terminal device displays video based on video data received from another terminal device Means for simultaneously displaying video based on video data received from each of the terminal devices through a screen set wider than the section of the video data transmitted from each of the terminal devices. Receiving and reproducing means for sequentially receiving the video data received through the communication means, processing the received video data sequentially, and displaying the video based on the video data through the output screen of the display device ;
Determination means for determining whether the reception state of the video data received by the reception / playback means from the specific terminal device is good;
If the determination means determines that the reception state is not good, a setting command signal for instructing to lower the set value of the bit rate is sent to the specific terminal device via the wireless communication means built in the device itself. Setting correction means for transmitting to each terminal device except for,
It is characterized by providing.
また、請求項６記載のプログラムは、請求項５記載の情報処理装置における前記受信再生手段、前記判定手段、及び、前記設定修正手段としての機能を、コンピュータに実現させるためのプログラムである。 According to a sixth aspect of the present invention, there is provided a program for causing a computer to realize the functions as the reception / reproducing means, the determining means, and the setting correcting means in the information processing apparatus according to the fifth aspect .
請求項１記載の通信システムでは、特定の端末装置から送信される映像データの受信状態の良否を判定し、受信状態が良くない場合には、特定の端末装置を除く各端末装置のビットレートを下げるように、各端末装置を制御するので、ノイズ等で通信環境が悪化した場合であっても、上記ビットレートの調整により、受信側の情報処理装置は、各端末装置から送信される映像データを良好に受信することができ、特定の端末装置から送信される映像データの映像については、画質を落とさず出力（表示）することができる。
In the communication system according to
周知のように、無線通信方式では、ノイズ等によって通信環境が悪化すると、単位時間当たりに伝送可能なデータ量が低下するため、生成する映像データのビットレートを固定化すると、映像データの一部が欠落した状態で再生処理が行われることになって、良好な映像表示を行うことができない。 As is well known, in a wireless communication system, if the communication environment deteriorates due to noise or the like, the amount of data that can be transmitted per unit time decreases. Therefore, if the bit rate of generated video data is fixed, a part of the video data Since the reproduction process is performed in a state in which is missing, a good video display cannot be performed.
しかしながら、これに対処するために、全ての端末装置における映像データのビットレートを一律に下げてしまうと、ビットレートの低下に応じて、受信すべきデータの総量が減少し、受信データの欠落を抑制することができるものの、全ての端末装置に対応する再生映像の画質が劣化してしまう。即ち、全ての端末装置における映像データのビットレートを一律に下げてしまうと、重要な対象を撮影する撮影装置の映像から、重要でない映像まで、一律に、良好な画質が得られなくなってしまうのである。 However, in order to cope with this, if the bit rate of the video data in all the terminal devices is uniformly reduced, the total amount of data to be received decreases as the bit rate decreases, and the reception data is lost. Although it can be suppressed, the image quality of the reproduced video corresponding to all the terminal devices is deteriorated. In other words, if the bit rate of the video data in all terminal devices is lowered uniformly, it will not be possible to obtain good image quality uniformly from the video of the imaging device that captures the important object to the video that is not important. is there.
これに対し、請求項１記載の通信システムでは、映像データの受信状態が劣化した場合でも、特定の端末装置における映像データのビットレートを下げず、特定の端末装置以外の端末装置における映像データのビットレートを下げて、ノイズ等により低下した情報処理装置の受信能力に、各端末装置からの送信データの総量を適合させるため、特定の端末装置から送信される映像データを、通信環境が良い場合と同様に、良好に再生処理して、良好な画質で、再生映像を出力することができる。
On the other hand, in the communication system according to
従って、この発明によれば、重要な対象を撮影する撮影装置に接続された端末装置を、上記特定の端末装置とすることによって、通信環境の変動の影響を受けることなく、重要映像を良好に出力することが可能な通信システムを構築することができる。 Therefore, according to the present invention, the terminal device connected to the image capturing device that captures an important object is the specific terminal device, so that important images can be satisfactorily obtained without being affected by fluctuations in the communication environment. A communication system capable of outputting can be constructed.
尚、ビットレートは、例えば、量子化ビット、データ圧縮率、１秒間のフレーム数（フレームレート）等を変更することで下げることができる。また、判定手段は、受信再生手段が特定の端末装置から受信した映像データの受信量に基づき、受信状態の良否を判定する構成にされてもよいし、受信再生手段が特定の端末装置から受信した映像データの状態の良否を判定する構成にされてもよい。また、特定の端末装置から受信した映像データの状態の良否を判定する場合、判定手段は、受信した映像データを解析して、映像データの伝送過程における劣化の程度（例えば、データ欠落の程度）に基づき、特定の端末装置から受信した映像データの状態の良否を判定する構成にされるとよい。 The bit rate can be lowered by changing the quantization bit, the data compression rate, the number of frames per second (frame rate), and the like. In addition, the determination unit may be configured to determine whether the reception state is good or not based on the reception amount of the video data received by the reception / playback unit from the specific terminal device, or the reception / playback unit may receive from the specific terminal device. It may be configured to determine whether the state of the video data is good or bad. In addition, when determining whether the state of the video data received from a specific terminal device is good or bad, the determination unit analyzes the received video data and determines the degree of deterioration in the video data transmission process (for example, the degree of data loss). Based on the above, it may be configured to determine whether the state of the video data received from a specific terminal device is good or bad.
その他、固定的に、単一の端末装置を、特定の端末装置と定める場合には、その端末装置に、情報処理装置からの設定指令信号に基づいて、ビットレートの設定変更を行う機能を設ける必要はないが、特定の端末装置を、ユーザの指令等により可変に定める場合には、特定の端末装置を含む全端末装置に、設定変更手段を設けると共に、スイッチや無線信号により、特定の端末装置を設定できるように、上記通信システムを構成するとよい。 In addition, when a single terminal device is fixedly defined as a specific terminal device, the terminal device is provided with a function for changing the bit rate setting based on a setting command signal from the information processing device. Although it is not necessary, when a specific terminal device is variably determined by a user's command or the like, all terminal devices including the specific terminal device are provided with setting change means, and the specific terminal device is set by a switch or a radio signal. The communication system may be configured so that a device can be set.
また、複数の映像を、画面分割によって同時表示する場合には、重要映像の出力画面を、非重要映像の出力画面より広く設定することが、良く行われているが、この場合に、重要映像及び非重要映像の画質を同一設定にすると、出力画面を広く設定した分だけ、フレームサイズが大きくなるため、重要映像に対応する映像データの量が増大する。換言すると、フレームサイズが異なるのにもかかわらずビットレートを同一にする場合には、フレームサイズを大きくした分だけ、フレーム数等を下げなければならず、再生映像が、スムーズに物体の移動を描写できなくなって、再生映像の画質が低下する。 Also, when displaying multiple videos simultaneously by dividing the screen, it is common to set the output screen for important video wider than the output screen for non-important video. If the image quality of the non-important video is set to the same value, the frame size is increased by the wide setting of the output screen, so that the amount of video data corresponding to the important video increases. In other words, when the bit rate is the same even though the frame sizes are different, the number of frames must be decreased by the amount of the increased frame size, and the reproduced video moves the object smoothly. It becomes impossible to depict, and the quality of the playback video is degraded.
従って、出力画面のサイズを映像毎（端末装置毎）に変える場合には、ノイズ等で通信環境が悪化した場合に、各端末装置における映像データのビットレートを、一律に下げてしまうと、特定の端末装置に対応する再生映像の画質が、他の端末装置に対応する再生映像よりも大きく悪化してしまい、出力画面を広く設定した意味が薄れてしまう。 Therefore, when changing the output screen size for each video (for each terminal device), if the communication environment deteriorates due to noise or the like, the bit rate of the video data in each terminal device will be reduced uniformly. The image quality of the reproduced video corresponding to the terminal device is greatly deteriorated compared with the reproduced video corresponding to the other terminal device, and the meaning of setting the output screen widely is lost.
これに対し、請求項１記載の通信システムによれば、特定の端末装置における映像データのビットレートを下げることなく、他の端末装置における映像データのビットレートを下げ、通信環境悪化の影響を緩和するので、特定の端末装置から受信した映像データに基づく映像を表示するための区画を、他の端末装置から受信した映像データに基づく映像を表示するための区画よりも広く設定しても、特定の端末装置に対応する映像を、良好な画質で出力することができる。
In contrast, the communication system according to
また、上記通信システムでは、判定手段によって受信状態が良くないと判定された場合に、特定の端末装置以外の各端末装置のビットレートをただちに最低値まで下げるようにしてもよいが、ビットレートを最低値までただちに下げると、必要以上に、特定の端末装置以外の各端末装置に対応する再生映像の画質が低下してしまう可能性がある。従って、上記通信システムにおいては、設定修正手段を、請求項２記載のように構成するとよい。
Further, in the communication system, when the reception unit determines that the reception state is not good, the bit rate of each terminal device other than the specific terminal device may be immediately reduced to the minimum value. If it is immediately lowered to the minimum value, there is a possibility that the image quality of the reproduced video corresponding to each terminal device other than the specific terminal device is unnecessarily lowered. Therefore, in the communication system, the setting correction means may be configured as described in
請求項２記載のように、段階的にビットレートの設定値を下げるようにすれば、ビットレートの下げ幅を、必要最小限に収めて、各端末装置の映像データを良好に受信・再生することができる。従って、請求項２記載の通信システムによれば、判定手段にて受信状態が良くないと判定された場合に、特定の端末装置以外の各端末装置における映像データのビットレートを、ただちに最低値まで下げるよりも、各端末装置に対応する映像を、良好な画質で表示装置に出力することができる。
If the bit rate setting value is lowered step by step as described in
尚、設定修正手段は、各端末装置がビットレートを多段階設定可能な構成にされていることを前提として、判定手段にて上記受信状態が良くないと判定されると、受信状態が良いと判定されるまで、ビットレートの設定値を一段階下げるように指示する設定指令信号を、繰返し、特定の端末装置を除く各端末装置に対して送信する構成にされるとよい。 Note that the setting correction means, on the assumption that each terminal device is configured to be able to set the bit rate in multiple stages, if the determination means determines that the reception state is not good, the reception state is good. A configuration command signal for instructing to lower the bit rate setting value by one step until it is determined may be repeatedly transmitted to each terminal device except a specific terminal device.
また、上記通信システムには、請求項３記載のように、一度下げたビットレートを、受信状態に応じて上げるための構成を導入すると便利である。ビットレートを固定した状態で、所定時間、判定手段にて上記受信状態が良いと判定された場合には、ノイズ等が消滅し通信環境が回復している可能性がある。従って、所定時間、特定の端末装置からの映像データの受信状態が良い場合には、一度下げた各端末装置のビットレートの設定値を上げるようにすれば、通信環境が良い状態である場合、映像を良好な画質にて、表示装置に出力することができる。従って、請求項３記載の通信システムによれば、通信環境に応じて、特定の端末装置以外の各端末装置に適切なビットレートを設定することができる。
Further, as described in
但し、ビットレートを上げる際には、急激に、設定値を元の初期値に戻してしまうと、再び、受信状態が悪化して、ビットレートの設定値を下げる必要が生じ、映像データを良好に受信できない期間が長くなる可能性がある。従って、上記の設定復元手段は、請求項４記載のように構成されるとよい。
However, when the bit rate is increased, if the setting value is suddenly returned to the original initial value, the reception state deteriorates again, and it is necessary to lower the bit rate setting value. There is a possibility that the period during which data cannot be received becomes longer. Therefore, the setting restoring means may be configured as described in
請求項４記載の通信システムでは、映像データを良好に受信することができている場合、所定時間が経過する度に、段階的にビットレートの設定値を上げるので、常時、通信環境に応じた適切なビットレートを、各端末装置に設定することができ、常時最適な画質にて、再生映像を、表示装置に出力することができる。
In the communication system according to
また、請求項５記載の情報処理装置によれば、特定の端末装置の映像データの受信状態に応じて、特定の端末装置以外の各端末装置のビットレートを変更するので、通信環境が悪化しても、特定の端末装置からの映像データを良好に受信して再生処理することができると共に、その映像を、良好な画質で表示装置に出力することができる。 In addition, according to the information processing apparatus of the fifth aspect, since the bit rate of each terminal device other than the specific terminal device is changed according to the reception state of the video data of the specific terminal device, the communication environment is deteriorated. However, it is possible to satisfactorily receive and reproduce video data from a specific terminal device, and output the video to the display device with good image quality.
また、請求項６記載のプログラムによれば、請求項５記載の発明と同様の効果を得ることができる。尚、上記プログラムには、請求項３記載の設定復元手段としての機能を、コンピュータに実現させるためのプログラムを、組み込むことができる。
According to the program described in claim 6, the same effect as that of the invention described in
以下、本発明の実施例について、図面と共に説明する。図１は、本発明が適用された監視システム１の構成を表す説明図である。
本実施例の監視システム１は、監視対象を撮影する監視装置１０を複数個備えると共に、映像出力用の情報処理装置３０、及び、この情報処理装置３０と通信ケーブルＬＮを介して接続された無線通信装置５０を備える。
Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is an explanatory diagram showing the configuration of a
The
監視システム１を構成する各監視装置１０は、夫々同一構成にされ、監視対象を撮影するカメラ１１と、カメラ１１の周囲に設置されたマイクロフォン１２ａ及びスピーカ１２ｂと、カメラ１１から入力されるアナログの映像信号及びマイクロフォン１２ａから入力されるアナログの音声信号に基づき、ディジタル映像データ及びディジタル音声データを混合したディジタル動画データを生成するディジタル変換部１３と、マイクロコンピュータ等から構成される制御部１５と、情報処理装置３０に接続された無線通信装置５０と無線通信可能な無線通信回路部１７と、を備える。
Each
制御部１５は、ディジタル変換部１３から入力されるディジタル動画データと、情報処理装置３０のアドレスを記した送信先情報と、当該監視装置１０のアドレスを記した送信元情報と、を格納した送信データを生成し、これを、無線通信回路部１７に入力する通信制御部１５ａを有し、無線通信回路部１７は、この通信制御部１５ａから入力される送信データを重畳させた無線信号を、アンテナから出力する。尚、無線通信方式としては、周知のＩＥＥＥ８０２．１１ｘ規格を採用することができ、通信プロトコルとしては、インターネットプロトコルを採用することができる。
The
また、通信制御部１５ａは、情報処理装置３０から送信されてくるディジタル音声データを、無線通信回路部１７を介して受信し、これをディジタル変換部１３に入力する構成にされている。
In addition, the communication control unit 15 a is configured to receive digital audio data transmitted from the
一方、ディジタル変換部１３は、周知のＭＰＥＧ（Moving Picture Expert Group）方式にて、カメラ１１からの入力信号を符号化し、ディジタル映像データを生成する構成にされている。
On the other hand, the
このディジタル変換部１３は、動画生成モードとして、第一モード及び第二モードを有し、第一モードで動作している場合、上記ディジタル映像データの生成と並行して、マイクロフォン１２ａからの入力信号を符号化し、ディジタル音声データを生成する。
The
そして、第一モードでは、上記生成したディジタル映像データ及びディジタル音声データを図示しない内蔵のマルチプレクサに入力して、ディジタル映像データ及びディジタル音声データを混合したディジタル動画データを生成し、これを通信制御部１５ａに入力する。また、第二モードでは、上記ディジタル音声データを生成せず、カメラ１１からの入力信号に基づき生成したディジタル映像データを、ディジタル動画データとして通信制御部１５ａに入力する。
In the first mode, the generated digital video data and digital audio data are input to a built-in multiplexer (not shown) to generate digital moving image data in which the digital video data and digital audio data are mixed, and this is transmitted to the communication control unit. Input to 15a. In the second mode, the digital audio data is not generated, and digital video data generated based on an input signal from the
また、ディジタル変換部１３は、通信制御部１５ａからディジタル音声データが入力されると、これをアナログの音声信号に変換して、スピーカ１２ｂに入力する。
その他、ディジタル変換部１３は、カメラ１１から入力される映像信号の符号化時のビットレート（所謂、符号化ビットレート）を変更可能な構成にされ、制御部１５により、設定部１３ａに設定された画質設定値に対応するビットレートにて、カメラ１１からの入力信号を符号化し、上記ディジタル映像データを生成する。具体的に、画質設定値は、値「１」〜「５」までの五段階の値をとり、本実施例のディジタル変換部１３は、画質設定値が大きい程、高ビットレートのディジタル映像データを生成する。
In addition, when digital audio data is input from the communication control unit 15a, the
In addition, the
図２は、画質設定値と、ディジタル映像データ生成時のビットレート（符号化ビットレート）との関係を示した説明図である。
本実施例のディジタル変換部１３は、制御部１５により設定部１３ａに設定されたモード設定値が「１」である場合、上述の第一モードで動作して、後述する画面Ｇ１（図５参照）に対応するフレームサイズのディジタル映像データを生成する。一方、設定部１３ａに設定されたモード設定値が「２」である場合には、上述の第二モードで動作して、後述する画面Ｇ２〜Ｇ６に対応するフレームサイズのディジタル映像データを生成する。このため、本実施例では、同一の画質設定値で、画面Ｇ１に表示される映像の画質と、画面Ｇ２〜Ｇ６に表示される映像の画質とが一致するように、各モードで、異なるビットレートの映像データを生成する。
FIG. 2 is an explanatory diagram showing the relationship between the image quality setting value and the bit rate (encoding bit rate) at the time of digital video data generation.
When the mode setting value set in the setting unit 13a by the
具体的に、モード設定値が「１」で、画質設定値が「１」である場合には、４Ａｋｂｐｓのディジタル映像データ（変数Ａとしては、例えば、Ａ＝６４を挙げることができる）を生成し、画質設定値が「２」である場合に、画質設定値が「１」である場合の倍のビットレートである８Ａｋｂｐｓのディジタル映像データを生成し、画質設定値が「５」である場合には、６４Ａｋｂｐｓのディジタル映像データを生成する。 Specifically, when the mode setting value is “1” and the image quality setting value is “1”, 4 kbps digital video data (for example, A = 64 can be cited as the variable A) is generated. When the image quality setting value is “2”, 8 kbps digital video data that is a double bit rate of the image quality setting value “1” is generated, and the image quality setting value is “5”. Generates 64 kbps digital video data.
また、モード設定値が「２」で、画質設定値が「１」である場合には、フレームサイズが第一モードの４分の１であるため、第一モードの４分の１のＡｋｂｐｓのディジタル映像データを生成し、画質設定値が「２」である場合には、２Ａｋｂｐｓのディジタル映像データを生成し、画質設定値が「５」である場合には、１６Ａｋｂｐｓのディジタル映像データを生成する。 In addition, when the mode setting value is “2” and the image quality setting value is “1”, the frame size is ¼ of the first mode, so that the kbps of the first mode is ¼. When digital image data is generated and the image quality setting value is “2”, 2 kbps digital image data is generated, and when the image quality setting value is “5”, 16 kbps digital image data is generated. .
尚、上記モード設定値及び画質設定値の変更は、監視装置１０において、制御部１５が実行する設定切替処理によって実現される。図３は、制御部１５が繰返し実行する設定切替処理を表すフローチャートである。
Note that the change of the mode setting value and the image quality setting value is realized by setting switching processing executed by the
設定切替処理を開始すると、制御部１５は、情報処理装置３０から、モード設定値及び画質設定値を変更するように指示する設定コマンドを、無線通信回路部１７を介して受信するまで待機し（Ｓ１１０）、設定コマンドを受信すると、設定コマンドに付されたモード指定値及び画質指定値を解釈し、設定部１３ａのモード設定値を、その設定コマンドに付されたモード指定値と同一の値に変更すると共に、設定部１３ａの画質設定値を、上記設定コマンドに付された画質指定値と同一の値に変更する（Ｓ１２０）。その後、制御部１５は、設定変更が完了した旨の応答信号を、設定コマンドの送信元装置（情報処理装置３０）に、無線通信回路部１７を介して送信し（Ｓ１３０）、当該設定切替処理を一旦終了する。その後、再び、Ｓ１１０に移行する。
When the setting switching process is started, the
その他、無線通信装置５０は、時分割にて、各監視装置１０と同時に無線通信可能な構成にされている。情報処理装置３０は、この無線通信装置５０と接続され、無線通信装置５０を介して各監視装置１０と通信可能なインタフェース３１と、プログラムに従って各種演算処理を行うＣＰＵ３３と、ＣＰＵ３３によるプログラム実行時に作業領域として使用されるＲＡＭ３５と、ブートプログラム等を記憶するＲＯＭ３７と、ハードディスク装置３９と、液晶ディスプレイ等からなるスピーカ内蔵の表示部４１と、キーボードやポインティングデバイス、マイクロフォン等からなる入力部４３と、を備える。
In addition, the
また、情報処理装置３０は、ハードディスク装置３９に、後述する映像受信表示処理をＣＰＵ３３に実行させるためのプログラムや、タイマーとしての機能をＣＰＵ３３に実現させるためのプログラム、ユーザにより指定された画面Ｇ１〜Ｇ６の割り当てを示す画面設定情報、ユーザにより指定された画質設定値の初期値を示す画質初期設定情報、監視装置１０の個数Ｘを示す端末数設定情報、等を記憶している。
In addition, the
図４は、ハードディスク装置３９に記憶された画面設定情報を表す説明図であり、図５は、後述する映像受信表示処理によって、表示部４１の出力画面上に生成される映像表示ウィンドウＧ０の構成を表す説明図である。
FIG. 4 is an explanatory diagram showing the screen setting information stored in the
図５に示すように、映像表示ウィンドウＧ０は、区画化された画面Ｇ１〜Ｇ６からなり、画面Ｇ１は、画面Ｇ２〜Ｇ６の４倍広く設定されている。即ち、映像表示ウィンドウＧ０は、大画面構成の画面Ｇ１と、小画面構成の画面Ｇ２〜Ｇ６と、の２種類・６個の画面を備えた構成にされている。 As shown in FIG. 5, the video display window G0 is composed of partitioned screens G1 to G6, and the screen G1 is set to be four times wider than the screens G2 to G6. That is, the video display window G0 is configured to include two types and six screens, a large screen configuration screen G1 and small screen configuration screens G2 to G6.
画面設定情報は、これら各画面Ｇ１〜Ｇ６毎に、その画面が割り当てられた監視装置１０の識別情報（アドレス）が記述されたものであり、情報処理装置３０は、この画面設定情報に基づき、映像受信表示処理によって、画面Ｇｉが割り当てられた監視装置１０からのディジタル動画データに基づく映像を、画面Ｇｉに表示する（i＝１，２，３，４，５，６）。そして、このような手法で、各監視装置１０が撮影した映像を、表示部４１の出力画面に同時表示する。
The screen setting information describes the identification information (address) of the
図６は、ＣＰＵ３３が実行する映像受信表示処理を表すフローチャートである。ＣＰＵ３３は、入力部４３から、映像受信表示処理の実行指示が入力されると、対応するプログラムを、ハードディスク装置３９から読み出し、このプログラムに従って、図６に示す映像受信表示処理を実行する。
FIG. 6 is a flowchart showing video reception display processing executed by the
映像受信表示処理を開始すると、ＣＰＵ３３は、まずＳ２１０にて、画質設定値の変更回数を示す画質変更カウンタＣＮＴをリセットし（即ち、ＣＮＴ＝０に設定し）、その後、映像表示ウィンドウＧ０を、表示部４１の出力画面上に生成する（Ｓ２１３）。また、Ｓ２１３の処理を終えると、Ｓ２１７に移行して、ハードディスク装置３９が記憶する端末数設定情報に基づき、その端末数設定情報が示す監視装置１０の個数Ｘを、パラメータｎに設定する（ｎ＝Ｘ）。
When the video reception display process is started, first, in S210, the
また、Ｓ２１７での処理を終えると、Ｓ２２０に移行し、ハードディスク装置３９が記憶する画面設定情報及び画質初期設定情報に基づき、各監視装置１０の初期設定を行う。具体的には、画質指定値として、画質初期設定情報が示す初期値を付し、モード指定値として、値「１」を付した設定コマンドを、インタフェース３１及び無線通信装置５０を介して、画面Ｇ１が割り当てられた監視装置１０に送信することにより、画面Ｇ１が割り当てられた監視装置１０の設定部１３ａに、モード設定値として、値「１」を設定すると共に、画質設定値として初期値を設定する。
When the process in S217 is completed, the process proceeds to S220, and the initial setting of each
その他、画質指定値として、画質初期設定情報が示す初期値を付し、モード指定値として、値「２」を付した設定コマンドを、インタフェース３１及び無線通信装置５０を介して、画面Ｇｉ（２≦ｉ≦Ｘ：ｉは自然数）が割り当てられた各監視装置１０に送信することにより、画面Ｇｉが割り当てられた各監視装置１０の設定部１３ａに、モード設定値として、値「２」を設定すると共に、画質設定値として初期値を設定する。
In addition, an initial value indicated by the initial image quality setting information is added as the image quality designation value, and the setting command with the value “2” as the mode designation value is displayed on the screen Gi (2) via the interface 31 and the
また、上述した手法でＸ個の各監視装置１０に対するモード及び画質設定が完了すると、ＣＰＵ３３は、各監視装置１０の設定部１３ａに設定した画質設定値を、現在の画質設定値Ｍｉ（ｉ＝１，２，…，Ｘ）として、ＲＡＭ３５に記憶する。
When the mode and image quality setting for the
また、Ｓ２２０での処理を終えると、ＣＰＵ３３は、各監視装置１０から送信されてくるディジタル動画データを、無線通信装置５０及びインタフェース３１を介して受信し（Ｓ２３０）、所定量又は所定期間分のディジタル動画データを受信すると、その受信データを解析して（Ｓ２４０）、画面Ｇ１に対応する監視装置１０から受信したディジタル動画データが、再生処理するのに良好な状態であるか否かを、所定の基準に照らし合わせて、判定する（Ｓ２５０）。
When the processing in S220 is completed, the
具体的には、画面Ｇ１に対応する監視装置１０から受信したディジタル動画データにおいて欠落しているデータ（パケット）の量が所定量以上ある場合に、受信した上記ディジタル動画データが良好な状態ではないと判定し、それ以外の場合には、受信した上記ディジタル動画データが良好な状態であると判定する。即ち、本実施例では、画面Ｇ１に対応する監視装置１０から受信したディジタル動画データに基づいて、このディジタル動画データの伝送過程における劣化の程度（具体的には、データ（パケット）欠落の程度）により、受信したディジタル動画データの状態が「良好な状態である」か「良好な状態ではない」かのいずれかの判定を下すのである。尚、詳細な判定基準は、設計者により任意に決定可能である。
Specifically, when the amount of missing data (packets) in the digital moving image data received from the
そして、受信したディジタル動画データの状態が良好な状態ではないと判断すると（Ｓ２５０でＮｏ）、ＣＰＵ３３は、Ｓ２６０に移行し、図７に示す低画質化処理を実行する。図７は、ＣＰＵ３３が実行する低画質化処理を表すフローチャートである。
If it is determined that the state of the received digital moving image data is not good (No in S250), the
低画質化処理を実行すると、ＣＰＵ３３は、画面Ｇｎが割り当てられた監視装置１０の現在の画質設定値Ｍｎが、最低値（即ち、値「１」）であるか否かを判断し（Ｓ３１０）、現在の画質設定値Ｍｎが最低値であると判断すると（Ｓ３１０でＹｅｓ）、Ｓ３５０に移行し、現在の画質設定値Ｍｎが、最低値ではないと判断すると（Ｓ３１０でＮｏ）、Ｓ３２０に移行する。
When the image quality reduction processing is executed, the
Ｓ３２０に移行すると、ＣＰＵ３３は、現在の画質設定値Ｍｎより１小さい値Ｍｎ−１を、画質指定値として付し、モード指定値として値「２」を付した設定コマンドを、インタフェース３１及び無線通信装置５０を介して、画面Ｇｎが割り当てられた監視装置１０に送信し、これによって、画面Ｇｎが割り当てられた監視装置１０における設定部１３ａに、現在の画質設定値Ｍｎよりも１段階小さい画質設定値Ｍｎ−１（換言すると、１段階低いビットレート）を設定する。また、設定変更が完了した旨の応答信号の受信後には、Ｓ３２５に移行し、更新後の画質設定値Ｍｎ−１を、画面Ｇｎが割り当てられた監視装置１０の現在の画質設定値Ｍｎとして記憶する（Ｍｎ←Ｍｎ−１）。
In step S320, the
また、Ｓ３２５での処理を終えると、ＣＰＵ３３は、Ｓ３３０に移行し、画質変更カウンタＣＮＴを１加算し（ＣＮＴ←ＣＮＴ＋１）、その後、所定時間Ｔ０だけ計時するようにタイマー設定を行って、タイマーに、時間Ｔ０分のカウントダウンを開始させる（Ｓ３３５）。尚、Ｓ３３５の処理実行時に、既にタイマーが動作している場合には、タイマーを一旦リセットした後、所定時間Ｔ０だけ計時するようにタイマー設定を行う（Ｓ３３５）。
When the processing in S325 is completed, the
また、Ｓ３３５での処理を終えると、ＣＰＵ３３は、Ｓ３９０に移行し、パラメータｎが値「２」である（ｎ＝２）か否かを判断する。そして、ｎ＝２ではないと判断すると（Ｓ３９０でＮｏ）、Ｓ３９３にて、パラメータｎの値を１減算し（ｎ←ｎ−１）、ｎ＝２であると判断すると（Ｓ３９０でＹｅｓ）、Ｓ３９７にて、パラメータｎを、値Ｘに設定し（ｎ＝Ｘ）、その後、当該低画質化処理を終了する。
When the process in S335 is completed, the
一方、Ｓ３５０に移行すると、ＣＰＵ３３は、画面Ｇ１以外の画面Ｇｉ（２≦ｉ≦Ｘ：ｉは自然数）が割り当てられた各監視装置１０の現在の画質設定値Ｍｉ（２≦ｉ≦Ｘ：ｉは自然数）が、全て最低値（即ち、値「１」）であるか否かを判断し、全て最低値ではないと判断すると（Ｓ３５０でＮｏ）、Ｓ３９０に移行し、全て最低値であると判断すると（Ｓ３５０でＹｅｓ）、Ｓ３６０に移行する。
On the other hand, when proceeding to S350, the
また、Ｓ３６０に移行すると、ＣＰＵ３３は、画面Ｇ１が割り当てられた監視装置１０の現在の画質設定値Ｍ１が、最低値（即ち、値「１」）であるか否かを判断し、現在の画質設定値Ｍ１が最低値であると判断すると（Ｓ３６０でＹｅｓ）、当該低画質化処理を終了し、現在の画質設定値Ｍ１が、最低値ではないと判断すると（Ｓ３６０でＮｏ）、Ｓ３７０に移行する。
In S360, the
そして、Ｓ３７０に移行すると、ＣＰＵ３３は、現在の画質設定値Ｍ１より１小さい値Ｍ１−１を、画質指定値として付し、モード指定値として値「１」を付した設定コマンドを、インタフェース３１及び無線通信装置５０を介して、画面Ｇ１が割り当てられた監視装置１０に送信し、これによって、画面Ｇ１が割り当てられた監視装置１０における設定部１３ａに、現在の画質設定値Ｍ１よりも１段階小さい画質設定値Ｍ１−１（換言すると、１段階低いビットレート）を設定する。また、設定変更が完了した旨の応答信号の受信後には、Ｓ３７５に移行し、更新後の画質設定値Ｍ１−１を、画面Ｇ１が割り当てられた監視装置１０の現在の画質設定値Ｍ１として記憶する（Ｍ１←Ｍ１−１）。
In S370, the
また、Ｓ３７５での処理を終えると、Ｓ３８０に移行し、画質変更カウンタＣＮＴを１加算し（ＣＮＴ←ＣＮＴ＋１）、その後、所定時間Ｔ０だけ計時するようにタイマー設定を行って、タイマーに、時間Ｔ０分のカウントダウンを開始させる（Ｓ３８５）。その後、当該低画質化処理を終了する。尚、Ｓ３８５の処理実行時に、既にタイマーが動作している場合には、タイマーを一旦リセットした後、所定時間Ｔ０だけ計時するようにタイマー設定を行う（Ｓ３８５）。 When the process in S375 is completed, the process proceeds to S380, where the image quality change counter CNT is incremented by 1 (CNT ← CNT + 1), and then the timer is set so as to count for a predetermined time T0. The minute countdown is started (S385). Thereafter, the image quality reduction process ends. If the timer is already operating at the time of executing the process of S385, the timer is reset so that the timer is set to measure for a predetermined time T0 (S385).
また、Ｓ２６０にて上記低画質化処理を終了すると、ＣＰＵ３３は、入力部４３を通じてユーザから当該映像受信表示処理の終了指示が入力されているか否かを判断する（Ｓ２９５）。そして、終了指示が入力されていると判断すると（Ｓ２９５でＹｅｓ）、当該映像受信表示処理を終了し、終了指示が入力されていないと判断すると（Ｓ２９５でＮｏ）、Ｓ２３０に移行する。また、Ｓ２３０に移行すると、ＣＰＵ３３は、監視装置１０から送信されてくる続きのディジタル映像データを、無線通信装置５０及びインタフェース３１を介して受信し、その後、Ｓ２４０以降の処理を実行する。
When the image quality reduction processing is completed in S260, the
また、Ｓ２５０にて、画面Ｇ１が割り当てられた監視装置１０から受信したディジタル動画データの状態が良好であると判断すると（Ｓ２５０でＹｅｓ）、ＣＰＵ３３は、各監視装置１０から受信したディジタル動画データを再生処理して、それらのディジタル動画データを、表示部入力用の再生信号に変換し、これを表示部４１に入力して、受信したディジタル動画データに基づく映像及び音声を、表示部４１に出力させる（Ｓ２７０）。
In S250, if it is determined that the state of the digital moving image data received from the
この際、ＣＰＵ３３は、映像表示ウィンドウＧ０における各画面Ｇ１〜Ｇ６に、対応する監視装置１０から受信したディジタル動画データに基づく映像が表示されるようにする。即ち、ＣＰＵ３３は、各監視装置１０から受信したディジタル動画データに基づく映像を、その監視装置１０に割り当てられた画面Ｇｉ（ｉ＝１，２，…Ｘ）に表示する。
At this time, the
また、Ｓ２７０での処理を終えると、ＣＰＵ３３は、画質変更カウンタＣＮＴがゼロであるか否かを判断し（Ｓ２８０）、画質変更カウンタＣＮＴがゼロであると判断すると（Ｓ２８０でＹｅｓ）、Ｓ２９５に移行し、画質変更カウンタＣＮＴがゼロではないと判断すると（Ｓ２８０でＮｏ）、Ｓ２８５に移行する。尚、本実施例では、低画質化処理にて、画質設定値を１段階下げる度に、画質変更カウンタＣＮＴを１加算し、後述する高画質化処理にて、画質設定値を１段階上げる度に、画質変更カウンタＣＮＴを１減算するので、画質変更カウンタＣＮＴがゼロである場合、各監視装置１０における設定部１３ａの画質設定値は、Ｓ２２０で設定した初期値と一致する。
When the process in S270 is completed, the
また、Ｓ２８５に移行すると、ＣＰＵ３３は、タイマー値がゼロであるか否かを判断し、タイマー値がゼロではない（即ち、タイマー値がゼロより大きい値である）と判断すると（Ｓ２８５でＮｏ）、最後に監視装置１０に対する画質設定値の変更を行ってから、所定時間Ｔ０が経過していないとして、Ｓ２９５に移行し、タイマー値がゼロであると判断すると（Ｓ２８５でＹｅｓ）、最後に監視装置１０に対する画質設定値の変更を行ってから、所定時間Ｔ０が経過したとして、Ｓ２９０に移行し、図８に示す高画質化処理を実行する。図８は、ＣＰＵ３３が実行する高画質化処理を表すフローチャートである。
In S285, the
高画質化処理を開始すると、ＣＰＵ３３は、画面Ｇ１が割り当てられた監視装置１０の現在の画質設定値Ｍ１が、Ｓ２２０で設定した初期値であるか否かを判断し（Ｓ４１０）、画面Ｇ１が割り当てられた監視装置１０の現在の画質設定値Ｍ１が、初期値であると判断すると（Ｓ４１０でＹｅｓ）、Ｓ４４０に移行し、画面Ｇ１が割り当てられた監視装置１０の現在の画質設定値Ｍ１が、初期値ではないと判断すると（Ｓ４１０でＮｏ）、Ｓ４２０に移行する。
When the image quality enhancement processing is started, the
また、Ｓ４２０に移行すると、ＣＰＵ３３は、現在の画質設定値Ｍ１より１大きい値Ｍ１＋１を、画質指定値として付し、モード指定値として、値「１」を付した設定コマンドを、インタフェース３１及び無線通信装置５０を介し、画面Ｇ１が割り当てられた監視装置１０に送信することによって、その監視装置１０における設定部１３ａに、現在の画質設定値Ｍ１よりも１段階大きい画質設定値Ｍ１＋１（換言すると、１段階高いビットレート）を、設定する。そして、設定変更が完了した旨の応答信号の受信後には、Ｓ４２５に移行し、更新後の画質設定値Ｍ１＋１を、現在の画質設定値Ｍ１として、ＲＡＭ３５に記憶する（Ｍ１←Ｍ１＋１）。
In step S420, the
また、Ｓ４２５での処理を終えると、ＣＰＵ３３は、Ｓ４３０に移行して、画質変更カウンタＣＮＴを１減算し（ＣＮＴ←ＣＮＴ−１）、その後、所定時間Ｔ０だけ計時するようにタイマー設定を行って、タイマーに、時間Ｔ０分のカウントダウンを開始させる（Ｓ４３５）。その後、当該高画質化処理を終了する。
When the processing in S425 is completed, the
一方、Ｓ４４０に移行すると、ＣＰＵ３３は、パラメータｎが値Ｘであるか否かを判断する。そして、ｎ＝Ｘではないと判断すると（Ｓ４４０でＮｏ）、Ｓ４４３にて、パラメータｎの値を１加算し（ｎ←ｎ＋１）、その後、Ｓ４５０に移行する。一方、ｎ＝Ｘであると判断すると（Ｓ４４０でＹｅｓ）、Ｓ４４７にて、パラメータｎを、値「２」に設定し（ｎ＝２）、その後、Ｓ４５０に移行する。
On the other hand, when proceeding to S440, the
また、Ｓ４５０に移行すると、ＣＰＵ３３は、画面Ｇｎが割り当てられた監視装置１０の現在の画質設定値Ｍｎが、Ｓ２２０で設定した初期値であるか否かを判断し、現在の画質設定値Ｍｎが、初期値であると判断すると（Ｓ４５０でＹｅｓ）、当該高画質化処理を終了し、現在の画質設定値Ｍｎが、初期値ではないと判断すると（Ｓ４５０でＮｏ）、Ｓ４６０に移行する。
In S450, the
また、Ｓ４６０に移行すると、ＣＰＵ３３は、現在の画質設定値Ｍｎより１大きい値Ｍｎ＋１を、画質指定値として付し、モード指定値として、値「２」を付した設定コマンドを、インタフェース３１及び無線通信装置５０を介し、画面Ｇｎが割り当てられた監視装置１０に送信することによって、その監視装置１０における設定部１３ａに、現在の画質設定値Ｍｎよりも１段階大きい画質設定値Ｍｎ＋１（換言すると、１段階高いビットレート）を、設定する。そして、設定変更が完了した旨の応答信号の受信後には、Ｓ４６５に移行し、更新後の画質設定値Ｍｎ＋１を、現在の画質設定値Ｍｎとして、ＲＡＭ３５に記憶する（Ｍｎ←Ｍｎ＋１）。
In step S460, the
また、Ｓ４６５での処理を終えると、ＣＰＵ３３は、Ｓ４７０に移行して、画質変更カウンタＣＮＴを１減算し（ＣＮＴ←ＣＮＴ−１）、その後、所定時間Ｔ０だけ計時するようにタイマー設定を行って、タイマーに、時間Ｔ０分のカウントダウンを開始させる（Ｓ４７５）。その後、当該高画質化処理を終了する。
When the processing in S465 is completed, the
このようにして、Ｓ２９０での高画質化処理を終えると、ＣＰＵ３３は、終了指示が入力されているか否かを判断し（Ｓ２９５）、終了指示が入力されていない場合には（Ｓ２９５でＮｏ）、Ｓ２３０に移行し、終了指示が入力されている場合には（Ｓ２９５でＹｅｓ）、当該映像受信表示処理を終了する。
In this way, when the image quality improvement processing in S290 is completed, the
以上、本実施例の監視システム１について説明したが、この監視システム１では、撮影装置としてのカメラ１１を内蔵する監視装置１０が、ディジタル変換部１３にて、カメラ１１からの入力信号を、設定部１３ａに設定された画質設定値に対応するビットレート（符号化ビットレート）で符号化し、ディジタル映像データを生成する。また、監視装置１０は、通信制御部１５ａ及び無線通信回路部１７（本発明の端末装置が内蔵する無線通信手段に相当）を通じて、このディジタル映像データを含むディジタル動画データを順次、情報処理装置３０に送信する。
The
その他、監視装置１０は、制御部１５にて設定切替処理を実行し、情報処理装置３０から送信される設定コマンド（本発明の設定指令信号に相当）を、無線通信回路部１７を介して受信すると（Ｓ１１０でＹｅｓ）、受信した設定コマンドに付された画質指定値に従って、設定部１３ａに画質を設定し、上記ビットレートを変更する（Ｓ１２０）。
In addition, the
また、情報処理装置３０は、各監視装置１０から送信されるディジタル動画データを、自身に接続された無線通信装置５０（本発明の情報処理装置が内蔵する無線通信手段に相当）を介して受信し（Ｓ２３０）、受信したディジタル動画データを順次、再生処理して、そのディジタル動画データに基づく映像を、表示部４１（本発明の表示装置に相当）に出力する（Ｓ２７０）。
Further, the
また、情報処理装置３０は、受信したディジタル動画データを解析して、画面Ｇ１に対応する監視装置１０から受信したディジタル動画データ、の伝送過程における劣化の程度により、画面Ｇ１に対応するディジタル動画データの受信状態の良否を判定し（Ｓ２５０）、状態が良くないと判定すると（Ｓ２５０でＮｏ）、状態が良いと判定されるまで、繰返し低画質化処理を実行し（Ｓ２６０）、画質設定値を１段階下げるように指示する設定コマンド（現在の画質設定値より１小さい画質指定値を付した設定コマンド）を、無線通信装置５０を介して、画面Ｇ１に対応する監視装置１０以外の各監視装置１０に送信する（Ｓ３２０）。
Further, the
これによって、情報処理装置３０は、画面Ｇ２〜Ｇ６に対応する各監視装置１０から送信されるディジタル動画データのビットレート（符号化ビットレート）を段階的に下げ、受信すべきディジタル動画データの総量を減少させる。
As a result, the
また、画面Ｇ１に対応する監視装置１０以外の各監視装置１０の画質設定値が最低値である場合には、画面Ｇ１に対応する監視装置１０に対し、画質設定値を１段階下げるように指示する設定コマンドを、無線通信装置５０を介して、状態が良いと判定されるまで繰返し送信することにより（Ｓ３７０）、画面Ｇ１に対応する監視装置１０から送信されるディジタル動画データのビットレートを段階的に下げ、受信すべきディジタル動画データの総量を減少させる。
In addition, when the image quality setting value of each
このように、本実施例では、ノイズ等で通信環境が悪化して、各監視装置１０から単位時間当たりに受信可能なデータの総量が減少しても、画面Ｇ１以外の画面Ｇ２〜Ｇ６に対応する各監視装置１０のビットレートを優先的に下げて、無線通信装置５０の受信能力に、各監視装置１０から送信データの総量を適合させるため、データ欠落を防止して、各監視装置１０から送信されるディジタル動画データを、良好に受信・再生することができる。また、本実施例によれば、画面Ｇ１に表示する映像の画質を落とさずに済むので、良好な画質で画面Ｇ１に映像を表示することができる。
Thus, in this embodiment, even if the communication environment deteriorates due to noise or the like and the total amount of data that can be received from each
従って、ユーザは、画面設定情報を編集して、画面Ｇ１に、重要な対象を撮影する監視装置１０を割り当てれば、通信環境の変動の影響を受けることなく、常時安定的に、良好な画質で、重要映像を画面Ｇ１に表示させることができる。
Therefore, if the user edits the screen setting information and assigns the
また、本実施例では、映像表示ウィンドウＧ０にて、表示部４１の出力画面を区画化すると共に、画面Ｇ１を、他の画面Ｇ２〜Ｇ６より広く設定するため、重要映像を、良好な画質で、高解像度に表示することができる。
In this embodiment, the output screen of the
その他、本実施例によれば、段階的にビットレートを下げるので、ビットレートの下げ幅を、必要最小限に収めることができる。従って、本実施例によれば、受信データの状態が良くないと判定された場合に（Ｓ２５０でＮｏ）、ただちに画面Ｇ１に対応する監視装置１０以外の各監視装置１０のビットレートを最低値まで下げるよりも、良好な画質で各映像を表示部４１に出力することができる。
In addition, according to the present embodiment, since the bit rate is lowered step by step, the reduction rate of the bit rate can be kept to the minimum necessary. Therefore, according to the present embodiment, when it is determined that the state of the received data is not good (No in S250), the bit rate of each
また、本実施例では、各監視装置１０にてビットレートの設定変更が行われていない状態で、画面Ｇ１に対応する受信データの状態が良いと判定され続けて（Ｓ２５０でＹｅｓ）、所定時間Ｔ０が経過する度に（Ｓ２８５でＹｅｓ）、高画質化処理を実行し（Ｓ２９０）、画質設定値を１段階上げるように指示する設定コマンド（現在の画質設定値より１大きい画質指定値を付した設定コマンド）を、無線通信装置５０を介して、各監視装置１０に送信する。これによって、情報処理装置３０は、各監視装置１０から送信されるディジタル動画データのビットレート（符号化ビットレート）を、初期値を超えない範囲で、段階的に上げ、映像出力時の画質を向上させる。
In the present embodiment, it is determined that the state of the received data corresponding to the screen G1 is good (Yes in S250) for a predetermined time without changing the bit rate setting in each
ビットレートを固定した状態で、所定時間Ｔ０、受信データの状態が良いと判定された場合には、通信環境が回復している可能性があるため、上述のようにビットレートを調整すれば、通信環境が良い状態である場合、各画面Ｇ１〜Ｇ６の映像を、最適な画質で、表示部４１に出力することができる。
If it is determined that the state of the received data is good for a predetermined time T0 with the bit rate fixed, the communication environment may be recovered, so if the bit rate is adjusted as described above, When the communication environment is good, the images on the screens G1 to G6 can be output to the
尚、本発明の端末装置は、本実施例のカメラ１１を除く監視装置１０の内部回路に相当し、本発明の情報処理装置は、無線通信装置５０及び情報処理装置３０に相当する。また、生成送信手段は、ディジタル変換部１３及び通信制御部１５ａに相当し、設定変更手段は、設定切替処理にて実現されている。その他、受信再生手段は、Ｓ２３０，Ｓ２７０の処理にて実現され、判定手段は、Ｓ２４０，Ｓ２５０の処理にて実現され、設定修正手段は、低画質化処理（具体的には、Ｓ３１０〜Ｓ３５０，Ｓ３９０〜Ｓ３９７）により実現され、設定復元手段は、高画質化処理（具体的には、Ｓ４４０〜Ｓ４７５）により実現されている。
The terminal device of the present invention corresponds to the internal circuit of the
また、本発明の通信システム及び情報処理装置並びにプログラムは、上記実施例に限定されるものではなく、種々の態様を採ることができる。
例えば、上記実施例では、Ｓ２５０で状態が良くないと判定する度に、一段階ずつビットレートを下げるように監視システム１を構成したが、Ｓ２５０で状態が良くないと判定した場合には、状態の悪さを数値化し、その数値に応じて、ビットレートの下げ幅を決定し、数値に応じたビットレートを、各監視装置１０に設定するようにしてもよい。
In addition, the communication system, the information processing apparatus, and the program of the present invention are not limited to the above-described embodiments, and can take various forms.
For example, in the above-described embodiment, the
その他、ビットレートの変更は、量子化ビットの変更、データ圧縮率の変更、１秒間当たりのフレーム数の変更、フレームサイズの変更等により実現することができるが、通信環境が悪化した場合には、画面Ｇ２〜Ｇ６のフレームサイズよりも小さいフレームサイズのディジタル映像データを、画面Ｇ２〜Ｇ６に対応する監視装置１０に生成させることで、画面Ｇ２〜Ｇ６に対応する監視装置１０から送信されるディジタル動画データのビットレートを下げるようにしてもよい。
In addition, the bit rate can be changed by changing the quantization bit, changing the data compression rate, changing the number of frames per second, changing the frame size, etc. Digital data transmitted from the
また、情報処理装置３０に各画面Ｇ１〜Ｇ６の録画機能を設ける場合には、録画機能がオンにされていない画面Ｇ２〜Ｇ６、録画機能がオンにされている画面Ｇ２〜Ｇ６、画面Ｇ１の順に、画質設定値を下げるようにして、各監視装置１０からの送信データの総量を通信環境に適合させるとよい。このように監視システム１を構成すれば、録画対象の映像を、良好な画質で録画することができる。また、この監視システム１においては、録画機能がオフからオンに切り替えられた画面に対応する監視装置１０の画質設定値を上げるように、情報処理装置３０を構成してもよい。
When the
その他、上記実施例では、監視システムに、本発明を適用した例を説明したが、本発明は、監視システムに限定されず、その他の通信システムに適用することができる。 In addition, although the example which applied this invention to the monitoring system was demonstrated in the said Example, this invention is not limited to a monitoring system, It can apply to another communication system.
１…監視システム、１０…監視装置、１１…カメラ、１３…ディジタル変換部、１３ａ…設定部、１５…制御部、１５ａ…通信制御部、１７…無線通信回路部、３０…情報処理装置、３１…インタフェース、３３…ＣＰＵ、３５…ＲＡＭ、３７…ＲＯＭ、３９…ハードディスク装置、４１…表示部、４３…入力部、５０…無線通信装置
DESCRIPTION OF
Claims (6)
を複数備えると共に、
前記各端末装置と無線通信可能な無線通信手段を備える情報処理装置、
を備える通信システムであって、
前記各端末装置は、
自装置に接続された撮影装置からの入力信号に基づき、予め設定されたビットレートの映像データを生成し、生成した映像データを順次、自装置内蔵の前記無線通信手段を介して、前記情報処理装置に送信する生成送信手段、
を備え、
少なくとも予め定められた特定の端末装置を除く前記各端末装置は、
前記情報処理装置から送信される設定指令信号を、自装置内蔵の前記無線通信手段を介して受信すると、受信した設定指令信号に従って、自装置における前記ビットレートの設定値を変更する設定変更手段、
を備え、
前記情報処理装置は、
表示装置における区画化された出力画面であって、前記特定の端末装置から受信した映像データに基づく映像を表示するための区画が、他の端末装置から受信した映像データに基づく映像を表示するための区画よりも広く設定された画面を通じて、前記各端末装置から受信した映像データに基づく映像を同時表示する手段であって、前記各端末装置から送信される映像データを、自装置内蔵の前記無線通信手段を介して受信し、受信した映像データを順次、再生処理して、前記映像データに基づく映像を、前記表示装置の出力画面を通じて同時表示する受信再生手段と、
前記受信再生手段が前記特定の端末装置から受信する映像データの受信状態の良否を、判定する判定手段と、
前記判定手段にて前記受信状態が良くないと判定されると、ビットレートの設定値を下げるように指示する設定指令信号を、自装置内蔵の前記無線通信手段を介して、前記特定の端末装置を除く各端末装置に、送信する設定修正手段と、
を備えることを特徴とする通信システム。 A terminal device provided with wireless communication means connected to the photographing device;
Including a plurality of
An information processing device comprising wireless communication means capable of wireless communication with each of the terminal devices;
A communication system comprising:
Each terminal device is
Based on an input signal from a photographing device connected to the own device, video data of a preset bit rate is generated, and the generated video data is sequentially transmitted through the wireless communication means built in the own device. Generating and transmitting means for transmitting to the device;
With
Each of the terminal devices excluding at least a specific terminal device determined in advance is
When the setting command signal transmitted from the information processing device is received via the wireless communication unit built in the device, a setting change unit that changes the setting value of the bit rate in the device according to the received setting command signal;
With
The information processing apparatus includes:
A partitioned output screen in a display device, wherein a partition for displaying video based on video data received from the specific terminal device displays video based on video data received from another terminal device Means for simultaneously displaying video based on video data received from each of the terminal devices through a screen set wider than the section of the video data transmitted from each of the terminal devices. Receiving and reproducing means for sequentially receiving the video data received through the communication means, processing the received video data sequentially, and displaying the video based on the video data through the output screen of the display device ;
Determination means for determining whether the reception state of the video data received by the reception / playback means from the specific terminal device is good;
If the determination means determines that the reception state is not good, a setting command signal for instructing to lower the set value of the bit rate is sent to the specific terminal device via the wireless communication means built in the device itself. Setting correction means for transmitting to each terminal device except for,
A communication system comprising:
前記各端末装置にてビットレートの設定変更が行われていない状態で、所定時間、前記判定手段にて前記受信状態が良いと判定され続けると、初期値を超えない範囲で、前記ビットレートの設定値を上げるように指示する設定指令信号を、自装置内蔵の前記無線通信手段を介して、前記特定の端末装置を除く各端末装置に送信する設定復元手段、
を設けたことを特徴とする請求項１又は請求項２記載の通信システム。 In the information processing apparatus,
If it is determined that the reception state is good by the determination unit for a predetermined time without changing the bit rate setting in each terminal device, the bit rate is within a range not exceeding the initial value. A setting restoration means for transmitting a setting command signal for instructing to increase a setting value to each terminal device except the specific terminal device via the wireless communication means built in the device itself;
The communication system according to claim 1, wherein a communication system is provided.
前記各端末装置は、
自装置に接続された撮影装置からの入力信号に基づき、予め設定されたビットレートの映像データを生成し、生成した映像データを順次、自装置内蔵の前記無線通信手段を介して、前記情報処理装置に送信する生成送信手段、
を備え、
少なくとも予め定められた特定の端末装置を除く前記各端末装置は、
前記情報処理装置から送信される設定指令信号を、自装置内蔵の前記無線通信手段を介して受信すると、受信した設定指令信号に従って、自装置における前記ビットレートの設定値を変更する設定変更手段、
を備え、
当該情報処理装置は、
表示装置における区画化された出力画面であって、前記特定の端末装置から受信した映像データに基づく映像を表示するための区画が、他の端末装置から受信した映像データに基づく映像を表示するための区画よりも広く設定された画面を通じて、前記各端末装置から受信した映像データに基づく映像を同時表示する手段であって、前記各端末装置から送信される映像データを、自装置内蔵の前記無線通信手段を介して受信し、受信した映像データを順次、再生処理して、前記映像データに基づく映像を、前記表示装置の出力画面を通じて同時表示する受信再生手段と、
前記受信再生手段が前記特定の端末装置から受信する映像データの受信状態の良否を、判定する判定手段と、
前記判定手段にて前記受信状態が良くないと判定されると、ビットレートの設定値を下げるように指示する設定指令信号を、自装置内蔵の前記無線通信手段を介して、前記特定の端末装置を除く各端末装置に、送信する設定修正手段と、
を備えることを特徴とする情報処理装置。 An information processing apparatus including a wireless communication unit capable of wireless communication with a plurality of terminal devices connected to an imaging device and including a wireless communication unit,
Each terminal device is
Based on an input signal from a photographing device connected to the own device, video data of a preset bit rate is generated, and the generated video data is sequentially transmitted through the wireless communication means built in the own device. Generating and transmitting means for transmitting to the device;
With
Each of the terminal devices excluding at least a specific terminal device determined in advance is
When the setting command signal transmitted from the information processing device is received via the wireless communication unit built in the device, a setting change unit that changes the setting value of the bit rate in the device according to the received setting command signal;
With
The information processing apparatus
A partitioned output screen in a display device, wherein a partition for displaying video based on video data received from the specific terminal device displays video based on video data received from another terminal device Means for simultaneously displaying video based on video data received from each of the terminal devices through a screen set wider than the section of the video data transmitted from each of the terminal devices. Receiving and reproducing means for sequentially receiving the video data received through the communication means, processing the received video data sequentially, and displaying the video based on the video data through the output screen of the display device ;
Determination means for determining whether the reception state of the video data received by the reception / playback means from the specific terminal device is good;
If the determination means determines that the reception state is not good, a setting command signal for instructing to lower the set value of the bit rate is sent to the specific terminal device via the wireless communication means built in the device itself. Setting correction means for transmitting to each terminal device except for,
An information processing apparatus comprising:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2006084678A JP4842678B2 (en) | 2005-03-31 | 2006-03-27 | Communication system, information processing apparatus, and program |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005104820 | 2005-03-31 | ||
| JP2005104820 | 2005-03-31 | ||
| JP2006084678A JP4842678B2 (en) | 2005-03-31 | 2006-03-27 | Communication system, information processing apparatus, and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2006311520A JP2006311520A (en) | 2006-11-09 |
| JP4842678B2 true JP4842678B2 (en) | 2011-12-21 |
Family
ID=37477783
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2006084678A Expired - Fee Related JP4842678B2 (en) | 2005-03-31 | 2006-03-27 | Communication system, information processing apparatus, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4842678B2 (en) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5387395B2 (en) * | 2009-12-28 | 2014-01-15 | ソニー株式会社 | Receiving device, receiving method and program |
| JP6022886B2 (en) | 2012-10-16 | 2016-11-09 | 株式会社日立国際電気 | Wireless surveillance camera system and wireless surveillance camera device |
| JP6173141B2 (en) * | 2013-09-13 | 2017-08-02 | セコム株式会社 | Wireless communication system and wireless transmitter |
| JP6276414B2 (en) * | 2014-09-11 | 2018-02-07 | 富士フイルム株式会社 | Imaging control apparatus, imaging control method, imaging system, and program |
| JP2016116004A (en) * | 2014-12-12 | 2016-06-23 | コニカミノルタ株式会社 | Monitored person monitoring device and method, and monitored person monitoring system |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06261061A (en) * | 1993-03-08 | 1994-09-16 | Nippon Telegr & Teleph Corp <Ntt> | Congestion elimination control system for atm communications network |
| JP2000050128A (en) * | 1998-07-30 | 2000-02-18 | Toshiba Corp | Photographing recording system, photographing device and recording device |
| JP2004032680A (en) * | 1998-08-31 | 2004-01-29 | Hitachi Ltd | Monitor system and network system |
| JP2001244979A (en) * | 2000-02-28 | 2001-09-07 | Nippon Telegr & Teleph Corp <Ntt> | Quality control method for ip network, network managing device for the same, and medium with recorded program for executing the same |
| JP3650337B2 (en) * | 2001-02-01 | 2005-05-18 | 日本電信電話株式会社 | Server device |
| JP2003179663A (en) * | 2001-12-12 | 2003-06-27 | Matsushita Electric Ind Co Ltd | Av distribution system |
| JP2004023505A (en) * | 2002-06-18 | 2004-01-22 | Idea System Kk | Centralized monitoring system |
| JP2005051517A (en) * | 2003-07-29 | 2005-02-24 | Hitachi Kokusai Electric Inc | Video delivery system coding video signal required by client out of video signals from two or more imaging apparatuses using encoder, and performing its delivery to client connected via communication network |
-
2006
- 2006-03-27 JP JP2006084678A patent/JP4842678B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2006311520A (en) | 2006-11-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9699099B2 (en) | Method of transmitting data in a communication system | |
| US8594184B2 (en) | Method and apparatus for controlling video-audio data playing | |
| JP4842678B2 (en) | Communication system, information processing apparatus, and program | |
| JP6463041B2 (en) | Image processing apparatus, image processing method, and program | |
| US10389785B2 (en) | Method for adaptively streaming an audio/visual material | |
| WO2009112547A1 (en) | Method of transmitting data in a communication system | |
| TWI628958B (en) | Full-frame buffer to improve video performance in low-latency video communication systems | |
| KR101686155B1 (en) | A method for configuration of video stream output from a digital video camera | |
| JP2007281716A (en) | Wireless moving picture transmission system, wireless moving picture transmission method, wireless moving picture transmission apparatus, wireless moving picture transmission method, and computer program thereof, wireless moving picture receiving apparatus, wireless moving picture receiving method, and computer program thereof | |
| JP2008011177A (en) | Dynamic quality control method by streaming distribution, and network system | |
| CN112423074B (en) | Audio and video synchronization processing method and device, electronic equipment and storage medium | |
| JP2011071628A (en) | Stream communication system, server device and client device | |
| JP2004147030A (en) | Receiver, data communication system and data communication method | |
| CN115278319A (en) | Screen projection data transmission method and device, electronic equipment and storage medium | |
| JP2006311519A (en) | Communication system, information processor and information processing program | |
| KR20230138052A (en) | Optional motion-compensated frame interpolation | |
| JP2006173694A (en) | Image compression processing apparatus | |
| US10764616B2 (en) | Image transmission apparatus, image transmission method, and recording medium | |
| US8791981B2 (en) | Bit rate control apparatus and method thereof | |
| JP2004354677A (en) | Information processing device, method therefor, program therefor, recording medium recorded with he program, and reproducing device | |
| JP2009135769A (en) | Image processing device | |
| JP2006121578A (en) | Image transmission system, image transmitting apparatus, image receiving apparatus and image transmitting method | |
| JP5403784B2 (en) | Video processing apparatus and noise reduction method | |
| JP4921928B2 (en) | Video receiving apparatus and video receiving method | |
| JP2011135154A (en) | Image processor and method of controlling the same |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090305 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110628 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110824 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110913 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20111006 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141014 Year of fee payment: 3 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |