JP7284280B2 - surveillance camera system - Google Patents
surveillance camera system Download PDFInfo
- Publication number
- JP7284280B2 JP7284280B2 JP2021548008A JP2021548008A JP7284280B2 JP 7284280 B2 JP7284280 B2 JP 7284280B2 JP 2021548008 A JP2021548008 A JP 2021548008A JP 2021548008 A JP2021548008 A JP 2021548008A JP 7284280 B2 JP7284280 B2 JP 7284280B2
- Authority
- JP
- Japan
- Prior art keywords
- camera
- image
- processing
- control device
- brightness
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Description
本発明は、列車のドア付近をカメラ映像で監視する監視カメラシステムに関する。 The present invention relates to a monitoring camera system for monitoring the vicinity of train doors with camera images.
列車に乗降する際の乗客の安全確保は、列車運行にとって重要な課題である。このような安全対策の一環として、車両の側面に取り付けられたカメラでドア付近を撮影し、そのカメラ映像を運転台のモニタに表示させる車両監視CCTV(Closed Circuit Television)システムが開発されている(例えば、特許文献1参照)。 Ensuring the safety of passengers when getting on and off trains is an important issue for train operations. As part of such safety measures, a vehicle monitoring CCTV (Closed Circuit Television) system has been developed in which a camera attached to the side of a vehicle photographs the vicinity of the door and displays the camera image on the monitor in the driver's cab. For example, see Patent Document 1).
このようなシステムを利用することで、列車のドライバは、駅停車時に運転台のモニタで乗客の乗降を確認し、列車の運行を行うことが可能となる。従来は、乗客の安全の監視にはリアルタイム性が求められるため、遅延が発生しないアナログシステムが優先して用いられていたが、近年では、IP技術の進歩により低遅延伝送が可能となったので、全ての装置がIPネットワークに接続されるようになった。 By using such a system, the train driver can confirm the boarding and alighting of passengers on the monitor in the driver's cab when the train stops at a station, and operate the train. In the past, since real-time performance was required for passenger safety monitoring, delay-free analog systems were preferentially used, but in recent years, advances in IP technology have made low-delay transmission possible. , all devices are now connected to the IP network.
車両の側面にカメラを取り付けた場合、太陽光などの逆光の状態、埃や塵、汚れ、乗客による悪戯(例えば、レンズ窓への異物貼付)などによって、正常なカメラ映像が得られない場合がある。その結果、カメラ映像の視認性が低下してしまい、列車のドライバが乗客の乗降を確認する作業が困難になりかねない。なお、上記の映像不良は、車両の外側にカメラを取り付けた場合に発生しやすいが、車両の内側にカメラを取り付ける場合にも同様の懸念がある。 When the camera is mounted on the side of the vehicle, normal camera images may not be obtained due to backlight conditions such as sunlight, dust, dirt, mischief by passengers (for example, foreign objects stuck to the lens window), etc. be. As a result, the visibility of the camera image is deteriorated, which may make it difficult for the train driver to confirm the boarding and alighting of passengers. It should be noted that the above image defects are likely to occur when the camera is mounted on the outside of the vehicle, but there is a similar concern when mounting the camera on the inside of the vehicle.
本発明は、上記のような従来の事情に鑑みて為されたものであり、車両のドア付近を撮像したカメラ映像の視認性の低下を抑制することが可能な監視カメラシステムを提供することを目的とする。 SUMMARY OF THE INVENTION It is an object of the present invention to provide a monitoring camera system capable of suppressing deterioration in the visibility of camera images taken near the door of a vehicle. aim.
本発明では、上記目的を達成するために、監視カメラシステムを以下のように構成した。
すなわち、本発明に係る監視カメラシステムは、列車の車両の外側に取り付けられ、前記車両のドア付近を撮像するカメラと、前記カメラにより撮像されたカメラ映像を表示するモニタと、前記カメラ映像の特徴量に基づいて前記カメラ映像の視認性を判定し、前記カメラ映像の視認性が低下したと判定された場合に、前記カメラ映像の視認性を向上させる画像処理の実行を前記カメラに指示する制御装置と、を備えたことを特徴とする。In order to achieve the above objects, the present invention configures a monitoring camera system as follows.
That is, the surveillance camera system according to the present invention includes a camera mounted outside a train car for capturing an image of the vicinity of the door of the car, a monitor for displaying the camera image captured by the camera, and features of the camera image. control for determining the visibility of the camera image based on the amount, and instructing the camera to execute image processing for improving the visibility of the camera image when it is determined that the visibility of the camera image has decreased and a device.
ここで、前記カメラは、自身のカメラ映像を解析して特徴量を算出し、その特徴量を前記カメラ映像に付随させて送信するように構成してもよい。 Here, the camera may be configured to analyze its own camera image, calculate a feature amount, attach the feature amount to the camera image, and transmit the feature amount.
また、前記制御装置は、前記カメラ映像の視認性が低下したと判定された回数が所定の閾値を超えるまで、前記画像処理の実行の指示を待機するように構成してもよい。 Further, the control device may be configured to wait for an instruction to execute the image processing until the number of times the visibility of the camera image is determined to have decreased exceeds a predetermined threshold.
また、前記制御装置は、前記カメラ映像の視認性が低下したと判定された場合に、その判定結果の情報を記録するように構成してもよい。 Further, the control device may be configured to record information of the determination result when it is determined that the visibility of the camera image has deteriorated.
また、前記制御装置は、前記判定結果の情報に基づいて、前記カメラに対する保守の必要性を前記モニタに表示させるように構成してもよい。 Further, the control device may be configured to display the need for maintenance of the camera on the monitor based on the information of the determination result.
本発明によれば、車両のドア付近を撮像したカメラ映像の視認性の低下を抑制することが可能な監視カメラシステムを提供することができる。 Advantageous Effects of Invention According to the present invention, it is possible to provide a surveillance camera system capable of suppressing deterioration in the visibility of a camera image taken near the door of a vehicle.
本発明の一実施形態に係る監視カメラシステムについて、図面を参照して説明する。
図1には、本発明の一実施形態に係る監視カメラシステムである車載型の車両監視CCTVシステムの概略的な構成例を示してある。図1は、1号車10-1、2号車10-2、3号車10-3、4号車10-4の4台を連結した4両編成の列車を示している。A monitoring camera system according to an embodiment of the present invention will be described with reference to the drawings.
FIG. 1 shows a schematic configuration example of a vehicle-mounted vehicle monitoring CCTV system, which is a monitoring camera system according to an embodiment of the present invention. FIG. 1 shows a four-car train in which four cars, 1st car 10-1, 2nd car 10-2, 3rd car 10-3, and 4th car 10-4 are connected.
各車両10-1~10-4にはスイッチングハブ11が1台ずつ配置されており、これらをカスケード接続することでIPネットワークを構築している。また、各車両10-1~10-4の外側の側面には、乗客が列車に乗降する様子を撮像できるように、その車両のドア12に向けてカメラ13を取り付けてある。すなわち、カメラ13でドア付近を撮影するように構成されている。
One
先頭車両である1号車10-1及び4号車10-4には、各車両のカメラ13で撮影されたカメラ映像を表示するモニタ14が設置されている。また、1号車10-1には、本システム(車両監視CCTV)を制御する制御装置16と、カメラ映像を録画する録画装置15も設置されている。
The first car 10-1 and the fourth car 10-4, which are the leading cars, are provided with
制御装置16は、メモリやプロセッサなどのハードウェア資源を備えており、ハードディスクやフラッシュメモリ等のデータ記憶装置に記憶されているプログラムをメインメモリ上に読み出してプロセッサにより実行することで、後述する各処理を実現するように構成されている。なお、制御装置16の機能は、このようなソフトウェアにより実現する構成に限定されず、専用ハードウェアにより実現してもよい。
The
図2には、本例の監視カメラシステムにおける駅停車時の映像処理のフローチャートを例示してある。列車が駅に停車すると、制御装置16により以下の処理が行われる。なお、映像の取得対象の車両を示す号車カウンタに、初期値として“0”がセットされているものとする。
FIG. 2 illustrates a flowchart of video processing when the train stops at a station in the monitoring camera system of this example. When the train stops at the station, the
制御装置16は、まず、列車のドア12が開いたか否かを判定し(ステップS11)、開いていることが確認できた場合に、号車カウンタをインクリメント(“1”を加算)する(ステップS12)。次に、号車カウンタが5号車を示しているか否かを判定する(ステップS13)。5号車は存在しない車両なので、号車カウンタが5号車を示している場合(ステップS13;Yes)には、号車カウンタをクリア(本例では“1”をセット)する(ステップS14)。つまり、映像の取得対象の車両を1号車から4号車の順にループさせる。
The
次に、号車カウンタに対応する車両のカメラ13からカメラ映像を取得する(ステップS15~S21)。すなわち、号車カウンタが1号車を示している場合(ステップS15;Yes)は1号車10-1のカメラ13からカメラ映像を取得し(ステップS18)、号車カウンタが2号車を示している場合(ステップS16;Yes)は2号車10-2のカメラ13からカメラ映像を取得し(ステップS19)、号車カウンタが3号車を示している場合(ステップS17;Yes)は3号車10-3のカメラ13からカメラ映像を取得し(ステップS20)、他の場合(ステップS17;No)は4号車10-4のカメラ13からカメラ映像を取得する(ステップS21)。
Next, a camera image is acquired from the
制御装置16は、カメラ映像を取得した後、後述の特徴量処理(ステップS30)を実行する。その後、列車のドア12が閉じたか否かを判定し(ステップS23)、閉じていない場合(ステップS23;No)には、号車カウンタのインクリメント(ステップS12)に戻る。一方、列車のドア12が閉じたことを確認できた場合(ステップS23;Yes)には、処理を終了する。
After obtaining the camera image, the
図2の映像処理における特徴量処理(ステップS30)について、図3のフローチャートを参照して説明する。
特徴量処理ではまず、制御装置16により、カメラ映像のヘッダ情報からカメラ映像の特徴量が取得される。本例では、カメラ映像全体の輝度に関する特徴量の一種である平均輝度値及び輝度階調幅が取得される(ステップS31,S32)。The feature amount processing (step S30) in the video processing of FIG. 2 will be described with reference to the flowchart of FIG.
In the feature amount processing, first, the
平均輝度値は、カメラ映像を構成する各画素の輝度の平均値である。輝度階調幅は、カメラ映像を構成する各画素の輝度の出現頻度のヒストグラムにおいて、出現頻度が基準値以上となる輝度の階調幅(範囲)である。これら特徴量は、カメラ13が自身のカメラ映像を解析して算出しており、カメラ映像のヘッダ情報に格納されている。特徴量の計算は、視認性を向上させる画像処理(後述する低輝度化処理、高輝度化処理、霞補正処理など)を施す前のカメラ映像を解析して行われる。
The average luminance value is the average luminance value of each pixel forming the camera image. The luminance gradation width is a luminance gradation width (range) in which the frequency of appearance is equal to or higher than a reference value in a histogram of the luminance appearance frequency of each pixel forming the camera image. These feature amounts are calculated by the
次いで、制御装置16は、取得したカメラ映像の特徴量に基づいて、高輝度対応処理(ステップS40)、低輝度対応処理(ステップS60)、霞対応処理(ステップS80)をそれぞれ実行する。なお、これら処理(ステップS40,S60,S80)を実行する順序は任意である。
Next, the
図3の特徴量処理における高輝度対応処理(ステップS40)について、図4のフローチャートを参照して説明する。
高輝度対応処理ではまず、制御装置16により、カメラ13の低輝度化機能がONかOFFかが判定される(ステップS41)。低輝度化機能は、画像処理により映像全体(全画素)の輝度値を低くする低輝度化処理を実行する機能であり、様々な方式で製品化されている。通常は低輝度化機能がOFFなので、その場合の処理について先に説明し、その後、低輝度化機能がONの場合の処理について説明する。The high brightness handling process (step S40) in the feature quantity process of FIG. 3 will be described with reference to the flowchart of FIG.
In the high-brightness handling process, first, the
低輝度化機能がONではない場合(ステップS41;No)、制御装置16は、平均輝度値がA1より大きく且つA2より小さい(A1<平均輝度値<A2)という条件を満たすかを判定する(ステップS42)。A1,A2は、図9のヒストグラム例に示すように、映像の全体的な輝度が異常に高いかを判定するための閾値であり、予め設定されている。本条件を満たす場合は、映像の全体的な輝度が異常に高く、映像が白飛びしていることを示している。
If the brightness reduction function is not ON (step S41; No), the
A1<平均輝度値<A2である場合(ステップS42;Yes)、つまり、カメラ映像が高輝度状態の場合は、制御装置16は以下の処理を実行する。
まず、高輝度カウンタをインクリメント(“1”を加算)する(ステップS43)。高輝度カウンタは、高輝度状態の継続状況をカウントするものであり、初期値として“0”がセットされているものとする。When A1<average luminance value<A2 (step S42; Yes), that is, when the camera image is in a high luminance state, the
First, the high luminance counter is incremented ("1" is added) (step S43). The high-luminance counter counts the continuation of the high-luminance state, and is set to "0" as an initial value.
次に、高輝度カウンタの値がD1より大きい(カウンタ値>D1)という条件を満たすかを判定する(ステップS44)。D1は、低輝度化機能のON(起動)とOFF(停止)を短時間で繰り返さないように時間的猶予を設けるための閾値であり、予め設定されている。高輝度カウンタの値がD1より大きい場合は、高輝度警告表示処理(ステップS45)、高輝度記録処理(ステップS46)及び低輝度化ON処理(ステップS47)を実施した後に、高輝度カウンタに “0”をセットして初期化する(ステップS48)。 Next, it is determined whether the condition that the value of the high luminance counter is greater than D1 (counter value>D1) is satisfied (step S44). D1 is a preset threshold value for providing a time allowance so that ON (activation) and OFF (stop) of the brightness reduction function are not repeated in a short period of time. If the value of the high-brightness counter is greater than D1, after performing high-brightness warning display processing (step S45), high-brightness recording processing (step S46), and low-brightness ON processing (step S47), " 0" is set for initialization (step S48).
高輝度警告表示処理(ステップS45)では、制御装置16が、映像の平均輝度が高輝度である旨をモニタ13に表示させる。高輝度記録処理(ステップS46)では、制御装置16が、映像の平均輝度が高輝度である旨の情報をイベントとして、自身の記憶領域に、イベント発生時刻や発生カメラID(イベントの発生元映像を生成したカメラの識別情報)などと共に記録する。低輝度化ON処理(ステップS47)では、制御装置16が、イベントの発生元映像を生成したカメラ13に対して低輝度化機能をONにする制御信号を送信する。これにより、カメラ映像が高輝度状態になったカメラ13で、カメラ映像に対する低輝度化処理が開始されることになる。
In the high luminance warning display process (step S45), the
低輝度化機能がONである場合(ステップS41;Yes)、制御装置16は、平均輝度値がA1より大きく且つA2より小さい(A1<平均輝度値<A2)という条件を満たすかを判定する(ステップS52)。本例では、ステップS42で用いる閾値A1,A2と同じ閾値をステップS52で用いているが、別の閾値A1’,A2’を用いてもよい。
If the brightness reduction function is ON (step S41; Yes), the
A1<平均輝度値<A2でない場合(ステップS52;No)、つまり、カメラ映像が非高輝度状態の場合は、制御装置16は以下の処理を実行する。
まず、非高輝度カウンタをインクリメント(“1”を加算)する(ステップS53)。非高輝度カウンタは、非高輝度状態の継続状況をカウントするものであり、初期値として“0”がセットされているものとする。If not A1<average luminance value<A2 (step S52; No), that is, if the camera image is in a non-high luminance state, the
First, the non-high luminance counter is incremented ("1" is added) (step S53). The non-high brightness counter counts the continuation of the non-high brightness state, and is set to "0" as an initial value.
次に、非高輝度カウンタの値がD2より大きい(カウンタ値>D2)という条件を満たすかを判定する(ステップS54)。D2は、低輝度化機能のONとOFFを短時間で繰り返さないように時間的猶予を設けるための閾値であり、予め設定されている。D2は、D1と同じ値でもよいし、D1とは異なる値でもよい。非高輝度カウンタの値がD2より大きい場合は、非高輝度記録処理(ステップS56)及び低輝度化OFF処理(ステップS57)を実施した後に、非高輝度カウンタに “0”をセットして初期化する(ステップS58)。 Next, it is determined whether the condition that the value of the non-high luminance counter is greater than D2 (counter value>D2) is satisfied (step S54). D2 is a preset threshold for providing a time allowance so that the brightness reduction function is not repeatedly turned on and off in a short time. D2 may have the same value as D1, or may have a different value from D1. If the value of the non-high brightness counter is greater than D2, the non-high brightness recording process (step S56) and the low brightness OFF process (step S57) are performed, and then the non-high brightness counter is set to "0" for initialization. (step S58).
非高輝度記録処理(ステップS56)では、制御装置16が、映像の平均輝度が高輝度でなくなった旨の情報をイベントとして、自身の記憶領域に、イベント発生時刻や発生カメラIDなどと共に記録する。低輝度化OFF処理(ステップS57)では、制御装置16が、イベントの発生元映像を生成したカメラ13に対して低輝度化機能をOFFにする制御信号を送信する。これにより、カメラ映像が高輝度状態ではなくなったカメラ13で、カメラ映像に対する低輝度化処理が停止されることになる。
In the non-high-brightness recording process (step S56), the
図3の特徴量処理における低輝度対応処理(ステップS60)について、図5のフローチャートを参照して説明する。
低輝度対応処理ではまず、制御装置16により、カメラ13の高輝度化機能がONかOFFかが判定される(ステップS61)。高輝度化機能は、画像処理により映像全体(全画素)の輝度値を高くする高輝度化処理を実行する機能であり、様々な方式で製品化されている。通常は高輝度化機能がOFFなので、その場合の処理について先に説明し、その後、高輝度化機能がONの場合の処理について説明する。The low luminance handling process (step S60) in the feature quantity process of FIG. 3 will be described with reference to the flowchart of FIG.
In the low luminance handling process, first, the
高輝度化機能がONではない場合(ステップS61;No)、制御装置16は、平均輝度値がB1より大きく且つB2より小さい(B1<平均輝度値<B2)という条件を満たすかを判定する(ステップS62)。B1,B2は、図10のヒストグラム例に示すように、映像の全体的な輝度が異常に低いかを判定するための閾値であり、予め設定されている。本条件を満たす場合は、映像の全体的な輝度が異常に低く、映像が暗くなっていることを示している。
If the brightness enhancement function is not ON (step S61; No), the
B1<平均輝度値<B2である場合(ステップS62;Yes)、つまり、カメラ映像が低輝度状態の場合は、制御装置16は以下の処理を実行する。
まず、低輝度カウンタをインクリメント(“1”を加算)する(ステップS63)。低輝度カウンタは、低輝度状態の継続状況をカウントするものであり、初期値として“0”がセットされているものとする。When B1<average luminance value<B2 (step S62; Yes), that is, when the camera image is in a low luminance state, the
First, the low luminance counter is incremented ("1" is added) (step S63). The low-luminance counter counts the continuation of the low-luminance state, and is set to "0" as an initial value.
次に、低輝度カウンタの値がE1より大きい(カウンタ値>E1)という条件を満たすかを判定する(ステップS64)。E1は、高輝度化機能のON(起動)とOFF(停止)を短時間で繰り返さないように時間的猶予を設けるための閾値であり、予め設定されている。低輝度カウンタの値がE1より大きい場合は、低輝度警告表示処理(ステップS65)、低輝度記録処理(ステップS66)及び高輝度化ON処理(ステップS67)を実施した後に、低輝度カウンタに “0”をセットして初期化する(ステップS68)。 Next, it is determined whether the condition that the value of the low luminance counter is greater than E1 (counter value>E1) is satisfied (step S64). E1 is a preset threshold for providing a time allowance so that the ON (activation) and OFF (stop) of the high brightness function are not repeated in a short time. If the value of the low-luminance counter is greater than E1, the low-luminance warning display process (step S65), the low-luminance recording process (step S66), and the high-luminance ON process (step S67) are executed, and then the low-luminance counter is set to " 0" is set for initialization (step S68).
低輝度警告表示処理(ステップS65)では、制御装置16が、映像の平均輝度が低輝度である旨をモニタ13に表示させる。低輝度記録処理(ステップS66)では、制御装置16が、映像の平均輝度が低輝度である旨の情報をイベントとして、自身の記憶領域に、イベント発生時刻や発生カメラID(イベントの発生元映像を生成したカメラの識別情報)などと共に記録する。高輝度化ON処理(ステップS67)では、制御装置16が、イベントの発生元映像を生成したカメラ13に対して高輝度化機能をONにする制御信号を送信する。これにより、カメラ映像が低輝度状態になったカメラ13で、カメラ映像に対する高輝度化処理が開始されることになる。
In the low luminance warning display process (step S65), the
高輝度化機能がONである場合(ステップS61;Yes)、制御装置16は、平均輝度値がB1より大きく且つB2より小さい(B1<平均輝度値<B2)という条件を満たすかを判定する(ステップS72)。本例では、ステップS62で用いる閾値B1,B2と同じ閾値をステップS72で用いているが、別の閾値B1’,B2’を用いてもよい。
If the brightness enhancement function is ON (step S61; Yes), the
B1<平均輝度値<B2でない場合(ステップS72;No)、つまり、カメラ映像が非低輝度状態の場合は、制御装置16は以下の処理を実行する。
まず、非低輝度カウンタをインクリメント(“1”を加算)する(ステップS73)。非低輝度カウンタは、非低輝度状態の継続状況をカウントするものであり、初期値として“0”がセットされているものとする。If not B1<average luminance value<B2 (step S72; No), that is, if the camera image is in a non-low luminance state, the
First, the non-low luminance counter is incremented ("1" is added) (step S73). The non-low luminance counter counts the continuation of the non-low luminance state, and is set to "0" as an initial value.
次に、非低輝度カウンタの値がE2より大きい(カウンタ値>E2)という条件を満たすかを判定する(ステップS74)。E2は、高輝度化機能のONとOFFを短時間で繰り返さないように時間的猶予を設けるための閾値であり、予め設定されている。E2は、E1と同じ値でもよいし、E1とは異なる値でもよい。非低輝度カウンタの値がE2より大きい場合は、非低輝度記録処理(ステップS76)及び高輝度化OFF処理(ステップS77)を実施した後に、非低輝度カウンタに “0”をセットして初期化する(ステップS78)。 Next, it is determined whether the condition that the value of the non-low luminance counter is greater than E2 (counter value>E2) is satisfied (step S74). E2 is a preset threshold for providing a time allowance so that the high brightness function is not repeatedly turned on and off in a short period of time. E2 may have the same value as E1, or may have a different value from E1. If the value of the non-low brightness counter is greater than E2, after performing the non-low brightness recording process (step S76) and the high brightness OFF process (step S77), the non-low brightness counter is set to "0" for initialization. (step S78).
非低輝度記録処理(ステップS76)では、制御装置16が、映像の平均輝度が低輝度でなくなった旨の情報をイベントとして、自身の記憶領域に、イベント発生時刻や発生カメラIDなどと共に記録する。高輝度化OFF処理(ステップS77)では、制御装置16が、イベントの発生元映像を生成したカメラ13に対して高輝度化機能をOFFにする制御信号を送信する。これにより、カメラ映像が低輝度状態ではなくなったカメラ13で、カメラ映像に対する高輝度化処理が停止されることになる。
In the non-low luminance recording process (step S76), the
図3の特徴量処理における霞対応処理(ステップS80)について、図6のフローチャートを参照して説明する。
霞対応処理ではまず、制御装置16により、カメラ13の霞補正機能がONかOFFかが判定される(ステップS81)。霞補正機能は、図8のようなヒストグラムが図7のようなヒストグラムになるように、画像処理により階調を補正する霞補正処理を実行する機能であり、様々な方式で製品化されている。通常は霞補正機能がOFFなので、その場合の処理について先に説明し、その後、霞補正機能がONの場合の処理について説明する。The haze handling process (step S80) in the feature quantity process of FIG. 3 will be described with reference to the flowchart of FIG.
In the haze handling process, first, the
霞補正機能がONではない場合(ステップS81;No)、制御装置16は、輝度階調幅がCより小さい(輝度階調幅<C)という条件を満たすかを判定する(ステップS82)。輝度階調幅は、例えば、出現頻度がH1を超える輝度の最大値L2から最小値L1を減算することで算出される(図7、図8のヒストグラム例を参照)。Cは、映像に霞がかかったような状態(以下、「霞状態」という)かを判定するための閾値であり、予め設定されている。霞状態は、霞がかかっている場合のほか、カメラのレンズ窓が汚れている場合や、太陽光により逆光となる場合などでも発生する。本条件を満たす場合、つまり、図8のヒストグラム例に示すように輝度階調幅が狭い場合は、映像が霞状態であることを示している。
If the haze correction function is not ON (step S81; No), the
輝度階調幅<Cである場合(ステップS82;Yes)、つまり、カメラ映像が霞状態の場合は、制御装置16は以下の処理を実行する。
まず、霞状態カウンタをインクリメント(“1”を加算)する(ステップS83)。霞状態カウンタは、霞状態の継続状況をカウントするものであり、初期値として“0”がセットされているものとする。If the brightness gradation width<C (step S82; Yes), that is, if the camera image is in a hazy state, the
First, the haze state counter is incremented ("1" is added) (step S83). The hazy state counter counts the continuation of the hazy state, and is set to "0" as an initial value.
次に、霞状態カウンタの値がF1より大きい(カウンタ値>F1)という条件を満たすかを判定する(ステップS84)。F1は、霞補正機能のON(起動)とOFF(停止)を短時間で繰り返さないように時間的猶予を設けるための閾値であり、予め設定されている。霞状態カウンタの値がF1より大きい場合は、霞状態記録処理(ステップS86)及び霞補正ON処理(ステップS87)を実施した後に、霞状態カウンタに “0”をセットして初期化する(ステップS88)。 Next, it is determined whether the condition that the value of the haze state counter is greater than F1 (counter value>F1) is satisfied (step S84). F1 is a preset threshold for providing a time allowance so that the haze correction function is not repeatedly turned on (activated) and turned off (stopped) in a short time. If the value of the haze state counter is greater than F1, the haze state counter is initialized by setting "0" (step S86) and the haze correction ON process (step S87). S88).
霞状態記録処理(ステップS86)では、制御装置16が、映像が霞状態である旨の情報をイベントとして、自身の記憶領域に、イベント発生時刻や発生カメラID(イベントの発生元映像を生成したカメラの識別情報)などと共に記録する。霞補正ON処理(ステップS87)では、制御装置16が、イベントの発生元映像を生成したカメラ13に対して霞補正機能をONにする制御信号を送信する。これにより、カメラ映像が霞状態になったカメラ13で、カメラ映像に対する霞補正処理が開始されることになる。
In the foggy state recording process (step S86), the
霞補正機能がONである場合(ステップS81;Yes)、制御装置16は、輝度階調幅がCより小さい(輝度階調幅<C)という条件を満たすかを判定する(ステップS92)。本例では、ステップS82で用いる閾値Cと同じ閾値をステップS92で用いているが、別の閾値C’を用いてもよい。
If the haze correction function is ON (step S81; Yes), the
輝度階調幅<Cでない場合(ステップS92;No)、つまり、カメラ映像が非霞状態の場合は、制御装置16は以下の処理を実行する。
まず、非霞状態カウンタをインクリメント(“1”を加算)する(ステップS93)。非霞状態カウンタは、非霞状態の継続状況をカウントするものであり、初期値として“0”がセットされているものとする。If the brightness gradation width<C is not satisfied (step S92; No), that is, if the camera image is in a non-haze state, the
First, the non-haze state counter is incremented ("1" is added) (step S93). The non-haze state counter counts the continuation of the non-haze state, and is set to "0" as an initial value.
次に、非霞状態カウンタの値がF2より大きい(カウンタ値>F2)という条件を満たすかを判定する(ステップS94)。F2は、霞補正機能のONとOFFを短時間で繰り返さないように時間的猶予を設けるための閾値であり、予め設定されている。F2は、F1と同じ値でもよいし、F1とは異なる値でもよい。非霞状態カウンタの値がF2より大きい場合は、霞補正OFF記録処理(ステップS56)及び霞補正OFF処理(ステップS97)を実施した後に、非霞状態カウンタに “0”をセットして初期化する(ステップS98)。 Next, it is determined whether the condition that the value of the non-haze state counter is greater than F2 (counter value>F2) is satisfied (step S94). F2 is a preset threshold for providing a time allowance so that the haze correction function is not repeatedly turned on and off in a short period of time. F2 may have the same value as F1, or may have a different value from F1. If the value of the non-haze state counter is greater than F2, the haze correction OFF recording process (step S56) and the haze correction OFF process (step S97) are performed, and then the non-haze state counter is initialized by setting "0". (step S98).
霞補正OFF記録処理(ステップS96)では、制御装置16が、映像が霞状態でない旨の情報をイベントとして、自身の記憶領域に、イベント発生時刻や発生カメラIDなどと共に記録する。霞補正OFF処理(ステップS97)では、制御装置16が、イベントの発生元映像を生成したカメラ13に対して霞補正機能をOFFにする制御信号を送信する。これにより、カメラ映像が霞状態ではなくなったカメラ13で、カメラ映像に対する霞補正処理が停止されることになる。
In the haze correction OFF recording process (step S96), the
以上のようにして、制御装置16は、列車の駅停車時に、カメラ13の映像の特徴量に基づいて映像不良(視認性低下)に関する判定を行い、検出された映像不良に応じた視認性向上処理の実行を指示する制御信号をカメラ13に送信する。
As described above, when the train stops at a station, the
その後、列車の運行が終了して列車の保守が行われる際に、制御装置16は、上述した高輝度/非高輝度記録、低輝度/非低輝度記録、霞補正ON/OFF記録などで記録された情報に基づいて、カメラ13の状態を判定し、判定結果をモニタ14に表示させて保守員に通知する。なお、制御装置16は、高輝度/非高輝度記録、低輝度/非低輝度記録、霞補正ON/OFF記録などで記録された情報そのものを、モニタ14に表示させてもよい。
After that, when the train operation is finished and the train is maintained, the
図11には、カメラ状態の判定に使用する判定表を例示してある。図11の判定表では、霞補正機能が長時間ONになっている場合にカメラ状態を「汚れ」と判定し、高輝度化機能が長時間ONの場合にカメラ状態を「レンズ窓塞ぎ」と判定し、低輝度化機能が長時間ONの場合にカメラ状態を「カメラ異常」と判定し、上記のいずれにも該当しない場合にカメラ状態を「正常」と判定することが規定されている。つまり、本例の制御装置16は、霞補正機能、高輝度化機能、低輝度化機能の各々についてON状態の時間を計算し、ON状態の時間が所定の閾値以上か否かに応じて、カメラ13の状態を判定する。
FIG. 11 exemplifies a judgment table used for judging the camera state. In the determination table of FIG. 11, the camera state is determined to be "dirty" when the haze correction function is ON for a long time, and the camera state is determined to be "lens window closed" when the brightness enhancement function is ON for a long time. If the brightness reduction function is ON for a long time, the camera state is determined to be "camera abnormal", and if none of the above applies, the camera state is determined to be "normal". That is, the
図12には、カメラ状態の判定結果の表示例を示してある。同図に示すように、モニタ14には、列車に搭載されているカメラ13の各々について、そのカメラ状態を示す情報(つまり、保守の必要性を示す情報)が表示される。したがって、保守員は、列車の保守の際にモニタ14の表示を確認することで、列車に搭載されているカメラ13の各々がどのようなカメラ状態であり、保守の必要性があるかを容易に認識することが可能となる。
FIG. 12 shows a display example of the determination result of the camera state. As shown in the figure, the
以上のように、本例の監視カメラシステムは、列車の車両10の外側に取り付けられ、車両10のドア付近を撮像するカメラ13と、カメラ13により撮像されたカメラ映像を表示するモニタ14と、カメラ映像の特徴量に基づいてカメラ映像の視認性を判定し、カメラ映像の視認性が低下したと判定された場合に、カメラ映像の視認性を向上させる画像処理(低輝度化処理、高輝度化処理、霞補正処理など)の実行をカメラ13に指示する制御装置16とを備えている。
As described above, the surveillance camera system of this example includes the
したがって、本例の監視カメラシステムによれば、車両のドア付近を撮像したカメラ映像の視認性の低下に応じて、視認性の低下態様に対応する画像処理が自動的にカメラ13で実行される。これにより、カメラ映像の視認性が低下して列車のドライバが乗客の乗降を確認する作業に支障が生じてしまうことを抑制できるようになる。
Therefore, according to the monitoring camera system of the present embodiment, the
また、本例の監視カメラシステムでは、カメラ13が、自身のカメラ映像を解析して特徴量を算出し、その特徴量をカメラ映像に付随させて送信する構成となっている。したがって、カメラ映像の視認性を向上させる画像処理を施す前のカメラ映像(オリジナルのカメラ映像)から特徴量を算出できるので、画像処理によってカメラ映像の特徴量が変化してしまう懸念がない。また、制御装置16の処理負担を軽減することもできる。
Further, in the monitoring camera system of this example, the
また、本例の監視カメラシステムでは、制御装置16が、カメラ映像の視認性が低下したと判定された回数が所定の閾値を超えるまで、カメラ映像の視認性を向上させる画像処理の実行の指示を待機する構成となっている。したがって、画像処理の開始と終了が短時間で繰り返されてしまうことを防止できる。
Further, in the monitoring camera system of this example, the
また、本例の監視カメラシステムでは、制御装置16が、カメラ映像の視認性が低下したと判定された場合に、その判定結果の情報を記録する構成となっている。したがって、例えば保守員が、事後的(列車の停止後など)にカメラ映像の視認性の低下状況を確認することが可能となる。
Further, in the monitoring camera system of this example, when the
本例の監視カメラシステムでは、制御装置16が、判定結果の情報に基づいて、カメラ13に対する保守の必要性をモニタ14に表示させる構成となっている。したがって、例えば保守員は、モニタ14の表示を確認するだけで、レンズ窓の清掃などのカメラ13に対する保守の必要性を容易に認識することが可能となる。
In the monitoring camera system of this example, the
なお、上記の説明では、4両編成の列車を例にして説明したが、車両の編成数は任意であることは言うまでもない。また、上記の説明では、制御装置16がカメラ映像の特徴量に基づいてカメラ13の制御を行う機能を備えているが、その機能を他の装置(例えば、モニタ14又は録画装置15)が備える構成としてもよい。また、上記の説明では、カメラ13がカメラ映像の視認性を向上させる画像処理を行う構成となっているが、その画像処理を他の装置(例えば、モニタ14、録画装置15又は制御装置16)が行う構成としてもよい。
In the above description, a four-car train is used as an example, but it goes without saying that the number of trains is arbitrary. Also, in the above description, the
以上、本発明について詳細に説明したが、本発明は上記のような構成に限定されるものではなく、上記以外の構成により実現してもよいことは言うまでもない。例えば、本発明は、鉄道上を走行する列車のほか、モノレールや路面電車など、種々の形式の列車に適用することが可能である。 Although the present invention has been described in detail above, it goes without saying that the present invention is not limited to the configuration described above, and may be realized by configurations other than those described above. For example, the present invention can be applied to various types of trains, such as monorails and streetcars, in addition to trains running on railroads.
また、本発明は、例えば、本発明に係る処理を実行する方法や方式、そのような方法や方式をプロセッサやメモリ等のハードウェア資源を有するコンピュータにより実現するためのプログラム、そのようなプログラムを記憶する記憶媒体などとして提供することも可能である。 Further, the present invention provides, for example, a method or system for executing processing according to the present invention, a program for realizing such a method or system by a computer having hardware resources such as a processor and a memory, and such a program. It is also possible to provide it as a storage medium for storing.
本発明は、列車のドア付近をカメラ映像で監視する監視カメラシステムに利用することができる。 INDUSTRIAL APPLICABILITY The present invention can be used in a surveillance camera system that monitors the vicinity of train doors with camera images.
10-1,10-2,10-3,10-4:車両、 11:スイッチングハブ、 12:ドア、 13:カメラ、 14:モニタ、 15:録画装置、 16:制御装置 10-1, 10-2, 10-3, 10-4: vehicle, 11: switching hub, 12: door, 13: camera, 14: monitor, 15: recording device, 16: control device
Claims (5)
前記カメラにより撮像されたカメラ映像を表示するモニタと、
前記カメラ映像の特徴量に基づいて前記カメラ映像の視認性を判定する判定処理を行い、前記カメラ映像の視認性が低下したと判定された場合に、前記カメラ映像の視認性を向上させる画像処理の実行を前記カメラに指示する制御装置と、を備え、
前記カメラは、前記制御装置の指示に従ってカメラ映像に前記画像処理を施す機能と、前記画像処理を施す前のカメラ映像を解析して特徴量を算出する機能とを有し、前記画像処理を施したカメラ映像を送信する場合に、前記画像処理を施す前のカメラ映像の特徴量を付随させて送信し、
前記制御装置は、前記カメラに前記画像処理を実行させている間は、前記画像処理を施したカメラ映像に付随して送信される、前記画像処理を施す前のカメラ映像の特徴量に基づいて、前記判定処理を行うことを特徴とする車載型の監視カメラシステム。 A camera attached to the outside of a train car and imaging the vicinity of the door of the car;
a monitor that displays a camera image captured by the camera;
Image processing for performing determination processing for determining the visibility of the camera image based on the feature amount of the camera image, and improving the visibility of the camera image when it is determined that the visibility of the camera image has decreased. and a control device that instructs the camera to execute
The camera has a function of performing the image processing on the camera image according to an instruction from the control device, and a function of analyzing the camera image before the image processing and calculating a feature amount, and performing the image processing. When transmitting the camera image obtained by performing the image processing, the feature amount of the camera image before the image processing is attached and transmitted,
While causing the camera to perform the image processing, the control device transmits the camera image accompanying the camera image that has undergone the image processing, based on the feature amount of the camera image before the image processing. , a vehicle-mounted monitoring camera system characterized by performing the determination process .
前記画像処理は、低輝度化処理、高輝度化処理、又は霞補正処理を含むことを特徴とする車載型の監視カメラシステム。 In the surveillance camera system according to claim 1,
The vehicle-mounted monitoring camera system , wherein the image processing includes brightness reduction processing, brightness enhancement processing, or haze correction processing .
前記制御装置は、前記カメラ映像の視認性が低下したと判定された回数が所定の閾値を超えるまで、前記画像処理の実行の指示を待機することを特徴とする監視カメラシステム。 In the surveillance camera system according to claim 1 or claim 2,
The surveillance camera system, wherein the control device waits for an instruction to execute the image processing until the number of times the visibility of the camera image is determined to have decreased exceeds a predetermined threshold.
前記制御装置は、前記カメラ映像の視認性が低下したと判定された場合に、その判定結果の情報を記録することを特徴とする監視カメラシステム。 The surveillance camera system according to any one of claims 1 to 3,
A monitoring camera system, wherein, when it is determined that the visibility of the camera image has deteriorated, the control device records information of the determination result.
前記制御装置は、前記判定結果の情報に基づいて、前記カメラに対する保守の必要性を前記モニタに表示させることを特徴とする監視カメラシステム。 In the surveillance camera system according to claim 4,
The surveillance camera system, wherein the control device causes the monitor to display the necessity of maintenance of the camera based on the information of the determination result.
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/037335 WO2021059339A1 (en) | 2019-09-24 | 2019-09-24 | Monitoring camera system |
Publications (3)
Publication Number | Publication Date |
---|---|
JPWO2021059339A1 JPWO2021059339A1 (en) | 2021-04-01 |
JPWO2021059339A5 JPWO2021059339A5 (en) | 2022-04-28 |
JP7284280B2 true JP7284280B2 (en) | 2023-05-30 |
Family
ID=75165197
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021548008A Active JP7284280B2 (en) | 2019-09-24 | 2019-09-24 | surveillance camera system |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7284280B2 (en) |
WO (1) | WO2021059339A1 (en) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003174642A (en) | 2001-12-05 | 2003-06-20 | Mitsubishi Electric Corp | Smear detecting method and image processor employing the smear detecting method |
JP2005349997A (en) | 2004-06-11 | 2005-12-22 | Toshiba Corp | Device for detecting foreign matter at passenger door in railway vehicle |
JP2009121144A (en) | 2007-11-15 | 2009-06-04 | Fuji Electric Systems Co Ltd | Safety check system for vehicle door |
JP2011130131A (en) | 2009-12-16 | 2011-06-30 | Canon Inc | Image processing apparatus and image processing method |
JP2013131835A (en) | 2011-12-20 | 2013-07-04 | Mitsubishi Electric Corp | Image recorder |
WO2014007153A1 (en) | 2012-07-03 | 2014-01-09 | クラリオン株式会社 | Vehicle surrounding monitoring device |
JP2017212597A (en) | 2016-05-25 | 2017-11-30 | 株式会社デンソー | Image processing apparatus |
-
2019
- 2019-09-24 JP JP2021548008A patent/JP7284280B2/en active Active
- 2019-09-24 WO PCT/JP2019/037335 patent/WO2021059339A1/en active Application Filing
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003174642A (en) | 2001-12-05 | 2003-06-20 | Mitsubishi Electric Corp | Smear detecting method and image processor employing the smear detecting method |
JP2005349997A (en) | 2004-06-11 | 2005-12-22 | Toshiba Corp | Device for detecting foreign matter at passenger door in railway vehicle |
JP2009121144A (en) | 2007-11-15 | 2009-06-04 | Fuji Electric Systems Co Ltd | Safety check system for vehicle door |
JP2011130131A (en) | 2009-12-16 | 2011-06-30 | Canon Inc | Image processing apparatus and image processing method |
JP2013131835A (en) | 2011-12-20 | 2013-07-04 | Mitsubishi Electric Corp | Image recorder |
WO2014007153A1 (en) | 2012-07-03 | 2014-01-09 | クラリオン株式会社 | Vehicle surrounding monitoring device |
JP2017212597A (en) | 2016-05-25 | 2017-11-30 | 株式会社デンソー | Image processing apparatus |
Also Published As
Publication number | Publication date |
---|---|
WO2021059339A1 (en) | 2021-04-01 |
JPWO2021059339A1 (en) | 2021-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4738778B2 (en) | Image processing device, driving support device, and driving support system | |
US8208022B2 (en) | Apparatus and method for removing blooming of camera image | |
JP2006292543A (en) | Rainfall sensor | |
JP2017208750A (en) | Video monitoring device, video display system, and vehicle | |
JPWO2016056088A1 (en) | In-vehicle camera control device | |
CN107566744A (en) | For catching the apparatus and method of the reduced face-image of the reflection on glasses in vehicle | |
EP3829926A1 (en) | A trailer cargo monitoring apparatus for a vehicle | |
KR101660254B1 (en) | recognizing system of vehicle number for parking crossing gate | |
WO2019026159A1 (en) | Video display system and video display method | |
JP7284280B2 (en) | surveillance camera system | |
JP6672202B2 (en) | In-vehicle camera system, attached matter detection device, attached matter removal method, and attached matter detection program | |
CN112584030B (en) | Driving video recording method and electronic equipment | |
KR101522757B1 (en) | Method for removing noise of image | |
KR102119215B1 (en) | Image displaying method, Computer program and Recording medium storing computer program for the same | |
US20070177815A1 (en) | Method, video display system and automobile video display system | |
JP3084208B2 (en) | Image processing device | |
JP2010141755A (en) | System, method and program for monitoring road | |
KR20100011180A (en) | External image sensing system and control method thereof | |
JP7463910B2 (en) | Drive recorder, drive recorder control method, and imaging control program | |
JP3675231B2 (en) | Hydrous substance adhesion detection device | |
KR20100053719A (en) | Method of driving wiper using charge coupled device camera and wiper driving apparatus | |
JP2020136731A (en) | Abnormality detection system, mobile object, abnormality detection method, and program | |
CN115942131B (en) | Method for guaranteeing vehicle looking-around function, cabin system, vehicle and storage medium | |
KR102497614B1 (en) | Adaptive univeral monitoring system and driving method threrof | |
KR102127166B1 (en) | Control system and method for driving video recorder having the foreign object removal function |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220218 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220218 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230502 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230518 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7284280 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |