JP4712741B2 - Still-time identification image generation method and apparatus - Google Patents
Still-time identification image generation method and apparatus Download PDFInfo
- Publication number
- JP4712741B2 JP4712741B2 JP2007042548A JP2007042548A JP4712741B2 JP 4712741 B2 JP4712741 B2 JP 4712741B2 JP 2007042548 A JP2007042548 A JP 2007042548A JP 2007042548 A JP2007042548 A JP 2007042548A JP 4712741 B2 JP4712741 B2 JP 4712741B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- time
- stationary
- still
- identifying
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Studio Devices (AREA)
- Image Analysis (AREA)
Description
本発明は、静止物体を検出する方法及び装置に係り、特に、複数の静止物体の像又は領域とともに静止物体それぞれの静止時間に関する情報が記入された画像である静止時間識別用画像を、テレビカメラなどから得られる画像信号から生成する静止時間識別用画像生成方法及び装置に関する。 The present invention relates to a method and an apparatus for detecting a stationary object, and more particularly, to a still camera for identifying a stationary time identification image, which is an image in which information about stationary time of each stationary object is entered together with a plurality of stationary object images or regions. The present invention relates to an image generation method and apparatus for identifying still time generated from an image signal obtained from the above.
これまでに、静止物体を検出する技術として、静止物体の像を抽出する技術と、一定時間静止している物体を検出する技術とが提案されている。 So far, as a technique for detecting a stationary object, a technique for extracting an image of a stationary object and a technique for detecting an object stationary for a certain period of time have been proposed.
静止物体の像を抽出する技術は、背景画像生成方法又は背景画像更新方法と呼ばれている。代表的な背景画像生成方法は、指数平滑法である。指数平滑法は、時間をtとし、入力画像をf(t)とし、背景画像をg(t)とすると、 A technique for extracting an image of a stationary object is called a background image generation method or a background image update method. A typical background image generation method is an exponential smoothing method. In the exponential smoothing method, when time is t, an input image is f (t), and a background image is g (t),
一方、一定時間静止している物体を検出する技術の多くは、物体の静止時間を計測し、静止時間が所定のしきい値に達した静止物体だけを検出する(例えば、特許文献1)。このような技術は、検出した静止物体の静止時間をある程度保証する。
静止物体の像を抽出する技術として代表的な指数平滑法は、[数1]からわかるようにIIR(Infinite Impulse Response)のローパスフィルタである。そのため、抽出された静止物体の像は、理論的には静止時間が保証されない。すなわち、指数平滑法は、静止物体を検出することはできるが、静止物体の静止時間を計測することはできない。 A typical exponential smoothing method as a technique for extracting an image of a stationary object is an IIR (Infinite Impulse Response) low-pass filter as can be seen from [Equation 1]. Therefore, the stationary time of the extracted still object image is theoretically not guaranteed. That is, the exponential smoothing method can detect a stationary object but cannot measure the stationary time of the stationary object.
一定時間静止している物体を検出する技術の多くは、複数の静止物体を二つの静止時間の群に分類して検出すること、すなわち静止時間がある一つのしきい値以上か否かを判別して検出することはできるが、複数の静止物体を三つ以上の静止時間の群に分類して検出することはできない。 Many technologies that detect objects that are stationary for a certain period of time classify and detect multiple stationary objects into two stationary time groups, that is, whether or not the stationary time is above a certain threshold. However, it is impossible to detect a plurality of stationary objects by classifying them into three or more stationary time groups.
本発明の目的は、複数の静止物体を静止時間別に分類して検出することができる静止時間識別用画像生成方法及び装置を提供することである。 An object of the present invention is to provide a still time identifying image generation method and apparatus capable of classifying and detecting a plurality of still objects according to still time.
本発明による静止時間識別用画像生成方法は、
画像を所定の時間間隔で取得する画像取得ステップと、
前記画像を前記時間間隔ごとに保存する画像保存ステップと、
前記画像取得ステップで現在取得した画像と、前記画像保存ステップで保存された複数の過去の画像それぞれとを比較し、画素ごと又は小領域ごとに類似度を求め、当該類似度に基づいて、静止時間に関する情報が記入された2次元配列である静止時間マップを更新したものを取得する静止時間マップ取得ステップと、
前記静止時間マップに基づいて、複数の静止物体の像又は領域とともに静止物体それぞれの静止時間に関する情報が記入された画像である静止時間識別用画像を取得する静止時間識別用画像取得ステップとを具えることを特徴とする。
An image generation method for identifying still time according to the present invention includes:
An image acquisition step of acquiring images at predetermined time intervals;
An image storage step for storing the image at each time interval;
Compare the image currently acquired in the image acquisition step with each of a plurality of past images stored in the image storage step, determine the similarity for each pixel or small region, and based on the similarity, A stationary time map acquisition step of acquiring an updated stationary time map which is a two-dimensional array in which information about time is entered;
A stationary time identifying image obtaining step for obtaining a stationary time identifying image, which is an image in which information about stationary time of each stationary object is entered together with images or regions of a plurality of stationary objects based on the stationary time map. It is characterized by.
本発明による静止時間識別用画像生成装置は、
画像を所定の時間間隔で取得する画像取得手段と、
前記画像を前記時間間隔ごとに保存する画像保存手段と、
前記画像取得手段で現在取得した画像と、前記画像保存手段で保存された複数の過去の画像それぞれとを比較し、画素ごと又は小領域ごとに類似度を求め、当該類似度に基づいて、静止時間に関する情報が記入された2次元配列である静止時間マップを更新したものを取得する静止時間マップ取得手段と、
前記静止時間マップに基づいて、複数の静止物体の像又は領域とともに静止物体それぞれの静止時間に関する情報が記入された画像である静止時間識別用画像を取得する静止時間識別用画像取得手段とを具えることを特徴とする。
An image generating apparatus for identifying a still time according to the present invention includes:
Image acquisition means for acquiring images at predetermined time intervals;
Image storage means for storing the image at each time interval;
The image currently acquired by the image acquisition means and each of a plurality of past images stored by the image storage means are compared , a similarity is obtained for each pixel or each small region, and based on the similarity, A stationary time map acquisition means for acquiring an updated stationary time map that is a two-dimensional array in which information on time is entered;
A stationary time identifying image acquiring means for acquiring a stationary time identifying image, which is an image in which information on the stationary time of each stationary object is entered together with images or regions of a plurality of stationary objects based on the stationary time map. It is characterized by.
本発明によれば、現在取得した画像と、保存された複数の過去の画像それぞれとを比較し、それぞれの比較結果を統合し、静止時間に関する情報が記入された2次元配列である静止時間マップを取得し、静止時間マップに基づいて、複数の静止物体の像又は領域とともに静止物体それぞれの静止時間に関する情報が記入された画像である静止時間識別用画像を取得する。前記静止時間識別用画像を取得することによって、複数の静止物体を静止時間別に分類して検出することができる。 According to the present invention, the currently acquired image is compared with each of a plurality of stored past images, the respective comparison results are integrated, and a stationary time map that is a two-dimensional array in which information about stationary time is entered. And a still-time identification image, which is an image in which information related to the stationary time of each stationary object is entered together with a plurality of stationary object images or regions, based on the stationary time map. By acquiring the still-time identification image, a plurality of stationary objects can be classified and detected by the stationary time.
前記それぞれの比較結果を統合するときに、それぞれの比較結果に基づいて、前記静止時間マップを1回以上更新することによって、前記保存された複数の過去の画像の中に含まれている過去の動物体の像に起因するその像の形跡が、前記静止時間マップの中から排除される。また、前記静止時間識別用画像の信頼性を向上させるために、前記比較を行うときに、画素単位のマッチング又は領域ベースマッチングを行うとともに、前記比較を行う前に、前記現在取得した画像と、前記保存された複数の過去の画像それぞれとを比較し、それぞれの比較結果に基づいて、前記保存された複数の過去の画像それぞれを幾何補正することが好適である。さらに、前記静止時間識別用画像の中に記入された複数の静止物体の像又は領域を、静止時間別に色分けする又は明度で分けることによって、注目すべき静止物体の像又は領域の識別が容易になる。 When integrating the respective comparison results, the past time map included in the stored past images is updated by updating the stationary time map one or more times based on the respective comparison results. Traces of the image due to the image of the moving object are excluded from the stationary time map. In addition, in order to improve the reliability of the still-time identification image, when performing the comparison, performing pixel-by-pixel matching or region-based matching, and before performing the comparison, the currently acquired image, It is preferable that each of the plurality of stored past images is compared, and each of the plurality of stored past images is geometrically corrected based on each comparison result. Furthermore, by distinguishing the images or regions of a plurality of stationary objects entered in the still-time identification image by color or brightness according to the stationary time, it is easy to identify the stationary object image or region to be noted. Become.
本発明による静止時間識別用画像生成方法及び装置の実施の形態を、図面を参照して詳細に説明する。
図1は、本発明による静止時間識別用画像生成装置の実施の形態を示す図である。本実施の形態の静止時間識別用画像生成装置は、駐車違反の取り締まりにおける駐車車両の監視に使用され、画像取得部1と、画像保存部2と、画像幾何補正部3と、静止時間マップ取得部4と、静止時間識別用画像取得部5とを具える。
Embodiments of an image generation method and apparatus for identifying still time according to the present invention will be described in detail with reference to the drawings.
FIG. 1 is a diagram showing an embodiment of an image generating apparatus for identifying a still time according to the present invention. The still-time-identification image generating apparatus according to the present embodiment is used for monitoring a parked vehicle in a parking violation control, and acquires an
画像取得部1は、所定の時間間隔Δtでテレビカメラなどから現在の入力画像を取得する。所定の時間間隔Δtを任意の正の値に設定することができ、例えば、駐車違反の取り締まりにおける駐車車両の監視の場合には1分程度に設定する。
The
画像保存部2は、ハードディスクや半導体メモリのような記憶媒体によって実現され、現在の入力画像のコピーを所定の時間間隔Δtごとに保存する。
The
画像幾何補正部3は、画像保存部2から過去の入力画像を所定の枚数(例えば、4枚)だけ読み出し、現在の入力画像と過去の入力画像それぞれとを比較し、それぞれの比較結果に基づいて、過去の入力画像それぞれを幾何補正する。
The image
静止時間マップ取得部4は、現在の入力画像と幾何補正後の過去の入力画像それぞれとの間で領域ベースマッチングを行い、画素ごと又は小領域ごとに類似度を求め、類似度に基づいて、静止時間に関する情報が記入された2次元配列である静止時間マップを生成する。
The still time
静止時間識別用画像取得部5は、静止時間マップに基づいて、複数の静止物体の像又は領域とともに静止物体それぞれの静止時間に関する情報が記入された画像である静止時間識別用画像を生成する。
The stationary time identifying
本実施の形態において、f(x,y,t)は、入力画像を表し、f’(x,y,t)は、幾何補正後の入力画像を表し、g(x,y,t)は、静止時間識別用画像を表し、h(x,y,t)は、静止時間マップを表し、xは、画像及び静止時間マップの水平方向の座標を表し、yは、画像及び静止時間マップの垂直方向の座標を表し、tは、時間を表す。全ての画像及び静止時間マップh(x,y,t)の幅及び高さは、xw(>0)及びyh(>0)とし、時間tと所定の時間間隔Δtとの関係は、t=m・Δt(mは整数)とする。 In this embodiment, f (x, y, t) represents an input image, f ′ (x, y, t) represents an input image after geometric correction, and g (x, y, t) represents Represents a still-time identification image, h (x, y, t) represents a still-time map, x represents a horizontal coordinate of the image and the still-time map, and y represents the image and the still-time map. The vertical coordinate is represented, and t represents time. The width and height of all images and the stationary time map h (x, y, t) are x w (> 0) and y h (> 0), and the relationship between the time t and the predetermined time interval Δt is Let t = m · Δt (m is an integer).
本実施の形態において、t0は、現在を表し、t0−tiは、過去を表す(tiは、後で説明する静止時間のしきい値であり、iは、後で説明するループカウンタである)。 In this embodiment, t 0 represents the current, t 0 -t i represents the past (t i is the threshold value of the rest time described later, i is the loop described later Counter).
本実施の形態において、入力画像f(x,y,t)及び幾何補正後の入力画像f’(x,y,t)はYCrCb形式とし、f=(fY,fcr,fcb)、f’=(fY’,fcr’,fcb’)とする。 In the present embodiment, the input image f (x, y, t) and the input image f ′ (x, y, t) after geometric correction are in the YCrCb format, and f = (f Y , f cr , f cb ), Let f ′ = (f Y ′, f cr ′, f cb ′).
本実施の形態の動作を説明する。
図2は、本発明による静止時間識別用画像生成方法のフローチャートである。このフローチャートは、コンピュータによって実行されるプログラムにおいて実現される。このフローチャートは、現在の入力画像f(x,y,t0)を取得するステップSlから現在静止時間識別用画像g(x,y,t0)を出力するステップSl0までの一連の処理を示している。1枚の静止時間識別用画像が欲しい場合には、その一連の処理を1回実行すればよいので、時系列の静止時間識別用画像が欲しい場合には、t0を変えながらその一連の処理を繰り返し実行すればよい。
The operation of this embodiment will be described.
FIG. 2 is a flowchart of a method for generating an image for identifying still time according to the present invention. This flowchart is realized in a program executed by a computer. This flowchart shows a series of processes from step Sl for obtaining the current input image f (x, y, t 0 ) to step Sl0 for outputting the current still time identification image g (x, y, t 0 ). ing. If one still time recognition image want, since the series of processes may be executed once, if you want rest time recognition image of the time series, the series of processing while changing the t 0 May be repeatedly executed.
次に、各ステップを説明する。
ステップSlにおいて、画像取得部1は、所定の時間間隔Δtでテレビカメラなどから現在の入力画像f(x,y,t0)を取得する。ステップS2において、現在の入力画像f(x,y,t0)に前処理を施す。ステップS2では、例えば、現在の入力画像f(x,y,t0)がガンマ補正されている場合にガンマ補正を解除する、というような処理を行う。
Next, each step will be described.
In step S1, the
ステップS3において、画像保存部2は、現在の入力画像f(x,y,t0)のコピーを保存する。
In step S3, the
ステップS4において、静止時間マップ取得部4は、静止時間マップh(x,y,t0)や各種のパラメータなどを初期化する。ステップS4では、例えば、静止時間マップh(x,y,t0)の全要素値を0にする、ループカウンタi(>0)を1にする、ループカウンタの上限値n(>i)を設定する、静止時間のしきい値tl,t2,・・・,tn(0<tl<t2・・・<tn)を設定する、類似度のしきい値sthを設定する、というような処理を行う。ループカウンタの上限値nは、図4の例では4である。類似度のしきい値sthは、その適切な値が、後述する類似度sの種類や、入力画像f(x,y,t)の性質に依存するので、ここではその具体的な値を示さない。
In step S4, the stationary time
ステップS5において、画像幾何補正部3は、画像保存部2から過去の入力画像f(x,y,t0−ti)を読み出す。ステップS6において、過去の入力画像f(x,y,t0−ti)を幾何補正する。ステップS6では、現在の入力画像f(x,y,t0)の像全体に対する過去の入力画像f(x,y,t0−ti)の像全体の位置ずれを、過去の入力画像f(x,y,t0−ti)の像全体を水平方向及び垂直方向にシフトさせて補正する。像全体をシフトさせるときに、新たな値が充填されない画像端部の画素には、例外的な値(例えば、(fY’,fcr’,fcb’)=(0,0,0))を充填する。像全体の位置ずれ(Δx,Δy)は、
In step S <b> 5, the image
ステップS7において、静止時間マップ取得部4は、静止時間マップh(x,y,t0)を更新する。ステップS7では、現在の入力画像f(x,y,t0)と幾何補正後の過去の入力画像f’(x,y,t0−ti)との間で領域ベースマッチングを行い、画素ごと又は小領域ごとに類似度sを求め、類似度sが類似度のしきい値sth以上になる領域に限り、静止時間マップh(x,y,t0)の要素値を現在のループカウンタの値iに変更する。座標(x1,y1)の類似度s又は座標(x1,yl)を中心とする小領域内の類似度sは、座標(x1,yl)を中心とする幅dx(0<dx<xw)及び高さdy(0<dy<yh)を有する領域ベースマッチング用の窓の間の類似度sとする。図3は、領域ベースマッチング用の窓に関する説明図である。なお、小領域ごとに類似度sを求める場合には、小領域の大きさや小領域の総数を、使用するハードウェアの性能などを考慮して決定することができる。画素ごとに類似度sを求める場合には、類似度s(x,y)は、
In step S7, the stationary time
類似度s(x,y)を求めるときに、[数10]の代わりに、 When calculating the similarity s (x, y), instead of [Equation 10],
[数10]及び[数20]に示した類似度s(x,y)は、画像を取得する時の照明の明るさ及びカメラのアイリス又はカメラのゲインに強く依存しないという特徴を有する。類似度s(x,y)を求めるときには、[数10]と[数20]のうちのいずれか一方を用いればよいが、それ以外の類似度を用いてもよい。小領域ごとに類似度sを求める場合には、小領域の中央の座標(xd,yd)ごとに類似度s(xd,yd)を求め、それらをそれぞれの小領域の類似度sとすればよい。 The similarity s (x, y) shown in [Equation 10] and [Equation 20] has a feature that it does not strongly depend on the brightness of the illumination and the camera iris or camera gain when the image is acquired. When obtaining the similarity s (x, y), either [Equation 10] or [Equation 20] may be used, but other similarities may be used. When obtaining the similarity s for each small region, the similarity s (x d , y d ) is obtained for each coordinate (x d , y d ) at the center of the small region, and the similarity is obtained for each small region. s may be used.
ステップS8において、静止時間マップ取得部4は,ループカウンタiとループカウンタの上限値nとを比較し、この比較結果に基づいて、次のステップを選択する。すなわち、ループカウンタiがループカウンタの上限値n未満の場合には、ループカウンタiを1だけ増加させてステップS5に戻り、ループカウンタiがループカウンタの上限値n以上の場合には、ステップS9に進む。
In step S8, the stationary time
ステップS9において、静止時間識別用画像取得部5は、現在の静止時間識別用画像g(x,y,t0)を生成する。ステップS9では、例えば、ループカウンタの上限値nが4の場合には、現在の入力画像f(x,y,t0)を次のように加工し、現在の静止時間識別用画像g(x,y,t0)を生成する。
・静止時間マップh(x,y,t0)の要素値が0の領域を、緑色の濃淡にする。
・静止時間マップh(x,y,t0)の要素値が1の領域を、黄色の濃淡にする。
・静止時間マップh(x,y,t0)の要素値が2の領域を、赤色の濃淡にする。
・静止時間マップh(x,y,t0)の要素値が3及び4の領域を、灰色の濃淡にする。
In step S9, the still time identification
The region where the element value of the stationary time map h (x, y, t 0 ) is 0 is shaded green.
The region where the element value of the stationary time map h (x, y, t 0 ) is 1 is changed to yellow shades.
The region where the element value of the stationary time map h (x, y, t 0 ) is 2 is changed to a shade of red.
The regions where the element values of the stationary time map h (x, y, t 0 ) are 3 and 4 are shaded gray.
ステップS10において、静止時間識別用画像取得部5は、現在の静止時間識別用画像g(x,y,t0)をテレビモニタなどに出力する。
以上が各ステップの説明である。
In step S10, the still time identifying
The above is the description of each step.
図4は、静止時間マップ及び静止時間識別用画像の生成過程に関する説明図である。本実施の形態によれば、現在の静止時間識別用画像g(x,y,t0)の中に含まれている動物体及び静止物体の像は、静止時間別に次のように色分けされる。
・静止時間がtl未満の動物体の像は,緑色の濃淡
・静止時間がtl以上t2未満の静止物体の像は、黄色の濃淡
・静止時間がt2以上t3未満の静止物体の像は、赤色の濃淡
・静止時間がt3以上の静止物体の像は、灰色の濃淡
そのため、現在の静止時間識別用画像g(x,y,t0)を見れば、現在の入力画像f(x,y,t0)の中に存在する静止物体とその静止時間とが一目でわかる。
FIG. 4 is an explanatory diagram regarding a generation process of a still time map and a still time identification image. According to the present embodiment, the images of the moving object and the stationary object included in the current still time identification image g (x, y, t 0 ) are color-coded according to the still time as follows. .
- the image of the moving object stationary time is less than t l, the green gray-stationary time image of a stationary object or more and less than t 2 t l, the stationary object under yellow shades and still time of t 2 or t 3 Is an image of a stationary object with a gray level of red and a stationary time of t 3 or more, and a gray level of gray. Therefore, if the current stationary time identification image g (x, y, t 0 ) is viewed, the current input image A stationary object existing in f (x, y, t 0 ) and its stationary time can be known at a glance.
通常、幾何補正後の過去の入力画像f’(x,y,t0−ti)の中には、静止物体の像だけでなく、過去の動物体の像が含まれている。そのため、静止時間マップの生成方法として単純な方法を用いた場合には、過去の動物体の像に起因するその像の形跡が、静止時間マップの中に残ってしまう。しかし、本実施の形態の方法を用いた場合には、最も遠い過去(t0−tn)の動物体の像に起因するその像の形跡を除き、過去の動物体の像に起因するその像の形跡が、最後の更新を終えた静止時間マップh(x,y,t0)の中から排除される。例えば、図4に示す例では、幾何補正後の過去の入力画像f’(x,y,t0−tl)及びf’(x,y,t0−t3)の中には、過去の動物体の像であるトラック及び乗用車の像が含まれているが、そのトラック及び乗用車の像に起因するその像の形跡は、最後の更新を終えた静止時間マップh(x,y,t0)の中から排除されている。そのため、現在の静止時間識別用画像g(x,y,t0)の中にも、そのトラック及び乗用車の像に起因するその像の形跡が現れていない。 Normally, the past input image f ′ (x, y, t 0 −t i ) after geometric correction includes not only a stationary object image but also a past moving object image. Therefore, when a simple method is used as a method for generating a stationary time map, a trace of the image resulting from an image of a past moving object remains in the stationary time map. However, when the method according to the present embodiment is used, the trace of the image of the animal body in the past is excluded except for the trace of the image of the animal body of the farthest past (t 0 -t n ). Image traces are excluded from the stationary time map h (x, y, t 0 ) that has completed the last update. For example, in the example illustrated in FIG. 4, the past input images f ′ (x, y, t 0 −t 1 ) and f ′ (x, y, t 0 −t 3 ) after geometric correction include the past. The image of the truck and the passenger car, which is an image of the vehicle of the vehicle, is included, and the trace of the image resulting from the image of the truck and the passenger car is the stationary time map h (x, y, t after the last update). 0 ) is excluded. Therefore, no trace of the image resulting from the image of the truck and the passenger car appears in the current still time identification image g (x, y, t 0 ).
本実施の形態によれば、過去の入力画像f(x,y,t0−ti)及び幾何補正後の過去の入力画像f’(x,y,t0−ti)の中に、過去の動物体の像が含まれていたとしても、過去の動物体の像に起因するその像の形跡を排除して、現在の入力画像f(x,y,t0)に対応する現在の静止時間識別用画像g(x,y,t0)を生成することができる。 According to the present embodiment, in the past input image f (x, y, t 0 −t i ) and the past input image f ′ (x, y, t 0 −t i ) after geometric correction, Even if an image of a past animal is included, the trace of the image resulting from the image of the past animal is excluded, and the current corresponding to the current input image f (x, y, t 0 ) is excluded. A still-time identification image g (x, y, t 0 ) can be generated.
本発明は、上記実施の形態に限定されるものではなく、幾多の変更及び変形が可能である。
上記実施の形態おいて、駐車違反の取り締まりにおける駐車車両の監視の場合について説明したが、本発明を、例えば、不審物の検出、不法投棄の摘発、駐車場又は駐輪場の管理、商品陳列棚の変化の可視化などの他の用途に適用することができる。
The present invention is not limited to the above-described embodiment, and many changes and modifications can be made.
In the above embodiment, the case of monitoring a parked vehicle in a parking violation control has been described, but the present invention can be applied to, for example, detection of a suspicious object, detection of illegal dumping, management of a parking lot or bicycle parking lot, It can be applied to other uses such as change visualization.
上記実施の形態において、入力画像f(x,y,t)及び幾何補正後の入力画像f’(x,y,t)をYCrCb形式としたが、これらをYCrCb形式以外のカラー画像や、明度のみの濃淡画像とすることができる。濃淡画像の場合には、重みwYを1とするとともに、重みwcr及び重みwcbを0とする。 In the above embodiment, the input image f (x, y, t) and the geometrically corrected input image f ′ (x, y, t) are in the YCrCb format. Only a gray image can be obtained. In the case of a grayscale image, the weight w Y is set to 1, and the weight w cr and the weight w cb are set to 0.
上記実施の形態において、ステップS4でループカウンタiを1にして、ステップS8でループカウンタiを1だけ増加させるようにしているが、逆に、ステップS4でループカウンタiをループカウンタの上限値nにして、ステップS8でループカウンタiを1だけ減少させるようにしてもよい。この場合、その変更に合わせるように、ステップS4、ステップS7及びステップS8の処理内容を変更する必要がある(詳細については割愛する)。 In the above embodiment, the loop counter i is set to 1 in step S4 and the loop counter i is incremented by 1 in step S8. Conversely, in step S4, the loop counter i is set to the upper limit value n of the loop counter. Then, the loop counter i may be decreased by 1 in step S8. In this case, it is necessary to change the processing content of step S4, step S7, and step S8 to match the change (details are omitted).
上記実施の形態おいて、現在の静止時間識別用画像g(x,y,t0)の中に含まれている動物体及び静止物体の像を、静止時間別に、緑色、黄色、赤色及び灰色に色分けしているが、現在の静止時間識別用画像g(x,y,t0)は、複数の静止物体の像又は領域とともに静止物体それぞれの静止時間に関する情報が記入された画像であれば、どのような形式の画像であってもよい。 In the above embodiment, images of moving objects and stationary objects included in the current still time identification image g (x, y, t 0 ) are displayed in green, yellow, red, and gray for each stationary time. However, if the current stationary time identification image g (x, y, t 0 ) is an image in which information about stationary time of each stationary object is entered together with images or regions of a plurality of stationary objects. Any type of image may be used.
さらに、静止時間が所定のしきい値(例えば、駐車違反の取り締まりにおける駐車車両の監視の場合は30分)に達した静止物体を検出した場合には、特別な表示(例えば、アラーム)を出すようにすれば、本発明は、監視の省力化にさらに寄与することができる。 Further, when a stationary object is detected that has reached a predetermined threshold (for example, 30 minutes in the case of monitoring a parked vehicle in a parking violation), a special display (for example, an alarm) is issued. In this way, the present invention can further contribute to labor saving of monitoring.
本発明は、駐車違反の取り締まりにおける駐車車両の監視、不審物の検出、不法投棄の摘発、駐車場及び駐輪場の管理、商品陳列棚の変化の可視化など、複数の静止物体を静止時間別に分類して検出する全てのアプリケーションに適用することができる。 The present invention classifies a plurality of stationary objects according to stationary time, such as monitoring of parked vehicles for parking violation control, detection of suspicious objects, detection of illegal dumping, management of parking lots and bicycle parking lots, visualization of changes in merchandise display shelves, etc. It can be applied to all applications detected.
1 画像取得部
2 画像保存部
3 画像幾何補正部
4 静止時間マップ取得部
5 静止時間識別用画像取得部
DESCRIPTION OF
Claims (5)
前記画像を前記時間間隔ごとに保存する画像保存ステップと、
前記画像取得ステップで現在取得した画像と、前記画像保存ステップで保存された複数の過去の画像それぞれとを比較し、画素ごと又は小領域ごとに類似度を求め、当該類似度に基づいて、静止時間に関する情報が記入された2次元配列である静止時間マップを更新したものを取得する静止時間マップ取得ステップと、
前記静止時間マップに基づいて、複数の静止物体の像又は領域とともに静止物体それぞれの静止時間に関する情報が記入された画像である静止時間識別用画像を取得する静止時間識別用画像取得ステップとを具えることを特徴とする静止時間識別用画像生成方法。 An image acquisition step of acquiring images at predetermined time intervals;
An image storage step for storing the image at each time interval;
Compare the image currently acquired in the image acquisition step with each of a plurality of past images stored in the image storage step, determine the similarity for each pixel or small region, and based on the similarity, A stationary time map acquisition step of acquiring an updated stationary time map which is a two-dimensional array in which information about time is entered;
A stationary time identifying image obtaining step for obtaining a stationary time identifying image, which is an image in which information about stationary time of each stationary object is entered together with images or regions of a plurality of stationary objects based on the stationary time map. A still-time identifying image generation method characterized by comprising:
前記画像を前記時間間隔ごとに保存する画像保存手段と、
前記画像取得手段で現在取得した画像と、前記画像保存手段で保存された複数の過去の画像それぞれとを比較し、画素ごと又は小領域ごとに類似度を求め、当該類似度に基づいて、静止時間に関する情報が記入された2次元配列である静止時間マップを更新したものを取得する静止時間マップ取得手段と、
前記静止時間マップに基づいて、複数の静止物体の像又は領域とともに静止物体それぞれの静止時間に関する情報が記入された画像である静止時間識別用画像を取得する静止時間識別用画像取得手段とを具えることを特徴とする静止時間識別用画像生成装置。 Image acquisition means for acquiring images at predetermined time intervals;
Image storage means for storing the image at each time interval;
The image currently acquired by the image acquisition means and each of a plurality of past images stored by the image storage means are compared , a similarity is obtained for each pixel or each small region, and based on the similarity, A stationary time map acquisition means for acquiring an updated stationary time map that is a two-dimensional array in which information on time is entered;
A stationary time identifying image acquiring means for acquiring a stationary time identifying image, which is an image in which information on the stationary time of each stationary object is entered together with images or regions of a plurality of stationary objects based on the stationary time map. An image generating apparatus for identifying a still time, characterized in that:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007042548A JP4712741B2 (en) | 2006-07-21 | 2007-02-22 | Still-time identification image generation method and apparatus |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006199870 | 2006-07-21 | ||
JP2006199870 | 2006-07-21 | ||
JP2007042548A JP4712741B2 (en) | 2006-07-21 | 2007-02-22 | Still-time identification image generation method and apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008047090A JP2008047090A (en) | 2008-02-28 |
JP4712741B2 true JP4712741B2 (en) | 2011-06-29 |
Family
ID=39180729
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007042548A Expired - Fee Related JP4712741B2 (en) | 2006-07-21 | 2007-02-22 | Still-time identification image generation method and apparatus |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4712741B2 (en) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0749952A (en) * | 1993-08-06 | 1995-02-21 | Hitachi Ltd | Device for monitoring mobile object |
JP2003030776A (en) * | 2001-07-17 | 2003-01-31 | Japan Radio Co Ltd | Object detection system and its method |
-
2007
- 2007-02-22 JP JP2007042548A patent/JP4712741B2/en not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0749952A (en) * | 1993-08-06 | 1995-02-21 | Hitachi Ltd | Device for monitoring mobile object |
JP2003030776A (en) * | 2001-07-17 | 2003-01-31 | Japan Radio Co Ltd | Object detection system and its method |
Also Published As
Publication number | Publication date |
---|---|
JP2008047090A (en) | 2008-02-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20190333241A1 (en) | People flow analysis apparatus, people flow analysis system, people flow analysis method, and non-transitory computer readable medium | |
CN102348128B (en) | Surveillance camera system having camera malfunction detection function | |
JP6088792B2 (en) | Image detection apparatus, control program, and image detection method | |
US8121348B2 (en) | Object detection apparatus, method and program | |
US10043090B2 (en) | Information processing device, information processing method, computer-readable recording medium, and inspection system | |
US8306318B2 (en) | Image processing apparatus, image processing method, and computer readable storage medium | |
US10079974B2 (en) | Image processing apparatus, method, and medium for extracting feature amount of image | |
JP6764481B2 (en) | Monitoring device | |
US10445868B2 (en) | Method for detecting a defect on a surface of a tire | |
US11145046B2 (en) | Detection of near-field occlusions in images | |
JP2007316997A (en) | Vehicle type determining program and apparatus | |
Bedruz et al. | Real-time vehicle detection and tracking using a mean-shift based blob analysis and tracking approach | |
US9030559B2 (en) | Constrained parametric curve detection using clustering on Hough curves over a sequence of images | |
US11915430B2 (en) | Image analysis apparatus, image analysis method, and storage medium to display information representing flow quantity | |
JP2015041164A (en) | Image processor, image processing method and program | |
JP4764487B2 (en) | Video surveillance system | |
CN107832732B (en) | Lane line detection method based on treble traversal | |
JP2012194705A (en) | Image processor, image processing method and image processing program | |
JP2018142828A (en) | Deposit detector and deposit detection method | |
JP2007241477A (en) | Image processor | |
KR101556598B1 (en) | Apparatus and Method for object detection based on dominant pixel information | |
JP5201184B2 (en) | Image processing apparatus and program | |
JP6221283B2 (en) | Image processing apparatus, image processing method, and image processing program | |
CN111402185B (en) | Image detection method and device | |
JP4712741B2 (en) | Still-time identification image generation method and apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080311 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20101029 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101109 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101210 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110222 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110323 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4712741 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |