JP2017060114A - Picture acquisition system and picture acquisition method - Google Patents
Picture acquisition system and picture acquisition method Download PDFInfo
- Publication number
- JP2017060114A JP2017060114A JP2015185601A JP2015185601A JP2017060114A JP 2017060114 A JP2017060114 A JP 2017060114A JP 2015185601 A JP2015185601 A JP 2015185601A JP 2015185601 A JP2015185601 A JP 2015185601A JP 2017060114 A JP2017060114 A JP 2017060114A
- Authority
- JP
- Japan
- Prior art keywords
- data
- acceleration
- acceleration data
- time
- acquired
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 18
- 230000001133 acceleration Effects 0.000 claims abstract description 123
- 238000000605 extraction Methods 0.000 claims abstract description 37
- 239000000284 extract Substances 0.000 claims abstract description 25
- 238000010586 diagram Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000035515 penetration Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
本発明は、動画から静止画を抽出する画像取得システム及び画像取得方法に関する。 The present invention relates to an image acquisition system and an image acquisition method for extracting a still image from a moving image.
従来から、建築物の点検や社会環境の変化を把握する等の目的で、定点観測が行われている。定点観測において最も簡明な方法は、定点位置にカメラを設置し、観測対象を継続的に撮影することである。 Conventionally, fixed-point observation has been carried out for the purpose of inspecting buildings and grasping changes in the social environment. The simplest method for fixed point observation is to install a camera at a fixed point position and continuously shoot the observation target.
しかしながら、例えば観測対象が複数あり、多数の定点位置にカメラを設置させる必要が生じたとき、多数のカメラを設置させることによるコストや効率が問題となる場合も少なくない。 However, for example, when there are a plurality of observation objects and it is necessary to install cameras at a large number of fixed points, there are many cases where the cost and efficiency of installing a large number of cameras becomes a problem.
そこで、ビデオカメラ等の撮影装置を車両に搭載させ、車両を走行させながら複数の測定対象を動画として撮影し、その動画から指定した定点位置に対応する画像を静止画として抽出する方法が知られている(非特許文献1)。このような方法では、車両を走行させながら時刻を付加した動画を撮影し、その一方で、車両にGPS(Global Positioning System)を搭載させて車両位置(撮影位置)を時刻と伴に位置情報として取得していく。そして、GPSを用いて取得した位置情報から車両が定点位置に到達した時刻を割り出し、その時刻が付加された画像を動画から抽出することで、定点位置に対応する静止画を抽出している。さらに、このような方法では、取得する位置情報の精度をより上げるため、車両にDGPS(Differential Global Positioning System)を搭載させることもある。 Therefore, a method is known in which a photographing device such as a video camera is mounted on a vehicle, a plurality of measurement objects are photographed as moving images while the vehicle is running, and an image corresponding to a fixed point position designated from the moving images is extracted as a still image. (Non-Patent Document 1). In such a method, a moving image with time added is shot while the vehicle is running, while a GPS (Global Positioning System) is mounted on the vehicle and the vehicle position (shooting position) is used as position information along with the time. Get it. Then, the time at which the vehicle reaches the fixed point position is determined from the position information acquired using the GPS, and the still image corresponding to the fixed point position is extracted by extracting the image to which the time is added from the moving image. Furthermore, in such a method, a DGPS (Differential Global Positioning System) may be mounted on the vehicle in order to further improve the accuracy of position information to be acquired.
ところで、定点観測において、上記のように車両を走行させながら定点観測を行う場合、より多くの車両が定点位置を走行することが望ましい。そのため、DGPSを搭載させた高コストの特別な車両よりも、ドライブレコーダやスマートフォンに用いられるような普及率の高いGPSを搭載させた低コストの車両を用いることが望ましい。しかしながら、そのようなGPSを用いて取得した定点位置の位置情報は、実際の定点位置との間に、定点観測においては許容できない誤差を生じてしまう。そのため、従来の方法では、動画から定点位置に対応する静止画を低コストで精度よく抽出できない、という問題があった。 By the way, in the fixed point observation, when the fixed point observation is performed while the vehicle is traveling as described above, it is desirable that more vehicles travel at the fixed point position. For this reason, it is desirable to use a low-cost vehicle equipped with a GPS having a high penetration rate used in a drive recorder or a smartphone, rather than a high-cost special vehicle equipped with a DGPS. However, the position information of the fixed point position acquired using such GPS causes an unacceptable error in the fixed point observation with the actual fixed point position. For this reason, the conventional method has a problem that a still image corresponding to a fixed point position cannot be accurately extracted from a moving image at low cost.
かかる点に鑑みてなされた本発明の目的は、動画から指定位置に対応する静止画を低コストで精度良く抽出する画像取得システム及び画像取得方法を提供することにある。 An object of the present invention made in view of this point is to provide an image acquisition system and an image acquisition method for accurately extracting a still image corresponding to a specified position from a moving image at low cost.
上記課題を解決するため、本発明に係る画像取得システムは、動画を撮影する収集装置と、該動画から指定位置に対応する静止画を抽出する解析装置とを備えた画像取得システムであって、前記収集装置は、前記収集装置が搭載される車両が走行する際の風景を動画として撮影するカメラと、前記車両の位置データを取得し、該位置データを取得した時刻を該位置データに付加する測位器と、前記車両の上下方向の加速度データを取得し、該加速度データを取得した時刻を該加速度データに付加する加速度センサと、を有し、前記解析装置は、前記動画から前記指定位置に対応する静止画を抽出する静止画抽出部を有し、前記静止画抽出部は、前記指定位置に最も近い前記位置データに付加された時刻を基準時刻として取得し、前記加速度データから、該基準時刻の近傍で、所定の閾値を超える前記加速度データを抽出し、該抽出した加速度データにおいて、所定の条件を満たす加速度データを、代表加速度データに決定し、該代表加速度データに付加された時刻に対応する静止画を抽出することを特徴とする。 In order to solve the above problems, an image acquisition system according to the present invention is an image acquisition system including a collection device that captures a moving image, and an analysis device that extracts a still image corresponding to a specified position from the moving image, The collection device acquires a position data of the vehicle that captures a moving image of a landscape when a vehicle on which the collection device is mounted travels, and adds the time at which the position data was acquired to the position data. A positioning device; and an acceleration sensor that acquires acceleration data in the vertical direction of the vehicle and adds the time at which the acceleration data was acquired to the acceleration data. A still image extraction unit for extracting a corresponding still image, wherein the still image extraction unit acquires a time added to the position data closest to the designated position as a reference time, and In the vicinity of the reference time, the acceleration data exceeding a predetermined threshold value is extracted from the data, and in the extracted acceleration data, acceleration data that satisfies a predetermined condition is determined as representative acceleration data. A still image corresponding to the added time is extracted.
また、上記課題を解決するため、本発明に係る画像取得方法は、動画を撮影する収集装置と、該動画から指定位置に対応する静止画を抽出する解析装置とを備えた画像取得システムにおける画像取得方法であって、前記収集装置によって、前記収集装置が搭載される車両が走行する際の風景を動画として撮影するステップと、前記車両の位置データを取得し、該位置データを取得した時刻を該位置データに付加するステップと、前記車両の上下方向の加速度データを取得し、該加速度データを取得した時刻を該加速度データに付加するステップと、前記解析装置によって、前記指定位置に最も近い前記位置データに付加された時刻を基準時刻として取得するステップと、前記加速度データから、前記基準時刻の近傍で、所定の閾値を超える前記加速度データを抽出するステップと、前記抽出した加速度データおいて、所定の条件を満たす加速度データを、代表加速度データに決定するステップと、前記代表加速度データに付加された時刻に基づいて前記動画から前記指定位置に対応する静止画を抽出するステップと、を含む。 In order to solve the above problems, an image acquisition method according to the present invention provides an image in an image acquisition system including a collection device that captures a moving image and an analysis device that extracts a still image corresponding to a specified position from the moving image. An acquisition method, wherein the collection device captures, as a moving image, a landscape when a vehicle on which the collection device is mounted travels, acquires the position data of the vehicle, and obtains the time at which the position data was acquired. Adding to the position data; acquiring acceleration data in the vertical direction of the vehicle; adding the time when the acceleration data was acquired to the acceleration data; and A step of acquiring the time added to the position data as a reference time, and from the acceleration data, in the vicinity of the reference time, before exceeding a predetermined threshold A step of extracting acceleration data; a step of determining acceleration data satisfying a predetermined condition in the extracted acceleration data as representative acceleration data; and the moving image based on the time added to the representative acceleration data. Extracting a still image corresponding to the designated position.
本発明に係る画像取得システム及び画像取得方法によれば、動画から指定位置に対応する静止画を低コストで精度良く抽出することができる。 According to the image acquisition system and the image acquisition method of the present invention, it is possible to accurately extract a still image corresponding to a specified position from a moving image at a low cost.
以下、本発明の実施形態について、図面を参照しつつ説明する。ここで、車道において、インターチャンジや橋の入り口等は、定点観測の測定対象となるニーズが高い。さらに、インターチェンジや橋の入口等の車道には、運転者に注意を促すことを目的として、意図的に凹凸が予め設けられている箇所がある。そこで、本発明では、このような凹凸が設けられた箇所を定点位置(指定位置)として定点観測を行う例を説明する。 Embodiments of the present invention will be described below with reference to the drawings. Here, on the roadway, there is a high need for interchanging, entrances to bridges, etc. to be measured objects for fixed point observation. Furthermore, some roadways such as interchanges and bridge entrances are intentionally provided with unevenness for the purpose of alerting the driver. Therefore, in the present invention, an example will be described in which fixed-point observation is performed with a place where such unevenness is provided as a fixed-point position (designated position).
[システム構成]
図1は、本発明の一実施形態に係る画像取得システム1の概略図である。画像取得システム1は、収集装置100〜102と、解析装置200とを備える。収集装置100〜102及び解析装置200は、例えば無線により、互いに通信を行う。なお、図1に示す画像取得システム1は、3つの収集装置100〜102を備えているが、画像取得システム1の備える収集装置は、1つ又は2つでも、又は4つ以上でもよい。
[System configuration]
FIG. 1 is a schematic diagram of an
収集装置100〜102は、それぞれ車両に搭載される。また、収集装置100〜102を搭載した車両は、それぞれ、車道を走行する。収集装置100〜102は、走行している車両から動画を撮影し、各種情報(後述する動画情報、速度情報、加速度情報及び位置情報)を取得する。収集装置100〜102は、取得した各種情報を、解析装置200に送信する。
The
解析装置200は、収集装置100〜102から各種情報を受信すると、動画から定点位置(車道の凹凸位置)に対応する静止画を抽出する。
When the
以下、収集装置100及び解析装置200の機能の詳細について説明する。なお、以下では、説明を簡単にするため、画像取得システム1の備える収集装置は、収集装置100のみとして説明する。
Details of the functions of the
図2は、本発明の一実地形態に係る画像取得システム1の構成の一例を示す図である。画像取得システム1は、収集装置100と、解析装置200とを備える。
FIG. 2 is a diagram illustrating an example of the configuration of the
収集装置100は、カメラ110と、加速度センサ120と、測位器130と、速度計140と、時計150と、制御部160と、記憶部170と、インタフェース180とを有する。
The
カメラ110は、例えば、収集装置100が搭載される車両の正面に位置する車窓に正対するように配置される。図2では、カメラ110は、収集装置100の内部に配置されているが、収集装置100の外部に配置されていてもよい。カメラ110は、車窓から見える車両の進行方向の風景を撮影し、その風景を動画データとして記録する。また撮影を開始する際、カメラ110は、時計150から撮影開始時刻を取得する。カメラ110は、撮影していく動画データに撮影開始時刻を付加し、これらを動画情報として記憶部170に蓄積させていく。なお、カメラ110は、例えば、車両の進行方向の風景を撮影するように固定されているため、車両が定点位置(車道の凹凸位置)を通過する際の画像の撮影方位は一定となる。
For example, the
加速度センサ120は、一定の取得周期で、収集装置100が搭載される車両の上下方向の加速度データを取得する。また加速度データを取得する際、加速度センサ120は、その加速度データを取得したときの時刻を時計150から取得する。加速度センサ120は、取得した加速度データに、その加速度データの取得時刻を付加し、これらを加速度情報として記憶部170に蓄積させていく。
The
測位器130は、例えばGPSである。測位器130は、一定の取得周期で、収集装置100が搭載される車両の大まかな位置データを取得する。また位置データを取得する際、測位器130は、その位置データを取得したときの時刻を時計150から取得する。測位器130は、取得した位置データに、その位置データの取得時刻を付加し、これらを位置情報として記憶部170に蓄積させていく。
The
速度計140は、一定の取得周期で、収集装置100が搭載される車両の速度データを取得する。また速度データを取得する際、速度計140は、その速度データを取得したときの時刻を時計150から取得する。速度計140は、取得した速度データに、その速度データの取得時刻を付加し、これらを速度情報として記憶部170に蓄積させていく。
The
時計150は、時刻を計測する。また、時計150は、計測した時刻を、カメラ110、加速度センサ120、測位器130及び速度計140に送信する。
The
制御部160は、収集装置100全体を制御及び管理するものであり、例えばプロセッサにより構成することができる。
The
記憶部170は、動画情報、速度情報、加速度情報及び位置情報を記憶している。図3に、記憶部17に記憶されている動画情報、速度情報、加速度情報及び位置情報の一例を示す。
The
インタフェース180は、解析装置200と通信を行う。記憶部170に記憶されている動画情報、速度情報、加速度情報及び位置情報は、インタフェース180を介して、解析装置200に送信される。なお、記憶部170に記憶されている動画情報、速度情報、加速度情報及び位置情報は、記憶媒体を用いて、解析装置200に引き渡してもよい。
The
解析装置200は、インタフェース210と、記憶部220と、制御部230と、静止画抽出部240と、静止画記憶部250とを有する。
The
インタフェース210は、収集装置100と通信を行う。また、インタフェース210を介して、収集装置100から受信した動画情報、速度情報、加速度情報及び位置情報は、記憶部220に記憶される。なお、動画情報、速度情報、加速度情報及び位置情報は、記憶媒体を用いて収集装置100から取得し、インタフェース210を介し、記憶部220に記憶してもよい。
The
記憶部220は、インタフェース210を介して収集装置100から受信した動画情報、速度情報、加速度情報及び位置情報を記憶している。
The
制御部230は、解析装置200全体を制御及び管理するものであり、例えばプロセッサにより構成することができる。
The
静止画抽出部240は、記憶部220に記憶されている動画情報、速度情報、加速度情報及び位置情報を用いて、収集装置100が撮影した動画データから定点位置に対応する静止画を抽出する。以下、この処理を説明する。
The still
まず、例えば外部からインタフェース210を介し、定点観測を行う定点位置が指定されると、静止画抽出部240は、記憶部220に記憶されている位置情報から、指定された定点位置に最も近い位置データを検索し取得する。そして、静止画抽出部240は、取得した位置データに付加された時刻を、定点位置に到達したおおよその時刻である基準時刻tとして取得する。
First, for example, when a fixed point position for performing fixed point observation is designated from the outside via the
次に、静止画抽出部240は、記憶部220に記憶されている加速度情報から、基準時刻tの近傍で、所定の特徴を有する1以上の加速度データを抽出する。具体的には、静止画抽出部240は、記憶部220に記憶されている加速度情報から、基準時刻tの近傍で、上下方向の加速度の絶対値が所定の閾値を超える1以上の加速度データを抽出する。ここで、車道に設けられた凹凸を車両が通過する際、凹凸によって車両は上下方向に動く。そこで、画像取得システム1では、上下方向の加速度の絶対値が所定の閾値を超える1以上の加速度データを、車両が定点位置(車道の凹凸位置)を通過した際の加速度データの候補として抽出する。また、所定の閾値は、車道の凸凹具合を考慮して設定される。例えば、自動車専用道のような整備された車道では、所定の閾値は、0.2G〜0.3G(これらは重力加速度1Gを減算後の値)に設定される。
Next, the still
さらに、静止画抽出部240が加速度データを抽出する基準時刻tの近傍を、時刻t−Tから時刻t+Tの範囲とした場合、Tに予め設定した値を用いてもよいが、静止画抽出部240は、Tを以下の式(1)によって算出することもできる。
T=τ1+τ2+S 式(1)
式(1)において、τ1は収集装置100の加速度センサ120の加速度データの取得周期、τ2は収集装置100の測位器130の位置データの取得周期である。加えて、式(1)におけるSの算出方法を以下に説明する。
Furthermore, when the vicinity of the reference time t from which the still
T = τ 1 + τ 2 + S Formula (1)
In Expression (1), τ 1 is the acceleration data acquisition cycle of the
まず、静止画抽出部240は、記憶部220に記憶されている速度情報から、基準時刻tに最も近い時刻で取得された速度データを検索し、その速度データをv1とする。そして、静止画抽出部240は、収集装置100の速度計140の速度データの取得周期をτ3、測位器130の最大誤差をE、速度計140の最大誤差率をεとして、以下の式(2)を満たす最小のnを求める。そして、静止画抽出部240は、以下の式(2)を満たす最小のnをk+とし、S+=τ3×(k++1)を算出する。
その後、静止画抽出部240は、抽出した1以上の加速度データにおいて、所定の条件を満たす加速度データを、代表加速度データに決定する。この代表加速度データを取得した時刻(以下単に「代表加速度データ取得時刻」という)が、車両が定点位置(車道の凹凸)に到達した時刻となる。所定の条件には、例えば、最も早い時刻に取得されたデータ、最も遅い時刻に取得されたデータ、取得された時刻が中央となるデータ又は加速度が最大となるデータがある。例えば、車道がよく整備されており定点位置(車道の凹凸)以外の箇所で車両が上下にあまり動かない(加速しない)と想定される場合、抽出した1以上の加速度データにおいて、加速度が最大となるデータを代表加速度データとすることができる。そしてこれにより、定点位置に到達した時刻をより精度よく特定することができる。なお、静止画抽出部240は、抽出した加速度データが1つである場合は、その加速度データを代表加速度データに決定する。
Thereafter, the still
そして、静止画抽出部240は、記憶部220に記憶されている動画情報から、代表加速度データ取得時刻に対応する静止画を抽出する。例えば、静止画抽出部240は、代表加速度データ取得時刻から撮影開始時刻を減算し、減算後の値に収集装置100のカメラ110のフレームレート(動画において単位時間当たりに記録されるフレーム数)を乗算する。そして、静止画抽出部240は、乗算した値から、定点位置に対応する静止画が撮影開始から何番目のフレーム画像に対応するか求め、その求めたフレーム画像を抽出することにより、定点位置に対応する静止画を抽出する。さらに、静止画抽出部240は、抽出した定点位置に対応する静止画を静止画記憶部250に記憶させる。なお、定点観測において定点位置が複数ある場合、静止画抽出部240は、動画情報から、それらの定点位置に対応する静止画をそれぞれ抽出していき、静止画記憶部250に蓄積させていく。
Then, the still
静止画記憶部250は、静止画抽出部240が抽出した定点位置に対応する静止画を記憶している。なお、図2では、静止画記憶部250と記憶部220とは、それぞれ別に設けられているが、静止画記憶部250と記憶部220とを一体の記憶部として、解析装置200内に設けてもよい。
The still
以下、本発明の一実施形態に係る画像取得システム1の動作を説明する。
Hereinafter, the operation of the
[システム動作]
図4は、本発明の一実施形態に係る画像取得システム1の動作の一例を示すフローチャートである。
[System operation]
FIG. 4 is a flowchart showing an example of the operation of the
収集装置100は、取得した動画情報、速度情報、加速度情報及び位置情報を、収集装置100のインタフェース180を介して、解析装置200に送信する。解析装置200は、解析装置200のインタフェース210を介して、動画情報、速度情報、加速度情報及び位置情報を受信すると、これらの情報を解析装置200の記憶部220に記憶させる。その後、例えば外部からインタフェース210を介し、定点観測を行う定点位置が指定されると、静止画抽出部240は、記憶部220に記憶されている位置情報から、指定された定点位置に最も近い位置データを検索し取得する(ステップS101)。そして、静止画抽出部240は、取得した位置データに付加された時刻を、定点位置に到達したおおよその時刻である基準時刻tとして取得する(ステップS102)。
The
次に、静止画抽出部240は、記憶部220に記憶されている加速度情報から、基準時刻tの近傍で、所定の特徴を有する1以上の加速度データを抽出する(ステップS103)。具体的には、静止画抽出部240は、記憶部220に記憶されている加速度情報から、基準時刻tの近傍で、上下方向の加速度の絶対値が所定の閾値を超える1以上の加速度データを抽出する。基準時刻tの近傍を時刻t−Tから時刻t+Tの範囲とした場合、Tに予め設定した値を用いてもよいし、Tを上記式(1)〜(3)によって算出してもよい。
Next, the still
その後、静止画抽出部240は、抽出した1以上の加速度データにおいて、所定の条件を満たす加速度データを、代表加速度データに決定する(ステップS104)。所定の条件には、例えば、最も早い時刻に取得されたデータ、最も遅い時刻に取得されたデータ、取得された時刻が中央となるデータ又は加速度が最大となるデータがある。
Thereafter, the still
そして、静止画抽出部240は、記憶部220に記憶されている動画情報から、代表加速度データ取得時刻に対応する静止画を抽出する(ステップS105)。例えば、静止画抽出部240は、代表加速度データ取得時刻から撮影開始時刻を減算し、減算後の値に収集装置100のカメラ110のフレームレート(動画において単位時間当たりに記録されるフレーム数)を乗算する。そして、静止画抽出部240は、乗算した値から、定点位置に対応する静止画が撮影開始から何番目のフレーム画像に対応するか求め、その求めたフレーム画像を抽出することにより、定点位置に対応する静止画を抽出する。
Then, the still
なお、ステップ104の処理において、静止画抽出部240は、抽出した加速度データが1つである場合は、その加速度データを代表加速度データに決定する。
In the process of step 104, when there is one extracted acceleration data, the still
なお、上記では車道に予め設けられた凹凸を定点位置とする例を説明してきたが、車道の劣化等により自然に生じた凹凸を定点位置としてもよい。又は、本願発明を利用するために、車道に新たな凹凸を設けてもよい。 In the above description, an example in which the unevenness provided in advance on the roadway is the fixed point position has been described. Or in order to utilize this invention, you may provide a new unevenness | corrugation in a roadway.
また、図1に示すように、同一の定点位置を通過する車両が複数ある場合、同一の定点位置対応する複数の静止画を抽出することができる。これら複数の静止画を静止画記憶部250に蓄積させておき、画像処理を施してもよいし、時系列に並べて同一の定点位置における動画として利用してもよい。
Further, as shown in FIG. 1, when there are a plurality of vehicles passing through the same fixed point position, a plurality of still images corresponding to the same fixed point position can be extracted. These still images may be stored in the still
以上のように、画像取得システム1では、解析装置200の静止画抽出部240が、定点位置に最も近い位置データを検索し、その位置データを取得した時刻を基準時刻tとして取得する。そして、静止画抽出部240は、加速度情報から、基準時刻tの近傍で、所定の特徴を有する1以上の加速度データを抽出し、抽出した1以上の加速度データにおいて、代表加速度データを決定する。さらに、決定した代表加速度データ取得時刻に対応する静止画を動画情報から抽出する。これにより、定点位置に到達した時刻を精度よく特定することができるため、動画から指定位置(定点位置)に対応する静止画を精度よく抽出することができる。
As described above, in the
さらに、画像取得システム1では、収集装置100に加速度センサ120等の入手が容易な技術を用いて、本発明に係る画像取得システム1を実現している。このため、一般車両や路線バスに収集装置100を搭載させて、本発明に係る画像取得システム1を低コストで実現することができる。
Furthermore, in the
本発明を諸図面や実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形や修正を行うことが容易であることに注意されたい。従って、これらの変形や修正は本発明の範囲に含まれることに留意されたい。例えば、各構成部、各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の構成部やステップ等を1つに組み合わせたり、或いは分割したりすることが可能である。また、本発明について装置を中心に説明してきたが、本発明は装置が備えるプロセッサにより実行される方法、プログラム、又はプログラムを記録した記憶媒体としても実現し得るものであり、本発明の範囲にはこれらも包含されるものと理解されたい。 Although the present invention has been described based on the drawings and examples, it should be noted that those skilled in the art can easily make various modifications and corrections based on the present disclosure. Therefore, it should be noted that these variations and modifications are included in the scope of the present invention. For example, the functions included in each component, each step, etc. can be rearranged so that there is no logical contradiction, and multiple components, steps, etc. can be combined or divided into one It is. Further, although the present invention has been described mainly with respect to the apparatus, the present invention can also be realized as a method, a program executed by a processor included in the apparatus, or a storage medium storing the program, and is within the scope of the present invention. It should be understood that these are also included.
1 画像取得システム
100〜102 収集装置
110 カメラ
120 加速度センサ
130 測位器
140 速度計
150 時計
160 制御部
170 記憶部
180 インタフェース
200 解析装置
210 インタフェース
220 記憶部
230 制御部
240 静止画抽出部
250 静止画記憶部
DESCRIPTION OF
Claims (5)
前記収集装置は、
前記収集装置が搭載される車両が走行する際の風景を動画として撮影するカメラと、
前記車両の位置データを取得し、該位置データを取得した時刻を該位置データに付加する測位器と、
前記車両の上下方向の加速度データを取得し、該加速度データを取得した時刻を該加速度データに付加する加速度センサと、を有し、
前記解析装置は、
前記動画から前記指定位置に対応する静止画を抽出する静止画抽出部を有し、
前記静止画抽出部は、前記指定位置に最も近い前記位置データに付加された時刻を基準時刻として取得し、前記加速度データから、該基準時刻の近傍で、所定の閾値を超える前記加速度データを抽出し、該抽出した加速度データにおいて、所定の条件を満たす加速度データを、代表加速度データに決定し、該代表加速度データに付加された時刻に対応する静止画を抽出する
ことを特徴とする画像取得システム。 An image acquisition system comprising a collection device for capturing a moving image and an analysis device for extracting a still image corresponding to a specified position from the moving image,
The collector is
A camera that captures a moving image of a landscape when the vehicle on which the collection device is mounted travels;
A positioner that acquires the position data of the vehicle and adds the time at which the position data was acquired to the position data;
An acceleration sensor that acquires acceleration data in the vertical direction of the vehicle and adds the time at which the acceleration data was acquired to the acceleration data;
The analysis device includes:
A still image extraction unit that extracts a still image corresponding to the specified position from the moving image;
The still image extraction unit acquires a time added to the position data closest to the designated position as a reference time, and extracts the acceleration data exceeding a predetermined threshold value near the reference time from the acceleration data. In the extracted acceleration data, the acceleration data satisfying a predetermined condition is determined as representative acceleration data, and a still image corresponding to the time added to the representative acceleration data is extracted. .
前記加速度センサは、一定の取得周期で前記加速度データを取得し、前記測位器は、一定の取得周期で前記位置データを取得し、
前記基準時刻の近傍は、前記加速度センサの前記加速度データの取得周期、前記測位器の前記位置データの取得周期及び前記速度計の前記速度データの取得周期に基づいて設定されることを特徴とする請求項1〜3のいずれか一項に記載の画像取得システム。 The collection device further includes a speedometer that acquires the speed data of the vehicle at a constant acquisition cycle and adds the time at which the speed data was acquired to the speed data,
The acceleration sensor acquires the acceleration data at a constant acquisition cycle, and the positioning device acquires the position data at a constant acquisition cycle,
The vicinity of the reference time is set based on the acceleration data acquisition cycle of the acceleration sensor, the position data acquisition cycle of the positioning device, and the speed data acquisition cycle of the speedometer. The image acquisition system as described in any one of Claims 1-3.
前記収集装置によって、
前記収集装置が搭載される車両が走行する際の風景を動画として撮影するステップと、
前記車両の位置データを取得し、該位置データを取得した時刻を該位置データに付加するステップと、
前記車両の上下方向の加速度データを取得し、該加速度データを取得した時刻を該加速度データに付加するステップと、
前記解析装置によって、
前記指定位置に最も近い前記位置データに付加された時刻を基準時刻として取得するステップと、
前記加速度データから、前記基準時刻の近傍で、所定の閾値を超える前記加速度データを抽出するステップと、
前記抽出した加速度データおいて、所定の条件を満たす加速度データを、代表加速度データに決定するステップと、
前記代表加速度データに付加された時刻に基づいて前記動画から前記指定位置に対応する静止画を抽出するステップと、
を含む画像取得方法。 An image acquisition method in an image acquisition system comprising: a collection device that captures a moving image; and an analysis device that extracts a still image corresponding to a specified position from the moving image,
By the collecting device,
Photographing a landscape as a moving image of a vehicle on which the collection device is mounted; and
Acquiring the position data of the vehicle, and adding the time at which the position data was acquired to the position data;
Acquiring acceleration data in the vertical direction of the vehicle, and adding the time at which the acceleration data was acquired to the acceleration data;
By the analysis device,
Obtaining a time added to the position data closest to the designated position as a reference time;
Extracting from the acceleration data the acceleration data that exceeds a predetermined threshold in the vicinity of the reference time;
Determining acceleration data satisfying a predetermined condition in the extracted acceleration data as representative acceleration data;
Extracting a still image corresponding to the specified position from the moving image based on the time added to the representative acceleration data;
An image acquisition method including:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015185601A JP2017060114A (en) | 2015-09-18 | 2015-09-18 | Picture acquisition system and picture acquisition method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015185601A JP2017060114A (en) | 2015-09-18 | 2015-09-18 | Picture acquisition system and picture acquisition method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2017060114A true JP2017060114A (en) | 2017-03-23 |
Family
ID=58390863
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015185601A Pending JP2017060114A (en) | 2015-09-18 | 2015-09-18 | Picture acquisition system and picture acquisition method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2017060114A (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023047492A1 (en) * | 2021-09-22 | 2023-03-30 | 日本電信電話株式会社 | Control device, control system, control method, and program |
-
2015
- 2015-09-18 JP JP2015185601A patent/JP2017060114A/en active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023047492A1 (en) * | 2021-09-22 | 2023-03-30 | 日本電信電話株式会社 | Control device, control system, control method, and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2920954B1 (en) | Automatic image capture | |
US9091755B2 (en) | Three dimensional image capture system for imaging building facades using a digital camera, near-infrared camera, and laser range finder | |
KR102400452B1 (en) | Context-aware object detection in aerial photographs/videos using travel path metadata | |
KR102077498B1 (en) | Movement path extraction devices of mutual geometric relations fixed camera group and the method | |
JP6261815B1 (en) | Crowd monitoring device and crowd monitoring system | |
US20170299385A1 (en) | Method of obtaining geographically related images using a vehicle | |
JP2012159506A5 (en) | ||
GB2601689A (en) | Determining the state of infrastructure in a region of interest | |
CN104427255A (en) | Image processing method of vehicle camera and image processing apparatus using the same | |
JP4436632B2 (en) | Survey system with position error correction function | |
US20160165191A1 (en) | Time-of-approach rule | |
KR102463698B1 (en) | System and method for building a location information database of road sign, apparatus and method for estimating location of vehicle using the same | |
CN111183464B (en) | System and method for estimating saturation flow of signal intersection based on vehicle trajectory data | |
KR102033075B1 (en) | A providing location information systme using deep-learning and method it | |
JP6141148B2 (en) | Time series recording data analyzer | |
JP2017060114A (en) | Picture acquisition system and picture acquisition method | |
KR101286741B1 (en) | Mobile mapping system and control method | |
JP4752319B2 (en) | Image recognition apparatus and image recognition method | |
US20100211317A1 (en) | Determining velocity using multiple sensors | |
CN108683833B (en) | Image acquisition apparatus and image acquisition method | |
Bardaro et al. | Accessible urban routes reconstruction by fusing mobile sensors data | |
Cho et al. | Multimedia sensor dataset for the analysis of vehicle movement | |
JP7154720B2 (en) | Road surface inspection work support system | |
US20190212131A1 (en) | Pipeline depth of cover determination method and apparatus | |
JP7115263B2 (en) | Evaluation device, investigation system, evaluation method and program |