JP7187371B2 - Video provision system - Google Patents

Video provision system Download PDF

Info

Publication number
JP7187371B2
JP7187371B2 JP2019064813A JP2019064813A JP7187371B2 JP 7187371 B2 JP7187371 B2 JP 7187371B2 JP 2019064813 A JP2019064813 A JP 2019064813A JP 2019064813 A JP2019064813 A JP 2019064813A JP 7187371 B2 JP7187371 B2 JP 7187371B2
Authority
JP
Japan
Prior art keywords
video
image
sensor data
unit
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019064813A
Other languages
Japanese (ja)
Other versions
JP2020167480A (en
Inventor
尚保 神谷
泰彦 稗圃
延孝 松本
真也 宮岡
明大 半井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2019064813A priority Critical patent/JP7187371B2/en
Publication of JP2020167480A publication Critical patent/JP2020167480A/en
Application granted granted Critical
Publication of JP7187371B2 publication Critical patent/JP7187371B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Traffic Control Systems (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)

Description

本発明は、映像提供システムに関する。
The present invention relates to a video providing system.

従来、車両の安全性を向上させるための技術として例えば特許文献１が知られている。特許文献１に記載された従来技術は、車両の運転情報に基づいて当該車両の運転状態が異常であると判断した場合に、当該車両の周辺に存在する他の車両へ警戒するように報知する。 2. Description of the Related Art Conventionally, for example, Patent Document 1 is known as a technique for improving vehicle safety. The conventional technology described in Patent Document 1 notifies other vehicles existing in the vicinity of the vehicle to be alert when it is determined that the driving state of the vehicle is abnormal based on the driving information of the vehicle. .

特開２０１８－１４２３３４号公報JP 2018-142334 A

しかし、上述した従来技術では、車両の運転状態が異常と判断されるような運転を行った運転者は、自分の運転が一体どのようなものであるのかが客観的に分からない。このため、運転者自身は、車両の運転状態が異常と判断されるような運転を行った自覚を簡単には持てず、よって、安全な運転を行うように運転者の更生を行うことが難しいという問題があった。 However, in the conventional technology described above, a driver who has driven a vehicle in such a way that the driving state is judged to be abnormal cannot objectively understand what kind of driving he or she is doing. For this reason, the driver himself/herself cannot easily be aware that he/she has driven the vehicle in such a manner that the driving condition is judged to be abnormal. Therefore, it is difficult to rehabilitate the driver to drive safely. There was a problem.

この問題の一つの解決策として、運転状態が異常であるときの走行時の車両が映る映像を当該車両の運転者に見せることによって、当該運転者に自己の運転を客観視させることが挙げられる。しかしながら、一般の運転者について個別に、そのような映像を撮像することは容易ではない。 One solution to this problem is to show the driver of the vehicle a video image of the vehicle while the vehicle is running when the driving conditions are abnormal, thereby allowing the driver to view his or her own driving objectively. . However, it is not easy to capture such images individually for general drivers.

本発明は、このような事情を考慮してなされたものであり、その目的は、運転状態が異常等の特定の運転状態であるときの走行時の車両が映る映像を提供することにある。 SUMMARY OF THE INVENTION The present invention has been made in consideration of such circumstances, and an object thereof is to provide an image showing a vehicle while it is running in a specific driving state such as an abnormal driving state.

（１）本発明の一態様は、映像生成対象車両に搭載される車両搭載装置と、映像収集装置と、前記映像生成対象車両が映る映像データを生成する映像生成装置と、を備える映像提供システムであって、前記車両搭載装置は、前記映像生成対象車両の走行時におけるセンサデータを計測するセンサデータ計測部を備え、前記映像生成装置は、前記センサデータを計測時刻及び計測位置に関連付けて記録するセンサデータ格納部と、前記センサデータが特定の運転状態を示すか否かを判定するセンサデータ判定部と、特定の運転状態を示すと判定された前記センサデータに関連付けられた計測時刻及び計測位置に該当する映像ファイルを、前記映像収集装置から取得する映像取得部と、前記映像ファイルを使用して、前記映像生成対象車両が映る映像データを生成する映像データ生成部と、を備え、前記映像データ生成部は、前記映像取得部が前記映像収集装置から取得した前記映像ファイルの映像の中から前記映像生成対象車両が映っている映像を抽出し、抽出した映像を時系列に沿って合成する、映像提供システムである。
（２）本発明の一態様は、複数の車両に各々搭載される複数の前記映像収集装置を備え、前記映像収集装置は、自車両の外部を撮像する撮像部と、前記撮像部が撮像した撮像データの映像ファイルを格納する映像ファイル格納部と、を備え、前記映像取得部は、前記映像生成対象車両と異なる車線を走行する車両よりも前記映像生成対象車両と同じ車線を走行する車両に搭載された前記映像収集装置から優先して前記映像ファイルを取得する、上記（１）に記載の映像提供システムである。
（３）本発明の一態様は、複数の車両に各々搭載される複数の前記映像収集装置を備え、前記映像収集装置は、自車両の外部を撮像する撮像部と、前記撮像部が撮像した撮像データの映像ファイルを格納する映像ファイル格納部と、前記映像ファイルの撮像時刻及び撮像位置を示すメタ情報を格納するメタ情報格納部と、前記メタ情報を前記映像生成装置へ送信するメタ情報送信部と、を備え、前記映像生成装置は、前記映像収集装置から前記メタ情報を受信するメタ情報受信部と、前記映像収集装置から受信した前記メタ情報を、当該映像収集装置を識別する映像収集装置識別情報に関連付けて格納するメタ情報格納部と、特定の運転状態を示すと判定された前記センサデータに関連付けられた計測時刻及び計測位置と前記メタ情報とに基づいて、映像ファイル取得先の前記映像収集装置及び取得対象映像ファイルを特定する映像収集装置ファイル特定部と、を備える、上記（１）に記載の映像提供システムである。
（４）本発明の一態様は、前記センサデータ計測部は、加速度を計測する上記（１）から（３）のいずれかの映像提供システムである。
（５）本発明の一態様は、前記センサデータ計測部は、前記映像生成対象車両の運転者の生体データを計測する上記（１）から（４）のいずれかの映像提供システムである。 (1) One aspect of the present invention is a video providing system including a vehicle-mounted device mounted on a video generation target vehicle, a video collection device, and a video generation device that generates video data showing the video generation target vehicle. The vehicle-mounted device includes a sensor data measuring unit that measures sensor data while the image generation target vehicle is running, and the image generation device records the sensor data in association with measurement time and measurement position. a sensor data storage unit for determining whether or not the sensor data indicates a specific driving state; and a measurement time and measurement associated with the sensor data determined to indicate the specific driving state. A video acquisition unit that acquires a video file corresponding to a position from the video collection device, and a video data generation unit that generates video data showing the video generation target vehicle using the video file , The image data generation unit extracts an image including the image generation target vehicle from images of the image file acquired by the image acquisition unit from the image collection device, and synthesizes the extracted images in chronological order. It is a video providing system.
(2) One aspect of the present invention is provided with a plurality of image collection devices each mounted on a plurality of vehicles, wherein the image collection devices each include an imaging unit that captures an image of the exterior of the own vehicle, and an image captured by the imaging unit. and a video file storage unit for storing a video file of the imaging data, wherein the video acquisition unit is adapted to a vehicle traveling in the same lane as the video generation target vehicle rather than a vehicle traveling in a different lane than the video generation target vehicle. The video providing system according to (1) above, wherein the video file is preferentially acquired from the mounted video collection device.
( 3 ) One aspect of the present invention includes a plurality of image collection devices mounted on a plurality of vehicles, wherein the image collection device includes an imaging unit that captures an image of the exterior of the own vehicle, and an image captured by the imaging unit. A video file storage unit for storing a video file of image data; a meta information storage unit for storing meta information indicating an imaging time and an imaging position of the video file; and a meta information transmission unit for transmitting the meta information to the video generating device. a meta information receiving unit that receives the meta information from the video collecting device; and a video collecting device that identifies the video collecting device from the meta information received from the video collecting device. Based on the meta information storage unit stored in association with the device identification information, the measurement time and measurement position associated with the sensor data determined to indicate a specific driving state, and the meta information, the image file acquisition destination is determined. The video providing system according to (1) above, comprising: the video collecting device and a video collecting device file identifying unit that identifies the video file to be obtained.
( 4 ) An aspect of the present invention is the image providing system according to any one of (1) to (3) above, wherein the sensor data measurement unit measures acceleration.
( 5 ) An aspect of the present invention is the image providing system according to any one of (1) to ( 4 ) above, wherein the sensor data measurement unit measures biological data of the driver of the image generation target vehicle.

（６）本発明の一態様は、映像生成対象車両が映る映像データを生成する映像生成装置であって、前記映像生成対象車両に搭載される車両搭載装置が計測した前記映像生成対象車両の走行時におけるセンサデータを計測時刻及び計測位置に関連付けて記録するセンサデータ格納部と、前記センサデータが特定の運転状態を示すか否かを判定するセンサデータ判定部と、特定の運転状態を示すと判定された前記センサデータに関連付けられた計測時刻及び計測位置に該当する映像ファイルを、映像収集装置から取得する映像取得部と、前記映像ファイルを使用して、前記映像生成対象車両が映る映像データを生成する映像データ生成部と、を備え、前記映像データ生成部は、前記映像取得部が前記映像収集装置から取得した前記映像ファイルの映像の中から前記映像生成対象車両が映っている映像を抽出し、抽出した映像を時系列に沿って合成する、映像生成装置である。 ( 6 ) An aspect of the present invention is a video generation device that generates video data showing a video generation target vehicle, wherein the video generation target vehicle travels measured by a vehicle-mounted device installed in the video generation target vehicle. A sensor data storage unit that records the sensor data in association with the measurement time and the measurement position, a sensor data determination unit that determines whether the sensor data indicates a specific driving state, and a specific driving state. A video acquisition unit that acquires a video file corresponding to the measured time and the measured position associated with the determined sensor data from a video collection device; and video data showing the video generation target vehicle using the video file. wherein the image data generation unit selects an image showing the image generation target vehicle from images of the image file acquired by the image acquisition unit from the image collection device. It is a video generation device that extracts and synthesizes the extracted videos along the time series .

（７）本発明の一態様は、映像生成対象車両が映る映像データを生成する映像生成装置のコンピュータに、前記映像生成対象車両に搭載される車両搭載装置が計測した前記映像生成対象車両の走行時におけるセンサデータを計測時刻及び計測位置に関連付けて記録するセンサデータ格納ステップと、前記センサデータが特定の運転状態を示すか否かを判定するセンサデータ判定ステップと、特定の運転状態を示すと判定された前記センサデータに関連付けられた計測時刻及び計測位置に該当する映像ファイルを、映像収集装置から取得する映像取得ステップと、前記映像ファイルを使用して、前記映像生成対象車両が映る映像データを生成する映像データ生成ステップと、を実行させるためのコンピュータプログラムであって、前記映像データ生成ステップは、前記映像取得ステップで前記映像収集装置から取得した前記映像ファイルの映像の中から前記映像生成対象車両が映っている映像を抽出し、抽出した映像を時系列に沿って合成する、コンピュータプログラムである。 ( 7 ) According to one aspect of the present invention, in a computer of a video generation device that generates video data showing a video generation target vehicle, a running image of the video generation target vehicle measured by a vehicle-mounted device mounted on the video generation target vehicle is stored. A sensor data storage step of recording sensor data in association with the measurement time and the measurement position, a sensor data determination step of determining whether the sensor data indicates a specific driving state, and a sensor data determining step of determining whether the sensor data indicates a specific driving state A video acquisition step of acquiring a video file corresponding to the measured time and the measured position associated with the determined sensor data from a video collection device; and video data showing the video generation target vehicle using the video file. and a computer program for executing a video data generating step for generating a This is a computer program that extracts images showing the target vehicle and synthesizes the extracted images in chronological order .

（８）本発明の一態様は、映像生成対象車両に搭載される車両搭載装置と、映像収集装置と、前記映像生成対象車両が映る映像データを生成する映像生成装置と、を備える映像提供システムの映像提供方法であって、前記車両搭載装置が、前記映像生成対象車両の走行時におけるセンサデータを計測するセンサデータ計測ステップと、前記映像生成装置が、前記センサデータを計測時刻及び計測位置に関連付けて記録するセンサデータ格納ステップと、前記映像生成装置が、前記センサデータが特定の運転状態を示すか否かを判定するセンサデータ判定ステップと、前記映像生成装置が、特定の運転状態を示すと判定された前記センサデータに関連付けられた計測時刻及び計測位置に該当する映像ファイルを、前記映像収集装置から取得する映像取得ステップと、前記映像生成装置が、前記映像ファイルを使用して、前記映像生成対象車両が映る映像データを生成する映像データ生成ステップと、を含む映像提供方法であって、前記映像生成装置は、前記映像データ生成ステップにおいて、前記映像取得ステップで前記映像収集装置から取得した前記映像ファイルの映像の中から前記映像生成対象車両が映っている映像を抽出し、抽出した映像を時系列に沿って合成する、映像提供方法である。 ( 8 ) An aspect of the present invention is a video providing system comprising a vehicle-mounted device mounted on a video generation target vehicle, a video collection device, and a video generation device that generates video data showing the video generation target vehicle. wherein the vehicle-mounted device measures sensor data during travel of the video generation target vehicle; a step of storing sensor data that is associated and recorded; a step of determining sensor data in which the video generation device determines whether the sensor data indicates a specific driving state; and a step of determining whether the sensor data indicates a specific driving state in the video generation device a video acquisition step of acquiring, from the video collection device, a video file corresponding to the measurement time and measurement position associated with the sensor data determined as and a video data generation step of generating video data showing a vehicle for video generation, wherein the video data generation device acquires data from the video collection device in the video acquisition step in the video data generation step. and extracting an image showing the vehicle for image generation from the image of the image file, and synthesizing the extracted image in chronological order.

本発明によれば、運転状態が異常等の特定の運転状態であるときの走行時の車両が映る映像を提供することができるという効果が得られる。 ADVANTAGE OF THE INVENTION According to this invention, the effect that the image|video which the vehicle when driving|running|working when the driving|running state is a specific driving|running state, such as abnormal can be provided can be provided.

一実施形態に係る映像提供システムの構成例を示すブロック図である。1 is a block diagram showing a configuration example of a video providing system according to one embodiment; FIG. 一実施形態に係る映像提供方法の手順の例を示すフローチャートである。4 is a flow chart showing an example of a procedure of a video providing method according to one embodiment; 一実施形態に係る取得対象映像ファイル選択方法の説明図である。FIG. 4 is an explanatory diagram of a method for selecting an acquisition target video file according to one embodiment; 一実施形態に係る映像データ生成方法の説明図である。FIG. 4 is an explanatory diagram of a video data generation method according to one embodiment;

以下、図面を参照し、本発明の実施形態について説明する。
図１は、一実施形態に係る映像提供システムの構成例を示すブロック図である。図１において、車両１は、映像生成対象の車両（以下、映像生成対象車両と称する）である。映像生成対象車両１は、例えば自動車である。映像生成対象車両１は、通信ネットワークを介して、映像生成装置３と通信を行う。 BEST MODE FOR CARRYING OUT THE INVENTION Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram showing a configuration example of a video providing system according to one embodiment. In FIG. 1, a vehicle 1 is a vehicle for image generation (hereinafter referred to as a vehicle for image generation). The image generation target vehicle 1 is, for example, an automobile. The video generation target vehicle 1 communicates with the video generation device 3 via a communication network.

映像収集装置２は、自動車等の車両や飛行体などの移動体に搭載される装置であってもよく、又は、街中や路側帯等に設置された装置であってもよい。以下の説明では、映像収集装置２として、車両に搭載されるものを例に挙げる。車両は、自動車であってもよく、又は、自転車であってもよい。映像収集装置２は、例えば、車両に搭載されるドライブレコーダであってもよい。本実施形態に係る映像提供システムは、複数の映像収集装置２を備える。それら複数の映像収集装置２はそれぞれ別個の車両に搭載されるものである。各映像収集装置２は、通信ネットワークを介して、映像生成装置３と通信を行う。 The image collecting device 2 may be a device mounted on a vehicle such as an automobile or a mobile object such as an aircraft, or may be a device installed in a street or roadside strip. In the following description, as the image collection device 2, a device mounted on a vehicle will be taken as an example. A vehicle may be an automobile or may be a bicycle. The image collection device 2 may be, for example, a drive recorder mounted on a vehicle. The video providing system according to this embodiment includes a plurality of video collecting devices 2 . Each of the plurality of image collection devices 2 is mounted on a separate vehicle. Each video collection device 2 communicates with the video generation device 3 via a communication network.

［映像生成対象車両の車両搭載装置］
映像生成対象車両１は、センサデータ計測部１０１と、映像データ再生部１０２とを備える。 [Vehicle-mounted device for image generation target vehicle]
The image generation target vehicle 1 includes a sensor data measurement unit 101 and an image data reproduction unit 102 .

センサデータ計測部１０１は、映像生成対象車両１が走行している時（映像生成対象車両１の走行時）におけるセンサデータを計測する。センサデータは、映像生成対象車両１の位置を示す位置データや、映像生成対象車両１の加速度を示す加速度データなどである。センサデータ計測部１０１は、計測結果のセンサデータ（位置データ及び加速度データなど）を映像生成装置３へ送信する。 The sensor data measurement unit 101 measures sensor data while the image generation target vehicle 1 is running (while the image generation target vehicle 1 is running). The sensor data includes position data indicating the position of the image generation target vehicle 1, acceleration data indicating acceleration of the image generation target vehicle 1, and the like. The sensor data measurement unit 101 transmits sensor data (position data, acceleration data, etc.) of measurement results to the image generation device 3 .

映像データ再生部１０２は、映像生成装置３から提供される映像データを再生する。映像生成対象車両１の運転者は、映像生成装置３から提供された映像データを映像データ再生部１０２によって再生することによって、当該映像データから再生された映像を見ることができる。 The video data reproduction unit 102 reproduces video data provided from the video generation device 3 . The driver of the image generation target vehicle 1 can view the image reproduced from the image data by reproducing the image data provided from the image generation device 3 by the image data reproduction unit 102 .

センサデータ計測部１０１は、映像生成対象車両１に搭載された車両搭載装置に備わる。映像データ再生部１０２は、映像生成対象車両１に搭載された車両搭載装置に備わる。センサデータ計測部１０１及び映像データ再生部１０２は、それぞれ別個の車両搭載装置に備わってもよく、又は、同じ車両搭載装置に備わってもよい。車両搭載装置は、映像生成対象車両１に固定的に搭載されてもよく、又は、映像生成対象車両１に一時的に搭載されてもよい。例えば、車両搭載装置は、映像生成対象車両１の内部に持ち込まれたスマートフォン等の携帯通信端末装置であってもよい。 The sensor data measurement unit 101 is provided in a vehicle-mounted device mounted on the video generation target vehicle 1 . The video data reproducing unit 102 is provided in a vehicle-mounted device mounted on the video generation target vehicle 1 . The sensor data measuring unit 101 and the video data reproducing unit 102 may be provided in separate vehicle-mounted devices, or may be provided in the same vehicle-mounted device. The vehicle-mounted device may be fixedly mounted on the image generation target vehicle 1 or may be temporarily mounted on the image generation target vehicle 1 . For example, the vehicle-mounted device may be a mobile communication terminal device such as a smart phone brought into the video generation target vehicle 1 .

なお、映像データ再生部１０２は、映像生成対象車両１に備わっていなくてもよい。映像データ再生部１０２は、例えば、映像生成対象車両１の運転者のスマートフォン等の携帯通信端末装置やタブレット型のコンピュータ装置（タブレットＰＣ）や自宅のパーソナルコンピュータなどによって実現されてもよい。 Note that the video data reproducing unit 102 may not be provided in the video generation target vehicle 1 . The video data reproducing unit 102 may be realized by, for example, a mobile communication terminal device such as a smart phone of the driver of the video generation target vehicle 1, a tablet computer device (tablet PC), a personal computer at home, or the like.

［映像収集装置］
映像収集装置２は、撮像部２０１と、位置計測部２０２と、映像ファイル格納部２０３と、メタ情報格納部２０４と、メタ情報送信部２０５と、ファイル検索部２０６と、映像ファイル送信部２０７とを備える。映像収集装置２は、車両に搭載されるものである。 [Image collecting device]
The video collecting device 2 includes an imaging unit 201, a position measuring unit 202, a video file storage unit 203, a meta information storage unit 204, a meta information transmission unit 205, a file search unit 206, and a video file transmission unit 207. Prepare. The image collecting device 2 is mounted on a vehicle.

撮像部２０１は、映像収集装置２が搭載される車両（自車両）の外部を撮像する。撮像部２０１は、映像収集装置２が搭載される車両（自車両）の外部を撮像するように、撮像方向が設定される。撮像方向は、自車両の進行方向、自車両の進行方向の逆方向、自車両の側方などである。例えば、撮像部２０１は、自車両の進行方向を撮像するものであってもよい。また、撮像部２０１は、同時に複数の撮像方向を撮像することができるものであってもよい。例えば、撮像部２０１は、自車両の進行方向及び進行方向の逆方向を同時に撮像するものであってもよい。 The image capturing unit 201 captures an image of the outside of the vehicle (self-vehicle) in which the image collection device 2 is mounted. The imaging direction of the imaging unit 201 is set so as to capture an image of the exterior of the vehicle (self-vehicle) in which the image collection device 2 is mounted. The imaging direction may be the traveling direction of the own vehicle, the direction opposite to the traveling direction of the own vehicle, the side of the own vehicle, or the like. For example, the imaging unit 201 may capture an image of the traveling direction of the own vehicle. Also, the imaging unit 201 may be capable of capturing images in a plurality of imaging directions at the same time. For example, the imaging unit 201 may simultaneously capture images in the traveling direction of the own vehicle and in the opposite direction of the traveling direction.

撮像部２０１は、撮像した撮像データを一時的に撮像バッファに保持し、一定の周期または一定の保持容量になったタイミングで、撮像バッファに保持する撮像データをＭＰＥＧ－４等の形式でファイル化する。撮像部２０１は、例えば、自動車に搭載されたドライブレコーダに備えられるものであって、撮像データは当該自動車の進行方向等の周囲の状況が撮像された撮像データである。 The image pickup unit 201 temporarily holds captured image data in an image pickup buffer, and files the image data held in the image pickup buffer in a format such as MPEG-4 at a certain period or at a timing when a certain holding capacity is reached. do. The imaging unit 201 is provided, for example, in a drive recorder mounted on a vehicle, and imaging data is imaging data obtained by imaging the surrounding conditions such as the traveling direction of the vehicle.

位置計測部２０２は、撮像部２０１の撮像時の位置（撮像位置）を計測する。位置計測部２０２は、例えば、ドライブレコーダがＧＰＳ（Global Positioning System）受信機を備える場合、ＧＰＳにより測定された位置を撮像位置として取得する。 The position measurement unit 202 measures the position (imaging position) of the image capturing unit 201 when the image is captured. For example, when the drive recorder includes a GPS (Global Positioning System) receiver, the position measuring unit 202 acquires the position measured by GPS as the imaging position.

映像ファイル格納部２０３は、撮像部２０１が撮像しファイル化した映像ファイルを格納する。映像ファイル格納部２０３には、映像ファイルの識別情報（映像ファイルＩＤ）と、当該映像ファイルとが関連付けて格納される。 The video file storage unit 203 stores the video file captured by the imaging unit 201 and filed. The video file storage unit 203 stores identification information (video file ID) of the video file and the video file in association with each other.

メタ情報格納部２０４は、撮像部２０１が撮像しファイル化した映像ファイルに対応するメタ情報を、当該映像ファイルの映像ファイルＩＤに関連付けて格納する。映像ファイルに対応するメタ情報は、当該映像ファイルについての撮像時刻と位置計測部２０２の計測結果の撮像位置とを含む情報である。 The meta information storage unit 204 stores meta information corresponding to the video file captured and filed by the imaging unit 201 in association with the video file ID of the video file. The meta information corresponding to the video file is information including the imaging time and the imaging position of the measurement result of the position measuring unit 202 for the video file.

メタ情報送信部２０５は、自己の映像収集装置２を識別する映像収集装置識別情報（映像収集装置ＩＤ）をメタ情報に付加した映像収集装置ＩＤ付きメタ情報を、映像生成装置３へ送信する。映像収集装置ＩＤ付きメタ情報を映像生成装置３へ送信するタイミングは、一定の周期であってもよく、又は、通信ネットワークに接続したタイミングであってもよい。メタ情報送信部２０５は、例えば、一定の周期でＬＴＥ（Long Term Evolution）通信により映像収集装置ＩＤ付きメタ情報を送信してもよいし、無線ＬＡＮ（Local Area Network）等の無線通信ネットワークに接続したタイミングで映像収集装置ＩＤ付きの複数のメタ情報を一括して送信してもよい。 The meta information transmitting unit 205 transmits meta information with a video collecting device ID, which is obtained by adding video collecting device identification information (video collecting device ID) for identifying its own video collecting device 2 , to the video generating device 3 . The timing of transmitting the image collection device ID-attached meta information to the image generation device 3 may be a fixed cycle, or may be the timing of connection to the communication network. For example, the meta information transmitting unit 205 may transmit meta information with a video collection device ID by LTE (Long Term Evolution) communication at regular intervals, or may be connected to a wireless communication network such as a wireless LAN (Local Area Network). A plurality of pieces of meta information with video collection device IDs may be transmitted collectively at the same timing.

ファイル検索部２０６は、映像生成装置３から受信した映像ファイル要求が示す撮像時刻及び撮像位置に該当するメタ情報を、メタ情報格納部２０４から検索する。ファイル検索部２０６は、当該検索の結果のメタ情報に関連付けられた映像ファイルＩＤを、映像ファイル送信部２０７へ通知する。 The file search unit 206 searches the meta information storage unit 204 for meta information corresponding to the imaging time and imaging position indicated by the video file request received from the video generation device 3 . The file search unit 206 notifies the video file transmission unit 207 of the video file ID associated with the meta information of the search result.

映像ファイル送信部２０７は、ファイル検索部２０６から通知された映像ファイルＩＤに関連付けられた映像ファイルを映像ファイル格納部２０３から取得し、取得した映像ファイルを映像生成装置３へ送信する。 The video file transmission unit 207 acquires the video file associated with the video file ID notified from the file search unit 206 from the video file storage unit 203 and transmits the acquired video file to the video generation device 3 .

［映像生成装置］
映像生成装置３は、センサデータ受信部３０１と、センサデータ格納部３０２と、センサデータ判定部３０３と、メタ情報受信部３０４と、メタ情報格納部３０５と、映像収集装置ファイル特定部３０６と、映像取得部３０７と、映像データ生成部３０８と、映像データ送信部３０９と、を備える。映像生成装置３の各機能は、映像生成装置３が備えるＣＰＵ（Central Processing Unit：中央演算処理装置）がコンピュータプログラムを実行することにより実現される。なお、映像生成装置３として、汎用のコンピュータ装置を使用して構成してもよく、又は、専用のハードウェア装置として構成してもよい。 [Image generation device]
The video generation device 3 includes a sensor data reception unit 301, a sensor data storage unit 302, a sensor data determination unit 303, a meta information reception unit 304, a meta information storage unit 305, a video collection device file identification unit 306, A video acquisition unit 307 , a video data generation unit 308 , and a video data transmission unit 309 are provided. Each function of the image generation device 3 is realized by a CPU (Central Processing Unit) of the image generation device 3 executing a computer program. The video generation device 3 may be configured using a general-purpose computer device, or may be configured as a dedicated hardware device.

センサデータ受信部３０１は、映像生成対象車両１のセンサデータ計測部１０１から送信されたセンサデータを受信する。 The sensor data reception unit 301 receives sensor data transmitted from the sensor data measurement unit 101 of the image generation target vehicle 1 .

センサデータ格納部３０２は、センサデータ受信部３０１が受信したセンサデータを計測時刻及び計測位置に関連付けて記録する。センサデータ格納部３０２は、複数の映像生成対象車両１のセンサデータを記録する場合、映像生成対象車両１の識別情報（映像生成対象車両ＩＤ）に関連付けてセンサデータを記録する。 The sensor data storage unit 302 records the sensor data received by the sensor data reception unit 301 in association with the measurement time and the measurement position. When recording the sensor data of a plurality of image generation target vehicles 1 , the sensor data storage unit 302 records the sensor data in association with the identification information (image generation target vehicle ID) of the image generation target vehicle 1 .

センサデータに関連付けられる計測位置は、当該センサデータに含まれる位置データが示す位置である。センサデータに関連付けられる計測時刻は、当該センサデータが計測された時刻に該当する時刻である。 A measured position associated with sensor data is a position indicated by position data included in the sensor data. The measurement time associated with sensor data is the time at which the sensor data was measured.

センサデータが計測時点で即時に映像生成対象車両１から映像生成装置３へ送信される場合、センサデータに関連付けられる計測時刻は、映像生成対象車両１のセンサデータ計測部１０１が当該センサデータを送信した時刻であってもよく、又は、センサデータ受信部３０１が当該センサデータを受信した時刻であってもよい。 When the sensor data is immediately transmitted from the image generation target vehicle 1 to the image generation device 3 at the time of measurement, the measurement time associated with the sensor data is determined when the sensor data measurement unit 101 of the image generation target vehicle 1 transmits the sensor data. Alternatively, it may be the time when the sensor data receiving unit 301 receives the sensor data.

一方、センサデータが計測時点で即時には映像生成対象車両１から映像生成装置３へ送信されない場合、映像生成対象車両１のセンサデータ計測部１０１は、計測結果のセンサデータ及び当該センサデータの計測時刻を示す計測時刻情報を映像生成装置３へ送信し、当該計測時刻情報が示す計測時刻が当該センサデータに関連付けられる。なお、映像生成対象車両１のセンサデータ及び計測時刻情報は、記録媒体に記録されたものがオフラインで映像生成装置３に入力されてもよい。 On the other hand, if the sensor data is not immediately transmitted from the image generation target vehicle 1 to the image generation device 3 at the time of measurement, the sensor data measurement unit 101 of the image generation target vehicle 1 receives the sensor data of the measurement result and the measurement time of the sensor data. is transmitted to the image generation device 3, and the measurement time indicated by the measurement time information is associated with the sensor data. Note that the sensor data and the measurement time information of the image generation target vehicle 1 may be recorded in a recording medium and input to the image generation device 3 off-line.

センサデータ判定部３０３は、センサデータ格納部３０２内のセンサデータを対象にして、センサデータが特定の運転状態を示すか否かを判定する。特定の運転状態の一例として、安全な運転とは言えない運転（以下、異常運転と称する）の状態が挙げられる。また、特定の運転状態の一例として、明らかに危険な運転であると言える運転（以下、危険運転と称する）の状態が挙げられる。また、特定の運転状態の一例として、安全な運転と言える運転（以下、安全運転と称する）の状態が挙げられる。異常運転状態や危険運転状態や安全運転状態等の特定の運転状態を示すセンサデータの条件は、予め設定される。例えば、センサデータ判定部３０３は、センサ種別毎に正常値の範囲を示す異常運転状態判定表を備え、異常運転状態判定表に示される正常値の範囲から外れるセンサーデータが存在する場合に、当該センサーデータが異常運転状態を示すと判定する。 The sensor data determination unit 303 targets the sensor data in the sensor data storage unit 302 and determines whether or not the sensor data indicates a specific driving state. An example of a specific driving state is a state of driving that cannot be said to be safe driving (hereinafter referred to as abnormal driving). Further, as an example of the specific driving state, there is a state of driving that can be said to be obviously dangerous driving (hereinafter referred to as dangerous driving). Further, as an example of the specific driving state, there is a state of driving that can be said to be safe driving (hereinafter referred to as safe driving). Conditions for sensor data indicating specific driving conditions such as abnormal driving conditions, dangerous driving conditions, and safe driving conditions are set in advance. For example, the sensor data determination unit 303 has an abnormal operating state determination table indicating the range of normal values for each sensor type. Determine that the sensor data indicates an abnormal operating condition.

また、センサデータ判定部３０３は、センサーデータとして例えば加速度データにより、急減速や急加速や急ハンドルや蛇行運転等の異常運転状態又は危険運転状態に該当する加速度の範囲を示す加速度判定情報を保持し、当該加速度判定情報が示す加速度の範囲内に在るセンサーデータを、異常運転状態又は危険運転状態を示すものと判定してもよい。 In addition, the sensor data determination unit 303 uses acceleration data as sensor data, for example, to hold acceleration determination information indicating the range of acceleration corresponding to an abnormal driving state such as sudden deceleration, sudden acceleration, abrupt steering, or meandering driving or a dangerous driving state. Then, sensor data within the range of acceleration indicated by the acceleration determination information may be determined to indicate an abnormal driving state or a dangerous driving state.

また、センサデータ判定部３０３は、単一計測時刻のセンサデータのみで特定の運転状態を判定するのではなく、計測時刻が連続した複数のセンサデータを使用して特定の運転状態を判定してもよい。例えば、計測時刻が連続した所定複数個のセンサデータが全て異常運転状態判定表の正常値の範囲から外れている場合に、当該センサーデータが異常運転状態を示すと判定してもよい。又は、計測時刻が連続した複数のセンサデータの平均値等の統計値によって特定の運転状態を判定してもよい。 In addition, the sensor data determination unit 303 does not determine a specific driving state based only on sensor data at a single measurement time, but uses a plurality of sensor data with continuous measurement times to determine a specific driving state. good too. For example, it may be determined that the sensor data indicates an abnormal operating state when all of a predetermined plurality of sensor data whose measurement times are consecutive are out of the range of normal values in the abnormal operating state determination table. Alternatively, a specific driving state may be determined based on a statistical value such as an average value of a plurality of sensor data whose measurement times are continuous.

メタ情報受信部３０４は、映像収集装置２から映像収集装置ＩＤ付きメタ情報を受信する。メタ情報格納部３０５は、メタ情報受信部３０４が映像収集装置２から受信した映像収集装置ＩＤ付きメタ情報を基に、当該メタ情報を当該映像収集装置ＩＤに関連付けて格納する。メタ情報格納部３０５に格納されるメタ情報は、映像収集装置２が映像ファイル格納部２０３に格納する映像ファイルのメタ情報であって、映像ファイルについての撮像時刻及び撮像位置を示す情報を含む情報である。 The meta information receiving unit 304 receives meta information with a video collecting device ID from the video collecting device 2 . The meta information storage unit 305 stores the meta information in association with the video collecting device ID based on the meta information with the video collecting device ID received by the meta information receiving unit 304 from the video collecting device 2 . The meta information stored in the meta information storage unit 305 is meta information of the video file stored in the video file storage unit 203 by the video collection device 2, and includes information indicating the imaging time and imaging position of the video file. is.

映像収集装置ファイル特定部３０６は、センサデータ判定部３０３により特定の運転状態を示すと判定されたセンサデータにセンサデータ格納部３０２において関連付けられた計測時刻及び計測位置と、メタ情報格納部３０５内のメタ情報とに基づいて、映像ファイル取得先の映像収集装置２及び取得対象映像ファイルを特定する。具体的には、映像収集装置ファイル特定部３０６は、センサデータ判定部３０３により特定の運転状態を示すと判定されたセンサデータにセンサデータ格納部３０２において関連付けられた計測時刻及び計測位置を検索キーに使用して、メタ情報格納部３０５を検索する。映像収集装置ファイル特定部３０６は、当該検索結果のメタ情報と当該メタ情報に関連付けられた映像収集装置ＩＤとをメタ情報格納部３０５から取得する。映像収集装置ファイル特定部３０６は、取得したメタ情報が示す撮像時刻及び撮像位置と当該メタ情報に関連付けられた映像収集装置ＩＤとを映像取得部３０７へ通知する。 The image collection device file identification unit 306 stores the measurement time and measurement position associated in the sensor data storage unit 302 with the sensor data determined to indicate a specific driving state by the sensor data determination unit 303, and the data stored in the meta information storage unit 305. , the image collection device 2 from which the image file is to be obtained and the image file to be obtained are specified. Specifically, the image collection device file identification unit 306 uses the sensor data determination unit 303 to determine that the sensor data indicates a specific driving state, and the measurement time and measurement position associated with the sensor data storage unit 302 as a search key. is used to search the meta information storage unit 305 . The video collection device file identification unit 306 acquires the meta information of the search result and the video collection device ID associated with the meta information from the meta information storage unit 305 . The video collection device file identification unit 306 notifies the video acquisition unit 307 of the imaging time and imaging position indicated by the acquired meta information and the video collection device ID associated with the meta information.

映像取得部３０７は、映像収集装置ファイル特定部３０６から通知された撮像時刻及び撮像位置と映像収集装置ＩＤとに基づいて、当該映像収集装置ＩＤの映像収集装置２に対して、当該撮像時刻及び撮像位置に該当する映像ファイルを要求（映像ファイル要求）する。映像取得部３０７は、当該映像ファイル要求の応答として、当該撮像時刻及び撮像位置に該当する映像ファイルを当該映像収集装置ＩＤの映像収集装置２から受信する。 Based on the imaging time, the imaging position, and the video collecting device ID notified from the video collecting device file identifying unit 306, the video acquiring unit 307 sends the video collecting device 2 having the video collecting device ID the imaging time and the video capturing position. A video file corresponding to the imaging position is requested (video file request). As a response to the video file request, the video acquisition unit 307 receives the video file corresponding to the imaging time and imaging position from the video collecting device 2 having the video collecting device ID.

映像データ生成部３０８は、映像取得部３０７が映像収集装置２から取得した映像ファイルを使用して、映像生成対象車両１が映る映像データを生成する。映像データ送信部３０９は、映像データ生成部３０８が生成した映像生成対象車両１の映像データを当該映像生成対象車両１へ送信する。映像生成対象車両１の映像データ再生部１０２は、映像生成装置３から受信した当該映像データを再生する。これにより、映像生成対象車両１の運転者は、映像データ再生部１０２によって再生された当該映像データの映像に映る当該映像生成対象車両１の自分の運転を客観視することができる。 The video data generation unit 308 uses the video file that the video acquisition unit 307 has acquired from the video collection device 2 to generate video data showing the video generation target vehicle 1 . The image data transmission unit 309 transmits the image data of the image generation target vehicle 1 generated by the image data generation unit 308 to the image generation target vehicle 1 . The video data reproduction unit 102 of the video generation target vehicle 1 reproduces the video data received from the video generation device 3 . As a result, the driver of the image generation target vehicle 1 can objectively view his own driving of the image generation target vehicle 1 reflected in the image of the image data reproduced by the image data reproduction unit 102 .

次に図２を参照して本実施形態に係る映像提供方法を説明する。図２は、本実施形態に係る映像提供方法の手順の例を示すフローチャートである。図２には、映像生成装置３が映像データを生成する際の手順の例が示される。ここでの説明においては、映像生成装置３のセンサデータ格納部３０２には、既に、映像生成対象車両１のセンサデータが計測時刻及び計測位置に関連付けて記録されている。 Next, an image providing method according to the present embodiment will be described with reference to FIG. FIG. 2 is a flow chart showing an example of the procedure of the image providing method according to this embodiment. FIG. 2 shows an example of a procedure when the image generation device 3 generates image data. In the description here, the sensor data of the image generation target vehicle 1 is already recorded in the sensor data storage unit 302 of the image generation device 3 in association with the measurement time and the measurement position.

（ステップＳ１） センサデータ判定部３０３は、センサデータ格納部３０２内のセンサデータを順次対象にして、センサデータが特定の運転状態を示すか否かを判定する。 (Step S1) The sensor data determination unit 303 sequentially targets the sensor data in the sensor data storage unit 302 and determines whether or not the sensor data indicates a specific driving state.

（ステップＳ２） ステップＳ１の判定の結果、センサデータが特定の運転状態を示す場合にはステップＳ３に進み、そうではない場合にはステップＳ１に戻る。 (Step S2) As a result of the determination in step S1, if the sensor data indicates a specific driving condition, the process proceeds to step S3, and if not, the process returns to step S1.

（ステップＳ３） 映像収集装置ファイル特定部３０６は、センサデータ判定部３０３により特定の運転状態を示すと判定されたセンサデータにセンサデータ格納部３０２において関連付けられた計測時刻及び計測位置と、メタ情報格納部３０５内のメタ情報とに基づいて、映像ファイル取得先の映像収集装置２及び取得対象映像ファイルを特定する。 (Step S3) The image collection device file identification unit 306 acquires the measurement time and measurement position associated with the sensor data determined by the sensor data determination unit 303 to indicate a specific driving state in the sensor data storage unit 302, and the meta information. Based on the meta information in the storage unit 305, the video collection device 2 from which the video file is to be obtained and the video file to be obtained are specified.

（ステップＳ４） 映像取得部３０７は、映像収集装置ファイル特定部３０６により特定された取得対象映像ファイルを映像ファイル取得先の映像収集装置２から取得する。 (Step S4) The video acquisition unit 307 acquires the acquisition target video file identified by the video collection device file identification unit 306 from the video collection device 2 as the video file acquisition destination.

（ステップＳ５） 映像データ生成部３０８は、映像取得部３０７が映像収集装置２から取得した映像ファイルを使用して、映像生成対象車両１が映る映像データを生成する。 (Step S5) The video data generation unit 308 uses the video file that the video acquisition unit 307 has acquired from the video collection device 2 to generate video data showing the video generation target vehicle 1 .

［取得対象映像ファイル選択方法］
映像収集装置ファイル特定部３０６は、センサデータ判定部３０３により特定の運転状態を示すと判定されたセンサデータにセンサデータ格納部３０２において関連付けられた計測時刻及び計測位置を検索キーに使用して、メタ情報格納部３０５を検索する。この検索の結果、複数の映像収集装置２のメタ情報が検索されることがあり得る。ここでは、その検索された複数の映像収集装置２のメタ情報に対応する複数の映像ファイルの中から取得対象映像ファイルを選択する方法の例１，例２を以下に説明する。 [How to select a video file to acquire]
The image collection device file identification unit 306 uses, as a search key, the measurement time and measurement position associated with the sensor data determined by the sensor data determination unit 303 to indicate a specific driving state in the sensor data storage unit 302, The meta information storage unit 305 is searched. As a result of this search, meta information of a plurality of video collection devices 2 may be searched. Here, examples 1 and 2 of a method of selecting an acquisition target video file from among a plurality of video files corresponding to the searched meta information of the plurality of video collection devices 2 will be described below.

（取得対象映像ファイル選択方法の例１）
検索結果の映像ファイル（以下、検索映像ファイルと称する）のメタ情報が示す撮像位置が検索キーの計測位置に最も近い検索映像ファイルを選択する。又は、検索映像ファイルのメタ情報が示す撮像位置が検索キーの計測位置から一定の距離以内である全ての検索映像ファイルを選択する。又は、検索映像ファイルのメタ情報が示す撮像位置が検索キーの計測位置から一定の距離以内である検索映像ファイルの中から、当該撮像位置が当該計測位置に近い順に所定数の検索映像ファイルを選択する。 (Example 1 of acquisition target video file selection method)
A search video file whose imaging position indicated by meta information of the search result video file (hereinafter referred to as a search video file) is closest to the measurement position of the search key is selected. Alternatively, all search video files whose imaging positions indicated by the meta information of the search video files are within a certain distance from the measurement position of the search key are selected. Alternatively, a predetermined number of search video files are selected in order from the search video files whose imaging position indicated by the meta information of the search video file is within a certain distance from the measurement position of the search key in order of proximity to the measurement position. do.

（取得対象映像ファイル選択方法の例２）
検索映像ファイルのメタ情報が示す撮像位置と検索キーの計測位置と道路の車線情報とに基づいて、計測位置と撮像位置とが同一車線上に存在する検索映像ファイルを優先して選択する。道路の車線情報は、同一車線の位置範囲を示す情報である。道路の車線情報によって、撮像位置が計測位置と同一車線上に存在するか否かを判別することができる。 (Example 2 of acquisition target video file selection method)
Based on the image pickup position indicated by the meta information of the search image file, the measurement position of the search key, and the lane information of the road, a search image file in which the measurement position and the image pickup position exist on the same lane is preferentially selected. The road lane information is information indicating the position range of the same lane. It is possible to determine whether or not the imaging position is on the same lane as the measurement position based on the lane information of the road.

図３は、取得対象映像ファイル選択方法の例２の説明図である。図３において、各車両２１，２２には、映像収集装置２が搭載されている。各車両２１，２２と映像収集装置２との間の距離はほぼ等しい。この場合、映像生成対象車両１と異なる車線を走行する車両２２により撮像された映像よりも、映像生成対象車両１と同じ車線を走行する車両２１により撮像された映像の方が、映像生成対象車両１の運転状態を認識しやすいと考えられる。このため、映像生成対象車両１と同じ車線を走行する車両２１に搭載された映像収集装置２の検索映像ファイルを優先して選択することは好ましい。 FIG. 3 is an explanatory diagram of Example 2 of the acquisition target video file selection method. In FIG. 3, each vehicle 21, 22 is equipped with the image collection device 2. As shown in FIG. The distances between each vehicle 21, 22 and the image collection device 2 are approximately equal. In this case, the image captured by the vehicle 21 traveling in the same lane as the image generation target vehicle 1 is more likely than the image captured by the vehicle 22 traveling in the lane different from that of the image generation target vehicle 1. It is considered that the driving state of 1 is easy to recognize. Therefore, it is preferable to preferentially select the searched image file of the image collection device 2 mounted in the vehicle 21 traveling in the same lane as the image generation target vehicle 1 .

なお、上述した取得対象映像ファイル選択方法の例１，例２は、それぞれ単独で使用されてもよく、又は、組み合わせて使用されてもよい。 It should be noted that Examples 1 and 2 of the acquisition target video file selection method described above may be used alone, or may be used in combination.

［映像データ生成方法］
映像データ生成部３０８は、映像取得部３０７が映像収集装置２から取得した映像ファイルを使用して、映像生成対象車両１が映る映像データを生成する。この映像データ生成方法の例を以下に説明する。 [Video data generation method]
The video data generation unit 308 uses the video file that the video acquisition unit 307 has acquired from the video collection device 2 to generate video data showing the video generation target vehicle 1 . An example of this video data generation method will be described below.

（映像データ生成方法の例１）
取得結果の映像ファイル（以下、取得映像ファイルと称する）の映像の中から、映像生成対象車両１が映っている映像を抽出し、抽出した映像を時系列に沿って合成する。映像生成対象車両１の特定は、映像生成対象車両１の識別情報を画像認識することにより行う。例えば、映像に映るナンバープレートを画像認識することによって、映像生成対象車両１のナンバープレートが映っている映像を抽出してもよい。また、ナンバープレートの画像認識によって識別された映像生成対象車両１を映像上で追従し、映像生成対象車両１が映っている映像を抽出してもよい。 (Example 1 of video data generation method)
A video in which the video generation target vehicle 1 is shown is extracted from the video of the video file of the acquisition result (hereinafter referred to as an acquired video file), and the extracted video is synthesized in chronological order. The image generation target vehicle 1 is identified by image recognition of the identification information of the image generation target vehicle 1 . For example, an image in which the license plate of the image generation target vehicle 1 is displayed may be extracted by image recognition of the license plate in the image. Alternatively, the image generation target vehicle 1 identified by image recognition of the license plate may be tracked on the image, and the image in which the image generation target vehicle 1 is shown may be extracted.

なお、道路が渋滞している時などには、映像生成対象車両１のナンバープレート等の識別情報が撮像されない可能性がある。このため、映像生成対象車両１の前又は後を走行する車両のナンバープレート等の識別情報に基づいて、映像データの生成に使用する映像を抽出してもよい。映像生成対象車両１の前又は後を走行する車両のナンバープレート等の識別情報については、映像生成対象車両１の乗車者が記録して映像生成装置３へ通知する。 Note that when the road is congested, there is a possibility that the identification information such as the license plate of the image generation target vehicle 1 may not be imaged. Therefore, based on the identification information such as the license plate of the vehicle running in front of or behind the image generation target vehicle 1, the image used to generate the image data may be extracted. The identification information such as the license plate of the vehicle running in front of or behind the image generation target vehicle 1 is recorded by the passenger of the image generation target vehicle 1 and notified to the image generation device 3 .

（映像データ生成方法の例２）
複数の取得映像ファイルの中から、映像生成対象車両１を後方から撮像したものを選択し、選択した取得映像ファイルを使用して映像生成対象車両１が映る映像データを生成する。映像生成対象車両１を後方から撮像したものであるか否かの判別は、取得映像ファイルの映像に映る車両を画像認識することにより行う。 (Example 2 of video data generation method)
A video image generation object vehicle 1 imaged from behind is selected from among a plurality of acquired image files, and image data showing the image generation object vehicle 1 is generated using the selected acquired image file. Determination as to whether or not the image generation target vehicle 1 has been captured from behind is performed by image recognition of the vehicle appearing in the image of the obtained image file.

なお、上述した映像データ生成方法の例１，例２は、それぞれ単独で使用されてもよく、又は、組み合わせて使用されてもよい。 It should be noted that Examples 1 and 2 of the video data generation method described above may be used alone or in combination.

図４は、映像データ生成方法の例１，例２の説明図である。図４において、各車両２３，２４には、映像収集装置２が搭載されている。しかし、映像生成対象車両１の直後を車両１４が走行しているために、各車両２３，２４からは映像生成対象車両１のナンバープレートが撮像されない。一方、車両１４のナンバープレートは、後方を走行する車両２３，２４から撮像され得る。このため、映像生成対象車両１の乗車者は、車両１４のナンバープレートに記載されたナンバーを記録して映像生成装置３へ通知する。これにより、車両１４が映る映像を抽出して映像生成対象車両１が映る映像データを生成することができる。 FIG. 4 is an explanatory diagram of Examples 1 and 2 of the video data generation method. In FIG. 4, each vehicle 23, 24 is equipped with the image collecting device 2. As shown in FIG. However, since the vehicle 14 is running immediately behind the vehicle 1 for image generation, the license plate of the vehicle 1 for image generation is not imaged from each of the vehicles 23 and 24 . On the other hand, the license plate of the vehicle 14 can be imaged from the vehicles 23, 24 traveling behind. Therefore, the passenger of the image generation target vehicle 1 records the number printed on the license plate of the vehicle 14 and notifies the image generation device 3 of the number. As a result, it is possible to generate image data showing the image generation target vehicle 1 by extracting the image showing the vehicle 14 .

なお、図４に示されるように、映像生成対象車両１の後方を十分な車間距離を取らずに車両１４が走行している時には、映像生成対象車両１の運転者が緊張して運転者の脈拍等の生体データが安全な運転に好ましい正常値の範囲から外れる可能性がある。このため、センサデータ計測部１０１が運転者の生体データとして例えば運転者の脈拍を計測し、計測結果の脈拍データをセンサーデータに含めて映像生成装置３へ送信してもよい。映像収集装置２のセンサデータ判定部３０３は、センサーデータに含まれる脈拍データが例えば異常運転状態判定表の正常値の範囲から外れている場合に、当該センサーデータが異常運転状態を示すと判定する。 As shown in FIG. 4, when the vehicle 14 is running behind the video generation target vehicle 1 without a sufficient inter-vehicle distance, the driver of the video generation target vehicle 1 becomes tense. Biometric data, such as pulse, may fall outside the preferred normal range for safe driving. For this reason, the sensor data measuring unit 101 may measure, for example, the driver's pulse as biological data of the driver, and include the pulse data of the measurement result in the sensor data and transmit the sensor data to the image generation device 3 . The sensor data determination unit 303 of the image collection device 2 determines that the sensor data indicates an abnormal driving state when the pulse data included in the sensor data is out of the range of normal values in the abnormal driving state determination table, for example. .

本実施形態によれば、運転状態が異常等の特定の運転状態であるときの走行時の映像生成対象車両１が映る映像を提供することができる。これにより、映像生成対象車両１の運転者に当該映像を見せることによって、当該運転者に自己の運転を客観視させることができるので、運転者自身に対してそのような運転を行った自覚を持たせて、安全な運転を行うように運転者の更生を行うことに寄与することができる。また、身体的に運転の適性が失われてきた高齢者などに自己の運転を客観視させることによって、自己の運転能力の衰えを自覚させることに寄与することができる。 According to this embodiment, it is possible to provide an image showing the image generation target vehicle 1 during running when the driving state is in a specific driving state such as an abnormality. As a result, by showing the image to the driver of the image generation target vehicle 1, the driver can objectively view his/her own driving. It can contribute to rehabilitating the driver to drive safely. In addition, by making elderly people who have physically lost their aptitude for driving look at their own driving objectively, it is possible to contribute to making them aware of their own decline in driving ability.

また、安全運転状態であるときの走行時の映像と異常運転状態又は危険運転状態であるときの走行時の映像とを映像生成対象車両１の運転者に比較して見せることによって、当該運転者に自己の運転の良し悪しを認識させることに寄与することができる。例えば、同一画面上において、安全運転状態であるときの走行時の映像と異常運転状態又は危険運転状態であるときの走行時の映像とを表示領域を分けて同時に表示させることにより、映像生成対象車両１の運転者に自己の運転の良し悪しを客観的に認識させることができる。 In addition, by comparing and showing an image when the vehicle is in a safe driving state and an image when the vehicle is in an abnormal driving state or a dangerous driving state to the driver of the image generation target vehicle 1, the driver can This can contribute to making the driver recognize the quality of his/her own driving. For example, on the same screen, an image during safe driving and an image during abnormal driving or dangerous driving are simultaneously displayed in separate display areas, so that an image can be generated. It is possible to make the driver of the vehicle 1 objectively recognize whether his own driving is good or bad.

また、近年、撮像機能を有するドライブレコーダが普及し、一般の多数の車両が走行時の自車両の外部をドライブレコーダで撮像して記録するようになってきている。本実施形態によれば、それらのドライブレコーダを映像収集装置として利用することにより、各ドライブレコーダに記録された映像を活用することができる。 Further, in recent years, drive recorders having an imaging function have become popular, and many general vehicles use drive recorders to capture and record the exterior of the vehicle during travel. According to this embodiment, by using these drive recorders as a video collection device, it is possible to utilize the video recorded in each drive recorder.

以上、本発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。 Although the embodiment of the present invention has been described in detail above with reference to the drawings, the specific configuration is not limited to this embodiment, and design changes and the like are included within the scope of the present invention.

上述した実施形態では、映像収集装置２として車両に搭載されるものを例に挙げて説明したが、映像収集装置２は、車両以外の例えば飛行体などの移動体に搭載されるものであってもよく、又は、街中や路側帯等に設置されたものであってもよい。 In the above-described embodiment, the image collection device 2 is mounted on a vehicle. Alternatively, it may be installed in the city or on the side of the road.

また、上述した各装置の機能を実現するためのコンピュータプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行するようにしてもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものであってもよい。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、フラッシュメモリ等の書き込み可能な不揮発性メモリ、ＤＶＤ（Digital Versatile Disc）等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。 Alternatively, a computer program for realizing the functions of the devices described above may be recorded in a computer-readable recording medium, and the program recorded in the recording medium may be read and executed by the computer system. Note that the “computer system” referred to here may include hardware such as an OS and peripheral devices.
In addition, "computer-readable recording medium" includes writable nonvolatile memories such as flexible discs, magneto-optical discs, ROMs and flash memories, portable media such as DVDs (Digital Versatile Discs), and computer system built-in media. A storage device such as a hard disk that

さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（例えばＤＲＡＭ（Dynamic Random Access Memory））のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。 Furthermore, "computer-readable recording medium" means a volatile memory (e.g., DRAM (Dynamic Random Access Memory)), which holds the program for a certain period of time, is also included.
Further, the above program may be transmitted from a computer system storing this program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in a transmission medium. Here, the "transmission medium" for transmitting the program refers to a medium having a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line.
Further, the program may be for realizing part of the functions described above. Further, it may be a so-called difference file (difference program) that can realize the above-described functions in combination with a program already recorded in the computer system.

１…映像生成対象車両、２…映像収集装置、３…映像生成装置、１０１…センサデータ計測部、１０２…映像データ再生部、２０１…撮像部、２０２…位置計測部、２０３…映像ファイル格納部、２０４…メタ情報格納部、２０５…メタ情報送信部、２０６…ファイル検索部、２０７…映像ファイル送信部、３０１…センサデータ受信部、３０２…センサデータ格納部、３０３…センサデータ判定部、３０４…メタ情報受信部、３０５…メタ情報格納部、３０６…映像収集装置ファイル特定部、３０７…映像取得部、３０８…映像データ生成部、３０９…映像データ送信部 Reference Signs List 1 video generation target vehicle 2 video collection device 3 video generation device 101 sensor data measurement unit 102 video data reproduction unit 201 imaging unit 202 position measurement unit 203 video file storage unit , 204 : Meta information storage unit 205 : Meta information transmission unit 206 : File search unit 207 : Video file transmission unit 301 : Sensor data reception unit 302 : Sensor data storage unit 303 : Sensor data determination unit 304 Meta information reception unit 305 Meta information storage unit 306 Video collection device file identification unit 307 Video acquisition unit 308 Video data generation unit 309 Video data transmission unit

Claims (3)

映像生成対象車両に搭載される車両搭載装置と、
映像収集装置と、
前記映像生成対象車両が映る映像データを生成する映像生成装置と、を備える映像提供システムであって、
前記車両搭載装置は、前記映像生成対象車両の走行時におけるセンサデータを計測するセンサデータ計測部を備え、
前記映像生成装置は、
前記センサデータを計測時刻及び計測位置に関連付けて記録するセンサデータ格納部と、
前記センサデータが特定の運転状態を示すか否かを判定するセンサデータ判定部と、
特定の運転状態を示すと判定された前記センサデータに関連付けられた計測時刻及び計測位置に該当する映像ファイルを、前記映像収集装置から取得する映像取得部と、
前記映像ファイルを使用して、前記映像生成対象車両が映る映像データを生成する映像データ生成部と、を備え、
前記映像データ生成部は、前記映像取得部が前記映像収集装置から取得した前記映像ファイルの映像の中から前記映像生成対象車両が映っている映像を抽出し、抽出した映像を時系列に沿って合成する、
映像提供システムであり、
複数の車両に各々搭載される複数の前記映像収集装置を備え、
前記映像収集装置は、
自車両の外部を撮像する撮像部と、
前記撮像部が撮像した撮像データの映像ファイルを格納する映像ファイル格納部と、を備え、
前記映像取得部は、前記映像生成対象車両と異なる車線を走行する車両よりも前記映像生成対象車両と同じ車線を走行する車両に搭載された前記映像収集装置から優先して前記映像ファイルを取得する、
映像提供システム。 a vehicle-mounted device mounted on a video generation target vehicle;
a video acquisition device;
A video providing system comprising a video generating device that generates video data showing the video generation target vehicle,
The vehicle-mounted device includes a sensor data measurement unit that measures sensor data during travel of the image generation target vehicle,
The video generation device is
a sensor data storage unit that records the sensor data in association with measurement time and measurement position;
a sensor data determination unit that determines whether the sensor data indicates a specific driving state;
a video acquisition unit that acquires, from the video collection device, a video file corresponding to the measurement time and measurement position associated with the sensor data determined to indicate a specific driving state;
a video data generation unit that generates video data showing the video generation target vehicle using the video file,
The image data generation unit extracts an image including the image generation target vehicle from images of the image file acquired by the image acquisition unit from the image collection device, and chronologically displays the extracted image. to synthesize,
It is a video providing system,
comprising a plurality of the image collection devices each mounted on a plurality of vehicles,
The image collection device is
an imaging unit that captures an image of the exterior of the own vehicle;
a video file storage unit for storing a video file of imaging data captured by the imaging unit;
The image acquisition unit acquires the image file from the image collection device mounted on a vehicle traveling in the same lane as the image generation target vehicle, rather than a vehicle traveling in a different lane than the image generation target vehicle. ,
video delivery system. 前記センサデータ計測部は、加速度を計測する請求項１に記載の映像提供システム。 2. The image providing system according to claim 1, wherein the sensor data measurement unit measures acceleration. 前記センサデータ計測部は、前記映像生成対象車両の運転者の生体データを計測する請求項１又は２のいずれか１項に記載の映像提供システム。 3. The image providing system according to claim 1 , wherein the sensor data measurement unit measures biological data of a driver of the image generation target vehicle.
JP2019064813A 2019-03-28 2019-03-28 Video provision system Active JP7187371B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019064813A JP7187371B2 (en) 2019-03-28 2019-03-28 Video provision system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019064813A JP7187371B2 (en) 2019-03-28 2019-03-28 Video provision system

Publications (2)

Publication Number Publication Date
JP2020167480A JP2020167480A (en) 2020-10-08
JP7187371B2 true JP7187371B2 (en) 2022-12-12

Family

ID=72714144

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019064813A Active JP7187371B2 (en) 2019-03-28 2019-03-28 Video provision system

Country Status (1)

Country Link
JP (1) JP7187371B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7320104B1 (en) 2022-04-28 2023-08-02 株式会社セトラス Image transaction device, information processing method and program

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008234414A (en) 2007-03-22 2008-10-02 Equos Research Co Ltd Database generation device and program
JP2011237947A (en) 2010-05-07 2011-11-24 Fujitsu Ltd Method, program and device for event data processing
JP2014010496A (en) 2012-06-27 2014-01-20 Toyota Central R&D Labs Inc Drive recorder, and drive record management system
JP2015103089A (en) 2013-11-26 2015-06-04 富士通株式会社 Analysis support program, analysis support method and analysis support device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008234414A (en) 2007-03-22 2008-10-02 Equos Research Co Ltd Database generation device and program
JP2011237947A (en) 2010-05-07 2011-11-24 Fujitsu Ltd Method, program and device for event data processing
JP2014010496A (en) 2012-06-27 2014-01-20 Toyota Central R&D Labs Inc Drive recorder, and drive record management system
JP2015103089A (en) 2013-11-26 2015-06-04 富士通株式会社 Analysis support program, analysis support method and analysis support device

Also Published As

Publication number Publication date
JP2020167480A (en) 2020-10-08

Similar Documents

Publication Publication Date Title
JP4674187B2 (en) System, information aggregation method, and information aggregation program
TWI469886B (en) Cooperative event data record system and method
JP4971625B2 (en) Driving support device and driving information calculation system
JP6791200B2 (en) Search support system, search support device, and search support method
US10755121B2 (en) Driving oriented digital video recorder system
JP6534103B2 (en) Recording apparatus and image reproduction method
JP2020061079A (en) Traffic violation vehicle identification system, server, and vehicle control program
JP5585193B2 (en) Event data processing method, program, and apparatus
KR20140128832A (en) Image-processing Apparatus for Car and Method of Sharing Data Using The Same
JP6503692B2 (en) Image transmitting apparatus, image acquiring method, and image acquiring program
JP7340678B2 (en) Data collection method and data collection device
JP2019079194A (en) Information providing system, vehicle, and, program
JP2014010496A (en) Drive recorder, and drive record management system
JP6345572B2 (en) Traveling video recording system, drive recorder used therefor, and method for uploading recorded traveling video
KR20130108928A (en) Method for gathering of car accident, apparatus and system for the same
JP6063189B2 (en) Drive recorder
JP7187371B2 (en) Video provision system
JP2007141211A (en) Driving assisting method and driving assisting device
JP2007048129A (en) System and method for displaying situation surrounding vehicle, and program
TW201741898A (en) System and method for UBI or fleet management by utilizing cloud driving video recording information
JP5180450B2 (en) Driving support method and driving support device
JP2002063681A (en) On-vehicle image display device
JP2020170299A (en) Video search system, tag management device, computer program, and video search method
JP6431261B2 (en) Operation information management system
JP2013161281A (en) Traffic image acquisition device, traffic image acquisition method, and traffic image acquisition program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210122

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211108

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220128

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220614

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220810

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221130

R150 Certificate of patent or registration of utility model

Ref document number: 7187371

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150