WO2023181767A1 - 車両運行データ生成装置 - Google Patents

車両運行データ生成装置 Download PDF

Info

Publication number
WO2023181767A1
WO2023181767A1 PCT/JP2023/006446 JP2023006446W WO2023181767A1 WO 2023181767 A1 WO2023181767 A1 WO 2023181767A1 JP 2023006446 W JP2023006446 W JP 2023006446W WO 2023181767 A1 WO2023181767 A1 WO 2023181767A1
Authority
WO
WIPO (PCT)
Prior art keywords
place name
unit
vehicle
operation data
place
Prior art date
Application number
PCT/JP2023/006446
Other languages
English (en)
French (fr)
Inventor
範眞 細川
達司 中西
Original Assignee
株式会社Ｊｖｃケンウッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2022045911A external-priority patent/JP2023140065A/ja
Priority claimed from JP2022045900A external-priority patent/JP2023140057A/ja
Application filed by 株式会社Ｊｖｃケンウッド filed Critical 株式会社Ｊｖｃケンウッド
Publication of WO2023181767A1 publication Critical patent/WO2023181767A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00—Registering or indicating the working of vehicles
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions

Definitions

  • the present disclosure relates to a vehicle operation data generation device.
  • Patent Document 1 describes an information processing device that records vehicle position information and images captured by a camera mounted on the vehicle.
  • a first aspect of the one or more embodiments is that the vehicle is traveling based on a sign including a place name in an image generated by an imaging unit mounted on the vehicle capturing at least an image in front of the vehicle.
  • a vehicle operation data generating device comprising a place name extracting part for extracting a place name of a place where a vehicle is to be visited, and an operation data generating part for generating operation data recording the place name extracted by the place name extracting part.
  • a second aspect of the one or more embodiments is that the vehicle is traveling based on a sign including a place name in an image generated by an imaging unit mounted on the vehicle capturing at least an image in front of the vehicle.
  • a place name extraction unit that extracts a place name of a place where the vehicle is located;
  • an event detection unit that detects that an event of at least one of a right turn, a left turn, and a stoppage of the vehicle for a predetermined time or more has occurred;
  • a vehicle operation data generating device comprising an operation data generation unit that generates operation data recording a place name extracted by the place name extraction unit at a detection time when the occurrence of the event is detected or immediately before the detection time.
  • the vehicle operation data generation device there is no need to set in advance a point from which position information is to be acquired, and position information can be automatically recorded when the vehicle is traveling.
  • FIG. 1 is a block diagram showing a vehicle operation data generation device according to a first embodiment.
  • FIG. 2 is a block diagram showing a first configuration example of a place name extraction unit in the vehicle operation data generation device according to the first or second embodiment.
  • FIG. 2 is a diagram showing a first example of a guide sign indicating a famous point or a major point. It is a figure which shows the 2nd example of the guide sign which shows a famous spot or a major point. It is a figure which shows the 1st example of the block display board which shows the block of land. It is a figure which shows the 2nd example of the block display board which shows the block of land. It is a conceptual diagram which shows an example of operation data.
  • FIG. 1 is a block diagram showing a vehicle operation data generation device according to a first embodiment.
  • FIG. 2 is a block diagram showing a first configuration example of a place name extraction unit in the vehicle operation data generation device according to the first or second embodiment.
  • FIG. 2 is a diagram showing
  • FIG. 2 is a block diagram showing a second configuration example of a place name extraction unit in the vehicle operation data generation device according to the first or second embodiment. It is a block diagram showing the modification of the 2nd example of composition of the place name extraction part in the vehicle operation data generation device concerning the 1st or 2nd embodiment.
  • FIG. 7 is a block diagram showing a third configuration example of a place name extraction unit in the vehicle operation data generation device according to the first or second embodiment.
  • FIG. 2 is a block diagram showing a vehicle operation data generation device according to a second embodiment.
  • the vehicle operation data generation device 100 includes an operation data recording section 7 and a transmitting section 8.
  • the vehicle operation data generation device 100 is mounted on a vehicle.
  • the imaging unit 1 can be replaced by an imaging unit included in a drive recorder mounted on a vehicle. Therefore, the vehicle operation data generation device 100 does not necessarily need to include the imaging section 1.
  • the vehicle operation data generation device 100 includes the related information search section 5, it is not necessary to include the related information search section 5.
  • the vehicle operation data generation device 100 does not need to include the operation data recording section 7 when the transmission section 8 is configured to only stream and distribute the operation data generated by the operation data generation section 6.
  • the vehicle operation data generation device 100 is configured such that the transmitting unit 8 only transmits the operation data recorded in the operation data recording unit 7, the vehicle operation data generation device 100 does not need to have a configuration for streaming the operation data.
  • the transmitting section 8 may not be provided.
  • the entire vehicle operation data generation device 100 may be provided within the drive recorder.
  • the image capturing section 1 may be included in a drive recorder, and the image signal processing section 2 to the transmitting section 8 may be provided within the car navigation device.
  • the imaging unit 1 images at least the front of the vehicle and generates an image signal.
  • the image signal processing section 2 includes a contrast adjustment section 201 and a noise removal section 202.
  • the contrast adjustment unit 201 adjusts the contrast of the input image signal
  • the noise removal unit 202 removes noise included in the input image signal.
  • the image signal processing section 2 converts the image signal into a digital signal when the image signal is inputted by an A/D converter (not shown), or converts the image signal into a digital signal when outputting it to the image signal processing section 2. Convert to signal.
  • the imaging unit 1 may include an A/D converter.
  • the image signal processing section 2 can be configured by a signal processing circuit.
  • the image storage unit 3 temporarily stores the image signal output from the image signal processing unit 2 for a predetermined period of time, and updates the stored image signal.
  • the image storage unit 3 can be configured by RAM.
  • the place name extraction unit 4 extracts the place name of the place where the vehicle is traveling based on the sign including the place name in the image in the image signal stored in the image storage unit 3.
  • the place name extraction unit 4 may be configured with a microprocessor.
  • FIG. 2 shows a place name extraction unit 4A, which is a first configuration example of the place name extraction unit 4.
  • the place name extraction section 4A includes a road sign extraction section 41, a target sign extraction section 42, a sign pattern data storage section 43, and a character recognition section 44.
  • the road sign extraction unit 41 extracts road signs from the images stored in the image storage unit 3.
  • the road sign extraction unit 41 extracts road signs by excluding irrelevant colors, detecting straight lines etc. by Hough transform, and extracting features by using SIFT (Scale-Invariant Feature Transform) algorithm. Extract. There is no limit to how the road sign extracting unit 41 specifically extracts road signs.
  • SIFT Scale-Invariant Feature Transform
  • Road signs include regulatory signs such as maximum speed, no parking, one-way traffic, warning signs such as railroad crossings, traffic lights, crosswind warnings, crosswalks, stop lines, safety zones, etc., guide signs including place names, etc. There are various signs.
  • the road sign extraction unit 41 extracts regulation signs, warning signs, instruction signs, and guide signs.
  • Guide signs include various types of signs, such as signs indicating direction, direction and distance, signs indicating advance notice of direction and direction, signs indicating direction and direction, and signs indicating famous points or major points. It is desirable to extract place names from guide signs indicating famous points or major points, as shown in FIG. 3A or 3B.
  • the place name is not limited to the name of a residential place or the name of an administrative place, and the place name may include the name of a tourist spot or a famous place.
  • a block display board indicating the block of land is sometimes attached to a telephone pole or telegraph pole.
  • a block display board may be attached to the wall of a house, building, or the like.
  • block display boards also indicate place names.
  • the sign pattern data storage unit 43 stores pattern data of guide signs including place names and pattern data of block display boards. It is preferable that the sign pattern data storage unit 43 stores pattern data of guide signs of famous points or major points as pattern data of guide signs.
  • the target sign extraction unit 42 refers to the pattern data stored in the sign pattern data storage unit 43 and extracts guide signs or block display boards that include place names from among the road signs extracted by the road sign extraction unit 41. . It is preferable that the target sign extraction unit 42 extracts guide signs of famous points or major points.
  • the character recognition unit 44 recognizes characters from the guide sign or block display board extracted by the target sign extraction unit 42 using a known character recognition technique.
  • the characters recognized by the character recognition unit 44 indicate the name of the place where the vehicle is traveling at the time the place name extraction unit 4A extracts the road sign from the image.
  • the character recognition unit 44 may recognize characters using an external server that provides a character recognition service via the network 10 shown in FIG.
  • a server that provides a character recognition service may recognize characters using artificial intelligence (AI).
  • network 10 is the Internet.
  • the image storage unit 3 generates operation data from a still image that is an image at the time when the place name extraction unit 4 (4A) extracts a place name from among the images generated by the imaging unit 1 or a moving image for a predetermined time.
  • the related information search unit 5 accesses the server 11 that provides information via the network 10 and searches for related information related to the place name extracted by the place name extraction unit 4 (4A).
  • the related information search unit 5 supplies the related information obtained as a result of the search to the operation data generation unit 6.
  • the related information search unit 5 may be composed of a microprocessor.
  • the operation data generation unit 6 generates a link between place name data indicating the place name extracted by the place name extraction unit 4, and image data indicating a still image or a moving image at the time the place name was extracted.
  • the information search unit 5 generates operation data that is associated with related information data indicating the related information acquired.
  • the operation data generation section 6 may be composed of a microprocessor.
  • FIG. 5 shows a case where the place name data is Hibiya Park and the image data is a moving image of a predetermined time.
  • a moving image of a predetermined time period is composed of a plurality of frames.
  • the transmitter 8 may stream the operation data generated by the operation data generator 6 to the destination.
  • the transmitter 8 can be configured by a transmitter circuit.
  • the operation data recording section 7 records operation data.
  • the operation data recording section 7 has an arbitrary recording medium.
  • the transmitter 8 can transmit the operation data recorded in the operation data recording section 7 to the destination at any timing.
  • the destination may be a specific recipient or may be a plurality of recipients who use the image providing service.
  • place name extraction unit 4A shown in FIG. 2 a place name extraction unit 4B, which is a second configuration example of the place name extraction unit 4 shown in FIG. 6, may be used.
  • FIG. 6 parts that are substantially the same as those in FIG. 2 are given the same reference numerals.
  • the place name extraction unit 4B includes a character recognition unit 44, a place name detection unit 45, and a place name database 46.
  • the character recognition unit 44 recognizes characters included in images stored in the image storage unit 3.
  • the place name database 46 describes place names of various places.
  • the place name detection unit 45 refers to the place name database 46 and detects a place name as a place where the vehicle will travel from among the characters recognized by the character recognition unit 44. Instead of referring to the place name database 46, the place name detection unit 45 may refer to an external place name database connected to the network 10.
  • the place name extraction unit 4B may be configured as shown in FIG.
  • the GNSS receiving unit 31 receives GNSS signals transmitted from three or more satellites for the Global Navigation Satellite System (GNSS).
  • the position calculation unit 32 calculates the current position (position information) of the vehicle based on GNSS signals from three or more satellites received by the GNSS reception unit 31.
  • GNSS is GPS (Global Positioning System).
  • the place name detection unit 45 refers to the place name database 46 based on the characters recognized by the character recognition unit 44 and the current position of the vehicle calculated by the position calculation unit 32, and detects a place name.
  • the same place name may exist in different prefectures, and it may not be possible to detect the correct place name using place names alone. According to the configuration shown in FIG. 7, the prefecture, city, etc. can be specified, so the correct place name can be detected.
  • place name extraction unit 4C which is a third configuration example of the place name extraction unit 4 shown in FIG. 8, may be used.
  • FIG. 8 parts that are substantially the same as those in FIG. 2 or FIG. 7 are given the same reference numerals.
  • the place name extraction section 4C includes a character recognition section 44, a place name detection section 45, and a geographic information acquisition section 47.
  • the character recognition unit 44 recognizes characters included in images stored in the image storage unit 3.
  • the position calculation unit 32 calculates the current position of the vehicle based on the GNSS signals from three or more satellites received by the GNSS reception unit 31.
  • the geographic information acquisition unit 47 connects to the server 12 that provides a reverse geocoding API (Application Programming Interface) service via the network 10, and acquires the geography of the location where the vehicle is traveling based on the latitude and longitude indicating the current location of the vehicle. Get information.
  • a reverse geocoding API Application Programming Interface
  • the place name detection unit 45 determines that the characters recognized by the character recognition unit 44 are the name of a place where the vehicle is traveling. To detect.
  • the vehicle operation data generation device 100 According to the vehicle operation data generation device 100 according to the first embodiment, there is no need to set in advance the point at which images are to be recorded, and operation data when the vehicle is traveling can be automatically recorded. can.
  • the vehicle operation data generation apparatus 200 includes a vehicle information reception section 21 that receives vehicle information output from an ECU (Electronic Control Unit) 20 in the vehicle, and a An event detection unit 22 that detects the occurrence of an event is added.
  • the vehicle information receiving section 21 can be configured by a receiving circuit.
  • the event detection section 22 may be composed of a microprocessor.
  • the vehicle event is at least one of a right turn, a left turn, and a stop of the vehicle for a predetermined period of time or longer. Parking for more than a predetermined time is included in stopping for more than a predetermined time.
  • the event detection unit 22 When the event detection unit 22 detects a vehicle event, it notifies the image storage unit 3 that the event has been detected.
  • the image storage section 3 supplies the operation data generation section 6 with a still image that is an image at the time when the place name extraction section 4 extracted the place name or a moving image of a predetermined time period.
  • the image storage unit 3 stores a still image or an image at the time when the place name is extracted. A moving image of a predetermined time period is supplied to the operation data generation section 6.
  • the operation data generation section 6 generates the place name extracted by the place name extraction section 4 when the event detection section 22 detects the occurrence of an event, and the still image that is the place name at the time when the place name was extracted by the place name extraction section 4.
  • the system generates operation data in which images or videos of a predetermined time are associated with each other.
  • the place name extraction unit 4 in FIG. 9 may be any of the place name extraction unit 4A shown in FIG. 2, the place name extraction unit 4B shown in FIG. 6 or 7, or the place name extraction unit 4C shown in FIG. 8.
  • the event detection section 22 detects a vehicle event based on the vehicle information received by the vehicle information reception section 21, but the event detection section 22 detects a vehicle event based on the vehicle information received by the vehicle information reception section 21. It is also possible to detect events of
  • the timing at which the operation data generation unit 6 generates operation data is not limited to the detection time when the event detection unit 22 detects the occurrence of an event.
  • the operation data generation unit 6 generates a place name detected at or immediately before the detection time when the event detection unit 22 detects the occurrence of an event, and a still image that is an image at the time the place name is extracted by the place name extraction unit 4.
  • operation data that is associated with a video of a predetermined time period may be generated.
  • Immediately before the detection time may be appropriately set, such as within a predetermined time such as within one minute from the detection time, or within a predetermined distance such as within 100 meters from the position at the detection time.
  • the operation data recorded in the operation data recording section 7 or transmitted by the transmission section 8 is transmitted when the vehicle turns right, left, or This can be limited to when the vehicle is stopped for a predetermined period of time or longer. Therefore, the data capacity can be reduced. If a vehicle has been stopped for a predetermined period of time or longer, there is a high possibility that the vehicle has stopped for sightseeing, etc., and even limited operation data is sufficient as a record of the trip.
  • operation data is generated in which place names and images are associated with each other, but operation data may be generated based only on place names. That is, the operation data generation section 6 may generate operation data in which only the place names extracted by the place name extraction section 4 of the places where the vehicle has traveled are recorded.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)

Abstract

車両運行データ生成装置（１００）は、地名抽出部（４）と運行データ生成部（６）とを備える。地名抽出部（４）は、車両に搭載されている撮像部（１）が車両の少なくとも前方を撮像することによって生成した画像内の地名を含む標識に基づいて、車両が走行する場所の地名を抽出する。運行データ生成部（６）は、地名抽出部（４）によって抽出された地名を記録した運行データを生成する。

Description

車両運行データ生成装置
　本開示は、車両運行データ生成装置に関する。
　車両が走行するときの運行データを自動的に記録することができれば、運行データを旅行の記録として保存することができる。特許文献１には、車両の位置情報と車両に搭載されたカメラが撮影した画像とを記録する情報処理装置が記載されている。
特開２０１９－８６３７２号公報
　特許文献１に記載の情報処理装置によれば、位置情報を取得する地点を予め設定しておく必要がある。位置情報を取得する地点を予め設定する必要がなく、車両が走行するときの位置情報を自動的に記録することができる車両運行データ生成装置の登場が望まれる。
　１またはそれ以上の実施形態の第１の態様は、車両に搭載されている撮像部が前記車両の少なくとも前方を撮像することによって生成した画像内の地名を含む標識に基づいて、前記車両が走行する場所の地名を抽出する地名抽出部と、前記地名抽出部によって抽出された地名を記録した運行データを生成する運行データ生成部とを備える車両運行データ生成装置を提供する。
　１またはそれ以上の実施形態の第２の態様は、車両に搭載されている撮像部が前記車両の少なくとも前方を撮像することによって生成した画像内の地名を含む標識に基づいて、前記車両が走行する場所の地名を抽出する地名抽出部と、前記車両の右折、左折、所定時間以上の停車のうちの少なくとも１つであるイベントが発生したことを検出するイベント検出部と、前記イベント検出部が前記イベントの発生を検出した検出時点または前記検出時点の直前で、前記地名抽出部によって抽出された地名を記録した運行データを生成する運行データ生成部とを備える車両運行データ生成装置を提供する。
　１またはそれ以上の実施形態に係る車両運行データ生成装置によれば、位置情報を取得する地点を予め設定する必要がなく、車両が走行するときの位置情報を自動的に記録することができる。
第１実施形態に係る車両運行データ生成装置を示すブロック図である。 第１または第２実施形態に係る車両運行データ生成装置における地名抽出部の第１の構成例を示すブロック図である。 著名地点または主要地点を示す案内標識の第１の例を示す図である。 著名地点または主要地点を示す案内標識の第２の例を示す図である。 土地の街区を示す街区表示板の第１の例を示す図である。 土地の街区を示す街区表示板の第２の例を示す図である。 運行データの一例を示す概念図である。 第１または第２実施形態に係る車両運行データ生成装置における地名抽出部の第２の構成例を示すブロック図である。 第１または第２実施形態に係る車両運行データ生成装置における地名抽出部の第２の構成例の変形例を示すブロック図である。 第１または第２実施形態に係る車両運行データ生成装置における地名抽出部の第３の構成例を示すブロック図である。 第２実施形態に係る車両運行データ生成装置を示すブロック図である。
　以下、各実施形態の車両運行データ生成装置及び車両運行データ生成方法について、添付図面を参照して説明する。
＜第１実施形態＞
　図１に示す第１実施形態に係る車両運行データ生成装置１００は、撮像部１、画像信号処理部２、画像記憶部３、地名抽出部４、関連情報検索部５、運行データ生成部６、運行データ記録部７、送信部８を備える。車両運行データ生成装置１００は車両に搭載されている。撮像部１は、車両に搭載されているドライブレコーダが備える撮像部で代用することができる。よって、車両運行データ生成装置１００は撮像部１を必ずしも備えなくてよい。
　車両運行データ生成装置１００は、関連情報検索部５を備えることが好ましいが、関連情報検索部５を備えなくてもよい。車両運行データ生成装置１００は、送信部８が、運行データ生成部６が生成する運行データをストリーミング配信するだけの構成とする場合には、運行データ記録部７を備えなくてもよい。車両運行データ生成装置１００は、送信部８が、運行データ記録部７に記録した運行データを送信するだけの構成とする場合には、運行データをストリーミング配信する構成を備えなくてもよい。
　運行データ記録部７が、車両運行データ生成装置１００に着脱自在のメモリカード等の記録媒体に運行データを記録する場合には、送信部８を備えない構成としてもよい。
　車両運行データ生成装置１００の全体が、ドライブレコーダ内に設けられていてもよい。撮像部１がドライブレコーダに備えられていて、画像信号処理部２～送信部８の部分がカーナビゲーション装置内に設けられていてもよい。
　図１において、撮像部１は車両の少なくとも前方を撮像して画像信号を生成する。画像信号処理部２は、コントラスト調整部２０１及びノイズ除去部２０２を有する。コントラスト調整部２０１は入力された画像信号のコントラストを調整し、ノイズ除去部２０２は入力された画像信号に含まれているノイズを除去する。画像信号処理部２は、図示していないＡ／Ｄ変換器によって画像信号が入力された時点で画像信号をデジタル信号に変換するか、画像信号処理部２へと出力する時点で画像信号をデジタル信号に変換する。撮像部１がＡ／Ｄ変換器を備えてもよい。画像信号処理部２は信号処理回路によって構成することができる。
　画像記憶部３は、画像信号処理部２より出力される画像信号を所定時間だけ一時的に記憶し、記憶する画像信号を更新する。画像記憶部３はＲＡＭによって構成することができる。地名抽出部４は、画像記憶部３に記憶されている画像信号における画像内の地名を含む標識に基づいて、車両が走行する場所の地名を抽出する。地名抽出部４は、マイクロプロセッサで構成されていてもよい。
　図２は、地名抽出部４の第１の構成例である地名抽出部４Ａを示す。地名抽出部４Ａは、道路標識抽出部４１、対象標識抽出部４２、標識パターンデータ記憶部４３、文字認識部４４を有する。道路標識抽出部４１は、画像記憶部３に記憶されている画像のうちの道路標識を抽出する。道路標識抽出部４１は、無関係の色を除外したり、ハフ変換によって直線等を検出したり、ＳＩＦＴ（Scale-Invariant Feature Transform）のアルゴリズムを用いて特徴量を抽出したりして、道路標識を抽出する。道路標識抽出部４１が具体的にどのように道路標識を抽出するかは限定されない。
　道路標識には、最高速度、駐車禁止、一方通行等の規制標識、踏切あり、信号機あり、横風注意等の警戒標識、横断歩道、停止線、安全地帯等の指示標識、地名を含む案内標識等の各種の標識がある。道路標識抽出部４１は、規制標識、警戒標識、指示標識、案内標識を抽出する。
　道路標識から地名を抽出するためには、各種の道路標識のうちの地名を含む案内標識を抽出する必要がある。案内標識には、方面、方向及び距離を示す標識、方面及び方向の予告を示す標識、方面及び方向示す標識、著名地点または主要地点を示す標識等の各種の標識がある。図３Ａまたは図３Ｂに示すような、著名地点または主要地点を示す案内標識から地名を抽出することが望ましい。なお、地名とは居住地名または行政地名に限らず、地名は観光地または名所等の名称を含んでもよい。
　図４Ａに示すように、電柱または電信柱に土地の街区を示す街区表示板が取り付けられていることがある。図４Ｂに示すように、家屋、ビル等の壁面に街区表示板が取り付けられていることがある。著名地点または主要地点の案内標識の他に、街区表示板も地名を示す。
　そこで、標識パターンデータ記憶部４３は、地名を含む案内標識のパターンデータと、街区表示板のパターンデータとを記憶する。標識パターンデータ記憶部４３は、案内標識のパターンデータとして、著名地点または主要地点の案内標識のパターンデータを記憶することが好ましい。対象標識抽出部４２は、標識パターンデータ記憶部４３に記憶されているパターンデータを参照して、道路標識抽出部４１が抽出した道路標識のうちの地名を含む案内標識または街区表示板を抽出する。対象標識抽出部４２は、著名地点または主要地点の案内標識を抽出することが好ましい。
　文字認識部４４は、対象標識抽出部４２が抽出した案内標識または街区表示板から公知の文字認識技術を用いて文字を認識する。文字認識部４４が認識する文字は、地名抽出部４Ａが画像内より道路標識を抽出した時点で車両が走行している場所の地名を示す。文字認識部４４は、図１に示すネットワーク１０を介して、外部の文字認識のサービスを提供するサーバを用いて文字を認識してもよい。文字認識のサービスを提供するサーバは、人工知能（ＡＩ）を用いて文字を認識してもよい。典型的には、ネットワーク１０はインターネットである。
　図１に戻り、画像記憶部３は、撮像部１が生成した画像のうちの、地名抽出部４（４Ａ）が地名を抽出した時点の画像である静止画または所定時間の動画を運行データ生成部６に供給する。関連情報検索部５は、ネットワーク１０を介して、情報を提供するサーバ１１にアクセスして、地名抽出部４（４Ａ）が抽出した地名に関連する関連情報を検索する。関連情報検索部５は、検索の結果得られた関連情報を運行データ生成部６に供給する。関連情報検索部５は、マイクロプロセッサで構成されていてもよい。
　図５に概念的に示すように、運行データ生成部６は、地名抽出部４によって抽出された地名を示す地名データと、地名が抽出された時点の静止画または動画を示す画像データと、関連情報検索部５が取得した関連情報を示す関連情報データとを対応付けた運行データを生成する。運行データ生成部６は、マイクロプロセッサで構成されていてもよい。
　上記のように、関連情報は必須ではなく、運行データ生成部６は、地名データと、地名が抽出された時点の静止画または動画の画像データとを対応付けた運行データを生成すればよい。図５は、地名データが日比谷公園であり、画像データが所定時間の動画像である場合を示している。所定時間の動画像は複数のフレームによって構成されている。
　図１に破線で示すように、送信部８は、運行データ生成部６が生成した運行データを送信先にストリーミング配信してもよい。送信部８は送信回路によって構成することができる。運行データ記録部７は運行データを記録する。運行データ記録部７は任意の記録媒体を有する。送信部８は、任意のタイミングで、運行データ記録部７に記録されている運行データを送信先に送信することができる。送信先は特定の受信者であってもよいし、画像提供サービスを利用する複数の受信者であってもよい。
　図２に示す地名抽出部４Ａに代えて、図６に示す地名抽出部４の第２の構成例である地名抽出部４Ｂとしてもよい。図６において、図２と実質的に同一の部分には同一の符号を付している。
　図６において、地名抽出部４Ｂは、文字認識部４４、地名検出部４５、地名データベース４６を備える。文字認識部４４は、画像記憶部３に記憶されている画像に含まれている文字を認識する。地名データベース４６には、各地の地名が記述されている。地名検出部４５は、地名データベース４６を参照して、文字認識部４４が認識した文字の中から車両が走行する場所としての地名を検出する。地名検出部４５は地名データベース４６を参照する代わりに、ネットワーク１０に接続されている外部の地名データベースを参照してもよい。
　地名検出部４５による地名の検出精度を向上させるために、地名抽出部４Ｂを図７に示すように構成してもよい。ＧＮＳＳ受信部３１は、全地球航法衛星システム（Global Navigation Satellite System: GNSS）用の３つ以上の衛星から送信されるＧＮＳＳ信号を受信する。位置算出部３２は、ＧＮＳＳ受信部３１が受信した３つ以上の衛星からのＧＮＳＳ信号に基づいて車両の現在位置（位置情報）を算出する。典型的には、ＧＮＳＳはＧＰＳ（Global Positioning System）である。
　地名検出部４５は、文字認識部４４が認識した文字と位置算出部３２が算出した車両の現在位置とに基づいて地名データベース４６を参照して、地名を検出する。異なる県で同じ地名が存在する場合があり、地名のみでは正しい地名を検出することができない場合がある。図７に示す構成によれば、県または市等を特定することができるので、正しい地名を検出することができる。
　図２に示す地名抽出部４Ａ、図６または図７に示す地名抽出部４Ｂに代えて、図８に示す地名抽出部４の第３の構成例である地名抽出部４Ｃとしてもよい。図８において、図２または図７と実質的に同一の部分には同一の符号を付している。
　図８において、地名抽出部４Ｃは、文字認識部４４、地名検出部４５、地理情報取得部４７を備える。文字認識部４４は、画像記憶部３に記憶されている画像に含まれている文字を認識する。図７と同様に、位置算出部３２は、ＧＮＳＳ受信部３１が受信した３つ以上の衛星からのＧＮＳＳ信号に基づいて車両の現在位置を算出する。地理情報取得部４７は、ネットワーク１０を介して逆ジオコーディングＡＰＩ（Application Programming Interface）のサービスを提供するサーバ１２に接続して、車両の現在位置を示す緯度及び経度から車両が走行する場所の地理情報を取得する。
　地名検出部４５は、文字認識部４４が認識した文字が地理情報取得部４７が取得した地理情報と一致するとき、文字認識部４４が認識した文字を車両が走行する場所としての地名であると検出する。
　以上のように、第１実施形態に係る車両運行データ生成装置１００によれば、画像を記録する地点を予め設定する必要がなく、車両が走行するときの運行データを自動的に記録することができる。
＜第２実施形態＞
　図９に示す第２実施形態に係る車両運行データ生成装置２００において、図１に示す第１実施形態に係る車両運行データ生成装置１００と同一の部分には同一の符号を付し、その説明を省略することがある。
　車両運行データ生成装置２００は、車両運行データ生成装置１００と比較して、車両内のＥＣＵ（Electronic Control Unit）２０より出力される車両情報を受信する車両情報受信部２１と、車両情報に基づいてイベントが発生したことを検出するイベント検出部２２とが追加されている。車両情報受信部２１は受信回路によって構成することができる。イベント検出部２２はマイクロプロセッサで構成されていてもよい。
　車両のイベントとは、車両の右折、左折、所定時間以上の停車のうちの少なくとも１つである。所定時間以上の駐車は所定時間以上の停車に含まれる。
　イベント検出部２２は、車両のイベントを検出すると、イベントを検出したことを画像記憶部３に通知する。第１実施形態においては、画像記憶部３は、地名抽出部４が地名を抽出した時点の画像である静止画または所定時間の動画を運行データ生成部６に供給する。第２実施形態においては、画像記憶部３は、イベント検出部２２よりイベントの検出が通知され、かつ、地名抽出部４が地名を抽出すれば、地名を抽出した時点の画像である静止画または所定時間の動画を運行データ生成部６に供給する。
　従って、運行データ生成部６は、イベント検出部２２がイベントの発生を検出したときの、地名抽出部４によって抽出された地名と、地名抽出部４によって地名が抽出された時点の画像である静止画または所定時間の動画とを対応付けた運行データを生成する。
　図９における地名抽出部４は、図２に示す地名抽出部４Ａ、図６または図７に示す地名抽出部４Ｂ、図８に示す地名抽出部４Ｃのいずれであってもよい。
　図９に示す構成では、イベント検出部２２は車両情報受信部２１が受信した車両情報に基づいて車両のイベントを検出しているが、ＧＮＳＳ信号に基づいて算出する車両の位置情報に基づいて車両のイベントを検出することも可能である。
　運行データ生成部６が運行データを生成するタイミングは、イベント検出部２２がイベントの発生を検出した検出時点に限定されない。例えば、運行データ生成部６は、イベント検出部２２がイベントの発生を検出した検出時点または検出時点の直前で検出した地名と、地名抽出部４によって地名が抽出された時点の画像である静止画または所定時間の動画とを対応付けた運行データを生成してもよい。検出時点の直前とは、検出時点の１分以内等の所定時間以内、または、検出時点での位置から１００メートル以内等の所定の距離以内のように適宜に設定すればよい。
　第２実施形態によれば、第１実施形態が奏する効果の他に、運行データ記録部７に記録したり、送信部８が送信したりする運行データを、車両の右折時、左折時、または所定時間以上の停車時に限定することができる。よって、データ容量を少なくすることができる。車両が所定時間以上停車しているということは、観光等のために停車している可能性が高く、限定した運行データであっても、旅行の記録としては十分である。
　本発明は以上説明した第１実施形態または第２実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々変更可能である。第１実施形態及び第２実施形態おいては、地名と画像とを対応付けた運行データを生成しているが、地名のみに基づいて運行データを生成してもよい。即ち、運行データ生成部６は、車両が走行した場所の地名抽出部４が抽出した地名のみを記録した運行データを生成してもよい。
　本開示は、ＳＤＧｓ（Sustainable Development Goals：持続可能な開発目標)の「産業と技術革新の基盤をつくろう」の実現に貢献し、IoTソリューションによる価値創出に寄与する事項を含む。
　本願は、２０２２年３月２２日に日本国特許庁に出願された特願２０２２－０４５９００号及び特願２０２２－０４５９１１号に基づく優先権を主張するものであり、それらの全ての開示内容は引用によりここに援用される。

Claims (6)

  1. 　車両に搭載されている撮像部が前記車両の少なくとも前方を撮像することによって生成した画像内の地名を含む標識に基づいて、前記車両が走行する場所の地名を抽出する地名抽出部と、
    　前記地名抽出部によって抽出された地名を記録した運行データを生成する運行データ生成部と、
    　を備える車両運行データ生成装置。
  2. 　車両に搭載されている撮像部が前記車両の少なくとも前方を撮像することによって生成した画像内の地名を含む標識に基づいて、前記車両が走行する場所の地名を抽出する地名抽出部と、
    　前記車両の右折、左折、所定時間以上の停車のうちの少なくとも１つであるイベントが発生したことを検出するイベント検出部と、
    　前記イベント検出部が前記イベントの発生を検出した検出時点または前記検出時点の直前で、前記地名抽出部によって抽出された地名を記録した運行データを生成する運行データ生成部と、
    　を備える車両運行データ生成装置。
  3. 　前記運行データ生成部は、前記地名抽出部によって抽出された地名と、前記撮像部が生成した画像のうちの、前記地名抽出部によって地名が抽出された時点の画像である静止画または所定時間の動画とを対応付けた運行データを生成する請求項１または２に記載の車両運行データ生成装置。
  4. 　前記地名抽出部は、
    　前記撮像部が生成した画像のうちの道路標識を抽出する道路標識抽出部と、
    　地名が記載されている案内標識または土地の街区を示す街区表示板を示す標識パターンデータを参照して、前記道路標識抽出部が抽出した道路標識のうちの前記案内標識または前記街区表示板を抽出する対象標識抽出部と、
    　前記対象標識抽出部によって抽出された前記案内標識または前記街区表示板の文字を前記車両が走行する場所の地名として認識する文字認識部と、
    　を有する請求項１または２に記載の車両運行データ生成装置。
  5. 　前記地名抽出部は、
    　前記撮像部が生成した画像に含まれている文字を認識する文字認識部と、
    　地名が記述されている地名データベースを参照して、前記文字認識部が認識した文字の中から前記車両が走行する場所としての地名を検出する地名検出部と、
    　を有する請求項１または２に記載の車両運行データ生成装置。
  6. 　前記地名抽出部は、
    　前記撮像部が生成した画像に含まれている文字を認識する文字認識部と、
    　ネットワークを介して逆ジオコーディングＡＰＩのサービスを提供するサーバに接続して、全地球航法衛星システム用の複数の衛星から送信される信号に基づいて算出した前記車両の位置情報から前記車両が走行する場所の地理情報を取得する地理情報取得部と、
    　前記文字認識部が認識した文字が前記地理情報取得部が取得した地理情報と一致するとき、前記文字認識部が認識した文字を前記車両が走行する場所としての地名であると検出する地名検出部と、
    　を有する請求項１または２に記載の車両運行データ生成装置。
PCT/JP2023/006446 2022-03-22 2023-02-22 車両運行データ生成装置 WO2023181767A1 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2022-045911 2022-03-22
JP2022-045900 2022-03-22
JP2022045911A JP2023140065A (ja) 2022-03-22 2022-03-22 車両運行データ生成装置
JP2022045900A JP2023140057A (ja) 2022-03-22 2022-03-22 車両運行データ生成装置

Publications (1)

Publication Number Publication Date
WO2023181767A1 true WO2023181767A1 (ja) 2023-09-28

Family

ID=88100534

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2023/006446 WO2023181767A1 (ja) 2022-03-22 2023-02-22 車両運行データ生成装置

Country Status (1)

Country Link
WO (1) WO2023181767A1 (ja)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017049683A (ja) * 2015-08-31 2017-03-09 ルネサスエレクトロニクス株式会社 運転記録装置、運転特性を判定するためのシステムおよび運転特性を判定するためのデータを出力するための方法
JP2020118473A (ja) * 2019-01-21 2020-08-06 株式会社Ｊｖｃケンウッド 経路案内制御装置、経路案内制御方法、およびプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017049683A (ja) * 2015-08-31 2017-03-09 ルネサスエレクトロニクス株式会社 運転記録装置、運転特性を判定するためのシステムおよび運転特性を判定するためのデータを出力するための方法
JP2020118473A (ja) * 2019-01-21 2020-08-06 株式会社Ｊｖｃケンウッド 経路案内制御装置、経路案内制御方法、およびプログラム

Similar Documents

Publication Publication Date Title
JP4752836B2 (ja) 道路環境情報通知装置及び道路環境情報通知プログラム
JP5187617B2 (ja) 画像記録装置、画像記録方法
TWI437210B (zh) 藉由即時交通規則判斷資訊進行導航之電子裝置、方法以及儲存其之電腦可讀取記錄媒體
JP4093026B2 (ja) 道路環境情報通知装置、車載報知装置、情報センタ内装置、及び道路環境情報通知プログラム
JP6838522B2 (ja) 画像収集システム、画像収集方法、画像収集装置、および記録媒体
JP2010035159A (ja) 車両搭載型画像記録装置および画像記録方法
CN109670010B (zh) 轨迹数据补充方法及装置
JP2009246503A (ja) ドライブ映像要約装置
CN103077624A (zh) 一种基于gps的即时导航路况***及导航方法
JP2009074861A (ja) 移動量計測装置及び位置計測装置
JP4553272B2 (ja) 車載画像記録装置
JP2019121264A (ja) 画像配信装置、画像配信方法および画像配信プログラム
WO2023181767A1 (ja) 車両運行データ生成装置
JP2018198004A (ja) 通信装置、通信システム、及び通信方法
KR20070064052A (ko) 맵 매칭 자동차 내비게이션 장치
JP2023140065A (ja) 車両運行データ生成装置
JP2023140057A (ja) 車両運行データ生成装置
KR20130066210A (ko) 카메라를 이용한 교통 표지 정보 획득 장치 및 방법
JP2018132529A (ja) 渋滞表示装置、渋滞表示方法および渋滞表示プログラム
JP2023138609A (ja) 渋滞表示装置、渋滞表示方法および渋滞表示プログラム
EP1729230A1 (en) Photograph with map
JP5261802B2 (ja) 画像管理方法、画像記録装置
JP2016021707A (ja) 道路画像管理システム
US20220165151A1 (en) Traffic jam information providing device, traffic jam information processing method, and recording medium
JP2008192081A (ja) 位置情報提供システム及び移動装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23774366

Country of ref document: EP

Kind code of ref document: A1

DPE1 Request for preliminary examination filed after expiration of 19th month from priority date (pct application filed from 20040101)