JP2023140065A - 車両運行データ生成装置 - Google Patents

Abstract

【課題】画像を記録する地点を予め設定する必要がなく、車両が走行するときの運行データを自動的に記録することができる車両運行データ生成装置を提供する。【解決手段】地名抽出部４は、車両に搭載されている撮像部１が車両の少なくとも前方を撮像することによって生成した画像内の地名を含む標識に基づいて、車両が走行する場所の地名を抽出する。イベント検出部２２は、車両の右折、左折、所定時間以上の停車のうちの少なくとも１つであるイベントが発生したことを検出する。運行データ生成部６はイベント検出部２２がイベントの発生を検出した検出時点または検出時点の直前で、地名抽出部４によって抽出された地名を記録した運行データを生成する。【選択図】図９

Description

本発明は、車両運行データ生成装置に関する。

車両が走行するときの運行データを自動的に記録することができれば、運行データを旅行の記録として保存することができる。特許文献１には、車両の位置情報と車両に搭載されたカメラが撮影した画像とを記録する情報処理装置が記載されている。

特開２０１９－８６３７２号公報

特許文献１に記載の情報処理装置によれば、位置情報を取得する地点を予め設定しておく必要がある。位置情報を取得する地点を予め設定する必要がなく、車両が走行するときの位置情報を自動的に記録することができる車両運行データ生成装置の登場が望まれる。

本発明は、車両に搭載されている撮像部が前記車両の少なくとも前方を撮像することによって生成した画像内の地名を含む標識に基づいて、前記車両が走行する場所の地名を抽出する地名抽出部と、前記車両の右折、左折、所定時間以上の停車のうちの少なくとも１つであるイベントが発生したことを検出するイベント検出部と、前記イベント検出部が前記イベントの発生を検出した検出時点または前記検出時点の直前で、前記地名抽出部によって抽出された地名を記録した運行データを生成する運行データ生成部とを備える車両運行データ生成装置を提供する。

本発明の車両運行データ生成装置によれば、位置情報を取得する地点を予め設定する必要がなく、車両が走行するときの位置情報を自動的に記録することができる。

第１実施形態の車両運行データ生成装置を示すブロック図である。 第１または第２実施形態の車両運行データ生成装置における地名抽出部の第１の構成例を示すブロック図である。 著名地点または主要地点を示す案内標識の第１の例を示す図である。 著名地点または主要地点を示す案内標識の第２の例を示す図である。 土地の街区を示す街区表示板の第１の例を示す図である。 土地の街区を示す街区表示板の第２の例を示す図である。 運行データの一例を示す概念図である。 第１または第２実施形態の車両運行データ生成装置における地名抽出部の第２の構成例を示すブロック図である。 第１または第２実施形態の車両運行データ生成装置における地名抽出部の第２の構成例の変形例を示すブロック図である。 第１または第２実施形態の車両運行データ生成装置における地名抽出部の第３の構成例を示すブロック図である。 第２実施形態の車両運行データ生成装置を示すブロック図である。

以下、各実施形態の車両運行データ生成装置及び車両運行データ生成方法について、添付図面を参照して説明する。

＜第１実施形態＞
図１に示す第１実施形態の車両運行データ生成装置１００は、撮像部１、画像信号処理部２、画像記憶部３、地名抽出部４、関連情報検索部５、運行データ生成部６、運行データ記録部７、送信部８を備える。車両運行データ生成装置１００は車両に搭載されている。撮像部１は、車両に搭載されているドライブレコーダが備える撮像部で代用することができる。よって、車両運行データ生成装置１００は撮像部１を必ずしも備えなくてよい。

車両運行データ生成装置１００は、関連情報検索部５を備えることが好ましいが、関連情報検索部５を備えなくてもよい。車両運行データ生成装置１００は、送信部８が、運行データ生成部６が生成する運行データをストリーミング配信するだけの構成とする場合には、運行データ記録部７を備えなくてもよい。車両運行データ生成装置１００は、送信部８が、運行データ記録部７に記録した運行データを送信するだけの構成とする場合には、運行データをストリーミング配信する構成を備えなくてもよい。

運行データ記録部７が、車両運行データ生成装置１００に着脱自在のメモリカード等の記録媒体に運行データを記録する場合には、送信部８を備えない構成としてもよい。

車両運行データ生成装置１００の全体が、ドライブレコーダ内に設けられていてもよい。撮像部１がドライブレコーダに備えられていて、画像信号処理部２～送信部８の部分がカーナビゲーション装置内に設けられていてもよい。

図１において、撮像部１は車両の少なくとも前方を撮像して画像信号を生成する。画像信号処理部２は、コントラスト調整部２０１及びノイズ除去部２０２を有する。コントラスト調整部２０１は入力された画像信号のコントラストを調整し、ノイズ除去部２０２は入力された画像信号に含まれているノイズを除去する。画像信号処理部２は、図示していないＡ／Ｄ変換器によって画像信号が入力された時点で画像信号をデジタル信号に変換するか、画像信号処理部２へと出力する時点で画像信号をデジタル信号に変換する。撮像部１がＡ／Ｄ変換器を備えてもよい。画像信号処理部２は信号処理回路によって構成することができる。

画像記憶部３は、画像信号処理部２より出力される画像信号を所定時間だけ一時的に記憶し、記憶する画像信号を更新する。画像記憶部３はＲＡＭによって構成することができる。地名抽出部４は、画像記憶部３に記憶されている画像信号における画像内の地名を含む標識に基づいて、車両が走行する場所の地名を抽出する。地名抽出部４は、マイクロプロセッサで構成されていてもよい。

図２は、地名抽出部４の第１の構成例である地名抽出部４Ａを示す。地名抽出部４Ａは、道路標識抽出部４１、対象標識抽出部４２、標識パターンデータ記憶部４３、文字認識部４４を有する。道路標識抽出部４１は、画像記憶部３に記憶されている画像のうちの道路標識を抽出する。道路標識抽出部４１は、無関係の色を除外したり、ハフ変換によって直線等を検出したり、ＳＩＦＴ（Scale-Invariant Feature Transform）のアルゴリズムを用いて特徴量を抽出したりして、道路標識を抽出する。道路標識抽出部４１が具体的にどのように道路標識を抽出するかは限定されない。

道路標識には、最高速度、駐車禁止、一方通行等の規制標識、踏切あり、信号機あり、横風注意等の警戒標識、横断歩道、停止線、安全地帯等の指示標識、地名を含む案内標識等の各種の標識がある。道路標識抽出部４１は、規制標識、警戒標識、指示標識、案内標識を抽出する。

道路標識から地名を抽出するためには、各種の道路標識のうちの地名を含む案内標識を抽出する必要がある。案内標識には、方面、方向及び距離を示す標識、方面及び方向の予告を示す標識、方面及び方向示す標識、著名地点または主要地点を示す標識等の各種の標識がある。図３Ａまたは図３Ｂに示すような、著名地点または主要地点を示す案内標識から地名を抽出することが望ましい。なお、地名とは居住地名または行政地名に限らず、地名は観光地または名所等の名称を含んでもよい。

図４Ａに示すように、電柱または電信柱に土地の街区を示す街区表示板が取り付けられていることがある。図４Ｂに示すように、家屋、ビル等の壁面に街区表示板が取り付けられていることがある。著名地点または主要地点の案内標識の他に、街区表示板も地名を示す。

そこで、標識パターンデータ記憶部４３は、地名を含む案内標識のパターンデータと、街区表示板のパターンデータとを記憶する。標識パターンデータ記憶部４３は、案内標識のパターンデータとして、著名地点または主要地点の案内標識のパターンデータを記憶することが好ましい。対象標識抽出部４２は、標識パターンデータ記憶部４３に記憶されているパターンデータを参照して、道路標識抽出部４１が抽出した道路標識のうちの地名を含む案内標識または街区表示板を抽出する。対象標識抽出部４２は、著名地点または主要地点の案内標識を抽出することが好ましい。

文字認識部４４は、対象標識抽出部４２が抽出した案内標識または街区表示板から公知の文字認識技術を用いて文字を認識する。文字認識部４４が認識する文字は、地名抽出部４Ａが画像内より道路標識を抽出した時点で車両が走行している場所の地名を示す。文字認識部４４は、図１に示すネットワーク１０を介して、外部の文字認識のサービスを提供するサーバを用いて文字を認識してもよい。文字認識のサービスを提供するサーバは、人工知能（ＡＩ）を用いて文字を認識してもよい。典型的には、ネットワーク１０はインターネットである。

図１に戻り、画像記憶部３は、撮像部１が生成した画像のうちの、地名抽出部４（４Ａ）が地名を抽出した時点の画像である静止画または所定時間の動画を運行データ生成部６に供給する。関連情報検索部５は、ネットワーク１０を介して、情報を提供するサーバ１１にアクセスして、地名抽出部４（４Ａ）が抽出した地名に関連する関連情報を検索する。関連情報検索部５は、検索の結果得られた関連情報を運行データ生成部６に供給する。関連情報検索部５は、マイクロプロセッサで構成されていてもよい。

図５に概念的に示すように、運行データ生成部６は、地名抽出部４によって抽出された地名を示す地名データと、地名が抽出された時点の静止画または動画を示す画像データと、関連情報検索部５が取得した関連情報を示す関連情報データとを対応付けた運行データを生成する。運行データ生成部６は、マイクロプロセッサで構成されていてもよい。

上記のように、関連情報は必須ではなく、運行データ生成部６は、地名データと、地名が抽出された時点の静止画または動画の画像データとを対応付けた運行データを生成すればよい。図５は、地名データが日比谷公園であり、画像データが所定時間の動画像である場合を示している。所定時間の動画像は複数のフレームによって構成されている。

図１に破線で示すように、送信部８は、運行データ生成部６が生成した運行データを送信先にストリーミング配信してもよい。送信部８は送信回路によって構成することができる。運行データ記録部７は運行データを記録する。運行データ記録部７は任意の記録媒体を有する。送信部８は、任意のタイミングで、運行データ記録部７に記録されている運行データを送信先に送信することができる。送信先は特定の受信者であってもよいし、画像提供サービスを利用する複数の受信者であってもよい。

図２に示す地名抽出部４Ａに代えて、図６に示す地名抽出部４の第２の構成例である地名抽出部４Ｂとしてもよい。図６において、図２と実質的に同一の部分には同一の符号を付している。

図６において、地名抽出部４Ｂは、文字認識部４４、地名検出部４５、地名データベース４６を備える。文字認識部４４は、画像記憶部３に記憶されている画像に含まれている文字を認識する。地名データベース４６には、各地の地名が記述されている。地名検出部４５は、地名データベース４６を参照して、文字認識部４４が認識した文字の中から車両が走行する場所としての地名を検出する。地名検出部４５は地名データベース４６を参照する代わりに、ネットワーク１０に接続されている外部の地名データベースを参照してもよい。

地名検出部４５による地名の検出精度を向上させるために、地名抽出部４Ｂを図７に示すように構成してもよい。ＧＮＳＳ受信部３１は、全地球航法衛星システム（Global Navigation Satellite System: GNSS）用の３つ以上の衛星から送信されるＧＮＳＳ信号を受信する。位置算出部３２は、ＧＮＳＳ受信部３１が受信した３つ以上の衛星からのＧＮＳＳ信号に基づいて車両の現在位置（位置情報）を算出する。典型的には、ＧＮＳＳはＧＰＳ（Global Positioning System）である。

地名検出部４５は、文字認識部４４が認識した文字と位置算出部３２が算出した車両の現在位置とに基づいて地名データベース４６を参照して、地名を検出する。異なる県で同じ地名が存在する場合があり、地名のみでは正しい地名を検出することができない場合がある。図７に示す構成によれば、県または市等を特定することができるので、正しい地名を検出することができる。

図２に示す地名抽出部４Ａ、図６または図７に示す地名抽出部４Ｂに代えて、図８に示す地名抽出部４の第３の構成例である地名抽出部４Ｃとしてもよい。図８において、図２または図７と実質的に同一の部分には同一の符号を付している。

図８において、地名抽出部４Ｃは、文字認識部４４、地名検出部４５、地理情報取得部４７を備える。文字認識部４４は、画像記憶部３に記憶されている画像に含まれている文字を認識する。図７と同様に、位置算出部３２は、ＧＮＳＳ受信部３１が受信した３つ以上の衛星からのＧＮＳＳ信号に基づいて車両の現在位置を算出する。地理情報取得部４７は、ネットワーク１０を介して逆ジオコーディングＡＰＩ（Application Programming Interface）のサービスを提供するサーバ１２に接続して、車両の現在位置を示す緯度及び経度から車両が走行する場所の地理情報を取得する。

地名検出部４５は、文字認識部４４が認識した文字が地理情報取得部４７が取得した地理情報と一致するとき、文字認識部４４が認識した文字を車両が走行する場所としての地名であると検出する。

以上のように、第１実施形態の車両運行データ生成装置１００によれば、画像を記録する地点を予め設定する必要がなく、車両が走行するときの運行データを自動的に記録することができる。

＜第２実施形態＞
図９に示す第２実施形態の車両運行データ生成装置２００において、図１に示す第１実施形態の車両運行データ生成装置１００と同一の部分には同一の符号を付し、その説明を省略することがある。

車両運行データ生成装置２００は、車両運行データ生成装置１００と比較して、車両内のＥＣＵ（Electronic Control Unit）２０より出力される車両情報を受信する車両情報受信部２１と、車両情報に基づいてイベントが発生したことを検出するイベント検出部２２とが追加されている。車両情報受信部２１は受信回路によって構成することができる。イベント検出部２２はマイクロプロセッサで構成されていてもよい。

車両のイベントとは、車両の右折、左折、所定時間以上の停車のうちの少なくとも１つである。所定時間以上の駐車は所定時間以上の停車に含まれる。

イベント検出部２２は、車両のイベントを検出すると、イベントを検出したことを画像記憶部３に通知する。第１実施形態においては、画像記憶部３は、地名抽出部４が地名を抽出した時点の画像である静止画または所定時間の動画を運行データ生成部６に供給する。第２実施形態においては、画像記憶部３は、イベント検出部２２よりイベントの検出が通知され、かつ、地名抽出部４が地名を抽出すれば、地名を抽出した時点の画像である静止画または所定時間の動画を運行データ生成部６に供給する。

従って、運行データ生成部６は、イベント検出部２２がイベントの発生を検出したときの、地名抽出部４によって抽出された地名と、地名抽出部４によって地名が抽出された時点の画像である静止画または所定時間の動画とを対応付けた運行データを生成する。

図９における地名抽出部４は、図２に示す地名抽出部４Ａ、図６または図７に示す地名抽出部４Ｂ、図８に示す地名抽出部４Ｃのいずれであってもよい。

図９に示す構成では、イベント検出部２２は車両情報受信部２１が受信した車両情報に基づいて車両のイベントを検出しているが、ＧＮＳＳ信号に基づいて算出する車両の位置情報に基づいて車両のイベントを検出することも可能である。

運行データ生成部６が運行データを生成するタイミングは、イベント検出部２２がイベントの発生を検出した検出時点に限定されない。例えば、運行データ生成部６は、イベント検出部２２がイベントの発生を検出した検出時点または検出時点の直前で検出した地名と、地名抽出部４によって地名が抽出された時点の画像である静止画または所定時間の動画とを対応付けた運行データを生成してもよい。検出時点の直前とは、検出時点の１分以内等の所定時間以内、または、検出時点での位置から１００メートル以内等の所定の距離以内のように適宜に設定すればよい。

第２実施形態によれば、第１実施形態が奏する効果の他に、運行データ記録部７に記録したり、送信部８が送信したりする運行データを、車両の右折時、左折時、または所定時間以上の停車時に限定することができる。よって、データ容量を少なくすることができる。車両が所定時間以上停車しているということは、観光等のために停車している可能性が高く、限定した運行データであっても、旅行の記録としては十分である。

本発明は以上説明した第１実施形態または第２実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々変更可能である。第１実施形態及び第２実施形態おいては、地名と画像とを対応付けた運行データを生成しているが、地名のみに基づいて運行データを生成してもよい。即ち、運行データ生成部６は、車両が走行した場所の地名抽出部４が抽出した地名のみを記録した運行データを生成してもよい。

本開示は、ＳＤＧｓ（Sustainable Development Goals：持続可能な開発目標)の「産業と技術革新の基盤をつくろう」の実現に貢献し、IoTソリューションによる価値創出に寄与する事項を含む。

１ 撮像部
２ 画像信号処理部
３ 画像記憶部
４，４Ａ，４Ｂ，４Ｃ 地名抽出部
５ 関連情報検索部
６ 運行データ生成部
７ 運行データ記録部
８ 送信部
１０ ネットワーク
１１，１２ サーバ
２１ 車両情報受信部
２２ イベント検出部
３１ ＧＮＳＳ受信部
３２ 位置算出部
４１ 道路標識抽出部
４２ 対象標識抽出部
４３ 標識パターンデータ記憶部
４４ 文字認識部
４５ 地名検出部
４６ 地名データベース
４７ 地理情報取得部

Claims (5)

1. 車両に搭載されている撮像部が前記車両の少なくとも前方を撮像することによって生成した画像内の地名を含む標識に基づいて、前記車両が走行する場所の地名を抽出する地名抽出部と、
   前記車両の右折、左折、所定時間以上の停車のうちの少なくとも１つであるイベントが発生したことを検出するイベント検出部と、
   前記イベント検出部が前記イベントの発生を検出した検出時点または前記検出時点の直前で、前記地名抽出部によって抽出された地名を記録した運行データを生成する運行データ生成部と、
   を備える車両運行データ生成装置。
2. 前記運行データ生成部は、前記地名抽出部によって抽出された地名と、前記撮像部が生成した画像のうちの、前記地名抽出部によって地名が抽出された時点の画像である静止画または所定時間の動画とを対応付けた運行データを生成する請求項１に記載の車両運行データ生成装置。
3. 前記地名抽出部は、
   前記撮像部が生成した画像のうちの道路標識を抽出する道路標識抽出部と、
   地名が記載されている案内標識または土地の街区を示す街区表示板を示す標識パターンデータを参照して、前記道路標識抽出部が抽出した道路標識のうちの前記案内標識または前記街区表示板を抽出する対象標識抽出部と、
   前記対象標識抽出部によって抽出された前記案内標識または前記街区表示板の文字を前記車両が走行する場所の地名として認識する文字認識部と、
   を有する請求項１または２に記載の車両運行データ生成装置。
4. 前記地名抽出部は、
   前記撮像部が生成した画像に含まれている文字を認識する文字認識部と、
   地名が記述されている地名データベースを参照して、前記文字認識部が認識した文字の中から前記車両が走行する場所としての地名を検出する地名検出部と、
   を有する請求項１または２に記載の車両運行データ生成装置。
5. 前記地名抽出部は、
   前記撮像部が生成した画像に含まれている文字を認識する文字認識部と、
   ネットワークを介して逆ジオコーディングＡＰＩのサービスを提供するサーバに接続して、全地球航法衛星システム用の複数の衛星から送信される信号に基づいて算出した前記車両の位置情報から前記車両が走行する場所の地理情報を取得する地理情報取得部と、
   前記文字認識部が認識した文字が前記地理情報取得部が取得した地理情報と一致するとき、前記文字認識部が認識した文字を前記車両が走行する場所としての地名であると検出する地名検出部と、
   を有する請求項１または２に記載の車両運行データ生成装置。

Images