JP6657891B2 - 操作補助システム、及び、操作補助システムによる操作補助方法 - Google Patents
操作補助システム、及び、操作補助システムによる操作補助方法 Download PDFInfo
- Publication number
- JP6657891B2 JP6657891B2 JP2015239908A JP2015239908A JP6657891B2 JP 6657891 B2 JP6657891 B2 JP 6657891B2 JP 2015239908 A JP2015239908 A JP 2015239908A JP 2015239908 A JP2015239908 A JP 2015239908A JP 6657891 B2 JP6657891 B2 JP 6657891B2
- Authority
- JP
- Japan
- Prior art keywords
- auxiliary information
- information
- operation auxiliary
- unit
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Traffic Control Systems (AREA)
Description
特許文献1〜3には、関連する技術として、自車両、または、自車両の周囲を撮影した画像を表示部に表示する技術が開示されている。
そのため、危険な所定の状況において、操作者の操作を補助することのできる技術が求められていた。
本発明の第一の実施形態による操作補助システムについて説明する。
本発明の第一の実施形態による操作補助システムは、本発明の最小構成の操作補助システムである。
本発明の第一の実施形態による操作補助システム1は、図1に示すように、少なくとも、対象装置10と、操作補助情報提供装置40と、を備える。
パケット信号送信部104aは、所定の状況で車両パケット信号を外部に送信する。車両パケット信号は、対象装置10を特定することができる情報を含んでいる。所定の状況は、例えば、交差点、交差点の手前、狭い道路、狭い道路の手前などの道路を走行する危険な状況である。また、所定の状況は、例えば、対象装置10が一定速度以下の速度で走行する安全を確保する必要のある状況である。
操作補助情報受信部104bは、操作補助情報提供装置40から対象装置10の操作を補助する情報を受信する。以下、操作補助情報提供装置40が取得した対象装置10の操作を補助する情報であり、操作補助情報受信部104bが操作補助情報提供装置40から受信した対象装置10の操作を補助する情報を「第1操作補助情報」という。
第1操作補助情報取得部102は、対象装置10の操作を補助する情報を取得する。以下、第1操作補助情報取得部102が取得した対象装置10の操作を補助する情報を「第2操作補助情報」という。
操作補助情報合成部107は、第1操作補助情報と、第2操作補助情報とを合成する。以下、操作補助情報合成部107が合成した合成後の対象装置10の操作を補助する情報を「第3操作補助情報」という。
表示部105は、第3操作補助情報を表示する。
操作補助情報取得判定部404は、パケット信号送信部104aから車両パケット信号を受信した場合に、操作補助情報提供装置40が対象装置10の操作を補助する情報を取得できる位置にいるか否かを判定する。
第2操作補助情報取得部402は、操作補助情報取得判定部404が操作補助情報提供装置40が対象装置10の操作を補助する情報を取得できる位置にいると判定した場合に、対象装置10の操作を補助する情報を取得する。
操作補助情報送信部4011aは、第2操作補助情報取得部402が取得した対象装置10の操作を補助する情報を対象装置10に送信する。
また、操作補助情報提供装置40は、対象装置10が自動車、オートバイなどの車両である場合には、車両(周辺車両)、道路の脇に設置された路側機などである。
また、第1操作補助情報、第2操作補助情報のそれぞれは、例えば、対象装置10を撮影した画像を含む画像の画像情報である。また、第1操作補助情報、第2操作補助情報のそれぞれは、例えば、対象装置10の位置を基準とした障害物の位置を示す情報を含む位置情報である。
本発明の第一の実施形態による操作補助システム1において、パケット信号送信部104aは、所定の状況で車両パケット信号をブロードキャストで外部に送信する(ステップS1)。
操作補助情報合成部107は、第1操作補助情報取得部102から第1操作補助情報を受信する。操作補助情報合成部107は、第1操作補助情報と、第2操作補助情報とを合成し(ステップS8)、第3操作補助情報を生成する。操作補助情報合成部107は、第3操作補助情報を表示部105に送信する。
表示部105は、第3操作補助情報を表示する(ステップS9)。
このようにすれば、操作補助システム1は、危険な所定の状況において、操作者の操作を補助することができる。その結果、操作者は、対象装置10を安全に走行させることができる。
本発明の第二の実施形態による操作補助システムについて説明する。
本発明の第二の実施形態による操作補助システム1は、図3に示すように、車両10と、周辺車両20a、20b、20c、20dと、路側機30a、30bと、を備える。周辺車両20a、20b、20c、20dのそれぞれは、車両10の周辺の道路を走行中の車両である。路側機30a、30bのそれぞれは、車両10の周辺の道路の路側帯に設置された装置である。
以下では、周辺車両20a、20b、20c、20dを総称して周辺車両20という。また、路側機30a、30bを総称して路側機30という。
なお、本発明の第二の実施形態は、本発明の第一の実施形態における対象装置10が自動車、オートバイなどの車両である場合の例である。また、本発明の第二の実施形態は、本発明の第一の実施形態における操作補助情報提供装置40が複数存在する場合の例である。本発明の第二の実施形態による周辺車両20、路側機30のそれぞれは、本発明の第一の実施形態による操作補助システム1における操作補助情報提供装置40である。周辺車両20と路側機30のそれぞれは、車両10から車両パケット信号を受信できる位置に存在している。
操作補助システム1において、車両10は、車両10が所定の状況にあるか否かを常時判定している。具体的には、車両10は、例えば、地図情報と、車両10の現在の位置とに基づいて、車両10が交差点、交差点の手前、狭い道路、狭い道路の手前などの位置に対して所定の距離の範囲内に入ったか否かを判定する。車両10は、車両10が交差点、交差点の手前、狭い道路、狭い道路の手前などの位置に対して所定の距離の範囲内に入ったと判定した場合、車両10が所定の状況にあると判定する。また、車両10は、車両10が交差点、交差点の手前、狭い道路、狭い道路の手前などの位置に対して所定の距離の範囲外であると判定した場合、車両10が所定の状況にないと判定する。
周辺車両20と路側機30のそれぞれは、周辺車両20と路側機30のそれぞれが備えるカメラが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、周辺車両20と路側機30のそれぞれは、周辺車両20と路側機30のそれぞれが備えるカメラが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
対象装置10は、第2操作補助情報を取得する。
対象装置10は、第1操作補助情報と、第2操作補助情報とを合成し、第3操作補助情報を生成する。対象装置10は、第3操作補助情報を表示する。
車両10は、図4に示すように、位置判定部101と、第1操作補助情報取得部102と、無線通信部104と、表示部105と、記憶部106と、操作補助情報合成部107と、を備える。
無線通信部104は、パケット信号送信部104aと、操作補助情報受信部104bと、を備える。
操作補助情報合成部107は、第1操作補助情報と、第2操作補助情報とを合成し、第3操作補助情報を生成する。
操作補助情報合成部107が行う第1操作補助情報と第2操作補助情報との合成の具体例として、第1操作補助情報取得部102がカメラであり、周辺車両20と路側機30のそれぞれが備える第2操作補助情報取得部がカメラである場合について説明する。操作補助情報合成部107は、車両10の位置を示す位置情報と、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置情報とに基づいて、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を短い時間間隔で(例えば、100ミリ秒毎に)特定する。操作補助情報合成部107は、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を1つの画面にアイコン(車両10、周辺車両20a、20b、20d、路側機30b)で表示するための情報を生成する。また、アイコンのそれぞれで表示できる画像の情報を生成する。
また、別の具体例として、第1操作補助情報取得部102がカメラであり、周辺車両20と路側機30のそれぞれが備える第2操作補助情報取得部がカメラである場合について説明する。操作補助情報合成部107は、車両10の位置を示す位置情報と、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置情報とに基づいて、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を短い時間間隔で(例えば、100ミリ秒毎に)特定する。操作補助情報合成部107は、車両10の位置、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302のそれぞれにおける設置位置、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302の画角、のそれぞれに基づいて、車両10が備える第1操作補助情報取得部102の車両10における設置位置、及び、第1操作補助情報取得部102の画角(視野角)を基準とした画像に変換する。操作補助情報合成部107は、車両10が備える第1操作補助情報取得部102が撮影した画像と、車両10が備える第1操作補助情報取得部102の車両10における設置位置、車両10が備える第1操作補助情報取得部102の車両10における設置位置、及び、第1操作補助情報取得部102の画角(視野角)を基準とした変換後の画像とを重ねた画像の情報を生成する。
周辺車両20aは、図8に示すように、無線通信部201aと、第2操作補助情報取得部202aと、記憶部203aと、操作補助情報取得判定部204aと、を備える。
操作補助情報取得判定部204aは、第2操作補助情報取得部202aが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部204aは、第2操作補助情報取得部202aが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
操作補助情報送信部2011aは、第2操作補助情報取得部202aが取得した対象装置10の操作を補助する情報を対象装置10に送信する。
無線通信部201bは、操作補助情報送信部2011bを備える。
周辺車両20cは、無線通信部201cと、第2操作補助情報取得部202cと、記憶部203cと、操作補助情報取得判定部204cと、を備える。
無線通信部201cは、操作補助情報送信部2011cを備える。
周辺車両20dは、無線通信部201dと、第2操作補助情報取得部202dと、記憶部203dと、操作補助情報取得判定部204dと、を備える。
無線通信部201dは、操作補助情報送信部2011dを備える。
また、第2操作補助情報取得部202b、202c、202dのそれぞれは、第2操作補助情報取得部202aと同様の機能を有し、同様に動作する。
また、操作補助情報取得判定部204b、204c、204dのそれぞれは、操作補助情報取得判定部204aと同様の機能を有し、同様に動作する。
また、操作補助情報送信部2011b、2011c、2011dのそれぞれは、操作補助情報送信部2011aと同様の機能を有し、同様に動作する。
路側機30aは、図9に示すように、無線通信部301aと、第2操作補助情報取得部302aと、記憶部303aと、操作補助情報取得判定部304aと、を備える。
操作補助情報取得判定部304aは、第2操作補助情報取得部302aが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部304aは、第2操作補助情報取得部302aが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
操作補助情報送信部3011aは、第2操作補助情報取得部302aが取得した対象装置10の操作を補助する情報を対象装置10に送信する。
無線通信部301bは、操作補助情報送信部3011bを備える。
また、第2操作補助情報取得部302bは、第2操作補助情報取得部302aと同様の機能を有し、同様に動作する。
また、操作補助情報取得判定部304bは、操作補助情報取得判定部304aと同様の機能を有し、同様に動作する。
また、操作補助情報送信部3011bは、操作補助情報送信部3011aと同様の機能を有し、同様に動作する。
また、無線通信部301a、301bを総称して無線通信部301という。第2操作補助情報取得部302a、302bを総称して第2操作補助情報取得部302という。記憶部303a、303bを総称して記憶部303という。操作補助情報取得判定部304a、304bを総称して操作補助情報取得判定部304という。操作補助情報送信部3011a、3011bを総称して操作補助情報送信部3011という。
本発明の第二の実施形態による操作補助情報取得判定部204、304は、本発明の第一の実施形態による操作補助情報取得判定部404に対応している。本発明の第二の実施形態による第2操作補助情報取得部202、302は、本発明の第一の実施形態による第2操作補助情報取得部402に対応している。本発明の第二の実施形態による操作補助情報送信部2011、3011は、本発明の第一の実施形態による操作補助情報送信部4011aに対応している。
具体的には、第2操作補助情報取得部202aがカメラである場合、操作補助情報取得判定部204aは、車両パケット信号を受信すると、第2操作補助情報取得部202aが撮影している画像において車両10が映っているか否かを判定する。操作補助情報取得判定部204aは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202aが撮影している画像に含まれていると判定した場合に、第2操作補助情報取得部202aが撮影している画像に車両10が映っていると判定する。また、操作補助情報取得判定部204aは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202aが撮影している画像に含まれていないと判定した場合に、第2操作補助情報取得部202aが撮影している画像に車両10が映っていないと判定する。
操作補助情報取得判定部204aは、第2操作補助情報取得部202aが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部204aは、第2操作補助情報取得部202aが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
操作補助情報取得判定部204bは、第2操作補助情報取得部202bが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部204bは、第2操作補助情報取得部202bが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
操作補助情報取得判定部204cは、第2操作補助情報取得部202cが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部204cは、第2操作補助情報取得部202cが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
操作補助情報取得判定部204dは、第2操作補助情報取得部202dが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部204dは、第2操作補助情報取得部202dが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
具体的には、第2操作補助情報取得部302aがカメラである場合、操作補助情報取得判定部304aは、車両パケット信号を受信すると、第2操作補助情報取得部302aが撮影している画像において車両10が映っているか否かを判定する。操作補助情報取得判定部304aは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部302aが撮影している画像に含まれていると判定した場合に、第2操作補助情報取得部302aが撮影している画像に車両10が映っていると判定する。また、操作補助情報取得判定部304aは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部302aが撮影している画像に含まれていないと判定した場合に、第2操作補助情報取得部302aが撮影している画像に車両10が映っていないと判定する。
操作補助情報取得判定部304aは、第2操作補助情報取得部302aが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部304aは、第2操作補助情報取得部302aが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
操作補助情報取得判定部304bは、第2操作補助情報取得部302bが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部304bは、第2操作補助情報取得部302bが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
なお、上述のステップS17〜S20の処理は、ステップS13〜S16の処理とほぼ並行に行われる。
操作補助情報合成部107が行う第1操作補助情報と第2操作補助情報との合成の具体例として、第1操作補助情報取得部102がカメラであり、周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302がカメラである場合について説明する。操作補助情報合成部107は、車両10の位置を示す位置情報と、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置情報とに基づいて、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を短い時間間隔で(例えば、100ミリ秒毎に)特定する。操作補助情報合成部107は、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を1つの画面にアイコン(車両10、周辺車両20a、20b、20d、路側機30b)で表示するための情報を生成する。また、アイコンのそれぞれで表示できる画像の情報を生成する。
また、別の具体例として、第1操作補助情報取得部102がカメラであり、周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302がカメラである場合について説明する。操作補助情報合成部107は、車両10の位置を示す位置情報と、第1操作補助情報を取得できる位置に存在すると判定した周辺車両20と路側機30のそれぞれの位置情報とに基づいて、車両10の位置を基準とした第1操作補助情報を取得できる位置に存在すると判定した周辺車両20と路側機30のそれぞれの位置を短い時間間隔で(例えば、100ミリ秒毎に)特定する。操作補助情報合成部107は、車両10の位置、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302のそれぞれにおける設置位置、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302の画角、のそれぞれに基づいて、車両10が備える第1操作補助情報取得部102の車両10における設置位置、及び、第1操作補助情報取得部102の画角(視野角)を基準とした画像に変換する。操作補助情報合成部107は、車両10が備える第1操作補助情報取得部102が撮影した画像と、車両10が備える第1操作補助情報取得部102の車両10における設置位置、車両10が備える第1操作補助情報取得部102の車両10における設置位置、及び、第1操作補助情報取得部102の画角(視野角)を基準とした変換後の画像とを重ねた画像の情報を生成する。
表示部105は、操作補助情報合成部107から第3操作補助情報を受信する。表示部105は、第3操作補助情報を表示する(ステップS24)。例えば、周辺車両20a、20b、20d、路側機30bのそれぞれが車両10を撮影している場合、表示部105は、図5で示した表示画面を表示する。図5は、車両10が撮影している画像と、周辺車両20a、20b、20dが車両10を撮影している画像と、路側機30bが車両10を撮影している画像とを合成したときに表示部105が表示する表示画面である。より具体的には、図5は、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を1つの画面にアイコン(車両10、周辺車両20a、20b、20d、路側機30b)で表示する表示画面である。また、例えば、表示部105は、図6で示した表示画面を表示する。図6は、図5で示した周辺車両20aのアイコンを選択したときに表示部105に表示される周辺車両20aの前方画像の表示例である。周辺車両20aの前方画像は、車両10、周辺車両20bの一部、車両10の対向車両である周辺車両20dのそれぞれを1つの画面に表示する画像である。また、例えば、表示部105は、図7で示した表示画面を表示する。図7は、車両10が所定の状況にある場合に「危険な場所を通過します。ご注意ください。」と画面に表示する画像である。
車両10は、位置判定部101と、第1操作補助情報取得部102と、無線通信部104と、表示部105と、記憶部106と、操作補助情報合成部107と、を備える。
無線通信部201aは、操作補助情報送信部2011aを備える。
周辺車両20bは、無線通信部201bと、第2操作補助情報取得部202bと、記憶部203bと、操作補助情報取得判定部204bと、を備える。
無線通信部201bは、操作補助情報送信部2011bを備える。
周辺車両20cは、無線通信部201cと、第2操作補助情報取得部202cと、記憶部203cと、操作補助情報取得判定部204cと、を備える。
無線通信部201cは、操作補助情報送信部2011cを備える。
周辺車両20dは、無線通信部201dと、第2操作補助情報取得部202dと、記憶部203dと、操作補助情報取得判定部204dと、を備える。
無線通信部201dは、操作補助情報送信部2011dを備える。
無線通信部201b、201c、201dのそれぞれは、無線通信部201aと同様の機能を有し、同様に動作する。
また、第2操作補助情報取得部202b、202c、202dのそれぞれは、第2操作補助情報取得部202aと同様の機能を有し、同様に動作する。
また、操作補助情報取得判定部204b、204c、204dのそれぞれは、操作補助情報取得判定部204aと同様の機能を有し、同様に動作する。
また、操作補助情報送信部2011b、2011c、2011dのそれぞれは、操作補助情報送信部2011aと同様の機能を有し、同様に動作する。
無線通信部301aは、操作補助情報送信部3011aを備える。
路側機30bは、無線通信部301bと、第2操作補助情報取得部302bと、記憶部303bと、操作補助情報取得判定部304bと、を備える。
無線通信部301bは、操作補助情報送信部3011bを備える。
無線通信部301bは、無線通信部301aと同様の機能を有し、同様に動作する。
また、第2操作補助情報取得部302bは、第2操作補助情報取得部302aと同様の機能を有し、同様に動作する。
また、操作補助情報取得判定部304bは、操作補助情報取得判定部304aと同様の機能を有し、同様に動作する。
また、操作補助情報送信部3011bは、操作補助情報送信部3011aと同様の機能を有し、同様に動作する。
例えば、操作補助システム1において、第1操作補助情報取得部102、第2操作補助情報取得部202、302のそれぞれは、レーダスキャナ、ミリ波レーダなどのセンサであってもよい。第1操作補助情報取得部102、第2操作補助情報取得部202、302のそれぞれは、レーダスキャナ、ミリ波レーダなどのセンサである場合、車両10の周辺の物体の位置を検出する。この場合、操作補助情報合成部107は、第1操作補助情報取得部102、第2操作補助情報取得部202、302のそれぞれが検出した物体と車両10のそれぞれの位置を示す画像を合成すればよい。
例えば、操作補助システム1において、操作補助情報合成部107は、第1操作補助情報を取得できる位置にいると判定した第2操作補助情報取得部202、302のすべてのうち、例えば、最も近い5つの第2操作補助情報取得部202、302から第1操作補助情報を受信してもよい。また、例えば、操作補助システム1において、操作補助情報合成部107は、第1操作補助情報を取得できる位置にいると判定した第2操作補助情報取得部202、302のすべてのうち、例えば、所定の距離の範囲内にある第2操作補助情報取得部202、302から第1操作補助情報を受信してもよい。また、例えば、操作補助システム1において、操作補助情報合成部107は、第1操作補助情報を取得できる位置にいると判定した第2操作補助情報取得部202、302のすべてのうち、例えば、車両10と同方向または逆方向に走行する周辺車両20の第2操作補助情報取得部202から第1操作補助情報を受信してもよい。操作補助システム1において、操作補助情報合成部107は、第1操作補助情報を取得できる位置にいると判定した第2操作補助情報取得部202、302のすべてのうち、任意の第2操作補助情報取得部202、302から第1操作補助情報を受信してよい。
例えば、操作補助システム1において、スピーカが第3操作補助情報を音声で報知してもよい。
例えば、操作補助システム1において、車両10が、例えば、周辺車両20、路側機30のそれぞれから位置情報を取得し、それらの位置と車両10の位置との相対位置の関係に基づいて、周辺車両20、路側機30のそれぞれが第1操作補助情報を取得できる位置にいるか否かを判定してもよい。具体的には、操作補助システム1は、対象装置10(車両10)と操作補助情報提供装置40(周辺車両20、路側機30)とを備え、対象装置10の操作を補助する操作補助システムである。操作補助システムにおいて、対象装置10は、対象装置10を特定することのできる情報を含むパケット信号を所定の状況で外部に送信するパケット信号送信部104aと、操作補助情報提供装置40から操作補助情報提供装置40の周辺の情報を受信する操作補助情報受信部104bと、操作補助情報受信部104bが受信した操作補助情報提供装置40の周辺の情報に基づいて、操作補助情報提供装置40が対象装置10の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部404と、対象装置10の操作を補助する情報を取得する第1操作補助情報取得部102と、操作補助情報受信部104bが受信した対象装置10の操作を補助する情報と、第1操作補助情報取得部102が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部107と、操作補助情報合成部107が合成した合成後の対象装置10の操作を補助する情報を表示する表示部105と、を備える。操作補助情報提供装置40は、パケット信号送信部104aからパケット信号を受信した場合に、操作補助情報提供装置40の周辺の情報を取得する第2操作補助情報取得部402と、第2操作補助情報取得部402が取得した操作補助情報提供装置40の周辺の情報を対象装置10に送信する操作補助情報送信部4011aと、を備えていてもよい。
具体的には、操作補助情報取得判定部204、304のそれぞれは、予め記憶部に記憶した車両10の車種に対応する車両10の外形と、直前に対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像におけるエッジとを比較して、直前に対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像におけて車両10を特定した場合に車両10が映っていると判定する。また、操作補助情報取得判定部204、304のそれぞれは、予め記憶部に記憶した車両10の車種に対応する車両10の外形と、直前に対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像におけるエッジとを比較して、直前に対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像におけて車両10を特定できない場合に車両10が映っていないと判定する。
また、具体的には、操作補助情報取得判定部204、304のそれぞれは、予め記憶部に記憶した車両10の車種に対応する車両10のボディカラーと、直前に対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像におけるエッジの内部の色とを比較し、エッジ内部の色の主な成分が車両10のボディカラーの色の成分と一致した場合に車両10が映っていないと判定する。
このようにすれば、操作補助情報取得判定部204、304のそれぞれは、車両パケット信号を受信すると、直前に第2操作補助情報取得部202、302が撮影した画像において車両10が映っているか否かを車両10のナンバーのみの情報を用いる場合よりも正確に判定することができる。
例えば、操作補助情報取得判定部204aは、車両10の位置と周辺車両20aとの相対位置を算出し、算出した相対位置が特定の(例えば、距離、方位角が)しきい値の範囲内である場合に車両10を撮影できると判定すればよい。
また、例えば、操作補助情報取得判定部304aは、車両10の位置と路側機30aとの相対位置を算出し、算出した相対位置が特定の(例えば、距離、方位角が)しきい値の範囲内である場合に車両10を撮影できると判定すればよい。
このようにすれば、操作補助情報取得判定部204、304のそれぞれは、車両パケット信号を受信すると、直前に第2操作補助情報取得部202が撮影した画像において車両10が映っているか否かを車両10のナンバーのみの情報を用いる場合よりも正確に判定することができる。
このようにすれば、操作補助情報取得判定部204、304のそれぞれは、車両パケット信号を受信すると、第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像において車両10が映っているか否かを車両パケット信号が含む情報に応じて判定することができる。
例えば、操作補助システム1において、操作補助情報取得判定部204、304のそれぞれは、DTN(Delay/Disruption−Tolerant Networking)の通信プロトコルに基づいて、第1操作補助情報を周辺車両20、路側機30のそれぞれの間で共有してもよい。
このようにすれば、操作補助情報取得判定部204、304のそれぞれは、第1操作補助情報をユニキャストで車両10に送信できなかった場合にも、第1操作補助情報を車両10に送信することができる。
前記対象装置は、
前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、
前記操作補助情報提供装置から前記対象装置の操作を補助する情報を受信する操作補助情報受信部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備え、
前記操作補助情報提供装置は、
前記パケット信号送信部から前記車両パケット信号を受信した場合に、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、
前記操作補助情報取得判定部が前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得する第2操作補助情報取得部と、
前記第2操作補助情報取得部が取得した前記対象装置の操作を補助する情報を前記対象装置に送信する操作補助情報送信部と、
を備える操作補助システム。
前記対象装置は、
前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、
前記操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信する操作補助情報受信部と、
前記操作補助情報受信部が受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備え、
前記操作補助情報提供装置は、
前記パケット信号送信部から前記車両パケット信号を受信した場合に、前記操作補助情報提供装置の周辺の情報を取得する第2操作補助情報取得部と、
前記第2操作補助情報取得部が取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信する操作補助情報送信部と、
を備える操作補助システム。
を備える付記1または付記2に記載の操作補助システム。
前記車両パケット信号をブロードキャストで外部に送信する、
付記1から付記3の何れか一に記載の操作補助システム。
付記1から付記4の何れか一に記載の操作補助システム。
付記1から付記5の何れか一に記載の操作補助システム。
操作補助情報提供装置から前記対象装置の操作を補助する情報を受信する操作補助情報受信部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備える対象装置。
前記操作補助情報取得判定部が前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得する第2操作補助情報取得部と、
前記第2操作補助情報取得部が取得した前記対象装置の操作を補助する情報を前記対象装置に送信する操作補助情報送信部と、
を備える操作補助情報提供装置。
操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信する操作補助情報受信部と、
前記操作補助情報受信部が受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備える対象装置。
前記第2操作補助情報取得部が取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信する操作補助情報送信部と、
を備える操作補助情報提供装置。
前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
前記車両パケット信号を受信した場合に、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得すること、
取得した前記対象装置の操作を補助する情報を前記対象装置に送信すること、
前記前記操作補助情報提供装置から前記対象装置の操作を補助する情報を受信すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を含む操作補助方法。
前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
前記車両パケット信号を受信した場合に、前記操作補助情報提供装置の周辺の情報を取得すること、
取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信すること、
前記操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信すること、
受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記対象装置の操作を補助する情報を取得できる位置にいる前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を含む操作補助方法。
操作補助情報提供装置から前記対象装置の操作を補助する情報を受信すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を含む対象装置の制御方法。
前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得すること、
取得した前記対象装置の操作を補助する情報を前記対象装置に送信すること、
を含む操作補助情報提供装置の制御方法。
操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信すること、
受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を含む対象装置の制御方法。
取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信すること、
を含む操作補助情報提供装置の制御方法。
対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
操作補助情報提供装置から前記対象装置の操作を補助する情報を受信すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を実行させるプログラム。
対象装置から車両パケット信号を受信した場合に、操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得すること、
取得した前記対象装置の操作を補助する情報を前記対象装置に送信すること、
を実行させるプログラム。
対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信すること、
受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を実行させるプログラム。
対象装置から車両パケット信号を受信した場合に、操作補助情報提供装置の周辺の情報を取得すること、
取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信すること、
を実行させるプログラム。
20、20a、20b、20c、20d・・・周辺車両
30、30a、30b・・・路側機
40・・・操作補助情報提供装置
101・・・位置判定部
102・・・第1操作補助情報取得部
104、201、201a、201b、201c、201d、301、301a、301b・・・無線通信部
104a・・・パケット信号送信部
104b・・・操作補助情報受信部
105・・・表示部
106、203、203a、203b、203c、203d、303、303a、303b・・・記憶部
107・・・操作補助情報合成部
202、202a、202b、202c、202d、302、302a、302b、402・・・第2操作補助情報取得部
204、204a、204b、204c、204d、304、304a、304b、404・・・操作補助情報取得判定部
2011a、2011b、2011c、2011d、3011a、3011b、3011c、3011d、4011a・・・操作補助情報送信部
Claims (4)
- 対象装置と操作補助情報提供装置とを備え、前記対象装置の操作を補助する操作補助システムであって、
前記対象装置は、
前記対象装置を特定することのできるナンバープレート情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、
前記操作補助情報提供装置から前記対象装置の操作を補助する情報を受信する操作補助情報受信部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備え、
前記操作補助情報提供装置は、
画像を撮影する第2操作補助情報取得部であって、操作補助情報取得判定部が前記パケット信号送信部から前記車両パケット信号を受信した場合において、撮影した前記画像において前記ナンバープレート情報が含まれているときに、前記対象装置の操作を補助する情報を取得する第2操作補助情報取得部と、
前記パケット信号送信部から前記車両パケット信号を受信したときに、前記第2操作補助情報取得部が撮影した前記画像において前記ナンバープレート情報が含まれているか否かを判定する前記操作補助情報取得判定部と、
前記第2操作補助情報取得部が取得した前記対象装置の操作を補助する情報を前記対象装置に送信する操作補助情報送信部と、
を備える操作補助システム。 - 前記所定の状況にあるか否かを判定する位置判定部、
を備える請求項1に記載の操作補助システム。 - 前記対象装置の操作を補助する情報は、前記対象装置を撮影した画像の情報を含む、
請求項1または請求項2に記載の操作補助システム。 - 対象装置と操作補助情報提供装置とを備え、前記対象装置の操作を補助する操作補助システムによる操作補助方法であって、
前記対象装置は、前記対象装置を特定することのできるナンバープレート情報を含む車両パケット信号を所定の状況で外部に送信し、
前記操作補助情報提供装置は、画像を撮影し、
前記操作補助情報提供装置は、前記対象装置から前記車両パケット信号を受信した場合において、前記操作補助情報提供装置が撮影した前記画像において前記ナンバープレート情報が含まれているか否かを判定し、
前記操作補助情報提供装置は、前記対象装置から前記車両パケット信号を受信した場合において、前記操作補助情報提供装置が撮影した画像において前記ナンバープレート情報が含まれていると判定したときに、前記対象装置の操作を補助する情報を取得し、
前記操作補助情報提供装置は、取得した前記対象装置の操作を補助する情報を前記対象装置に送信し、
前記対象装置は、前記操作補助情報提供装置から前記対象装置の操作を補助する情報を受信し、
前記対象装置は、前記対象装置の操作を補助する情報を取得し、
前記対象装置は、受信した前記対象装置の操作を補助する情報と、取得した前記対象装置の操作を補助する情報とを合成し、
前記対象装置は、合成した合成後の前記対象装置の操作を補助する情報を表示する、
操作補助システムによる操作補助方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015239908A JP6657891B2 (ja) | 2015-12-09 | 2015-12-09 | 操作補助システム、及び、操作補助システムによる操作補助方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015239908A JP6657891B2 (ja) | 2015-12-09 | 2015-12-09 | 操作補助システム、及び、操作補助システムによる操作補助方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017107354A JP2017107354A (ja) | 2017-06-15 |
JP6657891B2 true JP6657891B2 (ja) | 2020-03-04 |
Family
ID=59059743
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015239908A Active JP6657891B2 (ja) | 2015-12-09 | 2015-12-09 | 操作補助システム、及び、操作補助システムによる操作補助方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6657891B2 (ja) |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4643860B2 (ja) * | 2001-06-12 | 2011-03-02 | クラリオン株式会社 | 車両用視覚支援装置及び支援方法 |
JP4923647B2 (ja) * | 2006-03-17 | 2012-04-25 | 株式会社デンソー | 運転支援画像表示装置及びプログラム |
JP4893945B2 (ja) * | 2007-02-06 | 2012-03-07 | 株式会社デンソー | 車両周辺監視装置 |
-
2015
- 2015-12-09 JP JP2015239908A patent/JP6657891B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017107354A (ja) | 2017-06-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
RU2656933C2 (ru) | Способ и устройство для предупреждения о встречном транспортном средстве | |
CN109937568B (zh) | 图像处理装置和图像处理方法 | |
JP6836327B2 (ja) | 車両周辺画像提供方法及びその装置並びにコンピュータ読取可能記録媒体 | |
JP4434224B2 (ja) | 走行支援用車載装置 | |
CN107578644B (zh) | 用于运行包括信号源的交通基础设施单元的方法和设备 | |
WO2011037109A1 (ja) | センサコントローラ、ナビゲーション装置、センサ制御方法 | |
JP2016218650A (ja) | 車線合流判定装置 | |
US20150339534A1 (en) | Drive support display device | |
JP2015075889A (ja) | 運転支援装置 | |
WO2018225392A1 (en) | Control apparatus, image pickup apparatus, control method, program, and image pickup system | |
US20200175872A1 (en) | Information providing system, server, onboard device, storage medium, and information providing method | |
JP2017068640A (ja) | 車両間データ通信装置 | |
JPH11351895A (ja) | カーナビゲーションシステム | |
US20130141221A1 (en) | Apparatus | |
JP2017016200A (ja) | 画像処理装置、画像表示システム及び画像処理方法 | |
JP2004351977A (ja) | 車外映像表示装置 | |
JP2008148131A (ja) | 車車間通信の発信信号周波数設定システム及びその発信信号周波数設定方法 | |
JP2024052899A (ja) | 通信装置及び通信方法 | |
JP6614061B2 (ja) | 歩行者位置検出装置 | |
JP6657891B2 (ja) | 操作補助システム、及び、操作補助システムによる操作補助方法 | |
JP6406175B2 (ja) | 車載表示制御装置、車載表示制御方法 | |
JP5673476B2 (ja) | 周辺物体表示装置および周辺物体表示方法 | |
JP6505199B2 (ja) | 運転支援システム、プログラム | |
JP2010187136A (ja) | 通信制御プログラム、通信制御装置及びナビゲーション装置 | |
KR20210002441A (ko) | 센서 융합 기술을 이용한 v2x 미탑재 차량 검출 장치 및 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181107 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190930 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191015 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191216 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200107 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200120 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6657891 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |