JP6488628B2 - 映像処理装置、及び車載映像処理システム - Google Patents

Description

本発明は、映像処理装置、及び車載映像処理システムに関する。

車両の後側方をカメラで撮影して、その映像を車両内部の表示部に表示する車両用周辺監視装置が知られている（例えば、特許文献１参照。）。特許文献１に記載の車両用周辺監視装置の場合、カメラは、ドアミラーよりも車両の前方側となる位置に配設されている。カメラによる撮影範囲は、ドアミラーの視野とドアミラーの死角とを包含する。表示部に表示される映像には、ドアミラーの輪郭を示す画像が重ねて表示される。

特許第３８７６７６１号公報

しかし、上述のような表示部に表示される映像と、ドアミラーに映る鏡像とでは、視点の違いや立体感の違いから、距離感が把握しづらいという問題がある。特に、車両から近距離にある対象物（例えば、表示部において車両の後側方に見える駐車枠など。）については、対象物までの距離感や自車両との平行度を認識、判断することが難しい、という問題があった。

以上のような事情から、対象物までの距離感や自車両との平行度をより容易に認識できる画像を表示可能な映像処理装置、及び車載映像処理システムを提供することが望ましい。

以下に説明する映像処理装置は、映像入力部と、映像処理部と、映像出力部とを備える。映像入力部は、車両の後側方を撮影可能に構成されたカメラで撮影された一次映像を入力する。映像処理部は、映像入力部によって入力された一次映像に対して所定の映像処理を施す。映像処理としては、カメラから入力される一次映像が正像である場合は、一次映像の左右を反転させる処理を施すことにより、一次映像の鏡像化が行われる。なお、カメラから入力される一次映像が鏡像である場合は、その一次映像がそのまま利用される。そして、これらいずれかの手法で得られる鏡像映像に重ねて、車両の車体側方への最大突出箇所の位置を表す補助線を描画する処理が実行される。映像出力部は、映像処理部によって映像処理が施された二次映像を車室内に配設された表示装置へと出力する。

このように構成された映像処理装置によれば、上述のような鏡像映像に対して補助線が重ねて描画された二次映像を、表示装置の画面上に表示することができる。そのため、車両の運転者は、表示装置の画面上に表示された補助線を参考にして、車両の真後ろに相当する範囲と車両の真後ろよりも側方にある範囲を適切に把握できる。したがって、上述のような補助線が表示されない場合に比べ、対象物までの距離感や自車両との平行度を、車両の運転者がより容易に認識できるようになる。

また、以下に説明する車載映像処理システムは、カメラと、表示装置と、映像処理装置とを備える。映像処理装置は、上述した通りの映像入力部と、映像処理部と、映像出力部とを備える。したがって、上述の映像処理装置について述べた通りの作用、効果を奏する。

なお、特許請求の範囲には、後述する実施形態中で示される符号を括弧書きで併記した。ただし、特許請求の範囲に併記した符号は、特許請求の範囲と後述する実施形態との対応関係をわかりやすくするために記載したものであり、本発明の技術的範囲が後述する実施形態に限定されるという主旨ではない。

図１は車載映像処理システムの構成を示すブロック図である。 図２は第一実施形態の映像処理を示すフローチャートである。 図３は第一実施形態における一次映像を例示した説明図である。 図４は第一実施形態における二次映像を例示した説明図である。 図５は第二実施形態の映像処理を示すフローチャートである。 図６は第二実施形態における一次映像を例示した説明図である。 図７は第二実施形態における二次映像を例示した説明図である。 図８は第三実施形態の映像処理を示すフローチャートである。 図９は第三実施形態における視点変換に関する説明図である。 図１０は第三実施形態における視点変換後の映像を例示した説明図である。 図１１は第三実施形態における二次映像を例示した説明図である。

次に、上述の映像処理装置、及び車載映像処理システムについて、例示的な実施形態を挙げて説明する。
（１）第一実施形態
［映像処理装置の構成］
以下に説明する車載映像処理システムは、図１に示すように、上述の映像処理装置として機能する電子制御装置１（Electronic Control Unit；以下、ＥＣＵ１と略称する。）を中心に構成される。ＥＣＵ１の他には、左カメラ３、右カメラ４、左モニタ５、右モニタ６、及び車両信号取得部７などを備える。

左カメラ３は、車両の左側にあるドアミラー（本明細書でいう車体外後写鏡の一例に相当。）の取付位置相当の箇所に取り付けられ、車両左側の後側方を撮影可能に構成されている。右カメラ４は、車両の右側にあるドアミラーの取付位置相当の箇所に取り付けられ、車両右側の後側方を撮影可能に構成されている。左カメラ３及び右カメラ４は、双方とも一般的なドアミラーを通して見える範囲よりも広い範囲を撮影可能に構成されている。

左モニタ５及び右モニタ６は、例えば液晶ディスプレイ装置などによって構成され、それぞれが車室内に配設されている。本実施形態の場合、左モニタ５は、運転席から見て左斜め前方となる位置に設置され、主に左カメラ３で撮影された映像が左モニタ５に表示される。右モニタ６は、運転席から見て右斜め前方となる位置に設置され、主に右カメラ４で撮影された映像が右モニタ６に表示される。

ただし、左モニタ５及び右モニタ６の配設位置は、上述の配設位置には限定されない、また、左モニタ５及び右モニタ６は、上述のように、それぞれに対応する表示装置で構成してもよいが、単一の表示装置で構成してもよい。例えば、単一のセンターディスプレイを、ダッシュボードの中央付近（例えば、センターコンソール等、運転席と助手席との間となる位置に対向する箇所。）に配設し、左モニタ５及び右モニタ６に相当する表示領域を、センターディスプレイの画面上に設けてもよい。

車両信号取得部７は、車両各部の状態（例えば、車速、アクセル開度、ステアリング操舵角、及びシフトポジション等）を検知可能なセンサ類（図示略。）から、検知した状態を表す信号を、車載ネットワーク経由で取得可能に構成されている。車両信号取得部７において取得された信号は、車両信号取得部７からＥＣＵ１に入力される。

ＥＣＵ１は、映像入力部１１、映像処理部１２、映像出力部１３、及び記憶部１４などを備える。映像入力部１１は、左カメラ３及び右カメラ４のそれぞれによって撮影された一次映像を入力する。映像処理部１２は、映像入力部１１によって入力された一次映像（左カメラ３で撮影された一次映像、及び右カメラ４で撮影された一次映像。）それぞれに対して映像処理を施して二次映像を生成する。なお、映像処理部１２において実行される映像処理の詳細については後述する。

映像出力部１３は、映像処理部１２によって生成された二次映像のうち、左カメラ３で撮影された一次映像に基づいて生成された二次映像を左モニタ５へと出力し、右カメラ４で撮影された一次映像に基づいて生成された二次映像を右モニタ６へと出力する。これにより、運転者は、車両の後退時、あるいは車線変更等を実施する際に、左モニタ５及び右モニタ６に映し出される映像を見て、車両の後側方の状況を把握することができる。記憶部１４には、映像処理部１２において映像処理を実行する際に必要となる各種データが記憶されている。

なお、本実施形態の場合、車両にはドアミラーそのもの（すなわち、鏡に映る鏡像によって車両の後側方を確認可能に構成されたもの。）は取り付けられていない。その代わりに、ドアミラーの取付位置相当の箇所には、上述の左カメラ３及び右カメラ４が取り付けられている。運転者は、ドアミラーを見る代わりに、左モニタ５及び右モニタ６を見ることにより、車両の後側方の状況を確認することができる。

ただし、本実施形態において説明する車載映像処理システムは、ドアミラーが取り付けられている車両において、ドアミラーと併用される構成として採用されてもかまわない。例えば、車両の左右両側それぞれにドアミラーが取り付けられ、それらのドアミラーに対して左カメラ３及び右カメラ４が取り付けられていてもよい。この場合、左モニタ５及び右モニタ６は、ドアミラーと併用して車両の後側方を確認するために利用することができる。

［ＥＣＵにおいて実行される処理の詳細］
次に、ＥＣＵ１において実行される処理について、図２に示すフローチャートに基づいて説明する。以下に説明する処理は、車両の始動に伴って開始され、以降は車両が停止するまで繰り返し実行される処理である。

この処理を開始すると、ＥＣＵ１は、左カメラ３及び右カメラ４のそれぞれによって撮影された一次映像を取得する（Ｓ１０）。本実施形態の場合、左カメラ３及び右カメラ４としては、撮影対象の左右を反転させて鏡像として映像を出力するカメラを採用している。そのため、Ｓ１０では、特に追加の映像処理を施さなくても鏡像化済みの一次映像を取得することができる。ただし、左カメラ３及び右カメラ４としては、撮影対象の左右を反転させることなく正像として映像を出力するカメラを採用することもできる。この場合は、ＥＣＵ１が、Ｓ１０又はその後の処理ステップにおいて、正像として取得した映像の左右を反転させて鏡像に変換する映像処理を施せばよい。

こうして得られる鏡像映像は、例えば右カメラ４によって撮影される映像を例に挙げると、図３に例示するような映像となる。図３に例示した鏡像映像２０は、路面に駐車枠２１（白線）が描かれている映像であり、映像の左端には、車体２３の一部が映っている。なお、左カメラ３は撮影対象が車体左側の後側方となる点で右カメラ４とは相違するが、図２に示す処理を理解する上で重要な事項ではないので、左カメラ３によって撮影される映像についての図示は省略する。

ちなみに、左カメラ３及び右カメラ４によって撮影可能な画角は、一般的なドアミラーを利用して運転者が目視可能な画角よりも、広い画角となっている。そのため、図３に例示した鏡像映像２０で言えば、主に映像中の右側にはドアミラーには映り込まない範囲も映っていて、ドアミラーよりも広範囲（ドアミラーを通して目視可能な範囲よりも右方にある範囲）の映像を見ることができる。

さて、Ｓ１０において上述のような鏡像映像を取得したら、ＥＣＵ１は、一次映像に基づく鏡像映像に対し補助線の画像を重ねて描画する（Ｓ２０）。Ｓ２０で描画される補助線は、車両の車体側方への最大突出箇所の位置を表す線である。より具体的には、本実施形態の場合、上述の最大突出箇所に接する位置に、車幅方向に対して垂直な仮想平面を仮想し、その仮想平面と路面との交線相当の位置に、上述の補助線を描画する。

仮想平面の位置は、上述の最大突出箇所に接する位置の他、上述の最大突出箇所に接する位置に対して所定のマージンを加えた位置であってもよい。例えば１０ｃｍのマージンを加える場合であれば、上述の最大突出箇所から車幅方向へ１０ｃｍ離れた位置に仮想平面が想定され、補助線もマージンが０ｃｍの場合に描画される位置から１０ｃｍ離れた位置に描画される。なお、マージンを何ｃｍとするかは任意であり、上述の１０ｃｍ以外でもよいことはもちろんである。また、上述のようなマージンは固定値であってもよいが、運転者が所定の数値範囲内（例えば０〜１５ｃｍ等。）で任意又は二段階以上の可変設定ができるように構成されていてもよい。

このような補助線が鏡像映像に重ねて描画された場合、例えば右カメラ４によって撮影される映像を例に挙げると、図４に例示するような映像が生成される。図４に例示した映像の場合、図３に例示した駐車枠２１や車体２３が映る鏡像映像２０に重ねて補助線２５が描画されている。なお、左カメラ３によって撮影される鏡像映像に対しても、同様の補助線が重ねて描画される（図示は省略。）。

Ｓ２０において補助線を描画したら、ＥＣＵ１は、鏡像映像及び補助線を含む二次映像を左モニタ５及び右モニタ６に表示する（Ｓ３０）。Ｓ３０を実行すると、例えば右モニタ６には、図４に例示したような映像が表示される。なお、左モニタ５にも、同様の補助線及び鏡像映像が表示される（図示は省略。）。以上のような処理は、例えば毎秒３０−１２０回程度の処理速度で繰り返し実行され、これにより、左モニタ５及び右モニタ６には、フレームレート３０−１２０ｆｐｓ程度の動画で車両の後側方の映像が表示される。

［効果］
以上説明したように、上記車載映像処理システムによれば、ＥＣＵ１において、左カメラ３及び右カメラ４によって撮影された鏡像映像（又は左カメラ３及び右カメラ４によって撮影された正像の左右を反転させて鏡像化された鏡像映像。）に対して補助線（例えば図４に例示する補助線２５。）が重ねて描画される。そして、それら鏡像映像及び補助線を含む二次映像が、左モニタ５及び右モニタ６の画面上に表示される。

そのため、車両の運転者は、左モニタ５及び右モニタ６の画面上に表示された補助線を参考にして、車両の真後ろに相当する範囲と車両の真後ろよりも側方にある範囲を適切に把握できる。したがって、上述のような補助線が表示されない場合に比べ、対象物までの距離感や自車両との平行度を、車両の運転者がより容易に認識できるようになる。

（２）第二実施形態
次に、第二実施形態について説明する。なお、第二実施形態以降の実施形態は、第一実施形態と共通部分が多いので、第一実施形態との相違点を中心に詳述し、共通部分に関しては、第一実施形態と同じ符号を付すだけにとどめ、その詳細な説明を省略する。

［ＥＣＵにおいて実行される処理の詳細］
第二実施形態は、ハードウェア等の構成は第一実施形態と同様であり、ＥＣＵ１において実行される処理が第一実施形態とは相違する。以下、ＥＣＵ１において実行される処理について、図５に示すフローチャートに基づいて説明する。以下に説明する処理は、車両の始動に伴って開始され、以降は車両が停止するまで繰り返し実行される処理であり、この点は第一実施形態と同様である。

この処理を開始すると、ＥＣＵ１は、左カメラ３及び右カメラ４のそれぞれによって撮影された映像を、一次映像として取得する（Ｓ１１０）。Ｓ１１０は、第一実施形態のＳ１０と同様な処理ステップである。Ｓ１１０において鏡像映像を取得したら、ＥＣＵ１は、車両信号に応じて一次映像及び補助線の選択又は加工を行う（Ｓ１２０）。

Ｓ１２０において、車両信号は、車両信号取得部７において取得されて、車両信号取得部７からＥＣＵ１に対して提供される信号である。車両信号としては、例えば、車速、アクセル開度、ステアリング操舵角、シフトポジション等の情報を示す信号を利用し得る。Ｓ１２０において実行される一次映像及び補助線の選択又は加工については、様々な具体的手法を考え得るが、その一例として、本実施形態では、シフトポジションがリバース（後退）となった場合に、図６中に破線で示すような範囲２７を図７に示すように拡大表示する例を挙げる。

この場合、Ｓ１２０では鏡像映像の所定範囲（範囲２７）を右モニタ６の画面サイズまで拡大する加工と、拡大された鏡像映像に対応するサイズの補助線を選択する処理が実行される。一方、シフトポジションがリバース（後退）以外の場合、Ｓ１２０では、上述のような鏡像映像の拡大を実行せず、拡大されていない鏡像映像に対応するサイズの補助線を選択する処理が実行される。

続いて、ＥＣＵ１は、Ｓ１２０において選択された補助線の画像を、Ｓ１２０において拡大された鏡像映像に重ねて描画する（Ｓ１３０）。Ｓ１３０は、Ｓ１２０において鏡像映像が拡大されていることと、その拡大に合わせて補助線が選択されていること以外は、第一実施形態のＳ２０と同様な処理ステップである。Ｓ１３０において補助線を描画したら、ＥＣＵ１は、鏡像映像及び補助線を含む二次映像を左モニタ５及び右モニタ６に表示する（Ｓ１４０）。これにより、例えば右カメラ４によって撮影される映像を例に挙げると、図７に例示するような映像が右モニタ６に表示されることになる。

以上のような処理により、第二実施形態においては、シフトポジションがリバース（後退）以外の場合、左モニタ５及び右モニタ６には、第一実施形態と同様な映像（例えば右モニタ６の場合は図４に例示したような映像。）が表示される。一方、シフトポジションがリバース（後退）の場合、左モニタ５及び右モニタ６には、通常よりも拡大された映像（例えば右モニタ６の場合は図７に例示したような映像。）が表示される。

［効果］
以上説明したような第二実施形態の車載映像処理システムでも、第一実施形態と同様な作用、効果を奏し、補助線が表示されない場合に比べ、対象物までの距離感や自車両との平行度を、車両の運転者がより容易に認識できるようになる。

また、第二実施形態の場合は、シフトポジションに応じて画像の拡大率が変わる。そのため、例えば、車両の前進時には、後退時よりも、左モニタ５及び右モニタ６に表示される範囲を広範囲にすることができる。換言すれば、車両の前進時には、後退時よりも、左モニタ５及び右モニタ６に表示される画角が大きくなる。したがって、より側方に存在する他車両であっても左モニタ５及び右モニタ６に表示されるようになるので、例えば車線変更等の際には容易に安全確認ができるようになる。

一方、車両の後退時には、前進時よりも、左モニタ５及び右モニタ６に表示される範囲を、車両後方付近の狭い範囲に限定することができる。換言すれば、車両の後退時には、前進時よりも、左モニタ５及び右モニタ６に表示される画角が狭くなる。また、その画角の中心線が向けられる方向も、前進時よりも後方に向けられることになる。更に、このような鏡像映像の変換に合わせて、補助線の位置や傾きも適切に変更される。したがって、このような映像処理を実施すれば、車両後方付近に存在する表示対象物を拡大表示でき、車両後方に存在する障害物等を視認しやすくすることができる。

［変形例等］
上述の例では、車両信号として、シフトポジションの情報を入力する例を示したが、Ｓ１２０では、他の車両信号も利用し得る。例えば、車速やアクセル開度を入力して、高速走行中には補助線の表示を行わず、低速走行中には補助線の表示を行う、といった構成にしてもよい。このような構成にすれば、駐車場等で低速走行をしている際には補助線を表示し、一般道や自動車専用道路などで高速走行をしている際には補助線の表示を中止することが可能となる。よって、駐車時用に補助線の表示を行いたい場合は、このような構成が好適である。

逆に、高速走行時には補助線を表示し、低速走行時には補助線の表示を中止する、といった構成にしてもよい。このような構成は、レーンチェンジ等を行うときに補助線を表示したい場合に好適な構成である。低速走行時に補助線を表示するのか、高速走行時に補助線を表示するのかは、いずれか一方の構成を択一的に採用してもよいが、双方を同時に採用してもよい。

双方を同時に採用する場合、例えば、低速走行時には上述したマージンを小さめに設定し、高速走行時には上述したマージンを大きめに設定する、といった構成を併用してもよい。このようにすれば、駐車時には、補助線を参考にして幅寄せ等の運転操作を行うことが容易になり、レーンチェンジの際には、補助線を参考にして十分に安全な間隔を確保することが容易になる。

また、ステアリング操舵角やウインカーの状態を入力して、右左折時やレーンチェンジの際に、進行先となる左右いずれか一方の側について、補助線を表示するように構成してもよい。

（３）第三実施形態
次に、第三実施形態について説明する。
［ＥＣＵにおいて実行される処理の詳細］
第三実施形態も、ハードウェア等の構成は第一実施形態、及び第二実施形態と同様であり、ＥＣＵ１において実行される処理が第一実施形態、及び第二実施形態とは相違する。以下、ＥＣＵ１において実行される処理について、図８に示すフローチャートに基づいて説明する。以下に説明する処理は、車両の始動に伴って開始され、以降は車両が停止するまで繰り返し実行される処理であり、この点は第一実施形態と同様である。

この処理を開始すると、ＥＣＵ１は、左カメラ３及び右カメラ４のそれぞれによって撮影された映像を、一次映像として取得する（Ｓ２１０）。Ｓ２１０は、第一実施形態のＳ１０と同様な処理ステップである。Ｓ２１０において鏡像映像を取得したら、ＥＣＵ１は、一次映像に対する視点変換処理を行う（Ｓ２２０）。

本実施形態の場合、Ｓ２２０では、左カメラ３及び右カメラ４のそれぞれによって撮影された映像の視点位置を、左カメラ３及び右カメラ４の配設位置よりも車両の前方側となる位置へ仮想的に変更する処理を実行する。

以下、右カメラ４の場合を例に挙げて具体的に説明すると、図９に示すように、一般的なドアミラーが取り付けられている車両の場合、運転者は車両の運転席Ｓに着座して視点位置Ｐ１からドアミラーＭを目視する。この場合、ドアミラーＭに映る鏡像には画角Ａ１の範囲内が映っている。

一方、左カメラ３及び右カメラ４の取付位置は、車両デザインの制約などから、ドアミラーＭの取付位置相当の箇所にするのが好適である。ここで、ドアミラーＭの取付位置相当の箇所に右カメラ４が取り付けられている場合、右カメラ４は、視点位置Ｐ２から車両の後側方を撮影することになる。この場合、右カメラ４には画角Ａ２の範囲内が映っている。

しかし、上述の視点位置Ｐ１と視点位置Ｐ２とでは、それぞれから同一対象物を見ても、各視点位置から対象物までの距離が異なる。そのため、右カメラ４で撮影された鏡像をそのまま表示すると、運転者にとってはドアミラーＭに映る鏡像とは微妙に異なる鏡像に感じられ、距離感を把握しにくくなることがある。

そこで、Ｓ２２０では、右カメラ４によって視点位置Ｐ２から撮影された映像について、その視点位置を仮想的に視点位置Ｐ３へ視点変換する処理を実行する。視点位置Ｐ３は、左カメラ３及び右カメラ４の配設位置（すなわち、視点位置Ｐ２。）よりも車両の前方側となる位置にある。より詳しくは、視点位置Ｐ３は、ドアミラーＭを透過して画角Ａ１の範囲内を見るような視点位置であり、これは、運転者の視点位置Ｐ１と等価な位置である。

なお、図９において、視点位置Ｐ１からドアミラーＭまでの距離と、視点位置Ｐ３からドアミラーＭまでの距離とが異なっているのは、ドアミラーＭが凸面鏡を採用していることに起因する。仮にドアミラーＭが平面鏡を採用しているとすれば、視点位置Ｐ１からドアミラーＭまでの距離と、視点位置Ｐ３からドアミラーＭまでの距離は等しくなる。

Ｓ２２０で上述のような視点変換を行った場合、変換後の映像は、例えば図１０に例示するような映像となる。車両の後側方にある同一範囲を見る場合、変換後の映像は、変化前の映像よりも、視点位置が遠ざかることになる。そのため、上述の同一範囲に対応する画角は、変換後の映像の方がいくらか狭くなり、その画角の範囲内においては、車両の前後方向に平行な平行線の平行度が視点変換前よりも高くなる。ただし、このような視点変換を行うと、映像の端に映り込んでいる車体の一部に関しては、いくらか歪な形状になることがある。

そこで、Ｓ２２０において上述のような視点変換を実行したら、ＥＣＵ１は、視点変換済みの鏡像映像に対し、補助線及び車体画像を重ねて描画する（Ｓ２３０）。Ｓ２３０で描画される補助線は、視点変換が行われていることを考慮した位置及び傾きで描画される。また、車体画像は、上述のような視点変換に伴って歪な形状になる車体の一部をマスクするための画像であり、あらかじめ用意された車体画像が記憶部１４に記憶されている。

例えば図１０に示すような視点変換済みの鏡像映像２０に対し、Ｓ２３０による処理が実行されると、図１１に示すように、補助線２５及び車体画像２９が鏡像映像２０に重ねて描画されることになる。これにより、視点変換に伴って歪な形状になっていた車体２３の映像は、あらかじめ用意された車体画像２９によってマスクされ、運転者は違和感のない映像を見ることができる。

なお、このような車体画像２９としては、運転者が違和感を覚えないようなアングルで撮影された実車両の画像を、あらかじめ記憶部１４に記憶しておいて、その画像を記憶部１４から読み込んで利用すればよい。あるいは、そのような画像と同等な画像を生成するために必要なデータ（例えばポリゴンデータ。）などを、あらかじめ記憶部１４に記憶しておいて、そのようなデータに基づいて実車両相当の画像を生成して利用してもよい。

［効果］
以上説明したような第三実施形態の車載映像処理システムでも、第一実施形態、及び第二実施形態と同様な作用、効果を奏し、補助線が表示されない場合に比べ、対象物までの距離感や自車両との平行度を、車両の運転者がより容易に認識できるようになる。

また、第三実施形態の場合は、上述のような視点変換を実施しているので、一般的なドアミラーに映る鏡像により近い映像を表示することができる。そのため、そのような視点変換を行わない場合に比べ、対象物までの距離感や自車両との平行度を、車両の運転者が更に容易に認識できるようになる。しかも、視点変換に伴って歪な形状になる車体の一部については、歪みのない車体の画像でマスクしているので、これにより、運転者が感じる違和感を低減することができる。

（４）他の実施形態
以上、映像処理装置、及び車載映像処理システムについて、例示的な実施形態を挙げて説明したが、上述の実施形態は本発明の一態様として例示されるものに過ぎない。すなわち、本発明は、上述の例示的な実施形態に限定されるものではなく、本発明の技術的思想を逸脱しない範囲内において、様々な形態で実施することができる。

例えば、上記実施形態では、図示の都合上、便宜的に記憶部１４をＥＣＵ１が備える構成として図示してあるが、記憶部１４はＥＣＵ１がアクセス可能なメモリであれば、ＥＣＵ１の外部にあってもよい。

また、上記実施形態において、一つの構成要素で実現していた所定の機能を、複数の構成要素が協働して実現するように構成してあってもよい。あるいは、上記実施形態では、複数の構成要素それぞれが有していた複数の機能や、複数の構成要素が協働して実現していた所定の機能を、一つの構成要素が実現するように構成してあってもよい。また、上記実施形態の構成の少なくとも一部を、同様の機能を有する公知の構成に置き換えてもよい。また、上記実施形態の構成の一部を省略してもよい。また、上記実施形態の構成の少なくとも一部を、他の上記実施形態の構成に対して付加又は置換してもよい。なお、特許請求の範囲に記載した文言のみによって特定される技術思想に含まれるあらゆる態様が本発明の実施形態である。

また、上述した映像処理装置、及び車載映像処理システムの他、当該映像処理装置としてコンピュータを機能させるためのプログラム、このプログラムを記録した媒体など、種々の形態で本発明を実現することもできる。

１…電子制御装置（ＥＣＵ）、３…左カメラ、４…右カメラ、５…左モニタ、６…右モニタ、７…車両信号取得部、１１…映像入力部、１２…映像処理部、１３…映像出力部、１４…記憶部、２０…鏡像映像、２１…駐車枠、２３…車体、２５…補助線、２７…拡大対象の範囲、２９…車体画像。

Claims (5)

1. 車両の後側方を撮影可能に構成されたカメラ（３，４）から、当該カメラで撮影された一次映像を入力可能な映像入力部（１１，Ｓ１０，Ｓ１１０，Ｓ２１０）と、
   前記映像入力部によって入力された前記一次映像に対して所定の映像処理を施すことによって二次映像に変換可能な映像処理部（１２，Ｓ２０，Ｓ１２０−Ｓ１３０，Ｓ２２０−Ｓ２３０）と、
   前記映像処理部によって前記映像処理が施された二次映像を車室内に配設された表示装置（５，６）へと出力する映像出力部（１３，Ｓ３０，Ｓ１４０，Ｓ２４０）と
   を備え、
   前記映像処理部は、前記映像処理として、前記カメラから正像として入力される前記一次映像に対して左右を反転させる処理を施すことによって得られる映像、及び前記カメラから鏡像として入力される前記一次映像のうちの、いずれか一方である鏡像映像（２０）を描画する処理を実行可能に構成されており、
   前記映像処理部は、前記映像処理として、前記鏡像映像に対応する視点位置（Ｐ３）を、前記カメラの配設位置（Ｐ１）よりも前記車両の前方側となる位置へ仮想的に変更する視点変換処理（Ｓ２２０）を実行可能に構成され、
   前記映像処理部は、前記鏡像映像（２０）に重ねて、前記車両の車体側方への最大突出箇所の位置を表す補助線（２５）を描画する処理（Ｓ２０，Ｓ１３０，Ｓ２３０）を実行可能に構成され、
   さらに、前記映像処理部は、前記映像処理として、前記鏡像映像に対応する画角の中心線が向けられる方向を二以上の異なる方向へ仮想的に変更する処理（Ｓ１２０）を実行可能に構成され、前記補助線を描画する際には、前記補助線の位置及び傾きを、前記中心線が向けられる方向に応じて変更するように構成されている
   映像処理装置（１）。
2. 請求項１に記載の映像処理装置において、
   前記補助線は、前記最大突出箇所に接する位置又は当該位置に対して所定のマージンを加えた位置に仮想される、車幅方向に対して垂直な仮想平面と路面との交線である
   映像処理装置。
3. 請求項１又は請求項２に記載の映像処理装置において、
   前記映像処理部は、前記映像処理として、車体の一部の鏡像に相当する車体画像（２９）を、記憶部（１４）から読み出すか記憶部に記憶されたデータに基づいて生成して、当該車体画像を前記鏡像映像に重ねて描画する処理（Ｓ２３０）を実行可能に構成されている
   映像処理装置。
4. 請求項１−請求項３のいずれか一項に記載の映像処理装置において、
   前記カメラは、前記車両における車体外後写鏡（Ｍ）の取付位置相当の箇所（Ｐ２）に配設されたカメラである
   映像処理装置。
5. 車両の後側方を撮影可能に構成されたカメラ（３，４）と、
   前記カメラで撮影された映像に対して所定の映像処理を施すように構成された映像処理装置（１）と
   車室内に配設され、前記映像処理装置によって前記映像処理が施された映像を表示可能な表示装置（５，６）と
   を備え、
   前記映像処理装置は、
   前記カメラから、当該カメラで撮影された一次映像を入力可能な映像入力部（１１，Ｓ１０，Ｓ１１０，Ｓ２１０）と、
   前記映像入力部によって入力された前記一次映像に対して所定の映像処理を施すことによって二次映像に変換可能な映像処理部（１３，Ｓ３０，Ｓ１４０，Ｓ２４０）と、
   前記映像処理部によって前記映像処理が施された二次映像を前記表示装置へと出力する映像出力部（１３，Ｓ３０，Ｓ１４０，Ｓ２４０）と
   を備え、
   前記映像処理部は、前記映像処理として、前記カメラから正像として入力される前記一次映像に対して左右を反転させる処理を施すことによって得られる映像、及び前記カメラから鏡像として入力される前記一次映像のうちの、いずれか一方である鏡像映像（２０）を描画する処理を実行可能に構成されており、
   前記映像処理部は、前記映像処理として、前記鏡像映像に対応する視点位置（Ｐ３）を、前記カメラの配設位置（Ｐ１）よりも前記車両の前方側となる位置へ仮想的に変更する視点変換処理（Ｓ２２０）を実行可能に構成され、
   前記映像処理部は、前記鏡像映像（２０）に重ねて、前記車両の車体側方への最大突出箇所の位置を表す補助線（２５）を描画する処理（Ｓ２０，Ｓ１３０，Ｓ２３０）を実行可能に構成され、
   さらに、前記映像処理部は、前記映像処理として、前記鏡像映像に対応する画角の中心線が向けられる方向を二以上の異なる方向へ仮想的に変更する処理（Ｓ１２０）を実行可能に構成され、前記補助線を描画する際には、前記補助線の位置及び傾きを、前記中心線が向けられる方向に応じて変更するように構成されている
   車載映像処理システム。

Images