JP2021047612A - 表示システム、車両及び携帯装置 - Google Patents

Abstract

【課題】車両の停止中に携帯装置の画面を見ている運転者が安全に発進できるようにする。【解決手段】車両及び携帯装置を備える表示システムが提供される。車両は、車両の前方の状況を示す前方画像を生成する前方画像生成部と、前方画像を携帯装置へ送信する送信部と、を備える。携帯装置は、車両から前方画像を受信する受信部と、携帯装置が実行中の機能に基づくベース画像と前方画像とを含む画面を生成する画面生成部と、画面を表示する表示部と、を備える。【選択図】図５

Description

本発明は、表示システム、車両及び携帯装置に関する。

車両が赤信号や渋滞などによって停止している間に、運転者は携帯電話等の携帯装置を使用することがある。運転者が携帯装置の表示部に注視すると、車両前方への注意が削がれ、適したタイミングで発進できない恐れがある。特許文献１は、携帯装置を介して、車両の発進が可能になったことをユーザに通知する技術を提案する。

特開２０１７−１３８８３０号公報

特許文献１に記載された技術では、車両が発進可能になった後に運転者に通知するため、運転者は慌てて車両を発進することになる。その結果、運転者による周囲の交通環境の確認がおろそかになる恐れがある。本発明の１つの側面は、車両の停止中に携帯装置の画面を見ている運転者が安全に発進できるようにするための技術を提供することを目的とする。

上記課題に鑑みて、車両及び携帯装置を備える表示システムであって、前記車両は、前記車両の前方の状況を示す前方画像を生成する前方画像生成部と、前記前方画像を前記携帯装置へ送信する送信部と、を備え、前記携帯装置は、前記車両から前記前方画像を受信する受信部と、前記携帯装置が実行中の機能に基づくベース画像と前記前方画像とを含む画面を生成する画面生成部と、前記画面を表示する表示部と、を備えることを特徴とする表示システムが提供される。

上記手段により、車両の停止中に携帯装置の画面を見ている運転者が安全に発進できるようになる。

実施形態に係る車両の構成例を説明するブロック図。 実施形態に係る表示システムの構成例を説明するブロック図。 実施形態に係る車両の動作例を説明するフロー図。 実施形態に係る携帯装置の動作例を説明するフロー図。 実施形態に係る画面の例を説明する模式図。 実施形態に係る前方画像の例を説明する模式図。 実施形態に係る画面遷移の例を説明する模式図。 実施形態に係る画面の別の例を説明する模式図。 実施形態に係る画面の別の例を説明する模式図。

以下、添付図面を参照して実施形態を詳しく説明する。尚、以下の実施形態は特許請求の範囲に係る発明を限定するものでなく、また実施形態で説明されている特徴の組み合わせの全てが発明に必須のものとは限らない。実施形態で説明されている複数の特徴のうち二つ以上の特徴が任意に組み合わされてもよい。また、同一若しくは同様の構成には同一の参照番号を付し、重複した説明は省略する。

図１は、本発明の一部の実施形態に係る車両１のブロック図である。図１において、車両１はその概略が平面図と側面図とで示されている。車両１は一例としてセダンタイプの四輪の乗用車である。車両１はこのような四輪車両であってもよいし、二輪車両や他のタイプの車両であってもよい。

車両１は、車両１を制御する車両用制御装置２（以下、単に制御装置２と呼ぶ）を含む。制御装置２は車内ネットワークにより通信可能に接続された複数のＥＣＵ２０〜２９を含む。各ＥＣＵは、ＣＰＵに代表されるプロセッサ、半導体メモリ等のメモリ、外部デバイスとのインタフェース等を含む。メモリにはプロセッサが実行するプログラムやプロセッサが処理に使用するデータ等が格納される。各ＥＣＵはプロセッサ、メモリおよびインタフェース等を複数備えていてもよい。例えば、ＥＣＵ２０は、プロセッサ２０ａとメモリ２０ｂとを備える。メモリ２０ｂに格納されたプログラムが含む命令をプロセッサ２０ａが実行することによって、ＥＣＵ２０による処理が実行される。これに代えて、ＥＣＵ２０は、ＥＣＵ２０による処理を実行するためのＡＳＩＣ等の専用の集積回路を備えてもよい。他のＥＣＵについても同様である。

以下、各ＥＣＵ２０〜２９が担当する機能等について説明する。なお、ＥＣＵの数や、担当する機能については適宜設計可能であり、本実施形態よりも細分化したり、統合したりすることが可能である。

ＥＣＵ２０は、車両１の自動運転に関わる制御を実行する。自動運転においては、車両１の操舵制御と、速度制御（加減速制御）の少なくともいずれか一方を自動的に行う。後述する制御例では、操舵と加減速の双方を自動制御する。

ＥＣＵ２１は、電動パワーステアリング装置３を制御する。電動パワーステアリング装置３は、ステアリングホイール３１に対する車両１の運転者の運転操作（操舵操作）に応じて前輪を操舵する機構を含む。車両１の運転者とは、車両１の運転者にいる搭乗者のことであり、実際に運転操作を行っているか否かを問わない。以下の説明において、車両１の運転者を単に運転者と表す。電動パワーステアリング装置３は操舵操作をアシストしたり、前輪を自動操舵したりするための駆動力を発揮するモータや、操舵角を検知するセンサ等を含む。車両１の運転状態が自動運転の場合、ＥＣＵ２１は、ＥＣＵ２０からの指示に対応して電動パワーステアリング装置３を自動制御し、車両１の進行方向を制御する。

ＥＣＵ２２および２３は、車両の周囲状況を検知する検知ユニット４１〜４３の制御および検知結果の情報処理を行う。検知ユニット４１は、車両１の前方を撮影するカメラであり（以下、カメラ４１と表記する場合がある。）、本実施形態の場合、車両１のルーフ前部でフロントウィンドウの車室内側に取り付けられる。カメラ４１が撮影した画像の解析により、物標の輪郭抽出や、道路上の車線の区画線（白線等）を抽出可能である。

検知ユニット４２は、ライダ（Light Detection and Ranging）であり（以下、ライダ４２と表記する場合がある）、車両１の周囲の物標を検知したり、物標との距離を測距したりする。本実施形態の場合、ライダ４２は５つ設けられており、車両１の前部の各隅部に１つずつ、後部中央に１つ、後部各側方に１つずつ設けられている。検知ユニット４３は、ミリ波レーダであり（以下、レーダ４３と表記する場合がある）、車両１の周囲の物標を検知したり、物標との距離を測距したりする。本実施形態の場合、レーダ４３は５つ設けられており、車両１の前部中央に１つ、前部各隅部に１つずつ、後部各隅部に一つずつ設けられている。

ＥＣＵ２２は、一方のカメラ４１と、各ライダ４２の制御および検知結果の情報処理を行う。ＥＣＵ２３は、他方のカメラ４２と、各レーダ４３の制御および検知結果の情報処理を行う。車両の周囲状況を検知する装置を二組備えたことで、検知結果の信頼性を向上でき、また、カメラ、ライダ、レーダといった種類の異なる検知ユニットを備えたことで、車両の周辺環境の解析を多面的に行うことができる。さらに、車両１は、車内（特に、運転者）を撮影するカメラ４４を備えてもよい。

ＥＣＵ２４は、ジャイロセンサ５、ＧＰＳセンサ２４ｂ、通信装置２４ｃの制御および検知結果あるいは通信結果の情報処理を行う。ジャイロセンサ５は車両１の回転運動を検知する。ジャイロセンサ５の検知結果や、車輪速等により車両１の進路を判定することができる。ＧＰＳセンサ２４ｂは、車両１の現在位置を検知する。通信装置２４ｃは、地図情報や交通情報を提供するサーバと無線通信を行い、これらの情報を取得する。ＥＣＵ２４は、メモリに構築された地図情報のデータベース２４ａにアクセス可能であり、ＥＣＵ２４は現在地から目的地へのルート探索等を行う。ＥＣＵ２４、地図データベース２４ａ、ＧＰＳセンサ２４ｂは、いわゆるナビゲーション装置を構成している。

ＥＣＵ２５は、車車間通信用の通信装置２５ａを備える。通信装置２５ａは、周辺の他車両と無線通信を行い、車両間での情報交換を行う。さらに、通信装置２５ａは、他の車両以外の装置との通信に使用されてもよい。

ＥＣＵ２６は、パワープラント６を制御する。パワープラント６は車両１の駆動輪を回転させる駆動力を出力する機構であり、例えば、エンジンと変速機とを含む。ＥＣＵ２６は、例えば、アクセルペダル７Ａに設けた操作検知センサ７ａにより検知した運転者の運転操作（アクセル操作あるいは加速操作）に対応してエンジンの出力を制御したり、車速センサ７ｃが検知した車速等の情報に基づいて変速機の変速段を切り替えたりする。車両１の運転状態が自動運転の場合、ＥＣＵ２６は、ＥＣＵ２０からの指示に対応してパワープラント６を自動制御し、車両１の加減速を制御する。

ＥＣＵ２７は、方向指示器８（ウィンカ）を含む灯火器（ヘッドライト、テールライト等）を制御する。図１の例の場合、方向指示器８は車両１の前部、ドアミラーおよび後部に設けられている。

ＥＣＵ２８は、入出力装置９の制御を行う。入出力装置９は運転者に対する情報の出力と、運転者からの情報の入力の受け付けを行う。音声出力装置９１は運転者に対して音声により情報を報知する。表示装置９２は運転者に対して画像の表示により情報を報知する。表示装置９２は例えば運転席表面に配置され、インストルメントパネル等を構成する。なお、ここでは、音声と表示を例示したが振動や光により情報を報知してもよい。また、音声、表示、振動または光のうちの複数を組み合わせて情報を報知してもよい。更に、報知すべき情報のレベル（例えば緊急度）に応じて、組み合わせを異ならせたり、報知態様を異ならせたりしてもよい。入力装置９３は運転者が操作可能な位置に配置され、車両１に対する指示を行うスイッチ群であるが、音声入力装置も含まれてもよい。

ＥＣＵ２９は、ブレーキ装置１０やパーキングブレーキ（不図示）を制御する。ブレーキ装置１０は例えばディスクブレーキ装置であり、車両１の各車輪に設けられ、車輪の回転に抵抗を加えることで車両１を減速あるいは停止させる。ＥＣＵ２９は、例えば、ブレーキペダル７Ｂに設けた操作検知センサ７ｂにより検知した運転者の運転操作（ブレーキ操作）に対応してブレーキ装置１０の作動を制御する。車両１の運転状態が自動運転の場合、ＥＣＵ２９は、ＥＣＵ２０からの指示に対応してブレーキ装置１０を自動制御し、車両１の減速および停止を制御する。ブレーキ装置１０やパーキングブレーキは車両１の停止状態を維持するために作動することもできる。また、パワープラント６の変速機がパーキングロック機構を備える場合、これを車両１の停止状態を維持するために作動することもできる。

図２を参照して、一部の実施形態に係る表示システム２００について説明する。表示システム２００は、上述の車両１と携帯装置２１０とを含む。携帯装置２１０は、車両１の内部に持ち込まれており、車両１の運転者によって使用可能である。言い換えると、携帯装置２１０のユーザは、車両１の運転者である。表示システム２００は、車両１の前方の状況を示す画像を携帯装置２１０で表示するように動作する。以下、車両１の前方の状況を示す画像を前方画像と呼ぶ。前方画像を携帯装置２１０に表示することによって、車両１の運転者は、車両１の停止中に、携帯装置２１０を見ながら車両１の前方の状況を把握できる。図２では、この動作に使用されるコンポーネントを示しており、表示システム２００は図２に示されない他のコンポーネントを有してもよい。

車両１は、プロセッサ２０１と、メモリ２０２と、撮像部２０３と、通信部２０４とを有する。プロセッサ２０１は、車両１の全体的な処理を実行する。プロセッサ２０１は、図１の各ＥＣＵが有するプロセッサ２０ａであってもよい。メモリ２０２は、プロセッサ２０１によって実行されるプログラムや、このプログラムの実行時に使用されるデータを格納する。メモリ２０２は、図１の各ＥＣＵが有するメモリ２０ｂであってもよい。

撮像部２０３は、車両１の周囲の画像を取得する。撮像部２０３は、車両１の前方（前進方向）の画像を取得してもよいし、それに加えて前方以外の方向、例えば後方の画像を取得してもよい。撮像部２０３は、図１のカメラ４１、４２であってもよいし、ドライブレコーダーの撮像装置であってもよい。通信部２０４は、他の装置、例えば携帯装置２１０と通信する。通信部２０４は、図１の通信装置２５ａであってもよい。通信部２０４による他の装置との通信は有線通信であってもよいし、無線通信であってもよい。無線通信は、ピア・ツー・ピアで行われる短距離無線通信であってもよいし、アクセスポイントや基地局を介した通信であってもよい。

携帯装置２１０は、例えば携帯電話やスマートフォンのような通話機能を有する携帯端末であってもよい。これに代えて、携帯装置２１０は、通話機能を有しない装置、例えば携帯ゲーム機であってもよい。携帯装置２１０は、複数の機能、例えば待ち受け機能（アプリケーションの起動を待機する機能）、ブラウザ機能、音楽再生機能、動画再生機能などを実行可能である。

携帯装置２１０は、プロセッサ２１１と、メモリ２１２と、表示部２１３と、入力部２１４と、通信部２１５とを有する。プロセッサ２１１は、携帯装置２１０の全体的な処理を実行する。メモリ２１２は、プロセッサ２１１によって実行されるプログラムや、このプログラムの実行時に使用されるデータを格納する。表示部２１３は、携帯装置２１０のユーザに向けて情報を表示する。表示部２１３は、例えば液晶ディスプレイや有機ＥＬディスプレイ等の表示装置によって実現される。入力部２１４は、携帯装置２１０のユーザからの入力を受け取る。入力部２１４は、例えばキーパッドやタッチパネル等の入力装置によって実現される。表示部２１３と入力部２１４とは、タッチスクリーンのように一体の装置として構成されてもよい。

通信部２１５は、他の装置、例えば車両１と通信する。通信部２１５による他の装置との通信は有線通信であってもよいし、無線通信であってもよい。無線通信は、ピア・ツー・ピアで行われる短距離無線通信であってもよいし、アクセスポイントや基地局を介した通信であってもよい。

車両１と携帯装置２１０との間に、通信部２０４及び通信部２１５によって通信リンク２２０が張られる。この通信リンク２２０を介して車両１と携帯装置２１０との間でデータが送受信される。

図３を参照して、車両前方の画像を携帯装置２１０で表示するための車両１による動作について説明する。車両１は、携帯装置２１０に前方画像を表示する機能が有効になった場合に図３の動作を開始する。この機能は、車両１が始動したことに応じて自動的に有効になってもよいし、運転者からの指示に応じて有効になってもよい。図３の動作は、メモリ２０２に格納されたコンピュータ・プログラムをプロセッサ２０１が実行することによって実行されてもよい。この場合に、プロセッサ２０１は、図３のフローチャートの各工程の実行主体となる。これに代えて、図３のフローチャートの各工程の一部又はすべての工程が、ＡＳＩＣ（特定用途向け集積回路）のような専用処理回路によって実行されてもよい。この場合に、専用処理回路が各工程の実行主体となる。

ステップＳ３０１で、プロセッサ２０１は、通信リンク２２０の接続が有効であるかどうかを判定する。プロセッサ２０１は、接続が有効である場合（ステップＳ３０１で「ＹＥＳ」）に処理をステップＳ３０２に遷移し、それ以外の場合（ステップＳ３０１で「ＮＯ」）に処理をステップＳ３０６に遷移する。通信リンク２２０の接続が無効である場合、すなわち、車両１が携帯装置２１０と通信できない場合、車両１は、前方画像を携帯装置２１０へ送信できない。そのため、プロセッサ２０１は、後述する前方画像の作成及び送信を行わない。ステップＳ３０１は、省略されてもよい。この場合に、後述する前方画像の送信において、送信エラーが発生し、これによってプロセッサ２０１は、前方画像を送信できないことを認識する。

ステップＳ３０２で、プロセッサ２０１は、車両１が停止しているかどうかを判定する。プロセッサ２０１は、車両１が停止している場合（ステップＳ３０２で「ＹＥＳ」）に処理をステップＳ３０３に遷移し、それ以外の場合（ステップＳ３０２で「ＮＯ」）に処理をステップＳ３０６に遷移する。車両１が停止していない場合、運転者は携帯装置２１０の画面を見るべきではない。そのため、プロセッサ２０１は、後述する前方画像の作成及び送信を行わない。また、前方画像を送信しないことによって、携帯装置２１０のバッテリの消費を抑制できる。また、車両１と携帯装置２１０との間の通信が無線通信である場合は通信量を削減することができる。プロセッサ２０１は、車両１に設けられた車輪速センサなどを用いて車両１が停止しているかどうかを判定してもよい。ステップＳ３０２は、省略されてもよい。この場合に、車両１は、車両１が停止しているかどうかにかかわらず、後述するステップで前方画像を送信する。

ステップＳ３０３で、プロセッサ２０１は、携帯装置２１０の表示部２１３がオンであるかどうかを判定する。プロセッサ２０１は、携帯装置２１０の表示部２１３がオンである場合（ステップＳ３０３で「ＹＥＳ」）に処理をステップＳ３０４に遷移し、それ以外の場合（ステップＳ３０３で「ＮＯ」）に処理をステップＳ３０６に遷移する。携帯装置２１０の表示部２１３がオンでない場合、運転者が表示部２１３を見ていないと考えられる。そのため、車両１が前方画像を携帯装置２１０へ送信したとしても、運転者が前方画像を見ることはない。そこで、プロセッサ２０１は、後述する前方画像の作成及び送信を行わない。また、前方画像を送信しないことによって、携帯装置２１０のバッテリの消費を抑制できる。プロセッサ２０１は、携帯装置２１０の表示部２１３の動作状況を示す情報を携帯装置２１０から取得してもよい。これに代えて又はこれに加えて、プロセッサ２０１は、車室内を向いたカメラ４４の画像に基づいて携帯装置２１０の表示部２１３の動作状況を判定してもよい。ステップＳ３０２は、省略されてもよい。この場合に、車両１は、車両１が停止しているかどうかにかかわらず、後述するステップで前方画像を送信する。

ステップＳ３０４で、プロセッサ２０１は、撮像部２０３を用いて前方画像を生成する。前方画像は、車両１の前方を撮影するカメラ４１によって撮影された画像そのものであってもよいし、この画像を加工することによって得られる画像であってもよい。

ステップＳ３０５で、プロセッサ２０１は、通信部２０４を用いて、生成した前方画像を携帯装置２１０へ送信する。ステップＳ３０４及びＳ３０５は、上述のステップＳ３０１、Ｓ３０２及びＳ３０３のすべてがＹＥＳの場合に実行される。すなわち、車両１が前方画像を携帯装置２１０へ送信するための条件は、携帯装置２１０との接続が有効であることと、車両１が停止していることと、表示部２１３がオンであることと、を含む。上述のステップＳ３０１〜Ｓ３０３の何れかが省略された場合に、対応する要件がこの条件から省かれる。

ステップＳ３０６で、プロセッサ２０１は、携帯装置２１０で前方画像を表示する機能が無効になったかどうかを判定する。プロセッサ２０１は、携帯装置２１０で前方画像を表示する機能が無効になった場合（ステップＳ３０６で「ＹＥＳ」）に処理を終了し、それ以外の場合（ステップＳ３０６で「ＮＯ」）に処理をステップＳ３０１に遷移する。この機能は、車両１の動作が終了した（例えば、電源がオフになった）ことに応じて無効になってもよいし、運転者からの指示に応じて無効になってもよい。

図３で説明したように、ステップＳ３０１〜Ｓ３０６の動作は、前方画像を表示する機能が有効である間に反復して行われる。反復周期は例えば２０ミリ秒であってもよい。そのため、ステップＳ３０１〜Ｓ３０３の条件が変更された場合に、それに応じてステップＳ３０４及びＳ３０５を実行するかどうかが即座に切り替わる。例えば、ステップＳ３０１〜Ｓ３０３の条件をすべて満たし、プロセッサ２０１が前方画像を携帯装置２１０に送信中であるとする。この状態で車両１が発信すると、ステップＳ３０２の条件を満たさなくなり、プロセッサ２０１は、前方画像の生成及び送信を行わなくなる。

図４を参照して、車両前方の画像を携帯装置２１０で表示するための携帯装置２１０による動作について説明する。携帯装置２１０は、携帯装置２１０に前方画像を表示する機能が有効になった場合に図４の動作を開始する。この機能は、車両１からの指示に応じて有効になってもよいし、運転者からの指示に応じて有効になってもよい。図４の動作は、メモリ２１２に格納されたコンピュータ・プログラムをプロセッサ２１１が実行することによって実行されてもよい。この場合に、プロセッサ２１１は、図４のフローチャートの各工程の実行主体となる。これに代えて、図４のフローチャートの各工程の一部又はすべての工程が、ＡＳＩＣ（特定用途向け集積回路）のような専用処理回路によって実行されてもよい。この場合に、専用処理回路が各工程の実行主体となる。

ステップＳ４０１で、プロセッサ２１１は、車両１から前方画像を受信したかどうかを判定する。プロセッサ２１１は、車両１から前方画像を受信した場合（ステップＳ４０１で「ＹＥＳ」）に処理をステップＳ４０２に遷移し、それ以外の場合（ステップＳ４０１で「ＮＯ」）に処理をステップＳ４０３に遷移する。

ステップＳ４０２で、プロセッサ２１１は、携帯装置２１０が実行中の機能に基づく画像と、受信した前方画像とを含む画面を生成する。携帯装置２１０が実行中の機能とは、携帯装置２１０が有する複数の機能のうち、携帯装置２１０によって現時点で実行中の機能のことである。携帯装置２１０がこの機能を実行中に表示部２１３に表示すべき画像をベース画像と呼ぶ。プロセッサ２１１は、このベース画像と前方画像とを含む画面を生成する。

図５を参照して、ステップＳ４０２で生成される画面５００の一例について説明する。画面５００は、ベース画像５０１と、前方画像５０２とを含む。ベース画像５０１は、携帯装置２１０が待ち受け機能を実行中に表示すべき画像である。ベース画像５０１は、待ち受け機能以外の機能を実行中に表示すべき画像であってもよい。前方画像５０２は、車両１の前方の状況を示す画像である。画面５００では、ベース画像５０１に前方画像５０２が重畳されている。これに代えて、画面５００の一部にベース画像５０１の全体が表示され、画面５００の他の一部に前方画像５０２の全体が表示されてもよい。すなわち、ベース画像５０１と前方画像５０２とが互いに重畳しておらず、並べて表示されてもよい。

ステップＳ４０３で、プロセッサ２１１は、ベース画像を含む画面を生成する。プロセッサ２１１は、車両１から前方画像を受信していないため、この画面に前方画像を含めない。

ステップＳ４０４で、プロセッサ２１１は、生成した画面を表示部２１３に表示する。画面が前方画像を含む場合に、運転者は、携帯装置２１０の表示部２１３を見ながら車両１の前方の状況を把握できる。

ステップＳ４０５で、プロセッサ２１１は、携帯装置２１０で前方画像を表示する機能が無効になったかどうかを判定する。プロセッサ２１１は、携帯装置２１０で前方画像を表示する機能が無効になった場合（ステップＳ４０５で「ＹＥＳ」）に処理を終了し、それ以外の場合（ステップＳ４０５で「ＮＯ」）に処理をステップＳ４０１に遷移する。この機能は、車両１の動作が終了したことに応じて無効になってもよいし、運転者からの指示に応じて無効になってもよい。

図４で説明したように、ステップＳ４０１〜Ｓ４０５の動作は、前方画像を表示する機能が有効である間に反復して行われる。反復周期は例えば２０ミリ秒であってもよい。そのため、ステップＳ４０１の条件が変更された場合に、それに応じてステップＳ４０２を実行するかステップＳ４０３を実行するかが即座に切り替わる。例えば、ステップＳ４０１の条件を満たし、携帯装置２１０が前方画像を含む画面を表示中であるとする。この状態で車両１から前方画像が受信されなくなると、ステップＳ４０１の条件を満たさなくなり、プロセッサ２１１は、前方画像の表示を行わなくなる。この場合に、表示部２１３にベース画像だけが表示される。

図５〜図９を参照して、上述の実施形態の変更例について説明する。以下の変更例は組み合わせて実施することも可能である。車両１のプロセッサ２０１は、上述のステップＳ３０４において、前方画像に含まれる信号機、車両及び歩行者のうちの少なくとも１つを強調表示する。図５は、一部が強調表示された前方画像５０２の一例を示す。前方画像５０２は、信号機６０１と、歩行者６０２と、車両６０３とを含む。図５に示すように、信号機６０１と、歩行者６０２と、車両６０３とは何れも破線で囲むことによって強調表示されている。強調表示は他の方法によって行われてもよい。強調表示の対象の車両６０３は、図５に示すような四輪車であってもよいし、二輪車であってもよいし、軽車両、例えば自転車であってもよい。プロセッサ２０１は、信号機６０１と、歩行者６０２と、車両６０３とのうちの一部のみを強調表示してもよいし、これらを異なるように強調表示してもよい。このように強調表示を行うことによって、運転者が発進前に歩行者等の位置を認識しやすくなるため、発進の安全性がさらに向上する。

携帯装置２１０のプロセッサ２１１は、携帯装置２１０のユーザからの入力に応じて、上述のステップＳ４０２で画面５００のうちの前方画像５０２の位置を変更してもよい。例えば、図６に示すように、プロセッサ２１１は、前方画像５０２の表示位置を、画面５００の右下から左上に変更してもよい。表示位置の変更は、例えばユーザが前方画像５０２をドラッグ又はフリックすることによって行われてもよい。表示位置を変更可能にすることによって、ユーザの利便性が向上する。

図８に示すように、携帯装置２１０は、画面５００に、前方画像５０２に加えて、車両１の前方以外の方向の状況を示す画像を含めてもよい。前方以外の方向の状況を示す画像を補助画像と呼ぶ。補助画像は、車両１の後方の状況を示す画像であってもよい。例えば、補助画像８０１は、車両１の左側のサイドミラーから車両１の後方を撮影した画像であり、補助画像８０２は、車両１の右側のサイドミラーから車両１の後方を撮影した画像である。

図８の画面５００の表示を実現するために、車両１のプロセッサ２０１は、図３のステップＳ３０４で、前方画像に加えて補助画像を更に生成する。プロセッサ２０１は、図３のステップ３０５で、前方画像に加えて補助画像を携帯装置２１０へ送信する。携帯装置２１０のプロセッサ２１１は、図４のステップＳ４０１で、前方画像に加えて補助画像を更に受信する。プロセッサ２１１は、図４のステップＳ４０２で、画面に補助画像を更に含める。例えば、プロセッサ２１１は、ベース画像５０１に前方画像５０２と、補助画像８０１、８０２を重畳する。プロセッサ２１１は、前方画像５０２と、補助画像８０１、８０２とを並べて配置してもよい。補助画像を表示することによって、車両１の発進直後に右左折などをする場合にも安全性が向上する。

図９に示すように、携帯装置２１０は、画面５００に、車両１の前方の信号機が切り替わるまでの残り時間を表す情報９０１を含めてもよい。図９の画面５００の表示を実現するために、車両１のプロセッサ２０１は、図３のステップＳ３０４で、前方画像の生成に加えて、車両１の前方の信号機が切り替わるまでの残り時間を取得する。残り時間を表す情報は、例えば信号機からのＶ２Ｉ（Vehicle to Infrastructure）信号データから取得される。プロセッサ２０１は、図３のステップ３０５で、前方画像に加えて残り時間を表す情報を携帯装置２１０へ送信する。携帯装置２１０のプロセッサ２１１は、図４のステップＳ４０１で、前方画像に加えて残り時間を表す情報を更に受信する。プロセッサ２１１は、図４のステップＳ４０２で、画面に残り時間を表す情報を更に含める。残り時間を表す情報を表示することによって、運転者は運転体勢に戻る準備をスムーズにできる。

＜実施形態のまとめ＞
＜項目１＞
車両（１）及び携帯装置（２１０）を備える表示システム（２００）であって、
前記車両は、
前記車両の前方の状況を示す前方画像（５０２）を生成する前方画像生成部（２０１、Ｓ３０４）と、
前記前方画像を前記携帯装置へ送信する送信部（２０４）と、を備え、
前記携帯装置は、
前記車両から前記前方画像を受信する受信部（２１５）と、
前記携帯装置が実行中の機能に基づくベース画像（５０１）と前記前方画像とを含む画面（５００）を生成する画面生成部（２１１、Ｓ４０４）と、
前記画面を表示する表示部（２１３）と、を備える
ことを特徴とする表示システム。
この項目によれば、車両の停止中に携帯装置の画面を見ている運転者が安全に発進できるようになる。例えば、運転者が携帯装置の画面の一部を見ることによって、車両の前方の状況を把握できるため、発進する前に運転体勢に戻る準備をすることができる。
＜項目２＞
前記車両は、前記車両が停止しているかどうかを判定する停止判定部（２０１、Ｓ３０２）を更に備え、
前記送信部が前記前方画像を前記携帯装置へ送信するための条件は、前記車両が停止していることを含む
ことを特徴とする項目１に記載の表示システム。
この項目によれば、車両が停止していない場合に前方画像が表示されないため、車両の走行中に運転者が携帯装置の画面を見ることを抑制できる。＜項目３＞
前記車両は、前記携帯装置の前記表示部がオンであるかどうかを判定する表示判定部（２０１、Ｓ３０３）を更に備え、
前記送信部が前記前方画像を前記携帯装置へ送信するための条件は、前記表示部がオンであることを含む
ことを特徴とする項目１又は２に記載の表示システム。
この項目によれば、運転者が携帯装置の画面を見ていない間に前方画像を送信しないことによって、運転者の周囲環境認識を促すとともに、携帯端末のバッテリ使用量を軽減できる。
＜項目４＞
前記車両と前記携帯装置とは無線通信可能であることを特徴とする項目２又は３に記載の表示システム。
この項目によれば、前方画像を送信しないことによって、通信量を軽減できる。
＜項目５＞
前記前方画像生成部は、前記車両の前方以外の方向の状況を示す補助画像（８０１、８０２）を更に生成し、
前記送信部は、前記補助画像を前記携帯装置へ更に送信し、
前記画面生成部は、前記画面に前記補助画像を更に含める
ことを特徴とする項目１乃至４の何れか１項に記載の表示システム。
この項目によれば、車両の発進直後に右左折などをする場合にも安全性が向上する。
＜項目６＞
前記車両は、前記車両の前方の信号機が切り替わるまでの残り時間を取得する取得部（２０１）を更に備え、
前記送信部は、前記残り時間を前記携帯装置へ更に送信し、
前記画面生成部は、前記画面の一部に、前記残り時間を表す情報（９０１）を含める
ことを特徴とする項目１乃至５の何れか１項に記載の表示システム。
この項目によれば、信号機が切り替わるまでの時間を把握できるため、運転者は運転体勢に戻る準備をスムーズにできる。
＜項目７＞
前記前方画像生成部は、前記前方画像に含まれる信号機（６０１）、車両（６０３）及び歩行者（６０２）のうちの少なくとも１つを強調表示することを特徴とする項目１乃至６の何れか１項に記載の表示システム。
この項目によれば、運転者が発進前に歩行者等の位置を認識しやすくなるため、発進の安全性がさらに向上する。
＜項目８＞
前記画面生成部は、前記携帯装置のユーザからの入力に応じて、前記画面のうちの前記前方画像の位置を変更することを特徴とする項目１乃至７の何れか１項に記載の表示システム。
この項目によれば、ユーザの利便性が向上する。
＜項目９＞
前記画面生成部は、前記ベース画像に前記前方画像を重畳することを特徴とする項目１乃至８の何れか１項に記載の表示システム。
この項目によれば、画面のスペースを有効活用できる。
＜項目１０＞
車両（１）であって、
前記車両の前方の状況を示す前方画像（５０２）を生成する前方画像生成部（２０１、Ｓ３０４）と、
前記前方画像を携帯装置へ送信する送信部（２０４）と、を備えることを特徴とする車両。
この項目によれば、車両の停止中に携帯装置の画面を見ている運転者が安全に発進できるようになる。
＜項目１１＞
前記車両は、前記車両が停止しているかどうかを判定する停止判定部（２０１、Ｓ３０２）を更に備え、
前記送信部が前記前方画像を前記携帯装置へ送信するための条件は、前記車両が停止していることを含む
ことを特徴とする項目１０に記載の車両。
この項目によれば、車両が停止していない場合に前方画像が表示されないため、車両の走行中に運転者が携帯装置の画面を見ることを抑制できる。＜項目１２＞
前記車両は、前記携帯装置の表示部がオンであるかどうかを判定する表示判定部（２０１、Ｓ３０３）を更に備え、
前記送信部が前記前方画像を前記携帯装置へ送信するための条件は、前記表示部がオンであることを含む
ことを特徴とする項目１０又は１１に記載の車両。
この項目によれば、運転者が携帯装置の画面を見ていない間に前方画像を送信しないことによって、運転者の周囲環境認識を促すとともに、携帯端末のバッテリ使用量を軽減できる。
＜項目１３＞
前記車両と前記携帯装置とは無線通信可能であることを特徴とする項目１１又は１２に記載の車両。
この項目によれば、前方画像を送信しないことによって、通信量を軽減できる。
＜項目１４＞
前記前方画像生成部は、前記車両の前方以外の方向の状況を示す補助画像（８０１、８０２）を更に生成し、
前記送信部は、前記補助画像を前記携帯装置へ更に送信する
ことを特徴とする項目１０乃至１３の何れか１項に記載の車両。
この項目によれば、車両の発進直後に右左折などをする場合にも安全性が向上する。
＜項目１５＞
前記車両は、前記車両の前方の信号機が切り替わるまでの残り時間を取得する取得部（２０１）を更に備え、
前記送信部は、前記残り時間を前記携帯装置へ更に送信する
ことを特徴とする項目１０乃至１４の何れか１項に記載の車両。
この項目によれば、信号機が切り替わるまでの時間を把握できるため、運転者は運転体勢に戻る準備をする余裕がある。
＜項目１６＞
前記前方画像生成部は、前記前方画像に含まれる信号機（６０１）、車両（６０３）及び歩行者（６０２）のうちの少なくとも１つを強調表示することを特徴とする項目１０乃至１５の何れか１項に記載の車両。
この項目によれば、運転者が発進前に歩行者等の位置を認識しやすくなるため、発進の安全性がさらに向上する。
＜項目１７＞
携帯装置（２１０）であって、
車両（１）の前方の状況を示す前方画像（５０２）を前記車両から受信する受信部（２１５）と、
前記携帯装置が実行中の機能に基づくベース画像（５０１）と前記前方画像とを含む画面（５００）を生成する画面生成部（２１１、Ｓ４０４）と、
前記画面を表示する表示部（２１３）と、を備えることを特徴とする携帯装置。
この項目によれば、車両の停止中に携帯装置の画面を見ている運転者が安全に発進できるようになる。
＜項目１８＞
前記画面生成部は、前記携帯装置のユーザからの入力に応じて、前記画面のうちの前記前方画像の位置を変更することを特徴とする項目１７に記載の携帯装置。
この項目によれば、ユーザの利便性が向上する。
＜項目１９＞
前記画面生成部は、前記ベース画像に前記前方画像を重畳することを特徴とする項目１７又は１８に記載の携帯装置。
この項目によれば、画面のスペースを有効活用できる。

発明は上記の実施形態に制限されるものではなく、発明の要旨の範囲内で、種々の変形・変更が可能である。

１ 車両、２ 制御装置、２０〜２９ ＥＣＵ、７Ａ アクセルペダル、７Ｂ ブレーキペダル、３１ ステアリングホイール

Claims (19)

1. 車両及び携帯装置を備える表示システムであって、
   前記車両は、
   前記車両の前方の状況を示す前方画像を生成する前方画像生成部と、
   前記前方画像を前記携帯装置へ送信する送信部と、を備え、
   前記携帯装置は、
   前記車両から前記前方画像を受信する受信部と、
   前記携帯装置が実行中の機能に基づくベース画像と前記前方画像とを含む画面を生成する画面生成部と、
   前記画面を表示する表示部と、を備える
   ことを特徴とする表示システム。
2. 前記車両は、前記車両が停止しているかどうかを判定する停止判定部を更に備え、
   前記送信部が前記前方画像を前記携帯装置へ送信するための条件は、前記車両が停止していることを含む
   ことを特徴とする請求項１に記載の表示システム。
3. 前記車両は、前記携帯装置の前記表示部がオンであるかどうかを判定する表示判定部を更に備え、
   前記送信部が前記前方画像を前記携帯装置へ送信するための条件は、前記表示部がオンであることを含む
   ことを特徴とする請求項１又は２に記載の表示システム。
4. 前記車両と前記携帯装置とは無線通信可能であることを特徴とする請求項２又は３に記載の表示システム。
5. 前記前方画像生成部は、前記車両の前方以外の方向の状況を示す補助画像を更に生成し、
   前記送信部は、前記補助画像を前記携帯装置へ更に送信し、
   前記画面生成部は、前記画面に前記補助画像を更に含める
   ことを特徴とする請求項１乃至４の何れか１項に記載の表示システム。
6. 前記車両は、前記車両の前方の信号機が切り替わるまでの残り時間を取得する取得部を更に備え、
   前記送信部は、前記残り時間を前記携帯装置へ更に送信し、
   前記画面生成部は、前記画面の一部に、前記残り時間を表す情報を含める
   ことを特徴とする請求項１乃至５の何れか１項に記載の表示システム。
7. 前記前方画像生成部は、前記前方画像に含まれる信号機、車両及び歩行者のうちの少なくとも１つを強調表示することを特徴とする請求項１乃至６の何れか１項に記載の表示システム。
8. 前記画面生成部は、前記携帯装置のユーザからの入力に応じて、前記画面のうちの前記前方画像の位置を変更することを特徴とする請求項１乃至７の何れか１項に記載の表示システム。
9. 前記画面生成部は、前記ベース画像に前記前方画像を重畳することを特徴とする請求項１乃至８の何れか１項に記載の表示システム。
10. 車両であって、
    前記車両の前方の状況を示す前方画像を生成する前方画像生成部と、
    前記前方画像を携帯装置へ送信する送信部と、を備えることを特徴とする車両。
11. 前記車両は、前記車両が停止しているかどうかを判定する停止判定部を更に備え、
    前記送信部が前記前方画像を前記携帯装置へ送信するための条件は、前記車両が停止していることを含む
    ことを特徴とする請求項１０に記載の車両。
12. 前記車両は、前記携帯装置の表示部がオンであるかどうかを判定する表示判定部を更に備え、
    前記送信部が前記前方画像を前記携帯装置へ送信するための条件は、前記表示部がオンであることを含む
    ことを特徴とする請求項１０又は１１に記載の車両。
13. 前記車両と前記携帯装置とは無線通信可能であることを特徴とする請求項１１又は１２に記載の車両。
14. 前記前方画像生成部は、前記車両の前方以外の方向の状況を示す補助画像を更に生成し、
    前記送信部は、前記補助画像を前記携帯装置へ更に送信する
    ことを特徴とする請求項１０乃至１３の何れか１項に記載の車両。
15. 前記車両は、前記車両の前方の信号機が切り替わるまでの残り時間を取得する取得部を更に備え、
    前記送信部は、前記残り時間を前記携帯装置へ更に送信する
    ことを特徴とする請求項１０乃至１４の何れか１項に記載の車両。
16. 前記前方画像生成部は、前記前方画像に含まれる信号機、車両及び歩行者のうちの少なくとも１つを強調表示することを特徴とする請求項１０乃至１５の何れか１項に記載の車両。
17. 携帯装置であって、
    車両の前方の状況を示す前方画像を前記車両から受信する受信部と、
    前記携帯装置が実行中の機能に基づくベース画像と前記前方画像とを含む画面を生成する画面生成部と、
    前記画面を表示する表示部と、を備えることを特徴とする携帯装置。
18. 前記画面生成部は、前記携帯装置のユーザからの入力に応じて、前記画面のうちの前記前方画像の位置を変更することを特徴とする請求項１７に記載の携帯装置。
19. 前記画面生成部は、前記ベース画像に前記前方画像を重畳することを特徴とする請求項１７又は１８に記載の携帯装置。

Images