JP6293013B2 - 映像送信装置、映像送信方法及び映像送信プログラム - Google Patents

Description

本発明は、カメラで撮影した映像データを外部へ送信する映像送信装置、映像送信方法及び映像送信プログラムに関する。

従来、自動車の前方をカメラで撮影して映像データを記録するドライブレコーダが知られている。ドライブレコーダで撮影された映像は、事故が発生した際の証拠又は参考情報として用いられるため、特に商用車への搭載が進んでいる。また、ドライブレコーダは、偶然に遭遇した出来事を記録した映像を共有するためにも使用され、一般車両へも搭載されている。

これらのドライブレコーダは、撮影した映像データをＳＤメモリ等の外部記憶に記録しているが、外部記憶の容量に制限があるため、長期間の映像データを記録し続けることはできなかった。そこで、例えば、大きな加速度が生じた瞬間の前後一定時間を記録したり、古いデータを上書きして循環的に記録したりする方法が取られている。このため、必要な映像データが記録されていない、又は消去されてしまう場合があった。

このような状況において、例えば、特許文献１には、ドライブレコーダに無線通信機を備え、事業者からの要求を受信した場合に通信を用いて静止画像をセンタ端末へ送信するシステムが提案されている。

特開２００９−０２０８７７号公報

ところで、自動車事故等の緊急時には運転手の意思にかかわらず運行を管理する事業者へ直ちに映像データが通知されることが望ましく、さらに、動画像であれば静止画像に比べてより多くの情報が得られるため、緊急時の適切な対応が期待できる。また、自動車の運転中に偶然に遭遇した珍しい映像を動画共有サイト等へ投稿する等のニーズもある。

しかしながら、これらの残しておくべき映像データを効率的に判断して外部へ送信することは難しかった。
また、映像データを送信する場合、静止画像又は他のセンサ情報等に比べてデータ容量が大きいため、３Ｇ又はＬＴＥ等の移動通信網を経由すると、無線帯域が圧迫されてしまうという課題があった。

本発明は、移動通信網の負荷を低減しつつ、映像データを外部装置へ効率的に送信できる映像送信装置、映像送信方法及び映像送信プログラムを提供することを目的とする。

本発明に係る映像送信装置は、移動無線通信部と、近距離無線通信部と、カメラにより撮影された映像信号を含むセンサ情報を取得する取得部と、前記センサ情報に基づいて、前記映像信号から生成された映像データを外部へ送信する優先度を決定する決定部と、前記映像データを、前記優先度と共に記憶する記憶部と、前記映像データを外部へ送信する際、対応する前記優先度が所定以上の場合、前記移動無線通信部により送信させ、対応する前記優先度が所定未満の場合、前記移動無線通信部を用いずに前記近距離無線通信部により送信させる通信制御部と、を備える。

前記映像送信装置は、第１のセンサ情報に基づいて緊急度を判定する緊急度判定部と、第２のセンサ情報に基づいて重要度を判定する重要度判定部と、を備え、前記決定部は、前記緊急度及び前記重要度に基づいて、前記優先度を決定してもよい。

前記第１のセンサ情報は、加速度情報であってもよい。

前記第２のセンサ情報は、前記映像信号又は音声信号であってもよい。

前記取得部は、前記センサ情報の少なくとも一部を、ネットワークを介して外部から取得してもよい。

前記通信制御部は、送信に成功した映像データを識別するデータを記憶し、前記近距離無線通信部による通信が切断された場合、次に通信が回復すると、前記送信に成功した映像データを除く映像データのうち、前記優先度の高い映像データから送信を開始してもよい。

前記映像送信装置は、前記映像データを変換してデータ容量を圧縮する変換部を備え、前記決定部は、前記変換部により変換された後の映像データの優先度を、変換前の映像データの優先度よりも高く決定してもよい。

前記映像送信装置は、前記優先度の指定入力を受け付ける入力部を備え、前記決定部は、前記センサ情報の解析結果に優先して、前記指定入力に基づいて、前記優先度を決定してもよい。

本発明に係る映像送信方法は、コンピュータの制御部が、カメラにより撮影された映像信号を含むセンサ情報を取得する取得ステップと、前記センサ情報に基づいて、前記映像信号から生成された映像データを外部へ送信する優先度を決定する決定ステップと、前記映像データを、前記優先度と共に記憶する記憶ステップと、前記映像データを外部へ送信する際、対応する前記優先度が所定以上の場合、移動無線通信により送信させ、対応する前記優先度が所定未満の場合、前記移動無線通信を用いずに近距離無線通信により送信させる通信制御ステップと、を実行する。

本発明に係る映像送信プログラムは、前記映像送信方法の各ステップを前記コンピュータに実行させる。

本発明によれば、移動通信網の負荷を低減しつつ、映像データを外部装置へ効率的に送信できる。

実施形態に係る映像送信装置の機能構成を示すブロック図である。 実施形態に係る映像データを送信する第１の処理を示すフローチャートである。 実施形態に係る映像データを送信する第２の処理を示すフローチャートである。 実施形態に係る映像データの優先度に応じた送信順序の決定方法を例示する図である。 実施形態に係る映像データが近距離無線で送信される場合の手順を例示する図である。

以下、本発明の実施形態の一例について説明する。
本実施形態の映像送信装置１は、自動車に搭載されるドライブレコーダであり、撮影した映像及び音声を記憶すると共に、決定した優先度に応じて無線通信手段によって外部サーバへ送信する。

図１は、本実施形態に係る映像送信装置１の機能構成を示すブロック図である。
映像送信装置１は、カメラ１１（カメラ部）と、マイク１２と、加速度センサ１３と、入力部１４と、解析部１５（取得部）と、決定部１６と、符号化部１７（変換部）と、記憶部１８と、通信制御部１９と、移動無線通信部２０と、近距離無線通信部２１とを備える。

カメラ１１は、運転中の自動車の周囲、特に前方を撮影して映像信号を第２のセンサ情報として出力する。カメラ１１は、エンジンの始動から停止までの間、又は指定された期間において、撮影を継続し、映像信号を出力し続ける。

マイク１２は、カメラ１１と同期して、運転中の自動車の周囲、又は車内の音声を音声信号に変換し、第２のセンサ情報として出力する。

加速度センサ１３は、自動車の加速度を計測し、測定データを第１のセンサ情報として出力する。

入力部１４は、映像データを外部サーバへ送信する優先度の指定を、ユーザの操作入力によって受け付ける。

解析部１５は、映像信号、音声信号及び加速度データ等のセンサ情報を取得する。さらに、解析部１５は、センサ情報の少なくとも一部を、ネットワークを介して外部から取得してもよい。具体的には、解析部１５は、センサ情報として、例えば緊急速報、ＶＩＣＳ（登録商標）情報、あるいは周辺の自動車等から直接又はネットワークを介して、付近で緊急性又は重要性が高い事象が発生したことを通信により取得する。

また、解析部１５は、緊急度判定部１５１と重要度判定部１５２とを備え、センサ情報に基づいて映像データの緊急性及び重要性を解析する。

緊急度判定部１５１は、加速度センサ１３による測定データ（第１のセンサ情報）に基づいて緊急度を判定する。具体的には、例えば、所定以上に大きな加速度等の異常値が測定された場合に、緊急度判定部１５１は、事故等の緊急性が高い事象が発生したと判定し、この前後の時間帯における映像データの緊急度を高く設定する。

重要度判定部１５２は、映像及び音声の信号（第２のセンサ情報）に基づいて、この映像又は音声の重要度を判定する。具体的には、重要度判定部１５２は、例えば、所定以上に大きな音声が検出された、又は通常と異なる物体が撮影された等の異常を検出した場合に、重要度が高い事象が発生したと判定し、この前後の時間帯における映像データの重要度を高く設定する。

決定部１６は、センサ情報により判定された緊急度及び重要度に基づいて、映像データを外部へ送信する優先度を決定する。具体的には、決定部１６は、緊急度が高い映像データは、優先度を最も高く決定し、以下、重要度の高さに応じて優先度を段階的に決定する。
また、決定部１６は、入力部によりユーザから指定入力を受け付けた場合には、センサ情報に優先して、この指定入力に基づいて優先度を決定する。

符号化部１７は、カメラ１１及びマイク１２から入力された信号を一定時間毎に、符号化し、記録及び送信可能な映像データとする。
また、符号化部１７は、高解像度の映像データを低解像度化又は一部を切り出す等によって変換し、データ容量を圧縮した映像データを生成してもよい。この場合、決定部１６は、変換された後の映像データの優先度を、変換前の映像データの優先度よりも高く決定することにより、早期に変換後の映像データが送信されるように設定する。なお、変換前の高解像度の映像データは、優先度を最低に設定し、外部へ送信されなくてもよい。

記憶部１８は、カメラ１１により撮影されて符号化部１７により符号化された映像データを、決定された優先度と共に記憶する。記憶された映像データは、優先度に応じて通信制御部１９により抽出される。また、映像データは、ユーザ操作に基づき、有線又は無線により取り出し可能である。

通信制御部１９は、映像データを外部へ送信する際、対応する優先度が所定以上の場合、移動無線通信部２０により送信させ、対応する優先度が所定未満の場合、近距離無線通信部２１により送信させる。
このとき、通信制御部１９は、映像データの優先度が高い順に送信を試みる。

また、通信制御部１９は、送信に成功した映像データを識別するデータを記憶し、近距離無線通信部による通信が切断された場合、次に通信が回復すると、送信に成功した映像データを除く映像データのうち、優先度の高い映像データから送信を開始する。

移動無線通信部２０は、例えば、３Ｇ又はＬＴＥ等、携帯端末用の移動通信網を利用する通信システムによって外部サーバとデータの送受信を行う。
近距離無線通信部２１は、例えば、Ｗｉ−Ｆｉ又はＢｌｕｅｔｏｏｔｈ（登録商標）等、近距離の無線通信システムを経由して、外部サーバとデータの送受信を行う。

図２は、本実施形態に係る映像データを送信する第１の処理を示すフローチャートである。
本処理では、映像送信装置１は、生成した映像データを緊急度に応じて即時に外部へ送信する。

ステップＳ１において、映像送信装置１は、センサ情報として、カメラ１１及びマイク１２から映像及び音声の信号を、加速度センサ１３から加速度情報を取得する。

ステップＳ２において、映像送信装置１は、解析部１５により、加速度情報に基づいて衝突、急加速、急ブレーキ等の事象を検出し、映像送信の緊急度を判定する。

ステップＳ３において、映像送信装置１は、解析部１５により、映像及び音声の信号を解析し、映像データの重要度を判定する。

ステップＳ４において、映像送信装置１は、緊急度及び重要度に基づいて、映像データを外部へ送信する優先度と共に、送信手段（移動無線通信部２０又は近距離無線通信部２１）を決定する。

ステップＳ５において、映像送信装置１は、符号化部１７により映像及び音声の信号を符号化し、映像データを生成する。

ステップＳ６において、映像送信装置１は、生成した映像データを記憶部１８に記憶する。

ステップＳ７において、映像送信装置１は、生成した映像データの優先度が最上位、すなわち緊急性の高い映像であるか否かを判定する。この判定がＹＥＳの場合、処理はステップＳ８に移り、判定がＮＯの場合、処理は終了する。

ステップＳ８において、映像送信装置１は、送信手段として移動無線通信部２０を選択し、映像データを送信する。

なお、映像送信装置１は、センサ情報から優先度を決定するステップＳ２〜Ｓ４と、映像データを記録するステップＳ５〜Ｓ６とを、並列して実行してもよい。

図３は、本実施形態に係る映像データを送信する第２の処理を示すフローチャートである。
本処理は、映像送信装置１により繰り返し実行され、近距離無線の圏内において、記憶されている映像データを優先度に応じて順次外部へ送信する。

ステップＳ１１において、映像送信装置１は、近距離無線の圏内にあるか否かを判定する。この判定がＹＥＳの場合、処理はステップＳ１２に移り、判定がＮＯの場合、処理は終了する。

ステップＳ１２において、映像送信装置１は、未送信の映像データのうち最も優先度が高いものを、次に送信する映像データとして記憶部１８から抽出する。

ステップＳ１３において、映像送信装置１は、送信手段として近距離無線通信部２１を選択し、抽出した映像データを送信する。

ステップＳ１４において、映像送信装置１は、送信した映像データに対して、送信済みを示すフラグを付加して記録する。

図４は、本実施形態に係る映像データの優先度に応じた送信順序の決定方法を例示する図である。

映像データ１〜８が撮影順に生成されると、それぞれに対応した優先度が設定される。この例では、優先度の一例として「高」、「中」、「低」の３段階が映像データ毎に設定されている。

まず、優先度が「高」の映像データ３が送信（アップロード）順序の１番となる。次に、優先度が「中」の映像データ４，８が撮影された順に送信され、最後に優先度が「低」の映像データ１，２，５，６，７が撮影された順に送信される。

図５は、本実施形態に係る映像データが近距離無線で送信される場合の手順を例示する図である。

自動車に搭載された映像送信装置１は、自動車の走行に従って順に、近距離無線のアクセスポイント２ａ、２ｂ、２ｃの通信エリア圏内に入る。各アクセスポイント２（ａ〜ｃ）は、通信エリアが近距離に限られるため、移動する映像送信装置１から送信可能な映像データの量も限られる。

そこで、映像送信装置１は、各アクセスポイント２（ａ〜ｃ）の通信エリア圏内に入る度に、未送信の映像データを優先度に従った順序で送信する。送信された映像データは、ネットワーク３を介して外部サーバ４にアップロードされる。
この例では、映像送信装置１は、決定された送信順序に従って、アクセスポイント２ａの圏内で映像データ３，４を、アクセスポイント２ｂの圏内で映像データ８，１，２を、アクセスポイント２ｃの圏内で映像データ５，６を送信している。
なお、送信が完了する前に圏外となった場合、映像送信装置１は、次に圏内となった際に送信が未完了の映像データから送信を試みる。

本実施形態によれば、映像送信装置１は、撮影された映像データを送信する優先度を決定し、優先度が高く緊急性が高い映像データのみを移動無線通信により送信し、この他の映像データを近距離無線通信により送信する。したがって、映像送信装置１は、優先度によって複数の通信手段を切り替えることにより、移動通信網の負荷を低減しつつ、映像データを外部装置へ効率的に送信できる。

映像送信装置１は、複数のセンサ情報に基づいて緊急度及び重要度を独立して判定し、これらを統合して優先度を決定する。したがって、映像送信装置１は、複数の入力情報を効率的に使い分け、適切な送信手段及び送信順順序を決定できる。

映像送信装置１は、加速度情報に基づいて緊急度を判定するので、加速度値の異常を検出したことによって事故等の緊急性が高い事象が発生したことを効率的に精度良く判定できる。

映像送信装置１は、映像又は音声に基づいて重要度を判定するので、偶然に遭遇した稀な出来事等、ユーザにとっての映像データの重要度を精度良く判定できる。

映像送信装置１は、センサ情報を、ネットワークを介して外部から取得できるので、外部情報を含めたより多くの情報に基づいて、映像データの優先度を精度良く判定できる。

映像送信装置１は、近距離無線通信を用いて、通信エリア圏内に入る度に複数の映像データを順に送信するよう制御する。このとき、映像送信装置１は、送信済みを示す識別フラグを付与するので、映像データが重複して送信されることを抑制できる。

映像送信装置１は、高解像度の映像データ等、データ容量が大きい映像データを変換し、変換後のデータ容量が小さい映像データを優先して送信できるので、通信網を圧迫することなく、重要な映像データを早期に外部へ送信できる。

映像送信装置１は、ユーザ又は外部サーバ等、外部から優先度の指定入力を受け付けるので、映像の利用者の意図に従った適切な映像データを外部へ送信できる。

以上、本発明の実施形態について説明したが、本発明は前述した実施形態に限るものではない。また、本実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本実施形態に記載されたものに限定されるものではない。

本実施形態の映像送信装置１は、ドライブレコーダであるとして説明したが、ドライブレコーダ機能を提供するアプリケーションがインストールされた移動端末、例えばスマートフォン又はウェアラブルデバイス等であってもよい。
さらに、機能ブロックの一部が別のデバイスとして構成されてもよい。例えば、無線通信手段（移動無線通信部２０及び近距離無線通信部２１）は、携帯電話機、スマートフォン又は通信専用端末等が接続されることにより提供されてもよい。

映像送信装置１に入力されるセンサ情報は、前述の映像信号、音声信号及び加速度情報等には限られない。また、映像及び音声等の解析には、画像認識又は音声認識等の既存の技術を適用し、通常と異なる重要な事象の発生を検出する精度を向上させることができる。

また、映像送信装置１は、音声を含む映像データと共に、速度又は加速度等の各種のセンサ情報を送信してもよい。

映像送信装置１による映像送信方法は、ソフトウェアにより実現される。ソフトウェアによって実現される場合には、このソフトウェアを構成するプログラムが、情報処理装置（映像送信装置１）にインストールされる。また、これらのプログラムは、ＣＤ−ＲＯＭのようなリムーバブルメディアに記録されてユーザに配布されてもよいし、ネットワークを介してコンピュータにダウンロードされることにより配布されてもよい。さらに、これらのプログラムは、ダウンロードされることなくネットワークを介したＷｅｂサービスとしてコンピュータに提供されてもよい。

１ 映像送信装置
１１ カメラ
１２ マイク
１３ 加速度センサ
１４ 入力部
１５ 解析部（取得部）
１６ 決定部
１７ 符号化部
１８ 記憶部
１９ 通信制御部
２０ 移動無線通信部
２１ 近距離無線通信部
１５１ 緊急度判定部
１５２ 重要度判定部

Claims (10)

1. 移動無線通信部と、
   近距離無線通信部と、
   カメラにより撮影された映像信号を含むセンサ情報を取得する取得部と、
   前記センサ情報に基づいて、前記映像信号から生成された映像データを外部へ送信する優先度を決定する決定部と、
   前記映像データを、前記優先度と共に記憶する記憶部と、
   前記映像データを外部へ送信する際、対応する前記優先度が所定以上の場合、前記移動無線通信部により送信させ、対応する前記優先度が所定未満の場合、前記移動無線通信部を用いずに前記近距離無線通信部により送信させる通信制御部と、を備える映像送信装置。
2. 第１のセンサ情報に基づいて緊急度を判定する緊急度判定部と、
   第２のセンサ情報に基づいて重要度を判定する重要度判定部と、を備え、
   前記決定部は、前記緊急度及び前記重要度に基づいて、前記優先度を決定する請求項１に記載の映像送信装置。
3. 前記第１のセンサ情報は、加速度情報である請求項２に記載の映像送信装置。
4. 前記第２のセンサ情報は、前記映像信号又は音声信号である請求項２又は請求項３に記載の映像送信装置。
5. 前記取得部は、前記センサ情報の少なくとも一部を、ネットワークを介して外部から取得する請求項１から請求項４のいずれかに記載の映像送信装置。
6. 前記通信制御部は、送信に成功した映像データを識別するデータを記憶し、前記近距離無線通信部による通信が切断された場合、次に通信が回復すると、前記送信に成功した映像データを除く映像データのうち、前記優先度の高い映像データから送信を開始する請求項１から請求項５のいずれかに記載の映像送信装置。
7. 前記映像データを変換してデータ容量を圧縮する変換部を備え、
   前記決定部は、前記変換部により変換された後の映像データの優先度を、変換前の映像データの優先度よりも高く決定する請求項１から請求項６のいずれかに記載の映像送信装置。
8. 前記優先度の指定入力を受け付ける入力部を備え、
   前記決定部は、前記センサ情報の解析結果に優先して、前記指定入力に基づいて、前記優先度を決定する請求項１から請求項７のいずれかに記載の映像送信装置。
9. コンピュータの制御部が、
   カメラにより撮影された映像信号を含むセンサ情報を取得する取得ステップと、
   前記センサ情報に基づいて、前記映像信号から生成された映像データを外部へ送信する優先度を決定する決定ステップと、
   前記映像データを、前記優先度と共に記憶する記憶ステップと、
   前記映像データを外部へ送信する際、対応する前記優先度が所定以上の場合、移動無線通信により送信させ、対応する前記優先度が所定未満の場合、前記移動無線通信を用いずに近距離無線通信により送信させる通信制御ステップと、を実行する映像送信方法。
10. 請求項９に記載の映像送信方法の各ステップを前記コンピュータに実行させるための映像送信プログラム。

Images