JP7357328B2 - システムおよびプログラム等 - Google Patents

Description

本発明は、システムおよびプログラム等に関する。

従来より、カメラを備え、当該カメラの映像を記録するシステムが知られている。

特開２０１８－１９６０６６号公報

例えば、このようなカメラの映像を記録等する機能を備えるシステムにおいては、様々な課題があった。本発明の目的の一つは、従来よりも優れたシステム等を提供することである。

本願の発明の目的はこれに限定されず、本明細書および図面等に開示される構成の部分から奏する効果を得ることを目的とする構成についても分割出願・補正等により権利取得する意思を有する。例えば本明細書において「～できる」と記載した箇所を「～が課題である」と読み替えた課題が本明細書には開示されている。課題はそれぞれ独立したものとして記載しているものであり、各々の課題を解決するための構成についても単独で分割出願・補正等により権利取得する意思を有する。課題が明細書の記載から黙示的に把握されるものであっても、本出願人は本明細書に記載の構成の一部を補正または分割出願にて特許請求の範囲とする意思を有する。またこれら独立の課題を組み合わせた課題を解決する構成についても開示しているものであり、権利取得する意思を有する。

本発明は、例えば以下の態様の発明として把握することができるものである。
（１）カメラと、前記カメラで撮像された映像を圧縮して記憶手段に記憶させるカメラ映像記録回路とを備えるシステムであって、前記カメラと前記カメラ映像記録回路との間を伝送する信号を、当該信号に基づいて所定の機能を実現する電子部品に分配する信号分配手段を備えるシステムとするとよい。

このようにすれば、カメラで撮像した映像を圧縮して記憶手段に記憶させることができるとともに、所定の機能を実現する電子部品おいて、分配されたカメラとカメラ映像記録回路との間の信号に基づいて所定の機能を実現することができる。

カメラは、各種のカメラとすることができるが、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）カメラとすることができ、特にＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ－Ｏｘｉｄｅ－Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）カメラとするとよい。カメラは静止画を撮像するためのカメラとすることもできるが、特に動画を撮像するためのカメラとするとよい。カメラは赤外線カメラのような特殊なカメラとすることができるが、可視光を撮像するカメラとするとよく、特に可視光のカメラとするとよい。カメラはモノクロの映像が得られるカメラとしてもよいが、カラーの映像が得られるカメラとするとよい。カメラは、例えば、赤（Ｒ）、緑（Ｇ）、青（Ｂ）のカラーフィルタを平面に配置したカメラとするとよい。カメラの解像度は、ＶＧＡ以上の解像度とするとよい。

カメラは、例えば撮像素子を備える部分を指してもよいが、撮像素子そのものを指してもよい。

特に、カメラは車両に設置されたカメラとするとよい。特に、カメラは車両のメーカーの出荷後に後付されるカメラとするとよい。

カメラ映像記録回路に備える映像の圧縮部は、各種のアルゴリズムのものを用いることができるが、特に規格化されたアルゴリズムのエンコーダーを用いるとよく、特にＨ．２６４エンコーダーまたはＨ.２６５エンコーダーの少なくともいずれか一方を備えるものとするとよい。特に、カメラ映像記録回路に備える映像のエンコーダーは、ソフトウェア処理で行うものではなく、ハードウェアで構成されたものとするとよい。エンコーダーは、単なるＦＰＧＡ（Ｆｉｅｌｄ－Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）ではなく、ＳｏＣ（Ｓｙｓｔｅｍ－ｏｎ－ａ－Ｃｈｉｐ）とすることが望ましい。このように、カメラ映像記録回路は、カメラ映像記録チップとしてもよい。カメラ映像記録回路は、ソフトマクロではなく、ハードマクロで構成されたものが望ましい。

カメラ映像記録回路は、カメラ映像記録の専用チップとして販売されているものとすると特によい。カメラ映像記録回路は、例えば、カメラ映像記録用のＡＳＳＰ、カメラ映像記録用のＳｏＣなどのカメラ映像記録用のＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｅｄ ｃｉｒｃｕｉｔ）とするとよく、特にカメラ映像記録回路はドライブレコーダー用ＳｏＣとするとよい。

記憶手段は、特に着脱可能な記憶手段とするとよく、特にＳＤ（登録商標）カード、ｍｉｃｒｏ ＳＤ（登録商標）カード等のカード状の媒体とするとよい。

前記カメラと前記カメラ映像記録回路との間を伝送する信号は、特に、制御信号としてもよいが、特に映像信号または映像の同期信号の少なくともいずれか一方を含むようにするとよい。映像の同期信号は、ピクセルクロック、垂直同期信号、または水平同期信号のうち少なくともいずれか１つするとよく、特に少なくともいずれか２つとするとよい。特に、ピクセルクロックと垂直同期信号とするとよい。

カメラの映像を伝送する映像信号は、例えば、映像チャンネル単位に同期された映像をシリアルで伝送してもいいし、パラレルに伝送してもよい。または、シリアルとパラレルとを組み合わせて伝送してもよい。特に、映像のフレーム単位に、その時の時刻やイベント情報、センサ情報などデータで重畳したり、映像に重畳したりするとよい。同期をとられた単位に、その時の時刻やイベント情報、センサ情報などのデータで重畳してもよいし、映像に重畳してもよい。

映像信号を分配するものとした場合、例えば所定のプロトコルの映像信号を入力し、入力したプロトコルと同一のプロトコルで複数の出力先に分配して出力するものとするとよい。例えば、映像信号としてＭＩＰＩ ＣＳＩ－２信号を出力するカメラであれば、信号分配手段はＭＩＰＩ ＣＳＩ－２信号スプリッターチップとするとよい。

映像信号を分配するものとした場合、例えば所定のプロトコルの映像信号を入力し、入力したプロトコルとは異なるプロトコルであって複数の出力先について同一のプロトコルの信号を出力するものとするとよい。例えば、映像信号としてＦＰＤ－ＬＩＮＫ III信号を出力するカメラであれば、信号分配手段はＦＰＤ－ＬＩＮＫ III信号を入力して例えば複数のＭＩＰＩ ＣＳＩ－２信号として出力するポートを備えた回路（例えば、１ポート入力２ポート出力のデュアルポート出力デシリアライザーハブなど）とするとよい。特にＭＩＰＩ ＣＳＩ－２信号として出力するポートはあるポートのレプリカを他のポートに出力する機能を備えたものとするとよい。特にデシリアライザーハブチップとするとよい。

所定の機能を実現する電子部品は、特に前記カメラとは別のカメラまたは画像認識回路の少なくともいずれか一方を備えるとよい。所定の機能を実現する電子部品がカメラを備えるときは、所定の機能は前記カメラとは異なる範囲を含む別の領域を撮像する機能とするとよい。所定の機能を実現する電子部品が画像認識回路を備えるときは所定の機能は画像認識機能とするとよい。

信号分配手段は、例えば単純に配線を分岐するものとしてもよいが、特に分配した複数の信号線の間を伝送する信号の同期が取れるように分配する機能を備えるものとするとよく、特に分配した複数の信号線の間を伝送する信号の同期が取れるように分配する機能を備えた回路（例えば、チップ）とするとよい。

カメラとカメラ映像記録回路は同一の筐体内に備える構成としてもよいが、それぞれ別の筐体に備える構成とし、両筐体間はケーブルやコネクタ等の接続手段で接続するように構成するとよい。カメラとカメラ映像記録回路との間は１メートル以上のケーブルを介して接続される構成とするとよい。特にカメラとカメラ映像記録回路は、車両の中で引き回されるケーブルを介して接続されるものとするとよい。

（２）前記電子部品は、前記カメラとは異なる別のカメラを有し、前記信号は、同期信号生成手段が生成した映像の同期信号を含み、分配された前記同期信号に基づいて、前記カメラおよび前記別のカメラの各々の映像信号を、前記カメラ映像記録回路へ出力する構成とするとよい。

このようにすれば、カメラ映像記録回路側においてカメラと別のカメラとの間で同期した映像信号が得られる。例えば、カメラ映像記録回路においてカメラと別のカメラとの間で同期した映像信号を入力して、この入力した同期した複数の映像の信号に基づく映像を圧縮して記録することができる。例えば記録した複数の映像の信号を同時に再生したとき、同期した複数の映像を見ることができる。なお、映像の圧縮は複数のカメラのそれぞれで別々のファイルに行うようにしてもよいが、１つのファイルに行うようにするとよい。

（３）前記カメラが、前記同期信号生成手段を有し、前記信号分配手段は、前記同期信号を前記別のカメラへ分配する構成とするとよい。

このようにすれば、前記別のカメラから出力される映像信号は前記カメラの中で生成された同期信号に基づく映像信号となり、両カメラの同期を取りやすくなる。特に、この構成を採用するとともに、前記カメラと前記別のカメラとを同一の筐体に備える構成とするとよい。同期信号の引き回し距離が短いときに特に優れた効果を発揮する。

カメラの中としては、特に撮像素子の中で生成したものとするとよい。このようにすれば入力した同期信号に同期して撮像する外部同期可能な撮像素子を使わなくてもよく、低コストかつ簡便に構成できる。

（４）前記同期信号生成手段は、前記カメラおよび前記別のカメラの外部に備えられ、前記信号分配手段は、前記同期信号を前記カメラおよび前記別のカメラへ分配する構成とするとよい。

このようにすれば、前記別のカメラから出力される映像信号と、前記別のカメラから出力される映像信号との同期が取りやすい。

特に、この構成を採用するとともに、前記カメラと前記別のカメラとを異なる筐体に備える構成とするとよい。同期信号の引き回し距離が比較的長いときに特に優れた効果を発揮する。

（５）前記カメラ映像記録回路が、前記同期信号生成手段を有し、前記信号分配手段は、前記同期信号を前記カメラおよび前記別のカメラへ分配する構成とするとよい。

このようにすれば、映像の記録処理に合わせたタイミング等でカメラおよび別のカメラから同期した映像信号を得られる可能性を高められる。

（６）前記カメラおよび前記別のカメラから出力される信号を、ケーブルを介した伝送用の映像信号に変換する第１映像信号変換手段を有する第１映像信号変換回路と、前記ケーブルを介して伝送された前記映像信号を、前記カメラ映像記録回路に入力可能な映像信号に変換する第２映像信号変換手段を有する第２映像信号変換回路と、を備え、前記同期信号生成手段は、前記第１映像信号変換回路内または前記第２映像信号変換回路内に備えられ、前記信号分配手段は、前記第１映像信号変換回路内または前記第２映像信号変換回路内に備えられ、前記同期信号を前記カメラおよび前記別のカメラへ分配する構成とするとよい。

このようにすれば、前記カメラと前記別のカメラとから、両カメラが同期した映像信号を、ケーブルを介してカメラ映像記録回路に入力して記録することが容易にできる。

ケーブルは比較的長距離とするとよい。比較的長距離としては、前記カメラまたは前記別のカメラの少なくとも一方を備えるカメラユニット内の配線に必要な長さよりも長い距離とするとよく、特に１メートル以上とするとよい。

第１映像信号変換手段は例えばシリアライザー、第２映像信号変換手段は例えばデシリアライザーとするとよい。第１映像信号変換回路は特にシリアライザーチップ、第２映像信号変換回路は特にデシリアライザーチップとするとよい。第１映像信号変換回路と第２映像信号変換回路との間の伝送可能距離は、カメラおよび別のカメラが車載カメラである場合、特に数ｍの伝送が可能なものを用いるとよい。

また例えば、前記カメラと第１の第１映像信号変換回路とを有する第１のカメラユニットと、前記別のカメラと第２の第１映像信号変換回路とを有する第２のカメラユニットと、第２映像信号変換回路とカメラ映像記録回路とを有する記録ユニットとを備え、前記第１のカメラユニットと前記記録ユニットの間を第１のケーブル、前記第２のカメラユニットと前記記録ユニットの間を第２のケーブルで接続し、それぞれの映像信号を伝送するようにしてもよい。例えば、車両のフロントガラスに取り付けられる前記カメラ（第１カメラ）が車両の前方を撮像するように設置された第１のカメラユニットと、車両のリアガラスに取り付けられ前記別のカメラ（第２カメラ）が車両の後方を撮像するように設置された第２のカメラユニットを備え、ダッシュボード上あるいは助手席の下等に設けた記録ユニットが両カメラユニットにそれぞれ別のケーブルで接続される構成とするとよい。あるいは記録ユニットと第１のカメラユニットを１つのユニットとして構成してもよい。

また例えば、前記カメラと第１の第１映像信号変換回路とを有する第１のカメラユニットと、前記別のカメラと第２の第１映像信号変換回路とを有する第２のカメラユニットとを第１のケーブルで接続し、第２映像信号変換回路とカメラ映像記録回路とを有する記録ユニットと第２のカメラユニットとを第２のケーブルで接続する構成とし、それぞれの映像信号を伝送するようにしてもよい。
また、例えば、一つのカメラユニットに前記カメラと前記別のカメラを含む複数のカメラと第１映像信号変換回路を備え、第１映像信号変換回路は１つのケーブルにこれら複数のカメラの映像信号を流すよう変換し、当該１つのケーブルを介して第２映像信号変換回路とカメラ映像記録回路とを備えた記録ユニットに伝送して、記録手段に複数のカメラの映像を記録するようにするとよい。例えば、車両のフロントガラス等に取り付けられるカメラユニットであって、車両前方を撮像する前記カメラ（第１カメラ）と車両の後方を撮像する前記別のカメラ（第２カメラ）とを備えるカメラユニットと、ダッシュボード上あるいは助手席の下等に設けた、記録ユニットをケーブルで接続するように構成してもよい。

なお、例えば、第２映像信号変換回路は、第１映像信号変換回路によって変換され、比較的長距離の前記１つのケーブルを介して伝送された複数のカメラの映像信号を、記録ユニット内の配線に必要な比較的短距離の伝送用の信号に変換するとよい。

例えば、第２映像信号変換回路は、カメラ映像記録回路に対して、複数のカメラの映像信号を１つの伝送路に流すように出力して、これをカメラ映像記録回路が入力するように構成してもよい。例えば、第２映像信号変換回路は、２台のカメラの映像信号をそれぞれ所定のデータサイズのパケット等に分割して、交互にパケット等を伝送するようにしてもよい。より多数のカメラの映像信号を１つの伝送路にインターリーブして出力するようにしてもよい。

あるいは例えば、第２映像信号変換回路は、カメラ映像記録回路に対して、複数のカメラの映像信号をそれぞれのカメラ用の異なる伝送路に流すように出力して、これらをカメラ映像記録回路が入力するように構成してもよい。このようにすれば、それぞれのカメラ用の異なる伝送路中あるいは、これらに接続されたカメラ映像記録回路内において、各カメラ単位での処理がしやすい。例えば、カメラごとにカメラフレーム単位に映像とは別の情報を重畳させて記録したり、出力したりすることが比較的容易となる。

１本のケーブルはできるだけ少ない本数の信号線とするとよく、例えばツイストペアケーブルなどを用いるとよい。

伝送路としてはできるだけ少ない本数の信号線とするとよく、例えば数本の信号線（例えば基板上のプリント配線）などを用いるとよい。前記カメラと前記別のカメラを含む複数のカメラと第１映像信号変換回路の間はプリント配線またはフレキシブルケーブルの少なくともいずれか一方を介して接続するとよい。第２映像信号変換回路とカメラ映像記録回路の間はプリント配線またはフレキシブルケーブルの少なくともいずれか一方を介して接続するとよい。

（７）前記信号分配手段から前記カメラおよび前記別のカメラまでの信号配線の長さを略同一とするとよい。

このようにすれば、前記カメラからの映像信号と前記別のカメラからの映像信号とが、同期が取れた信号となる可能性を高めることができる。

（８）前記電子部品は、前記カメラ映像記録回路とは別に設けられた、所定の画像認識処理を行う画像認識回路を含み、前記伝送する信号は、映像信号を含み前記画像認識回路は、分配された前記映像信号に基づいて行った前記画像認識処理の結果に関する情報を、前記カメラ映像記録回路へ出力し、前記カメラ映像記録回路は、前記結果に関する情報に基づいて、前記カメラで撮像された映像を圧縮して前記記憶手段に記憶させる構成とするとよい。

このようにすれば、カメラ映像の圧縮と記憶手段への記憶を確実に行うことができるとともに、同一のカメラ映像の画像認識処理の結果に基づいた記録を行うこともできる。

カメラ映像記録回路は比較的安価であるが、映像の圧縮と記憶用に特化して設計されているため、画像認識等の機能を追加するのが困難（例えば、情報開示が少ない、残りリソースが少ないなど）という問題がある。例えば、ドライブレコーダー用ＳｏＣは安価だがドライブレコーダー用に設計されているため画像認識等の機能を追加するのが困難（例えば、情報開示が少ない、残りリソースが少ないなど）という問題がある。

一方で、画像認識用に用いられる画像認識回路は、映像の圧縮、記録のソフトとして信頼性が高いものがないという問題がある。画像認識回路は、例えばＯＳＳ（Ｏｐｅｎ Ｓｏｕｒｃｅ Ｓｏｆｔｗａｒｅ）等をコンパイルして利用可能な汎用のＳｏＣ（画像認識用のＳｏＣ）とするとよい。特に画像認識のアクセラレータ回路を備えたＳｏＣや、ディープラーニングのアクセラレータ回路を備えたＳｏＣ等とするとよい。なお、例えば、一般的なＳｏＣや、特にＦＰＧＡである画像認識回路に、Ｈ．２６４など映像のエンコーダーを載せるとコストがかかる、という問題もある。また仮に一般的なＳｏＣに映像のエンコーダーが載っていたとしても、特に、ドライブレコーダーとして採用しようとすると、ドライブレコーダー用のソフトウェアとして信頼性が高いものに乏しく、かといって自社でイチから作るには膨大なコストがかかる課題がある。

例えば、カメラ映像記録回路と画像認識回路に、ＭＩＰＩ ＣＳＩ－２分岐器（例えば分岐チップ）を使って、同じカメラ映像信号を分配して入力する。カメラ映像記録回路と画像認識回路とは通信線で接続し、画像認識回路では対象物の状態を画像認識し、認識の結果、記録が必要な状況となった場合には、トリガー信号をこの通信線を介してカメラ映像記録回路へ渡す。カメラ映像記録回路はトリガー信号を画像認識回路から受け取った場合、記憶手段に自己が受けている映像信号をイベント記録するとよい。

通信線はパラレル通信線あるいはシリアル通信線としてトリガーのデータを伝送するようにしてもよい。例えば認識した物体の種別の情報をこのデータとして伝送するようにしてもよい。あるいは、単純なＧＰＩＯ（Ｇｅｎｅｒａｌ－ｐｕｒｐｏｓｅ ｉｎｐｕｔ/ｏｕｔｐｕｔ）間の通信線としてもよい。例えばドライブレコーダー用のＳｏＣのトリガー入力ポートに画像認識用のＳｏＣのＧＰＩＯ出力ポートを接続し、画像認識用のＳｏＣでの画像認識の結果、記録が必要な状況となった場合には、画像認識用のＳｏＣのＧＰＩＯ出力ポートの信号を変化させ、ドライブレコーダー用のＳｏＣはドライブレコーダー用のＳｏＣのトリガー入力ポートの信号の変化があった場合、トリガー発生として、その前後所定秒数の映像を記録手段に記録するとよい。また、さらにカメラ映像記録回路に接続されたセンサ類からの信号を、画像認識回路へ伝送するようにしてもよい。例えば、カメラ映像記録回路がドライブレコーダー用のＳｏＣであり画像認識回路が画像認識用のＳｏＣとすると、加速度センサ、スイッチ、ＧＰＳモジュールはドライブレコーダー用のＳｏＣに接続され、加速度センサ、スイッチ、ＧＰＳモジュールからドライブレコーダー用のＳｏＣが受け取った情報をリアルタイムに画像認識用のＳｏＣへ出力する。画像認識用のＳｏＣはこれらの情報をドライブレコーダー用のＳｏＣからリアルタイムに受け取り、画像認識に利用して、その結果を、ドライブレコーダー用のＳｏＣへ出力するとよい。こうした両ＳｏＣの機能はそれぞれ、各ＳｏＣに記憶されたこうした機能を実現するためのプログラムを実行することで実現するとよい。

例えば４台のカメラの信号のそれぞれは、シリアライザーによってシリアル化され、デシリアライザーハブに入力される。デシリアライザーハブは第１ポートと第２ポートにそれぞれ同一の４つカメラからの信号をインターリーブしたシリアル信号を出力する。例えば第１ポートにはカメラ映像記録回路、第２ポートには画像認識回路が接続するとよい。

例えば、画像認識回路では、例えば、進入禁止標識を認識したにもかかわらずその標識より先まで侵入が検知された場合に、進入禁止トリガーをカメラ映像記録回路へ出力する。カメラ映像記録回路は、進入禁止トリガーを画像認識回路から受信すると、その前後１５秒間の映像を記憶手段に進入禁止トリガー映像としてエンコードして記録する。

また、例えば、画像認識回路は例えば人がフォークリフトの周辺に侵入したことが検知された場合に、周囲人認識トリガーをカメラ映像記録回路へ出力する。例えば、カメラ映像記録回路は、周囲人認識トリガーを画像認識回路から受信すると、その前後３０秒間の映像を記憶手段に周囲人認識トリガー映像としてエンコードして記録する。

例えばインターリーブされた４台のカメラの信号を、画像認識回路とカメラ映像記録回路のそれぞれで４台のカメラの映像に分離する処理を行う。画像認識回路は、４台のカメラの映像のどれか一つからトリガーを出力するかどうかを判定する処理を行ってもよいし、いずれかの映像でトリガーが必要な状態が認識された場合にトリガーを出力するようにしてもよい。あるいは、総合的にトリガーをかけるかどうかを判定する処理を行ってもよい。これらいずれを採用するかを設定可能とするとよい。

特に同期信号をデシリアライザーハブとカメラ映像記録回路と画像認識回路に与えて同期を取るとよい。同期信号としてはピクセルクロックや垂直同期信号とするとよい。デシリアライザーハブは４つのシリアライザーへクロックを同期して出力するとよい。または、デシリアライザーハブでクロックを生成し、そのクロックをカメラ映像記録回路と画像認識回路に与えて同期を取るとよい。画像認識回路はＳｏＣではなくＦＰＧＡとしてもよいし、その他各種の計算機としてもよい。

上記の例ではデシリアライザーハブ内にＭＩＰＩ ＣＳＩ－２分岐機能があるものの例で記載しているが、分岐器は外付けのものとしてもよい。

前記カメラ（およびまたは前記別のカメラ）の設定を行う機能（例えば、ＩＳＰ（イメージシグナルプロセッサ）の機能のうちカメラ制御する部分を含む部分など）は、例えば、カメラ映像記録回路側のものを用いる構成（パターン１）、画像認識回路側のものを用いる構成（パターン２）、または両者の側ものを切り替えて利用する構成（パターン３）のいずれかとするとよい。また、それぞれＩＳＰ内蔵のＳｏＣを利用する構成と外付けのＩＳＰを利用する構成のいずれかとするとよい。外付けのＩＳＰの設置位置としてカメラ映像記録回路側かのいずれかとするとよい。ただし、画像認識に必要な絵作りと、圧縮して記録手段に記録し再生等可能とする絵作りとは、異なるため、シャッタースピード、フレームレート、露光時間など、カメラをどのような状態に制御すればよいかが問題となる。この点、特に（９）のようにするとよい。

（９）前記カメラ映像記録回路が前記カメラの設定を行うとよい。

このようにすれば、設定の競合を防止できるとともに、カメラ映像の記録と当該カメラ映像に基づく画像認識とを比較的うまく両立できる。例えば、上述した（パターン１）を採る構成とすると優れた効果を発揮することを発明者らは見出した。画像認識に用いる画像は記録に必要な画像の品質の要求に対して低いケースが多い。特にディープラーニングによって画像を認識する機能を備えるとよく、このような構成では、画素数、フレームレート等の要求は一般的に低くてすむ。カメラ映像記録回路側としては、カメラ映像記録回路内とすると特によい。

ただし、ＩＳＰの機能のうちフォーカスと露光に関しては、画像認識回路側で画像処理に必要な要求に合わせてカメラを設定したほうがよい場合がある。そこで、あらかじめ画像認識回路側で必要な、露光に関する設定、フォーカスに関する設定を加味してカメラ映像記録回路側のカメラの設定の内容を設定しておくシステムとするとよい。例えばあらかじめ画像認識回路側で必要な、露光に関する設定、フォーカスに関する設定を加味して、例えばカメラ映像があまりにひどくならない範囲で調整して、カメラ映像記録回路側のＩＳＰ（例えば、カメラ映像記録回路内のＩＳＰ）の設定をしておくとよい。

（１０）前記カメラ映像記録回路と前記画像認識回路との間で前記カメラの設定を協調して調整するとよい。

このようにすれば、より、カメラ映像の圧縮および記録と、画像認識処理の精度の向上とを両立しやすくなる。

画像認識回路とカメラ映像記録回路とは通信し、カメラの制御がどのような状態にあるかを相互に把握する機能を備えるとよい。

例えば、カメラの設定をあらかじめ設定するのではなく、または、あらかじめ設定するとともに、画像認識回路側で露出やフォーカスの調整依頼信号を生成してカメラ映像記録回路に出力し、カメラ映像記録回路内ではこれを受けた場合に、カメラ映像記録回路側の設定機能によって設定を行うシステムとするとよい。例えば、カメラの設定をあらかじめ設定するのではなく、または、あらかじめ設定するとともに、画像認識回路側で露出やフォーカスの調整依頼信号をカメラ映像記録回路に出力し、カメラ映像記録回路はこれを受けた場合にカメラ映像記録回路側のＩＳＰの設定をこれに応じて調整するようにするとよい。なお、カメラ映像記録回路側で設定するカメラの設定に関する情報は画像認識回路へ送信して、画像認識回路ではこれを受信してこれを画像認識処理の処理の中で利用する構成とすると特によい。

例えば、画像認識回路で標識の認識を行う場合、画像中の路肩に相当する領域を露出算出の優先領域として計算するとよい、このとき基本的にはカメラの制御はカメラ映像記録回路側から行うが、あらかじめ、ややこの領域の露出優先度を高めて設定しておくとともに、画像認識回路で標識領域の露出がアンダーになっている場合には画像認識回路からカメラ映像記録回路に対して露出補正信号を出力し、カメラ映像記録回路がこの信号を受けた場合にはカメラの露出を高める信号をカメラ側に出力する等するとよい。

このようにカメラ自体の制御主体はあくまでカメラ映像記録回路側とし、画像認識回路側では直接的にカメラの制御を行わないように構成するとよい。また画像認識回路側からはカメラ映像記録回路側へ調整用信号を出力し、この調整用信号を受けた画像認識回路側が間接的にカメラを制御する構成とするとよい。例えば、カメラ自体の制御主体はあくまでカメラ映像記録回路とし、画像認識回路は直接的にカメラの制御を行わないように構成するとよい。また間接的に制御する構成とするとよい。

なおフォーカスに関する設定はカメラをパンフォーカスとして不要とするとよい

なお、別の例として前述の（パターン３）として、例えば時分割でカメラの制御主体を切り替えるようにしてもよい。特に、映像の記録フレームレートは、映像の記録・再生に十分なフレームレートとする一方（例えば、人間の視覚でカクつかないレベルのフレームレート（例えば２４から３０ｆｐｓ程度））とする一方、カメラのフレームレートはそれよりも高いフレームレート（例えば１２０ｆｐｓ）として、カメラのだすフレームに順に「１」，「２」，「３」，「４」，「１」，「２」，「３」，「４」・・・と番号を付けたとき、「１」についてはカメラ映像記録回路側、「３」については画像認識回路側のものとなるようにするとよい。例えば「２」，「４」、は切り替えする時間としてもよい。

切り替えは、例えばカメラ映像記録回路側のＩＳＰと、画像認識回路側のＩＳＰとの双方を物理的に切り替えるようにしてもよいが、あくまでＩＳＰはカメラ映像記録回路側のＩＳＰの設定を時分割で切り替えるようにするとよい。複数のカメラはすべてカメラ映像記録回路側が制御するようにし、画像認識回路側は複数のカメラのいずれも直接的には制御しないようにするとよい。間接的に制御するようにするとよい。

画像認識回路が間接的に制御する対象のカメラは、複数のカメラのうち一部のカメラとするとよい。この一部のカメラは認識に必要な要求と画像の記録・再生（人間が映像を見るの）に必要な要求との乖離が大きい一部のカメラとするとよい。

カメラは１台でもよい。例えばＭＩＰＩ ＣＳＩ－２スプリッターを使って、カメラ信号を２つに分岐してもよい。

（１１）前記カメラ映像記録回路に入力する映像信号よりも情報量を削減した信号を生成する認識用映像信号生成手段を備え、前記画像認識回路は、前記情報量を削減した映像信号に基づいて前記画像認識処理を行う構成とするとよい。

このようにすれば、画像認識回路で扱う情報量をあらかじめ削減でき認識処理をより低コストで高速に行うことができるとともに、優れた画質で映像を圧縮して記録手段に記録させることができる。

例えばカメラからの信号は分岐せず、カメラ映像記録回路に入れ、カメラ映像記録回路は、カメラからの映像信号を間引くなどして情報量を削減してＵＳＢポートなど他のポートから画像認識回路へ出力する構成とするとよい。画像の間引きは、例えば、画素を間引く、フレームを間引くなどの処理とするとよい。一般に画像認識において特にディープラーニングの場合には、認識に必要な画像の情報量は、人間が映像を確認するのに比べ格段に小さくてよい。

この例では、間引きはカメラ映像記録回路で行うこととしたが、カメラ映像記録回路の負荷が高くなる可能性や、リソースが不足する可能性がある。またそもそもカメラ映像記録回路には手を入れられない可能性がある。そこで、カメラからの映像信号を分岐し、一方の分岐した映像信号はそのまま映像記録回路に入れる一方、画像認識回路には間引いた映像信号を入力するようにするとよい。例えばこの機能は、ＦＰＧＡを用いて構成するとよい。あるいは、ＦＰＧＡに代えて、単体のＩＳＰチップを用いて、ＩＳＰチップの出力ポート切り替え機能を用いて、フレームごとに出力先を切り替える構成としてもよい。

（１２）前記画像認識回路は、前記信号分配手段から分配された前記映像信号に基づく情報を第２記録手段に記録するとよい。

このようにすれば、第２記録手段に信号分配手段から分配された前記映像信号に基づく情報が記録される。

第２記録手段は第１記録手段とは別の記録手段とするとよい。特に第２記録手段とは別の着脱可能な記録媒体とするとよい。前記分配手段から分配された前記映像信号に基づく情報としては、分配されて画像認識回路に入力された映像信号を加工した情報とするとよい。例えば認識した物体を囲むとともにその属性を文字情報として重ね合わせた映像情報を記録するとよい。また、このような映像情報とともに、あるいは、このような映像情報に替えて、例えばカメラ映像記録回路に送ったトリガー信号をその時刻とともに記録するようにしてもよい。例えば認識した物体の座標と種別に関する情報をその時刻と対応づけて記録するようにしてもよい。

上述した（１）から（１２）に示した発明は、任意に組み合わせることができる。例えば、（１）に示した発明の全てまたは一部の構成に、（２）以降の少なくとも１つの発明の少なくとも一部の構成を加える構成としてもよい。特に、（１）に示した発明に、（２）以降の少なくとも１つの発明の少なくとも一部の構成を加えた発明とするとよい。なお、特に（２）の構成と（８）の構成を双方ともに備える構成とするとよい。また、（１）から（１２）に示した発明から任意の構成を抽出し、抽出された構成を組み合わせてもよい。本願の出願人は、これらの構成を含む発明について権利を取得する意思を有する。また「～の場合」「～のとき」という記載があったとしても、その場合やそのときに限られる構成として記載はしているものではない。これらはよりよい構成の例を示しているものであって、これらの場合やときでない構成についても権利取得する意思を有する。また順番を伴った記載になっている箇所もこの順番に限らない。一部の箇所を削除したり、順番を入れ替えたりした構成についても開示しているものであり、権利取得する意思を有する。

本発明によれば、従来よりも優れたシステム等を提供できる。

本願の発明の効果はこれに限定されず、本明細書および図面等に開示される構成の部分から奏する効果についても開示されており、当該効果を奏する構成についても分割出願・補正等により権利取得する意思を有する。例えば本明細書において「～できる」と記載した箇所などは奏する効果を明示する記載であり、また「～できる」と記載がなくとも効果を示す部分が存在する。またこのような記載がなくとも当該構成よって把握される効果が存在する。

一実施形態に係るシステムの構成を示すブロック図である。 システムの構成の変形例を示すブロック図である。 システムの構成の変形例を示すブロック図である。 カメラと処理装置との接続例を示す図である。 カメラと処理装置との接続例を示す図である。 カメラと処理装置との接続例を示す図である。 カメラと処理装置との接続例を示す図である。 処理装置と記録装置との接続例を示す図である。

以下、実施形態について、図面を参照しながら詳細に説明する。以下に示す実施形態は本開示の実施形態の一例であって、本開示はこれらの実施形態に限定されるものではない。なお、本実施形態で参照する図面において、同一部分又は同様な機能を有する部分には同一の符号又は類似の符号（数字の後にＡ、Ｂなどを付しただけの符号）を付し、その繰り返しの説明は省略する場合がある。また、以下の説明で参照する各図において、各部材、各領域等を認識可能な大きさとするために、実際とは縮尺を異ならせている場合がある。

図１は、一実施形態に係るシステム１の構成を示すブロック図である。システム１は、車両に搭載される車載機器とするとよく、特にドライブレコーダーとして機能する車載機器とするとよい。車両は、フォークリフトとするとよいが、フォークリフト以外の作業車、または作業者以外の車両（例えば、私用または公用の乗用車、バスまたは列車）としてもよい。

以下では、まず、システム１における映像信号の伝送および映像信号を用いた処理について説明し、その後に、同期信号の伝送および同期信号を用いた処理について説明する。

システム１は、カメラ１０－１～１０－４と、第１映像信号変換回路２０－１～２０－４と、第２映像信号変換回路３０と、カメラ映像記録回路４０と、画像認識回路５０と、記憶媒体６０と、情報入力部７０と、表示部８０とを含む。以下、カメラ１０－１～１０－４の各々を特に区別する必要のない場合は、これらを「カメラ１０」と総称し、第１映像信号変換回路２０－１～２０－４の各々を特に区別する必要のない場合は、これらを「第１映像信号変換回路２０」と総称する場合がある。カメラ１０および第１映像信号変換回路２０は、本実施形態ではそれぞれ４台とし、４つの映像チャネルの映像信号を取り扱う。ただし、カメラ１０および第１映像信号変換回路２０は、それぞれ３台以下または５台以上とし、３つ以下または５つ以上の映像チャネルの映像信号を取り扱ってもよい。なお、上述したシステム１の各回路は、例えば、物理的に分離された回路（例えばチップ）によって実現されるが、２以上の回路が同一の基板上に作製された回路（例えば同一のチップ）によって実現されてもよい。

カメラ１０は、撮像し、撮像した映像を示す映像信号を生成する電子部品である。カメラ１０は、各種のカメラとすることができるが、ＣＣＤカメラとすることができ、特にＣＭＯＳカメラとするとよい。カメラ１０は、静止画を撮像するためのカメラとすることもできるが、特に動画を撮像するためのカメラとするとよい。カメラ１０は、赤外線カメラのような特殊なカメラとすることができるが、可視光（例えば、４００～７００ｎｍの波長領域の光）を撮像するカメラとするとよく、特に可視光のカメラとするとよい。カメラ１０は、モノクロの映像が得られるカメラとしてもよいが、カラーの映像が得られるカメラとするとよい。カメラ１０は、例えば、赤（Ｒ）、緑（Ｇ）、青（Ｂ）のカラーフィルタを平面に配置したカメラとするとよい。カメラの解像度はＶＧＡ以上の解像度とするとよい。カメラ１０は、例えば撮像素子を備える部分を指してもよいが、撮像素子そのものを指してもよい。特にカメラ１０は車両に設置されたカメラとするとよい。特にカメラ１０は車両のメーカーの出荷後に後付されるカメラとするとよい。

本実施形態では、カメラ１０が生成出力する映像信号は、複数の画素の各画素の階調値を含むデジタル形式のデータである。映像信号は、赤（Ｒ）、緑（Ｇ）、青（Ｂ）の各色成分について８ビット（２５６階調）のデータを含むようにするとよいが、色成分および階調数はこれに限られない。

カメラ１０－１は、第１映像信号変換回路２０－１と通信可能に接続する。カメラ１０－２は、第１映像信号変換回路２０－２と通信可能に接続する。カメラ１０－３は、第１映像信号変換回路２０－３と通信可能に接続する。カメラ１０－４は、第１映像信号変換回路２０－４と通信可能に接続する。カメラ１０－１～１０－４の各々と、第１映像信号変換回路２０－１～２０－１の各々とは、有線または無線の伝送路のいずれで接続されてもよいが、有線の伝送路を用いて接続されるとよい。図１の例では、カメラ１０－１は、映像信号Ａ１，Ａ２，Ａ３，Ａ４を時系列順に出力する。カメラ１０－２は、映像信号Ｂ１，Ｂ２，Ｂ３を時系列順に出力する。カメラ１０－３は、映像信号Ｃ１、Ｃ２，Ｃ３，Ｃ４を時系列順に出力する。カメラ１０－４は、映像信号Ｄ１，Ｄ２を時系列順に出力する。カメラ１０－１～１０－４においては、「Ａ」～「Ｄ」の後ろに付される数字が小さい映像信号から順に出力される。また、この数字が同じである映像信号は、同時にカメラ１０－１～１０－４出力されるものとする。例えば、映像信号Ａ１、Ｂ１，Ｃ１，Ｄ１は同時に出力される。映像信号Ａ１～Ａ４，Ｂ１～Ｂ３，Ｃ１～Ｃ４，Ｄ１，Ｄ２のそれぞれは、所定単位の映像信号であるが、例えば１コマ（１フレームともいう。）の映像を示す映像信号とするとよい。

カメラ１０－１～１０－４は、それぞれ撮像する領域が異なるようにするとよい。カメラ１０が撮像する領域は、例えば、車内および車外の一方または両方を含む。車外の領域は、車両の前方（正面）、右斜め前方、右方（真横）、右斜め後方、後方（真後ろ）、左斜め後方、左方（真横）、および左斜め前方のいずれかとするとよいが、他の領域でもよい。カメラ１０－１～１０－４は、例えば、車両のフロントガラスに取り付けられるカメラ（第１カメラ）と、車両の後方を撮像するように設置されたカメラ（第２カメラ）とが少なくとも含まれるようにするとよい。

第１映像信号変換回路２０は、カメラ１０から映像信号の入力を受け付けて、シリアル形式の映像信号に変換する第１映像信号変換手段を備える。第１映像信号変換回路２０はシリアライザー、特にシリアライザーチップとするとよい。シリアル形式の映像信号は、カメラ１０から入力された映像信号を、シリアルデータ列に変換した信号である。第１映像信号変換回路２０－１はカメラ１０－１からの映像信号を変換し、第１映像信号変換回路２０－２はカメラ１０－２からの映像信号を変換し、第１映像信号変換回路２０－３はカメラ１０－３からの映像信号を変換し、第１映像信号変換回路２０－４はカメラ１０－４からの映像信号を変換する。第１映像信号変換回路２０－１～２０－４は、インターリーブされた変換後の映像信号を、第２映像信号変換回路３０へ出力する。第１映像信号変換回路２０－１～２０－４の各々と、第２映像信号変換回路３０とは、有線または無線のいずれで接続されてもよいが、１本の有線のケーブルを用いて接続されるようにするとよい。第１映像信号変換回路２０－１～２０－４は、このようなケーブルを介した伝送用の映像信号に変換する。このケーブルは、比較的長距離のケーブルとするとよい。比較的長距離としては、カメラ１０またはこれとは別のカメラ１０の少なくとも一方を備えるカメラユニット内の配線に必要な長さよりも長い距離とするとよく、特に１メートル以上とするとよい。

第１映像信号変換回路２０と第２映像信号変換回路３０との間の信号の伝送可能距離は、カメラ１０が車載カメラである場合、特に数ｍの伝送が可能なものを用いるとよい。

第２映像信号変換回路３０は、第１映像信号変換回路２０－１～２０－４の各々からケーブルを介して伝送されたカメラ１０－１～１０－４の映像信号を、カメラ映像記録回路４０に入力可能な映像信号に変換する第２映像信号変換手段を備える。第２映像信号変換回路３０は、デシリアライザー、特にデシリアライザーチップとするとよい。また、第２映像信号変換回路３０は、カメラ１０－１～１０－４とカメラ映像記録回路４０との間で伝送される映像信号を、画像認識回路５０に分配する信号分配手段としても機能する。例えば第２映像信号変換回路３０は、ＭＩＰＩ ＣＳＩ－２分岐機能を有してもよい。このようにすれば、カメラ１０で撮像した映像を圧縮して記憶媒体６０に記憶させることができるとともに、画像認識回路５０において、分配されたカメラ１０とカメラ映像記録回路４０との間の信号に基づいて画像認識機能を実現することができる。

第２映像信号変換回路３０は、第１ポート３１および第２ポート３２を有する。第１ポート３１にはカメラ映像記録回路４０が、第２ポート３２には画像認識回路５０がそれぞれ通信可能に接続されている。このような第２映像信号変換回路３０は、デシリアライザーハブとして特定できるものでもある。

第２映像信号変換回路３０と、カメラ映像記録回路４０および画像認識回路５０の各々とは、有線または無線のいずれで接続されてもよいが、有線のケーブルを用いて接続されるとよい。第２映像信号変換回路３０は、インターリーブされたカメラ１０－１～１０－４からの映像信号に基づいて、映像信号Ｓ１をカメラ映像記録回路４０に、映像信号Ｓ２を画像認識回路５０に出力する。第２映像信号変換回路３０は、第１ポート３１および第２ポート３２のそれぞれから同じ画像信号であるＳ１，Ｓ２を、同じタイミングに出力することにより、カメラ１０－１～１０－４からの映像信号を分配する。第２映像信号変換回路３０は、例えば、所定のプロトコルの映像信号を入力し、入力したプロトコルと同一のプロトコルで複数の出力先に分配して出力する。例えば、映像信号としてＭＩＰＩ ＣＳＩ－２信号を出力するカメラ１０であれば、第２映像信号変換回路３０はＭＩＰＩ ＣＳＩ－２信号スプリッターチップとするとよい。第２映像信号変換回路３０は、例えば所定のプロトコルの映像信号を入力し、入力したプロトコルとは異なるプロトコルであって複数の出力先について同一のプロトコルの信号を出力するとよい。例えば、映像信号としてＦＰＤ－ＬＩＮＫ III信号を出力するカメラ１０であれば、第２映像信号変換回路３０はＦＰＤ－ＬＩＮＫ III信号を入力して例えば複数のＭＩＰＩ ＣＳＩ－２信号として出力するポートを備えたチップ（例えば、１ポート入力２ポート出力のデュアルポート出力デシリアライザーハブなど）とするとよい。特にＭＩＰＩ ＣＳＩ－２信号として出力するポートはあるポートのレプリカを他のポートに出力する機能を備えたものとするとよい。特にデシリアライザーハブチップとするとよい。

システム１において、１本のケーブルはできるだけ少ない本数の信号線とするとよく、例えばツイストペアケーブルなどを用いるとよい。伝送路としてはできるだけ少ない本数の信号線とするとよく、例えば数本の信号線（例えば、基板上のプリント配線）などを用いるとよい。カメラ１０とこれとは別のカメラ１０を含む複数のカメラ１０と第１映像信号変換回路２０との間は、プリント配線またはフレキシブルケーブルの少なくともいずれか一方を介して接続するとよい。第２映像信号変換回路３０とカメラ映像記録回路４０との間はプリント配線またはフレキシブルケーブルの少なくともいずれか一方を介して接続するとよい。

第２映像信号変換回路３０は、カメラ１０－１，１０－２，１０－３，１０－４の各カメラの映像信号を所定の順番で選択し、選択した映像信号を、第１ポート３１および第２ポート３２の各々から出力する。ここでは、図１の例では、第２映像信号変換回路３０は、カメラ１０－１，１０－２，１０－３，１０－４，１０－１，１０－２，１０－３，１０－４・・・の順で、１フレーム単位で映像信号を切り替えることにより、映像信号Ｓ１，Ｓ２を出力する。具体的には、第２映像信号変換回路３０は、第１ポート３１および第２ポート３２のそれぞれから、映像信号Ａ１，Ｂ１，Ｃ１，Ｄ１，Ａ２，Ｂ２，Ｃ２，Ｄ２，Ａ３，Ｂ３，Ｃ３，Ａ４，Ｃ４の順で、映像信号Ｓ１，Ｓ２を出力する。なお、第３０が、映像信号を分配する機能（ＭＩＰＩ ＣＳＩ－２分岐機能）を有しなくてもよく、この場合、外付けの分配器が用いられてもよい。

カメラ映像記録回路４０は、第１ポート３１からの映像信号Ｓ１を圧縮して記憶媒体６０に記憶させる機能を有する。カメラ映像記録回路４０に備える映像の圧縮部（図示略）は、各種のアルゴリズムのものを用いることができるが、特に規格化されたアルゴリズムのエンコーダーを用いるとよく、特にＨ．２６４エンコーダーまたはＨ．２６５エンコーダーの少なくともいずれか一方を備えるものとするとよい。特に、カメラ映像記録回路４０に備える映像のエンコーダーは、ソフトウェア処理で行うものではなく、ハードウェアで構成されたものとするとよい。カメラ映像記録回路４０は、ＦＰＧＡとするとよいが、特にＳｏＣとすることが望ましい。また、カメラ映像記録回路４０は、ソフトマクロではなく、ハードマクロで構成されたものが望ましい。

カメラ映像記録回路４０は、カメラ映像記録の専用チップとして販売されているものとすると特によい。カメラ映像記録回路４０は、例えば、カメラ映像記録用のＡＳＳＰ、カメラ映像記録用のＳｏＣなどのカメラ映像記録用のＬＳＩとするとよく、特にカメラ映像記録回路はドライブレコーダー用ＳｏＣとするとよい。

カメラ映像記録回路４０は、画像認識回路５０からトリガー信号ＴＧが入力されると、その入力に応じた期間の映像信号を記憶媒体６０に記憶させるイベント録画を行う。この期間は、例えば、イベント発生の前後３０秒間とするとよいが、他の期間としてもよい。

画像認識回路５０は、第２映像信号変換回路３０によって分配されたカメラ１０とカメラ映像記録回路４０との間を伝送する信号を用いて所定の機能を実現する電子部品として機能する。画像認識回路５０は、第２ポート３２からの映像信号Ｓ２が示す映像を認識し、イベント録画の契機となる事象が発生したかどうかを判定する。画像認識回路５０は、当該事象が発生したと判定した場合は、イベント録画の開始の契機となるトリガー信号ＴＧを、カメラ映像記録回路４０に出力する。画像認識回路５０は、例えば、映像における対象物の状態を認識し、認識の結果、イベント録画が必要な状況となった場合には、トリガー信号ＴＧを、カメラ映像記録回路４０へ出力する。このように、画像認識回路５０は、４台のカメラ１０－１～１０－４の映像から総合的に、トリガー信号ＴＧを生成するかどうかを判定するとよい。

このように、画像認識回路５０は、映像信号Ｓ２に基づいて行った画像認識処理の結果に関する情報を、カメラ映像記録回路４０へ出力する。画像認識回路５０は、映像における認識した対象物の位置を示す情報をカメラ映像記録回路４０へ出力してもよい。カメラ映像記録回路４０は、画像認識処理の結果に関する情報に基づいて、映像信号Ｓ１が示す映像を圧縮して記憶媒体６０に記憶させる。このようにすれば、カメラ１０の映像の圧縮と記憶媒体６０への記憶を確実に行うことができるとともに、同一のカメラ１０の映像の画像認識処理の結果に基づいた記録を行うこともできる。

ここで、イベント録画の一例を説明する。画像認識回路５０は、例えば、映像に基づいて進入禁止標識を認識したにもかかわらず、その標識より先まで侵入が検知された場合に、進入禁止トリガーを示すトリガー信号ＴＧ１を、カメラ映像記録回路４０へ出力する。カメラ映像記録回路４０は、トリガー信号ＴＧ１の入力を受けると、その前後１５秒間の映像を示す映像信号を、記憶媒体６０に進入禁止トリガー映像としてエンコードして記録する。画像認識回路５０は、例えば、人がフォークリフトの周辺に侵入したことを認識した場合、周囲人認識トリガーを示すトリガー信号ＴＧ２を、カメラ映像記録回路４０へ出力する。カメラ映像記録回路４０は、トリガー信号ＴＧ２の入力を受けると、その前後３０秒間の映像を示す映像信号を、記憶媒体６０に周囲人認識トリガー映像としてエンコードして記録する。ここにおいて、トリガー信号ＴＧ１またはＴＧ２の出力の契機となった映像チャネルの映像のみが記録されてもよいし、すべての映像チャネルの映像が記録されてもよい。なお、トリガー信号の出力の契機となる事象や、イベント録画の対象となる期間については、様々な変形が考えられる。例えば、イベント録画は、情報入力部７０を介して入力された情報が、所定の条件を満たしたことを契機に行われてもよい。

例えば、カメラ映像記録回路４０と画像認識回路５０に、ＭＩＰＩ ＣＳＩ－２分岐器（例えば分岐チップ）を使って、同じカメラ映像信号を分配して入力する。カメラ映像記録回路４０と画像認識回路５０とは通信線で接続し、画像認識回路５０では対象物の状態を画像認識し、認識の結果、記録が必要な状況となった場合には、トリガー信号をこの通信線を介してカメラ映像記録回路へ渡す。カメラ映像記録回路はトリガー信号を画像認識回路から受け取った場合、記憶手段に自己が受けている映像信号をイベント記録するとよい。

通信線はパラレル通信線あるいはシリアル通信線としてトリガー信号ＴＧやその他のデータを伝送するようにしてもよい。例えば認識した物体の種別の情報をこのデータとして伝送するようにしてもよい。あるいは、単純なＧＰＩＯ間の通信線としてもよい。例えばドライブレコーダー用のＳｏＣのトリガー入力ポートに画像認識用のＳｏＣのＧＰＩＯ出力ポートを接続し、画像認識用のＳｏＣでの画像認識の結果、記録が必要な状況となった場合には、画像認識用のＳｏＣのＧＰＩＯ出力ポートの信号を変化させ、ドライブレコーダー用のＳｏＣはドライブレコーダー用のＳｏＣのトリガー入力ポートの信号の変化があった場合、トリガー発生として、その前後所定秒数の映像を記録手段に記録するとよい。また、さらにカメラ映像記録回路４０に接続されたセンサ類からの信号を、画像認識回路５０へ伝送するようにしてもよい。例えば、カメラ映像記録回路４０がドライブレコーダー用のＳｏＣであり画像認識回路５０が画像認識用のＳｏＣとすると、加速度センサ、スイッチ、ＧＰＳモジュールはドライブレコーダー用のＳｏＣに接続され、加速度センサ、スイッチ、ＧＰＳモジュールからドライブレコーダー用のＳｏＣが受け取った情報をリアルタイムに画像認識用のＳｏＣへ出力する。画像認識用のＳｏＣはこれらの情報をドライブレコーダー用のＳｏＣからリアルタイムに受け取り、画像認識に利用して、その結果を、ドライブレコーダー用のＳｏＣへ出力するとよい。こうした両ＳｏＣの機能はそれぞれ、各ＳｏＣに記憶されたこうした機能を実現するためのプログラムを実行することで実現するとよい。

画像認識回路５０は、第２映像信号変換回路３０から分配された映像信号に基づく情報を第２記録手段に記録するとよい。このようにすれば、第２２記録手段に第２映像信号変換回路３０から分配された映像信号に基づく報が記録される。第２記録手段は第１記録手段とは別の記録手段とするとよい。特に第１記録手段とは別の着脱可能な記録媒体とするとよい。第１記録手段が記憶媒体６０とすると、第２記録手段は、記憶媒体６０とは異なる記録手段である。分配された前記映像信号に基づく情報としては、分配されて画像認識回路５０に入力された映像信号を加工した情報とするとよい。例えば認識した物体を囲むとともにその属性を文字情報として重ね合わせた映像情報を記録するとよい。また、このような映像情報とともに、あるいは、このような映像情報に替えて、例えばカメラ映像記録回路４０に出力したトリガー信号ＴＧをその時刻とともに記録するようにしてもよい。例えば認識した物体の座標と種別に関する情報をその時刻と対応づけて記録するようにしてもよい。

カメラ映像記録回路４０は、イベント録画を行う機能に加え、常時録画を行う機能を有してもよい。この場合、カメラ映像記録回路４０は、記憶媒体６０に確保した所定の記憶領域に映像の記録をし、記憶領域が一杯になった場合には、古い映像から順に上書き録画するようにして映像を記録する。常時記録機能によってイベント録画に係る映像が消失しないように、これらの記憶領域を分けるか、または上書き禁止フラグを用いて上書きを禁止してもよい。

記憶媒体６０は、カメラ映像記録回路４０によって記録された映像を記憶する記憶手段として機能する。記憶媒体６０は、システム１の内部記憶手段または外部記憶手段のいずれでもよいが、特に着脱可能な外部記憶手段とするとよく、特にＳＤカード、ｍｉｃｒｏＳＤカード等のカード状の媒体とするとよい。記憶媒体６０に記憶された映像は、表示部８０に表示したり、外部端末を用いて表示したりすることができる。表示部８０は、例えば液晶ディスプレイまたはその他の方式の表示装置である。

情報入力部７０は、外部から情報の入力を受け付ける。情報入力部７０は、例えばシステム１の電源をオンまたはオフするためのスイッチを含む、各種のスイッチを備えるとよい。情報入力部７０は、ドライブレコーダー用のセンサを備えてもよい。情報入力部７０は、例えば、イベント録画の契機となる衝撃を検知するための加速度センサ（例えば、Ｇセンサとして機能する。）を含んでもよい。また、情報入力部７０は、現在位置を測定するためのＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）センサを備えてもよい。カメラ映像記録回路４０と画像認識回路５０との間では、情報入力部７０を介して入力された情報に応じた各種信号がやり取りされてもよい。

続いて、同期信号の伝送および同期信号を用いた処理について説明する。カメラ１０とカメラ映像記録回路４０との間を伝送する信号は、同期信号生成手段が生成した映像の同期信号を含む。システム１は、映像信号とともに分配された同期信号に基づいて、カメラ１０－１～１０－４の各々の映像信号を、カメラ映像記録回路４０へ出力する構成とするとよい。

このようにすれば、カメラ映像記録回路４０は、カメラ１０－１～１０－４との間で同期した映像信号が得られる。例えば、カメラ映像記録回路４０は、カメラ１０－１～１０－４の間で同期した映像信号を入力して、この入力した同期した複数の映像の信号に基づく映像を圧縮して記録することができる。例えば記録した複数の映像の信号を同時に再生したとき、同期した複数の映像を見ることができる。なお、映像の圧縮は複数のカメラのそれぞれで別々のファイルに行うようにしてもよいが、１つのファイルに行うようにするとよい。

システム１においては、複数のカメラ１０、第１映像信号変換回路２０－１～２０－４、カメラ映像記録回路４０、および画像認識回路５０の動作を同期させるため、同期信号は、画像認識回路５０にも分配される。このように、カメラ１０とカメラ映像記録回路４０との間を伝送する信号としては、特に、制御信号としてもよいが、特に映像信号または映像の同期信号の少なくともいずれか一方を備えるとするとよい。同期信号としてはピクセルクロック、垂直同期信号、および水平同期信号のうち少なくともいずれか１つするとよく、特に少なくともいずれか２つとするとよい。特に、ピクセルクロックと垂直同期信号とするとよい。第２映像信号変換回路３０は４つの第１映像信号変換回路２０－１～２０－４へクロックを同期して出力するとよい。同期信号の生成主体、および分配方法については、例えば、以下の（方法１）または（方法２）を採用し得る。

（方法１）１つのカメラ１０を親として同期信号を生成し、別のカメラ１０、第１映像信号変換回路２０、第２映像信号変換回路３０、カメラ映像記録回路４０、および画像認識回路５０に分配する。

（方法１）は、いずれか一のカメラ１０が、同期信号生成手段を有する。そして、信号分配手段としての当該一のカメラ１０が、この同期信号を別のカメラ１０、第１映像信号変換回路２０、第２映像信号変換回路３０、カメラ映像記録回路４０、および画像認識回路５０へ分配する。

このようにすれば、別のカメラ１０から出力される映像信号は、一のカメラ１０の中で生成された同期信号に基づく映像信号となり、これらのカメラ１０の同期を取りやすくなる。特に、この構成を採用するとともに、一のカメラ１０と別のカメラ１０とを同一の筐体に備える構成とするとよい。同期信号の引き回し距離が短いときに特に優れた効果を発揮する。カメラ１０の中としては、特に撮像素子の中で生成したものとするとよい。このようにすれば入力した同期信号に同期して撮像する外部同期可能な撮像素子を使わなくてもよく、低コストかつ簡便に構成できる。

（方法２）第１映像信号変換回路２０、第２映像信号変換回路３０、カメラ映像記録回路４０、および画像認識回路５０のいずれかが同期信号を生成し、その他の各要素に分配する。

（方法２）は、同期信号生成手段がカメラ１０の外部に備えられ、この同期信号生成手段によって生成された同期信号をカメラ１０－１～１０－４、およびその他の各要素に分配する。

（方法２）のようにすれば、別のカメラ１０から出力される映像信号と、別のカメラ１０から出力される映像信号との同期が取りやすい。特に、この構成を採用するとともに、カメラ１０と別のカメラ１０とを異なる筐体に備える構成とするとよい。同期信号の引き回し距離が比較的長いときに特に優れた効果を発揮する。

（方法２）においては、カメラ映像記録回路４０が、同期信号生成手段を有してもよい。この場合、信号分配手段としてのカメラ映像記録回路４０は、同期信号をカメラ１０－１～１０－４、およびその他の各要素に分配する。このようにすれば、映像の記録処理に合わせたタイミング等でカメラおよび別のカメラから同期した映像信号を得られる可能性を高められる。

（方法２）においては、いずれか一の第１映像信号変換回路２０内または第２映像信号変換回路３０内に同期信号生成手段が備えられてもよい。この場合、信号分配手段としての第１映像信号変換回路２０または第２映像信号変換回路３０は、同期信号をカメラ１０－１～１０－４、およびその他の各要素に分配する。このようにすれば、前記カメラと前記別のカメラとから、両カメラが同期した映像信号を、ケーブルを介してカメラ映像記録回路に入力して記録することが容易にできる。

特に、同期信号を、第２映像信号変換回路３０と、カメラ映像記録回路４０と、画像認識回路５０とに与えて同期を取るとよい。同期信号としてはピクセルクロックや垂直同期信号とするとよい。第２映像信号変換回路３０は４つの第１映像信号変換回路２０－１～２０－４へクロックを同期して出力するとよい。または、第２映像信号変換回路３０でクロックを生成し、そのクロックをカメラ映像記録回路４０と画像認識回路５０に与えて同期を取るとよい。画像認識回路５０はＳｏＣではなくＦＰＧＡとしてもよいし、その他各種の計算機としてもよい。

同期信号に基づく処理の方法は（方法１）および（方法２）のいずれかに限定されるものではなく、例えば同期信号生成手段が上記したシステム１の要素とは別に設けられてもよい。

以上の信号分配手段は、例えば単純に配線を分岐するものとしてもよいが、特に分配した複数の信号線の間を伝送する信号の同期が取れるように分配する機能を備えるものとするとよく、特に分配した複数の信号線の間を伝送する信号の同期が取れるように分配する機能を備えた回路（例えば、チップ）とするとよい。

また、カメラ１０とカメラ映像記録回路４０は同一の筐体内に備える構成としてもよいが、それぞれ別の筐体に備える構成とし、両筐体間はケーブルやコネクタ等の接続手段で接続するように構成するとよい。カメラ１０とカメラ映像記録回路４０との間は１メートル以上のケーブルを介して接続される構成とするとよい。特にカメラ１０とカメラ映像記録回路４０は、車両の中で引き回されるケーブルを介して接続されるものとするとよい。

図１で説明した構成は、図２に示すように変形されてもよい。図２では、図１で説明した構成のうち、図１とは異なる部分を中心として示してある。この例では、カメラ１０からの映像信号は分配されることなく、カメラ映像記録回路４０に入力される。カメラ映像記録回路４０は、カメラ１０－１～１０－４からの映像信号を、画像認識回路５０に供給する。カメラ映像記録回路４０は、入力した映像信号よりも情報量を削減した信号を生成する認識用映像信号生成手段を備え、映像信号を間引くなどして情報量を削減して、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ポートなどの他のポートを介して、画像認識回路５０へ出力する。映像信号の間引きは、例えば、画素を間引く、フレームを間引くなどの処理とするとよい。一般に画像認識において特にディープラーニングの場合には、認識に必要な画像の情報量は、人間が映像を確認するのに比べ格段に小さくてよいからである。

図２で説明した構成は、さらに図３に示すように変形されてもよい。図３では、図１で説明した構成のうち、図１とは異なる部分を中心として抽出して示してある。図２の例では、間引きはカメラ映像記録回路４０で行うこととしたが、処理の負荷が高くなる可能性があり、またはリソースが不足する可能性がある。そこで、図３に示すように、画像処理部９０をカメラ１０と、カメラ映像記録回路４０および画像認識回路５０との間に設けてもよい。画像処理部９０は、カメラからの映像信号を分岐し、カメラ映像記録回路４０にはそのままの映像信号に出力し、画像認識回路５０には間引いた映像信号を出力する。画像処理部９０は、例えばＦＰＧＡであるが、単体のＩＳＰチップを用いて構成されてもよい。画像処理部９０は、ＩＳＰチップの出力ポート切り替え機能を用いて、フレームごとに出力先を切り替える構成としてもよい。

システム１においては、カメラ１０は１台でもよい。例えばＭＩＰＩ ＣＳＩ－２スプリッターで例示される分岐器を使って、カメラの信号を２つに分岐してもよい。この場合、図３で説明したカメラ１０－１～１０－４をいずれか１台とし、画像処理部９０を分岐器とした構成に等しい。

システム１において、カメラ１０の映像を伝送する映像信号は、例えば、映像チャンネル単位に同期された映像をシリアルで伝送してもよく、パラレルに伝送してもよい。または、シリアルとパラレル組み合わせて伝送してもよい。特に、映像のフレーム単位に、その時の時刻やイベント情報、センサ情報などデータで重畳したり、映像に重畳したりするとよい。同期をとられた単位に、その時の時刻やイベント情報、センサ情報などデータで重畳してもよいし、映像に重畳してもよい。

また、信号分配手段からカメラ１０および別のカメラ１０までの信号配線の長さを略同一とするとよい。このようにすれば、カメラ１０からの映像信号と別のカメラ１０からの映像信号とが、同期が取れた信号となる可能性を高めることができる。

次に、図４～図７を参照して、カメラ１０－１～１０－４と処理装置１００との接続例を説明する。処理装置１００は、カメラ１０－１～１０－４が出力した映像信号に基づいて所定の処理を行う装置である。処理装置１００は、例えば、カメラ映像記録回路４０および画像認識回路５０のどちらか一方であってもよい。

図４の例では、１つのカメラユニットにカメラ１０－１～１０－４を設けておき、これらを単一の第１映像信号変換回路２０に接続する構成である。第１映像信号変換回路２０は、１本のケーブルを介して、映像信号Ｓａ１を第２映像信号変換回路３０に出力する。第１映像信号変換回路２０は、映像信号Ｓａ１と同じ映像信号Ｓａ２を、１本のケーブルを介して処理装置１００に出力する。映像信号Ｓａ２は、シリアル形式である映像信号Ｓａ１を、シリアル形式のままとした信号である。処理装置１００は、１本のケーブルを介して入力された映像信号Ｓａ２を用いて処理を実行する。

図５の例では、１つのカメラユニットに複数のカメラ１０－１～１０－４を設けておき、これらを単一の第１映像信号変換回路２０に接続する構成である。第１映像信号変換回路２０は、１本のケーブルを介して、映像信号Ｓｂ１を第２映像信号変換回路３０に出力する。映像信号Ｓｂ１は、映像信号Ｓａ１と同じ信号である。第２映像信号変換回路３０は、カメラ１０－１－１０－４のそれぞれで異なるケーブルを用いて映像信号Ｓｂ２１、Ｓｂ２２，Ｓｂ２３，Ｓｂ２４を出力する。映像信号Ｓｂ２１～Ｓｂ２４は、シリアル形式である映像信号Ｓｂ１を、パラレル形式に変換した信号である。処理装置１００は、カメラ１０ごとに異なるケーブルを介して入力された映像信号Ｓｂ２１～Ｓｂ２４を用いて処理を実行する。

図６の例では、１つのカメラユニットに複数のカメラ１０－１～１０－４を設けておき、これらをカメラごとに異なる第１映像信号変換回路２０－１～２０－４に接続する構成である。第１映像信号変換回路２０－１～２０－４は、それぞれが１本のケーブルを介して、映像信号Ｓｃ１１、Ｓｃ１２，Ｓｃ１３，Ｓｃ１４を第２映像信号変換回路３０に出力する。第２映像信号変換回路３０は、１本のケーブルを介して、映像信号Ｓｃ２を処理装置１００に出力する。処理装置１００は、ケーブルを介して入力された映像信号Ｓｃ２を用いて処理を実行する。映像信号Ｓｃ２は、パラレル形式である映像信号Ｓｃ１～Ｓｃ４を、シリアル形式に変換した信号である。図１のシステム１は、この接続例に該当する。

図７の例では、１つのカメラユニットに複数のカメラ１０－１～１０－４を設けておき、これらをカメラごとに異なる第１映像信号変換回路２０－１～２０－４に接続する構成である。図１のシステム１は、この接続例に該当する。第１映像信号変換回路２０－１～２０－４は、それぞれが１本のケーブルを介して、映像信号Ｓｄ１１、Ｓｄ１２，Ｓｄ１３，Ｓｄ１４を第２映像信号変換回路３０に出力する。第２映像信号変換回路３０は、カメラ１０－１－１０－４のそれぞれで異なるケーブルを用いて映像信号Ｓｄ２１、Ｓｄ２２，Ｓｄ２３，Ｓｄ２４を出力する。映像信号Ｓｄ２１～Ｓｄ２４は、パラレルである映像信号Ｓｄ１１～Ｓｄ１４を、パラレル形式のままとした信号である。処理装置１００は、カメラ１０ごとに異なるケーブルを介して入力された映像信号Ｓｂ２１～Ｓｂ２４を用いて処理を実行する。

図１と図６，７の構成に基づいて、カメラ１０と第１映像信号変換回路２０とを有する第１のカメラユニットと、別のカメラ１０と第２の第１映像信号変換回路２０とを有する第２のカメラユニットと、第２映像信号変換回路３０とカメラ映像記録回路４０とを有する記録ユニットとを備え、第１のカメラユニットと記録ユニットの間を第１のケーブル、第２のカメラユニットと前記記録ユニットの間を第２のケーブルで接続し、それぞれの映像信号を伝送するシステムが構成されてもよい。例えば、車両のフロントガラスに取り付けられる前記カメラ（第１カメラ）が車両の前方を撮像するように設置された第１のカメラユニットと、車両のリアガラスに取り付けられ前記別のカメラ（第２カメラ）が車両の後方を撮像するように設置された第２のカメラユニットを備え、ダッシュボード上あるいは助手席の下等に設けた記録ユニットが両カメラユニットにそれぞれ別のケーブルで接続される構成とするとよい。あるいは記録ユニットと第１のカメラユニットを１つのユニットとして構成してもよい。

また例えば、カメラ１０と第１の第１映像信号変換回路２０とを有する第１のカメラユニットと、別のカメラ１０と第２の第１映像信号変換回路２０とを有する第２のカメラユニットとを第１のケーブルで接続し、第２映像信号変換回路３０とカメラ映像記録回路４０とを有する記録ユニットと第２のカメラユニットとを第２のケーブルで接続する構成とし、それぞれの映像信号を伝送するようにしてもよい。

図１と図４，５の構成に基づいて、一つのカメラユニットにカメラ１０とこれとは別のカメラ１０を含む複数のカメラ１０と第１映像信号変換回路２０を備え、第１映像信号変換回路２０は１つのケーブルにこれら複数のカメラ１０の映像信号を流すよう変換し、当該１つのケーブルを介して第２映像信号変換回路３０とカメラ映像記録回路４０とを備えた記録ユニットに伝送して、記憶媒体６０に複数のカメラ１０の映像を記録するようにするシステムが構成されてもよい。例えば、車両のフロントガラス等に取り付けられるカメラユニットであって、車両前方を撮像するカメラ１０（第１カメラ）と車両の後方を撮像する別のカメラ１０（第２カメラ）とを備えるカメラユニットと、ダッシュボード上あるいは助手席の下等に設けた、記録ユニットをケーブルで接続するように構成してもよい。

なお、例えば、第２映像信号変換回路３０は、第１映像信号変換回路２０によって変換され、比較的長距離の１つのケーブルを介して伝送された複数のカメラ１０の映像信号を、記録ユニット内の配線に必要な比較的短距離の伝送用の信号に変換するとよい。

図１と図４，５の構成に基づいて、例えば、第２映像信号変換回路３０は、カメラ映像記録回路４０に対して、複数のカメラ１０の映像信号を１つのケーブルに流すように出力して、これがカメラ映像記録回路４０に入力されるように構成してもよい。例えば、第２映像信号変換回路３０は、２台のカメラの映像信号をそれぞれ所定のデータサイズのパケット等に分割して、交互にパケット等を伝送するようにしてもよい。より多数のカメラの映像信号を１つの伝送路にインターリーブして出力するようにしてもよい。

あるいは、図１と図６，７の構成に基づいて、例えば、第２映像信号変換回路３０は、カメラ映像記録回路４０に対して、複数のカメラ１０の映像信号をそれぞれのカメラ用の異なるケーブルに流すように出力して、これらがカメラ映像記録回路４０に入力されるように構成してもよい。このようにすれば、それぞれのカメラ１０用の異なる伝送路中あるいは、これらに接続されたカメラ映像記録回路４０内において、各カメラ１０単位での処理がしやすい。例えば、カメラ１０ごとにカメラフレーム単位に映像とは別の情報を重畳させて記録したり、出力したりすることが比較的容易となる。

カメラ映像記録回路４０は比較的安価であるが、映像の圧縮と記憶用に特化して設計されえているため、画像認識等の機能を追加するのが困難（例えば、情報開示が少ない、残りリソースが少ないなど）という問題がある。例えば、ドライブレコーダー用ＳｏＣは安価だがドライブレコーダー用に設計されているため画像認識等の機能を追加するのが困難（例えば、情報開示が少ない、残りリソースが少ないなど）という問題がある。

一方で、画像認識用に用いられる画像認識回路５０は、映像の圧縮、記録のソフトとして信頼性が高いものがないという問題がある。画像認識回路は、例えばＯＳＳ等をコンパイルして利用可能な汎用のＳｏＣ（画像認識用のＳｏＣ）とするとよい。特に画像認識のアクセラレータ回路を備えたＳｏＣや、ディープラーニングのアクセラレータ回路を備えたＳｏＣ等とするとよい。なお、例えば、一般的なＳｏＣや、特にＦＰＧＡである画像認識回路に、Ｈ．２６４など映像のエンコーダーを載せるとコストがかかる、という問題もある。また仮に一般的なＳｏＣに映像のエンコーダーが載っていたとしても、特に、ドライブレコーダーとして採用しようとすると、ドライブレコーダー用のソフトウェアとして信頼性が高いものに乏しく、かといって自社でイチから作るには膨大なコストがかかる課題がある。

これに対し、本実施形態のシステムでは、カメラ映像記録回路４０と画像認識回路５０とを異なるＳｏＣ等の回路で実現し、かつ上述したように映像信号および同期信号を分配するようにしたので、従来よりも優れたシステム等を提供できる。

さらに、以下の構成が採用されるとよい。

（カメラ制御例１）
カメラ１０（およびまたは別のカメラ１０）の設定を行う機能（例えば、ＩＳＰの機能のうちカメラ制御する部分を含む部分など）は、例えば、カメラ映像記録回路４０側のものを用いる構成（パターン１）、画像認識回路５０側のものを用いる構成（パターン２）、または両者の側ものを切り替えて利用する構成（パターン３）のいずれかとするとよい。また、それぞれＩＳＰ内蔵のＳｏＣを利用する構成と外付けのＩＳＰを利用する構成のいずれかとするとよい。外付けのＩＳＰの設置位置としてカメラ映像記録回路４０側のいずれかとするとよい。ただし、画像認識に必要な画作りと、圧縮して記憶媒体６０に記録し再生等可能とする画作りとは、異なるため、シャッタースピード、フレームレート、露光時間など、カメラをどのような状態に制御すればよいかが問題となる。そこで、カメラ映像記録回路４０がカメラ１０の設定を行う機能を有してもよい。

このようにすれば、設定の競合を防止できるとともに、カメラ１０の映像の記録と当該カメラ１０の映像に基づく画像認識とを比較的うまく両立できる。例えば、上述した（パターン１）を採る構成とすると、優れた効果を発揮することを発明者らは見出した。画像認識に用いる画像は記録に必要な画像の品質の要求に対して低いケースが多い。特にディープラーニングによって画像を認識する機能を備えるとよく、このような構成では、画素数、フレームレート等の要求は一般的に低くてすむ。カメラ映像記録回路４０側としては、カメラ映像記録回路４０内とすると特によい。

ただし、ＩＳＰの機能のうちフォーカスと露光に関しては、画像認識回路５０側で画像処理に必要な要求に合わせてカメラを設定したほうがよい場合がある。そこで、あらかじめ画像認識回路５０側で必要な、露光に関する設定、フォーカスに関する設定を加味してカメラ映像記録回路４０側のカメラの設定の内容を設定しておくシステムとするとよい。例えばあらかじめ画像認識回路５０側で必要な、露光に関する設定、フォーカスに関する設定を加味して、例えばカメラの映像があまりにひどくならない範囲で調整して、カメラ映像記録回路４０側のＩＳＰ（例えば、カメラ映像記録回路４０内のＩＳＰ）の設定をしておくとよい。

（カメラ制御例２）
カメラ映像記録回路４０と画像認識回路５０との間でカメラの設定を協調して調整する。このようにすれば、より、カメラ映像の圧縮および記録と、画像認識処理の精度の向上とを両立しやすくなる。

図８（ａ），（ｂ）に示すように、画像認識回路５０とカメラ映像記録回路４０とが通信し、カメラ１０の制御がどのような状態にあるかを相互に把握する機能を備えるとよい。

例えば、カメラ１０の設定をあらかじめ設定するのではなく、または、あらかじめ設定するとともに、画像認識回路５０側で露出やフォーカスの調整依頼信号を生成してカメラ映像記録回路４０に出力する。カメラ映像記録回路４０内ではこれを受けた場合に、カメラ映像記録回路４０側の設定機能によって設定を行う。例えば、カメラの設定をあらかじめ設定するのではなく、または、あらかじめ設定するとともに、画像認識回路５０側で露出やフォーカスの調整依頼信号をカメラ映像記録回路４０に出力する。カメラ映像記録回路４０はこれを受けた場合にカメラ映像記録回路４０側のＩＳＰの設定をこれに応じて調整するようにするとよい。なお、カメラ映像記録回路４０側で設定するカメラの設定に関する情報は画像認識回路５０へ送信する。画像認識回路５０ではこれを受信してこれを画像認識処理の処理の中で利用する構成とすると特によい。

例えば、画像認識回路５０で標識の認識を行う場合、画像中の路肩に相当する領域を露出算出の優先領域として計算するとよい、このとき基本的にはカメラの制御はカメラ映像記録回路４０側から行うが、あらかじめ、ややこの領域の露出優先度を高めて設定しておくとともに、画像認識回路５０で標識領域の露出がアンダーになっている場合には画像認識回路５０からカメラ映像記録回路４０に対して露出補正信号を出力し、カメラ映像記録回路４０がこの信号を受けた場合にはカメラの露出を高める信号をカメラ側に出力する等するとよい。

このようにカメラ１０自体の制御主体はあくまでカメラ映像記録回路４０側とし、画像認識回路５０側では直接的にカメラの制御を行わないように構成するとよい。また画像認識回路５０側からはカメラ映像記録回路４０側へ調整用信号を出力し、この調整用信号を受けた画像認識回路５０側が間接的にカメラを制御する構成とするとよい。例えば、カメラ１０自体の制御主体はあくまでカメラ映像記録回路４０とし、画像認識回路５０は直接的にカメラの制御を行わないように構成するとよい。また間接的に制御する構成とするとよい。

なお、フォーカスに関する設定はカメラをパンフォーカスとして不要とするとよい。

なお、別の例として前述の（パターン３）として、例えば時分割でカメラの制御主体を切り替えるようにしてもよい。特に、映像の記録フレームレートは、映像の記録・再生に十分なフレームレートとする一方（例えば、人間の視覚でカクつかないレベルのフレームレート（例えば２４から３０ｆｐｓ程度））とする一方、カメラのフレームレートはそれよりも高いフレームレート（例えば１２０ｆｐｓ）として、カメラのだすフレームに順に「１」，「２」，「３」，「４」，「１」，「２」，「３」，「４」・・・と番号を付けたとき、「１」についてはカメラ映像記録回路４０側、「３」については画像認識回路５０側のものとなるようにするとよい。例えば「２」，「４」は切り替えする時間としてもよい。

切り替えは、例えばカメラ映像記録回路４０側のＩＳＰと、画像認識回路５０側のＩＳＰとの双方を物理的に切り替えるようにしてもよいが、あくまでＩＳＰはカメラ映像記録回路４０側のＩＳＰの設定を時分割で切り替えるようにするとよい。複数のカメラ１ー０はすべてカメラ映像記録回路４０側が制御するようにし、画像認識回路５０側は複数のカメラのいずれも直接的には制御しないようにするとよい。間接的に制御するようにするとよい。

画像認識回路５０が間接的に制御する対象のカメラは、複数のカメラのうち一部のカメラとするとよい。この一部のカメラは認識に必要な要求と画像の記録・再生（人間が映像を見るの）に必要な要求との乖離が大きい一部のカメラとするとよい。

図８で説明した構成において、画像認識回路５０は、画像認識処理以外の処理を行う処理装置に置き換えられてもよい。

上述した実施形態で説明したシステム１の機能は、１または複数のプログラムによって実現され、１または複数のハードウェア資源の連係によって実現され得る。システム１の機能がプログラムを用いて実現される場合、この機能を実現するためのプログラムが、各種の磁気記録媒体、光記録媒体、光磁気記録媒体、半導体メモリ等のコンピュータ読み取り可能な記録媒体に記憶した状態で提供されてもよい。また、このプログラムは、ネットワークを介して配信されてもよい。また、本発明は、信号処理方法としても把握することができる。

本発明の範囲は，明細書に明示的に説明された構成や限定されるものではなく，本明細書に開示される本発明の様々な側面の組み合わせをも，その範囲に含むものである。本発明のうち，特許を受けようとする構成を，添付の特許請求の範囲に特定したが，現在の処は特許請求の範囲に特定されていない構成であっても，本明細書に開示される構成を，将来的に特許請求の範囲とする意思を有する。

本発明は上述した実施の形態に記載の構成に限定されない。上述した各実施の形態や変形例の構成要素は任意に選択して組み合わせて構成するとよい。また各実施の形態や変形例の任意の構成要素と，発明を解決するための手段に記載の任意の構成要素または発明を解決するための手段に記載の任意の構成要素を具体化した構成要素とは任意に組み合わせて構成するとよい。これらについても本願の補正または分割出願等において権利取得する意思を有する。また「～の場合」「～のとき」という記載があったとしてもその場合やそのときに限られる構成として記載はしているものではない。これらの場合やときでない構成についても開示しているものであり、権利取得する意思を有する。また順番を伴った記載になっている箇所もこの順番に限らない。一部の箇所を削除したり、順番を入れ替えた構成についても開示しているものであり、権利取得する意思を有する。

また，意匠出願への変更出願により，全体意匠または部分意匠について権利取得する意思を有する。図面は本装置の全体を実線で描画しているが，全体意匠のみならず当該装置の一部の部分に対して請求する部分意匠も包含した図面である。例えば当該装置の一部の部材を部分意匠とすることはもちろんのこと，部材と関係なく当該装置の一部の部分を部分意匠として包含した図面である。当該装置の一部の部分としては，装置の一部の部材としても良いし，その部材の部分としても良い。全体意匠はもちろんのこと，図面の実線部分のうち任意の部分を破線部分とした部分意匠を、権利化する意思を有する。

１：システム１，１０－１～１０－４：カメラ、２０，２０－１～２０－４：第２映像信号変換回路３０：デシリアライザー、３１：第１ポート、３２：第２ポート、５０：画像認識回路、６０：記憶媒体、７０：情報入力部、８０：表示部、９０：画像処理部、１００：処理装置

Claims (12)

1. カメラと、前記カメラで撮像された映像を圧縮して記憶手段に記憶させるカメラ映像記録回路とを備えるシステムであって、
   前記カメラと前記カメラ映像記録回路との間を伝送する信号を、当該信号に基づいて所定の機能を実現する電子部品に分配する信号分配手段を備え、
   前記電子部品は、前記カメラ映像記録回路とは別に設けられた、所定の画像認識処理を行う画像認識回路を含み、
   前記伝送する信号は、映像信号を含み、
   前記画像認識回路は、分配された前記映像信号に基づいて行った前記画像認識処理の結果に関する情報を、前記カメラ映像記録回路へ出力し、
   前記カメラ映像記録回路は、前記結果に関する情報に基づいて、前記カメラで撮像された映像を圧縮して前記記憶手段に記憶させ、
   前記カメラの設定を行う機能をさらに備え、
   前記カメラ映像記録回路と前記画像認識回路との間で前記カメラの設定を協調して調整する
   システム。
2. カメラと、前記カメラで撮像された映像を圧縮して記憶手段に記憶させるカメラ映像記録回路とを備えるシステムであって、
   前記カメラと前記カメラ映像記録回路との間を伝送する信号を、当該信号に基づいて所定の機能を実現する電子部品に分配する信号分配手段を備え、
   前記電子部品は、前記カメラ映像記録回路とは別に設けられた、所定の画像認識処理を行う画像認識回路を含み、
   前記伝送する信号は、映像信号を含み、
   前記画像認識回路は、分配された前記映像信号に基づいて行った前記画像認識処理の結果に関する情報を、前記カメラ映像記録回路へ出力し、
   前記カメラ映像記録回路は、前記結果に関する情報に基づいて、前記カメラで撮像された映像を圧縮して前記記憶手段に記憶させ、さらに、
   前記カメラ映像記録回路と前記画像認識回路とで前記カメラの制御主体を切り替える機能を有する
   システム。
3. 前記カメラの設定を行う機能をさらに備える
   請求項２に記載のシステム。
4. カメラと、前記カメラで撮像された映像を圧縮して記憶手段に記憶させるカメラ映像記録回路とを備えるシステムであって、
   前記カメラと前記カメラ映像記録回路との間を伝送する信号を、当該信号に基づいて所定の機能を実現する電子部品に分配する信号分配手段を備え、
   前記電子部品は、前記カメラ映像記録回路とは別に設けられた、所定の画像認識処理を行う画像認識回路を含み、
   前記伝送する信号は、映像信号を含み、
   前記画像認識回路は、分配された前記映像信号に基づいて行った前記画像認識処理の結果に関する情報を、前記カメラ映像記録回路へ出力し、
   前記カメラ映像記録回路は、前記結果に関する情報に基づいて、前記カメラで撮像された映像を圧縮して前記記憶手段に記憶させ、
   前記カメラの設定を行う機能をさらに有し、
   前記カメラの設定を行う機能は、前記カメラの設定のうちの露光に関する設定及びフォーカスに関する設定については、前記画像認識回路側で必要な設定を加味して設定する
   システム。
5. カメラと、前記カメラで撮像された映像を圧縮して記憶手段に記憶させるカメラ映像記録回路とを備えるシステムであって、
   前記カメラと前記カメラ映像記録回路との間を伝送する信号を、当該信号に基づいて所定の機能を実現する電子部品に分配する信号分配手段を備え、
   前記電子部品は、前記カメラ映像記録回路とは別に設けられた、所定の画像認識処理を行う画像認識回路を含み、
   前記伝送する信号は、映像信号を含み、
   前記画像認識回路は、分配された前記映像信号に基づいて行った前記画像認識処理の結果に関する情報を、前記カメラ映像記録回路へ出力し、
   前記カメラ映像記録回路は、前記結果に関する情報に基づいて、前記カメラで撮像された映像を圧縮して前記記憶手段に記憶させ、
   前記カメラの設定を行う機能をさらに備え、
   前記カメラの設定を行う機能は、
   前記画像認識回路で標識の認識を行う場合、画像中の路肩に相当する領域の露出優先度を高めて設定する
   システム。
6. カメラと、前記カメラで撮像された映像を圧縮して記憶手段に記憶させるカメラ映像記録回路とを備えるシステムであって、
   前記カメラと前記カメラ映像記録回路との間を伝送する信号を、当該信号に基づいて所定の機能を実現する電子部品に分配する信号分配手段を備え、
   前記電子部品は、前記カメラ映像記録回路とは別に設けられた、所定の画像認識処理を行う画像認識回路を含み、
   前記伝送する信号は、映像信号を含み、
   前記画像認識回路は、分配された前記映像信号に基づいて行った前記画像認識処理の結果に関する情報を、前記カメラ映像記録回路へ出力し、
   前記カメラ映像記録回路は、前記結果に関する情報に基づいて、前記カメラで撮像された映像を圧縮して前記記憶手段に記憶させ、
   前記カメラの設定を行う機能をさらに備え、
   前記画像認識回路は、前記カメラ映像記録回路に対して露出補正信号を出力し、
   前記カメラの設定を行う機能は、
   前記カメラ映像記録回路が前記露出補正信号を受けた場合には、前記カメラの露出を高める信号を前記カメラ側に出力することにより前記カメラの設定を行う
   システム。
7. 前記カメラの設定を行う機能は前記カメラ映像記録回路側の機能である
   請求項１、３から６のいずれか１項に記載のシステム。
8. 前記カメラ映像記録回路は、ドライブレコーダー用のＳｏＣ（Ｓｙｓｔｅｍ－ｏｎ－ａ－Ｃｈｉｐ）であり、
   前記画像認識回路は、画像認識用のＳｏＣである
   請求項１から７のいずれか１項に記載のシステム。
9. 前記カメラ映像記録回路に入力する映像信号よりも情報量を削減した信号を生成する認識用映像信号生成手段を備え、
   前記画像認識回路は、前記情報量を削減した映像信号に基づいて前記画像認識処理を行う請求項１から８のいずれか１項に記載のシステム。
10. 前記画像認識回路は、前記信号分配手段から分配された前記映像信号に基づく情報を第２記録手段に記録する請求項１から９のいずれか１項に記載のシステム。
11. ドライブレコーダーとして機能する
    請求項１から１０のいずれか１項に記載のシステム。
12. 請求項１から１１のいずれか１項に記載の機能をコンピュータに実行させるためのプログラム。

Images