JP2018132320A - On-vehicle system, on-vehicle device, program and method - Google Patents
On-vehicle system, on-vehicle device, program and method Download PDFInfo
- Publication number
- JP2018132320A JP2018132320A JP2017024017A JP2017024017A JP2018132320A JP 2018132320 A JP2018132320 A JP 2018132320A JP 2017024017 A JP2017024017 A JP 2017024017A JP 2017024017 A JP2017024017 A JP 2017024017A JP 2018132320 A JP2018132320 A JP 2018132320A
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- vehicle
- unit
- passenger
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 17
- 238000003384 imaging method Methods 0.000 claims abstract description 492
- 230000003287 optical effect Effects 0.000 claims abstract description 76
- 230000006870 function Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 13
- 239000004065 semiconductor Substances 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
Images
Landscapes
- Navigation (AREA)
- Television Signal Processing For Recording (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
本発明は、車載システム、車載装置、プログラム及び方法に関する。 The present invention relates to an in-vehicle system, an in-vehicle device, a program, and a method.
従来、車両に搭乗して観光地等を移動している時に、車室内から車外の景色を撮像する場合がある。 2. Description of the Related Art Conventionally, there are cases where a scene outside a vehicle is imaged from the interior of a vehicle when the user is on a vehicle and moving around a sightseeing spot.
景色の良い地域を走行中の車内では、車両を運転している者以外の搭乗者が、搭乗者と、車外の山等の撮像対象物とが1つの画像内に含まれるように撮像する場合がある。 In a car running in a scenic area, when a passenger other than the person driving the vehicle captures an image so that the passenger and an imaging object such as a mountain outside the car are included in one image There is.
ナビゲーション機能を有する車載装置は、車両が走行している地図情報を有しているので、観光地等の車外の景色の良い地域を走行していることを判断することができる。 Since the in-vehicle device having the navigation function has map information on which the vehicle is traveling, it can be determined that the vehicle is traveling in a region with a good scenery outside the vehicle such as a sightseeing spot.
例えば、特許文献1は、車両が観光地から所定の距離内を走行している時に、車外の映像を録画する車両用映像記録装置を提案している。
For example,
しかし、上述した特許文献1に開示される技術は、車両に搭乗している搭乗者と、車外の撮像対象物とを同時に撮像することは開示していない。
However, the technique disclosed in
本明細書では、車両に搭乗している搭乗者及び車外の撮像対象物を撮像できる車載システム、車載装置、プログラム及び方法を提供することを課題とする。 This specification makes it a subject to provide the vehicle-mounted system, vehicle-mounted apparatus, program, and method which can image the passenger who is boarding the vehicle, and the imaging target object outside a vehicle.
本明細書に開示する車載システムによれば、画像を取得する撮像部と、車外の撮像対象物の位置を取得し、上記撮像部の光軸方向と車外の撮像対象物との位置関係に基づいて、搭乗者及び撮像対象物を撮像可能か判断し、撮像可能な場合に搭乗者及び撮像対象物を含む画像を上記撮像部に撮像させる処理部と、撮像された画像を出力する出力部と、を備える。 According to the in-vehicle system disclosed in the present specification, the position of an imaging unit that acquires an image and an imaging target outside the vehicle is acquired, and based on the positional relationship between the optical axis direction of the imaging unit and the imaging target outside the vehicle. A processing unit that determines whether the passenger and the imaging object can be imaged, and when the imaging is possible, causes the imaging unit to capture an image including the passenger and the imaging object, and an output unit that outputs the captured image. .
本明細書に開示する車載装置によれば、車外の撮像対象物の位置を取得し、画像を取得する撮像部の光軸方向と車外の撮像対象物との位置関係に基づいて、搭乗者及び撮像対象物を撮像可能か判断し、撮像可能な場合に搭乗者及び撮像対象物を含む画像を上記撮像部に撮像させる処理部と、撮像された画像を出力する出力部と、を備える。 According to the in-vehicle device disclosed in the present specification, the position of the imaging object outside the vehicle is acquired, and based on the positional relationship between the optical axis direction of the imaging unit that acquires the image and the imaging object outside the vehicle, A processing unit that determines whether or not an imaging target can be captured, and causes the imaging unit to capture an image including a passenger and the imaging target when imaging is possible, and an output unit that outputs the captured image.
また、本明細書に開示するプログラムによれば、車外の撮像対象物の位置を取得することと、画像を取得する撮像部の光軸方向と、車外の撮像対象物との位置関係に基づいて、搭乗者及び撮像対象物を含む画像を撮像可能か判断することと、撮像可能な場合に、上記撮像部を用いて搭乗者及び撮像対象物の画像を撮像することを、プロセッサに実行させる。 Further, according to the program disclosed in the present specification, the position of the imaging object outside the vehicle is acquired, the optical axis direction of the imaging unit that acquires the image, and the positional relationship between the imaging object outside the vehicle. The processor is configured to determine whether an image including the passenger and the imaging target can be captured, and to capture an image of the passenger and the imaging target using the imaging unit when the imaging is possible.
更に、本明細書に開示する方法によれば、車外の撮像対象物の位置を取得することと、画像を取得する撮像部の光軸方向と、車外の撮像対象物との位置関係に基づいて、搭乗者及び撮像対象物を含む画像を撮像可能か判断することと、撮像可能な場合に、上記撮像部を用いて搭乗者及び撮像対象物を含む画像を撮像すること、を備える。 Furthermore, according to the method disclosed in the present specification, the position of the imaging target object outside the vehicle is acquired, the optical axis direction of the imaging unit that acquires the image, and the positional relationship between the imaging target object outside the vehicle. Determining whether an image including the passenger and the imaging object can be captured, and capturing an image including the passenger and the imaging object using the imaging unit when imaging is possible.
上述した本明細書に開示する車載システムによれば、車両に搭乗している搭乗者及び車外の撮像対象物を撮像できる。 According to the above-described in-vehicle system disclosed in the present specification, it is possible to capture an image of a passenger on the vehicle and an imaging object outside the vehicle.
上述した本明細書に開示する車載装置によれば、車両に搭乗している搭乗者及び車外の撮像対象物を撮像できる。 According to the vehicle-mounted device disclosed in the present specification described above, it is possible to capture an image of an occupant on the vehicle and an imaging object outside the vehicle.
また、上述した本明細書に開示するプログラムによれば、車両に搭乗している搭乗者及び車外の撮像対象物を撮像できる。 Further, according to the above-described program disclosed in the present specification, it is possible to capture an image of a passenger on the vehicle and an imaging object outside the vehicle.
更に、上述した本明細書に開示する方法によれば、車両に搭乗している搭乗者及び車外の撮像対象物を撮像できる。 Furthermore, according to the method disclosed in the present specification described above, it is possible to capture an image of a passenger on the vehicle and an imaging object outside the vehicle.
以下、本明細書で開示するシステムの好ましい一実施形態を、図を参照して説明する。但し、本発明の技術範囲はそれらの実施形態に限定されず、特許請求の範囲に記載された発明とその均等物に及ぶものである。 Hereinafter, a preferred embodiment of the system disclosed in the present specification will be described with reference to the drawings. However, the technical scope of the present invention is not limited to these embodiments, but extends to the invention described in the claims and equivalents thereof.
図1は、本明細書に開示するシステムの一実施形態を示す図である。 FIG. 1 is a diagram illustrating one embodiment of a system disclosed in this specification.
本実施形態のシステム1は、車両に搭載される車載装置10と、車載装置10とネットワークNを介して通信可能に接続されたサーバ40を備える。
The
車載装置10は、車載装置10が搭載されている車両が走行する経路上において、車両に搭乗する搭乗者及び車外の撮像対象物を撮像可能な撮像位置を求め、搭乗者及び撮像対象物を1つの画像に含まれるように撮像する。
The in-
サーバ40は、撮像対象物の位置情報を含む撮像対象物情報を記憶する。サーバ40は、ネットワークNを介して、撮像対象物情報を車載装置10へ送信する。車載装置10は、サーバ40から受信した撮像対象物情報に基づいて、目的地までの経路上において、搭乗者及び車外の撮像対象物を撮像可能な撮像位置を求める。
The
撮像対象物としては、例えば、海、山又は渓谷等の自然物、タワー又は建物等の人工的なランドマークが挙げられる。サーバ40では、撮像対象物情報は、随時更新される。
Examples of the imaging object include natural objects such as the sea, mountains, and valleys, and artificial landmarks such as towers and buildings. In the
車載装置10が搭載される車両として、自動車等の4輪以上の車輪を有する車両、自動2輪車、自転車等の軽車両が挙げられる。本実施形態では、車載装置は、自動車に搭載される。
Examples of the vehicle on which the in-
次に、車載装置10について、以下に詳述する。
Next, the in-
図2は、車載装置10のハードウェア構成図である。
FIG. 2 is a hardware configuration diagram of the in-
車載装置10は、処理部11と、記憶部12と、表示部13と、操作部14と、音響出力部15と、通信部16と、撮像装置20a〜20dを有する。
The in-
処理部11は、一つまたは複数のプロセッサと、周辺回路とを有する。処理部11は、記憶部12に予め記憶されている所定のプログラム12aに従い、車載装置10の各ハードウェア構成要素の制御及び各種処理を行い、処理中に生じるデータを一時的に保存するために記憶部12を利用する。
The
処理部11は、光軸方向決定部11aと、撮像対象物設定部11bと、ナビゲーション部11cと、撮像判断部11dを有する。
The
処理部11が有するこれらの各部は、例えば、処理部11が有するプロセッサ上で動作するコンピュータプログラムにより実現される機能モジュールである。なお、処理部11が有するこれらの各部は、それぞれ、別個の回路として、車載装置10に実装されてもよい。各部の説明については後述する。
Each of these units included in the
記憶部12は、ランダムアクセスメモリ(RAM)若しくはリードオンリーメモリ(ROM)等の半導体メモリ、又は磁気ディスク若しくはフラッシュメモリ等の不揮発性メモリを有していてもよい。また、記憶部12は、所定のプログラム12aを記憶する非一時的な記憶媒体を読み出し可能なドライブとして、ディスクドライブ(図示せず)を用いてもよい。 The storage unit 12 may include a semiconductor memory such as a random access memory (RAM) or a read only memory (ROM), or a nonvolatile memory such as a magnetic disk or a flash memory. The storage unit 12 may use a disk drive (not shown) as a drive that can read a non-temporary storage medium that stores the predetermined program 12a.
記憶部12は、所定のプログラム12aと、地図データ12bと、画像データ12cと、撮像対象物表12dと、撮像推奨領域表12eと、撮像非推奨領域表12fを記憶する。
The storage unit 12 stores a predetermined program 12a,
図3は、撮像対象物表を説明する図である。 FIG. 3 is a diagram illustrating the imaging target table.
撮像対象物表300は、撮像対象物を識別する識別情報が登録される撮像対象物識別情報欄301と、撮像対象物の名称が登録される名称欄302と、撮像対象物の位置情報が登録される位置情報欄303を有する。位置情報欄303に登録される撮像対象物の位置情報は、地図上の座標において一点で表されていてもよいし、所定の面積を有する領域として表されていてもよい。撮像対象物の位置情報は、地図データ内の車両の経路等を表す2次元の地図座標系で表現される。
The imaging object table 300 registers an imaging object identification information field 301 in which identification information for identifying an imaging object is registered, a
地図データ12bと、画像データ12cと、撮像推奨領域表12eと、撮像非推奨領域表12fについては後述する。
The
表示部13は、例えばセンターコンソールに配置されており、処理部11に制御されて、車載装置10の動作に伴う各種の情報を表示可能である。表示部13として、例えば、液晶ディスプレイを用いることができる。
The
操作部14は、搭乗者により操作されて、操作を入力可能である。車載装置10は、操作部14として、例えば表示部13と一体に形成されるタッチパネルを用いることができる。
The
音響出力部15は、図示しないスピーカを有しており、処理部11に制御されて、音響を出力する。
The
通信部16は、無線通信を用いて、ネットワークNを介して、サーバ40との間で情報の送受信を行う。通信部16は、例えば、3GPP(Third Generation Partnership Project)又はLTE(Long Term Evolution)等の所定の通信規格に準拠して、基地局を介して、ネットワークNと接続する。また、通信部16は、撮像装置20a〜20dと通信する。更に、通信部16は、車両に搭載されている車内のネットワーク(Controller Area Network:CANに準拠)と接続する。例えば、処理部11は、通信部16を用いて、CANを介して車両の速度を示す車両信号を受信する。通信部46は、送受信を行う通信回路及び通信線又はアンテナを有し得る。
The
また、車載装置10には、車両に搭載されたGPS情報受信部30から、車両の位置を示す位置情報が入力される。GPS情報受信部30は、GPS人工衛星が送信するGPS電波を受信して車両の位置を求め、車両の位置情報を車載装置10に出力する。
In addition, position information indicating the position of the vehicle is input to the in-
処理部11のナビゲーション部11cは、ナビゲーション機能を有する。ナビゲーション部11cは、記憶部12に記憶されるプログラムの実行により、同じく記憶部12に記憶される地図データ12bを用いて実現される機能モジュールであり、GPS情報受信部30から取得した車両の現在の位置に基づいて、目的地までの経路案内を行う。処理部11は、記憶部12に記憶された地図データ12bと車両の位置とに基づき、車両の周辺の地図を示す地図画像及び音声案内情報を生成する。また、処理部11は、搭乗者により目的地が設定された場合には、現時点の車両の位置から目的地までの経路を導出し、当該経路を地図画像上に重畳する。処理部11が生成した地図画像は、表示部13に表示される。ナビゲーション部11cが生成した音声案内情報は、音響出力部15から出力される。
The navigation unit 11c of the
次に、撮像装置20a〜20dについて、以下に詳述する。
Next, the
撮像装置20a〜20dは、撮像部21及び光軸調整部22を有する。
The
撮像部21は、所定の光軸方向を有しており、光軸調整部22を用いて、車内の搭乗者を含んで車外を撮像するように光軸方向を設定可能である。撮像部21は、光軸方向を中心として、所定の範囲の視野角を有しており、視野角の範囲内の被写体を撮像可能である。
The
撮像部21は、例えば、CCD(Charge Coupled Device)イメージセンサ又はCMOS(Complementary Metal Oxide Semiconductor)イメージセンサを有する。撮像部21は、被写体を撮像して画像データを生成し、生成した画像データを車載装置10へ送信する。車載装置10の処理部11は、受信した画像データ12cを記憶部12に記憶する。また、車載装置10の処理部11は、受信した画像データ12cを、表示部13に出力して表示可能である。
The
光軸調整部22は、車両の搭乗者に操作されて、撮像部21の光軸方向及び画像の拡大率を調整する。撮像部21が被写体を撮像している状態で、車両の搭乗者は、表示部13の画像を確認しながら、光軸調整部22を用いて、撮像部21の光軸方向及び画像の拡大率を調整する。なお、光軸調整部22は、車載装置10の操作部14を用いて行うようにしてもよい。
The optical
光軸調整部22は、初期状態の撮像部21の光軸方向を基準として、調整により移動した光軸方向の移動量を示す光軸方向の移動量情報を、車載装置10へ送信する。車載装置10の処理部11の光軸方向決定部11aは、受信した撮像部21の光軸方向の移動量情報に基づいて、撮像部21の光軸方向を、車両に固定された車両座標系に対して決定する。即ち、撮像部21の光軸方向は、車両座標系において表現される。車両座標系については、図4を参照しながら後述する。
The optical
図4は、車両に配置された撮像装置の光軸方向を説明する図である。 FIG. 4 is a diagram illustrating the optical axis direction of the imaging device arranged in the vehicle.
車両50の車室には、4つの撮像装置20a〜20dが配置される。
In the vehicle compartment of the
撮像装置20aの撮像部21は、運転席に着座している搭乗者51a及び車外を撮像するように光軸方向A1が設定されている。撮像装置20aは、例えば、車両50の左側のAピラー(図示せず)の内側に配置される。
The optical axis direction A1 is set so that the
撮像装置20bの撮像部21は、助手席に着座している搭乗者51b及び車外を撮像するように光軸方向A2が設定されている。撮像装置20bは、例えば、車両50の右側のAピラー(図示せず)の内側に配置される。
The
撮像装置20cの撮像部21は、運転席の後方に着座している搭乗者51c及び車外を撮像するように光軸方向A3が設定されている。撮像装置20cは、例えば、運転席の後ろ側に配置される。
The
撮像装置20dの撮像部21は、助手席の後方に着座している搭乗者51d及び車外を撮像するように光軸方向A4が設定されている。撮像装置20dは、例えば、助手席の後ろ側に配置される。
The
撮像装置20aの光軸方向A1は、車両に固定された車両座標系Sにおいて表現される。他の撮像装置20b〜20dの光軸方向A2〜A4も、同様に、車両座標系Sにおいて表現される。
The optical axis direction A1 of the
本実施形態では、車両座標系Sは、車両に固定された原点Oと、X軸方向及びY軸方向を有する2次元直角座標系である。なお、車両座標系Sは3次元座標系であってもよく、この場合、光軸方向A1〜A4も3次元座標系で表現される。 In the present embodiment, the vehicle coordinate system S is a two-dimensional rectangular coordinate system having an origin O fixed to the vehicle and an X-axis direction and a Y-axis direction. The vehicle coordinate system S may be a three-dimensional coordinate system. In this case, the optical axis directions A1 to A4 are also expressed in the three-dimensional coordinate system.
次に、車載装置10の処理部11の撮像判断部11dが、撮像部21の光軸方向と、車外の撮像対象物との位置関係に基づいて、搭乗者及び撮像対象物を撮像可能か否か判断する処理について、以下に説明する。
Next, whether or not the imaging determination unit 11d of the
図5は、搭乗者及び撮像対象物を撮像可能か判断することを説明する図である。 FIG. 5 is a diagram for explaining whether it is possible to image the passenger and the imaging object.
撮像判断部11dは、車載装置10が搭載されている車両50が走行する経路70上において、撮像装置20aの光軸方向A1が、撮像対象物60の位置と交差する撮像位置において、搭乗者及び撮像対象物を撮像可能であると判断する。これにより、搭乗者及び撮像対象物を、撮像に最も適したタイミングにおいて撮像することができる。ここで、撮像対象物60の位置情報が、地図上において所定の面積を有する領域として表されている場合には、車両50が走行する所定の経路上の領域において、撮像可能であると判断される場合がある。
The imaging determination unit 11d is configured such that, on the
車両座標系SのY軸方向は、目的地までの経路を表す2次元の地図座標系において、車両の進行方向と一致する。例えば、車両座標系SのY軸方向は、車両50が走行している経路が延びる方向と一致させてもよい。撮像判断部11dは、車両座標系Sにおいて表現された撮像装置20aの光軸方向A1を、地図座標系の表現に座標変換する。そして、撮像判断部11dは、地図座標系で表現される撮像装置20aの光軸方向A1が、撮像対象物60の位置と交差する時の車両の経路70上の位置を、撮像可能領域として求める。具体的には、撮像判断部11dは、地図上において、車両50の撮像装置20aの位置から光軸方向A1に延びる直線が、撮像対象物60と交わるか否かを調べる。求められる撮像可能領域は、経路70上の一点である場合もあるし、経路70上の所定の範囲の部分である場合もある。
The Y-axis direction of the vehicle coordinate system S coincides with the traveling direction of the vehicle in the two-dimensional map coordinate system representing the route to the destination. For example, the Y-axis direction of the vehicle coordinate system S may match the direction in which the route along which the
上述したように、撮像装置20aの光軸方向A1は、運転席の搭乗者51aを含んで車外を撮像するように設定されるので、撮像可能領域において撮像装置20aにより撮像される画像には、搭乗者51a及び車外の撮像対象物60が1つの画像に含まれるように撮像される。
As described above, the optical axis direction A1 of the
上述した撮像装置20aを用いた撮像可能領域の説明は、他の撮像装置20b〜20dに対しても適宜適用される。
The above description of the imageable area using the
次に、撮像可能領域、撮像推奨領域、撮像非推奨領域について、更に、以下に説明する。 Next, the imageable area, the recommended imaging area, and the non-recommended imaging area will be further described below.
図6は、撮像可能領域、撮像推奨領域及び撮像非推奨領域を説明する図である。 FIG. 6 is a diagram illustrating an imageable area, an imaging recommended area, and an imaging non-recommended area.
撮像可能領域は、上述したように、経路上において、地図座標系で表現される撮像装置20a〜20dの光軸方向が、撮像対象物の位置と交差する時の経路上の位置である。
As described above, the imageable area is a position on the path when the optical axis direction of the
図6に示す例では、撮像判断部11dは、車両50に搭載される撮像装置20aに対して、経路70上の所定の範囲に撮像可能領域Rを有すると判断している。撮像可能領域Rは、後述する撮像推奨領域R2及び撮像非推奨領域R1,R3を含む領域である。図6に示すように、経路が撮像対象物60を内側にして回るように湾曲している場合には、経路70上の所定の範囲に撮像可能領域Rを有する場合がある。
In the example illustrated in FIG. 6, the imaging determination unit 11 d determines that the
撮像判断部11dは、撮像可能領域Rにおいて、撮像装置20aを用いて画像を録画させてもよいし、所定の間隔で画像を撮像するようにしてもよい。
The imaging determination unit 11d may record an image using the
撮像可能領域Rは、通常、車両50が走行する位置から撮像対象物60を見渡せる経路70の部分である。
The imageable region R is usually a portion of a
また、図6に示す例では、車載装置10が搭載されている車両50が走行する経路70には、車外の撮像対象物60を撮像することが推奨されない撮像非推奨領域R1、R3が設定されている。
In the example illustrated in FIG. 6, imaging non-recommended areas R <b> 1 and R <b> 3 in which it is not recommended to image the
撮像非推奨領域R1では、経路70と撮像対象物60との間に、フェンス等の障害物80が位置するので、車両内から撮像装置20aが撮像した場合、搭乗者と撮像対象物60との間に障害物80が写るため、車外の撮像対象物60を撮像できないおそれがある。
In the imaging non-recommended region R1, an
また、撮像非推奨領域R3では、経路70と撮像対象物60との間に、建物等の障害物81が位置するので、車両内から撮像装置20aが撮像した場合、搭乗者と撮像対象物60との間に障害物81が写るため、車外の撮像対象物60を撮像できないおそれがある。
Further, in the imaging non-recommended region R3, an obstacle 81 such as a building is located between the
一方、撮像非推奨領域R1と撮像非推奨領域R3との間には、車外の撮像対象物60を撮像することが推奨される撮像推奨領域R2が設定されている。
On the other hand, between the imaging non-recommended region R1 and the imaging non-recommended region R3, an imaging recommended region R2 that is recommended to image the
撮像推奨領域R2は、特に、車外の撮像対象物60が美しく撮像できると予想される経路70上の部分である。撮像推奨領域R2は、いわゆるビューポイントである。
The imaging recommended region R2 is a portion on the
上述した撮像推奨領域R2の経路70上の位置情報を含む撮像推奨領域情報は、車載装置10の記憶部12の撮像推奨領域表12eに登録される。撮像推奨領域表12eには、撮像推奨領域R2を識別する識別情報と、撮像推奨領域R2の経路70上の位置情報とが関連づけられて登録される。
The recommended imaging area information including the position information of the recommended imaging area R2 on the
また、上述した撮像非推奨領域R1,R3の経路70上の位置情報を含む撮像非推奨領域情報は、車載装置10の記憶部12の撮像非推奨領域表12fに登録される。撮像非推奨領域表12fには、撮像非推奨領域R1,R3を識別する識別情報と、撮像非推奨領域R1,R3の経路70上の位置情報とが関連づけられて登録される。
Further, the imaging non-recommended area information including the position information on the
なお、図6に示す例では、撮像可能領域Rは、撮像非推奨領域R3と、撮像推奨領域R2との間に、撮像推奨領域でもなく、撮像非推奨領域でもない領域R4を有する。領域R4では、撮像装置20aの光軸方向A1が撮像対象物の位置と交差する。
In the example illustrated in FIG. 6, the imageable region R includes a region R4 that is neither an imaging recommendation region nor an imaging recommendation region between the imaging non-recommended region R3 and the imaging recommended region R2. In the region R4, the optical axis direction A1 of the
図6に示す例では、撮像装置20aに対して撮像可能であると判断された撮像可能領域、撮像推奨領域及び撮像非推奨領域について説明がなされた。上述した図6の説明は、他の撮像装置20b〜20dに対しても適宜適用される。
In the example illustrated in FIG. 6, the imageable area, the recommended imaging area, and the non-recommended imaging area that are determined to be imageable with respect to the
次に、サーバ40について、以下に詳述する。
Next, the
サーバ40は、処理部41と、記憶部42と、通信部43を有する。
The
処理部41は、一つまたは複数のプロセッサと、周辺回路とを有する。処理部41は、記憶部42に予め記憶されている所定のプログラムに従い、サーバ40の各ハードウェア構成要素の制御及び各種処理を行い、処理中に生じるデータを一時的に保存するために記憶部42を利用する。なお、サーバは、一台でなくてもよい。サーバの動作は、ネットワークNを介して通信可能に接続された複数のサーバが協働して実現されてもよい。
The processing unit 41 includes one or a plurality of processors and peripheral circuits. The processing unit 41 controls each hardware component of the
記憶部42は、ランダムアクセスメモリ(RAM)若しくはリードオンリーメモリ(ROM)等の半導体メモリ、又は磁気ディスク若しくはフラッシュメモリ等の不揮発性メモリを有していてもよい。また、記憶部42は、所定のプログラムを記憶する非一時的な記憶媒体を読み出し可能なドライブとして、ディスクドライブ(図示せず)を用いてもよい。 The storage unit 42 may include a semiconductor memory such as a random access memory (RAM) or a read only memory (ROM), or a nonvolatile memory such as a magnetic disk or a flash memory. The storage unit 42 may use a disk drive (not shown) as a drive that can read a non-temporary storage medium that stores a predetermined program.
図7は、サーバの記憶部を説明する図である。 FIG. 7 is a diagram illustrating the storage unit of the server.
記憶部42は、サーバ撮像対象物表42aと、サーバ撮像推奨領域表42bと、サーバ撮像非推奨領域表42cを記憶する。 The storage unit 42 stores a server imaging object table 42a, a server imaging recommended area table 42b, and a server imaging non-recommended area table 42c.
サーバ撮像対象物表42aには、撮像対象物の名称と、撮像対象物の位置情報とが、撮像対象物を識別する撮像対象物識別情報と関連づけられて登録される。撮像対象物として、例えば、ウェブ上において、撮像対象として人気の高い対象物を登録することができる。サーバ撮像対象物表42aに登録されている情報を、撮像対象物情報ともいう。 In the server imaging target table 42a, the name of the imaging target and the position information of the imaging target are registered in association with the imaging target identification information for identifying the imaging target. As the imaging object, for example, a popular object as an imaging object can be registered on the web. Information registered in the server imaging object table 42a is also referred to as imaging object information.
サーバ撮像推奨領域表42bには、撮像推奨領域を識別する識別情報と、撮像推奨領域の経路上の位置情報とが関連づけられて登録される。撮像推奨領域は、ウェブ上において、撮像対象物を撮像するのに適していると評判の高い経路上の部分を登録することができる。 In the server image pickup recommended area table 42b, identification information for identifying the image pickup recommended area and position information on the route of the image pickup recommended area are registered in association with each other. The imaging recommended area can register a part on a route having a high reputation as being suitable for imaging an imaging object on the web.
サーバ撮像非推奨領域表42cには、撮像非推奨領域を識別する識別情報と、撮像非推奨領域の経路上の位置情報とが関連づけられて登録される。撮像非推奨領域は、ウェブ上において、撮像対象物を撮像するのに残念ながら適していないと通知されている経路上の部分を登録することができる。 In the server imaging non-recommended area table 42c, identification information for identifying the imaging non-recommended area and position information on the path of the imaging non-recommended area are associated and registered. The imaging non-recommended area can register a part on the route that is notified unfortunately not suitable for imaging an imaging object on the web.
通信部43は、ネットワークNを介して、車載装置10との間で情報の送受信を行う。処理部41は、通信部43を用いて受信された情報に基づいて、各種の処理を行う。また、処理部41は、各種の処理を行った結果を、通信部43を用いて送信する。通信部43は、送受信を行う通信回路及び通信線又はアンテナを有し得る。
The communication unit 43 transmits and receives information to and from the in-
次に、システム1において、車載装置10が撮像装置20a〜20dの光軸方向を決定して、サーバ40から撮像対象物情報を受信する動作等を、図8に示すシーケンス図を参照しながら、以下に説明する。
Next, in the
まず、ステップS801において、車両の搭乗者は、各撮像装置20a〜20dの光軸調整部22を操作して、撮像部21の光軸方向を設定する。具体的には、車両の搭乗者は、各撮像装置20a〜20dの撮像部21が、搭乗者及び車外の景色を一緒に撮像できるように、表示部13の画像を確認しながら、光軸調整部22又は操作部14を用いて撮像部21の光軸方向及び画像の拡大率を調整する。撮像部21の光軸方向及び画像の拡大率を調整することにより、撮像部21の視野内において、搭乗者が写る割合と、車外が写る割合とが変更される。
First, in step S801, the vehicle occupant operates the optical
車載装置10の処理部11の光軸方向決定部11aは、撮像装置20a〜20dから受信した撮像部21の光軸方向の移動量情報に基づいて、各撮像部21の光軸方向を、車両に固定された車両座標系に対して決定する。
The optical axis direction determination unit 11a of the
次に、ステップS803において、車載装置10の処理部11の撮像対象物設定部11bは、撮像対象物情報を要求する撮像対象物情報要求を、ネットワークNを介してサーバ40へ送信する。また、撮像対象物設定部11bは、撮像推奨領域情報を要求する撮像推奨領域情報要求と、撮像非推奨領域情報を要求する撮像非推奨領域情報要求を、ネットワークNを介してサーバ40へ送信する。
Next, in step S <b> 803, the imaging object setting unit 11 b of the
次に、ステップS805において、サーバ40は、撮像対象物情報要求、撮像推奨領域情報要求及び撮像非推奨領域情報要求を受信する。
Next, in step S805, the
次に、ステップS807において、サーバ40の処理部41は、記憶部42に記憶されているサーバ撮像対象物表41aを参照して、撮像対象物情報を読み出し、読み出した撮像対象物情報を、ネットワークNを介して車載装置10へ送信する。また、サーバ40の処理部41は、記憶部42に記憶されているサーバ撮像推奨領域表42bを参照して、撮像推奨領域情報を読み出し、読み出した撮像推奨領域情報を、ネットワークNを介して車載装置10へ送信する。更に、サーバ40の処理部41は、記憶部42に記憶されているサーバ撮像非推奨領域表42cを参照して、撮像非推奨領域情報を読み出し、読み出した撮像非推奨領域情報を、ネットワークNを介して車載装置10へ送信する。
Next, in step S807, the processing unit 41 of the
次に、ステップS809において、撮像対象物設定部11bは、撮像対象物情報、撮像推奨領域情報及び撮像非推奨領域情報を受信する。 Next, in step S809, the imaging target setting unit 11b receives imaging target information, imaging recommended area information, and imaging non-recommended area information.
次に、ステップS811において、撮像対象物設定部11bは、受信した撮像対象物情報を、記憶部12の撮像対象物表12dに登録する。また、撮像対象物設定部11bは、受信した撮像推奨領域情報を、記憶部12の撮像推奨領域表12eに登録する。更に、影対象物設定部11bは、受信した撮像非推奨領域情報を、記憶部12の撮像非推奨領域表12fに登録する。 Next, in step S811, the imaging object setting unit 11b registers the received imaging object information in the imaging object table 12d of the storage unit 12. In addition, the imaging target object setting unit 11 b registers the received recommended imaging area information in the recommended imaging area table 12 e of the storage unit 12. Furthermore, the shadow object setting unit 11 b registers the received imaging non-recommended area information in the imaging non-recommended area table 12 f of the storage unit 12.
なお、車両の搭乗者は、車載装置10の操作部14を操作して、撮像を希望する撮像対象物の撮像対象物情報を、記憶部12の撮像対象物表12dに登録してもよい。同様に、車両の搭乗者は、自ら知見した撮像推奨領域情報を、記憶部12の撮像推奨領域表12eに登録してもよい。更に、車両の搭乗者は、自ら知見した撮像非推奨領域情報を、記憶部12の撮像非推奨領域表12fに登録してもよい。このように、車両の搭乗者は、サーバ40に記憶されている情報以外にも、適宜、撮像対象物情報等を車載装置10に登録してもよい。また、撮像対象物設定部11bは、撮像対象物表12d、撮像非推奨領域表12f又は撮像非推奨領域表12fに追加して登録された情報を、サーバ40へ送信して、記憶部42に記憶されている各表に登録するようにしてもよい。
The vehicle occupant may operate the
次に、ステップS813において、車載装置10の処理部11の撮像判断部11dは、車両の搭乗者により選択される3つの撮像領域を表示部13に表示する。
Next, in step S813, the imaging determination unit 11d of the
図9は、撮像領域を選択する画面を示す図である。 FIG. 9 is a diagram illustrating a screen for selecting an imaging region.
「1.撮像可能領域において撮像する」が選択された場合、撮像判断部11dは、車両が経路上の撮像可能領域に位置する時に撮像装置20a〜20dを用いて、搭乗者及び車外の撮像対象物を撮像する。図6に示す例では、車両が撮像可能領域Rを走行している間、撮像判断部11dは、撮像装置20a〜20dを用いて、搭乗者及び車外の撮像対象物を撮像する。この場合、撮像判断部11dは、撮像装置20a〜20dを用いて、映像を撮像してもよい。
When “1. Take an image in an imageable area” is selected, the imaging determination unit 11d uses the
「2.撮像推奨領域において撮像する」が選択された場合、撮像判断部11dは、車両が経路上の撮像可能領域に位置し且つ撮像推奨領域に位置している時に、撮像装置20a〜20dを用いて、搭乗者及び車外の撮像対象物を撮像する。これにより、搭乗者及び車外の撮像対象物を撮像可能な経路上の領域でも、撮像対象物を特にすばらしく撮像出来ると予想される場合に撮像することができる。図6に示す例では、車両が撮像推奨領域R2を走行している間、撮像判断部11dは、撮像装置20a〜20dを用いて、搭乗者及び車外の撮像対象物を撮像する。
When “2. Take an image in the recommended imaging area” is selected, the imaging determination unit 11d selects the
「3.撮像非推奨領域では撮像しない」が選択された場合、撮像判断部11dは、車両が経路上の撮像可能領域に位置していても、撮像非推奨領域に位置している時には、撮像装置20a〜20dを用いて、搭乗者及び車外の撮像対象物を撮像しない。これにより、搭乗者及び車外の撮像対象物を撮像可能な経路上の領域でも、撮像対象物を上手く撮像出来ないと予想される場合には撮像しないようにできる。図6に示す例では、車両が撮像可能領域Rを走行していても、車両が撮像非推奨領域R1,R3に位置している時には、撮像判断部11dは、撮像装置20a〜20dを用いて、搭乗者及び車外の撮像対象物を撮像しない。
When “3. Do not capture in the imaging non-recommended region” is selected, the imaging determination unit 11d captures the image when the vehicle is positioned in the imaging non-recommended region even if the vehicle is positioned in the imaging possible region on the route. The
撮像判断部11dは、車両の搭乗者が操作部14を用いて選択された撮像領域を入力し、入力された撮像領域において、車両の走行中に撮像装置20a〜20dを用いて撮像する。
The imaging determination unit 11d inputs an imaging region selected by the vehicle occupant using the
次に、ステップS815において、車載装置10の処理部11の撮像判断部11dは、車両の搭乗者により選択される2つの撮像モードを表示部13に表示する。
Next, in step S815, the imaging determination unit 11d of the
「1.第1撮像装置と同期して撮像する」が選択された場合、撮像判断部11dは、運転席に着座している搭乗者を撮像する撮像装置20aに対して、撮像可能と判断した時には、撮像装置20aに撮像させると共に、他の撮像装置20b〜20dにも撮像させる。これにより、撮像装置20aは、運転席に着座している搭乗者及び車外の撮像対象物を撮像すると共に、この撮像と同期して、他の座席に着座している搭乗者を、他の撮像装置20b〜20dを用いて撮像することができる。これにより、例えば車外の雄大な景色に見とれている各搭乗者の表情等を撮像することできる。なお、第1撮像装置は、撮像装置20a以外の他の撮像装置としてもよい。
When “1. Capture in synchronization with first imaging device” is selected, imaging determination unit 11d determines that imaging is possible for
「2.各撮像装置は独立して撮像する」が選択された場合、撮像判断部11dは、車両に着座している各搭乗者を撮像する撮像装置20a〜20dに対して、撮像可能と判断した時には、各撮像装置20aに撮像させる。各撮像装置20a〜20dの光軸方向A1〜A4は通常異なっているので、撮像可能と判断されるタイミングも異なる。そこで、撮像判断部11dは、各撮像装置20a〜20dに対して撮像可能か否かを判断して、撮像可能な時に、搭乗者及び車外の撮像対象物をそれぞれ撮像することができる。
When “2. Each imaging device captures images independently” is selected, the imaging determination unit 11d determines that imaging is possible for the
撮像判断部11dは、車両の搭乗者が操作部14を用いて選択された撮像モードを入力し、入力された撮像モードにおいて、車両の走行中に撮像装置20a〜20dを用いて撮像する。
The imaging determination unit 11d inputs an imaging mode selected by a vehicle occupant using the
以上が、システム1において、車載装置10が撮像装置20a〜20dの光軸方向を決定して、サーバ40から撮像対象物情報を受信する処理等の説明である。
The above is description of the process etc. in which the vehicle-mounted
次に、車載装置10が目的地までの経路の走行中に撮像対象物を撮像する動作について、図11及び図12に示すフローチャートを参照しながら、以下に説明する。
Next, an operation in which the in-
まず、ステップS1101において、車載装置10の処理部11のナビゲーション部11cは、車両の搭乗者から目的地を入力して、現在の車両の位置から目的地までの経路を導出する。
First, in step S1101, the navigation unit 11c of the
次に、ステップS1103において、撮像判断部11dは、記憶部12に記憶される地図データ12b及び撮像対象物表12dを参照して、現在の車両の位置から目的地までの経路において、走行予定の経路から所定の距離以内に位置する撮像対象物を検索する。そして、撮像判断部11dは、選択された撮像モード(図10参照)に基づいて、撮像装置20a〜20dに対して、撮像部21の光軸方向が、撮像対象物の位置と交差する経路上の位置を撮像可能領域として求める。第1撮像装置(撮像装置20a)と同期して撮像する撮像モードが選択されている場合には、撮像判断部11dは、撮像装置20aに対して撮像可能領域を求める。一方、各撮像装置は独立して撮像する撮像モードが選択されている場合には、撮像判断部11dは、各撮像装置20a〜20dに対する撮像可能領域を求める。走行予定の経路から所定の距離以内に位置する撮像対象物を検索する理由は、経路からあまりに遠くに位置する撮像対象物は、通常、撮像できないと考えられるからである。所定の距離は、経路が延びる向きに対して直交する向きの距離である。所定の距離としては、例えば、1km〜200kmとすることができる。なお、天候によっては、撮像対象物が所定の距離以内に位置していても撮像できない場合もあるが、本明細書では、撮像可能領域は、天候が悪くなければ、搭乗者及び車外の撮像対象物を撮像可能な経路上の位置を意味する。従って、本明細書において、撮像可能領域において撮像装置20a〜20dが搭乗者及び車外の撮像対象物を撮像することには、天候又は予期していない状態によっては、撮像対象物が実際には撮像されない場合も含まれる。予期していない状態としては、例えば、経路と撮像対象物との間に、新たな建物が建設されていること等が挙げられる。
Next, in step S1103, the imaging determination unit 11d refers to the
走行予定の経路から所定の距離以内に位置する撮像対象物が存在しない場合には、ナビゲーション部11cは、目的地までの経路案内を続ける。ここでは、少なくとも1つの撮像対象物が検索されたとして、以下の説明を行う。 If there is no imaging object located within a predetermined distance from the planned travel route, the navigation unit 11c continues route guidance to the destination. Here, the following description will be given on the assumption that at least one imaging object has been searched.
そして、撮像判断部11dは、選択された撮像領域(図9参照)に基づいて、記憶部12に記憶された撮像推奨領域表12e又は撮像非推奨領域表12fを参照して、求められた撮像可能領域から撮像を実行しない領域を除外して、最終的な撮像可能領域を決定する。 Then, the imaging determination unit 11d refers to the imaging recommended region table 12e or the imaging non-recommended region table 12f stored in the storage unit 12 based on the selected imaging region (see FIG. 9), and the obtained imaging. The final imageable region is determined by excluding the region where imaging is not performed from the possible region.
撮像判断部11dは、ナビゲーション部11cが求めた経路と共に、撮像対象物の名称を、地図画像に重畳させて表示部13に表示してもよい。これにより、車両の搭乗者は、撮像可能となる経路上の位置を把握することができる。
The imaging determination unit 11d may display the name of the imaging object on the
次に、ステップS1105において、ナビゲーション部11cは、車両が走行を開始するのと共に、ナビゲーション機能の実行を開始して、経路案内を行う。 Next, in step S1105, the navigation unit 11c performs route guidance by starting execution of the navigation function as the vehicle starts traveling.
次に、ステップS1107において、撮像判断部11dは、撮像可能領域に到達するまでの予測時間が、所定の時間になったか否かを判断する。所定の時間は、撮像の予告の通知を受けた搭乗者が、撮像に備えた準備を行える時間とすることが好ましい。例えば、所定の時間としては、10秒とすることができる。ここで、所定の時間には、ある程度の幅を持たせてもよい。例えば、予測時間が、所定の時間としての9秒から11秒の間であれば、予測時間が所定の時間になったと判断してもよい。また、複数の撮像可能領域がある場合には、予測時間は、現在の車両の位置に対して、車両の進行方向において最も近い位置ある撮像可能領域に到達するまでの時間を意味する。 Next, in step S1107, the imaging determination unit 11d determines whether or not the predicted time until reaching the imageable area has reached a predetermined time. It is preferable that the predetermined time is a time during which a passenger who has received a notice of imaging notice can prepare for imaging. For example, the predetermined time can be 10 seconds. Here, the predetermined time may have a certain range. For example, if the predicted time is between 9 seconds and 11 seconds as the predetermined time, it may be determined that the predicted time has reached the predetermined time. In addition, when there are a plurality of imageable areas, the predicted time means the time required to reach an imageable area that is closest to the current vehicle position in the traveling direction of the vehicle.
撮像判断部11dは、現在の車両の位置から撮像可能領域までの距離と、現在の車両の速度とに基づいて、撮像可能領域に到達するまでの予測時間を求める。例えば、車両の速度が時速50kmの場合には、撮像可能領域から約139m手前の位置において、予測時間が10秒となる。また、車両の速度が時速100kmの場合には、撮像可能領域から約278m手前の位置において、予測時間が10秒となる。 The imaging determination unit 11d obtains a predicted time until the imaging possible area is reached based on the distance from the current vehicle position to the imaging possible area and the current vehicle speed. For example, when the vehicle speed is 50 km / h, the estimated time is 10 seconds at a position approximately 139 m before the imageable area. When the vehicle speed is 100 km / h, the estimated time is 10 seconds at a position about 278 m before the imageable area.
撮像可能領域に到達するまでの予測時間が、所定の時間になった場合(ステップS1107においてYesの場合)には、撮像判断部11dは、車両が撮像可能領域に近づいていることを、表示部13又は音響出力部15を用いて、搭乗者に通知する(ステップS1109)。
When the predicted time until reaching the imageable area reaches a predetermined time (Yes in step S1107), the imaging determination unit 11d displays that the vehicle is approaching the imageable area. 13 or the
図13は、撮像を通知する画面を示す図である。 FIG. 13 is a diagram illustrating a screen for notifying imaging.
撮像判断部11dは、例えば、図13に示すように、「10秒後に搭乗者及び撮像対象物を撮像します」と、表示部13に表示してもよい。
For example, as illustrated in FIG. 13, the imaging determination unit 11 d may display on the
また、撮像判断部11dは、車両が撮像可能領域に近づいていることを通知した時から撮像可能領域に到達するまでの時間をカウントダウンして、表示部13又は音響出力部15を用いて、搭乗者に通知してもよい。これにより、運転席以外に着座している搭乗者は、撮像部21に向かってポーズを取ったりして、撮像に備えることができる。
In addition, the imaging determination unit 11d counts down the time from when it is notified that the vehicle is approaching the imageable area until it reaches the imageable area, and boarding using the
一方、撮像可能領域に到達するまでの予測時間が、所定の時間になっていない場合(ステップS1107においてNoの場合)には、ステップS1105の前に戻る。 On the other hand, if the predicted time until reaching the imageable region is not the predetermined time (No in step S1107), the process returns to the step before S1105.
次に、ステップS1111において、ナビゲーション部11cは、ナビゲーション機能を実行して、経路案内を続ける。 Next, in step S1111, the navigation unit 11c executes a navigation function and continues route guidance.
次に、ステップS1113において、撮像判断部11dは、車両が撮像可能領域に到達したか否かを判断する。上述したように、撮像可能領域では、地図座標系において、撮像部21の光軸方向が、撮像対象物と交差しており、撮像装置20a〜20bを用いて、搭乗者及び車外の撮像対象物が1つの画像に含まれるように撮像可能である。
Next, in step S1113, the imaging determination unit 11d determines whether or not the vehicle has reached the imageable area. As described above, in the mappable area, the optical axis direction of the
車両が撮像可能領域に到達したと判断された場合(ステップS1113においてYesの場合)、撮像判断部11dは、撮像モードに基づいて、撮像可能と判断された撮像装置20a〜20dを用いて、搭乗者及び車外の撮像対象物を撮像する(ステップS1201)。図14は、撮像装置20aを用いて、運転席に着座する搭乗者及び車外の撮像対象物が撮像された画像を示す。撮像判断部11dは、撮像した画像を、画像データ12cとして、記憶部12に記憶するまた、撮像判断部11dは、撮像した画像を、ネットワークNを介してサーバ40へ送信してもよい。サーバ40は、受信した画像を記憶部42に記憶してもよい。
When it is determined that the vehicle has reached the imageable area (Yes in step S1113), the imaging determination unit 11d uses the
一方、車両が撮像可能領域に到達していないと判断された場合(ステップS1113においてNoの場合)、ステップS1111の前に戻る。 On the other hand, if it is determined that the vehicle has not reached the imageable region (No in step S1113), the process returns to step S1111.
次に、ステップS1203において、ナビゲーション部11cは、ナビゲーション機能を実行して、経路案内を続ける。 Next, in step S1203, the navigation unit 11c executes a navigation function and continues route guidance.
次に、ステップS1205において、ナビゲーション部11cは、車両が目的地に到着したか否かを判断する。車両が目的地に到着した場合(ステップS1205においてYesの場合)には、車載装置10は、撮像対象物を撮像する動作を終了する。一方、車両が目的地に到着していない場合(ステップS1205においてNoの場合)には、ステップS1105の前に戻る。
In step S1205, the navigation unit 11c determines whether the vehicle has arrived at the destination. If the vehicle has arrived at the destination (Yes in step S1205), the in-
上述した本実施形態のシステム1の車載装置10によれば、車両の走行中に、車両に搭乗している搭乗者及び車外の撮像対象物が1つの画像に含まれるように撮像できる。
According to the in-
例えば、従来では、車両に搭乗している搭乗者が運転手のみである場合には、車外の撮像対象物を撮像する場合には、車両を停止して、運転手は撮像することを行っていた。一方、本実施形態の車載装置10によれば、走行中の車両を停止することなく、運転席に着座している搭乗者及び車外の撮像対象物を撮像することができる。
For example, conventionally, when the driver who is in the vehicle is only the driver, when imaging the imaging object outside the vehicle, the vehicle is stopped and the driver performs imaging. It was. On the other hand, according to the in-
また、従来では、走行中の車両では、搭乗者が車外の撮像対象物を撮像する場合には、撮像に最も適したタイミングからずれて撮像することがあった。一方、本実施形態の車載装置10によれば、経路上の撮像可能領域を求めて撮像するので、撮像に最も適したタイミングにおいて撮像することが可能である。
Conventionally, in a traveling vehicle, when a passenger images an object to be imaged outside the vehicle, the image is sometimes deviated from the most suitable timing for imaging. On the other hand, according to the in-
本発明では、上述した実施形態の車載システム、車載装置、プログラム及び方法は、本発明の趣旨を逸脱しない限り適宜変更が可能である。 In the present invention, the in-vehicle system, the in-vehicle apparatus, the program, and the method according to the above-described embodiments can be appropriately changed without departing from the gist of the present invention.
例えば、上述した車載装置は、高機能携帯端末であってもよい。上述した車載装置は、ナビゲーション機能及び撮像機能を有する高機能携帯端末を用いても実現可能である。 For example, the above-described in-vehicle device may be a high function portable terminal. The above-described in-vehicle device can be realized even by using a high-function mobile terminal having a navigation function and an imaging function.
図15は、車載装置の他の実施形態としての高機能携帯端末を示す図である。 FIG. 15 is a diagram illustrating a high-function mobile terminal as another embodiment of the in-vehicle device.
高機能携帯端末90は、撮像部91と、表示部及び操作部としてのタッチパネル92を有する。また、高機能携帯端末90は、図示しない処理部、記憶部、音響出力部、通信部及びGPS情報受信部を有する。高機能携帯端末90は、CANと接続して車両の速度を受信してもよいし、現在の位置の変化に基づいて、車両の速度を求めてもよい。
The high function
高機能携帯端末90は、マウンタ100を用いて車室内に固定される。
The high function
マウンタ100は、高機能携帯端末90を固定する可動部101と、可動部101を回動可能に車室内に固定する固定部102を有する。
The
可動部101は、4つの係止部101a〜101dを有しており、これらの係止部101a〜101dを用いて、高機能携帯端末90が可動部101に固定される。
The
固定部102は、車両座標系に対して所定の位置関係に基づいて、車室内に固定される。例えば、固定部102は、ダッシュボードの左端上の位置に固定される。これにより、高機能携帯端末90の撮像部91を用いて、運転席に着座した搭乗者及び車外の撮像対象物を撮像するように、撮像部91の光軸方向を設定可能となる。
The fixing
可動部101は、図15中の矢印の向きに示すように、固定部102に対して回動可能である。これにより、可動部101に固定された高機能携帯端末90の向きを変えて、車内の搭乗者を含んで車外を撮像するように、撮像部91の光軸方向を設定できる。
The
固定部102には、固定部102に対する可動部101の位置関係を示す指標102aが表示される。
An indicator 102 a indicating the positional relationship of the
可動部101の下部には、光軸方向指数101eが表示されており、指標102aと一致する位置の光軸方向指数101eを読み取ることにより、固定部102に対する可動部101の位置関係が得られるようになされている。
An optical axis direction index 101e is displayed below the
車両の搭乗者は、タッチパネル92の画像を見ながら撮像部91の光軸方向及び倍率を設定した後、指標102aと一致する位置の光軸方向指数101eを読み取り、読み取られた光軸方向指数101eを、高機能携帯端末90に入力する。
The vehicle occupant sets the optical axis direction and magnification of the imaging unit 91 while viewing the image on the touch panel 92, and then reads the optical axis direction index 101e at the position that coincides with the index 102a, and the read optical axis direction index 101e. Is input to the high function
高機能携帯端末90は、入力された光軸方向指数101eと、車室に固定された固定部102の車両座標系に対する所定の位置関係とに基づいて、撮像部91の光軸方向を、車両に固定された車両座標系に対して決定する。
Based on the input optical axis direction index 101e and a predetermined positional relationship with respect to the vehicle coordinate system of the fixed
高機能携帯端末90は、上述した実施形態の車載装置10と同様の動作が可能であり、撮像部91の光軸方向と、車外の撮像対象物との位置関係に基づいて、搭乗者及び撮像対象物を撮像可能か判断し、撮像可能な場合に搭乗者及び撮像対象物を撮像部91を用いて撮像する。
The high-function mobile terminal 90 can operate in the same manner as the in-
また、上述した実施形態では、処理部11は、撮像部21の光軸方向が、撮像対象物の位置と交差した時に、搭乗者及び撮像対象物を撮像可能であると判断していたが、撮像部21の視野内に、撮像対象物が含まれる時に、搭乗者及び撮像対象物を撮像可能であると判断してもよい。
In the above-described embodiment, the
1 システム
10 車載装置
11 処理部
11a 光軸方向決定部
11b 撮像対象物設定部
11c ナビゲーション部
11d 撮像判断部
12 記憶部
12a プログラム
12b 地図データ
12c 画像データ
12d 撮像対象物表
12e 撮像推奨領域表
12f 撮像非推奨領域表
13 表示部(出力)
14 操作部
15 音響出力部
16 通信部(出力部)
20a〜20d 撮像装置
21 撮像部
22 光軸調整部
30 GPS情報受信部
40 サーバ
41 処理部
42 記憶部
43 通信部
50 車両
51a〜51d 搭乗者
60 撮像対象物
70 経路
80 障害物
81 障害物
90 端末
91 撮像部
100 マウンタ
101 可動部
101a〜101d 係止部
101e 光軸方向指数
102 固定部
102a 指標
N ネットワーク
P 画像
DESCRIPTION OF
14
20a to
Claims (9)
車外の撮像対象物の位置を取得し、前記撮像部の光軸方向と車外の撮像対象物との位置関係に基づいて、搭乗者及び撮像対象物を撮像可能か判断し、撮像可能な場合に搭乗者及び撮像対象物を含む画像を前記撮像部に撮像させる処理部と、
撮像された画像を出力する出力部と、
を備える車載システム。 An imaging unit for acquiring an image;
When the position of the imaging object outside the vehicle is acquired, it is determined whether the passenger and the imaging object can be imaged based on the positional relationship between the optical axis direction of the imaging unit and the imaging object outside the vehicle, and when the imaging is possible A processing unit that causes the imaging unit to capture an image including a passenger and an imaging target;
An output unit for outputting the captured image;
An in-vehicle system.
前記処理部は、搭乗者及び撮像対象物を撮像可能であると判断し、且つ、車両が前記撮像推奨領域に位置している時に、搭乗者及び撮像対象物を前記撮像部に撮像させる請求項1〜3の何れか一項に記載の車載システム。 In the route traveled by the vehicle on which the in-vehicle device is mounted, an imaging recommended area recommended to image an imaging object outside the vehicle is set,
The processing unit determines that the passenger and the imaging object can be imaged, and causes the imaging unit to image the passenger and the imaging object when a vehicle is located in the recommended imaging area. The vehicle-mounted system as described in any one of 1-3.
前記処理部は、搭乗者及び撮像対象物を撮像可能であると判断した場合でも、車両が前記撮像非推奨領域に位置している時には、搭乗者及び撮像対象物を前記撮像部に撮像させない請求項1〜4の何れか一項に記載の車載システム。 An imaging non-recommended area where it is not recommended to image an imaging object outside the vehicle is set in the route traveled by the vehicle on which the in-vehicle device is mounted,
Even when it is determined that the passenger and the imaging object can be imaged, the processing unit does not cause the imaging unit to image the passenger and the imaging object when the vehicle is located in the imaging non-recommended region. The in-vehicle system according to any one of Items 1 to 4.
前記処理部は、前記第1撮像部の第1の光軸方向と、車外の撮像対象物との位置関係に基づいて、搭乗者及び撮像対象物を撮像可能か判断し、撮像可能な場合に搭乗者及び撮像対象物を前記第1撮像部に撮像させると共に、前記第2撮像部にも撮像させる、請求項1〜5の何れか一項に記載の車載システム。 The imaging unit includes a first imaging unit having a first optical axis direction, and a second imaging unit having a second optical axis direction,
The processing unit determines whether the passenger and the imaging object can be imaged based on the positional relationship between the first optical axis direction of the first imaging unit and the imaging object outside the vehicle. The in-vehicle system according to any one of claims 1 to 5, wherein a passenger and an imaging target are imaged by the first imaging unit, and the second imaging unit is also imaged.
を備える車載装置。 Acquire the position of the imaging object outside the vehicle, determine whether the passenger and the imaging object can be imaged based on the positional relationship between the optical axis direction of the imaging unit that acquires the image and the imaging object outside the vehicle, and capture the image A processing unit that causes the imaging unit to capture an image including a passenger and an imaging target in such a case,
A vehicle-mounted device comprising:
画像を取得する撮像部の光軸方向と、車外の撮像対象物との位置関係に基づいて、搭乗者及び撮像対象物を含む画像を撮像可能か判断することと、
撮像可能な場合に、前記撮像部を用いて搭乗者及び撮像対象物の画像を撮像することを、プロセッサに実行させるプログラム。 Acquiring the position of the imaging object outside the vehicle;
Determining whether an image including the passenger and the imaging target can be captured based on the positional relationship between the optical axis direction of the imaging unit that acquires the image and the imaging target outside the vehicle;
A program that causes a processor to execute imaging of a passenger and an imaging object using the imaging unit when imaging is possible.
画像を取得する撮像部の光軸方向と、車外の撮像対象物との位置関係に基づいて、搭乗者及び撮像対象物を含む画像を撮像可能か判断することと、
撮像可能な場合に、前記撮像部を用いて搭乗者及び撮像対象物を含む画像を撮像すること、
を備える方法。 Acquiring the position of the imaging object outside the vehicle;
Determining whether an image including the passenger and the imaging target can be captured based on the positional relationship between the optical axis direction of the imaging unit that acquires the image and the imaging target outside the vehicle;
When imaging is possible, taking an image including a passenger and an imaging object using the imaging unit,
A method comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017024017A JP6887263B2 (en) | 2017-02-13 | 2017-02-13 | In-vehicle systems, in-vehicle devices, programs and methods |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017024017A JP6887263B2 (en) | 2017-02-13 | 2017-02-13 | In-vehicle systems, in-vehicle devices, programs and methods |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018132320A true JP2018132320A (en) | 2018-08-23 |
JP6887263B2 JP6887263B2 (en) | 2021-06-16 |
Family
ID=63249603
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017024017A Active JP6887263B2 (en) | 2017-02-13 | 2017-02-13 | In-vehicle systems, in-vehicle devices, programs and methods |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6887263B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020095406A (en) * | 2018-12-11 | 2020-06-18 | トヨタ自動車株式会社 | On-vehicle device, program, and vehicle |
-
2017
- 2017-02-13 JP JP2017024017A patent/JP6887263B2/en active Active
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020095406A (en) * | 2018-12-11 | 2020-06-18 | トヨタ自動車株式会社 | On-vehicle device, program, and vehicle |
CN111301284A (en) * | 2018-12-11 | 2020-06-19 | 丰田自动车株式会社 | In-vehicle device, program, and vehicle |
JP7200645B2 (en) | 2018-12-11 | 2023-01-10 | トヨタ自動車株式会社 | In-vehicle device, program, and vehicle |
Also Published As
Publication number | Publication date |
---|---|
JP6887263B2 (en) | 2021-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4293917B2 (en) | Navigation device and intersection guide method | |
CN111301284B (en) | In-vehicle device, program, and vehicle | |
JP2005318519A (en) | Imaging apparatus for vehicles | |
JP2007080060A (en) | Object specification device | |
JP6207715B2 (en) | Navigation system, image server, portable terminal, navigation support method, and navigation support program | |
JP2005326956A (en) | Device and method for informing empty space in parking lot | |
JP2010134640A (en) | Information acquisition apparatus | |
EP1669722A1 (en) | Vehicle-mounted communication device | |
JP2019200478A (en) | Server, vehicle photographing system, and vehicle photographing method | |
JP2015021918A (en) | Operation support system, method and program | |
JP6179166B2 (en) | Point display system, method and program | |
JP6887263B2 (en) | In-vehicle systems, in-vehicle devices, programs and methods | |
CN110301133B (en) | Information processing apparatus, information processing method, and computer-readable recording medium | |
JP2008213759A (en) | On-vehicle display device | |
WO2012039022A1 (en) | Information communicating apparatus, information communicating method, information communicating program, and information communicating system | |
JP6221562B2 (en) | Vehicle information presentation device | |
JP2002213973A (en) | Image acquiring device and image acquiring method, and program for acquiring image | |
JP2005333226A (en) | Video conference system for vehicle | |
JP2012220259A (en) | In-vehicle apparatus and vehicle azimuth correction method thereof | |
JP2004064409A (en) | Information recording device, information recording method, and information recording program | |
JP2010135889A (en) | Portable communication terminal, photographing system, and photographed image storage method | |
JP2009009225A (en) | Information display device | |
JP2008305283A (en) | Drive support apparatus and drive support method | |
KR100833603B1 (en) | Navigation system for providing bird view and method thereof | |
JP2006031583A (en) | On-vehicle system and remote observation system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200207 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201201 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201208 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210204 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210420 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210518 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6887263 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |