JP2020093622A - 制御システム、サーバ、車載制御装置、車両、及び制御方法 - Google Patents

制御システム、サーバ、車載制御装置、車両、及び制御方法 Download PDF

Info

Publication number
JP2020093622A
JP2020093622A JP2018231857A JP2018231857A JP2020093622A JP 2020093622 A JP2020093622 A JP 2020093622A JP 2018231857 A JP2018231857 A JP 2018231857A JP 2018231857 A JP2018231857 A JP 2018231857A JP 2020093622 A JP2020093622 A JP 2020093622A
Authority
JP
Japan
Prior art keywords
vehicle
occupant
control device
setting state
setting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2018231857A
Other languages
English (en)
Inventor
伸 桜田
Shin Sakurada
伸 桜田
岡本　淳
Atsushi Okamoto
淳 岡本
丈亮 山根
Josuke Yamane
丈亮 山根
梨紗子 山本
Risako Yamamoto
梨紗子 山本
和紀 杉江
Kazuki Sugie
和紀 杉江
正俊 小見山
Masatoshi Komiyama
正俊 小見山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2018231857A priority Critical patent/JP2020093622A/ja
Priority to US16/671,441 priority patent/US20200180533A1/en
Priority to CN201911229290.6A priority patent/CN111301285A/zh
Publication of JP2020093622A publication Critical patent/JP2020093622A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60H—ARRANGEMENTS OF HEATING, COOLING, VENTILATING OR OTHER AIR-TREATING DEVICES SPECIALLY ADAPTED FOR PASSENGER OR GOODS SPACES OF VEHICLES
    • B60H1/00—Heating, cooling or ventilating [HVAC] devices
    • B60H1/00642—Control systems or circuits; Control members or indication devices for heating, cooling or ventilating devices
    • B60H1/00735—Control systems or circuits characterised by their input, i.e. by the detection, measurement or calculation of particular conditions, e.g. signal treatment, dynamic models
    • B60H1/00742—Control systems or circuits characterised by their input, i.e. by the detection, measurement or calculation of particular conditions, e.g. signal treatment, dynamic models by detection of the vehicle occupants' presence; by detection of conditions relating to the body of occupants, e.g. using radiant heat detectors
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60H—ARRANGEMENTS OF HEATING, COOLING, VENTILATING OR OTHER AIR-TREATING DEVICES SPECIALLY ADAPTED FOR PASSENGER OR GOODS SPACES OF VEHICLES
    • B60H1/00—Heating, cooling or ventilating [HVAC] devices
    • B60H1/00642—Control systems or circuits; Control members or indication devices for heating, cooling or ventilating devices
    • B60H1/00964—Control systems or circuits characterised by including features for automatic and non-automatic control, e.g. for changing from automatic to manual control
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
    • B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
    • B60N2/02—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles the seat or part thereof being movable, e.g. adjustable
    • B60N2/0224—Non-manual adjustments, e.g. with electrical operation
    • B60N2/0244—Non-manual adjustments, e.g. with electrical operation with logic circuits
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
    • B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
    • B60N2/02—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles the seat or part thereof being movable, e.g. adjustable
    • B60N2/0224—Non-manual adjustments, e.g. with electrical operation
    • B60N2/0244—Non-manual adjustments, e.g. with electrical operation with logic circuits
    • B60N2/0248—Non-manual adjustments, e.g. with electrical operation with logic circuits with memory of positions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
    • B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
    • B60N2/02—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles the seat or part thereof being movable, e.g. adjustable
    • B60N2/0224—Non-manual adjustments, e.g. with electrical operation
    • B60N2/0244—Non-manual adjustments, e.g. with electrical operation with logic circuits
    • B60N2/0268—Non-manual adjustments, e.g. with electrical operation with logic circuits using sensors or detectors for adapting the seat or seat part, e.g. to the position of an occupant
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/44—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for communication between vehicles and infrastructures, e.g. vehicle-to-cloud [V2C] or vehicle-to-home [V2H]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/50—Service provisioning or reconfiguring
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
    • B60N2210/00—Sensor types, e.g. for passenger detection systems or for controlling seats
    • B60N2210/10—Field detection presence sensors
    • B60N2210/16—Electromagnetic waves
    • B60N2210/22—Optical; Photoelectric; Lidar [Light Detection and Ranging]
    • B60N2210/24—Cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
    • B60N2220/00—Computerised treatment of data for controlling of seats
    • B60N2220/10—Computerised treatment of data for controlling of seats using a database
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
    • B60N2220/00—Computerised treatment of data for controlling of seats
    • B60N2220/20—Computerised treatment of data for controlling of seats using a deterministic algorithm
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/0003—Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
    • B60R2011/0028—Ceiling, e.g. roof rails
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8006—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying scenes of vehicle interior, e.g. for monitoring passengers or cargo

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • Thermal Sciences (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Abstract

【課題】車両の乗員の利便性を向上させる。【解決手段】制御システム１に、互いに情報を送受信する車載制御装置１３とサーバ１０とを設ける。前記車載制御装置は、乗員１２の撮像画像を取得する画像取得部１４と、前記車両の装備の設定状態を取得する設定状態取得部と、前記撮像画像または当該撮像画像から検出される前記乗員の識別情報と前記設定状態とを前記サーバに送信する送信部とを有し、前記サーバは、前記乗員と前記設定状態とを対応付けた設定情報を記憶する記憶部と、前記設定情報が記憶された後、前記車載制御装置または他の車載制御装置にて前記乗員が撮像されると、当該乗員に対応づけられた前記設定状態を当該車載制御装置または当該他の車載制御装置に送信する送信部とを有する。【選択図】図１

Description

本開示は、制御システム、サーバ、車載制御装置、車両、及び制御方法に関する。
車両内の乗員の状況を監視したり記録したりするために車両内を撮像する車載カメラが知られている。かかる車載カメラを用いた技術として、たとえば、特許文献１には、同乗者の顔を撮像、認識し、顔画像に基づいて車両の各種装備を制御するシステムが開示される。
特開２００１−０９７０７０号公報
特許文献１の技術は、同乗者の性別、年齢といった属性を画像により識別して、属性に応じた態様で車両の装備を制御することで、運転者の運転を妨害しないように同乗者の行動を誘導する。しかしながら、運転者、同乗者を問わず、車両の乗員の快適性、利便性に資するという点において、改善の余地がある。
そこで、上記に鑑み、本発明の目的は、車両の乗員の利便性を向上させる制御システム等を提供することにある。
本開示の一実施形態に係る制御システムは、互いに情報を送受信する車載制御装置とサーバとを有する。前記車載制御装置は、乗員の撮像画像を取得する画像取得部と、車両の装備の設定状態を取得する設定状態取得部と、前記撮像画像または当該撮像画像から検出される前記乗員の識別情報と前記設定状態とを前記サーバに送信する送信部とを有し、前記サーバは、前記乗員と前記設定状態とを対応付けた設定情報を記憶する記憶部と、 前記設定情報が記憶された後、前記車載制御装置または他の車載制御装置にて前記乗員が撮像されると、当該乗員に対応づけられた前記設定状態を当該車載制御装置または当該他の車載制御装置に送信する送信部とを有する。
本開示の別の態様に係るサーバは、車載制御装置から、車両内における乗員の撮像画像、または当該撮像画像から検出される前記乗員の情報と、前記車両の装備の設定情報とを受信する受信部と、前記乗員と前記設定状態とを対応付けた設定情報を記憶する記憶部と、前記設定情報が記憶された後、前記車載制御装置または他の車載制御装置にて前記乗員が撮像されると、当該乗員に対応づけられた前記設定状態を当該車載制御装置または当該他の車載制御装置に送信する送信部とを有する。
本開示の別の態様に係る車載制御装置は、車両内を撮像して乗員の撮像画像を生成する撮像部と、前記車両の装備の設定情報を検出する検出部と、前記撮像画像または当該撮像画像から検出される前記乗員の情報と前記設定状態とを、当該乗員を撮像する車載制御装置に当該設定状態を送信するために当該乗員と当該設定状態とを対応付けた設定情報を記憶するサーバに、送信する送信部と、を有する。
本開示の別の態様に係る車載制御装置は、車両内を撮像して乗員の撮像画像を生成する撮像部と、前記車両の装備の設定情報を検出する検出部と、前記撮像画像または当該撮像画像から検出される前記乗員の情報と前記設定状態とを、当該乗員を撮像する車載制御装置に当該設定状態を送信するために当該乗員と当該設定状態とを対応付けた設定情報を記憶するサーバに、送信する送信部と、を有する。
本開示の別の態様に係る制御方法は、互いに情報を送受信する車載制御装置とサーバの制御方法であって、前記車載制御装置が、車両内を撮像して乗員の撮像画像を生成し、前記車両の装備の設定情報を取得し、前記車載制御装置または前記サーバが、前記撮像画像から前記乗員を認識し、前記サーバが、前記乗員と前記設定状態とを対応付けた設定情報を記憶し、前記設定情報が記憶された後、前記車載制御装置または他の車載制御装置が、前記乗員を撮像すると、前記サーバが、当該乗員に対応づけられた前記設定状態を当該車載制御装置または当該他の車載制御装置に送信し、前記または前記他の車載制御装置が、前記設定状態を受信し、受信した当該設定状態を車両内で再現する指示を出力する。
本開示における制御システム等によれば、車両の乗員の利便性を向上させることができる。
制御システムの構成を示す図である。 サーバの構成を示す図である。 車載制御装置等の構成を示す図である。 車載制御装置の動作を示すフローチャート図である。 サーバの動作を示すフローチャート図である。 設定情報の例を示す図である。 車載制御装置の動作を示すフローチャート図である。 サーバの動作を示すフローチャート図である。
以下、図面を参照しつつ、本発明の一実施形態について説明する。
図１は、一実施形態に係る制御システム１の構成を示す。制御システム１は、サーバ１０と、車両１１に搭載される車載制御装置１３とを有する。サーバ１０と車載制御装置１３は、有線または無線により、ネットワーク１８を介して互いに情報通信可能に接続される。制御システム１は、複数の車両１１にそれぞれ搭載される複数の車載制御装置１３を有してもよい。かかる構成において、サーバ１０及び車載制御装置１３は、それぞれ相互に各種情報を送受信する。
車両１１は、たとえば自動車であるが、これに限られずユーザが乗車可能な任意の車両であってもよい。車両１１には、撮像装置１４が備えられる。撮像装置１４は、車両１１の車室内においてルームミラー内またはその近傍に取り付けられ、車室内を撮像するインカメラを有する。インカメラは、たとえば、車両１１の進行方向に向かった状態で車両１１に搭乗する乗員（運転者または同乗者）１２を被写体として、略正面から撮像する。また車両１１には、ナビゲーション・ＡＶ（Audio and Visual）装置１５、空調装置１６、座席調節装置１７といった装備（以降、集合的に装備１９と称する）が備えられる。車載制御装置１３は、撮像装置１４及び装備１９と、たとえば車内ＬＡＮ（Local Area Network）で情報伝達可能に接続される。そして、車載制御装置１３は、撮像装置１４及び装備１９の状態を検出したり動作を制御したりする。
乗員１２は、車両１１に搭乗する際、空調、座席の高さ・角度、視聴する楽曲・映像、走行の目的地（たとえば、自宅、職場など）といった、車両１１の装備１９の設定状態を、好みまたは必要に応じて設定する。制御システム１は、車載制御装置１３とサーバ１０の連携動作により、乗員１２を撮像し画像認識するとともに、装備１９に対する乗員１２所望の設定状態を検出し、乗員１２と所望の設定状態とを対応づけてサーバ１０にて記憶する。その後、乗員１２が同じ車両１１または別車両１１に搭乗すると、乗員１２が撮像画像により認識され、その乗員に対応する設定状態をサーバ１０から車載制御装置１３が取得する。そうすることで、サーバ１０から乗員１２の所望の設定状態を取得することができ、たとえば、乗員１２が自家用車に搭乗するときだけでなくレンタカーに搭乗するときにも、常時所望の設定状態が再現。よって、乗員の快適性、利便性が向上する。さらに、乗員１２が、シェアカー、タクシーといった乗用旅客車両に乗客として搭乗するときにも、乗員１２の所望の設定状態が再現可能となる。よって、たとえばタクシー、シェアライドなどのサービスを提供する事業者が、乗用旅客車両において乗客を画像認識することで、それぞれの乗客の所望の車両状態を再現して提供できるので、サービス品質を向上させることができる。
図２は、サーバ１０の構成を示す。サーバ１０は、通信部２０、記憶部２１、及び制御部２２を有する。サーバ１０は、１つ又は互いに通信可能な複数のコンピュータである。
通信部２０は、ネットワーク１８に接続する１つ以上の通信モジュールを含む。たとえば、通信部２０は、有線ＬＡＮ（Local Area Network）規格に対応する通信モジュールを含んでもよい。本実施形態において、サーバ１０は、通信部２０を介してネットワーク１８に接続される。
記憶部２１は、１つ以上のメモリを含む。記憶部２１に含まれる各メモリは、例えば主記憶装置、補助記憶装置、またはキャッシュメモリとして機能する。記憶部２１は、サーバ１０の動作に用いられる任意の情報、制御・処理プログラム、及びデータベースを記憶する。
制御部２２は、１つ以上のプロセッサを有する。各プロセッサは、汎用のプロセッサ、または特定の処理に特化した専用のプロセッサであるが、これらに限られない。制御部２２は、記憶部２１に格納される制御・処理プログラムに従ってサーバ１０の動作を制御する。また、制御部２２は、現在時刻を把握する計時機能を有する。
図３は、車両１１における車載制御装置１３と、ナビゲーション・ＡＶ（Audio and Visual）装置１５、空調装置１６、座席調節装置１７といった装備１９の構成を示す。車載制御装置１３は、通信部３１、記憶部３２、及び制御部３３を有する。車載制御装置１３は、単一の装置であってもよいし、複数の装置により構成されてもよい。車載制御装置１３は、撮像装置１４及び装備１９と、たとえば車内ＬＡＮで情報伝達可能に接続される。そして、車載制御装置１３は、撮像装置１４及び装備１９の状態を検出したり動作を制御したりする。また、車載制御装置１３は、ここでは図示されない、車速、ブレーキの制動力、加速度、舵角、ヨーレート、方角等、車両１１の各種運動状態を検出する各種センサと接続され、これらセンサから検出結果を取得する。
車載制御装置１３の通信部３１は、１つ以上の通信モジュールを有する。通信モジュールは、たとえば、４Ｇ（4th Generation）及び５Ｇ（5th Generation）等の移動体通信規格に対応するモジュールを含む。また、通信部３１は、ＤＣＭ（Data Communication Module）等の通信機を有してもよい。車載制御装置１３は、通信部３１を介してネットワーク１８に接続され、サーバ１０と情報通信を行う。また、通信モジュールは、ＧＰＳ（Global Positioning System）受信モジュールを含む。車載制御装置１３は、通信部３１によりＧＰＳ信号を受信する。また、通信部３１は、車両１１の車内ＬＡＮのインタフェースを有する。通信部３１は、撮像装置１４、装備１９、各種センサ等と車内ＬＡＮを介して情報通信を行う。
車載制御装置１３の記憶部３２は、１つ以上のメモリを含む。記憶部３２に含まれる各メモリは、たとえば半導体メモリ、磁気メモリ、または光メモリ等であるが、これらに限られない。各メモリは、たとえば主記憶装置、補助記憶装置、またはキャッシュメモリとして機能する。記憶部３２は、車載制御装置１３の動作に用いられる任意の情報を記憶する。たとえば、記憶部３２は、制御・処理プログラム、及び組み込みソフトウェア等を記憶する。
車載制御装置１３の制御部３３は、１つ以上のプロセッサを有する。各プロセッサは、汎用のプロセッサ、または特定の処理に特化した専用のプロセッサであるが、これらに限られない。たとえば、車両１１に搭載されたＥＣＵ（Electronic Control Unit）が、制御部３３として機能してもよい。制御部３３は、車載制御装置１３の動作を統括的に制御する。また、制御部３３は、装備１９の状態を示す情報を収集して装備１９の状態を検出したり、装備１９に対しその動作を制御するための制御信号を送出したりする。さらに、制御部３３は、現在時刻を把握する計時機能を有する。
撮像装置１４は、車載制御装置１３による制御のもと、車両１１の車室内を撮像するインカメラとその制御回路とを有する。撮像装置１４が有するカメラは、単眼カメラであってもよく、ステレオカメラであってもよい。撮像装置１４は、制御部３３からの指示に応答して車室内の乗員１２を被写体として撮像し、撮像画像データを生成して制御部３３に送る。
ナビゲーション・ＡＶ装置１５は、乗員１２が入力する目的地までの経路案内を行ったり、放送またはネットワーク１８経由で配信される音声・画像データを車載制御装置１３の通信部３１から取得し、または内部の記憶部から音声・画像データを読み出して、音声・画像を出力したりする。ナビゲーション・ＡＶ装置１５は、乗員１２によるタッチ入力を受け付けるタッチスクリーン、音声入力を受け付けるマイクロフォン等、任意の入力インタフェースと、各種情報を乗員１２に対して出力する、パネルディスプレイ、ヘッドアップディスプレイ、スピーカ等、任意の出力インタフェースを有する。入出力インタフェースは、車両１１の運転席のみならず後部座席等、複数個所に設けられてもよい。ナビゲーション・ＡＶ装置１５は、乗員１２が設定する目的地、経路の好み（有料道路の使用・不使用等）、乗員１２が選択する放送・配信局、特定の番組、特定の楽曲・映像等といった設定状態を車載制御装置１３に送ったり、車載制御装置１３から送られる設定状態に基づいて自らを設定したりする。
空調装置１６は、エアコンディショナと、エアコンディショナの操作部及び制御回路とを有する。空調装置１６は、乗員１２の操作に応答して、車室内の冷暖房、除湿、換気等を行う。空調装置１６は、乗員１２が選択する機能（冷暖房、除湿、換気等）、設定温度といった設定状態を車載制御装置１３に送ったり、車載制御装置１３から送られる設定状態に基づいて自らを設定したりする。
座席調節装置１７は、乗員１２が座る座席の高さ、前後の位置、背もたれの角度等を駆動するアクチュエータと、アクチュエータの操作部及び制御回路とを有する。座席調節装置１７は、乗員１２の操作に応答して座席の高さ、前後の位置、背もたれの角度等を調節する。座席調節装置１７は、乗員１２が選択する座席の高さ、前後の位置、背もたれの角度といった設定状態を車載制御装置１３に送ったり、車載制御装置１３から送られる設定状態に基づいて自らを設定したりする。
次いで、図４Ａ、４Ｂを用いて、制御システム１の動作について説明する。
図４Ａは、車載制御装置１３の動作手順を示すフローチャート図である。図４Ｂは、車載制御装置１３の動作に応答して動作するサーバ１０の動作手順を示すフローチャート図である。
図４Ａの手順は、たとえば、乗員１２が車両１１に搭乗し、車載制御装置１３に電源が投下された後、車両１１が移動を開始するまで（たとえば、車速の増加、ブレーキの解除等が検出されるまで）の間、任意の周期（たとえば数秒〜十数秒周期）で実行される。まず、車載制御装置１３は、ナビゲーション・ＡＶ（Audio and Visual）装置１５、空調装置１６、座席調節装置１７といった装備１９のそれぞれの設定を取得する（手順Ｓ４００）。たとえば、車載制御装置１３の制御部３３が、通信部３１を介して装備１９と各種情報をやりとりする。制御部３３は、装備１９に設定状態を要求し、装備１９の各装備は、乗員１２が設定した設定状態を示す情報を車載制御装置１３に返す。装備１９は、乗員１２による設定がなされなかった場合はそのことを示す情報を設定状態として、車載制御装置１３に返す。ここにおいて、制御部３３が手順Ｓ４０１を実行することで「設定状態取得部」を実現する。
次いで、車載制御装置１３は、撮像装置１４に乗員１２を撮像させて（手順Ｓ４０１）、撮像画像を取得する（手順Ｓ４０２）。そして、車載制御装置１３は、撮像画像と装備１９の各装備の設定状態とをサーバ１０に送信する（手順Ｓ４０３）。たとえば制御部３３は、通信部３１を介して撮像装置１４に撮像指示を送り、撮像装置１４が指示に応答して撮像を行う。そして、撮像装置１４は、撮像画像データを車載制御装置１３に送り、制御部３３は通信部３１を介して撮像画像データを取得する。ここにおいて、制御部３３が手順Ｓ４０２を実行することで「画像取得部」を実現する。そして、制御部３３は、装備１９の各装備について設定状態（設定がなされないこと含む）を示す情報と撮像画像データとを通信部３１からサーバ１０に送信する。
次いで、図４Ｂに示すように、サーバ１０は、撮像画像と設定状態とを受信し（手順Ｓ４１０）、乗員１２を認識する（手順Ｓ４１１）。サーバ１０では、たとえば制御部２２が、通信部２０を介して設定状態を示す情報と撮像画像データとを車載制御装置１３から受信する。そして、制御部２２は、撮像画像データに対しエッジ認識、パターン認識等の画像認識処理を行い、乗員１２を認識する。認識される乗員１２は、単数であっても、複数であってもよい。
次いで、サーバ１０は、乗員１２に対応付けて、装備１９の各装備の設定状態を記憶する（手順Ｓ４１２）。たとえば、制御部２２は、記憶部２３に乗員１２の識別情報と設定状態とを対応付けて設定情報として記憶させる。このとき、制御部２２は、装備１９のうち設定がなされた装備の設定状態を記憶部２３に記憶させる。また、乗員１２が複数のとき、制御部２２は、それぞれの乗員１２について設定状態を対応付けて記憶部２３に記憶させてもよい。
記憶部２３は、たとえば図５に示すような乗員１２を識別する乗員識別情報５１と設定状態５２と対応付けて設定情報５０として記憶する。乗員識別情報５１は、乗員１２を一位に識別するＩＤ等を有する。設定状態５２は、たとえば、空調装置１６による機能（冷房、暖房または換気）及び温度についての空調設定、座席調節装置１７による座席の高さ・前後の位置・背もたれの角度についての座席設定、ナビゲーション・ＡＶ装置１５による放送・配信局の選局についての選局設定、出力する楽曲につての楽曲設定、出力する映像についての映像設定、及び経路案内の目的地についての目的地設定が含まれる。楽曲設定、映像設定は、取得する配信局または記憶部３３におけるデータの所在等の情報を含む。ここでは、装備１９のうち、乗員１２によりなされた設定状態を受信した装備について、その設定状態が記憶される。既に記憶済みの設定状態５１が存在する場合であって、乗員１２によりなされた設定状態を受信した場合には、設定状態５１が新たな設定状態により更新される。なお、現在時刻を設定情報５０に対応付けて、たとえば、季節ごとに異なる空調設定、時間帯ごとに異なる選局設定、楽曲設定、映像設定、または目的地設定を記憶してもよい。さらに、目的地設定だけでなく、経路検索の条件（有料道路優先、高速道路優先など）を設定状態に加えてもよい。そうすることで、乗員１２の要望をより正確に反映した設定情報を記憶することができる。
図４Ｂに戻り、次いでサーバ１０は、乗員１２に対応付けた設定状態を取得し（手順Ｓ４１３）、取得した設定状態を車載制御装置１３に送信する（手順Ｓ４１５）。たとえば制御部２２は、既に記憶部２３に記憶されていて手順Ｓ４１２で記憶・更新されなかった設定状態、すなわち、車両１１において乗員１２のために再現すべき設定状態を記憶部２３から読み出して、読み出した設定状態を示す情報を通信部２０から車載制御装置１３に送信する。このとき、記憶済みの設定状態が存在しなかったり、手順Ｓ４１２で更新されたばかりのものであったりする場合には、制御部２２は、設定状態がないことを示す情報を車載制御装置１３に送信する。
次いで、図４Ａにおいて、車載制御装置１３は、設定状態を受信し（手順Ｓ４０５）、受信した設定状態に車両１１において再現すべき設定状態が含まれている場合（手順Ｓ４０６のＹｅｓ）、その設定状態を装備１９の対応する装備に転送し、設定を指示する（手順Ｓ４０７）。一方、受信した設定状態に車両１１において再現すべき設定状態が含まれていない場合（手順Ｓ４０６のＮｏ）、車載制御装置１３は処理を終了する。たとえば制御部３３は、通信部３１を介してサーバ１０から設定状態を受信し、再現すべき設定状態が含まれている場合に、対応する装備に向け通信部３１から設定状態と設定の指示を送る。たとえば、サーバ１０から受信した設定状態に再現すべき空調設定が含まれていれば、制御部３３は空調装置１６にその設定を転送して設定を指示する。また、サーバ１０から受信した設定状態に再現すべき座席設定が含まれていれば、制御部３３は座席調節装置１７にその設定を転送して設定を指示する。さらに、サーバ１０から受信した設定状態に再現すべき選局設定、楽曲・映像設定、目的地設定が含まれていれば、制御部３３はナビゲーション・ＡＶ装置にその設定を転送して設定を指示する。ここにおいて、手順Ｓ４０７を実行する制御部３３により「再現部」が実現される。
装備１９のうち設定状態を受け取った装備では、制御回路が設定状態を受信して設定状態に応じて自らを設定する。たとえば、空調装置１６では、設定状態に応じて空調の種別（冷房・暖房・換気等）と温度が設定される。また、座席調節装置１７では、設定状態に応じて座席の高さ・前後の位置・背もたれの角度が設定される。また、ナビゲーション・ＡＶ装置１５では、設定状態に応じて、放送・配信局、出力する楽曲・映像、または経路案内の目的地が設定される。そして装備１９が設定に応じて動作することで、乗員１２の所望の設定が再現される。
上述した実施形態において、複数の乗員１２が車両１１に搭乗する場合において、各乗員に対応する設定状態が異なる場合、サーバ１０は、たとえば、運転席の乗員（つまり運転者）の設定状態を優先したり、前部座席と後部座席とでは前部座席の乗員の設定状態を優先したりすることができる。また、たとえば、空調設定は運転手の設定状態を優先し、音響・映像設定は助手席または後部座席の乗員１２の設定状態を優先するというように、設定状態ごとに優先順位を変更してもよい。
図６Ａ、６Ｂは、それぞれ変形例における車載制御装置１３とサーバ１０の動作手順を示す。図６Ａ、６Ｂでは、それぞれ図４Ａ、４Ｂと共通する手順は図４Ａ、４Ｂと同じ符号が付され、異なる手順には異なる符号が付される。図４Ａ、４Ｂと共通する手順については、適宜説明を省略する。
この変形例では、車載制御装置１３において、手順Ｓ４０２で撮像画像を取得した後、撮像画像データから乗員１２を認識する処理を行う（手順Ｓ４０２ａ）。そして、乗員識別情報と設定状態とを、車載制御装置１３からサーバ１０に送信し（手順Ｓ４０３ａ）、サーバ１０が乗員識別情報と設定状態とを受信して（手順Ｓ４１０ａ）、手順Ｓ４１２で設定情報を記憶する。かかる変形例によれば、乗員１２の認識を車載制御装置１３で行うことで、サーバ１０の処理負荷を軽減することができる。
図４Ａ及び６Ａの手順において、車載制御装置１３は、手順Ｓ４０７において装備１９に設定状態を転送して設定を指示する前に、ナビゲーション・ＡＶ装置１５の出力インタフェースに設定状態を出力（たとえば表示）して乗員１２に判断を促してもよい。その場合、乗員１２の入力に応答して装備１９に設定状態と指示が送られる。そうすることで、乗員１２の嗜好・必要が変化した場合に不適切な設定をするといったことを回避することができる。
本発明を諸図面及び実施例に基づき説明してきたが、当業者であれば本開示に基づき種々の変形及び修正を行うことが容易であることに注意されたい。したがって、これらの変形及び修正は本発明の範囲に含まれることに留意されたい。たとえば、各手段または各ステップ等に含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段またはステップ等を１つに組み合わせたり、或いは分割したりすることが可能である。また、サーバ１０の制御部２２、車載制御装置１３の制御部３３に本実施形態にかかる動作を行わせるプログラムも本発明の範囲に含まれる。
さらに、本実施形態におけるネットワーク１８には、上述した例以外にも、アドホックネットワーク、ＬＡＮ(Local Area Network)、ＭＡＮ(Metropolitan Area Network)、セルラーネットワーク、ＷＰＡＮ(Wireless Personal Area Network)、ＰＳＴＮ(Public Switched Telephone Network)、地上波無線ネットワーク(Terrestrial Wireless Network)、光ネットワークもしくは他のネットワークまたはこれらいずれかの組合せが含まれる。無線ネットワークの構成要素には、たとえば、アクセスポイント(たとえば、Wi-Fiアクセスポイント)、フェムトセル等が含まれる。さらに、通信モジュールは、Bluetooth（登録商標）、Wi-Fi（登録商標）、セルラー通信技術またはその他の無線技術及び技術標準を用いた無線ネットワークに接続することができる。
このように、本開示内容の種々の側面は、多くの異なる態様で実施することができ、それらの態様はすべて本実施形態の範囲に含まれる。
１：制御システム、 １０：サーバ、 １１：車両、 １３：車載制御装置、
１４：撮像装置、 １５：ナビゲーション・ＡＶ装置、 １６：空調装置、
１７：座席調節装置、 １９：装備

Claims (8)

  1. 互いに情報を送受信する車載制御装置とサーバとを有する制御システムにおいて、
    前記車載制御装置は、
    乗員の撮像画像を取得する画像取得部と、
    車両の装備の設定状態を取得する設定状態取得部と、
    前記撮像画像または当該撮像画像から検出される前記乗員の識別情報と前記設定状態とを前記サーバに送信する送信部とを有し、
    前記サーバは、
    前記乗員と前記設定状態とを対応付けた設定情報を記憶する記憶部と、
    前記設定情報が記憶された後、前記車載制御装置または他の車載制御装置にて前記乗員が撮像されると、当該乗員に対応づけられた前記設定状態を当該車載制御装置または当該他の車載制御装置に送信する送信部とを有する、
    制御システム。
  2. 請求項１において、
    前記車載制御装置または前記他の車載制御装置は、前記サーバから送信される設定状態を受信する受信部と、受信した当該設定状態を車両内で再現する指示を出力する再現部とを有する、
    制御システム。
  3. 請求項１または２において、
    前記設定状態は、空調の設定状態、座席の設定状態、楽曲・映像の設定状態、走行目的地の設定状態のいずれかを有する、制御システム。
  4. 車載制御装置から、車両内における乗員の撮像画像、または当該撮像画像から検出される前記乗員の情報と、前記車両の装備の設定情報とを受信する受信部と、
    前記乗員と前記設定状態とを対応付けた設定情報を記憶する記憶部と、
    前記設定情報が記憶された後、前記車載制御装置または他の車載制御装置にて前記乗員が撮像されると、当該乗員に対応づけられた前記設定状態を当該車載制御装置または当該他の車載制御装置に送信する送信部と、
    を有するサーバ。
  5. 車両内を撮像して乗員の撮像画像を生成する撮像部と、
    前記車両の装備の設定情報を検出する検出部と、
    前記撮像画像または当該撮像画像から検出される前記乗員の情報と前記設定状態とを、当該乗員を撮像する車載制御装置に当該設定状態を送信するために当該乗員と当該設定状態とを対応付けた設定情報を記憶するサーバに、送信する送信部と、
    を有する車載制御装置。
  6. 車両内を撮像して乗員の撮像画像を生成する撮像部と、
    前記乗員と前記車両の装備の設定状態とを対応付けた設定情報を記憶するサーバに、前記撮像画像または当該撮像画像から検出される前記乗員の情報を送信する送信部と、
    前記サーバから送信される、前記設定状態を受信する受信部と、
    受信した当該設定状態を車両内で再現する指示を出力する再現部と、
    を有する車載制御装置。
  7. 請求項５または６に記載の車載制御装置を有する車両。
  8. 互いに情報を送受信する車載制御装置とサーバの制御方法において、
    前記車載制御装置が、車両内を撮像して乗員の撮像画像を生成し、前記車両の装備の設定情報を取得し、
    前記車載制御装置または前記サーバが、前記撮像画像から前記乗員を認識し、
    前記サーバが、前記乗員と前記設定状態とを対応付けた設定情報を記憶し、
    前記設定情報が記憶された後、前記車載制御装置または他の車載制御装置が、前記乗員を撮像すると、前記サーバが、当該乗員に対応づけられた前記設定状態を当該車載制御装置または当該他の車載制御装置に送信し、
    前記または前記他の車載制御装置が、前記設定状態を受信し、受信した当該設定状態を車両内で再現する指示を出力する、
    制御方法。
JP2018231857A 2018-12-11 2018-12-11 制御システム、サーバ、車載制御装置、車両、及び制御方法 Pending JP2020093622A (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2018231857A JP2020093622A (ja) 2018-12-11 2018-12-11 制御システム、サーバ、車載制御装置、車両、及び制御方法
US16/671,441 US20200180533A1 (en) 2018-12-11 2019-11-01 Control system, server, in-vehicle control device, vehicle, and control method
CN201911229290.6A CN111301285A (zh) 2018-12-11 2019-12-04 控制***、服务器、车载控制装置、车辆和控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018231857A JP2020093622A (ja) 2018-12-11 2018-12-11 制御システム、サーバ、車載制御装置、車両、及び制御方法

Publications (1)

Publication Number Publication Date
JP2020093622A true JP2020093622A (ja) 2020-06-18

Family

ID=70972443

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018231857A Pending JP2020093622A (ja) 2018-12-11 2018-12-11 制御システム、サーバ、車載制御装置、車両、及び制御方法

Country Status (3)

Country Link
US (1) US20200180533A1 (ja)
JP (1) JP2020093622A (ja)
CN (1) CN111301285A (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4265481A4 (en) * 2020-12-17 2024-01-24 Nissan Motor Company Limited ON-BOARD EQUIPMENT CONTROL DEVICE AND ON-BOARD EQUIPMENT CONTROL METHOD

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11468716B2 (en) * 2019-12-11 2022-10-11 Volvo Car Corporation Vehicle resource management systems
JP2023022546A (ja) * 2021-08-03 2023-02-15 株式会社Subaru 乗員に応じた設定が可能な車両、および車両設定システム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006082691A (ja) * 2004-09-16 2006-03-30 Hitachi Software Eng Co Ltd 個人情報に対応した車内機器制御システム
JP2017019400A (ja) * 2015-07-10 2017-01-26 株式会社デンソー 乗員情報取得システム、車載器、携帯端末
JP2018154240A (ja) * 2017-03-17 2018-10-04 パナソニックＩｐマネジメント株式会社 設定装置、通信装置および設定システム

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9215274B2 (en) * 2011-04-22 2015-12-15 Angel A. Penilla Methods and systems for generating recommendations to make settings at vehicles via cloud systems

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006082691A (ja) * 2004-09-16 2006-03-30 Hitachi Software Eng Co Ltd 個人情報に対応した車内機器制御システム
JP2017019400A (ja) * 2015-07-10 2017-01-26 株式会社デンソー 乗員情報取得システム、車載器、携帯端末
JP2018154240A (ja) * 2017-03-17 2018-10-04 パナソニックＩｐマネジメント株式会社 設定装置、通信装置および設定システム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP4265481A4 (en) * 2020-12-17 2024-01-24 Nissan Motor Company Limited ON-BOARD EQUIPMENT CONTROL DEVICE AND ON-BOARD EQUIPMENT CONTROL METHOD

Also Published As

Publication number Publication date
US20200180533A1 (en) 2020-06-11
CN111301285A (zh) 2020-06-19

Similar Documents

Publication Publication Date Title
CN109558957B (zh) 选择车辆上车位置
US20160275360A1 (en) Vehicle and method for controlling the same
US11618412B2 (en) Systems and methods for vehicle use authentication
EP3314919B1 (en) Wireless connection management
JP2020093622A (ja) 制御システム、サーバ、車載制御装置、車両、及び制御方法
CN106059627B (zh) 用于无线载波之间的加速移交的方法以及车辆内计算***
US11057575B2 (en) In-vehicle device, program, and vehicle for creating composite images
US20200079383A1 (en) Driving evaluation apparatus, driving evaluation system, and driving evaluation method
JP5122826B2 (ja) 車載装置および出力装置
CN111731322A (zh) 在乘车共享环境中掩蔽乘员声音的方法和***
CN113691769B (zh) 用于修改底架摄像头图像馈送的***和方法
US20200070846A1 (en) Assisting user engagement of vehicle features
US20190349552A1 (en) Server, vehicle image capturing system, and vehicle image capturing method
CN110392363A (zh) 一种车载终端控制方法、装置及终端
WO2020137398A1 (ja) 操作制御装置、撮像装置、操作制御方法
JP2009286342A (ja) 生体情報照合装置、生体情報照合システムおよび生体情報照合方法
WO2021256483A1 (ja) 制御装置、投影システム、制御方法及びプログラム
JP6887263B2 (ja) 車載システム、車載装置、プログラム及び方法
JP5137663B2 (ja) 移動通信端末装置、無線接続方法および通信システム
WO2023112115A1 (ja) 通信システム、情報処理装置、情報処理方法、プログラム及び記録媒体
WO2023112114A1 (ja) 通信システム、情報処理装置、情報処理方法、プログラム及び記録媒体
WO2018123714A1 (ja) カメラ、カメラの処理方法、サーバ、サーバの処理方法および情報処理装置
JP2023094982A (ja) 通信システム、情報処理装置、情報処理方法、プログラム及び記録媒体
US20240239265A1 (en) Rear display enhancements
EP4346240A1 (en) Vehicle-to-everything navigation support

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210325

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220304

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220315

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220510

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20220621