JP6478221B2 - 人物特定装置およびプログラム - Google Patents
人物特定装置およびプログラム Download PDFInfo
- Publication number
- JP6478221B2 JP6478221B2 JP2015074219A JP2015074219A JP6478221B2 JP 6478221 B2 JP6478221 B2 JP 6478221B2 JP 2015074219 A JP2015074219 A JP 2015074219A JP 2015074219 A JP2015074219 A JP 2015074219A JP 6478221 B2 JP6478221 B2 JP 6478221B2
- Authority
- JP
- Japan
- Prior art keywords
- authentication
- information
- person
- authentication method
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Collating Specific Patterns (AREA)
Description
(システムの構成)
車内環境や搭乗者状況から、複数のセンシング状態(照度、雑音、着座人数、着座位置分布、顔サイズ、顔安定度)と機械学習で得られた判定係数をシステムに入力する。そして、システムは最適な認証順序を決定することで、搭乗者特定の利便性を高めることができる。認証方式としては、顔認証、話者認証、および携帯電話での手動選択がある。また、実環境の利用履歴に対して、統計的機械学習により判定係数を更新させることで、搭乗者特定の信頼性を高めることができる。
図1に示すように車載機110(人物特定装置)は、蓄積部111、表示部111a、情報取得部112、カメラ112a、マイク112b、推定部113、端末検出部114、通信部115a、操作部115b、指示受付部116、判定部117、実行部118および学習部119を備えている。
図1に示すように、携帯通信端末120は、少なくとも表示部121、操作部123、通信部125を備えている。通信部125は、BLE電波を利用して自らの信号を周囲に発信する。BLE以外は、Wi−Fiを始めとした近距離無線通信方式を利用して信号を発信してもよい。表示部121は、システムが更新したレンダリング情報を、ディスプレイ上に出力する。操作部123は、搭乗者の手動選択による入力インタフェースを提供する。また、操作部123は、搭乗者の音声による入力インタフェースを提供してもよい。
図2は、人物特定システムの動作の一場面を示す概略図である。
次に、図3、図4を参照しながら、動的に認証順序を決定するアルゴリズムを説明する。図3、図4は、それぞれ車載機の動作の一例を示すフローチャートである。
図2に示すように、まず車載機110は、システム全体のトリガーとして搭乗者のスマートフォンから発信したBLE信号を検出し(ステップS101)、BLE信号が検出されたスマートフォンのユーザが登録者で尚且つ電波強度が所定値以上であれば車載機からスマートフォンに自動接続し、成功率の推定処理を起動させる。
上記のような例以外にも動的に認証順序を決定するアルゴリズムは可能である。図3に示す動作例は、各認証方式について推定した成功率に応じて、認証方式の順序を決定し、その順序に沿って人物特定の処理を行なっている。
次に、本実施形態の判定係数の学習方法について説明する。本実施形態では、成功率の推定処理にはロジスティック回帰モデルの機械学習を用いることが好ましい。SVMやパーセプトロンなどの機械学習はデータ集の分類モデルとして利用されており、判定値の正負は学習できるが、判定値の大小である「信頼度」(成功率)は学習できない。
次に、顔認証処理の詳細を説明する。上記の例では、顔認証の方式による人物特定の成功率が0.7より高ければ、車載機側のカメラを起動して運転席と助手席を撮影する。図8は、車内の取得画像P1を示す図である。
次に、話者認証処理について説明する。上記の顔認証処理と同様に、話者認証処理による人物特定の成功率が0.7と一致するか、または0.7より高ければ、話者認証による人物特定を実行する。すなわち車載機のマイクを起動して運転者とそのほかの同乗者の声を録音して、話者認証を行なう。車内の位置と関連付けるため、車載機の音声もしくは文字ガイドにしたがって一人ずつ録音することが好ましい。このようにして全員の搭乗者が特定できた場合、それぞれの搭乗者の身分と車内位置を関連付けて記録し、予め登録されたユーザプロファイルを読み込む。そして、読み込んだユーザプロファイルを用いて、その搭乗者に対する個人情報の提示が可能である。
次に、搭乗者によるスマートフォンを用いた手動確認による人物特定を説明する。上記のように、顔認証および話者認証のいずれの認証方式でも人物特定に失敗している場合、スマートフォンの入力画面に対し搭乗者は自らの身分と車内位置を補完して、フィードバックをかける。この際には、失敗例として車載機に利用履歴として追加される。また、それをきっかけに車載機の学習部による学習処理を再度実行させる。
上記の実施形態では、主に自家用車の利用シーンを想定しており、特定人物が限定されている。また、学習部と蓄積部は自家用車の車載機に設置しているが、コールセンターのサーバに設置してもよい。例えば、レンタカーに搭乗者特定技術によるパーソナライズドサービスを適用する場合、コールセンターを利用した構成を採用してもよい。その際には、多数のレンタカー利用者のデータをサーバにアップして機械学習し、その回帰係数をレンタカーにまた改めてダウンロードして利用してもよい。
上記のような人物特定システムは、以下のような用途に利用できる。特に、人物特定技術を適用する利用シーンとして、車内のどの席に誰が座っているかをさりげなく確認して、搭乗者の状況に合って、迅速な目的地設定やパソナライズな情報提示などを行なうことが可能になる。
例えば、自家用車を家族で利用する典型的な場面として、お父さんが運転する週末の家族ドライブのシーンを想定できる。お父さんが運転席、お母さんが助手席、娘さんが後席と特定すると、それぞれの興味に応じて経路上のお出かけスポット情報を異なる手段で提示できる。お父さんには車載機から音声ガイド、お母さんには車載器の画面からビジュアルガイド、娘さんには個人端末の画面からビジュアルガイド、を提供できる。
次に、お父さんの毎日の通勤の場面が想定できる。人物特定システムを利用することで、お父さんが一人の運転者であると特定すると、いつもの会社通勤ルートを自動設定できる。
お母さんと娘さんのスーパーでの買い物の場面にも利用可能である。お母さんが運転席、娘さんが後席と特定すると、普段利用する店舗を目的地の候補と提示し、運転中に近隣店舗のセールの案内を提供できる。また、渋滞発生時に迂回路の選択を行なう際に、後席にいる車載機を触れない娘さんに、個人端末の画面にメニューを提示して選択させることもできる。
110 車載機(人物特定装置)
111 蓄積部
111a 表示部
112 情報取得部
112a カメラ
112b マイク
113 推定部
114 端末検出部
115a 通信部
115b 操作部
116 指示受付部
117 判定部
118 実行部
119 学習部
120 携帯通信端末
120a、120b スマートフォン(携帯通信端末)
121 表示部
123 操作部
125 通信部
130 顔認証サーバ
140 話者認証サーバ
200 人物特定システム
210 車載機(人物特定装置)
230 コールセンター
231 実行部
233 ユーザ管理部
234 学習部
236 蓄積部
A 運転者
B 同乗者
C1 自動車内
F1 顏検出枠
F2 顏検出枠
Claims (12)
- 車内に存在する全人物を特定する処理を行なう人物特定装置であって、
車内における少なくとも搭乗者、着座人数および着座位置を含む車内の状況を表す情報を取得する情報取得部と、
過去の少なくとも搭乗者、着座人数および着座位置を含む車内の状況を表す情報および各認証方式による成否の情報が関連付けられた利用履歴情報を蓄積する蓄積部と、
前記取得された情報および前記利用履歴情報に基づいて、現在における前記各認証方式による成功率を推定する推定部と
前記推定された成功率に応じて、前記各認証方式のうち実行すべき認証方式を判定する判定部と、
前記各認証方式のうち前記実行すべきと判定された認証方式を実行する実行部と、
前記実行された認証方式の結果に基づいて、各搭乗者および着座位置に応じたレンダリング情報を出力する通信部と、を備えることを特徴とする人物特定装置。 - 前記判定部は、前記各認証方式に予め設定された優先順位の上位から下位に向けて順に実行すべきか否かを判定することを特徴とする請求項1記載の人物特定装置。
- 前記判定部は、所定の閾値を基準に、前記基準に対する前記推定された成功率の高低に応じて前記各認証方式のうち実行すべき認証方式を判定することを特徴とする請求項1または請求項2記載の人物特定装置。
- 前記実行部は、前記各認証方式のうち前記推定された成功率が高い認証方式を実行することを特徴とする請求項1記載の人物特定装置。
- 前記推定部は、前記蓄積された情報に基づく係数を含む関係式を用いて、前記取得された情報に対する前記成功率を算出することを特徴とする請求項1から請求項4のいずれかに記載の人物特定装置。
- 前記実行されるべきと判定された認証方式により、人物特定の処理を実行した結果、人物特定に失敗したときには、前記人物特定の処理の結果を蓄積するとともに、前記蓄積された情報に基づく係数を算出し直す学習部を更に備えることを特徴とする請求項1から請求項5のいずれかに記載の人物特定装置。
- 携帯通信端末を検出する端末検出部を更に備え、
前記端末検出部は、前記携帯通信端末の検出を契機として人物特定の処理を開始させることを特徴とする請求項1から請求項6のいずれかに記載の人物特定装置。 - ユーザの指示を受け付ける指示受付部を更に備え、
前記指示受付部は、前記受け付けたユーザ指示に基づいて、前記認証方式のうち実行されうる認証方式、または前記前記各認証方式のうち実行すべき認証方式の判定手順を設定することを特徴とする請求項1から請求項7のいずれかに記載の人物特定装置。 - 前記認証方式には、映像による情報に基づく顔認証が含まれることを特徴とする請求項1から請求項8のいずれかに記載の人物特定装置。
- 前記認証方式には、音による情報に基づく話者認証が含まれることを特徴とする請求項1から請求項9のいずれかに記載の人物特定装置。
- 前記認証方式には、携帯通信端末または自装置の操作インタフェースを介したユーザ自身による指示が含まれることを特徴とする請求項1から請求項10のいずれかに記載の人物特定装置。
- 車内に存在する全人物を特定する処理を行なうプログラムであって、
車内における少なくとも搭乗者、着座人数および着座位置を含む車内の状況を表す情報を取得する処理と、
過去の少なくとも搭乗者、着座人数および着座位置を含む車内の状況を表す情報および各認証方式による成否の情報が関連付けられた利用履歴情報を蓄積する処理と、
前記取得された情報および前記利用履歴情報に基づいて、現在における前記各認証方式による成功率を推定する処理と、
前記推定された成功率に応じて、前記各認証方式のうち実行すべき認証方式を判定する処理と、
前記各認証方式のうち前記実行すべきと判定された認証方式を実行する処理と、
前記実行された認証方式の結果に基づいて、各搭乗者および着座位置に応じたレンダリング情報を出力する処理と、を含む一連の処理をコンピュータに実行させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015074219A JP6478221B2 (ja) | 2015-03-31 | 2015-03-31 | 人物特定装置およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015074219A JP6478221B2 (ja) | 2015-03-31 | 2015-03-31 | 人物特定装置およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016194804A JP2016194804A (ja) | 2016-11-17 |
JP6478221B2 true JP6478221B2 (ja) | 2019-03-06 |
Family
ID=57323953
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015074219A Active JP6478221B2 (ja) | 2015-03-31 | 2015-03-31 | 人物特定装置およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6478221B2 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6392475B1 (ja) * | 2017-08-29 | 2018-09-19 | 株式会社ペットボードヘルスケア | 猫用トイレ使用状況管理システム及び猫用トイレ |
WO2020213284A1 (ja) * | 2019-04-15 | 2020-10-22 | 日本電気株式会社 | 画像処理装置、画像処理方法及びプログラム |
WO2021260929A1 (ja) * | 2020-06-26 | 2021-12-30 | 三菱電機株式会社 | ソフトウェア起動装置、情報処理装置、およびソフトウェア起動方法 |
WO2022254501A1 (ja) * | 2021-05-31 | 2022-12-08 | 三菱電機株式会社 | 個人認証装置及び個人認証システム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001060095A (ja) * | 1999-08-23 | 2001-03-06 | Auto Network Gijutsu Kenkyusho:Kk | 車載音量調整装置 |
JP4533679B2 (ja) * | 2004-06-23 | 2010-09-01 | 三菱重工業株式会社 | 個人認証方法及び該システム |
JP2009284442A (ja) * | 2008-05-26 | 2009-12-03 | Fujitsu Ten Ltd | 人物認証装置および人物認証方法 |
JP6171718B2 (ja) * | 2013-08-20 | 2017-08-02 | トヨタ自動車株式会社 | 操作者識別装置 |
-
2015
- 2015-03-31 JP JP2015074219A patent/JP6478221B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016194804A (ja) | 2016-11-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20230294665A1 (en) | Systems and methods for operating a vehicle based on sensor data | |
US11568496B1 (en) | Risk behavior detection methods based on tracking handset movement within a moving vehicle | |
CN111937050B (zh) | 乘客相关物品丢失减少 | |
JP6478221B2 (ja) | 人物特定装置およびプログラム | |
CN103918247B (zh) | 基于背景环境的智能手机传感器逻辑 | |
CN108225366A (zh) | 车载装置与路线信息提示*** | |
CN108790674B (zh) | 一种车载空调的控制方法及*** | |
JP2020504358A (ja) | 画像ベースの車両損害評価方法、装置、およびシステム、ならびに電子デバイス | |
US11221627B2 (en) | Directed interaction of customers with autonomous vehicles | |
US20170154513A1 (en) | Systems And Methods For Automatic Detection Of An Occupant Condition In A Vehicle Based On Data Aggregation | |
CN109389029A (zh) | 基于行车记录仪的寻人方法、装置、***和存储介质 | |
US10655981B2 (en) | Method for updating parking area information in a navigation system and navigation system | |
US20230311901A1 (en) | Apparatuses, systems and methods for improving operation of autonomous vehicles | |
CA3084696C (en) | Vehicle operation assistance device | |
US11302304B2 (en) | Method for operating a sound output device of a motor vehicle using a voice-analysis and control device | |
US11404061B1 (en) | Speech filtering for masks | |
JP6449504B1 (ja) | 情報処理装置、情報処理方法、及び情報処理プログラム | |
JP7013729B2 (ja) | 関係性推定方法、関係性推定装置、及び情報提供方法 | |
US20230058043A1 (en) | Mobile terminal and operating method thereof | |
JP2023019343A (ja) | 行先設定支援装置、行先設定支援方法及び行先設定支援プログラム | |
CN116834691A (zh) | 车内遗留对象的提醒方法、***、计算机存储介质及车辆 | |
CN112397066A (zh) | 语音识别方法、装置、车辆及计算机存储介质 | |
CN113269143A (zh) | 一种基于车辆的人员识别方法和一种车辆 | |
JP2023111615A (ja) | 情報処理方法、情報処理装置及び情報処理システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170904 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171006 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180830 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180904 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181023 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190108 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190129 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6478221 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |