JP2017083308A - 電子装置、施設特定方法および施設特定プログラム - Google Patents

Abstract

【課題】搭乗者の視線方向に存在する施設をより正確に特定することができる電子装置を提供する。
【解決手段】車載装置１０は、自車内の搭乗者を撮像する撮像手段と、撮像された撮像画像に基づき一定のサンプリング周期で搭乗者の視線方向を検出する検出手段と、視線の移動速度を算出する算出手段と、搭乗者の視線方向が閾値よりも長く注視している車外の特定物を判別する判別手段と、判別手段で判別された特定部に関する情報を表示する表示手段とを有し、判別手段は、前記視線移動速度に応じて閾値を可変する、
【選択図】図１

Description

本発明は、搭乗者の視線方向に存在する施設を特定し、特定された施設に関する情報を表示する機能を備えた電子装置に関する。

従来、ナビゲーション装置では、地図データを利用して、ユーザーから入力された名称、電話番号、ジャンル等の情報に基づき該当する施設情報を検索し、これを表示させることができる。しかし、ユーザーの知りたい情報は、自らが入力した内容や目的地に関する情報に限らず、走行中に目に留まった施設に関する情報を知りたいというニーズもある。

特許文献１には、乗員の視線方向を異なるタイミングで複数検出し、検出された複数の視線方向の交点を注視点として、当該注視点付近に存在する施設の案内を行う施設特定装置が開示されている。また、特許文献２には、カメラによって撮像が行われたとき、カメラの向けられた方向を検出し、当該方向から現在位置を中心とする範囲内にある施設を、データベースから検索し、検索された施設を表示する施設情報表示装置が開示されている。

特開２００９−３１９４３号公報 特開２０１２−２０９８３３号公報

従来の車載装置には、次のような課題がある。走行中に、搭乗者が車内の窓越しから建物等の施設を注視したとき、その施設が、搭乗者を基準とした奥行き方向のいずれかにあるのかが不明である。また、特許文献１の技術により注視する方向の施設を特定した場合、施設と搭乗者との距離が近い場合には、異なるタイミングで搭乗者の視線方向を検出している間に、施設を通り過ぎてしまい、施設を検出することができないという課題がある。特に、この課題は、車両の走行速度が速い場合に顕著に起こり得る。

本発明は、このような従来の課題を解決し、搭乗者の視線方向に存在する施設をより正確に特定することができる電子装置、施設特定方法および施設特定プログラムを提供することを目的とする。

本発明に係る電子装置は、車内の搭乗者を撮像する撮像手段と、前記撮像手段により撮像された撮像画像に基づき一定のサンプリング周期で搭乗者の視線方向を検出する検出手段と、前記撮像手段により撮像された撮像画像に基づき搭乗者の視線移動速度を算出する算出手段と、搭乗者の視線方向が閾値よりも長く注視している車外の特定物を判別する判別手段と、前記判別手段によって判別された特定物に関する情報を表示する表示手段とを有し、前記判別手段は、前記視線移動速度に応じて前記閾値を可変する。

好ましくは前記判別手段は、前記視線移動速度が大きいとき第１の閾値を設定し、前記視線移動速度が小さいとき第２の閾値を設定し、第１の閾値は、第２の閾値よりも小さい。好ましくは電子装置はさらに、少なくとも自車の走行速度を含む車両情報を検知する車両情報検知手段を含み、前記検出手段は、前記走行速度に応じて前記サンプリング周期を可変する。好ましくは前記検出手段は、前記走行速度が大きいとき第１のサンプリング周期を設定し、前記走行速度が小さいとき第２のサンプリング周期を設定し、第１のサンプリング周期は、第２のサンプリング周期よりも速い。好ましくは前記判別手段は、前記視線方向に基づき特定物を判別するための対象領域を特定する対象領域特定手段を含み、当該対象領域特定手段は、前記視線方向を中心とする一定の角度、および自車を起点とする距離によって前記対象領域を規定し、前記対象領域特定手段は、前記視線移動速度に応じて前記距離を設定する。好ましくは前記対象領域特定手段は、前記視線移動速度が大きいとき第１の距離を設定し、前記視線移動速度が小さいとき第２の距離を設定し、第１の距離は、第２の距離よりも小さい。

本発明に係る施設特定方法は、車内の搭乗者を撮像する撮像手段と、車外の施設に関する情報を表示可能な表示手段とを含む電子装置におけるものであって、前記撮像手段により撮像された撮像画像に基づき一定のサンプリング周期で搭乗者の視線方向を検出するステップと、前記撮像手段により撮像された撮像画像に基づき視線移動速度を算出する算出するステップと、前記視線移動速度に応じて閾値を設定するステップと、搭乗者の視線方向が前記閾値よりも長く注視している車外の特定物を判別するステップと、前記判別された特定物に関する情報を表示するステップとを有する。

本発明に係る施設特定プログラムは、車内の搭乗者を撮像する撮像手段と、車外の施設に関する情報を表示可能な表示手段とを含む電子装置が実行するものであって、前記撮像手段により撮像された撮像画像に基づき一定のサンプリング周期で搭乗者の視線方向を検出するステップと、前記撮像手段により撮像された撮像画像に基づき視線移動速度を算出する算出するステップと、前記視線移動速度に応じて閾値を設定するステップと、搭乗者の視線方向が前記閾値よりも長く注視している車外の特定物を判別するステップと、前記判別された特定物に関する情報を表示するステップとを有する。

本発明によれば、特定物を判別するときの閾値を視線移動速度に応じて可変するようにしたので、視線移動速度が速いような場合であっても、特定物の判別を正確に行うことができ、特定物に関する情報を表示させることができる。

本発明の実施例に係る車載装置の構成を示すブロック図である。 本発明の実施例に係る撮像カメラの設置例を示す平面図である。 本発明の実施例に係る表示部の具体的な例を示す図である。 本発明の実施例に係る通信部の利用態様の一例を示す図である。 施設データの一例を示す図である。 本発明の第１の実施例に係る施設特定プログラムの機能的な構成例を示す図である。 本発明の第１の実施例に係る注視判定部の動作を説明する模式図である。 本発明の第１の実施例に係る対象領域の特定を説明する模式図である。 本発明の第１の実施例に係る施設特定動作を説明するフローチャートである。 図１０（Ａ）は、従来の施設特定方法を説明する図、図１０（Ｂ）は、本発明の第１の実施例に係る施設特定方法を説明する図である。 本発明の第２の実施例に係る視線方向検出部で用いる走行速度とサンプリング周期との関係を規定したテーブルの例である。 本発明の第３の実施例に係る対象領域特定部における視線方向の補正方法を説明する図である。

次に、本発明の好ましい実施の形態について説明する。本発明に係る電子装置は、好ましい態様では、車両に搭載された車載装置によって実施される。車載装置は、車内の搭乗者を撮像する撮像カメラを含み、撮像画像から搭乗者の視線方向や視線移動速度を算出し、それらを利用して視線方向に存在する施設を特定し、特定された施設に関する情報を表示する機能を有する。表示する機能は、車両の前方に設置されたセンターディスプレイ、計器類を含むインスツルメンツパネル内のディスプレイ、後部座席用のリアディスプレイ、あるいはＨＵＤ（ヘッドアップディスプレイ）であることができる。また、本発明の「施設」とは、単に建築物等の施設のみならず、森、丘、陸、山、湖などの建造物がない特徴的な自然の景観、場所、領域をも含む広義な意味で使用される。さらに、車載装置は、施設に関する情報を表示する機能の他に、例えば、ナビゲーション機能、ラジオ・テレビ受信機能、マルチメディア再生機能等を含むことができる。

図１は、本発明の実施例に係る車載装置の典型的な構成を示すブロック図である。本実施例に係る車載装置１０は、撮像部１００、入力部１１０、車両情報検知部１２０、ナビゲーション部１３０、表示部１４０、音声出力部１５０、通信部１６０、記憶部１７０、制御部１８０を含んで構成される。

撮像部１００は、車内に備えられた１つまたは複数の撮像カメラを含み、搭乗者を撮像する。図２に、撮像カメラの好ましい取付け例を示す。撮像カメラ１０２は、自車Ｍのルームミラーの位置近傍に取付けられた広角レンズのカメラであり、運転席および助手席の搭乗者を左右均等に撮像する。車載カメラ１０４は、助手席の後方付近に取付けられ、左後部座席および中央後部座席を撮像可能である。撮像カメラ１０６は、運転席の後方付近に取付けら、右後部座席および中央後部座席を撮像可能である。撮像カメラ１０２、１０４、１０６によって撮像された画像データは、制御部１８０に提供され、搭乗者の有無や搭乗者の顔や視線の検出のために画像解析される。なお、撮像カメラの数および取付け位置は、図２に示した例に限られず、それよりも多い数または少ない数の撮像カメラによって搭乗者を撮像してもよい。

入力部１１０は、入力キーデバイス、音声入力認識装置、あるいはタッチパネルなどを含み、ユーザーからの指示を受け取り、これを制御部１８０へ提供する。車両情報検知部１２０は、自車の走行速度、自車の３次元位置情報などを検知する。自車の３次元位置情報は、自車位置、自車の方向、傾きなどを含む。自車位置は、例えば、ＧＰＳ受信機や自立方向センサから得ることができ、自車の方向および傾きは、自車に搭載されたジャイロセンサや加速度センサ、あるいはステアリングセンサ（操舵角）の検出結果から得ることができる。

ナビゲーション部１３０は、自車位置周辺の道路地図を表示部１４０に表示させたり、目的地までの経路を探索し、その探索経路の案内を行う。表示部１４０は、ナビゲーション部１３０の道路地図の表示を行ったり、あるいは後述するように、搭乗者が注視した車外の施設に関する情報を表示する。表示部１４０は、液晶ディスプレイ、有機ＥＬディスプレイ、あるいはプロジェクターなどから構成される。図３は、本実施例の表示部１４０の取付け例を示す。図３（Ａ）に示すように、表示部１４０は、運転席の前方のインスツルメンツパネルと助手席の前方のダッシュボックスとの間のセンターコンソールに取付けられたディスプレイ１４０Ａでも良いし、図３（Ｂ）に示すように、後部座席の搭乗者のために、運転席と助手席の中心あたりの天井１４２に取付けられた可倒式の左右のリアディスプレイ１４４Ａ、１４４Ｂを含むことができる。

音声出力部１５０は、ナビゲーション部１３０によって生成された案内経路等の音声出力を行う。通信部１６０は、外部のネットワークや外部機器等と有線または無線によるデータ通信を可能にする。通信部１６０は、例えば図４に示すように、ネットワークＮＷを介して、位置情報配信サイト１６２にアクセスし、そこから自車位置情報を取得したり、地図データ配信サイト１６４にアクセスし、そこから必要な地図データを取得したり、施設情報配信サイト１６６にアクセスし、そこから施設に関する詳細な情報を取得することができる。

記憶部１７０は、制御部１８０が実行するプログラムやソフトウエア、ナビゲーション部１３０によって必要とされる道路地図データ（ノードデータやリンクデータ等）、施設データを記憶することができる。図５は、施設データの一例を示す図である。施設データは、施設を識別する施設コード、施設名称、ジャンル、位置座標、電話番号、施設の開店時間、閉店時間、施設の外観画像、施設の口コミ等の施設の紹介情報などを含む。

制御部１８０は、好ましい態様では、ＲＯＭ、ＲＡＭなどを含むマイクロコントローラ等から構成され、ＲＯＭまたはＲＡＭは、車載装置１０の各部の動作を制御するための種々のプログラムを格納することができる。本実施例では、制御部１８０は、搭乗者が注視する施設を特定し、当該特定された施設に関する情報を表示する施設特定プログラムを実行する。

図６は、本実施例に係る施設特定プログラムの機能的な構成例を示す図である。施設特定プログラム２００は、搭乗者監視部２１０、視線方向検出部２２０、視線移動速度算出部２３０、閾値設定部２４０、注視判定部２５０、対象領域特定部２６０、施設特定部２７０および施設情報表示部２８０を含む。

搭乗者監視部２１０は、撮像部１００からの撮像画像の画像解析結果に基づき搭乗者の有無を監視する。例えば、撮像カメラ１０２の撮像画像に基づき運転者および助手席の搭乗者の有無が監視され、撮像カメラ１０４、１０６によって後部座席の搭乗者の有無が監視される。好ましい態様では、搭乗者が存在しないと判定されたとき、制御部１８０は、その撮像カメラの電源をオフすることができる。搭乗者監視部２１０の監視結果は、視線方向検出部２２０等へ提供される。

視線方向検出部２２０は、搭乗者の撮像画像を解析することで、搭乗者の視線方向を検出する。画像解析は、例えば空間フィルタリングを用いてエッジ検出、エッジ強調などの処理を行い、搭乗者の顔や眼などを検出する。撮像カメラ１０２、１０４、１０６は、予め決められた位置に取付けられており、画像上の顔や眼の座標位置を知ることで、顔の向きや視線方向を検出することができる。１つの例では、搭乗者の顔の向きを視線方向とみなすこともできるが、より好ましい例では、眼の位置から視線方向を検出する。また、視線方向の検出は、一定のサンプリング周期で行われ、逐次、検出された視線方向が移動速度算出部２３０や注視判定部２５０へ提供される。

視線移動速度算出部２３０は、搭乗者の視線の移動速度を算出する。１つの例では、視線移動速度算出部２３０は、視線方向検出部２２０により一定のサンプリング周期で検出された視線方向の差分から視線の移動速度またはその変化量を算出する。視線移動速度は、例えば、連続する２つの視線方向の差分から算出されてもよいし、あるいは３つ以上の視線方向の各差分の平均から算出されてもよい。また、別の例では、視線移動速度算出部２３０は、必ずしも視線方向検出部２２０からの視線方向に基づき視線移動速度を算出するのではなく、搭乗者監視部２１０からの撮像画像に基づき搭乗者の眼を検出し、その眼の位置変化から視線移動速度を算出するようにしてもよい。

閾値変更部２４０は、視線移動速度算出部２３０によって算出された視線移動速度に基づき、後述する注視判定部２５０で用いられる閾値を設定する。この閾値は、搭乗者が一定方向を注視しているか否かを判定するための判定基準である。閾値設定部２４０は、視線移動速度が速いほど、閾値を小さい値に設定し、反対に、視線移動速度が遅いほど、閾値を大きい値に設定する。

注視判定部２５０は、視線方向検出部２２によって検出された視線方向に基づき、搭乗者が一定の方向を注視しているか否かを判定する。具体的には、搭乗者の視線方向が閾値よりも長い間、一定の範囲内にあるとき、搭乗者が注視していると判定する。上記したように、閾値は、視線移動速度に応じて設定される。視線移動速度が大きいとき、搭乗者は、比較的近い場所の施設を注視しているか、あるいは自車の走行速度が速いことが予想される。他方、視線移動速度が小さいとき、搭乗者は、比較的遠い場所の施設を注視しているか、あるいは自車の走行速度が遅いことが予想される。つまり、自車の走行速度が遅くても、比較的近い距離の施設を注視している場合には、視線移動速度は大きくなる傾向があり、自車の走行速度が速くても比較的遠い距離の施設を注視している場合には、視線移動速度は小さくなる傾向がある。視線移動速度が速いときに閾値を小さくすることで、注視の判定がされ易くなり、施設の特定を行う前に施設を通過してしまう不具合が解消される。

また、注視判定部２５０は、車両情報検知部１２０で検知された自車の３次元位置情報に基づき視線方向を補正する。搭乗者が施設を注視しているとき、自車が停車中（走行速度がゼロ）であれば、視線方向は変化しないが、自車が走行中であれば、その視線方向は相対的に変化する。図７は、搭乗者が車外の施設Ｈを注視しているときの時刻ｔ１、ｔ２、ｔ３の視線方向Ｄ１、Ｄ２、Ｄ３を例示している。時刻ｔ１、ｔ２、ｔ３は、視線方向検出部２２０のサンプリング周期である。ここでは説明を簡単にするため、自車Ｍが概ね一定速度Ｓで直進しているものとする。自車Ｍの基準方向Ｋ（例えば、自車の中心を通る線）に対する視線方向Ｄ１、Ｄ２、Ｄ３の角度θ１、θ２、θ３は、自車の走行に伴い変化する。そこで、時刻ｔ２、時刻ｔ３のときの自車位置を時刻ｔ１のときの自車位置に補正（速度Ｓ×時間）する。もし、搭乗者が施設Ｈを注視しているならば、その場合には、θ１≒θ２≒θ３となる。また、自車Ｍの方向が変化したときにも同様に自車位置を補正することで、視線方向が一定の方向を連続して注視しているか否かを正確に判定することができる。

他の方法として、注視判定部２５０は、｜θ２−θ１｜／（ｔ２−ｔ１）≒｜θ３−θ２｜／（ｔ３−ｔ２）の関係が満たされるような場合に、視線方向が一定方向にあると推定し、この状態が閾値よりも長い期間継続されたとき、一定方向を注視していると判定するようにしてもよい。

対象領域特定部２６０は、注視判定部２５０によって搭乗者が一定方向を注視していると判定されたとき、注視している視線方向に基づき、施設を特定すべき対象領域を特定する。図８に、対象領域の特定方法を示す。Ｄｃは、注視していると判定されたときの基準線Ｋに対する視線方向である。対象領域特定部２６０は、注視している視線方向Ｄｃを基準に左右に一定の角度α１、α２を設定し、自車Ｍを始点とする対象領域の角度を決定する。α１、α２は、予め決められた値であり、例えば、α１＝α２である。さらに対象領域特定部２６０は、視線移動速度に応じて自車からの対象領域の上限となる距離Ｌを決定する。好ましくは、距離Ｌは、視線移動速度と反比例の関係にあり、視線移動速度が大きいとき、距離Ｌは相対的に小さく、視線移動速度が小さいとき、距離Ｌは相対的に大きくなるように設定される。視線移動速度が大きいとき、搭乗者は自車Ｍから比較的近い距離の施設を注視していると推定され、視線移動速度が小さいとき、搭乗者は自車Ｍから比較的遠い距離の施設を注視していると推定されるためである。

対象領域特定部２６０によって特定された対象領域情報は、施設特定部２７０へ提供される。施設特定部２７０は、地図データおよび施設データの位置情報（図５）を参照し、対象領域内に存在する施設を検索し、施設を特定する。好ましくは、自車位置から近い順に施設を特定する。図８は、対象領域内の施設Ｈ１、Ｈ２、Ｈ３が特定される例を示している。

施設情報表示部２８０は、施設特定部２７０によって特定された施設に関する情報を表示部１４０に表示させる。表示態様は特に問わないが、地図上に吹き出し表記で施設名等を表示させたり、あるいは、自車位置から近い順に施設名等をリスト表示させることができる。また、表示する情報は、図５に示すような、ジャンル、紹介情報、施設の外観画像などを含むものであってもよい。さらに好ましくは、施設情報表示部２８０は、搭乗者監視部２１０の監視結果および／または視線方向検出部２２０の検出結果に基づき、対象の搭乗者が存在する座席に近い表示部に施設に関する情報を表示させる。例えば、後部座席の左側に搭乗者が存在すれば、リアディスプレイ１４４Ａに施設情報が表示され、後部座席の右側に搭乗者が存在すれば、リアディスプレイ１４４Ｂに施設情報が表示される。また、施設情報表示部２８０は、施設に関する情報を記憶部１７０に記憶しておき、ユーザーからの指示があったときに、施設情報を表示部１４０に表示させるようにしてもよい。

図９は、本実施例に係る施設特定動作を示すフローである。先ず、搭乗者監視部２１０により、撮像部１００からの撮像画像に基づき搭乗者の有無等が監視される（Ｓ１００）。次に、視線方向検出部２２０は、一定のサンプリング周期で搭乗者の視線方向を検出し（Ｓ１０２）、視線移動速度算出部２３０は、検出された視線方向等を利用して搭乗者の視線移動速度を算出する（Ｓ１０４）。しきい値設定部２４０は、視線移動速度に応じた閾値を注視判定部２５０に設定し（Ｓ１０６）、注視判定部２５０は、設定された閾値を用いて、搭乗者の一定方向の注視時間が閾値を超えるか否かを判定する（Ｓ１０８）。閾値を超える注視であると判定された場合には、対象領域特定部２６０は、注視している視線方向Ｄｃおよび視線移動速度に基づき対象領域を特定し（Ｓ１１０）、施設特定部２７０は、対象領域内に存在する施設を特定し（Ｓ１１２）、施設情報表示部２８０は、特定された施設の情報を表示部１４０に表示させる。

図１０は、本実施例の効果を説明する図である。図１０（Ａ）は、従来の施設特定方法を示し、図１０（Ｂ）は、本実施例の施設特定方法を示している。搭乗者が比較的近い位置にある施設Ｈを注視する場合、遠い位置にある施設を注視するときよりも、視線の移動が速くなる。また、比較的近い位置にある施設を注視する場合には、施設を通り過ぎてしまうまでの時間も短くなる。図１０（Ａ）に示す従来例では、地点Ｐ１（時刻ｔ１）で施設Ｈの注視を開始し、地点Ｐ３（時刻ｔ３）で注視判定が行われたとしても、自車Ｍは施設Ｈを通り過ぎてしまっており、施設Ｈの特定をすることができない。これに対し、本実施例では、視線移動速度が速い場合には注視判定部２５０の閾値を小さく設定するため、地点Ｐ２（時刻ｔ２（ｔ１＜ｔ２＜ｔ３））の時点で注視判定が可能となり、施設Ｈを通り過ぎる前に施設Ｈを特定することができる。

次に、本発明の第２の実施例について説明する。第１の実施例では、視線方向検出部２２０は、一定のサンプリング周期で搭乗者の視線方向を検出する例を示したが、第２の実施例は、自車の走行速度に応じてサンプリング周期を変化させる。具体的には、視線方向検出部２２０は、車両情報検知部１２０から取得した自車の走行速度が高い場合にはサンプリング周期を相対的に速くし、走行速度が低い場合にはサンプリング周期を相対的に遅くする。自車の走行速度が速い場合には、視線方向の検出周期を速くし、施設の特定に要する時間を短縮する必要がある。

自車の走行速度とサンプリング周期との関係は、例えば、図１１に示すようなテーブルに規定され、当該テーブルが記憶部１７０に格納される。視線方向検出部２２０は、テーブルを参照して、走行速度に応じたサンプリング周期を設定することができる。

このように第２の実施例によれば、自車の走行速度に応じて視線方向の検出のためのサンプリング周期を変更するようにしたので、施設を通過する前に施設を特定することが容易になる。

次に、本発明の第３の実施例について説明する。第１の実施例では、対象領域特定部２６０は、図８に示すように視線方向Ｄｃを中心に一定の角度（α１、α２）および距離Ｌによって対象領域を特定したが、視線方向Ｄｘの始点は、自車位置すなわち自車Ｍに搭載されたＧＰＳ受信機の位置であり、ＧＰＳ受信機の位置は、注視判定された搭乗者の位置と一致しない。このため、第３の実施例では、視線方向Ｄｃの位置を補正し、より正確な対象領域を特定する。

図１２は、第３の実施例による視線方向Ｄｃの補正方法を説明する図である。同図において、Ｑａは、ＧＰＳ受信機の位置、Ｑｂは、後部座席の左側の搭乗者Ｗの位置である。搭乗者監視部２１０により搭乗者Ｗが検出され、注視判定部２５０により搭乗者Ｗが一定の方向を注視していると判定されたとき、対象領域特定部２６０は、ＧＰＳ受信機の位置Ｑａと搭乗者Ｗの位置ＱｂとのＸ方向、Ｙ方向の差分を求める。Ｘ方向、自車Ｍの基準線Ｋと平行であり、Ｙ方向は、それと直交する。次に、対象領域特定部２６０は、注視されていると判定された視線方向ＤｃをＸ方向、Ｙ方向の差分だけシフトし、視線方向ＤＣの始点を搭乗者Ｗの位置Ｑｂに補正する。なお、ＧＰＳ受信機の位置Ｑａと、他の座席までのＸ方向およびＹ方向の距離は、予め記憶部１７０に記憶しておくことができる。

このように第３の実施例によれば、視線方向Ｄｃを搭乗者の位置に補正することで、対象領域の特定をより正確に行うことができ、その結果、搭乗者の視線方向の施設の特定をより正確に行うことができる。

以上、本発明の好ましい実施の形態について詳述したが、本発明は、特定の実施形態に限定されるものではなく、特許請求の範囲に記載された発明の要旨の範囲において、種々の変形、変更が可能である。

１０：車載装置 １００：撮像部
１０２、１０４、１０６：撮像カメラ １１０：入力部
１２０：車両情報検知部 １３０：ナビゲーション部
１４０：表示部 １５０：音声出力部
１６０：通信部 １６２：位置情報配信サイト
１６４：地図データ配信サイト １６６：施設情報配信サイト
１７０：記憶部 １８０：制御部
２００：施設特定プログラム ２１０：搭乗者監視部
２２０：視線方向検出部 ２３０：視線移動速度算出部
２４０：閾値設定部 ２５０：注視判定部
２６０：対象領域特定部 ２７０：施設特定部
２８０：施設情報表示部

Claims (8)

1. 車内の搭乗者を撮像する撮像手段と、
   前記撮像手段により撮像された撮像画像に基づき一定のサンプリング周期で搭乗者の視線方向を検出する検出手段と、
   前記撮像手段により撮像された撮像画像に基づき搭乗者の視線移動速度を算出する算出手段と、
   搭乗者の視線方向が閾値よりも長く注視している車外の特定物を判別する判別手段と、
   前記判別手段によって判別された特定物に関する情報を表示する表示手段とを有し、
   前記判別手段は、前記視線移動速度に応じて前記閾値を可変する、電子装置。
2. 前記判別手段は、前記視線移動速度が大きいとき第１の閾値を設定し、前記視線移動速度が小さいとき第２の閾値を設定し、第１の閾値は、第２の閾値よりも小さい、請求項１に記載の電子装置。
3. 電子装置はさらに、少なくとも自車の走行速度を含む車両情報を検知する車両情報検知手段を含み、
   前記検出手段は、前記走行速度に応じて前記サンプリング周期を可変する、請求項１または２に記載の電子装置。
4. 前記検出手段は、前記走行速度が大きいとき第１のサンプリング周期を設定し、前記走行速度が小さいとき第２のサンプリング周期を設定し、第１のサンプリング周期は、第２のサンプリング周期よりも速い、請求項３に記載の電子装置。
5. 前記判別手段は、前記視線方向に基づき特定物を判別するための対象領域を特定する対象領域特定手段を含み、当該対象領域特定手段は、前記視線方向を中心とする一定の角度、および自車を起点とする距離によって前記対象領域を規定し、前記対象領域特定手段は、前記視線移動速度に応じて前記距離を設定する、請求項１ないし４いずれか１つに記載の電子装置。
6. 前記対象領域特定手段は、前記視線移動速度が大きいとき第１の距離を設定し、前記視線移動速度が小さいとき第２の距離を設定し、第１の距離は、第２の距離よりも小さい、請求項６に記載の電子装置。
7. 車内の搭乗者を撮像する撮像手段と、車外の施設に関する情報を表示可能な表示手段とを含む電子装置における施設特定方法であって、
   前記撮像手段により撮像された撮像画像に基づき一定のサンプリング周期で搭乗者の視線方向を検出するステップと、
   前記撮像手段により撮像された撮像画像に基づき視線移動速度を算出する算出するステップと、
   前記視線移動速度に応じて閾値を設定するステップと、
   搭乗者の視線方向が前記閾値よりも長く注視している車外の特定物を判別するステップと、
   前記判別された特定物に関する情報を表示するステップとを有する、施設特定方法。
8. 車内の搭乗者を撮像する撮像手段と、車外の施設に関する情報を表示可能な表示手段とを含む電子装置が実行する施設特定プログラムであって、
   前記撮像手段により撮像された撮像画像に基づき一定のサンプリング周期で搭乗者の視線方向を検出するステップと、
   前記撮像手段により撮像された撮像画像に基づき視線移動速度を算出する算出するステップと、
   前記視線移動速度に応じて閾値を設定するステップと、
   搭乗者の視線方向が前記閾値よりも長く注視している車外の特定物を判別するステップと、
   前記判別された特定物に関する情報を表示するステップとを有する、施設特定プログラム。
   

Images