JP2013246184A - 表示装置 - Google Patents
表示装置 Download PDFInfo
- Publication number
- JP2013246184A JP2013246184A JP2012117259A JP2012117259A JP2013246184A JP 2013246184 A JP2013246184 A JP 2013246184A JP 2012117259 A JP2012117259 A JP 2012117259A JP 2012117259 A JP2012117259 A JP 2012117259A JP 2013246184 A JP2013246184 A JP 2013246184A
- Authority
- JP
- Japan
- Prior art keywords
- user
- information
- face
- display
- range
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Processing (AREA)
- Digital Computer Display Output (AREA)
- Controls And Circuits For Display Device (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】情報表示装置は、機能的には、利用者に適した情報を表示部40に表示するため、当該情報をネットワーク6を介して外部から通信部60で取得し、制御部20においてハーフミラー5に反射像として映る利用者の表示画面における範囲を検出し、利用者の顔を認識して、当該顔を有する利用者に適した情報を利用者の範囲に重ならない位置に表示する。
【選択図】図2
Description
前記利用者の像を含む撮影画像を取得する撮像部と、
前記情報を表示画面に表示する表示部と、
前記撮影画像に含まれる前記利用者の顔部分の像である顔領域を検出する顔領域検出部と、
前記顔領域検出部により検出された顔領域に基づき、当該顔領域に対応する顔を有する利用者を複数の候補から特定する顔特定部と、
前記顔領域検出部により検出された顔領域を含む利用者の像の範囲に対応する、前記表示画面上の利用者の範囲を決定する利用者範囲決定部と、
前記顔特定部により特定された利用者に関連する情報として予め定められた種類または項目の情報を、前記利用者範囲決定部により決定された前記利用者の範囲のうち少なくとも前記顔領域に対応する範囲に重ならない前記表示画面上の位置に表示させる表示情報制御部と
を備えることを特徴とする。
前記表示画面に対して略平行に設けられ、前記表示画面側からの光を少なくとも一部透過し、前記表示画面と反対側からの光を少なくとも一部反射する鏡をさらに備え、
前記鏡は、前記利用者の像を当該利用者に提示することを特徴とする。
前記表示情報制御部は、前記表示画面上に、複数の利用者のうちの一人の利用者の範囲を含む情報表示領域を前記利用者毎に設定し、前記利用者に関連する情報を、対応する利用者に設定された情報表示領域の少なくとも一部が含まれる範囲に表示させることを特徴とする。
前記表示情報制御部は、前記利用者毎に設定される情報表示領域を含まないか、または前記利用者のうちの二人以上に設定される情報表示領域の一部をともに含む共通領域を設定し、前記複数の利用者に共通して関連する情報として予め定められた種類または項目の情報を、前記共通領域の少なくとも一部が含まれる範囲に表示させることを特徴とする。
前記表示情報制御部は、前記利用者の範囲の少なくとも一部が含まれる範囲であって、前記顔領域に対応する範囲に重ならない前記表示画面上の位置に、前記利用者に関連する情報としての画像を表示させることを特徴とする。
前記利用者の像を含む撮影画像を取得する撮像ステップと、
前記情報を表示画面に表示する表示ステップと、
前記撮影画像に含まれる前記利用者の顔部分の像である顔領域を検出する顔領域検出ステップと、
前記顔領域検出ステップにより検出された顔領域に基づき、当該顔領域に対応する顔を有する利用者を複数の候補から特定する顔特定ステップと、
前記顔領域検出ステップにより検出された顔領域を含む利用者の像の範囲に対応する、前記表示画面上の利用者の範囲を決定する利用者範囲決定ステップと、
前記顔特定ステップにより特定された利用者に関連する情報として予め定められた種類または項目の情報を、前記利用者範囲決定ステップにより決定された前記利用者の範囲のうち少なくとも前記顔領域に対応する範囲に重ならない前記表示画面上の位置に表示させる表示情報制御ステップと
を備えることを特徴とする。
<1.1 全体構成>
図1は、本発明の第1の実施形態に係る情報表示装置の全体的な構成を示すブロック図である。この第1の実施形態における情報表示装置100は、画像処理装置2と、撮像装置であるイメージセンサ3と、液晶表示装置4と、ハーフミラー5とを備える。
図2は、本実施形態に係る情報表示装置を機能面から見た構成を示すブロック図である。この図2に示す情報表示装置は、機能的には、主として利用者の像を取得するための撮像部30と、利用者に適した上記情報を表示するための表示部40と、当該情報をネットワーク6を介して外部から適宜に取得するための通信部60と、これらを制御するとともに、ハーフミラー5に反射像として映る利用者の像の位置を検出し、利用者の顔を認識することにより特定するための制御部20とを備える。
y=ya×cosθ−(Eb−Ea)×sinθ …(1)
続いて、上記表示情報制御部25による表示制御動作につき、図5を参照して詳しく説明する。図5は、液晶表示装置の表示画面の構成例を示す図である。この図5に示される液晶表示装置の表示画面410には、特定された利用者に適した情報である5つの情報、すなわち、近隣の天気や降水確率、気温などを示す天候情報411、未読のメール件数等を示すメール情報412、当該利用者が予め作成した行動予定を示す予定情報413と、平均株価や値上がり率などを示す株価情報414と、現在時刻を示す時刻情報415とが表示されている。
以上のように、本実施形態では、利用者の像の少なくとも一部と合わせて提示されるように、当該利用者に関連する適宜の情報を表示するため、顔領域検出部により検出された顔領域に基づき、当該顔領域に対応する顔を有する利用者を複数の候補から顔特定部で特定し、利用者範囲決定部により決定された利用者の範囲のうち少なくとも顔領域(典型的には体領域)に対応する範囲に重ならない表示画面上の位置に表示させる。したがって、利用者が表示すべき情報の選択を逐一行うことなく、利用者が欲する情報を適宜に提示し、かつ当該情報の提示により利用者の(特に顔の)像と重なって表示されることにより、鏡としての機能が阻害されることを防止することができる。
<2.1 全体構成および動作>
本発明の第2の実施形態に係る情報表示装置は、図1に示される全体構成および図2に示される機能構成と同様であるが、第1の実施形態では利用者が1人である場合を例に説明したのに対して、ここでは利用者が2人である場合の動作を説明する。なお、利用者が3人以上であっても同様に考えることができるので、その場合の説明は省略する。以下では、図6を参照して、本実施形態における情報表示装置の各動作、すなわち各構成要素の処理の流れについて説明する。
図6は、本実施形態における情報表示装置の構成要素における処理理手順を示すフローチャートである。
続いて、本実施形態における表示情報制御部25による表示制御動作につき、図7および図8を参照して詳しく説明する。
以上のように、本実施形態では、複数の利用者のうちの一人の利用者の範囲を含む情報表示領域を利用者毎に設定し、利用者に関連する情報を、対応する利用者に設定された情報表示領域の少なくとも一部が含まれる範囲に表示させるので、各利用者が情報の選択を行うことなく、各利用者が欲する情報を適宜に提示し、かつ当該情報の提示により各利用者の(特に顔の)像と重なって表示されることにより、鏡としての機能が阻害されることを防止することができる。
<3.1 全体構成および動作>
本発明の第3の実施形態に係る情報表示装置は、図1に示される全体構成および図2に示される機能構成と同様であるが、本実施形態では、第1の実施形態とは逆に、典型的には利用者の体領域Ubに重なるように表示する場合について説明する。なお、利用者が2人以上であっても同様に考えることができるので、その場合の説明は省略し、ここでは利用者が一人の例で説明する。
続いて、本実施形態における表示情報制御部25による表示制御動作につき、図10を参照して詳しく説明する。図10は、本実施形態における液晶表示装置の表示画面の構成例を示す図である。この図10に示される表示画面430には、利用者の体領域Ubに重なるように表示される服装の種類を示す種類選択情報431と、当該種類選択情報431に基づき選択された服装の種類(ここではネクタイ)の画像候補を示す画像選択情報432とが表示されている。
以上のように、本実施形態では、利用者の範囲の少なくとも一部が含まれる範囲であって、顔領域に対応する範囲に重ならない表示画面上の位置に、利用者に関連する情報としての画像を表示させるので、例えば服装など利用者の像に重なるように表示することで、仮想的な着せ替えを行うことができ、鏡としてもより使いやすくすることができる。
本実施形態では、ハーフミラーが使用され、利用者の像はこのハーフミラーに映る構成であるが、ハーフミラーおよび同様の構成要素を使用せず、表示画面に利用者の像を映す、いわゆるビデオミラーの構成であってもよい。この場合には、利用者の範囲を決定することが簡単である利点は反面、利用者の像はイメージセンサおよび液晶表示装置の解像度によっては必ずしも美しく表示されないことがある。また実際の鏡のように正面から映る(かのような)利用者の像を表示画面に表示するためには、イメージセンサから得られる撮像画像を変形する必要があり、鏡と完全に同一のように表示することは困難である。しかし、簡易な構成で、鏡として使用することができる点で好適である。
3…イメージセンサ
4…液晶表示装置
5…ハーフミラー
20…制御部
21…顔領域検出部
22…顔特定部
23…利用者範囲決定部
25…表示情報制御部
30…撮像部(イメージセンサ)
40…表示部(液晶表示装置)
60…通信部(ネットワークアダプタ)
410,420,430…表示画面
Uf,Uf1,Uf2…顔領域
Ub,Ub1,Ub2…体領域
Claims (6)
- 利用者の像の少なくとも一部と合わせて提示されるように、当該利用者に関連する情報を表示する表示装置であって、
前記利用者の像を含む撮影画像を取得する撮像部と、
前記情報を表示画面に表示する表示部と、
前記撮影画像に含まれる前記利用者の顔部分の像である顔領域を検出する顔領域検出部と、
前記顔領域検出部により検出された顔領域に基づき、当該顔領域に対応する顔を有する利用者を複数の候補から特定する顔特定部と、
前記顔領域検出部により検出された顔領域を含む利用者の像の範囲に対応する、前記表示画面上の利用者の範囲を決定する利用者範囲決定部と、
前記顔特定部により特定された利用者に関連する情報として予め定められた種類または項目の情報を、前記利用者範囲決定部により決定された前記利用者の範囲のうち少なくとも前記顔領域に対応する範囲に重ならない前記表示画面上の位置に表示させる表示情報制御部と
を備えることを特徴とする、表示装置。 - 前記表示画面に対して略平行に設けられ、前記表示画面側からの光を少なくとも一部透過し、前記表示画面と反対側からの光を少なくとも一部反射する鏡をさらに備え、
前記鏡は、前記利用者の像を当該利用者に提示することを特徴とする、請求項1に記載の表示装置。 - 前記表示情報制御部は、前記表示画面上に、複数の利用者のうちの一人の利用者の範囲を含む情報表示領域を前記利用者毎に設定し、前記利用者に関連する情報を、対応する利用者に設定された情報表示領域の少なくとも一部が含まれる範囲に表示させることを特徴とする、請求項1に記載の表示装置。
- 前記表示情報制御部は、前記利用者毎に設定される情報表示領域を含まないか、または前記利用者のうちの二人以上に設定される情報表示領域の一部をともに含む共通領域を設定し、前記複数の利用者に共通して関連する情報として予め定められた種類または項目の情報を、前記共通領域の少なくとも一部が含まれる範囲に表示させることを特徴とする、請求項3に記載の表示装置。
- 前記表示情報制御部は、前記利用者の範囲の少なくとも一部が含まれる範囲であって、前記顔領域に対応する範囲に重ならない前記表示画面上の位置に、前記利用者に関連する情報としての画像を表示させることを特徴とする、請求項1に記載の表示装置。
- 利用者の像の少なくとも一部と合わせて提示されるように、当該利用者に関連する情報を表示する表示方法であって、
前記利用者の像を含む撮影画像を取得する撮像ステップと、
前記情報を表示画面に表示する表示ステップと、
前記撮影画像に含まれる前記利用者の顔部分の像である顔領域を検出する顔領域検出ステップと、
前記顔領域検出ステップにより検出された顔領域に基づき、当該顔領域に対応する顔を有する利用者を複数の候補から特定する顔特定ステップと、
前記顔領域検出ステップにより検出された顔領域を含む利用者の像の範囲に対応する、前記表示画面上の利用者の範囲を決定する利用者範囲決定ステップと、
前記顔特定ステップにより特定された利用者に関連する情報として予め定められた種類または項目の情報を、前記利用者範囲決定ステップにより決定された前記利用者の範囲のうち少なくとも前記顔領域に対応する範囲に重ならない前記表示画面上の位置に表示させる表示情報制御ステップと
を備えることを特徴とする、表示方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012117259A JP6031258B2 (ja) | 2012-05-23 | 2012-05-23 | 表示装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012117259A JP6031258B2 (ja) | 2012-05-23 | 2012-05-23 | 表示装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013246184A true JP2013246184A (ja) | 2013-12-09 |
JP6031258B2 JP6031258B2 (ja) | 2016-11-24 |
Family
ID=49846033
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012117259A Active JP6031258B2 (ja) | 2012-05-23 | 2012-05-23 | 表示装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6031258B2 (ja) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014238434A (ja) * | 2013-06-06 | 2014-12-18 | 株式会社アイ・オー・データ機器 | 表示装置、表示プログラムおよび表示方法 |
WO2015166691A1 (ja) * | 2014-04-30 | 2015-11-05 | シャープ株式会社 | 表示装置 |
JP2015210508A (ja) * | 2014-04-30 | 2015-11-24 | シャープ株式会社 | 表示装置 |
JP2015210797A (ja) * | 2014-04-30 | 2015-11-24 | シャープ株式会社 | 表示装置 |
JP2016001794A (ja) * | 2014-06-11 | 2016-01-07 | シャープ株式会社 | 表示装置 |
KR20160096853A (ko) * | 2015-02-06 | 2016-08-17 | 삼성전자주식회사 | 전자 장치 및 사용자 인터페이스 제공 방법 |
JP2018075356A (ja) * | 2016-11-02 | 2018-05-17 | 国立研究開発法人量子科学技術研究開発機構 | X線透視装置およびx線透視方法 |
JP2019165851A (ja) * | 2018-03-22 | 2019-10-03 | カシオ計算機株式会社 | 報知装置、報知方法及び報知プログラム |
JP2019209065A (ja) * | 2018-06-08 | 2019-12-12 | カシオ計算機株式会社 | 表示装置、表示方法及び表示プログラム |
JPWO2021171442A1 (ja) * | 2020-02-26 | 2021-09-02 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006236013A (ja) * | 2005-02-25 | 2006-09-07 | Nippon Telegr & Teleph Corp <Ntt> | 環境的情報提示装置、環境的情報提示方法およびこの方法のプログラム |
JP2010061265A (ja) * | 2008-09-02 | 2010-03-18 | Fujifilm Corp | 人物検索登録システム |
JP2010191487A (ja) * | 2009-02-13 | 2010-09-02 | Sony Corp | 情報処理装置および情報処理方法 |
JP2011150225A (ja) * | 2010-01-25 | 2011-08-04 | Seiko Epson Corp | 画像表示装置及び画像表示方法 |
-
2012
- 2012-05-23 JP JP2012117259A patent/JP6031258B2/ja active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006236013A (ja) * | 2005-02-25 | 2006-09-07 | Nippon Telegr & Teleph Corp <Ntt> | 環境的情報提示装置、環境的情報提示方法およびこの方法のプログラム |
JP2010061265A (ja) * | 2008-09-02 | 2010-03-18 | Fujifilm Corp | 人物検索登録システム |
JP2010191487A (ja) * | 2009-02-13 | 2010-09-02 | Sony Corp | 情報処理装置および情報処理方法 |
JP2011150225A (ja) * | 2010-01-25 | 2011-08-04 | Seiko Epson Corp | 画像表示装置及び画像表示方法 |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014238434A (ja) * | 2013-06-06 | 2014-12-18 | 株式会社アイ・オー・データ機器 | 表示装置、表示プログラムおよび表示方法 |
WO2015166691A1 (ja) * | 2014-04-30 | 2015-11-05 | シャープ株式会社 | 表示装置 |
JP2015210508A (ja) * | 2014-04-30 | 2015-11-24 | シャープ株式会社 | 表示装置 |
JP2015210797A (ja) * | 2014-04-30 | 2015-11-24 | シャープ株式会社 | 表示装置 |
JP2016001794A (ja) * | 2014-06-11 | 2016-01-07 | シャープ株式会社 | 表示装置 |
KR102375699B1 (ko) * | 2015-02-06 | 2022-03-17 | 삼성전자 주식회사 | 전자 장치 및 사용자 인터페이스 제공 방법 |
KR20160096853A (ko) * | 2015-02-06 | 2016-08-17 | 삼성전자주식회사 | 전자 장치 및 사용자 인터페이스 제공 방법 |
JP2018075356A (ja) * | 2016-11-02 | 2018-05-17 | 国立研究開発法人量子科学技術研究開発機構 | X線透視装置およびx線透視方法 |
US11045663B2 (en) | 2016-11-02 | 2021-06-29 | Shimadzu Corporation | X-ray fluoroscopy device and x-ray fluoroscopy method |
JP7125700B2 (ja) | 2016-11-02 | 2022-08-25 | 国立研究開発法人量子科学技術研究開発機構 | X線透視装置およびx線透視方法 |
JP2019165851A (ja) * | 2018-03-22 | 2019-10-03 | カシオ計算機株式会社 | 報知装置、報知方法及び報知プログラム |
JP7139638B2 (ja) | 2018-03-22 | 2022-09-21 | カシオ計算機株式会社 | 報知装置、報知方法及び報知プログラム |
JP2019209065A (ja) * | 2018-06-08 | 2019-12-12 | カシオ計算機株式会社 | 表示装置、表示方法及び表示プログラム |
JP7135466B2 (ja) | 2018-06-08 | 2022-09-13 | カシオ計算機株式会社 | 表示装置、表示方法及び表示プログラム |
JPWO2021171442A1 (ja) * | 2020-02-26 | 2021-09-02 | ||
WO2021171442A1 (ja) * | 2020-02-26 | 2021-09-02 | 日本電信電話株式会社 | 鏡像に情報を重畳して表示する表示装置と表示方法と表示プログラム |
JP7318795B2 (ja) | 2020-02-26 | 2023-08-01 | 日本電信電話株式会社 | 鏡像に情報を重畳して表示する表示装置と表示方法と表示プログラム |
US12026424B2 (en) | 2020-02-26 | 2024-07-02 | Nippon Telegraph And Telephone Corporation | Apparatus for displaying information superimposed on mirror image, displaying apparatus, and displaying program |
Also Published As
Publication number | Publication date |
---|---|
JP6031258B2 (ja) | 2016-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6031258B2 (ja) | 表示装置 | |
US20230328207A1 (en) | Method and System for Providing At Least One Image Captured By a Scene Camera of a Vehicle | |
TWI242701B (en) | Autonomous moving robot | |
US11830249B2 (en) | Augmented reality, computer vision, and digital ticketing systems | |
US9262671B2 (en) | Systems, methods, and software for detecting an object in an image | |
JP4876687B2 (ja) | 注目度計測装置及び注目度計測システム | |
EP3151202A1 (en) | Information processing device and information processing method | |
JP4717934B2 (ja) | 関係分析方法、関係分析プログラム、および、関係分析装置 | |
CN112823328A (zh) | 使用被绘制在外部显示器上的同步图像用于hmd相机校准的方法 | |
US10254831B2 (en) | System and method for detecting a gaze of a viewer | |
US20160232399A1 (en) | System and method of detecting a gaze of a viewer | |
US10803988B2 (en) | Color analysis and control using a transparent display screen on a mobile device with non-transparent, bendable display screen or multiple display screen with 3D sensor for telemedicine diagnosis and treatment | |
US20170344858A1 (en) | Control device, control method, and computer program product | |
JP2003150306A (ja) | 情報表示装置とその方法 | |
JP2013125985A (ja) | 表示システム | |
US20120326969A1 (en) | Image slideshow based on gaze of a user | |
US20220006950A1 (en) | Positioning method for facial image of smart mirror | |
JP2014010605A (ja) | 情報処理装置、情報表示装置、情報処理方法およびプログラム | |
JP5448952B2 (ja) | 同一人判定装置、同一人判定方法および同一人判定プログラム | |
JP6026050B1 (ja) | 表示制御システム、表示制御装置、表示制御方法、及びプログラム | |
JP2014178909A (ja) | 商取引システム | |
US9911237B1 (en) | Image processing techniques for self-captured images | |
JP2006301534A (ja) | ディスプレイ制御装置、ディスプレイ制御方法、ディスプレイ制御プログラム、およびディスプレイ | |
JP5791557B2 (ja) | 連絡操作支援システム、連絡操作支援装置および連絡操作方法 | |
CN112114659A (zh) | 用于确定用户的精细的注视点的方法和*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150401 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160224 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160301 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160427 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160621 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160808 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20161018 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20161024 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6031258 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |