JP6710817B2 - 笑顔伝染判定システム、笑顔伝染判定方法及びプログラム - Google Patents
笑顔伝染判定システム、笑顔伝染判定方法及びプログラム Download PDFInfo
- Publication number
- JP6710817B2 JP6710817B2 JP2019561439A JP2019561439A JP6710817B2 JP 6710817 B2 JP6710817 B2 JP 6710817B2 JP 2019561439 A JP2019561439 A JP 2019561439A JP 2019561439 A JP2019561439 A JP 2019561439A JP 6710817 B2 JP6710817 B2 JP 6710817B2
- Authority
- JP
- Japan
- Prior art keywords
- person
- image
- smile
- camera
- smiles
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Entrepreneurship & Innovation (AREA)
- Economics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
- Studio Devices (AREA)
Description
本発明は、カメラにて撮影された画像を取得するステップと、前記画像を解析して、前記カメラに写っている第1の人物および第2の人物が笑顔かどうかを判定するステップと、前記第1の人物の視線が前記第2の人物に向けられた後に前記第2の人物が笑顔になった場合、又は、笑顔である前記第1の人物に対して前記第2の人物の視線が向けられた後に前記第2の人物が笑顔になった場合に、前記第1の人物から前記第2の人物へ笑顔が伝染したと判定するステップとを有し、前記画像には、第1のカメラにて撮影された第1の画像および前記第1のカメラとは異なる位置に設けられた第2のカメラにて撮影された第2の画像が含まれ、前記取得するステップにおいて、前記第1の画像および前記第2の画像と、各カメラについて、設置位置、撮像方向、及び撮像範囲を取得し、前記伝染したと判定するステップにおいて、各カメラの設置位置、撮像方向および撮像範囲と、前記第1の画像内の前記第1の人物の位置と、前記第2の画像内の前記第2の人物の位置とに基づいて、前記第1の人物と前記第2の人物との位置関係を特定し、前記位置関係に基づいて前記第1の人物から前記第2の人物へ笑顔が伝染したと判定する笑顔伝染判定方法を提供する。
本発明は、コンピュータに、カメラにて撮影された画像を取得するステップと、前記画像を解析して、前記カメラに写っている第1の人物および第2の人物が笑顔かどうかを判定するステップと、前記第1の人物の視線が前記第2の人物に向けられた後に前記第2の人物が笑顔になった場合、又は、笑顔である前記第1の人物に対して前記第2の人物の視線が向けられた後に前記第2の人物が笑顔になった場合に、前記第1の人物から前記第2の人物へ笑顔が伝染したと判定するステップとを実行させ、前記画像には、第1のカメラにて撮影された第1の画像および前記第1のカメラとは異なる位置に設けられた第2のカメラにて撮影された第2の画像が含まれ、前記取得するステップにおいて、前記第1の画像および前記第2の画像と、各カメラについて、設置位置、撮像方向、及び撮像範囲を取得し、前記伝染したと判定するステップにおいて、各カメラの設置位置、撮像方向および撮像範囲と、前記第1の画像内の前記第1の人物の位置と、前記第2の画像内の前記第2の人物の位置とに基づいて、前記第1の人物と前記第2の人物との位置関係を特定し、前記位置関係に基づいて前記第1の人物から前記第2の人物へ笑顔が伝染したと判定するプログラムを提供する。
本発明は、ある人の画像を取得する取得手段と、前記画像を解析して、前記ある人が笑顔かどうかを判定する判定手段と、前記笑顔が第三者に伝染したかどうかを判定する伝染判定手段とを備える笑顔伝染判定システムを提供する。
図1は笑顔伝染判定システム1の概要を示すブロック図である。笑顔伝染判定システム1は、カメラ100と、サーバ装置200と、ユーザ端末300とを含む。カメラ100、サーバ装置200及びユーザ端末300はネットワーク900を介して通信可能に接続される。
図5は、笑顔伝染判定システム1の動作例を示す。各カメラ100は、撮像した画像(ここでは動画像とする)を示す画像データをサーバ装置200に送信する。取得部21は、これらの画像データを取得する(ステップS1)。
本発明は上述の実施形態に限定されるものではなく、種々の変形実施が可能である。以下、変形例をいくつか説明する。以下の変形例のうち2つ以上のものが組み合わせて用いられてもよい。
伝染判定部23、ある人(第1の人物)又は第三者(第2の人物)の行動に基づいて笑顔が伝染したと判定するようにしてもよい。例えば伝染判定部23は、視線検知に関する画像解析を用いることにより、ある人(第1の人物)又は第三者(第2の人物)の視線を特定し、笑顔になったある人(第1の人物)の視線が第三者(第2の人物)に向った後に第三者(第2の人物)が笑顔になった場合、又は、笑顔になったある人(第1の人物)に対して第三者(第2の人物)の視線が向った後に第三者(第2の人物)が笑顔になった場合に、笑顔が伝染したと判定するようにしてもよい。また、伝染判定部23、人の行動を画像解析により特定する技術を用いて、ある人(第1の人物)又は第三者(第2の人物)のジェスチャ(例えば相手の顔を覗き込むとか、相手に指をさす行為とか、相手の注意を惹くしぐさ等)を特定し、笑顔になったある人(第1の人物)のジェスチャが第三者(第2の人物)に対して行われた後に第三者(第2の人物)が笑顔になった場合、又は、笑顔になったある人(第1の人物)に対して第三者(第2の人物)のジェスチャがなされた後に第三者(第2の人物)が笑顔になった場合に、笑顔が伝染したと判定するようにしてもよい。
実施形態において、サーバ装置200は、1のカメラ100によって撮像された画像に含まれる複数の人物間で笑顔の伝染の有無を判定していたが、それぞれ異なるカメラ100に写っている複数の人物間で笑顔の伝染の有無を判定するようにしてもよい。この場合、各カメラ100は、撮像した画像を示す画像データをサーバ装置200に送信するときに、自身の位置(座標)のほか、撮像方向及び撮像範囲を示すデータを付加して送信する。取得部21は、これらの画像データおよび付加データを取得する。なお、各カメラ100の位置(座標)、撮像方向及び撮像範囲を示すデータは、サーバ装置200がカメラIDと対応付けて予め保持しておき、各カメラ100は、撮像した画像を示す画像データに自身のカメラIDを付加して送信するようにしてもよい。このようにしても、サーバ装置200は各画像データを撮像したカメラ100の位置(座標)のほか、撮像方向及び撮像範囲を特定することができる。
笑顔の伝染判定に用いる、ある人(第1の人物)が笑顔になった時期及び位置と第三者(第2の人物)が笑顔になった時期及び位置との関係(時間条件及び位置条件)は、なんらかの条件に応じて変動してもよい。例えばある人(第1の人物)の笑顔度が高いとき(顔を大きくゆがめて笑ったとき等)は時間条件又は位置条件を緩和してもよい。具体的には、ある人(第1の人物)の笑顔度がある基準値以上のときは、基準値未満の場合に比べて、ある人(第1の人物)が笑顔になった時期と第三者(第2の人物)が笑顔になった時期との差の閾値を大きくしてもよい。また、ある人(第1の人物)の笑顔度がある基準値以上のときは、基準値未満の場合に比べて、ある人(第1の人物)が笑顔になった位置と第三者(第2の人物)が笑顔になった位置との距離の閾値を大きくしてもよい。
サーバ装置200がカメラ100から画像を取得するタイミングやサーバ装置200にて画像解析を実行するタイミングは、任意である。例えば、各カメラ100は自発的に画像データをサーバ装置200に送信することはせず、サーバ装置200はユーザ端末300からの要求に応じてカメラ100に画像データを要求してもよい。あるいは、サーバ装置200はユーザからの要求のタイミングとは関係なく、予め定められたスケジュールに従って画像解析を実行してもよい。撮像された画像の取得、画像の解析、笑顔判定及び伝染判定は、複数のノードで行ってもよいし、一つのノードにて実行されてもよい。例えば、ユーザ端末300がサーバ装置200の機能を有してもよい。
Claims (4)
- カメラにて撮影された画像を取得する取得手段と、
前記画像を解析して、前記カメラに写っている第1の人物および第2の人物が笑顔かどうかを判定する笑顔判定手段と、
前記第1の人物の視線が前記第2の人物に向けられた後に前記第2の人物が笑顔になった場合、又は、笑顔である前記第1の人物に対して前記第2の人物の視線が向けられた後に前記第2の人物が笑顔になった場合に、前記第1の人物から前記第2の人物へ笑顔が伝染したと判定する伝染判定手段と
を備え、
前記画像には、第1のカメラにて撮影された第1の画像および前記第1のカメラとは異なる位置に設けられた第2のカメラにて撮影された第2の画像が含まれ、
前記取得手段は、前記第1の画像および前記第2の画像と、各カメラについて、設置位置、撮像方向、及び撮像範囲を取得し、
前記伝染判定手段は、各カメラの設置位置、撮像方向および撮像範囲と、前記第1の画像内の前記第1の人物の位置と、前記第2の画像内の前記第2の人物の位置とに基づいて、前記第1の人物と前記第2の人物との位置関係を特定し、前記位置関係に基づいて前記第1の人物から前記第2の人物へ笑顔が伝染したと判定する
笑顔伝染判定システム。 - 前記第1の人物から前記第2の人物へ笑顔の伝染があったと判定された場合、前記第1の人物を笑顔のインフルエンサーであると特定する特定手段
を備える請求項1に記載の笑顔伝染判定システム。 - カメラにて撮影された画像を取得するステップと、
前記画像を解析して、前記カメラに写っている第1の人物および第2の人物が笑顔かどうかを判定するステップと、
前記第1の人物の視線が前記第2の人物に向けられた後に前記第2の人物が笑顔になった場合、又は、笑顔である前記第1の人物に対して前記第2の人物の視線が向けられた後に前記第2の人物が笑顔になった場合に、前記第1の人物から前記第2の人物へ笑顔が伝染したと判定するステップと
を有し、
前記画像には、第1のカメラにて撮影された第1の画像および前記第1のカメラとは異なる位置に設けられた第2のカメラにて撮影された第2の画像が含まれ、
前記取得するステップにおいて、前記第1の画像および前記第2の画像と、各カメラについて、設置位置、撮像方向、及び撮像範囲を取得し、
前記伝染したと判定するステップにおいて、各カメラの設置位置、撮像方向および撮像範囲と、前記第1の画像内の前記第1の人物の位置と、前記第2の画像内の前記第2の人物の位置とに基づいて、前記第1の人物と前記第2の人物との位置関係を特定し、前記位置関係に基づいて前記第1の人物から前記第2の人物へ笑顔が伝染したと判定する
笑顔伝染判定方法。 - コンピュータに、
カメラにて撮影された画像を取得するステップと、
前記画像を解析して、前記カメラに写っている第1の人物および第2の人物が笑顔かどうかを判定するステップと、
前記第1の人物の視線が前記第2の人物に向けられた後に前記第2の人物が笑顔になった場合、又は、笑顔である前記第1の人物に対して前記第2の人物の視線が向けられた後に前記第2の人物が笑顔になった場合に、前記第1の人物から前記第2の人物へ笑顔が伝染したと判定するステップと
を実行させ、
前記画像には、第1のカメラにて撮影された第1の画像および前記第1のカメラとは異なる位置に設けられた第2のカメラにて撮影された第2の画像が含まれ、
前記取得するステップにおいて、前記第1の画像および前記第2の画像と、各カメラについて、設置位置、撮像方向、及び撮像範囲を取得し、
前記伝染したと判定するステップにおいて、各カメラの設置位置、撮像方向および撮像範囲と、前記第1の画像内の前記第1の人物の位置と、前記第2の画像内の前記第2の人物の位置とに基づいて、前記第1の人物と前記第2の人物との位置関係を特定し、前記位置関係に基づいて前記第1の人物から前記第2の人物へ笑顔が伝染したと判定する
プログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2017/046715 WO2019130436A1 (ja) | 2017-12-26 | 2017-12-26 | 笑顔伝染判定システム、笑顔伝染判定方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6710817B2 true JP6710817B2 (ja) | 2020-06-17 |
JPWO2019130436A1 JPWO2019130436A1 (ja) | 2020-07-16 |
Family
ID=67066754
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019561439A Active JP6710817B2 (ja) | 2017-12-26 | 2017-12-26 | 笑顔伝染判定システム、笑顔伝染判定方法及びプログラム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6710817B2 (ja) |
WO (1) | WO2019130436A1 (ja) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011170579A (ja) * | 2010-02-18 | 2011-09-01 | Seiko Epson Corp | 親密度判定方法及び親密度判定装置 |
JP2013134601A (ja) * | 2011-12-26 | 2013-07-08 | Nikon Corp | 電子機器 |
JP6023685B2 (ja) * | 2013-10-09 | 2016-11-09 | 日本電信電話株式会社 | 感情情報表示制御装置、その方法及びプログラム |
US9760766B2 (en) * | 2015-06-30 | 2017-09-12 | International Business Machines Corporation | System and method for interpreting interpersonal communication |
-
2017
- 2017-12-26 JP JP2019561439A patent/JP6710817B2/ja active Active
- 2017-12-26 WO PCT/JP2017/046715 patent/WO2019130436A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
JPWO2019130436A1 (ja) | 2020-07-16 |
WO2019130436A1 (ja) | 2019-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10382670B2 (en) | Cognitive recording and sharing | |
US10554829B2 (en) | Information processing device, photographing device, image sharing system, and method of information processing | |
US10216267B2 (en) | Portable electronic equipment and method of controlling a portable electronic equipment | |
CN110084153B (zh) | 用于自动共享图片的智能相机 | |
US9418278B2 (en) | Image analysis method, camera apparatus, control apparatus, control method and storage medium | |
JP6885682B2 (ja) | 監視システム、管理装置、及び監視方法 | |
CN107995422B (zh) | 图像拍摄方法和装置、计算机设备、计算机可读存储介质 | |
KR20180052002A (ko) | 이미지 처리 방법 및 이를 지원하는 전자 장치 | |
JP2008017093A (ja) | 監視システム、監視装置及び監視方法 | |
JP6645655B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
US20210295550A1 (en) | Information processing device, information processing method, and program | |
KR102094953B1 (ko) | 시선 추적 방법 및 이를 수행하기 위한 단말 | |
JP2022003526A (ja) | 情報処理装置、検出システム、情報処理方法、及びプログラム | |
JP6437217B2 (ja) | 画像出力装置、画像管理システム、画像処理方法及びプログラム | |
JP2015233204A (ja) | 画像記録装置及び画像記録方法 | |
KR102457247B1 (ko) | 이미지를 처리하는 전자 장치 및 그 제어 방법 | |
KR101857164B1 (ko) | 영상획득장치 및 영상처리장치 | |
JP6710817B2 (ja) | 笑顔伝染判定システム、笑顔伝染判定方法及びプログラム | |
US9076031B2 (en) | Image capture apparatus, control method of image capture apparatus, and recording medium | |
JP6734487B2 (ja) | 地域別笑顔度表示システム、地域別笑顔度表示方法及びプログラム | |
US10956604B2 (en) | Electronic device and operation method thereof | |
JP2017017488A (ja) | 監視システム、撮影制御方法及びプログラム | |
KR102123862B1 (ko) | 사생활 침해장비 탐지방법, 장치 및 그 시스템 | |
JP6112346B2 (ja) | 情報収集システム、プログラムおよび情報収集方法 | |
KR20150106621A (ko) | 단말, 서비스 제공 장치, 그 제어 방법, 컴퓨터 프로그램이 기록된 기록 매체 및 이미지 검색 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200410 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200410 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20200410 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20200514 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200526 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200527 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6710817 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |