JP7398854B1 - ウェブページ閲覧解析システム、ウェブページ閲覧解析方法およびウェブページ閲覧解析プログラム - Google Patents

ウェブページ閲覧解析システム、ウェブページ閲覧解析方法およびウェブページ閲覧解析プログラム Download PDF

Info

Publication number
JP7398854B1
JP7398854B1 JP2023108601A JP2023108601A JP7398854B1 JP 7398854 B1 JP7398854 B1 JP 7398854B1 JP 2023108601 A JP2023108601 A JP 2023108601A JP 2023108601 A JP2023108601 A JP 2023108601A JP 7398854 B1 JP7398854 B1 JP 7398854B1
Authority
JP
Japan
Prior art keywords
web page
facial expression
viewers
viewer
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2023108601A
Other languages
English (en)
Inventor
篤基 古幡
健太 新冨
寛紀 渡辺
光孝 河相
Original Assignee
ヴィアゲート株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ヴィアゲート株式会社 filed Critical ヴィアゲート株式会社
Priority to JP2023108601A priority Critical patent/JP7398854B1/ja
Application granted granted Critical
Publication of JP7398854B1 publication Critical patent/JP7398854B1/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)

Abstract

【課題】閲覧者の生体情報に基づくウェブページ閲覧時の態度からウェブページに関する詳細なインサイトを提供する。【解決手段】ウェブページに対する閲覧者のインサイトを解析するウェブページ閲覧解析システムは、複数の閲覧者それぞれに対応する複数の注視点データを取得し、前記複数の注視点データのうち少なくとも幾つかに基づいて、当該注視点データに対応する閲覧者が前記ウェブページを見たときの注視点を可視化した注視点可視化マップを生成し、前記注視点可視化マップを前記ウェブページに重畳して表示する。【選択図】図9

Description

特許法第30条第2項適用 サイト掲載日:令和5年5月10日、掲載サイトのアドレス:https://research.viagate.com/ サイト掲載日:令和5年5月25日、掲載サイトのアドレス:https://prtimes.jp/main/html/rd/p/000000002.000116494.html サイト掲載日:令和5年5月31日、掲載サイトのアドレス:https://prtimes.jp/main/html/rd/p/000000003.000116494.html サイト掲載日:令和5年3月27日、掲載サイトのアドレス:https://www.wantedly.com/companies/company_7088487/about サイト掲載日:令和5年6月5日、掲載サイトのアドレス:https://sogyotecho.jp/news/20230605viagate/
本開示は、ウェブページ閲覧解析システム、ウェブページ閲覧解析方法およびウェブページ閲覧解析プログラムに関する。
コロナ禍の影響によって社会生活の大部分においてオンライン化(換言すれば、デジタルトランスフォーメーション(DX)化)が加速度的に現在進んできている。特に、マーケティング分野においては、デジタルマーケティングが紙媒体等を用いた従来のマーケティングよりも主流となっている。デジタルマーケティングの分野においては、ウェブサイトを用いたマーケティングが主流となる。
特許文献1では、広告動画等のデジタルマーケティングの効果を評価するための広告評価システムが開示されている。当該広告評価システムは、ユーザ端末と、電子メールサーバと、動画配信サーバと、管理サーバとを備える。これらの要素は通信ネットワークを介して通信可能に接続されている。広告評価システムは、ユーザの取引データに基づいて、広告動画等のデジタルマーケティングを通じて紹介された商品をユーザが購入したかどうか否かを判定した上で、当該判定結果に応じてデジタルマーケティングの効果を評価している。
特許第7057606号
特許文献1に開示された広告評価システムでは、デジタルマーケティングを通じて紹介された商品をユーザが実際に購入したかどうかの販売実績に応じて当該デジタルマーケティングの効果が評価されている。このため、当該広告評価システムでは、広告対象の商品の実際の販売実績が未だない段階ではデジタルマーケティングを評価することはできない。その一方で、商品についてのデジタルマーケティングを行う企業側では、商品を広告及び販売するためのウェブページのローンチ前に当該ウェブページに関する詳細なインサイトを把握しておきたいとのニーズが存在する。ここで、「インサイト」とは、顧客のデータやフィードバックを分析して洗練された形で提示される、顧客の潜在的ニーズ、感情、動機、価値観、行動パターンや傾向に関する深い理解を意味する。特に、企業側では、ウェブページのローンチ前にウェブページを閲覧する閲覧者の生体情報(例えば、視線や表情等)に基づいた当該ウェブページに関するインサイトを把握しておきたとのニーズが存在する。このように、上記ニーズを提供可能な広告評価システムについて検討の余地がある。
本開示は、閲覧者の生体情報に基づくウェブページ閲覧時の態度からウェブページに関する詳細なインサイトを提供することが可能なウェブページ閲覧解析システム、ウェブページ閲覧解析方法、ウェブページ閲覧解析プログラムを提供することを目的とする。
本開示の一態様に係るウェブページ閲覧解析システムは、ウェブページに対する閲覧者のインサイトを解析するウェブページ閲覧解析システムであって、複数の閲覧者それぞれに対応する複数の注視点データを取得し、前記複数の注視点データのうち少なくとも幾つかに基づいて、当該注視点データに対応する閲覧者が前記ウェブページを見たときの注視点を可視化した注視点可視化マップを生成し、前記注視点可視化マップを前記ウェブページに重畳して表示する。
上記構成によれば、注視点可視化マップが企業側端末に提示されるため、企業側は、注視点可視化マップを確認することで、ウェブページに対する閲覧者の閲覧行動を詳細に把握することができる。例えば、企業側は、閲覧者によるウェブページ上の注目領域を詳細に把握することが可能となる。このように、ウェブページの解析を所望する企業側にウェブページに関する詳細なインサイトを提供することが可能となる。
本開示の一態様に係るウェブページ閲覧解析システムは、ウェブページに対する閲覧者のインサイトを解析するウェブページ閲覧解析システムであって、複数の閲覧者それぞれに対応する複数の属性データを取得し、前記複数の属性データのうち少なくとも幾つかに基づいて、ヒアリング先としておすすめの閲覧者を抽出し、前記おすすめの閲覧者に関する情報を表示する。
上記構成によれば、企業側は、ヒアリング先としておすすめの閲覧者に関する情報を把握することができる。このように、ウェブページの解析を所望する企業側にウェブページに関する詳細なインサイトを提供することが可能となる。
本開示の一態様に係るウェブページ閲覧解析システムは、ウェブページに対する閲覧者のインサイトを解析するウェブページ閲覧解析システムであって、複数の閲覧者それぞれに対応する複数の表情データを取得し、前記複数の表情データのうち少なくとも幾つかに基づいて、当該表情データに対応する閲覧者が前記ウェブページを見たときの総合的な表情を示す総合表情情報を生成し、前記総合表情情報を表示する。
上記構成によれば、総合表情情報が企業側端末に提示されるため、企業側は、総合表情情報を確認することで、ウェブページに対する閲覧者の閲覧行動を詳細に把握することができる。例えば、企業側は、閲覧者によるウェブページに対する表情(例えば、嬉しい、悲しい等)を詳細に把握することが可能となる。このように、ウェブページ解析を所望する企業側にウェブページに関する詳細なインサイトを提供することが可能となる。
本開示の一態様に係るウェブページ閲覧解析システムは、ウェブページに対する閲覧者のインサイトを解析するウェブページ閲覧解析システムであって、複数の閲覧者それぞれに対応する複数の表情データを取得し、前記複数の表情データのうち少なくとも幾つかに基づいて、当該表情データに対応する閲覧者が前記ウェブページを見たときの総合的な興味度を示す総合興味度情報を生成し、前記総合興味度情報を表示する。
上記構成によれば、総合興味度情報が企業側端末に提示されるため、企業側は、総合興味度情報を確認することで、ウェブページに対する閲覧者の閲覧行動を詳細に把握することができる。例えば、企業側は、閲覧者によるウェブページに対する興味度を詳細に把握することが可能となる。このように、ウェブページ解析を所望する企業側にウェブページに関する詳細なインサイトを提供することが可能となる。
また、ウェブページ閲覧解析システムは、前記複数の閲覧者の抽出条件を入力し、前記抽出条件に基づいて、前記複数の注視点データのうち少なくとも幾つかを抽出してもよい。
上記構成によれば、企業側は、抽出条件に合致した閲覧者の閲覧行動を詳細に把握することができるため、ウェブページに関するより詳細なインサイトを企業側に提供することが可能となる。
また、前記抽出条件は、前記複数の閲覧者の年代情報と、前記複数の閲覧者の性別情報と、前記複数の閲覧者の住所情報と、前記複数の閲覧者の職業情報と、前記複数の閲覧者の世帯人数情報と、前記複数の閲覧者の婚姻情報と、前記複数の閲覧者の学歴情報のうちの少なくとも1つに関連付けられてもよい。
上記構成によれば、複数の閲覧者の年代情報、性別情報、住所情報、職業情報、世帯人数情報、婚姻情報、学歴情報のうちの少なくとも1つに関連付けられた抽出条件に合致した閲覧者の閲覧行動を詳細に把握することができるため、閲覧者の属性に応じたウェブページに関するより詳細なインサイトを企業側に提供することが可能となる。
また、前記注視点可視化マップは、注視点ヒートマップであってもよい。
上記によれば、企業側は、注視点ヒートマップを確認することで、ウェブページに対する閲覧者の閲覧行動を詳細に把握することができる。特に、注視点ヒートマップによってウェブページ上の閲覧者の注目領域をより明確に把握することが可能となる。
また、前記注視点可視化マップは、注視点ヒートマップであってもよい。
上記によれば、企業側は、注視点ヒートマップを確認することで、ウェブページに対する閲覧者の閲覧行動を詳細に把握することができる。特に、注視点ヒートマップによってウェブページ上の閲覧者の注目領域をより明確に把握することが可能となる。
また、ウェブページ閲覧解析システムは、前記おすすめの閲覧者に関する情報をソート又は絞り込み形式で表示してもよい。
また、前記おすすめの閲覧者に関する情報は、閲覧者の氏名、性別、年齢、ウェブページを閲覧したときの滞在時間、ゴール達成有無、ゴール達成時間のうち何れか1つ以上を含んでもよい。
また、前記総合表情情報は、複数の表情要素それぞれについて、前記ウェブページの全体を通した確率を示してもよい。
また、前記総合表情情報は、複数の表情要素それぞれについて、前記ウェブページが閲覧された時系列に対応した確率の推移を示してもよい。
また、前記総合興味度情報は、前記興味度について、前記ウェブページが閲覧された時系列に対応した推移を示してもよい。
本開示の一態様に係るウェブページ閲覧解析方法は、ウェブページに対する閲覧者のインサイトを解析するウェブページ閲覧解析方法であって、複数の閲覧者それぞれに対応する複数の注視点データを取得するステップと、前記複数の注視点データのうち少なくとも幾つかに基づいて、当該注視点データに対応する閲覧者が前記ウェブページを見たときの注視点を可視化した注視点可視化マップを生成するステップと、前記注視点可視化マップを前記ウェブページに重畳して表示するステップと、を含み、コンピュータによって実行される。
本開示の一態様に係るウェブページ閲覧解析方法は、ウェブページに対する閲覧者のインサイトを解析するウェブページ閲覧解析方法であって、複数の閲覧者それぞれに対応する複数の属性データを取得するステップと、前記複数の属性データのうち少なくとも幾つかに基づいて、ヒアリング先としておすすめの閲覧者を抽出するステップと、前記おすすめの閲覧者に関する情報を表示するステップと、を含み、コンピュータによって実行される。
本開示の一態様に係るウェブページ閲覧解析方法は、ウェブページに対する閲覧者のインサイトを解析するウェブページ閲覧解析方法であって、複数の閲覧者それぞれに対応する複数の表情データを取得するステップと、前記複数の表情データのうち少なくとも幾つかに基づいて、当該表情データに対応する閲覧者が前記ウェブページを見たときの総合的な表情を示す総合表情情報を生成するステップと、前記総合表情情報を表示するステップと、を含み、コンピュータによって実行される。
本開示の一態様に係るウェブページ閲覧解析方法は、ウェブページに対する閲覧者のインサイトを解析するウェブページ閲覧解析方法であって、複数の閲覧者それぞれに対応する複数の表情データを取得するステップと、前記複数の表情データのうち少なくとも幾つかに基づいて、当該表情データに対応する閲覧者が前記ウェブページを見たときの総合的な興味度を示す総合興味度情報を生成するステップと、前記総合興味度情報を表示するステップと、を含み、コンピュータによって実行される。
また、前記閲覧解析方法をコンピュータに実行させるウェブページ閲覧解析プログラムが提供されてもよい。
本開示によれば、閲覧者の生体情報に基づくウェブページ閲覧時の態度からウェブページに関する詳細なインサイトを提供することが可能なウェブページ閲覧解析システム、ウェブページ閲覧解析方法およびウェブページ閲覧解析プログラムを提供することができる。
本開示の実施形態(以下、本実施形態)に係るウェブページ閲覧解析システムの構成の一例を示す図である。 閲覧者端末のハードウェア構成の一例を示す図である。 サーバのハードウェア構成の一例を示す図である。 企業側端末のハードウェア構成の一例を示す図である。 本実施形態に係る閲覧解析システムのうち閲覧者端末とサーバとの間で実行される一連の処理を説明するためのシーケンス図である。 ウェブページの表示領域上における閲覧者の注視点を説明するための図である。 閲覧者の顔特徴点を説明するための図である。 本実施形態に係るウェブページ閲覧解析システムのうちサーバと企業側端末との間で実行される一連の処理を説明するためのシーケンス図である。 ウェブページ閲覧解析画面の一例を示す図である。 (a)は、ウェブページの一例を示す図である。(b)は、注視点ヒートマップの一例を示す図である。(c)は、注視点ヒートマップがウェブページに重畳された合成ウェブページの一例を示す図である。 抽出条件表示画面の一例を示す図である。 抽出条件が指定された後のウェブページ閲覧解析画面の一例を示す図である。
以下、本実施形態に係るウェブページ閲覧解析システム1(以下、単に「閲覧解析システム1」という。)について図面を参照しながら説明する。図1は、本実施形態に係る閲覧解析システム1の構成の一例を示す図である。図1に示すように、閲覧解析システム1は、閲覧者端末2a,2bと、サーバ3と、企業側端末4とを備える。これらは通信ネットワーク8に接続されている。閲覧者端末2a,2bの各々は、通信ネットワーク8を介してサーバ3に通信可能に接続されている。企業側端末4は、通信ネットワーク8を介してサーバ3に通信可能に接続されている。通信ネットワーク8は、LAN(Local Area Network)、WAN(Wide Area Network)、インターネット、無線コアネットワークのうちの少なくとも一つによって構成されている。
閲覧者端末2aは、閲覧者Vaに関連付けられた端末であって、閲覧者Vaによって操作される。閲覧者端末2bは、閲覧者Vbに関連付けられた端末であって、閲覧者Vbによって操作される。尚、本実施形態では、説明の便宜上、閲覧者端末2a,2bを閲覧者端末2と総称する場合がある。同様に、閲覧者Va,Vbを閲覧者Vと総称する場合がある。また、本実施形態では、多数の閲覧者に関連付けられた多数の閲覧者端末2が閲覧解析システム1に設けられているが、説明の便宜上、多数の閲覧者端末のうちの2台の閲覧者端末2a,2bのみが図1では図示されている。閲覧者端末2の種類は特に限定されるものではなく、閲覧者端末2は、例えば、スマートフォン、パーソナルコンピュータ、タブレット又はウェアラブルデバイス(例えば、ヘッドマウントディスプレイやARディスプレイ)等であってもよい。
次に、図2を参照して、閲覧者端末2のハードウェア構成について以下に説明する。図2は、閲覧者端末2のハードウェア構成の一例を示す図である。図2に示すように、閲覧者端末2は、制御部20と、記憶装置21と、撮像部22と、通信部23と、入力操作部24と、表示部25と、スピーカ26と、RTC(Real Time Clock)28とを備える。閲覧者端末2を構成するこれらの要素は通信バス29に接続されている。
制御部20は、メモリとプロセッサを備えている。メモリは、コンピュータ可読命令(プログラム)を記憶するように構成されている。例えば、メモリは、各種プログラム等が格納されたROM(Read Only Memory)やプロセッサにより実行される各種プログラム等が格納される複数ワークエリアを有するRAM(Random Access Memory)等から構成される。プロセッサは、例えば、CPU(Central Processing Unit)、MPU(Micro Processing Unit)及びGPU(Graphics Processing Unit)のうちの少なくとも一つにより構成される。CPUは、複数のCPUコアによって構成されてもよい。GPUは、複数のGPUコアによって構成されてもよい。プロセッサは、記憶装置21又はROMに組み込まれた各種プログラムから指定されたプログラムをRAM上に展開し、RAMとの協働で各種処理を実行するように構成されてもよい。
記憶装置21は、例えば、HDD(Hard Disk Drive)、SSD(Solid State Drive)、フラッシュメモリ等の記憶装置(ストレージ)であって、プログラムや各種データを格納するように構成されている。撮像部22は、撮影を通じて、閲覧者端末2の周辺環境を示す映像データを取得するように構成されている。特に、撮像部22は、撮影を通じて閲覧者端末2の周辺環境を示す画像データ若しくは映像データを生成するように構成されたカメラであって、イメージセンサ(例えば、CCDセンサやCMOSセンサ等)と、イメージセンサ駆動処理回路とを備える。本実施形態では、制御部20は、撮像部22によって取得された映像データに基づいて、閲覧者Vの視線の変化を検出する視線トラッキング部として機能する。さらに、制御部20は、当該映像データに基づいて閲覧者Vの表情の変化を検出する表情トラッキング部として機能する。
通信部23は、通信ネットワーク8に接続された外部装置と通信するための無線通信モジュール及び/又は有線通信モジュールを備えている。無線通信モジュールは、基地局や無線LANルータ等の外部機器と無線通信するように構成され、送受信アンテナと、無線送受信回路とを備える。無線通信モジュールは、Wi-Fi(登録商標)やBluetooth(登録商標)等の近距離無線通信規格に対応した無線通信モジュールであってもよいし、SIM(Subscriber Identity Module)を用いた第X世代移動体通信システム(例えば、LTE等の第4世代移動通信システム)に対応する無線通信モジュールであってもよい。
入力操作部24は、例えば、表示部25の映像表示ディスプレイに重ねて配置されたタッチパネル、マウス、及び/又はキーボードであって、閲覧者Vの入力操作を受け付けると共に、当該入力操作に応じた操作信号を生成するように構成されている。表示部25は、例えば、映像表示ディスプレイと、当該映像表示ディスプレイを駆動制御する映像表示回路とによって構成される。表示部25は、ウェブページが表示される表示画面125を有する(図6参照)。スピーカ26は、音声データに基づいて音声を外部に向けて出力するように構成されている。RTC28は、現在時刻を示す情報を取得するように構成されている。
本実施形態では、閲覧者端末2は、サーバ3から送信されたウェブページを表示するように構成されたWEBブラウザを有する。当該ウェブページは、HTMLファイル、CSSファイル、画像若しくは映像ファイル、プログラムファイル等によって構成されている。
図1に戻ると、サーバ3は、通信ネットワーク8を介して閲覧者端末2及び企業側端末4に通信可能に接続されている。サーバ3は、通信ネットワーク8を介して複数の閲覧者端末2の各々にウェブページ(例えば、所定のウェブサイトのランディングページ)を送信すると共に、企業側端末4に注視点ヒートマップがウェブページに重畳された合成ウェブページ(後述する)を送信する。サーバ3は、複数のサーバによって構成されてもよい。サーバ3は、WEBアプリケーションとしてウェブページ閲覧解析アプリケーションを提供するように構成されたWEBサーバとして機能する。この点において、サーバ3は、ウェブページ閲覧解析画面を企業側端末4のWEBブラウザに表示するためのデータ(例えば、HTMLファイル、CSSファイル、画像や映像ファイル、プログラムファイル等)を送信するように構成されている。このように、サーバ3は、SaaS(System as a Service)を提供するためのサーバとして機能している。サーバ3は、オンプレミスで構築されてもよいし、クラウドサーバであってもよい。また、サーバ3は、複数のウェブページ、各閲覧者Vの注視点データ、及び各閲覧者Vの表情データを管理するデータ管理サーバとして機能する。
図3を参照して、サーバ3のハードウェア構成について以下に説明する。図3は、サーバ3のハードウェア構成の一例を示す図である。図3に示すように、サーバ3は、制御部30と、記憶装置31と、入出力インターフェース32と、通信部33と、入力操作部34と、表示部35とを備える。サーバ3を構成するこれらの要素は通信バス36に接続されている。
制御部30は、メモリとプロセッサを備えている。メモリは、コンピュータ可読命令を記憶するように構成されている。特に、メモリには、図5及び図8においてサーバ3によって実行される一連の処理(ウェブページ閲覧解析方法)をプロセッサに実行させるためのウェブページ閲覧解析プログラムが記憶されてもよい。メモリは、ROM及びRAMにより構成されている。プロセッサは、CPU、MPU及びGPUのうちの少なくとも一つにより構成される。
記憶装置31は、例えば、HDD、SSD、フラッシュメモリ等の記憶装置(ストレージ)であって、プログラムや各種データを格納するように構成されている。記憶装置31には、複数のウェブページ、各閲覧者Vのウェブイベントデータ(クリックやスクロール等のイベントデータ)、各閲覧者Vの注視点データ、及び各閲覧者Vの表情データが保存されている。また、記憶装置31には、各閲覧者Vの情報に関連する閲覧者情報テーブルおよびウェブページ閲覧解析アプリケーションを利用する各ユーザUに関連するユーザ情報テーブルが保存されている。閲覧者情報テーブルは、各閲覧者Vの属性情報を含む。例えば、閲覧者情報テーブルは、各閲覧者Vの識別情報、性別情報、年代情報、世帯人数情報、住所情報、職業情報のうちの少なくとも一つを含んでもよい。さらに、閲覧者情報テーブルは、ウェブページを閲覧したときの滞在時間、ゴール達成有無、ゴール達成時間等の情報をさらに含んでもよい。ユーザ情報テーブルは、各ユーザUの識別情報、属性情報、ログイン情報等を含んでもよい。
入出力インターフェース32は、外部装置とサーバ3との間の接続を可能とするインターフェースであって、USB規格やHDMI(登録商標)規格等の所定の通信規格に応じたインターフェースを含む。通信部33は、通信ネットワーク8上の外部端末と通信するための各種有線通信モジュールを含んでもよい。入力操作部34は、例えば、タッチパネル、マウス、及び/又はキーボード等であって、操作者の入力操作を受け付けると共に、操作者の入力操作に応じた操作信号を生成するように構成されている。表示部35は、例えば、映像表示ディスプレイと映像表示回路とによって構成されている。
企業側端末4は、サーバ3によって提供されるウェブページ閲覧解析アプリケーションを利用するユーザUによって操作される端末である。本実施形態では、複数の企業側端末4が閲覧解析システム1に設けられているが(換言すれば、本実施形態では、複数のユーザUがウェブページ閲覧解析アプリケーションを利用しているが)、説明の便宜上、一台の企業側端末4のみが図1では図示されている。
図4を参照して、企業側端末4のハードウェア構成について以下に説明する。図4は、企業側端末4のハードウェア構成の一例を示す図である。図4に示すように、企業側端末4は、例えば、パーソナルコンピュータ、スマートフォン、タブレット又はユーザUに装着されたウェアラブルデバイスであってもよい。企業側端末4は、WEBブラウザを有する。ウェブページ閲覧解析アプリケーションは、企業側端末4のWEBブラウザ上で動作するものとする。企業側端末4は、制御部40と、記憶装置41と、入出力インターフェース42と、通信部43と、入力操作部44と、表示部45とを備える。これらの要素は通信バス46に接続されている。
制御部40は、メモリとプロセッサを備えている。メモリは、コンピュータ可読命令(プログラム)を記憶するように構成されている。例えば、メモリは、ROM及びRAMにより構成されている。プロセッサは、例えば、CPU、MPU及びGPUのうちの少なくとも一つにより構成される。
記憶装置41は、例えば、HDD、SSD、フラッシュメモリ等の記憶装置であって、プログラムや各種データを格納するように構成されている。入出力インターフェース42は、外部装置と企業側端末4との間の接続を可能とするインターフェース(例えば、USBやHDMI等)である。通信部43は、企業側端末4を通信ネットワーク8に接続するように構成されており、無線通信モジュール及び/又は有線通信モジュールを備える。入力操作部44は、例えば、タッチパネル、マウス、及び/又はキーボード等であって、ユーザUの入力操作を受け付けると共に、ユーザUの入力操作に応じた操作信号を生成するように構成されている。表示部45は、例えば、映像表示ディスプレイと映像表示回路とによって構成されている。本実施形態では、ウェブページ閲覧解析画面70(図9参照)が表示部45に表示される。
次に、図5を参照して本実施形態に係る閲覧解析システム1のうち複数の閲覧者端末2の各々とサーバ3との間で実行される一連の処理について以下に説明する。図5は、閲覧解析システム1のうち閲覧者端末2とサーバ3との間で実行される一連の処理を説明するためのシーケンス図である。尚、説明の便宜上、単一の閲覧者端末2とサーバ3との間で実行される一連の処理が図5に図示されているが、本実施形態では複数の閲覧者端末2の各々が図5に示す一連の処理を実行するものとする。また、図5に示す一連の処理では、閲覧者Vは、サーバ3から提供された所定のウェブページの閲覧を通じて、当該所定のウェブページに対する閲覧者Vの注視点データ及び表情データをサーバ3に提供するものとする。この点において、サーバ3を運営すると共に、ウェブページ閲覧解析アプリケーションを提供する運営企業は、ウェブページ閲覧に対するインセンティブを閲覧者Vに提供してもよい。例えば、当該企業は、所定時間(例えば、1分間)のウェブページの閲覧一回に所定のポイント若しくは電子マネーを各閲覧者Vに付与してもよい。
また、運営企業は、所定時間のウェブページの閲覧だけでなく、ウェブページ上に掲載された特定の商品を購入するためのミッションを各閲覧者Vに与えてもよい。この場合、運営企業は、ウェブページ上の特定の商品を購入する過程における各閲覧者Vの閲覧行動(視線や表情)に関する詳細なインサイトを取得することが可能となる。運営企業は、取得すべき閲覧者のインサイトの性質や種類に応じて、閲覧者に与えるウェブページの閲覧条件を自由に設定することができる。
図5に示すように、ステップS1において、閲覧者端末2は、閲覧者Vの入力操作部24(例えば、タッチパネル)に対する入力操作に応じて、ウェブページを閲覧するためのウェブページ閲覧リクエストをサーバ3に送信する。次に、サーバ3は、ウェブページ閲覧リクエストを閲覧者端末2から受信した上で、記憶装置31に保存されたウェブページ(HTMLファイル、CSSファイル、画像若しくは動画ファイル、プログラムファイル等)を閲覧者端末2に送信する(ステップS2)。
次に、閲覧者端末2は、ウェブページをWEBブラウザ上に表示する(ステップS3)。図6に示すように、閲覧者端末2は、ウェブページを表示部25の表示画面125上に表示する。また、閲覧者端末2は、ウェブページの表示と同時に閲覧者Vの注視点データと表情データの取得を開始する(ステップS4)。ステップS5に示すように、閲覧者端末2は、ウェブページの表示が終了するまで閲覧者Vの注視点データと表情データを取得し続ける。その一方、閲覧者端末2は、ウェブページの表示が終了したときに閲覧者Vの注視点データと表情データの取得を終了した上で、注視点データと、表情データと、属性データ(予め収集した、閲覧者の氏名、性別、年齢、ウェブページを閲覧したときの滞在時間、ゴール達成有無、ゴール達成時間等の情報)をサーバ3に送信する(ステップS6)。この点において、WEBブラウザ上に表示されるウェブページの表示時間が所定時間(例えば、1分間)に予め設定されていてもよい。また、閲覧者Vがウェブページ上における特定のミッション(ゴール)を達成するまでウェブページが閲覧者端末2のWEBブラウザ上に表示されてもよい。ミッション(ゴール)の達成は、例えば、特定の商品の購入アクションの完了等である。また、閲覧者Vの属性データのうち氏名、性別、年齢等の属性情報は、閲覧者Vの閲覧者端末2に表示される所定の表示画面上に対する入力操作に応じて取得される。
<注視点データの取得手法>
閲覧者端末2は、撮像部22を用いた撮影を通じて閲覧者Vを示す映像データを取得した上で、当該映像データに基づいて閲覧者Vの注視点データを取得する。この点において、閲覧者端末2の制御部20は、撮像部22によって取得された映像データに基づいて、閲覧者Vの視線の変化を検出する視線トラッキング部として機能する。注視点データの取得方法の一例として、制御部20は、映像データの所定のフレーム(静止画像)に基づいて、当該所定のフレームに示された閲覧者Vと閲覧者Vの目を特定した上で、撮像部22に対する閲覧者Vの目の位置を示す位置情報を取得する。次に、制御部20は、当該所定のフレームに基づいて、閲覧者Vの眼球の黒目の回転角を特定した上で、閲覧者Vの視線L(図6参照)の方向を示す視線情報を取得する。さらに、制御部20は、当該所定のフレームに基づいて、閲覧者Vの顔の方向を示す顔向き情報を取得する。尚、制御部20は、三次元眼球モデル(パッシブ方式)に基づいて視線情報を取得してもよいし、角膜反射法(アクティブ方式)に基づいて視線情報を取得してもよい。角膜反射法に基づいて視線情報が取得される場合、閲覧者端末2は、赤外線を出射するように構成された赤外線発光素子(例えば、赤外線LED)と赤外線カメラ(赤外線イメージセンサ)をさらに備えてもよい。
次に、制御部20は、位置情報と、視線情報と、顔向き情報とに基づいて、閲覧者Vの視線Lと閲覧者端末2の表示画面125とが交差する点である注視点Pの位置(X,Y)(XY座標)を取得する。ここで、視線Lと表示画面125が交差する注視点Pの位置は、表示画面125に設定されたXY座標空間上の位置として取得されてもよい。このように、制御部20は、映像データの所定のフレームから視線Lと表示画面125が交差する注視点Pの位置を取得することができる。制御部20は、映像データのフレームレートに対応する取得レートで注視点Pの位置を取得してもよいし、当該フレームレートとは異なる取得レートで注視点Pの位置を取得してもよい。例えば、映像データのフレームレートが30fpsである場合に、注視点Pの取得レートは30Hzであってもよいし、30Hzよりも低い取得レート(例えば、15Hz)であってもよい。
次に、制御部20は、閲覧者Vの注視点Pの位置を表示画面125に設定されたXY座標空間上の座標位置からウェブページの表示領域Sに設定されたXY座標空間上の座標位置に変換する。この点において、図6に示すように、閲覧者Vが表示画面125に対して+Y軸方向のフリック操作を行う場合には、表示画面125上に表示されるウェブページの表示領域S(図6及び図10(a)を参照)は+Y軸方向にスライドする。同様に、閲覧者Vが表示画面125に対して-Y軸方向のフリック操作を行う場合には、表示画面125上に表示されるウェブページの表示領域Sは-Y軸方向にスライドする。閲覧者Vが表示画面125に対して+X軸方向のフリック操作を行う場合には、表示画面125上に表示されるウェブページの表示領域Sは+X軸方向にスライドする。同様に、閲覧者Vが表示画面125に対して-X軸方向のフリック操作を行う場合には、表示画面125上に表示されるウェブページの表示領域Sは-X軸方向にスライドする。
このように、閲覧者Vのフリック操作に応じて表示画面125上に表示されるウェブページの表示領域Sが変化するため、閲覧者Vの注視点Pの位置を表示画面125のXY座標位置から表示領域SのXY座標位置に変換する必要がある。具体的には、制御部20は、閲覧者Vのフリック操作に応じてウェブページの表示領域Sがスライドする場合に、表示領域SのXY座標と表示画面125のXY座標との間の対応関係を更新する。その後、制御部20は、表示画面125上における注視点PのXY座標位置を取得した場合に、表示領域SのXY座標と表示画面125のXY座標との間の対応関係に基づき、表示画面125のXY座標位置を表示領域SのXY座標位置に変換する。
さらに、制御部20は、表示領域S上の注視点Pの位置と共に、注視点Pの位置が取得された際のウェブページの閲覧時刻を取得する。ここで、ウェブページの閲覧時刻とは、ウェブページの閲覧を開始してからの経過時間を指す。例えば、ウェブページの閲覧開始から10秒経過時点での閲覧時刻は10秒となる。注視点P1の位置(X1,Y1)が取得された際のウェブページの閲覧時刻がt1である場合には、表示領域S上における注視点P1の位置(X1,Y1)と閲覧時刻t1が互いに関連付けられた状態で注視点P1の位置(X1,Y1)と閲覧時刻t1が記憶される。このように、制御部20は、表示領域S上の注視点Pの位置の時間的変化を示す注視点データを取得することができる。例えば、注視点の取得レートが30Hzであって、ウェブページの閲覧時間が30秒である場合、注視点データに含まれている注視点Pの数は900となる。
<表情データの取得手法>
閲覧者端末2は、撮像部22を用いた撮影を通じて閲覧者Vを示す映像データを取得した上で、当該映像データに基づいて閲覧者Vの表情データを取得する。この点において、閲覧者端末2の制御部20は、撮像部22によって取得された映像データに基づいて閲覧者Vの表情の変化を検出する表情トラッキング部として機能する。ここで、表情データは、閲覧者Vの表情情報の時間的変化を示すデータである。より具体的には、表情データは、閲覧者Vの表情要素(本例では、嬉しい、悲しい、中立(無表情)、怒り、驚きの5種類の表情要素)の確率情報の時間的変化を示すデータである。
表情データの取得方法の一例として、制御部20は、映像データMの所定のフレーム(静止画像)に基づいて、当該所定のフレームに示された閲覧者Vの顔を特定した上で、閲覧者Vの顔に含まれている複数の顔特徴点Kを取得する(図7参照)。図7に示すように、本例では、眉、目、鼻、口のそれぞれに関連する24個の顔特徴点Kが取得される。次に、制御部20は、取得された複数の顔特徴点Kに基づいて複数の顔特徴量を算出した上で、当該算出された複数の顔特徴量と表情認識モデル(学習モデル)とに基づいて、閲覧者Vの各表情要素の確率情報を取得する。当該表情認識モデルでは、入力層の各ユニットの値が複数の顔特徴量のうちの対応する一つを示すと共に、出力層の各ユニットの値が複数の表情要素のうちの対応する一つの確率情報を示す。各表情要素の確率情報は、百分率%として示されてもよい。特に、「嬉しい」の表情要素の確率、「悲しい」の表情要素の確率、「中立」の表情要素の確率、「怒り」の表情要素の確率、および「驚き」の表情要素の確率のそれぞれが百分率%として示される。このように、制御部20は、所定のフレームから閲覧者Vの各表情要素の確率情報を取得することができる。
制御部20は、映像データのフレームレートに対応する取得レートで閲覧者Vの表情情報を取得してもよいし、当該フレームレートとは異なるレートで閲覧者Vの表情情報を取得してもよい。例えば、映像データのフレームレートが30fpsである場合に、表情情報の取得レートは30Hzであってもよいし、30Hzよりも低い取得レート(例えば、15Hz)であってもよい。
また、制御部20は、表情情報と共に、当該表情情報が取得された際のウェブページの閲覧時刻を取得する。例えば、各表情要素の確率情報が取得された際のウェブページの閲覧時刻がt1である場合には、各表情要素の確率情報と閲覧時刻t1が互いに関連付けられた状態で確率情報と閲覧時刻t1が記憶される。このように、制御部20は、閲覧者Vの表情情報の時間的変化を示す表情データを取得することができる。
図5に戻ると、ステップS7において、サーバ3は、各閲覧者端末2からウェブページに関する閲覧者Vの注視点データと表情データと属性データを受信した上で、各閲覧者Vの注視点データと表情データと属性データが閲覧対象となったウェブページと関連付けられた状態で各閲覧者Vの注視点データと表情データと属性データを記憶装置31に保存する。尚、図5に示す例では、説明の便宜上、一種類のウェブページが各閲覧者端末2に送信されているが、複数種類のウェブページが各閲覧者端末2に送信されてもよい。この場合、注視点データ及び表情データは、閲覧者の識別情報と、ウェブページの識別情報(例えば、ウェブページのURL)とに関連付けられてもよい。例えば、閲覧者端末2aから送信された閲覧者Vaの注視点データと表情データは、閲覧者Vaの識別情報と、閲覧対象となったウェブページの識別情報とに関連付けられてもよい。同様に、閲覧者端末2bから送信された閲覧者Vbの注視点データと表情データは、閲覧者Vbの識別情報と、閲覧対象となったウェブページの識別情報とに関連付けられてもよい。このように、図5に示す一連の処理を通じて、各閲覧者Vの注視点データと表情データをサーバ3内に蓄積することが可能となる。
次に、図8を参照して、本実施形態に係る閲覧解析システム1のうちサーバ3と企業側端末4との間で実行される一連の処理について以下に説明する。図8は、閲覧解析システム1のうちサーバ3と企業側端末4との間で実行される一連の処理を説明するためのシーケンス図である。本例では、企業側端末4を操作するユーザUは、ウェブページに関するデジタルマーケティング業務に従事しており、ウェブページを閲覧した複数の閲覧者Vの生体情報(注視点や表情)に基づくウェブページの詳細なインサイトを把握することを所望している。図5に示す一連の処理において各閲覧者Vによって閲覧されたウェブページは、ユーザUのデジタルマーケティング業務に関連するウェブページである。
図8に示すように、ステップS10において、企業側端末4は、ユーザUの入力操作を通じてユーザUのログイン情報(例えば、ログインIDとログインパスワード)をサーバ3に送信する。ステップS11において、サーバ3は、企業側端末4から送信されたログイン情報に基づいてユーザUを認証する。尚、ユーザUの認証方法はログイン認証に限定されるものではない。サーバ3は、ユーザUの認証を実行した後に、記憶装置31に保存されたユーザ情報テーブルを参照することで、ユーザUに関連付けられたウェブページを特定する。
ステップS12において、サーバ3は、通信ネットワーク8を介して、図9に示すウェブページ閲覧解析画面70を表示するためのデータ(以下、ウェブページ閲覧解析画面データ)を企業側端末4に送信する。ウェブページ閲覧解析画面データは、ウェブページ閲覧解析画面70を企業側端末4のWEBブラウザ上に表示するためのファイル(例えば、HTMLファイル、CSSファイル、プログラムファイル、画像若しくは動画ファイル等)であってもよい。ここで、プログラムファイルはJavaScript等のWEBブラウザ上で実行可能なプログラムファイルであってもよい。
図9に示すように、ウェブページ閲覧解析画面70は、ウェブページ表示領域71と、閲覧者表示領域76と、表情情報表示領域72と、表情・興味度情報表示領域73とを有する。さらに、ウェブページ閲覧解析画面70は、閲覧者選択ボタン74と、ウェブページ選択ボタン75と、ウェブサイト選択ボタン78とを有する。ウェブページ表示領域71には、後述する合成ウェブページ63が表示される。閲覧者表示領域76には、ウェブページの閲覧者のうちヒアリング先としておすすめの閲覧者に関する情報が表示される。表情情報表示領域72には、レーダチャート形式の総合表情情報が表示される。表情・興味度情報表示領域73には、時系列グラフの総合表情情報と時系列グラフの総合興味度情報が表示される。
ステップS13において、企業側端末4は、ウェブページ閲覧解析画面70に対するユーザUの入力操作に応じて、ウェブページ閲覧解析画面70に表示される選択ウェブページと閲覧者Vの抽出条件を選択する。具体的には、企業側端末4は、ウェブサイト選択ボタン78に対するユーザUの入力操作に応じて、複数のウェブサイトのうちの一つを選択する。ウェブサイト選択ボタン78に対する入力操作に応じて、複数のウェブサイトの候補がウェブページ閲覧解析画面70上に表示されてもよい。ウェブサイト選択ボタン78を通じて選択可能となる一以上のウェブサイトは、ユーザUに関連付けられたウェブサイトとなる。その後、企業側端末4は、ウェブページ選択ボタン75に対するユーザUの入力操作に応じて、選択されたウェブサイトに関連する複数のウェブページのうちウェブページ表示領域71に表示される選択ウェブページを選択する。ウェブページ選択ボタン75に対する入力操作に応じて、選択されたウェブサイトに関連付けられた複数のウェブページの候補がURLの形式でウェブページ表示領域71上に表示されてもよい。次に、閲覧者選択ボタン74に対するユーザの入力操作に応じて、閲覧者Vの抽出条件を選択する。より具体的には、図11に示すように、企業側端末4は、閲覧者選択ボタン74に対するユーザUの入力操作に応じて、閲覧者Vの抽出条件を指定するための抽出条件表示画面80をウェブページ閲覧解析画面70上に表示する。
図11に示す抽出条件表示画面80では、閲覧者Vの抽出条件は、閲覧者Vの性別情報と、閲覧者Vの年代情報と、閲覧者Vの世帯人数情報に関連付けられている。例えば、抽出条件として40代の閲覧者Vが選択される場合には、ステップS15において、サーバ3は、40代の閲覧者Vの注視点データを取得する。また、ユーザUは、抽出条件表示画面80を通じて、性別情報と年代情報と世帯情報とのうちの少なくとも一つに関連付けられた抽出条件を指定することができる。例えば、図12に示すように、ユーザUは、一人世帯の20代女性に関する抽出条件(項目名:ターゲット)を指定した場合、ステップS15において、サーバ3は、一人世帯の20代女性に合致した閲覧者Vの注視点データを取得する。
尚、図12では、閲覧者Vの抽出条件として性別情報、年代情報、世帯人数情報の3つが例示されているが、本実施形態はこれらに限定されるべきではない。この点において、閲覧者Vの住所情報や職業情報、婚姻情報、及び学歴情報が閲覧者Vの抽出条件にさらに関連付けられてもよい。このように、閲覧者Vの抽出条件は、閲覧者Vの年代情報、性別情報、住所情報、職業情報、世帯人数情報、婚姻情報、及び学歴情報のうちの少なくとも一つに関連付けられてもよい。
また、閲覧者Vの抽出条件は、閲覧者Vのアンケート情報、調査情報、過去の行動履歴情報(例えば、映画館に行く頻度等)のうちの少なくとも一つに更に関連付けられてもよい。
次に、ステップS14において、企業側端末4は、ユーザUの入力操作に応じて合成ウェブページの送信をサーバ3にリクエストする。この点において、ユーザUの入力操作に応じて、企業側端末4は、ウェブページ選択ボタン75を通じて選択された選択ウェブページに関連付けられた合成ウェブページの送信リクエストをサーバ3に送信する。さらに、企業側端末4は、合成ウェブページの送信リクエストと共に、閲覧者Vの抽出条件に関する情報をサーバ3に送信する。
ステップS15において、サーバ3は、合成ウェブページの送信リクエストと閲覧者Vの抽出条件に関する情報を企業側端末4から受信した上で、当該抽出条件に合致する閲覧者Vの注視点データを記憶装置31から抽出する。この点において、サーバ3は、各閲覧者Vの情報に関連する閲覧者情報テーブルを参照することで、抽出条件に合致する閲覧者Vの識別情報を抽出する。その後、サーバ3は、選択ウェブページの識別情報及び当該抽出された閲覧者Vの識別情報の両方に関連付けられた注視点データを抽出する。例えば、図12に示すように、閲覧者Vの抽出条件が年代:20代、性別:女性、且つ世帯人数:一人世帯である場合には、サーバ3は、年代:20代、性別:女性、且つ世帯人数:一人世帯の全ての条件を満たす閲覧者Vの識別情報を特定した上で、当該特定された閲覧者Vの識別情報と選択ウェブページの識別情報の両方に関連付けられた閲覧者Vの注視点データを抽出する。一方、図9に示すように、閲覧者Vの抽出条件が全ての閲覧者である場合には、選択ウェブページの識別情報に関連付けられた閲覧者Vの注視点データを抽出する。
ステップS16において、サーバ3は、当該抽出された注視点データに基づいて、抽出条件に合致する複数の閲覧者Vの注視点Pの位置の時間的変化を可視化した注視点ヒートマップ(注視点可視化マップの一例)を生成する。注視点ヒートマップでは、複数の閲覧者Vの注視点Pの集合体の時間的変化が可視化されている。注視点ヒートマップのフレームレートは、注視点データの取得レートと同一であってもよい。例えば、ウェブページの閲覧時刻t1における閲覧者V1~Vn(nは2以上の整数)の注視点がP1~Pnである場合、閲覧時刻t1における注視点ヒートマップでは注視点P1~Pnが可視化されている。注視点ヒートマップでは、所定の領域に重なる注視点の数が多い場合(つまり、所定の領域が複数の閲覧者Vによって注視されている領域である場合)、当該所定の領域は赤色等の暖色で着色されてもよい。その一方で、所定の領域に重なる注視点の数が少ない場合(つまり、所定の領域が複数の閲覧者Vによってあまり注視されていない領域である場合)、当該所定の領域は青色等の寒色で着色されてもよい。このように、所定の領域に重なる注視点の数が増加する程、当該所定の領域の着色が寒色から暖色に徐々に変化してもよい。さらに、所定の領域に含まれる注視点が全く存在しない場合(つまり、所定の領域が複数の閲覧者Vによって全く注視されていない領域である場合)当該所定の領域は着色されなくてもよい。この点において、ノイズ(外れ値)として扱われる注視点のみが含まれる領域は全く着色されなくてもよい。
また、本実施形態において、閲覧者Vの抽出条件が全ての閲覧者である場合には、全ての閲覧者Vの注視点Pの位置の時間的変化を可視化した注視点ヒートマップが生成される。このように、閲覧者Vの抽出条件(換言すれば、閲覧者Vの属性)に応じて生成される注視点ヒートマップが変化する。
ステップS17において、サーバ3は、注視点ヒートマップ62がウェブページ60に重畳された合成ウェブページ63を生成する(図10参照)。特に、サーバ3は、注視点ヒートマップ62がウェブページ60に重畳された合成ウェブページ63を生成する。ステップS18において、サーバ3は、合成ウェブページ63を企業側端末4に送信する。企業側端末4は、合成ウェブページ63をサーバ3から受信した上で、合成ウェブページ63をウェブページ閲覧解析画面70のウェブページ表示領域71内に表示する。このように、合成ウェブページ63が企業側端末4において再生される(ステップS19)。
尚、本実施形態では、複数の閲覧者Vの注視点の時間的変化を可視化した注視点可視化マップの一例として注視点ヒートマップが説明されているが、注視点可視化マップは注視点ヒートマップに限定されるものではない。この点において、視線動線マップが注視点可視化マップの他の一例として用いられてもよい。視線動線マップでは、複数の閲覧者Vの注視点Pの移動軌跡を示す動線が可視化されている。視線動線マップは、静止画形式又は動画形式として表示されてもよい。
ステップS20において、サーバ3は、閲覧者情報テーブルに記録された各閲覧者Vの属性データに基づいて、各閲覧者Vに関する情報を企業側端末4に送信する。企業側端末4は、各閲覧者Vに関する情報をウェブページ解析画面70上の閲覧者表示領域76に表示する(ステップS21)。閲覧者表示領域76では、各閲覧者Vの氏名、性別、年齢等とともに、各閲覧者Vのウェブページの滞在時間に関する情報と、各閲覧者Vのゴール(ミッション)達成の有無に関する情報と、各閲覧者Vのゴール(ミッション)達成に要した時間に関する情報とが表示される。これらの情報は、例えばユーザ指示により選択された項目の情報に応じて、ソート又は絞り込み形式で表示するようにしてもよい。さらに、各閲覧者Vの注視点ヒートマップ62を視聴するための再生ボタン176と、各閲覧者Vに連絡するための連絡ボタン177が表示される。連絡ボタン177は、閲覧者Vの電子メールアドレスや携帯番号に関連付けられてもよい。ユーザUは、所定の閲覧者Vに関連付けられた再生ボタン176を操作することで、当該所定の閲覧者Vに関連付けられた注視点ヒートマップ62がウェブページ60に重畳された合成ウェブページ63がウェブページ表示領域71に表示されてもよい。より具体的には、企業側端末4は、ユーザUによる再生ボタン176の入力操作に応じて、所定の閲覧者Vに関する情報をサーバ3に送信する。その後、サーバ3は、受信した所定の閲覧者Vの注視点データに基づいて、所定の閲覧者Vの注視点Pの位置の時間的変化を可視化した注視点ヒートマップ62を生成する。その後、サーバ3は、当該生成された注視点ヒートマップ62がウェブページ60に重畳された合成ウェブページ63を企業側端末4に送信する。このように、更新された合成ウェブページ63がウェブページ表示領域71に表示される。
次に、ステップS22において、サーバ3は、当該抽出条件に合致する閲覧者Vの表情データを記憶装置31から抽出する。この点において、サーバ3は、各閲覧者Vの情報に関連する閲覧者情報テーブルを参照することで、抽出条件に合致する閲覧者Vの識別情報を抽出する。その後、サーバ3は、選択ウェブページの識別情報及び当該抽出された閲覧者Vの識別情報の両方に関連付けられた表情データを抽出する。例えば、図12に示すように、閲覧者Vの抽出条件が年代:20代、性別:女性、且つ世帯人数:一人世帯である場合には、サーバ3は、年代:20代、性別:女性、且つ世帯人数:一人世帯の全ての条件を満たす閲覧者Vの識別情報を特定した上で、当該特定された閲覧者Vの識別情報と選択ウェブページの識別情報の両方に関連付けられた閲覧者Vの表情データを抽出する。一方、図9に示すように、閲覧者Vの抽出条件が全ての閲覧者である場合には、選択ウェブページの識別情報に関連付けられた閲覧者Vの表情データを抽出する。
ステップS23において、サーバ3は、ステップS22で抽出された閲覧者Vの表情データに基づいて、総合表情情報と総合興味度情報を生成する。その後、サーバ3は、生成された総合表情情報と総合興味度情報を企業側端末4に送信する。これらの情報の送信タイミングとしては、これら情報は合成ウェブページ63の再生後に送信されてもよい。図9に示すように、企業側端末4は、レーダチャート形式で表示される総合表情情報をウェブページ閲覧解析画面70の表情情報表示領域72内に表示すると共に、時系列グラフ形式で表示される総合表情情報をウェブページ閲覧解析画面70の表情・興味度情報表示領域73内に表示する(ステップS24)。さらに、企業側端末4は、時系列グラフで表示される総合興味度情報を表情・興味度情報表示領域73内に表示する。
総合表情情報は、抽出条件に合致する閲覧者Vの総合的な表情情報を示し、レーダチャート形式の総合表情情報と、時系列グラフ形式の総合表情情報とを含む。レーダチャート形式の総合表情情報は、抽出条件に合致する閲覧者Vの総合的な各表情要素(嬉しい、悲しい、中立、怒り、驚き)の平均確率情報(百分率%)を示すものである。例えば、レーダチャート形式の総合表情情報は、抽出条件に合致する複数の閲覧者Vの表情要素「嬉しい」の平均確率と、当該複数の閲覧者Vの表情要素「悲しい」の平均確率と、当該複数の閲覧者Vの表情要素「中立」の平均確率と、当該複数の閲覧者Vの表情要素「怒り」の平均確率と、当該複数の閲覧者Vの表情要素「驚き」の平均確率と、を含んでもよい。
例えば、抽出された閲覧者Vが閲覧者Va,Vb,Vcを含む場合、サーバ3は、閲覧者Vaの各表情要素の時間的変化を示す表情データに基づいて、閲覧者Vaの各表情要素の平均確率を決定する。同様に、サーバ3は、閲覧者Vbの各表情要素の時間的変化を示す表情データに基づいて、閲覧者Vbの各表情要素の平均確率を決定すると共に、閲覧者Vcの各表情要素の時間的変化を示す表情データに基づいて、閲覧者Vcの各表情要素の平均確率を決定する。その後、サーバ3は、閲覧者Va~Vcの各表情要素の平均確率に基づいて、閲覧者Va~Vcの総合的な各表情要素の平均確率を決定する。この点において、閲覧者Va,Vb,Vcの表情要素「嬉しい」の平均確率がRa1,Rb1,Rc1である場合には、閲覧者Va~Vcの総合的な表情要素「嬉しい」の平均確率Rave1は、Rave1=(Ra1+Rb1+Rc1)/3となる。同様に、閲覧者Va,Vb,Vcの表情要素「悲しい」の平均確率がRa2,Rb2,Rc2である場合には、閲覧者Va~Vcの総合的な表情要素「悲しい」の平均確率Rave2は、Rave2=(Ra2+Rb2+Rc2)/3となる。
また、サーバ3は、抽出された閲覧者Vの総合的な各表情要素の平均確率に基づいて、抽出された閲覧者Vのウェブページ60に対するポジティブ度及びネガティブ度を百分率%として算出してもよい。さらに、サーバ3は、ポジティブ度及びネガティブ度を示す情報を企業側端末4に送信してもよい。図9に示すように、ポジティブ度及びネガティブ度を示す情報は表情情報表示領域72内に表示されてもよい。例えば、表情要素「嬉しい」の平均確率が高い場合に、当該ポジティブ度の値が大きくなってもよい。その一方、表情要素「怒り」の平均確率が高い場合に、当該ネガティブ度の値が大きくなってもよい。サーバ3は、総合的な各表情要素の平均確率が入力値として設定されると共に、ポジティブ度及びネガティブ度の値が出力値として設定された関係式若しくは学習モデルを用いることで、総合的な各表情要素の平均確率からポジティブ度及びネガティブ度を算出してもよい。
時系列グラフ形式の総合表情情報は、抽出条件に合致する閲覧者Vの総合的な各表情要素(嬉しい、悲しい、中立、怒り、驚き)の時間的変化を示すものである。例えば、時系列グラフ形式の総合表情情報は、抽出条件に合致する複数の閲覧者Vの表情要素「嬉しい」の平均確率の時間的変化を示す情報と、当該複数の閲覧者Vの表情要素「悲しい」の平均確率の時間的変化を示す情報と、当該複数の閲覧者Vの表情要素「中立」の平均確率の時間的変化を示す情報と、当該複数の閲覧者Vの表情要素「怒り」の平均確率の時間的変化を示す情報と、当該複数の閲覧者Vの表情要素「驚き」の平均確率の時間的変化を示す情報と、を含んでもよい。
例えば、抽出された閲覧者Vが閲覧者Va,Vb,Vcを含む場合、サーバ3は、閲覧者Va~Vcの表情要素「嬉しい」の平均確率の時間的変化を示す情報と、閲覧者Va~Vcの表情要素「悲しい」の平均確率の時間的変化を示す情報と、閲覧者Va~Vcの表情要素「中立」の平均確率の時間的変化を示す情報と、閲覧者Va~Vcの表情要素「怒り」の平均確率の時間的変化を示す情報と、閲覧者Va~Vcの表情要素「驚き」の平均確率の時間的変化を示す情報とを算出した上で、これらの情報を時系列グラフ形式の総合表情情報として企業側端末4に送信する。
また、サーバ3は、時系列グラフ形式の総合表情情報に基づいて、時系列グラフ形式の総合興味度情報を算出してもよい。総合興味度情報は、抽出条件に合致する閲覧者Vのウェブページ60に対する総合的な興味度(百分率%)の時間的変化を示すものである。例えば、閲覧時刻t1における総合的な各表情要素の平均確率がR1~R5である場合、閲覧時刻t1における総合的な興味度Iは、平均確率R1~R5に基づいて算出されてもよい。この点において、サーバ3は、総合的な各表情要素の平均確率R1~R5が入力値として設定されると共に、総合的な興味度Iが出力値として設定された関係式若しくは学習モデルを用いることで、総合的な各表情要素の平均確率R1~R5から総合的な興味度Iを算出してもよい。
また、本実施形態において、閲覧者Vの抽出条件が全ての閲覧者Vである場合には、総合表情情報は全ての閲覧者Vの総合的な表情情報を示すと共に、総合興味度情報は全ての閲覧者Vのウェブページ60に対する総合的な興味度の時間的変化を示す。このように、閲覧者Vの抽出条件(換言すれば、抽出される閲覧者Vの属性)に応じて総合表情情報と総合興味度情報は変化する。
また、本実施形態では、総合表情情報(特に、閲覧者Vの各表情要素の平均確率の時間的変化)に基づいて複数の閲覧者Vの総合興味度情報が算出されているが、総合興味度情報は、各閲覧者Vの注視点データに基づいて算出されてもよい。具体的には、総合興味度情報は、各閲覧者Vの興味度データに基づいて算出されると共に、閲覧者Vの興味度データは、閲覧者Vの注視点データと、閲覧者Vの瞬きに関する情報と、閲覧者Vの眠気情報とに基づいて算出されてもよい。閲覧者Vの瞬きに関する情報は、閲覧者Vの瞬きの回数を示す情報や瞬きの有無を示す情報であってもよい。閲覧者Vの瞬きに関する情報は、閲覧者Vの映像データの各フレームに基づいて特定されてもよい。閲覧者Vの眠気情報は、閲覧者Vの眠気の有無を示す情報であってもよい。閲覧者Vの眠気情報は、閲覧者Vの映像データの各フレームに基づいて特定されてもよい。例えば、閲覧者Vの興味度データは、閲覧者Vの注視点Pの位置が動画の表示領域S内に存在するかどうかに関する情報と、閲覧者Vの眠気の有無に関する情報と、閲覧者Vの瞬きの有無に関する情報に基づいて算出されてもよい。各閲覧者Vの興味度データに基づいて、複数の閲覧者Vの総合興味度情報を算出することが可能となる。
また、本実施形態では、複数の閲覧者Vのポジティブ度及びネガティブ度を示す情報は、各閲覧者Vの表情データに基づいて算出されているが、これらの情報は各閲覧者Vの注視点データに基づいて算出されてもよい。
尚、本実施形態では、図8に示す各処理の順番は特に限定されるものではない。また、図9及び図12に示す例では、注視点ヒートマップ62がウェブページ60に重畳された合成ウェブページ63がウェブページ表示領域71に表示されているが、ウェブページ表示領域71には、合成ウェブページ63に代わりウェブページ60が表示されてもよい。この場合であっても、レーダチャート形式の総合表情情報が表情情報表示領域72内に表示されると共に、時系列グラフ形式の総合表情情報及び総合興味度情報が表情・興味度情報表示領域73内に表示されてもよい。
また、本例では、総合表情情報と総合興味度情報の2つの情報がウェブページ閲覧解析画面70に表示されているが、総合表情情報と総合興味度情報の2つの情報のうちのいずれか一方の情報のみがウェブページ閲覧解析画面70上に表示されてもよい。また、表情情報として本例では、嬉しい、悲しい、中立、怒り、驚きの5種類の表情要素が採用されているが、表情要素の種類はこれらに限定されるものではない。例えば、これら以外の表情要素として、恐怖、幸福、楽しみ、嫌悪等が更に追加で採用されてもよい。
また、本実施形態によれば、ユーザUは、企業側端末4を通じて、合成ウェブページ63に含まれる注視点ヒートマップ62の所定領域を選択することで、前記選択された所定領域に含まれる注視点Pに紐づく閲覧者Vの情報をサーバ3から取得してもよい。具体的には、企業側端末4が選択された所定領域に関する情報をサーバ3に送信した後に、サーバ3は、所定領域に関する情報に基づいて、当該所定領域に含まれる注視点Pの集合を特定する。その後、サーバ3は、特定された注視点Pの集合に紐づく閲覧者Vの属性情報を特定した上で、当該閲覧者Vの属性情報を企業側端末4に送信する。このように、注視点ヒートマップ62の所定領域(例えば、特定のオブジェクト)に関心がある閲覧者Vに関する属性情報をウェブマーケティングに活用することが可能となる。
本実施形態によれば、注視点ヒートマップ62がウェブページ60に重畳された合成ウェブページ63が企業側端末4に提示されるため、ユーザUは、ウェブページ閲覧解析画面70上に表示された合成ウェブページ63を確認することで、ウェブページ60に対する複数の閲覧者Vの閲覧行動を詳細に把握することが可能となる。特に、ユーザUは、複数の閲覧者Vによるウェブページ60内の注目オブジェクト(注目領域)を詳細に把握することが可能となる。このように、ウェブページ解析を所望する企業側にウェブページ60に関する詳細なインサイト(より詳細には、ウェブページのデジタルマーケティングに関する詳細なインサイト)を提供することが可能となる。例えば、ユーザUは、ウェブページ60上に配置された問い合わせボタンや購入ボタンが各閲覧者Vにより注目されているかどうかを把握することができる。さらに、ユーザUは、ウェブページに関するインサイトを通じて、ウェブページのCVR(コンバージョン率)の向上に対する対策(例えば、問い合わせボタンや購入ボタンの最適配置)を行うことが可能となる。
特に、本実施形態では、複数の閲覧者Vの年代情報、性別情報、世帯人数情報等に関連付けられた抽出条件に合致した閲覧者Vの注視点データに基づいて、これらの属性条件を満たす閲覧者Vの注視点の位置の時間的変化を可視化した注視点ヒートマップが生成される。このように、閲覧者の属性に応じたウェブページ60に関するより詳細なインサイトを企業側に提供することが可能となる。
また、本実施形態によれば、レーダチャート形式及び時系列グラフ形式の総合表情情報及び総合興味度情報が企業側端末4に提示されるため、ユーザUは、ウェブページ閲覧解析画面70上に表示されたこれらの情報を確認することで、ウェブページ60に対する複数の閲覧者Vの閲覧行動を詳細に把握することができる。特に、ユーザUは、再生時間毎の閲覧者Vによるウェブページ60に対する表情(嬉しい、悲しい、中立、怒り、驚き等)や興味度を詳細に把握することが可能となる。このように、ウェブページ解析を所望する企業側にウェブページに関する詳細なインサイト(より詳細には、ウェブページのデジタルマーケティングに関する詳細なインサイト)を提供することが可能となる。
特に、本実施形態では、複数の閲覧者Vの年代情報、性別情報、世帯人数情報等に関連付けられた抽出条件に合致した閲覧者Vの表情データに基づいて、これらの属性条件を満たす閲覧者Vの総合的な各表情要素の確率情報を示す総合表情情報が生成されると共に、抽出条件に合致した閲覧者Vの総合的なウェブページ60に対する興味度を示す総合興味度情報が生成される。このように、これらの情報を通じて、抽出条件に合致した閲覧者Vの閲覧行動を詳細に把握することができるため、ウェブページ60に関するより詳細なインサイトを企業側に提供することが可能となる。
以上、本発明の実施形態について説明をしたが、本発明の技術的範囲が本実施形態の説明によって限定的に解釈されるべきではない。本実施形態は一例であって、特許請求の範囲に記載された発明の範囲内において、様々な実施形態の変更が可能であることが当業者によって理解されるところである。本発明の技術的範囲は特許請求の範囲に記載された発明の範囲及びその均等の範囲に基づいて定められるべきである。
1:ウェブページ閲覧解析システム、2,2a,2b:閲覧者端末、3:サーバ、4:企業側端末、8:通信ネットワーク、20:制御部、21:記憶装置、22:撮像部、23:通信部、24:入力操作部、25:表示部、26:スピーカ、RTC:28、30:制御部、31:記憶装置、32:入出力インターフェース、33:通信部、34:入力操作部、35:表示部、40:制御部、41:記憶装置、42:入出力インターフェース、43:通信部、44:入力操作部、45:表示部、60:ウェブページ、62:注視点ヒートマップ、63:合成ウェブページ、70:ウェブページ閲覧解析画面、71:ウェブページ表示領域、72:表情情報表示領域、73:興味度情報表示領域、74:閲覧者選択ボタン、75:ウェブページ選択ボタン、76:閲覧者表示領域、78:ウェブサイト選択ボタン、80:抽出条件表示画面、125:表示画面、176:再生ボタン、177:連絡ボタン、K:顔特徴点、L:視線、M:映像データ、P:注視点、S:表示領域、U:ユーザ、V,Va,Vb:閲覧者

Claims (9)

  1. ウェブページに対する複数の閲覧者のインサイトを解析するウェブページ閲覧解析システムであって、
    各々が前記複数の閲覧者のうちの対応する一人に関連付けられ、表示部を備えた複数の閲覧者端末と、
    ネットワークを介して前記複数の閲覧者端末に通信可能に接続されたサーバと、
    前記ネットワークを介して前記サーバに通信可能に接続され、表示部を備えた企業側端末と、を備え、
    前記ウェブページ閲覧解析システムは、
    前記ウェブページを前記複数の閲覧者端末の各々に提供し、
    前記ウェブページを前記複数の閲覧者端末の各々の表示部に表示させ、
    各々が前記ウェブページに対する前記複数の閲覧者のうちの対応する一人の複数の表情要素の確率の時間的変化を示す複数の表情データを取得し、
    前記複数の閲覧者の抽出条件を前記企業側端末から受信し、
    前記抽出条件に基づいて、前記複数の表情データのうち幾つかを抽出し、
    前記抽出された幾つかの表情データを統合した後に、前記統合された幾つかの表情データに基づいて前記複数の閲覧者が前記ウェブページを見たときの時間軸における総合的な表情を示す総合表情情報を生成し、
    前記総合表情情報を前記企業側端末の表示部に表示させる、
    ウェブページ閲覧解析システム。
  2. ウェブページに対する複数の閲覧者のインサイトを解析するウェブページ閲覧解析システムであって、
    各々が前記複数の閲覧者のうちの対応する一人に関連付けられ、表示部を備えた複数の閲覧者端末と、
    ネットワークを介して前記複数の閲覧者端末に通信可能に接続されたサーバと、
    前記ネットワークを介して前記サーバに通信可能に接続され、表示部を備えた企業側端末と、を備え、
    前記ウェブページ閲覧解析システムは、
    前記ウェブページを前記複数の閲覧者端末の各々に提供し、
    前記ウェブページを前記複数の閲覧者端末の各々の表示部に表示させ、
    各々が前記ウェブページに対する前記複数の閲覧者のうちの対応する一人の複数の表情要素の確率の時間的変化を示す複数の表情データを取得し、
    前記複数の閲覧者の抽出条件を前記企業側端末から受信し、
    前記抽出条件に基づいて、前記複数の表情データのうち幾つかを抽出し、
    前記抽出された幾つかの表情データを統合した後に、前記統合された幾つかの表情データに基づいて前記複数の閲覧者が前記ウェブページを見たときの時間軸における総合的な興味度を示す総合興味度情報を生成し、
    前記総合興味度情報を前記企業側端末の表示部に表示させる、
    ウェブページ閲覧解析システム。
  3. 前記抽出条件は、
    前記複数の閲覧者の年代情報と、
    前記複数の閲覧者の性別情報と、
    前記複数の閲覧者の住所情報と、
    前記複数の閲覧者の職業情報と、
    前記複数の閲覧者の世帯人数情報と、
    前記複数の閲覧者の婚姻情報と、
    前記複数の閲覧者の学歴情報と、
    のうち少なくとも1つに関連付けられている、
    請求項1又は2に記載のウェブページ閲覧解析システム。
  4. 前記総合表情情報は、前記ウェブページの全体を通した前記複数の閲覧者の各表情要素の平均確率を示す、請求項に記載のウェブページ閲覧解析システム。
  5. 前記総合表情情報は、前記ウェブページが閲覧された時系列に沿った前記複数の閲覧者の各表情要素の平均確率の時間的推移を示す、請求項に記載のウェブページ閲覧解析システム。
  6. 前記総合興味度情報は、前記ウェブページが閲覧された時系列に沿った前記複数の閲覧者の総合的な興味度の時間的推移を示す、請求項に記載のウェブページ閲覧解析システム。
  7. ウェブページに対する複数の閲覧者のインサイトを解析し、ウェブページ閲覧解析システムによって実行されるウェブページ閲覧解析方法であって、
    前記ウェブページ閲覧解析システムは、
    各々が前記複数の閲覧者のうちの対応する一人に関連付けられ、表示部を備えた複数の閲覧者端末と、
    ネットワークを介して前記複数の閲覧者端末に通信可能に接続されたサーバと、
    前記ネットワークを介して前記サーバに通信可能に接続され、表示部を備えた企業側端末と、を備え、
    前記ウェブページ閲覧解析方法は、
    前記ウェブページを前記複数の閲覧者端末の各々に提供するステップと、
    前記ウェブページを前記複数の閲覧者端末の各々の表示部に表示させるステップと、
    各々が前記ウェブページに対する前記複数の閲覧者のうちの対応する一人の複数の表情要素の確率の時間的変化を示す複数の表情データを取得するステップと、
    前記複数の閲覧者の抽出条件を前記企業側端末から受信するステップと、
    前記抽出条件に基づいて、前記複数の表情データのうち幾つかを抽出するステップと、
    前記抽出された幾つかの表情データを統合した後に、前記統合された幾つかの表情データに基づいて前記複数の閲覧者が前記ウェブページを見たときの時間軸における総合的な表情を示す総合表情情報を生成するステップと、
    前記総合表情情報を前記企業側端末の表示部に表示させるステップと、
    を含む、ウェブページ閲覧解析方法。
  8. ウェブページに対する複数の閲覧者のインサイトを解析し、ウェブページ閲覧解析システムによって実行されるウェブページ閲覧解析方法であって、
    前記ウェブページ閲覧解析システムは、
    各々が前記複数の閲覧者のうちの対応する一人に関連付けられ、表示部を備えた複数の閲覧者端末と、
    ネットワークを介して前記複数の閲覧者端末に通信可能に接続されたサーバと、
    前記ネットワークを介して前記サーバに通信可能に接続され、表示部を備えた企業側端末と、を備え、
    前記ウェブページ閲覧解析方法は、
    前記ウェブページを前記複数の閲覧者端末の各々に提供するステップと、
    前記ウェブページを前記複数の閲覧者端末の各々の表示部に表示させるステップと、
    各々が前記ウェブページに対する前記複数の閲覧者のうちの対応する一人の複数の表情要素の確率の時間的変化を示す複数の表情データを取得するステップと、
    前記複数の閲覧者の抽出条件を前記企業側端末から受信するステップと、
    前記抽出条件に基づいて、前記複数の表情データのうち幾つかを抽出するステップと、
    前記抽出された幾つかの表情データを統合した後に、前記統合された幾つかの表情データに基づいて前記複数の閲覧者が前記ウェブページを見たときの時間軸における総合的な興味度を示す総合興味度情報を生成するステップと、
    前記総合興味度情報を前記企業側端末の表示部に表示させるステップと、
    を含む、ウェブページ閲覧解析方法。
  9. 請求項7又は8に記載のウェブページ閲覧解析方法をコンピュータに実行させるウェブページ閲覧解析プログラム。
JP2023108601A 2023-06-30 2023-06-30 ウェブページ閲覧解析システム、ウェブページ閲覧解析方法およびウェブページ閲覧解析プログラム Active JP7398854B1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023108601A JP7398854B1 (ja) 2023-06-30 2023-06-30 ウェブページ閲覧解析システム、ウェブページ閲覧解析方法およびウェブページ閲覧解析プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2023108601A JP7398854B1 (ja) 2023-06-30 2023-06-30 ウェブページ閲覧解析システム、ウェブページ閲覧解析方法およびウェブページ閲覧解析プログラム

Publications (1)

Publication Number Publication Date
JP7398854B1 true JP7398854B1 (ja) 2023-12-15

Family

ID=89122200

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023108601A Active JP7398854B1 (ja) 2023-06-30 2023-06-30 ウェブページ閲覧解析システム、ウェブページ閲覧解析方法およびウェブページ閲覧解析プログラム

Country Status (1)

Country Link
JP (1) JP7398854B1 (ja)

Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003132362A (ja) 2001-10-22 2003-05-09 Sony Corp 情報通信システム、および情報通信方法、並びにコンピュータ・プログラム
JP2009140010A (ja) 2007-12-03 2009-06-25 Sony Corp 情報処理装置、情報処理端末、情報処理方法、およびプログラム
JP2010026871A (ja) 2008-07-22 2010-02-04 Nikon Corp 情報処理装置及び情報処理システム
US20120046993A1 (en) 2006-07-21 2012-02-23 Hill Daniel A Method and report assessing consumer reaction to a stimulus by matching eye position with facial coding
CN106682946A (zh) 2016-12-30 2017-05-17 北京七鑫易维信息技术有限公司 一种广告内容分析方法和装置
WO2017159063A1 (ja) 2016-03-14 2017-09-21 ソニー株式会社 表示装置並びに情報処理端末装置
JP2017531251A (ja) 2014-09-01 2017-10-19 リアルアイズ・オーウー ウェブ・ベース広告のターゲティング方法
WO2018079166A1 (ja) 2016-10-26 2018-05-03 ソニー株式会社 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム
JP2020106772A (ja) 2018-12-28 2020-07-09 株式会社Jvcケンウッド 表示装置、表示方法、およびプログラム
JP2020531987A (ja) 2017-10-30 2020-11-05 コーロン インダストリーズ インク 人工知能技術を利用して広告及び商品購買に関するサービスを提供する装置、システム、及び方法
JP2020184217A (ja) 2019-05-08 2020-11-12 株式会社リコー 通信システム、端末装置、通信方法、プログラム
JP2020202575A (ja) 2020-08-18 2020-12-17 グリー株式会社 動画配信システム、動画配信方法、及び動画配信プログラム
JP2021177362A (ja) 2020-05-08 2021-11-11 ヤフー株式会社 情報処理装置、情報処理方法、情報処理プログラム及び端末装置
WO2022239793A1 (ja) 2021-05-12 2022-11-17 株式会社夏目綜合研究所 被験者分析装置
WO2023047658A1 (ja) 2021-09-22 2023-03-30 ソニーグループ株式会社 情報処理装置および情報処理方法

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003132362A (ja) 2001-10-22 2003-05-09 Sony Corp 情報通信システム、および情報通信方法、並びにコンピュータ・プログラム
US20120046993A1 (en) 2006-07-21 2012-02-23 Hill Daniel A Method and report assessing consumer reaction to a stimulus by matching eye position with facial coding
JP2009140010A (ja) 2007-12-03 2009-06-25 Sony Corp 情報処理装置、情報処理端末、情報処理方法、およびプログラム
JP2010026871A (ja) 2008-07-22 2010-02-04 Nikon Corp 情報処理装置及び情報処理システム
JP2017531251A (ja) 2014-09-01 2017-10-19 リアルアイズ・オーウー ウェブ・ベース広告のターゲティング方法
WO2017159063A1 (ja) 2016-03-14 2017-09-21 ソニー株式会社 表示装置並びに情報処理端末装置
WO2018079166A1 (ja) 2016-10-26 2018-05-03 ソニー株式会社 情報処理装置、情報処理システム、および情報処理方法、並びにプログラム
CN106682946A (zh) 2016-12-30 2017-05-17 北京七鑫易维信息技术有限公司 一种广告内容分析方法和装置
JP2020531987A (ja) 2017-10-30 2020-11-05 コーロン インダストリーズ インク 人工知能技術を利用して広告及び商品購買に関するサービスを提供する装置、システム、及び方法
JP2020106772A (ja) 2018-12-28 2020-07-09 株式会社Jvcケンウッド 表示装置、表示方法、およびプログラム
JP2020184217A (ja) 2019-05-08 2020-11-12 株式会社リコー 通信システム、端末装置、通信方法、プログラム
JP2021177362A (ja) 2020-05-08 2021-11-11 ヤフー株式会社 情報処理装置、情報処理方法、情報処理プログラム及び端末装置
JP2020202575A (ja) 2020-08-18 2020-12-17 グリー株式会社 動画配信システム、動画配信方法、及び動画配信プログラム
WO2022239793A1 (ja) 2021-05-12 2022-11-17 株式会社夏目綜合研究所 被験者分析装置
WO2023047658A1 (ja) 2021-09-22 2023-03-30 ソニーグループ株式会社 情報処理装置および情報処理方法

Similar Documents

Publication Publication Date Title
Koelle et al. Don't look at me that way! Understanding user attitudes towards data glasses usage
US11657576B2 (en) Conducting digital surveys utilizing virtual reality and augmented reality devices
US10515393B2 (en) Image data detection for micro-expression analysis and targeted data services
JP4947477B1 (ja) レコメンド装置、レコメンド方法およびレコメンドプログラム
JP5571145B2 (ja) 広告配信装置および広告配信方法
JP2019536135A (ja) 言語モデルを用いたメッセージ内受信画像に対する自動提案応答
US20140130076A1 (en) System and Method of Media Content Selection Using Adaptive Recommendation Engine
KR20190084278A (ko) 이미지들을 공유하기 위한 자동 제안들
US10755487B1 (en) Techniques for using perception profiles with augmented reality systems
US11934643B2 (en) Analyzing augmented reality content item usage data
US20140108386A1 (en) Method and system for providing an affinity between entities on a social network
US20150026173A1 (en) Systems and methods for online matchmaking
JPWO2019116658A1 (ja) 情報処理装置、情報処理方法、およびプログラム
KR101693429B1 (ko) 대인 관계 유형 파악을 통한 코칭 정보 제공 시스템
US20230260219A1 (en) Systems and methods for displaying and adjusting virtual objects based on interactive and dynamic content
US20240160282A1 (en) Systems and methods for displaying and adjusting virtual objects based on interactive and dynamic content
US20180091594A1 (en) Systems and methods for utilizing athlete data to increase athlete performance
JP7398854B1 (ja) ウェブページ閲覧解析システム、ウェブページ閲覧解析方法およびウェブページ閲覧解析プログラム
JP7398853B1 (ja) 動画視聴解析システム、動画視聴解析方法および動画視聴解析プログラム
US12019842B2 (en) Systems and methods for displaying and adjusting virtual objects based on interactive and dynamic content
KR20130021797A (ko) 친구 추천 서비스 제공방법 및 그 시스템
JP2022071467A (ja) コミュニケーション支援プログラム、コミュニケーション支援方法及びコミュニケーション支援システム
US20240212264A1 (en) Program, information processing method, and information processing system
KR20200130552A (ko) 직업영상 공유 시스템 및 방법
JP7281012B1 (ja) プログラム、情報処理方法及び情報処理システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230704

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20230704

A80 Written request to apply exceptions to lack of novelty of invention

Free format text: JAPANESE INTERMEDIATE CODE: A80

Effective date: 20230701

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230801

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230831

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230921

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231113

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231115

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231127

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231128

R150 Certificate of patent or registration of utility model

Ref document number: 7398854

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350