JP7136099B2 - 情報処理装置、情報処理方法、およびプログラム - Google Patents

情報処理装置、情報処理方法、およびプログラム Download PDF

Info

Publication number
JP7136099B2
JP7136099B2 JP2019528946A JP2019528946A JP7136099B2 JP 7136099 B2 JP7136099 B2 JP 7136099B2 JP 2019528946 A JP2019528946 A JP 2019528946A JP 2019528946 A JP2019528946 A JP 2019528946A JP 7136099 B2 JP7136099 B2 JP 7136099B2
Authority
JP
Japan
Prior art keywords
user
music
information
preference information
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019528946A
Other languages
English (en)
Other versions
JPWO2019012784A1 (ja
Inventor
貴宏 佐々木
宏明 北野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Sony Group Corp
Original Assignee
Sony Corp
Sony Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp, Sony Group Corp filed Critical Sony Corp
Publication of JPWO2019012784A1 publication Critical patent/JPWO2019012784A1/ja
Application granted granted Critical
Publication of JP7136099B2 publication Critical patent/JP7136099B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8106Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H04N21/8113Monomedia components thereof involving special audio data, e.g. different tracks for different languages comprising music, e.g. song in MP3 format
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2668Creating a channel for a dedicated end-user group, e.g. insertion of targeted commercials based on end-user profiles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44222Analytics of user selections, e.g. selection of programs or purchase activity
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4668Learning process for intelligent management, e.g. learning user preferences for recommending movies for recommending content, e.g. movies
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Social Psychology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • Computer Graphics (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Electrophonic Musical Instruments (AREA)

Description

本開示は、情報処理装置、情報処理方法、およびプログラムに関する。
近年、例えば音楽や動画像など様々なメディアコンテンツがデジタルコンテンツとして利用されるようになっている。ユーザが複数のコンテンツの中から所望のコンテンツを選択する場合には、例えば、コンテンツの内容を示したリストの中から目視で選択する方法、および、デジタルコンテンツに付帯したメタデータを用いて検索する方法などがある。
また、下記特許文献1に記載されているように、ユーザの嗜好情報や履歴情報などを用いて、ユーザに適したコンテンツを推薦する方法がある。
特開2015-008014号公報
しかしながら、ユーザが好むメディアコンテンツ(本明細書では、単に「コンテンツ」とも称す)の中にも一部好まない部分があったり、また、ユーザの視聴時における状況によって好む場合と好まない場合がある。従来技術では、ユーザの嗜好傾向を示す嗜好情報として、コンテンツやコンテンツのカテゴリでの好み、視聴履歴(何回視聴したか等)といった情報しか把握されておらず、具体的な視聴時のユーザ状況や、コンテンツの部分毎の好みまでは参考にされていなかった。
そこで、本開示では、コンテンツのパーツに対するユーザ評価を分析し、より充実したコンテンツ推薦を実現し得る嗜好情報を生成することが可能な情報処理装置、情報処理方法、およびプログラムを提案する。
本開示によれば、メディアコンテンツの視聴に関して取得されたユーザのセンサデータに基づいて、前記メディアコンテンツの時系列で区切られるパーツに対するユーザ評価を生成し、生成したユーザ評価を少なくとも含むメディア嗜好情報を記憶部に記憶するよう制御する制御部を備える、情報処理装置を提案する。
本開示によれば、プロセッサが、メディアコンテンツの視聴に関して取得されたユーザのセンサデータに基づいて、前記メディアコンテンツの時系列で区切られるパーツに対するユーザ評価を生成し、生成したユーザ評価を少なくとも含むメディア嗜好情報を記憶部に記憶するよう制御することを含む、情報処理方法を提案する。
本開示によれば、コンピュータを、メディアコンテンツの視聴に関して取得されたユーザのセンサデータに基づいて、前記メディアコンテンツの時系列で区切られるパーツに対するユーザ評価を生成し、生成したユーザ評価を少なくとも含むメディア嗜好情報を記憶部に記憶するよう制御する制御部として機能させるための、プログラムを提案する。
以上説明したように本開示によれば、コンテンツのパーツに対するユーザ評価を分析し、より充実したコンテンツ推薦を実現し得る嗜好情報を生成することが可能となる。
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
本開示の一実施形態による情報処理システムの概要を説明するための図である。 本実施形態による情報処理装置の構成の一例を示す図である。 本実施形態による音楽推薦システムの動作処理を示すシーケンス図である。 本実施形態の情報処理装置による嗜好情報の分析処理を示すフローチャートである。 本実施形態による推薦楽曲リストの表示画面例である。 本実施形態による推薦楽曲リストの他の表示画面例である。
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
また、説明は以下の順序で行うものとする。
1.本開示の一実施形態による情報処理システムの概要
2.構成
3.動作処理
4.表示画面例
5.補足
6.まとめ
<<1.本開示の一実施形態による情報処理システムの概要>>
図1は、本開示の一実施形態による情報処理システムの概要を説明するための図である。図1に示すように、本実施形態による情報処理システムは、クライアント端末1を含み、ユーザは、クライアント端末1により音楽配信装置3から配信された音楽を視聴することができる。クライアント端末1は、ネットワークを介して音楽配信装置3や情報処理装置2と通信接続し、データの送受信を行うことが可能である。
クライアント端末1は、例えば音楽配信装置3から音楽データを取得すると共に再生を行うストリーミング再生を行ってもよい。クライアント端末1は、例えばスマートフォン、携帯電話端末、タブレット端末、PC(パーソナルコンピュータ)、ウェアラブル装置(HMD、スマートアイグラス、スマートウォッチ、スマートバンド、スマートネック、ネック型スピーカ、スマートイヤホン、イヤリング型スピーカ、イヤカフ型スピーカ等)、据え置き型スピーカ装置、ヘッドホン装置等が想定される。
また、ユーザは、音楽推薦装置6を利用し、自動で選択された音楽を音楽配信装置3から取得して視聴することも可能である。音楽推薦装置6は、例えばユーザ属性やユーザ個人の嗜好に応じて音楽の推薦を行うことが可能である。推薦する音楽は、例えば各レコード会社から使用許諾を得た音楽情報が格納されている各種音楽データDB5から選択してもよい。
ここで、従来の音楽推薦システムでは、ユーザが何時どのような音楽を聞いたかの履歴を取ることは可能であったが、さらにユーザがどのような状況において音楽を聞いているのかといった情報は十分に取得出来ていなかった。
例えば、音楽を視聴している時間帯のみ統計を取っても、ユーザが夜にリビングでよく聞く音楽と、ユーザが夜にランニングをしながら聞く音楽とでは、好みが異なる場合があるが、従来はこのような視聴時のユーザ状況(ユーザ行動)が取得出来ておらず、ユーザの嗜好情報の粒度が大きく、最適な音楽推薦を十分に行うことが出来ていなかった。
そこで、本実施形態では、クライアント端末1においてユーザが音楽を視聴している際のユーザ状況(行動)を各種センサにより取得し、情報処理装置2(分析装置)にセンサデータを送信し、情報処理装置2において、より精度の高い嗜好情報の分析を行うことを可能とする。
具体的には、情報処理装置2は、取得した各種センサデータに基づいて、音楽視聴時におけるユーザ行動を解析して音楽データのパーツ毎のユーザ評価を取得し、嗜好情報としてデータベース化する。クライアント端末1からは、センサデータと共に、視聴した音楽に関する情報(タイトル、楽曲データ、楽曲データの一部等)が情報処理装置2に送信されてもよく、情報処理装置2は、音楽パーツの解析を行い得る。
上述したように、ユーザが好む音楽の中にも一部好まない部分(メロディ、リズム、ハーモニー等)があるため、音楽データの各構成要素であるこれらのメロディ、リズム、ハーモニー等のパーツ毎にユーザの好みを解析し、パーツに対するユーザの好みを嗜好情報として生成することで、より精度の高い音楽推薦を実現することができる。また、かかる嗜好情報には、ユーザ状況も対応付けられている。これにより、例えば夜リビングでリラックスしている時に好む音楽のメロディ、リズム、ハーモニー等と、夜ランニングしている時に好む音楽のメロディ、リズム、ハーモニー等のより粒度の細かい嗜好情報を生成することができる。
このように生成した嗜好情報に基づいて音楽推薦装置6により音楽推薦を行うことで、推薦の精度を上げること(音楽推薦の最適化)ができる。すなわち、音楽推薦装置6は、情報処理装置2により生成されたユーザの嗜好情報に基づいて機械学習を行い、ユーザの状況に応じた最適な音楽を推薦することを可能とする。なお本実施形態による音楽推薦装置6は、広告をユーザに提示する機能を有してもよく、上述したようなより粒度の細かい嗜好情報に基づいて(機械学習を行い)最適な広告を提示し、広告効果を上げること(広告の最適化)が可能となる。
また、音楽推薦装置6は、音楽を自動的に作曲する自動作曲装置4により生成された音楽データも同様に推薦対象としてもよい。自動作曲装置4による作曲アルゴリズムについては特に限定しないが、例えば指定された音楽のテーマ、ジャンル、所定のパーツ(メロディ、リズム、ハーモニー等)のタイプに従って、パーツを組み合わせて、適宜修正を行い、楽曲を生成し得る。かかる自動作曲装置4は、情報処理装置2により生成された嗜好情報、すなわち音楽のパーツに対するユーザ評価と対応するユーザ状況を少なくとも含む嗜好情報に基づいて、ユーザの状況に応じた適切な音楽を作曲することが可能である。自動作曲された音楽データは、各種音楽データDB5に蓄積されてもよいし、ユーザ状況に応じてリアルタイムで生成し、音楽推薦装置6に出力してもよい。
以上、本開示の一実施形態による情報処理システムの概要について説明した。なお、図1に示す情報処理装置2、音楽配信装置3、自動作曲装置4、各種音楽データDB5、音楽推薦装置6は、ネットワーク上のサーバによりそれぞれ実現されてもよい。また、複数の装置を1のサーバにより実現してもよい。例えば、情報処理装置2、自動作曲装置4、および音楽推薦装置6の機能を有する音楽推薦サーバを構築してもよい。続いて、本実施形態による情報処理システムに含まれる情報処理装置2の具体的な構成について図面を参照して説明する。
<<2.構成>>
図2は、本実施形態による情報処理装置2の構成の一例を示すブロック図である。図2に示すように、情報処理装置2は、制御部20、通信部21、および記憶部22を有する。
制御部20は、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理装置2内の動作全般を制御する。制御部20は、例えばCPU(Central Processing Unit)、マイクロプロセッサ等の電子回路によって実現される。また、制御部20は、使用するプログラムや演算パラメータ等を記憶するROM(Read Only Memory)、及び適宜変化するパラメータ等を一時記憶するRAM(Random Access Memory)を含んでいてもよい。
また、本実施形態による制御部20は、行動解析部201、音楽パーツ解析部202、および音楽嗜好分析部203としても機能する。
行動解析部201は、コンテンツ(本実施形態では一例として音楽)視聴時におけるユーザの各種センサデータに基づいて、視聴時におけるユーザ行動を解析する。ここで、視聴時におけるユーザの各種センサデータとは、位置情報、動き情報(加速度センサデータ、ジャイロセンサデータ、地磁気センサデータ等)、生体情報(脈拍、心拍、静脈、発汗、血圧、体温、呼吸、脳波、筋電、指紋、静紋等)、ユーザ発話情報、ジェスチャー情報、撮像画像、環境情報(気温、照度、雨、風、周辺音等)、日時、季節、視聴操作情報(再生、停止、スキップ等)等が想定される。
位置情報は、コンテンツ視聴時におけるユーザの場所であって、屋内、屋外、部屋のどこにいたか、屋外の位置(緯度経度)等が想定される。位置情報は、位置測位部により検知され得る。ここで、位置測位部は、外部からの取得信号に基づいて現在位置を検知する機能を有する。具体的には、例えば位置測位部は、GNSS(Global Navigation Satellite System)測位部により実現され、人工衛星からの電波を受信して、現在位置を検知し、検知した位置情報を出力する。また、位置測位部は、GNSSの他、例えばWi-Fi(登録商標)、Bluetooth(登録商標)、携帯電話・PHS・スマートフォン等との送受信、または近距離通信等により位置を検知するものであってもよい。
これらのセンサデータは、クライアント装置1に設けられた各種センサ(位置測位部、モーションセンサ(加速度センサ、地磁気センサ)、生体センサ、カメラ、マイクロホン、環境センサ等)、操作検出部(タッチセンサ、圧力センサ、近接センサ、ボタン、スイッチ、およびレバー等)により取得されてもよいし、ユーザ周辺に設置された装置(据え置きスピーカー、監視カメラ等)により取得されたものであってもよい。また、情報処理装置2が取得するセンサデータは、各センサにより検知したセンサデータそのままであってもよいし、1以上のセンサデータに基づいて解析されたデータ等の加工データであってもよい。
行動解析部201は、音楽視聴時にユーザがどこに、誰と居て、何をしていたか、時間帯、天候はどうであったか、また、視聴時の感情の変化(感情は、生体センサデータ、発話音声、または動き等から推測し得る)はどうであったか、また、どのような曲をどこまで(どの音節まで)再生したか、どの曲を何回聞いたか等、音楽の視聴に関する様々なユーザの状況を、センサデータ等から解析する。これらの行動解析は、1曲の音楽に対して1つの解析結果が出力されるのではなく、1曲の音楽に対する時系列の解析結果(ユーザ反応)が出力される。すなわち、例えばどの音節箇所でどのような行動を取っていたか、若しくは、再生何秒後にどのような行動を取っていたか等が解析され得る。行動解析部201による解析結果は、ユーザ行動情報DB221に格納される。なおユーザ行動情報DB221には、音楽視聴時におけるユーザの各種センサデータも格納され得る。
音楽パーツ解析部202は、ユーザが視聴した音楽の音楽パーツの解析を行う。すなわち、音楽パーツ解析部202は、ユーザが視聴した音楽の音楽関連情報(タイトル、楽曲データ、楽曲データの一部等)に基づいて、音楽の「パーツ」、より具体的には、1以上の音節から成るメロディ、リズム、ハーモニーといった、音楽の構成要素を解析する。
音楽嗜好分析部203は、行動解析部201による解析結果と、音楽パーツ解析部202による解析結果に基づいて、コンテンツの時系列で区切られるパーツ(すなわち音楽パーツ;メロディ、リズム、ハーモニー等)に対するユーザ評価(状況によって異なるポジティブ/ネガティブ評価)を生成する。すなわち、どのような状況の場合に好む音楽パーツであるかといった、ユーザ評価にユーザ状況(キッチンで料理をしている、ダイニングでリラックスしている、ランニングしている、通勤途中等)が対応付けられたものが嗜好情報として生成される。かかる音楽嗜好分析は、視聴した音楽の1曲毎に行われるが、さらに、ユーザによる多数の視聴音楽における各評価結果に基づいて、同一または類似したパーツに対するユーザ評価を生成してもよい。この場合、音楽嗜好分析部203は、例えばディープラーニングを用いた機械学習によりユーザ評価を行うことも可能である。これにより、音楽パーツへのラベル付け(音楽に対する時系列でのラベル付け)を行うことが可能となる。また、音楽嗜好分析部203は、感情推定、例えば脳波による感情推定(楽しい、悲しい、幸せ、嬉しい、つらい等)に基づいて、楽曲のパーツに対してユーザの感情の変化をタグ付けすることも可能である。このような音楽嗜好分析部203による各分析結果は、ユーザの音楽に関する嗜好情報として音楽嗜好情報DB222に格納される。
また、音楽嗜好分析部203は、多数のユーザの音楽嗜好情報を用いて、ユーザの特徴に基づいてグループ分けしたグループ毎における音楽嗜好情報を分析することも可能である。ユーザの特徴とは、所謂属性であって、ユーザの年齢、年代、性別、出身地、国籍、人種、職業、行動パターン、生活スタイル、趣味、および嗜好等が想定される。多数のユーザの音楽嗜好情報に基づいて生成したグループ分けした嗜好情報を用いることで、より多くのユーザの傾向に応じてユーザの状況および好みに合致した音楽を推薦することができる。
なお本実施形態による音楽嗜好分析部203は、音楽パーツ毎に対するユーザ評価のみならず、音楽毎における音楽ジャンル、作曲家、歌手等に対するユーザ評価(ポジティブ/ネガティブ)も当然に分析することが可能である。
(通信部21)
通信部21は、有線または無線により外部装置と接続し、外部装置とデータの送受信を行う。通信部21は、例えば有線/無線LAN(Local Area Network)、Wi-Fi(登録商標)、Bluetooth(登録商標)、近接無線通信、携帯通信網(LTE(Long Term Evolution)、3G(第3世代の移動体通信方式))等により外部装置と通信接続し得る。
例えば通信部21は、ネットワークを介してクライアント端末1からセンサデータおよび音楽関連情報(タイトル、楽曲データ、楽曲データの一部等)を受信する。また、通信部21は、分析した音楽嗜好情報を自動作曲装置4や音楽推薦装置6からの要求に応じて送信することも可能である。
(記憶部22)
記憶部22は、制御部20の処理に用いられるプログラムや演算パラメータ等を記憶するROM(Read Only Memory)、および適宜変化するパラメータ等を一時記憶するRAM(Random Access Memory)により実現される。
本実施形態による記憶部22は、ユーザ行動情報DB(データベース)221および音楽嗜好情報DB222を格納する。ユーザ行動情報DB221には、上述したように、行動解析部201による各ユーザの解析結果が格納される。また、ユーザ行動情報DB221には、音楽視聴時における各ユーザの各種センサデータも格納される。
音楽嗜好情報DB222には、音楽嗜好分析部203による分析結果が格納される。かかる分析結果は、各ユーザの音楽パーツに対するユーザ評価であって、ユーザ状況(いつ、何をしている時、どこにいる時、誰と居る時、季節、天候等)が紐付けられる。また、音楽嗜好情報DB222には、グループ分けしたユーザタイプ毎の音楽嗜好情報も格納される。
以上、本実施形態による情報処理装置2の構成について具体的に説明した。なお図2に示す情報処理装置2の構成は一例であって、本実施形態はこれに限定されない。例えば情報処理装置2の少なくとも一部の構成が外部装置にあってもよいし、制御部20の各機能の少なくとも一部がクライアント端末1または通信距離が比較的クライアント端末1に近い情報処理端末(例えば、いわゆるエッジサーバなど)により実現されてもよい。このように、情報処理装置2の各構成を適宜分散することで、リアルタイム性の向上や処理負担の軽減、さらにはセキュリティを担保することが可能となる。また、図2に示す制御部20の各構成および各DBを全てクライアント端末1に設け、本実施形態による嗜好情報の分析処理をクライアント端末1のアプリケーションにより実行するようにしてもよい。
<<3.動作処理>>
続いて、本実施形態による情報処理システムの動作処理について図面を用いて具体的に説明する。
図3は、本実施形態による音楽推薦システムの動作処理を示すシーケンス図である。
図3に示すように、まず、音楽配信装置3は、音楽データをクライアント端末1に送信する(ステップS103)。
次に、クライアント端末1は、音楽データをストリーミング再生してユーザによる視聴を実現し(ステップS106)、同時に視聴時におけるユーザ行動(状況)をセンシングする(ステップS109)。
次いで、クライアント端末1は、センシングしたセンサデータおよび視聴した音楽に関連する情報を情報処理装置2に送信する(ステップS112)。
次に、情報処理装置2は、受信したセンサデータおよび音楽関連情報に基づいて、音楽に関するユーザ嗜好の分析を行う(ステップS115)。ユーザ嗜好の分析結果である音楽嗜好情報は、例えば音楽推薦装置6により利用され、ユーザの状況および嗜好により最適な音楽の推薦に用いられる。また、自動作曲装置4によりユーザの状況および嗜好により最適な音楽が生成され、推薦されることも考え得る。
具体的には、例えば情報処理装置2は、ユーザ嗜好の分析結果である音楽嗜好情報を自動作曲装置4に送信する(ステップS118)。
次いで、自動作曲装置4は、ユーザの音楽嗜好情報に基づいてユーザの状況および嗜好に合致する音楽を自動作曲し(ステップS121)、生成した音楽データを各種音楽データDB5に蓄積する(ステップS124)。例えば自動作曲装置4は、情報処理装置2から取得した音楽嗜好情報を参照し、あるユーザ状況においてユーザが好む音楽パーツや音楽ジャンルに基づいて、類似した(雰囲気の似ている)音楽を自動で作曲し得る。当該自動作曲した音楽データには、メタデータとしてユーザ状況が付与され得る。ここで、自動作曲装置4は、ユーザの評価のみならず、他ユーザの評価を用いて作曲することも可能である。例えば、ユーザと似ている特徴(属性、行動パターン、または嗜好等)を有する他ユーザの評価(音楽嗜好情報)に基づいて、ユーザ状況に応じた音楽を生成してもよいし、ユーザの特徴に起因せず、単に他ユーザの評価を用いるようにしてもよい。
一方、レコード会社サーバ7は、任意に楽曲の使用許諾設定を行い(ステップS127)、使用許諾設定を行った音楽データを各種音楽データDB5に蓄積する(ステップS130)。
続いて、音楽推薦装置6は、各種音楽データDB5から音楽データの読み出しを行い(ステップS133)、情報処理装置2から送信されたユーザの音楽嗜好情報(ステップS136)を参照し、ユーザ嗜好およびユーザ状況に応じた音楽の推薦を行う(ステップS139)。例えば、音楽推薦装置6は、各種音楽データDB5に蓄積されている音楽データのメタデータに基づいて、ユーザ嗜好およびユーザ状況に応じた音楽の推薦を行う。音楽データのメタデータには、例えば音楽パーツに関する情報が含まれている。音楽推薦装置6は、かかる音楽パーツに関する情報に基づいて、ユーザ状況に応じて適した(すなわちユーザが好む)音楽パーツを(比較的多く)含む音楽データを選出し得る。この際、ユーザが好まない音楽パーツを含む音楽データは除外するようにしてもよい。また、音楽推薦装置6は、ユーザ状況毎にユーザが好む音楽ジャンルやアーティスト等の嗜好情報も参照して音楽データを選出してもよい。これにより、音楽推薦装置6は、例えば、ユーザがキッチンで作業している際に推薦する音楽リスト、ダイニングのソファーに座っている時に推薦する音楽リスト、ランニングする時に推薦する音楽リスト等を生成することができる。なお、音楽推薦装置6は、ユーザ個人の音楽嗜好情報の他、ユーザの特徴に対応するグループの音楽嗜好情報を参照してもよい。また、音楽推薦装置6は、ユーザの評価のみならず、他ユーザの評価を用いて推薦することも可能である。例えば、ユーザと似ている特徴(属性、行動パターン、または嗜好等)を有する他ユーザの評価(音楽嗜好情報)に基づいて、ユーザ状況に応じた音楽を推薦してもよいし、ユーザの特徴に起因せず、単に他ユーザの評価を用いるようにしてもよい。このように推薦された音楽データは、上記ステップS103において、音楽配信装置3からクライアント端末1に提供される。
本実施形態による音楽推薦システムでは、上述したステップS103~S139に示す処理を繰り返し、継続的にユーザの音楽嗜好情報を蓄積し、音楽推薦の精度を向上させることができる。
なお図3のフローチャートには示していないが、ユーザの音楽嗜好情報は広告提示に用いられてもよい。例えば音楽推薦装置6が広告機能も兼ねる場合、より最適な音楽の推薦と共に、推薦する音楽に関連する広告を提示することで、広告効果を高めることが期待できる。
次に、上記ステップS115に示す情報処理装置2による分析処理について図4を参照して具体的に説明する。図4は、本実施形態の情報処理装置2による分析処理を示すフローチャートである。
図4に示すように、まず、情報処理装置2は、ユーザによる音楽視聴時のセンサデータおよび音楽関連情報を取得すると(ステップS303)、行動解析部201によりユーザ行動の解析を行い(ステップS306)、また、音楽パーツ解析部202により音楽パーツの解析を行う(ステップS309)。
次に、情報処理装置2は、音楽嗜好分析部203により、音楽に関するユーザの嗜好情報を分析し(ステップS312)、分析結果を記憶部22に記憶する(ステップS315)。
<<4.表示画面例>>
続いて、本実施形態による嗜好情報を用いて音楽推薦を行った場合におけるクライアント端末1での表示画面の一例について図5および図6を参照して説明する。
図5は、本実施形態による推薦楽曲リストの表示画面例である。図5に示す表示画面110には、リビングに居る時、キッチンで過ごす時、通勤時、およびランニング時といったユーザの行動パターンに応じた各状況に対応する推薦楽曲リストが提示される。かかる推薦楽曲リストは、音楽推薦装置6により生成され得る。また、各状況に対応する推薦楽曲は、ユーザまたはユーザの特徴に対応するグループにおける音楽嗜好情報(センシングデータに基づいて分析された、状況毎に異なる好みであって、少なくとも音楽パーツに対するユーザ評価を含む)に基づいて選出されたものである。
なお、ユーザの嗜好情報に基づいて自動作曲された楽曲については、例えば「Auto.」と明示され、既存の楽曲(レコード会社から使用許諾を得て提供された楽曲)と区別できるようにしてもよい。
図6は、本実施形態による推薦楽曲リストの他の表示画面例である。図6に示す表示画面111では、例えば部屋の間取り等の地図画像上に、状況(場所)に応じた推薦楽曲リストが表示されている。これにより、ユーザは直感的に状況に応じた推薦楽曲リストを把握することができる。
なおユーザに提示される推薦楽曲リストは、これから再生する音楽であってもよいし、再生済みの音楽(履歴)であってもよい。例えばこれから再生する音楽を事前に確認することができる場合、ユーザは予め楽曲の取捨選択を行うことができ、このような操作情報もフィードバックとして嗜好情報の分析に用いられ得る。
<<5.補足>>
以下、本実施形態の補足についていくつか説明する。
本実施形態による音楽推薦システムでは、ユーザ状況に応じて自動的に推薦楽曲リストが切り替えられ、順次ユーザ状況に適した推薦楽曲が自動再生されるようにすることが可能である。具体的には、例えば音楽推薦装置6は、クライアント端末1からセンサデータを取得してリアルタイムでユーザ状況を認識し、情報処理装置2から取得した音楽嗜好情報を用いて音楽推薦を行ってもよい。若しくは、クライアント端末1が音楽推薦装置6で生成されたユーザ状況に応じた音楽推薦リストを保有している場合、クライアント端末1がリアルタイムでユーザ状況を認識し、対応する推薦楽曲リストに掲載されている楽曲を音楽配信装置3から取得して自動再生するようにしてもよい。
また、本実施形態による音楽推薦システムでは、現在再生している音楽に対するユーザの反応に基付いて、次に再生する曲をリアルタイムで変更することも可能である(機械学習を用いてもよい)。例えば、クライアント端末1は、ユーザが走っている際にランニング時における推薦楽曲を再生するが、ユーザの生体情報(心拍、ピッチ等)に基づいて、ペースを上げると健康上問題があると判断した場合、少しリズムを落としたスローな曲を再生するようにしてもよい。また、クライアント端末1は、ユーザの生体情報等に基づいてユーザの集中度を認識し、集中度に合った音楽を選出し、集中力を高めるようアシストすることも可能である。このようなリアルタイムの状況に応じた再生音楽の変更処理は、クライアント端末1で行ってもよいし、音楽推薦装置6で行ってもよい。また、必要に応じて、リアルタイムで自動作曲装置4により作曲した音楽を再生することも可能である。例えば集中力を高める環境音楽(アンビエント系)を、ユーザの実際の集中度の変化に応じてリアルタイムで自動生成してユーザに提供することも可能である。
また、本実施形態による音楽推薦システムは、音楽再生における課金制限を考慮して推薦楽曲の選択を行ってもよい。すなわち、レコード会社から使用許諾を得た楽曲は課金対象となるため、設定された課金上限に応じて、上限が近い場合には、課金対象の楽曲を減らし、自動作曲された楽曲の割合を増やすようにしてもよい。
また、本実施形態による音楽嗜好情報の分析では、ユーザが視聴している音楽についてユーザの反応(行動)を分析するが、「ユーザが視聴している音楽」は、クライアント端末1で再生される音楽に限定されず、ユーザが聞いている周囲の音も含まれ得る。例えばユーザが電車の音や駅で流れる音楽、コンビニエンスストアで流れる音楽等、周囲で流れている音楽を聞いている際に、当該音楽がクライアント端末1に設けられたマイクロホンにより集音され、「ユーザが視聴している音楽に関連する情報」として、ユーザ反応のセンサデータと共に、情報処理装置2に送信される。これにより、ユーザが好む電車の音を用いて自動作曲された音楽を推薦したり、駅や店で流れていた音楽を推薦したりすることが可能となる。
また、本実施形態による音楽推薦システムの構成は図1に示す例に限定されない。例えば、嗜好情報の分析や音楽推薦をクライアント端末1で(すなわちローカルで)行うようにしてもよい。この場合、クライアント端末1は、自身が保有する多数の音楽データから、ユーザ状況と嗜好(パーツに対する評価を少なくとも含む嗜好情報)に応じた音楽推薦を行うことが可能である。また、ローカルで音楽推薦を行う際も、定期的(例えば1日1回、1週間に1回など)に、他ユーザと情報(嗜好情報)をシェアするために情報処理装置2に接続し、嗜好情報の更新を行うようにしてもよい。
なお、上述した実施形態では、推薦するメディアコンテンツとして音楽を用いて説明したが、本実施形態はこれに限定されず、例えば動画像(ドラマ、映画、ビデオ、ショートムービー)やゲーム等であってもよい。ユーザ状況に応じて、ユーザの好むパーツを少なくとも含む動画像全編、若しくはパーツ部分に相当する動画像部分を再生するようにしてもよい。
<<6.まとめ>>
上述したように、本開示の実施形態による情報処理システムでは、コンテンツのパーツに対するユーザ評価を分析し、より充実したコンテンツ推薦を実現し得る嗜好情報を生成することが可能となる。
ユーザ評価は、コンテンツ自体に紐付けられる他、コンテンツの少なくとも一部(パーツ)に紐付けられ、嗜好情報が時系列でタグ付けされる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本技術はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
例えば、上述したクライアント端末1、情報処理装置2、音楽配信装置3、自動作曲装置4、または音楽推薦装置6に内蔵されるCPU、ROM、およびRAM等のハードウェアに、クライアント端末1、情報処理装置2、音楽配信装置3、自動作曲装置4、または音楽推薦装置6の機能を発揮させるためのコンピュータプログラムも作成可能である。また、当該コンピュータプログラムを記憶させたコンピュータ読み取り可能な記憶媒体も提供される。
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
なお、本技術は以下のような構成も取ることができる。
(1)
メディアコンテンツの視聴に関して取得されたユーザのセンサデータに基づいて、前記メディアコンテンツの時系列で区切られるパーツに対するユーザ評価を生成し、生成したユーザ評価を少なくとも含むメディア嗜好情報を記憶部に記憶するよう制御する制御部を備える、情報処理装置。
(2)
前記制御部は、前記メディア嗜好情報として、前記パーツに対するユーザ評価に前記センサデータから得られたユーザ状況を紐付ける、前記(1)に記載の情報処理装置。
(3)
前記メディアコンテンツは音楽であって、
前記メディアコンテンツの時系列で区切られるパーツは、メロディ、リズム、またはハーモニーの少なくともいずれかによる音楽パーツである、前記(2)に記載の情報処理装置。
(4)
前記制御部は、複数ユーザの前記メディア嗜好情報に基づいて、ユーザの特徴に基づいてグループ分けしたユーザグループ別の嗜好情報を生成する、前記(3)に記載の情報処理装置。
(5)
前記メディア嗜好情報は、ユーザへの音楽推薦に用いられる、前記(3)または(4)に記載の情報処理装置。
(6)
前記制御部は、前記メディア嗜好情報に基づいて、ユーザ状況に応じた嗜好情報で示される音楽パーツを少なくとも含む音楽を推薦楽曲として選出する、前記(5)に記載の情報処理装置。
(7)
前記メディア嗜好情報は、推薦音楽の自動作曲に用いられる、前記(3)または(4)に記載の情報処理装置。
(8)
前記制御部は、前記メディア嗜好情報に基づいて、ユーザ状況に応じた嗜好情報で示される音楽パーツを少なくとも利用して音楽を生成する、前記(7)に記載の情報処理装置。
(9)
前記メディア嗜好情報は、ユーザへの広告提示に用いられる、前記(3)または(4)に記載の情報処理装置。
(10)
前記メディア嗜好情報は、音楽のジャンル、作曲家、または歌手に対するユーザ評価を含む、前記(3)~(9)のいずれか1項に記載の情報処理装置。
(11)
前記制御部は、メディア嗜好情報を用いてユーザ状況に応じて推薦した楽曲のリストをクライアント端末で提示するよう制御する、前記(5)または(6)に記載の情報処理装置。
(12)
推薦楽曲リストの提示画面では、対応するユーザ状況が楽曲リストと共に明示される、前記(11)に記載の情報処理装置。
(13)
前記制御部は、ユーザ状況をリアルタイムで認識し、対応する推薦楽曲リストに基づいてクライアント端末で楽曲を再生するよう制御する、前記(5)または(6)に記載の情報処理装置。
(14)
プロセッサが、
メディアコンテンツの視聴に関して取得されたユーザのセンサデータに基づいて、前記メディアコンテンツの時系列で区切られるパーツに対するユーザ評価を生成し、生成したユーザ評価を少なくとも含むメディア嗜好情報を記憶部に記憶するよう制御することを含む、情報処理方法。
(15)
コンピュータを、
メディアコンテンツの視聴に関して取得されたユーザのセンサデータに基づいて、前記メディアコンテンツの時系列で区切られるパーツに対するユーザ評価を生成し、生成したユーザ評価を少なくとも含むメディア嗜好情報を記憶部に記憶するよう制御する制御部として機能させるための、プログラム。
1 クライアント端末
2 情報処理装置
3 音楽配信装置
4 自動作曲装置
5 各種音楽データDB
6 音楽推薦装置
7 レコード会社サーバ
20 制御部
201 行動解析部
202 音楽パーツ解析部
203 音楽嗜好分析部
21 通信部
22 記憶部
221 ユーザ行動情報DB
222 音楽嗜好情報DB

Claims (13)

  1. メディアコンテンツの視聴に関して取得されたユーザのセンサデータに基づいて、前記メディアコンテンツの時系列で区切られるパーツに対するユーザ評価を生成し、生成したユーザ評価を少なくとも含むメディア嗜好情報を記憶部に記憶するよう制御する制御部を備え
    前記制御部は、前記メディア嗜好情報として、前記パーツに対するユーザ評価に前記センサデータから得られたユーザ状況を紐付け、
    当該ユーザ状況は、前記メディアコンテンツ視聴時の前記ユーザの位置情報を含み、
    前記制御部は、前記ユーザの位置情報に基づいて生成された前記メディア嗜好情報を用いて、前記ユーザと関連する位置と推薦する楽曲とを関連付けた地図表示をクライアント端末で提示するよう制御する、情報処理装置。
  2. 前記メディアコンテンツは音楽であって、
    前記メディアコンテンツの時系列で区切られるパーツは、メロディ、リズム、またはハーモニーの少なくともいずれかによる音楽パーツである、請求項に記載の情報処理装置。
  3. 前記制御部は、複数ユーザの前記メディア嗜好情報に基づいて、ユーザの特徴に基づいてグループ分けしたユーザグループ別の嗜好情報を生成する、請求項に記載の情報処理装置。
  4. 前記制御部は、前記メディア嗜好情報に基づいて、ユーザ状況に応じた嗜好情報で示される音楽パーツを少なくとも含む音楽を推薦楽曲として選出する、請求項に記載の情報処理装置。
  5. 前記メディア嗜好情報は、推薦音楽の自動作曲に用いられる、請求項に記載の情報処理装置。
  6. 前記制御部は、前記メディア嗜好情報に基づいて、ユーザ状況に応じた嗜好情報で示される音楽パーツを少なくとも利用して音楽を生成する、請求項に記載の情報処理装置。
  7. 前記メディア嗜好情報は、ユーザへの広告提示に用いられる、請求項に記載の情報処理装置。
  8. 前記メディア嗜好情報は、音楽のジャンル、作曲家、または歌手に対するユーザ評価を含む、請求項に記載の情報処理装置。
  9. 前記制御部は、メディア嗜好情報を用いてユーザ状況に応じて推薦した楽曲のリストを前記クライアント端末で提示するよう制御する、請求項に記載の情報処理装置。
  10. 推薦楽曲リストの提示画面では、対応するユーザ状況が楽曲リストと共に明示される、請求項に記載の情報処理装置。
  11. 前記制御部は、ユーザ状況をリアルタイムで認識し、対応する推薦楽曲リストに基づいてクライアント端末で楽曲を再生するよう制御する、請求項に記載の情報処理装置。
  12. プロセッサが、
    メディアコンテンツの視聴に関して取得されたユーザのセンサデータに基づいて、前記メディアコンテンツの時系列で区切られるパーツに対するユーザ評価を生成し、生成したユーザ評価を少なくとも含むメディア嗜好情報を記憶部に記憶するよう制御することを含み、
    前記制御することは、前記メディア嗜好情報として、前記パーツに対するユーザ評価に前記センサデータから得られたユーザ状況を紐付け、
    当該ユーザ状況は、前記メディアコンテンツ視聴時の前記ユーザの位置情報を含み、
    前記制御することは、前記ユーザの位置情報に基づいて生成された前記メディア嗜好情報を用いて、前記ユーザと関連する位置と推薦する楽曲とを関連付けた地図表示をクライアント端末で提示するよう制御することを含む、情報処理方法。
  13. コンピュータを、
    メディアコンテンツの視聴に関して取得されたユーザのセンサデータに基づいて、前記メディアコンテンツの時系列で区切られるパーツに対するユーザ評価を生成し、生成したユーザ評価を少なくとも含むメディア嗜好情報を記憶部に記憶するよう制御する制御部として機能させるためのプログラムであって、
    前記制御部は、前記メディア嗜好情報として、前記パーツに対するユーザ評価に前記センサデータから得られたユーザ状況を紐付け、
    当該ユーザ状況は、前記メディアコンテンツ視聴時の前記ユーザの位置情報を含み、
    前記制御部は、前記ユーザの位置情報に基づいて生成された前記メディア嗜好情報を用いて、前記ユーザと関連する位置と推薦する楽曲とを関連付けた地図表示をクライアント端末で提示するよう制御する、プログラム。
JP2019528946A 2017-07-14 2018-04-27 情報処理装置、情報処理方法、およびプログラム Active JP7136099B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017138489 2017-07-14
JP2017138489 2017-07-14
PCT/JP2018/017187 WO2019012784A1 (ja) 2017-07-14 2018-04-27 情報処理装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
JPWO2019012784A1 JPWO2019012784A1 (ja) 2020-05-07
JP7136099B2 true JP7136099B2 (ja) 2022-09-13

Family

ID=65002146

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019528946A Active JP7136099B2 (ja) 2017-07-14 2018-04-27 情報処理装置、情報処理方法、およびプログラム

Country Status (5)

Country Link
US (1) US20200204874A1 (ja)
EP (1) EP3654194A4 (ja)
JP (1) JP7136099B2 (ja)
CN (1) CN110870322B (ja)
WO (1) WO2019012784A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021090817A1 (ja) * 2019-11-07 2021-05-14 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
CN113946744A (zh) * 2020-07-16 2022-01-18 北京达佳互联信息技术有限公司 数据处理方法、装置、服务器及存储介质
KR20230080025A (ko) * 2021-11-29 2023-06-07 한국기술교육대학교 산학협력단 음악 청취 반응 자동 감지 시스템 및 방법, 음악 청취 반응 자동 감지 방법을 수행하는 모바일 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007133947A (ja) 2005-11-09 2007-05-31 Sony Computer Entertainment Inc データ再生装置、データ再生方法及びプログラム
JP2007241924A (ja) 2006-03-13 2007-09-20 Sharp Corp 携帯端末
US20150271571A1 (en) 2014-03-18 2015-09-24 Vixs Systems, Inc. Audio/video system with interest-based recommendations and methods for use therewith

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6987221B2 (en) * 2002-05-30 2006-01-17 Microsoft Corporation Auto playlist generation with multiple seed songs
EP1666967B1 (en) * 2004-12-03 2013-05-08 Magix AG System and method of creating an emotional controlled soundtrack
JP2006171133A (ja) * 2004-12-14 2006-06-29 Sony Corp 楽曲データ再構成装置、楽曲データ再構成方法、音楽コンテンツ再生装置および音楽コンテンツ再生方法
KR20090001745A (ko) * 2007-05-16 2009-01-09 (주) 마젠타시스템 인터넷을 이용한 음악 정보 제공 시스템 및 방법
US20130204813A1 (en) * 2012-01-20 2013-08-08 Fluential, Llc Self-learning, context aware virtual assistants, systems and methods
JP5888382B2 (ja) 2014-09-18 2016-03-22 ソニー株式会社 ユーザへのコンテンツ推薦方法、ユーザへのコンテンツ推薦システム及びコンピュータ読取可能な記録媒体
US9861151B2 (en) * 2014-12-05 2018-01-09 SaPHIBeat Technologies, Inc. Activity monitoring systems and methods for accident detection and response
US10250650B2 (en) * 2015-01-05 2019-04-02 Harman International Industries, Incorporated Discovery playlist creation
CN108351875B (zh) * 2015-08-21 2022-04-19 德穆可言有限公司 音乐检索***、音乐检索方法、服务器装置和程序
US9721551B2 (en) * 2015-09-29 2017-08-01 Amper Music, Inc. Machines, systems, processes for automated music composition and generation employing linguistic and/or graphical icon based musical experience descriptions
CN106302678A (zh) * 2016-08-08 2017-01-04 北京谱思科技有限公司 一种音乐推荐方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007133947A (ja) 2005-11-09 2007-05-31 Sony Computer Entertainment Inc データ再生装置、データ再生方法及びプログラム
JP2007241924A (ja) 2006-03-13 2007-09-20 Sharp Corp 携帯端末
US20150271571A1 (en) 2014-03-18 2015-09-24 Vixs Systems, Inc. Audio/video system with interest-based recommendations and methods for use therewith

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
平井 重行 ほか,個人所有楽曲や聴取場所を利用するWeb2.0アプリケーションの試み,情報処理学会研究報告,日本,社団法人情報処理学会,2007年05月10日,第2007巻,No.37,p.109-116
杉本 知仁 Tomohito Sugimoto 他,脳波解析に基づく曲中の感情変化を予測する楽曲推薦システム Music Recommendation System that Predicts Affective Changes Based on Brain Wave Analysis,2009年度人工知能学会全国大会(第23回)論文集 [CD-ROM] Proceedings of the 23rd Annual Conference of JSAI, 2009,日本,社団法人人工知能学会,2009年06月17日,p.1-4
杉本 知仁 Toshihito Sugimoto 他,脳波の解析に基づく個人感性獲得による自動作曲 Automatic composition by acquisition of Kansei based on analysis of brain waves,2007年度人工知能学会全国大会(第21回)論文集 [CD-ROM] Proceedings of the 21st Annual Conference of JSAI, 2007,日本,社団法人人工知能学会,2007年06月18日,p.1-4

Also Published As

Publication number Publication date
WO2019012784A1 (ja) 2019-01-17
EP3654194A1 (en) 2020-05-20
CN110870322B (zh) 2023-04-04
US20200204874A1 (en) 2020-06-25
JPWO2019012784A1 (ja) 2020-05-07
CN110870322A (zh) 2020-03-06
EP3654194A4 (en) 2020-05-20

Similar Documents

Publication Publication Date Title
US20230414159A1 (en) System and method for associating music with brain-state data
US9894415B2 (en) System and method for media experience data
CN106464758B (zh) 利用用户信号来发起通信
CN110996796B (zh) 信息处理设备、方法和程序
US10346480B2 (en) Systems, apparatus, and methods for social graph based recommendation
JP2019220194A (ja) 情報処理装置、情報処理方法及びプログラム
US20180124459A1 (en) Methods and systems for generating media experience data
US20110295843A1 (en) Dynamic generation of contextually aware playlists
US20180115802A1 (en) Methods and systems for generating media viewing behavioral data
US20180124458A1 (en) Methods and systems for generating media viewing experiential data
US11483618B2 (en) Methods and systems for improving user experience
KR20180137490A (ko) 기억과 의사 결정력 향상을 위한 개인 감정-기반의 컴퓨터 판독 가능한 인지 메모리 및 인지 통찰
JP2015058363A (ja) 生体計測パラメータに基づいたオーディオ提示デバイス
US11314475B2 (en) Customizing content delivery through cognitive analysis
JP7136099B2 (ja) 情報処理装置、情報処理方法、およびプログラム
KR102212638B1 (ko) 음악 추천 시스템 및 방법
US20200275875A1 (en) Method for deriving and storing emotional conditions of humans
WO2016117382A1 (ja) 情報処理装置、情報処理方法、及び、プログラム
US20230336694A1 (en) Tagging Characteristics of an Interpersonal Encounter Based on Vocal Features
US20220246135A1 (en) Information processing system, information processing method, and recording medium
US20180121624A1 (en) Methods and apparatus for personalising content in a health management system
JP7294506B2 (ja) 音声メッセージシステム、サーバ装置、情報処理方法、および、プログラム
US20210149952A1 (en) Information processing apparatus, information processing method, and program
US20210110846A1 (en) Information processing apparatus, information processing method, and program
Irrgang et al. From acceleration to rhythmicity: Smartphone-assessed movement predicts properties of music

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210419

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220419

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220615

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220802

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220815

R151 Written notification of patent or utility model registration

Ref document number: 7136099

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151