JP6658545B2 - 情報処理装置、情報処理方法、およびプログラム - Google Patents
情報処理装置、情報処理方法、およびプログラム Download PDFInfo
- Publication number
- JP6658545B2 JP6658545B2 JP2016568284A JP2016568284A JP6658545B2 JP 6658545 B2 JP6658545 B2 JP 6658545B2 JP 2016568284 A JP2016568284 A JP 2016568284A JP 2016568284 A JP2016568284 A JP 2016568284A JP 6658545 B2 JP6658545 B2 JP 6658545B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- action
- content
- information processing
- game
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000010365 information processing Effects 0.000 title claims description 91
- 238000003672 processing method Methods 0.000 title claims description 5
- 230000009471 action Effects 0.000 claims description 355
- 238000012545 processing Methods 0.000 claims description 79
- 230000002123 temporal effect Effects 0.000 claims description 61
- 230000007613 environmental effect Effects 0.000 claims description 18
- 238000001514 detection method Methods 0.000 description 136
- 230000001133 acceleration Effects 0.000 description 95
- 238000000034 method Methods 0.000 description 85
- 230000008569 process Effects 0.000 description 72
- 238000000605 extraction Methods 0.000 description 47
- 238000007405 data analysis Methods 0.000 description 42
- 238000004891 communication Methods 0.000 description 22
- 238000004458 analytical method Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 18
- 238000004364 calculation method Methods 0.000 description 17
- 238000006073 displacement reaction Methods 0.000 description 13
- 230000033001 locomotion Effects 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 230000005484 gravity Effects 0.000 description 9
- 230000033764 rhythmic process Effects 0.000 description 9
- 230000008859 change Effects 0.000 description 8
- 230000000694 effects Effects 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 6
- 230000015654 memory Effects 0.000 description 6
- 238000013459 approach Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 5
- 239000000047 product Substances 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 238000010801 machine learning Methods 0.000 description 3
- 238000007781 pre-processing Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000002238 attenuated effect Effects 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000002349 favourable effect Effects 0.000 description 2
- 238000009499 grossing Methods 0.000 description 2
- 230000001151 other effect Effects 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 235000019577 caloric intake Nutrition 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000001351 cycling effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000002650 habitual effect Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 238000012417 linear regression Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000000513 principal component analysis Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F17/00—Coin-freed apparatus for hiring articles; Coin-freed facilities or services
- G07F17/32—Coin-freed apparatus for hiring articles; Coin-freed facilities or services for games, toys, sports, or amusements
- G07F17/3225—Data transfer within a gaming system, e.g. data sent between gaming machines and users
- G07F17/323—Data transfer within a gaming system, e.g. data sent between gaming machines and users wherein the player is informed, e.g. advertisements, odds, instructions
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B69/00—Training appliances or apparatus for special sports
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B69/00—Training appliances or apparatus for special sports
- A63B69/18—Training appliances or apparatus for special sports for skiing
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
- A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
- A63F13/428—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving motion or position input signals, e.g. signals representing the rotation of an input controller or a player's arm motions sensed by accelerometers or gyroscopes
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/50—Controlling the output signals based on the game progress
- A63F13/54—Controlling the output signals based on the game progress involving acoustic signals, e.g. for simulating revolutions per minute [RPM] dependent engine sounds in a driving game or reverberation against a virtual wall
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
- A63F13/67—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor adaptively or by learning from player actions, e.g. skill level adjustment or by storing successful combat sequences for re-use
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/80—Special adaptations for executing a specific game genre or game mode
- A63F13/807—Gliding or sliding on surfaces, e.g. using skis, skates or boards
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F17/00—Coin-freed apparatus for hiring articles; Coin-freed facilities or services
- G07F17/32—Coin-freed apparatus for hiring articles; Coin-freed facilities or services for games, toys, sports, or amusements
- G07F17/3286—Type of games
- G07F17/3288—Betting, e.g. on live events, bookmaking
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
- A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
- A63F13/20—Input arrangements for video game devices
- A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
- A63F13/216—Input arrangements for video game devices characterised by their sensors, purposes or types using geographical information, e.g. location of the game device or player using GPS
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Physical Education & Sports Medicine (AREA)
- Acoustics & Sound (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
Description
1.情報処理装置の機能構成
2.アクション検出処理の例
2−1.ジャンプの検出−1
2−2.ジャンプの検出−2
2−3.ターンの検出
3.付加的な処理の例
3−1.アクションスコアの算出
3−2.クラスタリング処理
3−3.センサ装着状態の推定
4.コンテンツ提供の例
4−1.仮想的なゲームコースの提供
4−2.音楽リズムゲームの提供
4−3.アクションに応じてストーリーが展開するコンテンツの提供
4−4.コレクションコンテンツの提供
5.ハードウェア構成
6.補足
図1は、本開示の一実施形態に係る情報処理装置の概略的な機能構成を示すブロック図である。図1を参照すると、情報処理装置100は、送信部101と、受信部102と、センサデバイス制御部103と、センサデータ解析部104と、解析結果処理部107と、検出区間情報保持部110と、付加的情報保持部111と、サービス制御部112とを含む。
以下では、本開示の一実施形態において実行されるアクション検出処理の例について説明する。これらの例では、ユーザがスノーボードをしている場合に発生するジャンプおよびターンが検出される。例えば、スノーボードの場合、加速度センサおよび角速度センサなどを含むセンサデバイスは、ウェアに埋め込まれたり、ウェアラブル端末装置やモバイル端末装置に組み込まれたりすることによって、ユーザに直接的に装着されてもよい。あるいは、センサデバイスは、スノーボードの用具、例えばボードに装着されてもよい。
図2は、本開示の一実施形態において、ユーザのアクションに含まれるジャンプを検出するための処理の第1の例を示すフローチャートである。図示された処理は、例えば上記の情報処理装置100に含まれるセンサデータ解析部104において実行される。
図6は、本開示の一実施形態において、ユーザのアクションに含まれるジャンプを検出するための処理の第2の例を示すフローチャートである。図示された処理は、上記の第1の例と同様に、例えば情報処理装置100に含まれるセンサデータ解析部104において実行される。
図10は、本開示の一実施形態において、ユーザのアクションに含まれるターン区間を検出するための処理の例を示すフローチャートである。図示された処理は、例えば上記の情報処理装置100に含まれるセンサデータ解析部104において実行される。以下の処理では、センサデータ解析部104が、ユーザのアクションに含まれる回転を検出し(S210)、さらにその回転に含まれる非ターン性の回転を検出し(S230)、回転から非ターン性の回転を除いたものの中からターンを検出する(S250)。
ここで、非ターン性の回転は、例えば、センサがユーザの頭部、またはユーザの頭部に装着される器具に装着されるセンサを含む場合に、ユーザの首振りによって発生する回転を含む。非ターン性の回転は、他にも、ユーザの体動によって発生する回転、より具体的には、センサがユーザの腕部、またはユーザの腕部に装着される器具に装着されるセンサを含む場合に、ユーザの腕振りや腕回しによって発生する回転などを含みうる。
本実施形態では、センサデータ解析部104が、このような非ターン性の回転を除いた上でターン区間を検出することで、より精度の高いターン区間の検出が可能になる。そのような意味で、非ターン性の回転は、検出対象であるターンに対するノイズであるともいえ、本実施形態において、センサデータ解析部104は、ユーザのアクションに含まれる回転を検出し、さらにその回転に含まれるノイズを検出し、回転からノイズを除いたものの中からターンを検出するともいえる。
以上、本開示の一実施形態において実行されるアクション検出処理のいくつかの例について説明した。既に説明した通り、本実施形態で実行されるアクション検出処理はスノーボードで発生するジャンプやターンには限られず、例えばスノーボード以外のスポーツ、またはスポーツ以外のシーンで発生するジャンプやターンについてアクション検出処理が実行されてもよい。また、本実施形態で実行されるアクション検出処理では、ジャンプやターン以外のアクションが検出されてもよい。一例として、アクション検出部106は、スノーボードなどで発生する転倒を検出してもよい。この場合、特徴量抽出部105が上述したジャンプやターンの検出と同様にして加速度のノルムを算出し、アクション検出部106が、加速度のノルムが閾値(例えば、通常の滑降では発生しない程度の大きな値でありうる)を上回った場合に、転倒の発生を検出してもよい。
(3−1.アクションスコアの算出)
例えば、解析結果処理部107に含まれるスコアリング処理部109は、上記で図2〜図13を参照して説明したような処理によって検出されるジャンプ区間および/またはターン区間を含むアクション区間について、発生したアクションを評価するスコア(アクションスコア)を算出する。アクションスコアは、例えばアクション区間におけるセンサデータから、アクションの良し悪しや特徴を表す物理量(特徴量)を抽出し、それらを重みづけ加算することによって算出されうる。サービス制御部112は、このようにして算出されたスコアに基づいて、アクション(例えばジャンプまたはターン)に関する情報を生成する。
また、例えば、解析結果処理部107に含まれるクラスタリング処理部108は、上記で図2〜図13を参照して説明したような処理によって検出されるジャンプ区間および/またはターン区間を含むアクション区間について、スコアリングのために抽出した特徴量などを利用してk−means法などのクラスタリングアルゴリズムを適用し、検出されたアクションをクラスタに分類する。ジャンプ区間やターン区間の場合、例えば、区間の持続時間の長短や、回転の大小によってアクションがクラスタに分類されてもよい。クラスタリングの結果は、例えば、サービスとしてダイジェスト動画を提供するような場合に、様々な種類のジャンプやターンなどのアクションが動画に含まれるようにアクション区間を抽出するために利用される。また、良かったアクションとそうでなかったアクションとを別々のクラスタに分類することによって、ユーザ自身がアクションを振り返ったり、アクションの改善のためのコーチングに役立てたりしてもよい。
図14は、本開示の一実施形態において、センサ装着状態を推定するための処理の例を示すブロック図である。より具体的には、図示された構成によって、センサデータを提供するセンサがユーザの身体に直接的に装着されているか、ユーザによって使用される器具に装着されているかが判定される。図示された処理は、例えば上記の情報処理装置100に含まれるセンサデータ解析部104において実行される。なお、図示された例では、フィルタの遮断周波数(Fc)やタイムフレームの長さが具体的に説明されているが、これらの数値は一例であり、実際のセンサの特性などに応じて適宜変更されうる。
ここで、再び図1を参照して、本実施形態に係る情報処理装置のコンテンツ提供に関する構成について説明する。本実施形態では、情報処理装置100において、検出されたユーザのアクションを示すアクション情報を取得する情報取得部と、アクションの時間的または空間的なシーケンスに従って展開するコンテンツを提供するコンテンツ提供部とが実現される。
図15は、本開示の一実施形態において仮想的なゲームコースを提供するための処理の例を示すフローチャートである。図示された例では、予測されるユーザのアクションの空間的なシーケンスに含まれる位置と、その位置で検出されるべき課題アクションとを指定するゲームコンテンツが提供される。
第1の例では、実空間にあるスノーボードのコースCに沿ってゲームコース1101が設定される。ユーザはコースCに沿って滑降可能であるため、ユーザの実際の移動軌跡はゲームコース1101に近くなる。従って、例えば、移動軌跡がゲームコース1101から所定の範囲を超えてずれた場合には減点、というようなルールを設定してもよい。第1の例において、サービス制御部112は、まずコースCに沿ってゲームコース1101を決定した上で、課題アクションを設定する位置(アイコン1103によって示される)を決定してもよい。あるいは、滑降可能なコースCが複数あるような場合、サービス制御部112は、まず課題アクションを設定する位置を決定した上で、それらの位置を含むコースCに沿ってゲームコース1101を決定してもよい。
また、第1の例では、ユーザがゲームコース1101に沿って連続的に滑降しながら課題アクションが設定された位置を順次通過するため、課題アクションを実行するタイミングを指定したり、複数の課題アクションを実行する間隔(例えば、3つ以上のアクションを等間隔で実行する、など)を指定したりすることも可能である。
一方、第2の例では、実空間においては必ずしもコースではない市街地などでゲームコース1201が設定される。このような場合、サービス制御部112は、先に課題アクションを設定する位置(アイコン1203によって示される)を決定した上で、それらの位置を結ぶリンクとしてゲームコース1201を決定してもよい。この場合、例えば、課題アクションが設定された位置の間を最短距離で結ぶリンクとしてゲームコース1201が設定され、ユーザは次の目的地の方向を示すおおまかなガイドとしてゲームコース1201を参照しながら、実際の道路の形状や交通規制などに従って移動してもよい。あるいは、課題アクションが設定された位置の間を、道路の形状や交通規制などに従って移動可能なルートによって結ぶリンクとしてゲームコース1201が設定されてもよい。この場合、ユーザがゲームコース1201に沿って移動することをルールとして設定してもよい。
また、第2の例では、ゲームコース1201上でのユーザの移動と、指定された位置での課題アクションの実行とが、不連続に発生しうる。例えば、図18に示されたゲーム画面1200bでは、テキスト1205bによって、ジャンプを50回することが指定されている。この場合、ユーザは、アイコン1203によって示される位置(歩道の一角)で移動を中断し、50回ジャンプしてから、次の位置に向かって移動を再開する。このような実行の不連続性を利用して、すごろくのようにダイスやルーレットなどを使って実行する課題アクションを選択したり(例えば、ダイスで6が出た場合、6つ先の位置で指定された課題アクションを実行すればよく、途中で指定されている位置は通過するだけでよいか、通過もしなくてよい、といった例が可能である。あるいは、同じ位置でも、ダイスやルーレットの目によって異なる課題アクションが設定される例も可能である)、ある位置で指定された課題アクションが実行された時点で次の位置と課題アクションとが明らかにされたり、といったような仕掛けがゲームコース1201に加えられてもよい。
図22は、本開示の一実施形態において提供される音楽リズムゲームの例を示す図である。図示された例では、予測されるユーザのアクションの時間的なシーケンスに含まれる時刻と、その時刻で検出されるべき課題アクションとを指定するゲームコンテンツが提供される。
本開示の一実施形態において、サービス制御部112は、ユーザのアクションに応じてストーリーが展開するコンテンツを提供してもよい。以下、そのようなコンテンツのいくつかの例について説明する。
例えば、サービス制御部112は、ユーザの日常生活の中で、ユーザに対して課題アクションを設定し、ユーザが指定された時間的または空間的なシーケンスに沿って課題アクションを実行することによってゲーム内のストーリーを展開させてもよい。例えば、ユーザの友人または恋人として登場するキャラクターとともにジョギングをするというイベントを発生させ、所定の時間以上継続してジョギングのアクションが検出された場合に、キャラクターからの好感度が上がってもよい。また、例えば、ある時刻までにキャラクターを指定された場所まで迎えに行くというイベントを発生させ、ユーザが実際に指定された時刻に指定された場所に到着したことが検出された場合に、キャラクターからの好感度が上がってもよい。
例えば、サービス制御部112は、ユーザのアクション検出結果によって示されるアクションの時間的または空間的なシーケンスに応じたイベントを発生させてもよい。より具体的には、例えば、サービス制御部112は、ユーザの帰宅が遅いことが続いた場合に、翌朝にユーザの好感度が高いキャラクターによるモーニングコールのイベントを発生させてもよい。
例えば、サービス制御部112は、ユーザの過去のアクション検出履歴から、通勤や食事などのアクションの時間的または空間的なシーケンスによって構成される習慣的なパターンを抽出し、新たに検出されたユーザのアクションがパターンと一致しているか、異なっているかに応じて異なるイベントを発生させてもよい。例えば、ユーザがいつもとは異なる時刻の(例えば1本遅い)バスに乗って通勤していることが検出された場合、ゲームにおいていつもとは異なるキャラクターが登場してもよい。
例えば、サービス制御部112は、ユーザの過去のアクション検出履歴によって示されるアクションの時間的または空間的なシーケンスからユーザの属性を推定し、推定された属性に基づいて、ゲームに登場するキャラクターの属性を選択してもよい。ゲーム以外の例では、ユーザの端末装置などにおいてサービスを提供するエージェントプログラムの仮想人格が、ユーザの過去のアクション検出履歴によって示されるアクションの時間的または空間的なシーケンスから推定された属性に従って選択されてもよい。
例えば、サービス制御部112は、ユーザの過去のアクション検出履歴に含まれるアクションと同様の時間的または空間的なシーケンスをもつアクションが検出された場合に、以前に検出されたアクションに関連する情報に基づいて、ゲーム内のキャラクターやエージェントとユーザとの会話の内容を決定してもよい。例えば、スノーボードの滑降で発生するジャンプやターンなどのアクションが1年ぶりに検出された場合、キャラクターやエージェントが、1年前のスノーボードのときに検出された他のアクション、例えば、自動車での移動に時間がかかったことや、滑降で転倒が多かったことなどを話題にしてもよい。
例えば、サービス制御部112は、アクション検出結果に含まれる時間的または空間的なシーケンスに関連する時刻および場所を、ゲーム内の表現に反映させてもよい。例えば、アクション検出結果からユーザが電車に乗っていることが推定される場合には、ゲーム内の舞台設定が電車の中に設定されてもよい。また、ユーザが乗っている路線が特定される場合には、ゲーム内での次の駅のアナウンスなどを、実際のユーザの場所に応じて提供してもよい。このとき、時刻(朝、夕方、夜など)についても、ゲーム内の設定を実際の検出結果に整合させてもよい。また、ユーザがいる場所に応じて、ゲーム内で出現するキャラクターの性格や容姿を変化させてもよい。例えば、特徴的な年代や階層の人々が集まる街にいる場合には、その街に多くいる人々に合わせた性格や容姿のキャラクターが、ゲーム内に登場してもよい。
本開示の一実施形態において、サービス制御部112は、ユーザのアクション検出結果をコレクションとして用いるコンテンツを提供してもよい。ここで、コレクションとして用いる、とは、例えば、有形無形の価値をもったものとして収集や交換の対象にすることを意味する。より具体的には、サービス制御部112は、ユーザのアクション検出結果に基づいて各ユーザにポイントを付与し、ユーザはそのポイントを収集して何らかの有価物(例えば実体的なアイテムでもよいし、ソーシャルメディアで使用可能になるアバターのような仮想的なアイテムでもよい)に交換したり、保有するポイントの多さを競ったりしてもよい。以下、そのようなコンテンツのいくつかの例について説明する。
例えば、サービス制御部112は、検出対象になるアクションの時間的または空間的なシーケンスに応じて異なる付与率で、アクションに応じたポイントをユーザに与えてもよい。例えば、移動のアクションにポイントを与える場合、移動距離が同じであれば、歩いて移動するアクション(移動に対応する時間的なシーケンスが長い)よりも走って移動するアクション(移動に対応する時間的なシーケンスが短い)に高いポイントを与えてもよい。また、例えば、スノーボードの滑降中のジャンプにポイントを与える場合、回転角度が大きいジャンプ(ジャンプに対応する空間的なシーケンスが大きい)により高いポイントを与えてもよい。なお、ポイント付与率は、時刻や場所などのコンテキスト情報との組み合わせによってさらに調整されてもよい。
例えば、サービス制御部112は、アクションの時間的または空間的なシーケンスを含んで定義され、複数のユーザによるチームが協力して達成されるアクションにポイントを与えてもよい。より具体的には、例えば、「5人のチームで1週間に5000kcal以上をジョギングで消費する」(この場合、「1週間に」という部分が時間的なシーケンスにあたる)という課題アクションが与えられ、それぞれのユーザについて検出されたアクションから、5人のジョギングによる消費カロリーが5000kcalを超えたと判定された場合に、5人のユーザそれぞれにポイントが与えられてもよい。
例えば、サービス制御部112は、1日に歩いた歩数や、スノーボードの滑降中のジャンプの高さなど、ユーザ間で競うことができるアクションの検出結果、より具体的にはアクションの時間的または空間的なシーケンスに従って算出されるスコアについて、ユーザによるポイントのベットを可能にしてもよい。より具体的には、例えば、ユーザは、自分以外のユーザのうち、アクションの検出結果について1番になるユーザを予想してポイントをベットする。例えば、1日や、所定の回数の滑降などのアクション検出の終了後、予想が当たったユーザに対して、オッズに応じてポイントが付与されてもよい。このようなベットは、例えば同じ場所でアクションを実行している複数のユーザで実施されてもよいし、ソーシャルメディアなどを介して多くのユーザが参加することが可能であってもよい。
次に、図23を参照して、本開示の実施形態に係る情報処理装置のハードウェア構成について説明する。図23は、本開示の実施形態に係る情報処理装置のハードウェア構成例を示すブロック図である。
本開示の実施形態は、例えば、上記で説明したような情報処理装置、システム、情報処理装置またはシステムで実行される情報処理方法、情報処理装置を機能させるためのプログラム、およびプログラムが記録された一時的でない有形の媒体を含みうる。
(1)検出されたユーザのアクションを示すアクション情報を取得する情報取得部と、
前記アクションの時間的または空間的なシーケンスに従って展開するコンテンツを提供するコンテンツ提供部と
を備える情報処理装置。
(2)前記コンテンツ提供部は、前記空間的なシーケンスに含まれる位置と、該位置で検出されるべき課題アクションとを指定するゲームコンテンツを提供する、前記(1)に記載の情報処理装置。
(3)前記コンテンツ提供部は、前記位置と前記課題アクションとを表示するオブジェクトを含むゲーム画面を、前記アクションが発生する実空間に重畳させて前記ユーザに提示する、前記(2)に記載の情報処理装置。
(4)前記ゲーム画面は、第1のユーザについての前記位置を表示するオブジェクトと、前記第1のユーザとは異なる第2のユーザについての前記位置を表示するオブジェクトと、前記第2のユーザを表示するオブジェクトとを含む、前記(3)に記載の情報処理装置。
(5)前記コンテンツ提供部は、前記空間的なシーケンスを、前記ユーザの環境状態に基づいて予測する、前記(2)〜(4)のいずれか1項に記載の情報処理装置。
(6)前記コンテンツ提供部は、前記空間的なシーケンスの長さを、前記ゲームコンテンツの開始時の前記ユーザの環境状態に基づいて決定する、前記(5)に記載の情報処理装置。
(7)前記コンテンツ提供部は、前記ユーザの周辺を撮影した画像に基づいて前記環境状態を認識する、前記(5)または(6)に記載の情報処理装置。
(8)前記コンテンツ提供部は、前記ユーザの位置情報とマップ情報とに基づいて前記環境状態を認識する、前記(5)〜(7)のいずれか1項に記載の情報処理装置。
(9)前記コンテンツ提供部は、前記時間的なシーケンスに含まれる時刻と、該時刻に検出されるべき課題アクションとを指定するゲームコンテンツを提供する、前記(1)〜(8)のいずれか1項に記載の情報処理装置。
(10)前記コンテンツ提供部は、前記時刻と前記課題アクションとを表示するオブジェクトを含むゲーム画面を、前記アクションが発生する実空間に重畳させて前記ユーザに提示する、前記(9)に記載の情報処理装置。
(11)前記コンテンツ提供部は、前記時間的なシーケンスを、前記ユーザの環境状態に基づいて予測する、前記(9)または(10)に記載の情報処理装置。
(12)前記コンテンツ提供部は、前記時間的なシーケンスの長さを、前記ゲームコンテンツの開始時の前記ユーザの環境状態に基づいて決定する、前記(11)に記載の情報処理装置。
(13)前記コンテンツ提供部は、前記ユーザのスケジュールに基づいて前記環境状態を認識する、前記(11)または(12)に記載の情報処理装置。
(14)前記時間的なシーケンスは、楽曲に対応付けられ、
前記コンテンツ提供部は、前記ゲームコンテンツとともに前記楽曲を前記ユーザに提供する、前記(11)〜(13)のいずれか1項に記載の情報処理装置。
(15)前記コンテンツ提供部は、前記アクションの時間的または空間的なシーケンスに従ってストーリーが展開するコンテンツを提供する、前記(1)〜(14)のいずれか1項に記載の情報処理装置。
(16)前記コンテンツ提供部は、前記アクションの時間的または空間的なシーケンスに従ってキャラクターまたは仮想人格の属性が決定されるコンテンツを提供する、前記(1)〜(15)のいずれか1項に記載の情報処理装置。
(17)前記コンテンツ提供部は、前記アクションの時間的または空間的なシーケンスに従って舞台設定が決定されるコンテンツを提供する、前記(1)〜(16)のいずれか1項に記載の情報処理装置。
(18)前記コンテンツ提供部は、前記アクションの時間的または空間的なシーケンスに従って算出されるスコアに対する他のユーザのベットを可能にするコンテンツを提供する、前記(1)〜(17)のいずれか1項に記載の情報処理装置。
(19)検出されたユーザのアクションを示すアクション情報を取得することと、
プロセッサが、前記アクションの時間的または空間的なシーケンスに従って展開するコンテンツを提供することと
を含む情報処理方法。
(20)検出されたユーザのアクションを示すアクション情報を取得する機能と、
前記アクションの時間的または空間的なシーケンスに従って展開するコンテンツを提供する機能と
をコンピュータに実現させるためのプログラム。
101 送信部
102 受信部
103 センサデバイス制御部
104 センサデータ解析部
105 特徴量抽出部
106 アクション検出部
107 解析結果処理部
108 クラスタリング処理部
109 スコアリング処理部
112 サービス制御部
Claims (17)
- 検出されたユーザのアクションを示すアクション情報を取得する情報取得部と、
前記アクションの時間的または空間的なシーケンスに従って展開するコンテンツを提供するコンテンツ提供部と、
を備え、
前記時間的なシーケンスは、楽曲に対応付けられ、
前記コンテンツ提供部は、
前記楽曲とともに、前記時間的なシーケンスに含まれる時刻と該時刻に検出されるべき課題アクションとを指定するゲームコンテンツを、前記時刻と前記課題アクションとを表示するオブジェクトを含むゲーム画面を前記アクションが発生する実空間に重畳させることにより、前記ユーザに提示し、
前記課題アクションを設定する時刻を、前記楽曲のテンポ又はメロディーに応じて決定し、
前記オブジェクトを、前記楽曲が前記課題アクションに関連付けられた再生時間に達した時に前記ユーザの足元に到達するように流れるように表示する、
情報処理装置。 - 前記コンテンツ提供部は、前記空間的なシーケンスに含まれる位置と、該位置で検出されるべき課題アクションとを指定するゲームコンテンツを提供する、請求項1に記載の情報処理装置。
- 前記コンテンツ提供部は、前記位置と前記課題アクションとを表示するオブジェクトを含むゲーム画面を、前記アクションが発生する実空間に重畳させて前記ユーザに提示する、請求項2に記載の情報処理装置。
- 前記ゲーム画面は、第1のユーザについての前記位置を表示するオブジェクトと、前記第1のユーザとは異なる第2のユーザについての前記位置を表示するオブジェクトと、前記第2のユーザを表示するオブジェクトとを含む、請求項3に記載の情報処理装置。
- 前記コンテンツ提供部は、前記空間的なシーケンスを、前記ユーザの環境状態に基づいて予測する、請求項2〜4のいずれか1項に記載の情報処理装置。
- 前記コンテンツ提供部は、前記空間的なシーケンスの長さを、前記ゲームコンテンツの開始時の前記ユーザの環境状態に基づいて決定する、請求項5に記載の情報処理装置。
- 前記コンテンツ提供部は、前記ユーザの周辺を撮影した画像に基づいて前記環境状態を認識する、請求項5または6に記載の情報処理装置。
- 前記コンテンツ提供部は、前記ユーザの位置情報とマップ情報とに基づいて前記環境状態を認識する、請求項5〜7のいずれか1項に記載の情報処理装置。
- 前記コンテンツ提供部は、前記時間的なシーケンスを、前記ユーザの環境状態に基づいて予測する、請求項1〜8のいずれか1項に記載の情報処理装置。
- 前記コンテンツ提供部は、前記時間的なシーケンスの長さを、前記ゲームコンテンツの開始時の前記ユーザの環境状態に基づいて決定する、請求項9に記載の情報処理装置。
- 前記コンテンツ提供部は、前記ユーザのスケジュールに基づいて前記環境状態を認識する、請求項9または10に記載の情報処理装置。
- 前記コンテンツ提供部は、前記アクションの時間的または空間的なシーケンスに従ってストーリーが展開するコンテンツを提供する、請求項1〜11のいずれか1項に記載の情報処理装置。
- 前記コンテンツ提供部は、前記アクションの時間的または空間的なシーケンスに従ってキャラクターまたは仮想人格の属性が決定されるコンテンツを提供する、請求項1〜12のいずれか1項に記載の情報処理装置。
- 前記コンテンツ提供部は、前記アクションの時間的または空間的なシーケンスに従って舞台設定が決定されるコンテンツを提供する、請求項1〜13のいずれか1項に記載の情報処理装置。
- 前記コンテンツ提供部は、前記アクションの時間的または空間的なシーケンスに従って算出されるスコアに対する他のユーザのベットを可能にするコンテンツを提供する、請求項1〜14のいずれか1項に記載の情報処理装置。
- 検出されたユーザのアクションを示すアクション情報を取得することと、
プロセッサが、前記アクションの時間的または空間的なシーケンスに従って展開するコンテンツを提供することと
を含む情報処理方法であって、
前記時間的なシーケンスは、楽曲に対応付けられ、
前記コンテンツの提供は、
前記楽曲とともに、前記時間的なシーケンスに含まれる時刻と該時刻に検出されるべき課題アクションとを指定するゲームコンテンツを、前記時刻と前記課題アクションとを表示するオブジェクトを含むゲーム画面を前記アクションが発生する実空間に重畳させることにより、前記ユーザに提示し、
前記課題アクションを設定する時刻を、前記楽曲のテンポ又はメロディーに応じて決定し、
前記オブジェクトを、前記楽曲が前記課題アクションに関連付けられた再生時間に達した時に前記ユーザの足元に到達するように流れるように表示する、
ことを含む、
情報処理方法。 - 検出されたユーザのアクションを示すアクション情報を取得する機能と、
前記アクションの時間的または空間的なシーケンスに従って展開するコンテンツを提供する機能と、
をコンピュータに実現させるためのプログラムであって、
前記時間的なシーケンスは、楽曲に対応付けられ、
前記コンテンツを提供する機能は、
前記楽曲とともに、前記時間的なシーケンスに含まれる時刻と該時刻に検出されるべき課題アクションとを指定するゲームコンテンツを、前記時刻と前記課題アクションとを表示するオブジェクトを含むゲーム画面を前記アクションが発生する実空間に重畳させることにより、前記ユーザに提示し、
前記課題アクションを設定する時刻を、前記楽曲のテンポ又はメロディーに応じて決定し、
前記オブジェクトを、前記楽曲が前記課題アクションに関連付けられた再生時間に達した時に前記ユーザの足元に到達するように流れるように表示する、
プログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015000415 | 2015-01-05 | ||
JP2015000415 | 2015-01-05 | ||
PCT/JP2015/079175 WO2016111067A1 (ja) | 2015-01-05 | 2015-10-15 | 情報処理装置、情報処理方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2016111067A1 JPWO2016111067A1 (ja) | 2017-10-12 |
JP6658545B2 true JP6658545B2 (ja) | 2020-03-04 |
Family
ID=56342227
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016568284A Expired - Fee Related JP6658545B2 (ja) | 2015-01-05 | 2015-10-15 | 情報処理装置、情報処理方法、およびプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20170352226A1 (ja) |
EP (1) | EP3243557B1 (ja) |
JP (1) | JP6658545B2 (ja) |
CN (2) | CN205730297U (ja) |
WO (1) | WO2016111067A1 (ja) |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6914049B2 (ja) * | 2017-02-15 | 2021-08-04 | 清水建設株式会社 | 構造物可視化装置及び構造物可視化システム |
JP2018171279A (ja) * | 2017-03-31 | 2018-11-08 | 株式会社愛和ライト | 情報処理装置及び情報処理システム |
JP7424974B2 (ja) * | 2018-06-11 | 2024-01-30 | 本田技研工業株式会社 | 動作評価システム |
JP7424973B2 (ja) * | 2018-06-11 | 2024-01-30 | 本田技研工業株式会社 | 報知システム |
US10555058B2 (en) * | 2018-06-27 | 2020-02-04 | Aktiebolaget Skf | Wireless condition monitoring sensor with near field communication commissioning hardware |
JP2020092910A (ja) * | 2018-12-13 | 2020-06-18 | 株式会社ドリコム | 情報処理システム、情報処理方法および情報処理プログラム |
US11210772B2 (en) | 2019-01-11 | 2021-12-28 | Universal City Studios Llc | Wearable visualization device systems and methods |
US20220044450A1 (en) * | 2019-02-26 | 2022-02-10 | Maxell, Ltd. | Video display device and video display method |
CN110180189B (zh) * | 2019-06-14 | 2022-10-21 | 广州好酷信息科技有限公司 | 一种基于游戏游艺设备的积分排名方法及*** |
JP6990735B2 (ja) | 2020-03-27 | 2022-01-12 | 株式会社バンダイ | プログラム、端末、ゲームシステム及びゲーム管理装置 |
JP7143872B2 (ja) * | 2020-08-14 | 2022-09-29 | カシオ計算機株式会社 | 情報処理装置、ランニング指標導出方法及びプログラム |
JP7185670B2 (ja) * | 2020-09-02 | 2022-12-07 | 株式会社スクウェア・エニックス | ビデオゲーム処理プログラム、及びビデオゲーム処理システム |
CN117232819B (zh) * | 2023-11-16 | 2024-01-26 | 湖南大用环保科技有限公司 | 基于数据分析的阀体综合性能测试*** |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3413128B2 (ja) * | 1999-06-11 | 2003-06-03 | キヤノン株式会社 | 複合現実感提示方法 |
JP2008538295A (ja) * | 2005-01-10 | 2008-10-23 | アイポイント リミテッド | 体力トレーニング用音楽ペースメーカー |
US20060288846A1 (en) * | 2005-06-27 | 2006-12-28 | Logan Beth T | Music-based exercise motivation aid |
JP5234699B2 (ja) * | 2005-06-29 | 2013-07-10 | 株式会社バンダイナムコゲームス | ゲームシステム、楽音生成システム、曲選択システム、プログラム及び情報記憶媒体 |
US20070074619A1 (en) * | 2005-10-04 | 2007-04-05 | Linda Vergo | System and method for tailoring music to an activity based on an activity goal |
US20070254271A1 (en) * | 2006-04-28 | 2007-11-01 | Volodimir Burlik | Method, apparatus and software for play list selection in digital music players |
JP4982279B2 (ja) * | 2007-07-13 | 2012-07-25 | パナソニック株式会社 | 学習支援装置および学習支援方法 |
JP2010240185A (ja) * | 2009-04-07 | 2010-10-28 | Kanazawa Inst Of Technology | 動作学習支援装置 |
US20110183754A1 (en) * | 2010-01-25 | 2011-07-28 | Mansour Ali Saleh Alghamdi | Game system based on real time and location of user |
EP2539759A1 (en) * | 2010-02-28 | 2013-01-02 | Osterhout Group, Inc. | Local advertising content on an interactive head-mounted eyepiece |
JP5603205B2 (ja) * | 2010-11-04 | 2014-10-08 | 新日鉄住金ソリューションズ株式会社 | ゴルフプレイヤー支援システム、ユーザ端末装置、ゴルフプレイヤー支援方法及びプログラム |
US9317660B2 (en) * | 2011-03-31 | 2016-04-19 | Adidas Ag | Group performance monitoring system and method |
JP5406883B2 (ja) * | 2011-05-20 | 2014-02-05 | 株式会社コナミデジタルエンタテインメント | ゲーム装置、ゲーム制御方法、ならびに、プログラム |
US9155964B2 (en) * | 2011-09-14 | 2015-10-13 | Steelseries Aps | Apparatus for adapting virtual gaming with real world information |
US8847988B2 (en) * | 2011-09-30 | 2014-09-30 | Microsoft Corporation | Exercising applications for personal audio/visual system |
DE202013103775U1 (de) * | 2012-08-23 | 2013-09-05 | Jakub Jirus | Konditions- und/oder Fitnessgerät |
JP5885129B2 (ja) * | 2012-09-11 | 2016-03-15 | カシオ計算機株式会社 | 運動支援装置、運動支援方法及び運動支援プログラム |
US8758126B2 (en) * | 2012-11-08 | 2014-06-24 | Audible, Inc. | In-vehicle gaming system for passengers |
JP2014174589A (ja) * | 2013-03-06 | 2014-09-22 | Mega Chips Corp | 拡張現実システム、プログラムおよび拡張現実提供方法 |
CN104008296A (zh) * | 2014-06-08 | 2014-08-27 | 蒋小辉 | 将视频转化为游戏的方法和一种视频类游戏及其实现方法 |
-
2015
- 2015-10-15 EP EP15876940.6A patent/EP3243557B1/en active Active
- 2015-10-15 JP JP2016568284A patent/JP6658545B2/ja not_active Expired - Fee Related
- 2015-10-15 US US15/527,068 patent/US20170352226A1/en not_active Abandoned
- 2015-10-15 WO PCT/JP2015/079175 patent/WO2016111067A1/ja active Application Filing
- 2015-12-29 CN CN201521117699.6U patent/CN205730297U/zh not_active Expired - Fee Related
- 2015-12-29 CN CN201511009188.7A patent/CN105759953B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
EP3243557B1 (en) | 2020-03-04 |
US20170352226A1 (en) | 2017-12-07 |
EP3243557A4 (en) | 2018-05-30 |
CN205730297U (zh) | 2016-11-30 |
CN105759953A (zh) | 2016-07-13 |
CN105759953B (zh) | 2020-04-21 |
WO2016111067A1 (ja) | 2016-07-14 |
JPWO2016111067A1 (ja) | 2017-10-12 |
EP3243557A1 (en) | 2017-11-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6658545B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
CN105749548B (zh) | 信息处理装置、信息处理方法以及程序 | |
US11176731B2 (en) | Field of view (FOV) throttling of virtual reality (VR) content in a head mounted display | |
TWI786701B (zh) | 用於在hmd環境中利用傳至gpu之預測及後期更新的眼睛追蹤進行快速注視點渲染的方法及系統以及非暫時性電腦可讀媒體 | |
JP6683134B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
US11748959B2 (en) | Device for simulating a virtual fitness partner and methods for use therewith | |
US20170216675A1 (en) | Fitness-based game mechanics | |
US10317988B2 (en) | Combination gesture game mechanics using multiple devices | |
WO2020090223A1 (ja) | 情報処理装置、情報処理方法及び記録媒体 | |
US11173375B2 (en) | Information processing apparatus and information processing method | |
US20230381649A1 (en) | Method and system for automatically controlling user interruption during game play of a video game | |
CN117122910A (zh) | 用于将真实世界声音添加到虚拟现实场景的方法和*** | |
CN114995642A (zh) | 基于增强现实的运动训练方法、装置、服务器及终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180827 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180827 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190208 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20190214 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190222 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190515 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190522 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190917 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191108 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200107 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200120 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6658545 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |