JP2023133885A - プログラム、情報処理装置及び方法 - Google Patents
プログラム、情報処理装置及び方法 Download PDFInfo
- Publication number
- JP2023133885A JP2023133885A JP2022039127A JP2022039127A JP2023133885A JP 2023133885 A JP2023133885 A JP 2023133885A JP 2022039127 A JP2022039127 A JP 2022039127A JP 2022039127 A JP2022039127 A JP 2022039127A JP 2023133885 A JP2023133885 A JP 2023133885A
- Authority
- JP
- Japan
- Prior art keywords
- hand
- image
- person
- screen
- icon
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 21
- 230000010365 information processing Effects 0.000 title claims description 5
- 230000033001 locomotion Effects 0.000 claims abstract description 67
- 238000004458 analytical method Methods 0.000 claims abstract description 10
- 230000006870 function Effects 0.000 claims description 36
- 230000009471 action Effects 0.000 claims description 10
- 238000012545 processing Methods 0.000 description 47
- 238000004891 communication Methods 0.000 description 33
- 238000010586 diagram Methods 0.000 description 16
- 230000008569 process Effects 0.000 description 11
- 230000005540 biological transmission Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 238000005401 electroluminescence Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Landscapes
- User Interface Of Digital Computer (AREA)
- Processing Or Creating Images (AREA)
- Image Analysis (AREA)
Abstract
Description
以下、本開示に係るアバターサービス提供システムについて説明する。このアバターサービス提供システムは、スマートフォン等の携帯端末が備えるカメラを利用して人物を撮影し、仮想空間において撮影された人物に関連付けられたキャラクタであるアバターを表示し、仮想空間上で各種サービスを提供するするためのシステムである。仮想空間上で提供される各種サービスとは、例えば、アバターをユーザの動きにより操作して行うゲームのようなエンターテインメント、複数のアバターをそれぞれのユーザの動きにより表示させて行うオンラインフィットネスサービス、複数のアバターによるコミュニケーションサービス等が挙げられる。本開示に係るアバターサービス提供システムは、このようなユーザを投影したアバターを介して行う各種サービスを、例えばWebサービスとして提供するシステムであり、クラウドサーバ等によりWebサービスとして、いわゆるSaaS(Software as a Service)によって提供されるシステムである。または、アバターサービス提供システムは、このようなユーザを投影したアバターを介して行う各種サービスを、例えばスマートフォン等の携帯端末によって(Webサーバを介してもよく、介さなくてもよい)提供されるシステムである。
以下、アバターサービス提供システム1について説明する。以下の説明では、例えば、端末装置10がサーバ20へアクセスすることにより、サーバ20が、端末装置10で画面を生成するための情報を応答する。端末装置10は、サーバ20から受信した情報に基づいて画面を生成し表示する。
図2は、アバターサービス提供システム1の全体の構成を示す構成図である。図2に示すように、アバターサービス提供システム1は、複数の端末装置(図2では、端末装置10A及び端末装置10Bを示している。以下、総称して「端末装置10」ということもある)と、サーバ20とを含む。端末装置10とサーバ20とは、ネットワーク80を介して相互に通信可能に接続されている。ネットワーク80は、有線または無線ネットワークにより構成される。また、端末装置10は、図1に示すように表示画面30と通信可能に接続されるが、図2では図示を省略する。
図3は、実施の形態1のアバターサービス提供システム1を構成する端末装置10の機能的な構成を示すブロック図である。図3に示すように、端末装置10は、複数のアンテナ(アンテナ111、アンテナ112)と、各アンテナに対応する無線通信部(第1無線通信部121、第2無線通信部122)と、操作受付部130(タッチ・センシティブ・デバイス131及びディスプレイ132を含む)と、音声処理部140と、マイク141と、スピーカ142と、位置情報センサ150と、カメラ160と、記憶部170と、制御部180とを含む。端末装置10は、図3では特に図示していない機能及び構成(例えば、電力を保持するためのバッテリー、バッテリーから各回路への電力の供給を制御する電力供給回路等)も有している。図3に示すように、端末装置10に含まれる各ブロックは、バス等により電気的に接続される。
図4は、実施の形態1のアバターサービス提供システム1を構成するサーバ20の機能的な構成を示すブロック図である。図4に示すように、サーバ20は、通信部201と、記憶部202と、制御部203としての機能を発揮する。
以下、図5ないし図7を参照しながら、第1の実施の形態におけるアバターサービス提供システム1によるユーザ認証処理、手画像移動処理、及びアイコン制御処理について説明する。
以下、図8ないし図11を参照しながら、アバターサービス提供システム1における手画像による操作の画面例について説明する。
以上のように、本実施形態によると、手画像を表示させてユーザの手の動作に合わせて手画像を動かすように制御する。手画像の動作により、手画像が各種サービスの提供を開始させるためのアイコンを選択し、実行させることが可能になるように構成している。そのため、ユーザは端末装置の位置まで戻って操作する必要がなくなり、煩わしい操作を不要にしている。これにより、アバターサービス提供システムによる各種サービスの提供がスムーズに行われることを可能にしている。
以上の各実施形態で説明した事項を、以下に付記する。
10 :端末装置
10A :端末装置
10B :端末装置
13 :入力装置
14 :出力装置
15 :メモリ
16 :記憶部
19 :プロセッサ
20 :サーバ
25 :メモリ
26 :ストレージ
29 :プロセッサ
30 :表示画面
31L :手画像
31R :手画像
32 :アイコン
80 :ネットワーク
81 :無線基地局
82 :無線LANルータ
111 :アンテナ
112 :アンテナ
121 :第1無線通信部
122 :第2無線通信部
130 :操作受付部
131 :デバイス
132 :ディスプレイ
140 :音声処理部
141 :マイク
142 :スピーカ
150 :位置情報センサ
160 :カメラ
170 :記憶部
171 :ユーザ情報
180 :制御部
181 :入力操作受付部
182 :送受信部
183 :通知制御部
184 :データ処理部
201 :通信部
202 :記憶部
203 :制御部
2021 :ユーザデータベース
2031 :受信制御モジュール
2032 :送信制御モジュール
2033 :ユーザ認証モジュール
Claims (7)
- プロセッサと、メモリとを備えるコンピュータに実行させ、画面上に表示させる画像を生成するためのプログラムであって、
前記プログラムは、前記プロセッサに、
動いている人物をカメラで撮影した撮影画像を取得するステップと、
取得した前記撮影画像を解析し、解析結果に基づき前記人物の骨格情報を特定するステップと、
特定した前記骨格情報から前記人物の手の骨格情報を抽出するステップと、
前記画面上に、手を模した手画像を表示させるステップと、
抽出した前記人物の手の骨格情報に基づき、前記人物の手の動作に合わせて前記手画像を動かすように制御するステップと、
前記手画像の所定の動作を検出して当該所定の動作に関連付けられた機能を実行させるステップと、を実行させる、プログラム。 - 前記プログラムは、さらに、
前記画面上に、所定のアイコンを表示させるステップを実行させ、
前記機能を実行させるステップにおいて、前記手画像の前記アイコンに対する所定の動作を検出すると、前記アイコンを選択状態にし、または前記アイコンに関連付けられた機能を実行させる、請求項1に記載のプログラム。 - 前記手画像を表示させるステップにおいて、片手または両手を模した前記手画像を表示させ、
前記機能を実行させるステップにおいて、片手の前記手画像の所定の動作と、両手の前記手画像の所定の動作とで異なる前記機能を実行させる、請求項2に記載のプログラム。 - 片手の前記手画像が前記アイコンに接触する動作を検出すると、前記アイコンを選択状態にし、両手の前記手画像が前記アイコンに接触する動作を検出すると、前記アイコンに関連付けられた機能を実行させる、請求項3に記載のプログラム。
- 前記機能を実行させるステップにおいて、前記手画像が上下左右方向に移動する動作を検出すると、前記画面上に表示されている前記画像をスクロールさせる、請求項1から請求項4のいずれか1項に記載のプログラム。
- 制御部と、記憶部とを備え、画面上に表示させる画像を生成する情報処理装置であって、
前記制御部は、
動いている人物をカメラで撮影した撮影画像を取得するステップと、
取得した前記撮影画像を解析し、解析結果に基づき前記人物の骨格情報を特定するステップと、
特定した前記骨格情報から前記人物の手の骨格情報を抽出するステップと、
前記画面上に、手を模した手画像を表示させるステップと、
抽出した前記人物の手の骨格情報に基づき、前記人物の手の動作に合わせて前記手画像を動かすように制御するステップと、
前記手画像の所定の動作を検出して当該所定の動作に関連付けられた機能を実行させるステップと、を実行する、情報処理装置。 - プロセッサと、メモリとを備えるコンピュータに実行され、画面上に表示させる画像を生成するための方法であって、
前記方法は、前記プロセッサが、
動いている人物をカメラで撮影した撮影画像を取得するステップと、
取得した前記撮影画像を解析し、解析結果に基づき前記人物の骨格情報を特定するステップと、
特定した前記骨格情報から前記人物の手の骨格情報を抽出するステップと、
前記画面上に、手を模した手画像を表示させるステップと、
抽出した前記人物の手の骨格情報に基づき、前記人物の手の動作に合わせて前記手画像を動かすように制御するステップと、
前記手画像の所定の動作を検出して当該所定の動作に関連付けられた機能を実行させるステップと、を実行する、方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022039127A JP7182324B1 (ja) | 2022-03-14 | 2022-03-14 | プログラム、情報処理装置及び方法 |
JP2022181625A JP2023134340A (ja) | 2022-03-14 | 2022-11-14 | プログラム、情報処理装置及び方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022039127A JP7182324B1 (ja) | 2022-03-14 | 2022-03-14 | プログラム、情報処理装置及び方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022181625A Division JP2023134340A (ja) | 2022-03-14 | 2022-11-14 | プログラム、情報処理装置及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP7182324B1 JP7182324B1 (ja) | 2022-12-02 |
JP2023133885A true JP2023133885A (ja) | 2023-09-27 |
Family
ID=84283981
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022039127A Active JP7182324B1 (ja) | 2022-03-14 | 2022-03-14 | プログラム、情報処理装置及び方法 |
JP2022181625A Pending JP2023134340A (ja) | 2022-03-14 | 2022-11-14 | プログラム、情報処理装置及び方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022181625A Pending JP2023134340A (ja) | 2022-03-14 | 2022-11-14 | プログラム、情報処理装置及び方法 |
Country Status (1)
Country | Link |
---|---|
JP (2) | JP7182324B1 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011003136A (ja) * | 2009-06-22 | 2011-01-06 | Sony Corp | 操作制御装置および操作制御方法 |
JP2013257830A (ja) * | 2012-06-14 | 2013-12-26 | Sharp Corp | 情報処理装置 |
JP2016503915A (ja) * | 2012-12-14 | 2016-02-08 | マイクロソフト テクノロジー ライセンシング,エルエルシー | ナチュラルユーザーインプットの照準合わせおよび押下 |
WO2016103769A1 (ja) * | 2014-12-26 | 2016-06-30 | 株式会社ネクステッジテクノロジー | 操作入力装置、操作入力方法及びプログラム |
JP2017211960A (ja) * | 2016-05-27 | 2017-11-30 | 株式会社エクスビジョン | ユーザインターフェース装置およびユーザインターフェースプログラム |
WO2021225044A1 (ja) * | 2020-05-08 | 2021-11-11 | ソニーセミコンダクタソリューションズ株式会社 | 情報処理装置及びユーザの入力操作に基づく情報処理方法並びに該方法を実行するためのコンピュータプログラム |
-
2022
- 2022-03-14 JP JP2022039127A patent/JP7182324B1/ja active Active
- 2022-11-14 JP JP2022181625A patent/JP2023134340A/ja active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011003136A (ja) * | 2009-06-22 | 2011-01-06 | Sony Corp | 操作制御装置および操作制御方法 |
JP2013257830A (ja) * | 2012-06-14 | 2013-12-26 | Sharp Corp | 情報処理装置 |
JP2016503915A (ja) * | 2012-12-14 | 2016-02-08 | マイクロソフト テクノロジー ライセンシング,エルエルシー | ナチュラルユーザーインプットの照準合わせおよび押下 |
WO2016103769A1 (ja) * | 2014-12-26 | 2016-06-30 | 株式会社ネクステッジテクノロジー | 操作入力装置、操作入力方法及びプログラム |
JP2017211960A (ja) * | 2016-05-27 | 2017-11-30 | 株式会社エクスビジョン | ユーザインターフェース装置およびユーザインターフェースプログラム |
WO2021225044A1 (ja) * | 2020-05-08 | 2021-11-11 | ソニーセミコンダクタソリューションズ株式会社 | 情報処理装置及びユーザの入力操作に基づく情報処理方法並びに該方法を実行するためのコンピュータプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP2023134340A (ja) | 2023-09-27 |
JP7182324B1 (ja) | 2022-12-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111417028B (zh) | 信息处理方法、装置、存储介质及电子设备 | |
US11954200B2 (en) | Control information processing method and apparatus, electronic device, and storage medium | |
CN111177013B (zh) | 日志数据获取方法、装置、计算机设备及存储介质 | |
US10304352B2 (en) | Electronic device and method for sharing image | |
CN109327608B (zh) | 歌曲分享的方法、终端、服务器和*** | |
CN110971925B (zh) | 直播界面的显示方法、装置及*** | |
US20140282204A1 (en) | Key input method and apparatus using random number in virtual keyboard | |
CN107071035B (zh) | 移动终端远程控制方法、装置及相应的移动终端 | |
CN111125601B (zh) | 文件传输方法、装置、终端、服务器及存储介质 | |
KR102004986B1 (ko) | 어플리케이션 실행 방법 및 시스템, 단말과 그 기록 매체 | |
US20220358662A1 (en) | Image generation method and device | |
CN108055461B (zh) | 自拍角度的推荐方法、装置、终端设备及存储介质 | |
CN111128115B (zh) | 信息验证方法、装置、电子设备及存储介质 | |
CN110213205B (zh) | 验证方法、装置及设备 | |
US20190212834A1 (en) | Software gyroscope apparatus | |
JP7182324B1 (ja) | プログラム、情報処理装置及び方法 | |
JP7386583B1 (ja) | プログラム、情報処理装置及び方法 | |
CN114546188B (zh) | 基于互动界面的互动方法、装置、设备及可读存储介质 | |
CN111367492B (zh) | 网页页面展示方法及装置、存储介质 | |
CN114100121A (zh) | 操作控制方法、装置、设备、存储介质及计算机程序产品 | |
JP7372717B1 (ja) | プログラム、情報処理装置及び方法 | |
CN114826799A (zh) | 信息获取方法、装置、终端及存储介质 | |
CN114385939A (zh) | 应用显示方法、应用显示***、装置及设备 | |
US20240078071A1 (en) | Interaction method between display device and terminal device, storage medium and electronic device | |
CN114448928B (zh) | 命令显示方法、装置、计算机设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220404 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20220404 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220614 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220815 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221101 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221114 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7182324 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |