JP5989592B2 - 操作違和感軽減装置とその方法とプログラム - Google Patents
操作違和感軽減装置とその方法とプログラム Download PDFInfo
- Publication number
- JP5989592B2 JP5989592B2 JP2013088540A JP2013088540A JP5989592B2 JP 5989592 B2 JP5989592 B2 JP 5989592B2 JP 2013088540 A JP2013088540 A JP 2013088540A JP 2013088540 A JP2013088540 A JP 2013088540A JP 5989592 B2 JP5989592 B2 JP 5989592B2
- Authority
- JP
- Japan
- Prior art keywords
- input
- information
- delay
- video
- actor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
Description
この発明は、行為者の行為に伴ってフィードバック音と行為映像とが提示されるようなアプリケーションを対象とし、フィードバック音及び又は行為映像が提示されるタイミングを調整することにより、行為者の行為に対してフィードバック音及び又は行為映像が遅延することによって行為者に知覚される違和感を軽減する操作違和感軽減装置を実現する。そこで、フィードバック音と行為映像の遅延時間が、音に対する操作感にどのように影響するかを評価した。ここで、音に対する操作感とは、自身がその音の提示を、操作したという感覚、すなわち、その音が自身の行為により生成された音に感じられる度合いである。行為映像については、操作感を評価していない。図1に、その評価結果を示す。
図4に、遅延処理部140の機能構成例を示す。その動作フローを図6に示す。遅延処理部140は、遅延時間判定手段1400と、映像情報バッファ手段1410と、出力手段1430と、を具備する。
図4に、遅延処理部140′の機能構成例を示す。その動作フローを図6に示す。遅延処理部140′は、実施例1の遅延処理部140と処理が異なる。
以下、実施例1と異なる点についてのみ説明する。遅延時間判定手段1400′は、入力情報Itが生成された時刻tを起点とする映像情報の遅延時間ΔTVと、入力情報Itが生成された時刻tを起点とする音響情報の遅延時間ΔTAと、を入力として、制御信号を、映像情報バッファ手段1410と出力手段1430に出力する。
Claims (16)
- 行為者の操作を入力する入力部と、
上記行為者の操作に対応する映像情報を提示する映像情報生成部と、
上記行為者の操作に対応する音響情報を出力する音響情報生成部と、
上記映像情報が上記行為者の操作が入力された時刻を起点とする所定の第一の時間範囲内に出力されるように、映像情報の遅延時間を調整する遅延処理部と、
を具備する操作違和感軽減装置であって、
上記第一の時間範囲内とは、0.41秒の近傍の範囲内であることを特徴とする操作違和感軽減装置。 - 行為者の操作を入力する入力部と、
上記行為者の操作に対応する映像情報を提示する映像情報生成部と、
上記行為者の操作に対応する音響情報を出力する音響情報生成部と、
上記映像情報が上記行為者の操作が入力された時刻を起点とする所定の第一の時間範囲内に出力されるように、映像情報の遅延時間を調整する遅延処理部と、
を具備する操作違和感軽減装置であって、
所定の閾値を0.4秒の近傍としたとき、
上記遅延処理部は、上記音響情報の遅延時間が上記所定の閾値以下の場合には、上記映像情報の遅延時間を調整する処理を行わないことを特徴とする操作違和感軽減装置。 - 行為者の操作を入力として、当該操作に対応した信号である入力情報を生成する入力部と、
上記入力情報を入力として、当該入力情報に対応する映像情報を生成する映像情報生成部と、
上記入力情報を入力として、当該入力情報に対応する音響情報を生成する音響情報生成部と、
上記入力情報と上記映像情報とを入力として、上記入力情報が入力された時刻を起点として所定の第一の時間範囲内に上記映像情報が出力されるように調整された遅延調整後映像情報を出力する遅延処理部と、
を具備する操作違和感軽減装置であって、
上記第一の時間範囲内とは、0.41秒の近傍の範囲内であることを特徴とする操作違和感軽減装置。 - 行為者の操作を入力として、当該操作に対応した信号である入力情報を生成する入力部と、
上記入力情報を入力として、当該入力情報に対応する映像情報を生成する映像情報生成部と、
上記入力情報を入力として、当該入力情報に対応する音響情報を生成する音響情報生成部と、
上記入力情報と上記映像情報と上記音響情報を入力として、上記入力情報が入力された時刻を起点としたときの上記映像情報の遅延時間である映像遅延時間と上記音響情報の遅延時間である音響遅延時間を計測する遅延計測部と、
上記映像情報と上記映像遅延時間とを入力として、上記入力情報が入力された時刻を起点として所定の遅延を示す第一の時間範囲内に出力されるように、上記映像情報を遅らせて出力する遅延処理部と、
を具備する操作違和感軽減装置であって、
上記遅延処理部が、上記音響遅延時間が所定の閾値θ以上の場合、上記映像情報が上記第一の時間範囲内に出力されるように構成されたものであり、
上記所定の閾値θとは、0.4秒であることを特徴とする操作違和感軽減装置。 - 行為者の操作に伴って映像と音の両方が提示される際の、上記提示される音の上記行為者の操作に対する遅延が上記行為者に与える違和感を軽減するために、上記行為者の操作に伴って提示される音である音響情報と、上記行為者の操作に伴って提示される映像である遅延調整後映像情報を出力する操作違和感軽減装置であって、
上記行為者の操作を入力として、当該操作に対応した信号である入力情報を生成する入力部と、
上記入力情報を入力として、上記行為者の操作に伴って提示される映像である映像情報を生成する映像情報生成部と、
上記入力情報を入力として、上記行為者の操作に伴って提示される音である音響情報を生成して出力する音響情報生成部と、
上記入力情報と上記映像情報とを入力として、上記入力情報が入力された時刻を起点として所定の遅延を示す第一の時間範囲内に上記映像情報が出力されるように、上記映像情報の遅延時間を調整した遅延調整後映像情報を出力する遅延処理部と、
を具備する操作違和感軽減装置。 - 行為者の操作に伴って映像と音の両方が提示される際の、上記提示される音の上記行為者の操作に対する遅延が上記行為者に与える違和感を軽減するために、上記行為者の操作に伴って提示される音である音響情報と、上記行為者の操作に伴って提示される映像である遅延調整後映像情報を出力する操作違和感軽減装置であって、
上記行為者の操作を入力として、当該操作に対応した信号である入力情報を生成する入力部と、
上記入力情報を入力として、上記行為者の操作に伴って提示される映像である映像情報を生成する映像情報生成部と、
上記入力情報を入力として、上記行為者の操作に伴って提示される音である音響情報を生成して出力する音響情報生成部と、
上記入力情報と上記映像情報と上記音響情報を入力として、上記入力情報が入力された時刻を起点としたときの上記映像情報の遅延時間である映像遅延時間と上記音響情報の遅延時間である音響遅延時間を計測する遅延計測部と、
上記映像情報と上記映像遅延時間と上記音響遅延時間とを入力として、上記音響遅延時間が所定の閾値θ以上の場合、上記入力情報が入力された時刻を起点として所定の遅延を示す第一の時間範囲内に上記映像情報が出力されるように、上記映像情報の遅延時間を調整した遅延調整後映像情報を出力する遅延処理部と、
を具備する操作違和感軽減装置。 - 請求項5または6に記載した操作違和感軽減装置であって、
上記第一の時間範囲内とは、0.41秒の近傍の範囲内であることを特徴とする操作違和感軽減装置。 - 行為者の操作に伴って映像と音の両方が提示される際の、上記提示される音の上記行為者の操作に対する遅延が上記行為者に与える違和感を軽減するために、上記行為者の操作に伴って提示される音である音響情報と、上記行為者の操作に伴って提示される映像である遅延調整後映像情報を出力する操作違和感軽減装置であって、
上記行為者の操作を入力として、当該操作に対応した信号である入力情報を生成する入力部と、
上記入力情報を入力として、上記行為者の操作に伴って提示される映像である映像情報を生成する映像情報生成部と、
上記入力情報を入力として、上記行為者の操作に伴って提示される音である音響情報を生成して出力する音響情報生成部と、
上記入力情報と上記映像情報とを入力として、上記入力情報が入力された時刻を起点とし、上記行為者が、上記映像情報が自己の操作に対応する映像情報であると認識可能な時間限界まで遅延させて上記映像情報が出力されるように、上記映像情報の遅延時間を調整した遅延調整後映像情報を出力する遅延処理部と、
を具備する操作違和感軽減装置。 - 行為者の操作を入力する入力過程と、
上記行為者の操作に対応する映像情報を提示する映像情報生成過程と、
上記行為者の操作に対応する音響情報を出力する音響情報生成過程と、
上記映像情報が上記行為者の操作が入力された時刻を起点とする所定の第一の時間範囲内に出力されるように、映像情報の遅延時間を調整する遅延処理過程と、
を備える操作違和感軽減方法であって、
上記第一の時間範囲内とは、0.41秒の近傍の範囲内であることを特徴とする操作違和感軽減方法。 - 行為者の操作を入力する入力過程と、
上記行為者の操作に対応する映像情報を提示する映像情報生成過程と、
上記行為者の操作に対応する音響情報を出力する音響情報生成過程と、
上記映像情報が上記行為者の操作が入力された時刻を起点とする所定の第一の時間範囲内に出力されるように、映像情報の遅延時間を調整する遅延処理過程と、
を備える操作違和感軽減方法であって、
所定の閾値を0.4秒の近傍としたとき、
上記遅延処理過程は、上記音響情報の遅延時間が上記所定の閾値以下の場合には、上記映像情報の遅延時間を調整する処理を行わないことを特徴とする操作違和感軽減方法。 - 行為者の操作を入力として、当該操作に対応した信号である入力情報を生成する入力過程と、
上記入力情報を入力として、当該入力情報に対応する映像情報を生成する映像情報生成過程と、
上記入力情報を入力として、当該入力情報に対応する音響情報を生成する音響情報生成過程と、
上記入力情報と上記映像情報とを入力として、上記入力情報が入力された時刻を起点として所定の第一の時間範囲内に上記映像情報が出力されるように調整された遅延調整後映像情報を出力する遅延処理過程と、
を備える操作違和感軽減方法であって、
上記第一の時間範囲内とは、0.41秒の近傍の範囲内であることを特徴とする操作違和感軽減方法。 - 行為者の操作を入力として、当該操作に対応した信号である入力情報を生成する入力過程と、
上記入力情報を入力として、当該入力情報に対応する映像情報を生成する映像情報生成過程と、
上記入力情報を入力として、当該入力情報に対応する音響情報を生成する音響情報生成過程と、
上記入力情報と上記映像情報と上記音響情報を入力として、上記入力情報が入力された時刻を起点としたときの上記映像情報の遅延時間である映像遅延時間と上記音響情報の遅延時間である音響遅延時間を計測する遅延計測過程と、
上記映像情報と上記映像遅延時間とを入力として、上記入力情報が入力された時刻を起点として所定の遅延を示す第一の時間範囲内に出力されるように、上記映像情報を遅らせて出力する遅延処理過程と、
を備える操作違和感軽減方法であって、
上記遅延処理過程が、上記音響遅延時間が所定の閾値θ以上の場合、上記映像情報が上記第一の時間範囲内に出力されるように構成されたものであり、
上記所定の閾値θとは、0.4秒であることを特徴とする操作違和感軽減方法。 - 行為者の操作に伴って映像と音の両方が提示される際の、上記提示される音の上記行為者の操作に対する遅延が上記行為者に与える違和感を軽減するために、上記行為者の操作に伴って提示される音である音響情報と、上記行為者の操作に伴って提示される映像である遅延調整後映像情報を出力する操作違和感軽減方法であって、
上記行為者の操作を入力として、当該操作に対応した信号である入力情報を生成する入力過程と、
上記入力情報を入力として、上記行為者の操作に伴って提示される映像である映像情報を生成する映像情報生成過程と、
上記入力情報を入力として、上記行為者の操作に伴って提示される音である音響情報を生成して出力する音響情報生成過程と、
上記入力情報と上記映像情報とを入力として、上記入力情報が入力された時刻を起点として所定の遅延を示す第一の時間範囲内に上記映像情報が出力されるように、上記映像情報の遅延時間を調整した遅延調整後映像情報を出力する遅延処理過程と、
を備える操作違和感軽減方法。 - 行為者の操作に伴って映像と音の両方が提示される際の、上記提示される音の上記行為者の操作に対する遅延が上記行為者に与える違和感を軽減するために、上記行為者の操作に伴って提示される音である音響情報と、上記行為者の操作に伴って提示される映像である遅延調整後映像情報を出力する操作違和感軽減方法であって、
上記行為者の操作を入力として、当該操作に対応した信号である入力情報を生成する入力過程と、
上記入力情報を入力として、上記行為者の操作に伴って提示される映像である映像情報を生成する映像情報生成過程と、
上記入力情報を入力として、上記行為者の操作に伴って提示される音である音響情報を生成して出力する音響情報生成過程と、
上記入力情報と上記映像情報と上記音響情報を入力として、上記入力情報が入力された時刻を起点としたときの上記映像情報の遅延時間である映像遅延時間と上記音響情報の遅延時間である音響遅延時間を計測する遅延計測過程と、
上記映像情報と上記映像遅延時間と上記音響遅延時間とを入力として、上記音響遅延時間が所定の閾値θ以上の場合、上記入力情報が入力された時刻を起点として所定の遅延を示す第一の時間範囲内に上記映像情報が出力されるように、上記映像情報の遅延時間を調整した遅延調整後映像情報を出力する遅延処理過程と、
を備える操作違和感軽減方法。 - 行為者の操作に伴って映像と音の両方が提示される際の、上記提示される音の上記行為者の操作に対する遅延が上記行為者に与える違和感を軽減するために、上記行為者の操作に伴って提示される音である音響情報と、上記行為者の操作に伴って提示される映像である遅延調整後映像情報を出力する操作違和感軽減方法であって、
上記行為者の操作を入力として、当該操作に対応した信号である入力情報を生成する入力過程と、
上記入力情報を入力として、上記行為者の操作に伴って提示される映像である映像情報を生成する映像情報生成過程と、
上記入力情報を入力として、上記行為者の操作に伴って提示される音である音響情報を生成して出力する音響情報生成過程と、
上記入力情報と上記映像情報とを入力として、上記入力情報が入力された時刻を起点とし、上記行為者が、上記映像情報が自己の操作に対応する映像情報であると認識可能な時間限界まで遅延させて上記映像情報が出力されるように、上記映像情報の遅延時間を調整した遅延調整後映像情報を出力する遅延処理過程と、
を備える操作違和感軽減方法。 - 請求項9乃至15の何れかに記載した操作違和感軽減方法の各過程を、コンピュータに実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013088540A JP5989592B2 (ja) | 2013-04-19 | 2013-04-19 | 操作違和感軽減装置とその方法とプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013088540A JP5989592B2 (ja) | 2013-04-19 | 2013-04-19 | 操作違和感軽減装置とその方法とプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014211808A JP2014211808A (ja) | 2014-11-13 |
JP5989592B2 true JP5989592B2 (ja) | 2016-09-07 |
Family
ID=51931513
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013088540A Active JP5989592B2 (ja) | 2013-04-19 | 2013-04-19 | 操作違和感軽減装置とその方法とプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5989592B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020158440A1 (ja) * | 2019-01-30 | 2020-08-06 | ソニー株式会社 | 情報処理装置、情報処理方法、及びプログラムを記載した記録媒体 |
KR20230048805A (ko) * | 2021-10-05 | 2023-04-12 | 삼성전자주식회사 | 전자 장치 및 그 제어 방법 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5538255A (en) * | 1992-02-18 | 1996-07-23 | Barker; Bruce J. | Remote controlled multiplayer video game |
JP5062655B2 (ja) * | 2006-03-30 | 2012-10-31 | 株式会社バンダイナムコゲームス | ゲーム装置およびタイミングキャリブレーション方法 |
JP5774314B2 (ja) * | 2011-01-05 | 2015-09-09 | 任天堂株式会社 | 遅延測定システムおよび遅延測定方法 |
-
2013
- 2013-04-19 JP JP2013088540A patent/JP5989592B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2014211808A (ja) | 2014-11-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10593167B2 (en) | Crowd-based haptics | |
US9508236B2 (en) | Haptic warping system that transforms a haptic signal into a collection of vibrotactile haptic effect patterns | |
US9245429B2 (en) | Haptic warping system | |
CN109416562B (zh) | 用于虚拟现实的装置、方法和计算机可读介质 | |
KR20170116007A (ko) | 햅틱 효과의 오버레잉 | |
JP5228074B2 (ja) | 情報処理装置、表示制御方法 | |
KR101718837B1 (ko) | 응용프로그램의 제어방법, 장치 및 전자장비 | |
US10635384B2 (en) | Electronic device, musical sound control method, and storage medium | |
JP2014110558A (ja) | 情報処理装置、情報処理システム及びプログラム | |
JP2015170173A (ja) | 情報処理装置、情報処理システム、情報処理方法及びプログラム | |
WO2011081036A1 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
JP7074056B2 (ja) | 画像処理装置、画像処理システム、および画像処理方法、並びにプログラム | |
JP2015170174A (ja) | 情報処理装置、情報処理システム、情報処理方法及びプログラム | |
KR20150131215A (ko) | 3d 모바일 및 커넥티드 tv 광고 트래피킹 시스템 | |
JP5989592B2 (ja) | 操作違和感軽減装置とその方法とプログラム | |
US20170192740A1 (en) | Adjusting audio volume based on a size of a display area | |
KR101926074B1 (ko) | 촉각자극 제공 방법 및 컴퓨터로 읽을 수 있는 기록매체 | |
EP2731099A1 (en) | Image output device, image output method, and program | |
JP2017076319A (ja) | 映像生成方法、映像生成プログラムおよび映像生成装置 | |
US11132054B2 (en) | Electronic apparatus, control method thereof and electronic system | |
JP2014109885A (ja) | 表示装置及び通知方法 | |
US8940990B2 (en) | Exercise music support apparatus | |
JP6230452B2 (ja) | 情報処理装置及び情報処理方法 | |
JP7436720B1 (ja) | 咀嚼状態判定装置、咀嚼状態判定方法および咀嚼状態判定プログラム | |
JP6780131B1 (ja) | 身体運動フィードバック装置、身体運動フィードバック方法、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150629 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160530 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160607 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160715 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160809 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160810 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5989592 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |