CN114930274A - 信息处理设备、信息处理终端和程序 - Google Patents
信息处理设备、信息处理终端和程序 Download PDFInfo
- Publication number
- CN114930274A CN114930274A CN202180008481.9A CN202180008481A CN114930274A CN 114930274 A CN114930274 A CN 114930274A CN 202180008481 A CN202180008481 A CN 202180008481A CN 114930274 A CN114930274 A CN 114930274A
- Authority
- CN
- China
- Prior art keywords
- haptic
- unit
- information processing
- user
- control command
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 132
- 238000009877 rendering Methods 0.000 claims abstract description 13
- 230000000638 stimulation Effects 0.000 claims description 82
- 238000004891 communication Methods 0.000 claims description 42
- 230000009471 action Effects 0.000 claims description 26
- 238000012545 processing Methods 0.000 claims description 26
- 230000033001 locomotion Effects 0.000 claims description 22
- 238000003384 imaging method Methods 0.000 claims description 17
- 230000005540 biological transmission Effects 0.000 claims description 12
- 238000011156 evaluation Methods 0.000 claims description 11
- 230000000694 effects Effects 0.000 description 67
- 238000010586 diagram Methods 0.000 description 56
- 230000008447 perception Effects 0.000 description 22
- 238000003672 processing method Methods 0.000 description 22
- 230000035807 sensation Effects 0.000 description 22
- 230000006870 function Effects 0.000 description 16
- 238000000034 method Methods 0.000 description 9
- 230000035945 sensitivity Effects 0.000 description 9
- 230000001133 acceleration Effects 0.000 description 8
- 230000002452 interceptive effect Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 230000004044 response Effects 0.000 description 7
- 238000001514 detection method Methods 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 230000001413 cellular effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000033764 rhythmic process Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 208000004547 Hallucinations Diseases 0.000 description 2
- 239000008186 active pharmaceutical agent Substances 0.000 description 2
- 230000004397 blinking Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 239000000470 constituent Substances 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 230000008825 perceptual sensitivity Effects 0.000 description 2
- 239000004984 smart glass Substances 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- 210000001015 abdomen Anatomy 0.000 description 1
- 230000004931 aggregating effect Effects 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003183 myoelectrical effect Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 239000000047 product Substances 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000029058 respiratory gaseous exchange Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 239000010454 slate Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000035900 sweating Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0283—Price estimation or determination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Business, Economics & Management (AREA)
- Development Economics (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Social Psychology (AREA)
- Multimedia (AREA)
- Psychiatry (AREA)
- General Health & Medical Sciences (AREA)
- Entrepreneurship & Innovation (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Game Theory and Decision Science (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
提供了一种信息处理设备,该信息处理设备包括:第一获取单元(214),其被配置成获取控制命令,该控制命令是由第一用户输入的,并且与用于指定用于通过触觉呈现设备呈现触觉刺激的呈现单元的呈现单元信息和用于指定触觉刺激的形式的形式信息对应;生成单元(218),其被配置成根据所述控制命令生成用于将触觉刺激呈现至呈现单元的触觉控制信号;第一分发单元(222),其被配置成将触觉控制信号分发至佩戴在第二用户的身体上的触觉呈现设备。
Description
技术领域
本公开涉及信息处理设备、信息处理终端以及程序。
背景技术
近年来,消费者的消费活动已从单纯的购买商品的“物品消费”向消费者为附加价值的体验付费的“体验消费”转变。例如,在诸如音乐、动画这样的娱乐领域中,除了诸如观看由艺术家进行的现场演出等的单向体验之外,消费者还要求诸如艺术家与粉丝之间的交互的、实时且交互的、附加价值更高的体验。
这种体验的示例包括将诸如图示和文本的数据从内容的观看者传输到在因特网上分发该内容的艺术家等、以及随着数据传输发送金钱的“社交投币”。艺术家与观看者经由这样的“社交投币”彼此进行交流,这向观看者提供了附加价值更高的体验。这提高了观看者对内容的满意度,并且提高了观看者对购买这样的“体验”的购买欲望。
引文列表
专利文献
专利文献1:WO 2018/008217 A
发明内容
技术问题
同时,常规地已提出了用于向用户呈现诸如振动的触觉刺激的设备。这样的设备的示例包括以上专利文献1中描述的夹克型触觉呈现设备。用户在电影院、主题公园的景点等中佩戴这样的触觉呈现设备,并且触觉呈现设备被控制以与由用户观看的再现内容同步,这增加了所提供的再现内容的真实感。
因此,本公开提出了使用这样的触觉呈现设备向观看者提供实时的、交互的且具有附加价值的体验的信息处理设备、信息处理终端以及程序。
问题的解决方案
根据本公开,提供了一种信息处理设备,该信息处理设备包括:第一获取单元,其被配置成获取由第一用户输入的控制命令,该控制命令与用于指定用于通过触觉呈现设备呈现触觉刺激的呈现单元的呈现单元信息和用于指定触觉刺激的形式的形式信息对应;生成单元,其被配置成根据控制命令生成用于将触觉刺激呈现至呈现单元的触觉控制信号;以及第一分发单元,其被配置成将触觉控制信号分发至佩戴在第二用户的身体上的触觉呈现设备。
此外,根据本公开,提供了一种信息处理终端,该信息处理终端包括:输入单元,其被配置成接收控制命令的输入,该控制命令包括用于指定用于通过触觉呈现设备呈现触觉刺激的呈现单元的呈现单元信息和用于指定触觉刺激的形式的形式信息;以及发送单元,其被配置成将输入的控制命令发送至信息处理设备,该信息处理设备根据控制命令来生成触觉控制信号,并将触觉控制信号分发至触觉呈现设备。
此外,根据本公开,提供了一种用于使信息处理设备用作控制单元的程序,并且该程序使控制单元执行包括以下操作的处理:获取由第一用户输入的控制命令;接收第二用户的直播图像;在显示单元上显示接收到的第二用户的直播图像;以及将获取的控制命令经由通信单元发送至服务器;其中,根据控制命令来生成触觉控制信号,将触觉控制信号分发至佩戴在第二用户的身体上的触觉呈现设备,以及基于与控制命令对应的用于指定用于呈现触觉呈现设备的触觉刺激的呈现单元的呈现单元信息和用于指定触觉刺激的形式的形式信息,经由触觉呈现设备来执行触觉呈现。
此外,根据本公开,提供了一种信息处理设备,该信息处理设备包括:控制单元,其被配置成:接收由第一用户输入的控制命令,以及接收第二用户的直播图像;其中,根据控制命令来生成触觉控制信号,将触觉控制信号分发至佩戴在第二用户的身体上的触觉呈现设备,以及基于与控制命令对应的用于指定用于呈现触觉呈现设备的触觉刺激的呈现单元的呈现单元信息和用于指定触觉刺激的形式的形式信息,经由触觉呈现设备来执行触觉呈现。
附图说明
图1是用于对本公开的实施例的概要进行说明的说明图(其1)。
图2是用于对本公开的实施例的概要进行说明的说明图(其2)。
图3是示出根据本公开的第一实施例的信息处理***10的示意性配置的示例的***图。
图4是示出根据本公开的第一实施例的触觉呈现设备100的外观配置的示例的图。
图5是示出根据本公开的第一实施例的触觉呈现设备100的功能配置的示例的图。
图6是示出根据本公开的第一实施例的服务器200的功能配置的示例的图。
图7是示出根据本公开的第一实施例的用户终端300的功能配置的示例的图。
图8是描绘根据本公开的第一实施例的信息处理方法的示例的流程图。
图9是用于对根据本公开的第一实施例的显示示例进行说明的说明图(其1)。
图10是用于对根据本公开的第一实施例的显示示例进行说明的说明图(其2)。
图11是用于对根据本公开的第一实施例的显示示例进行说明的说明图(其3)。
图12是用于对根据本公开的第一实施例的显示示例进行说明的说明图(其4)。
图13是用于对根据本公开的第二实施例的显示示例进行说明的说明图(其1)。
图14是用于对根据本公开的第二实施例的显示示例进行说明的说明图(其2)。
图15是用于对本公开的第三实施例进行说明的说明图(其1)。
图16是用于对根据本公开的第三实施例的显示示例进行说明的说明图。
图17是用于对本公开的第三实施例进行说明的说明图(其2)。
图18是用于对本公开的第三实施例进行说明的说明图(其3)。
图19是用于对本公开的第三实施例进行说明的说明图(其4)。
图20是用于对本公开的第三实施例进行说明的说明图(其5)。
图21是示出根据本公开的第四实施例的服务器200a的功能配置的示例的图。
图22是描绘根据本公开的第四实施例的信息处理方法的示例的流程图。
图23是用于对根据本公开的第四实施例的示例的显示示例进行说明的说明图(其1)。
图24是用于对根据本公开的第四实施例的示例的显示示例进行说明的说明图(其2)。
图25是用于对根据本公开的第四实施例的示例的显示示例进行说明的说明图(其3)。
图26是示出根据本公开的第六实施例的服务器200b的功能配置的示例的图。
图27是用于对根据本公开的第六实施例的显示示例进行说明的说明图(其1)。
图28是用于对根据本公开的第六实施例的显示示例进行说明的说明图(其2)。
图29是示出根据本公开的第六实施例的修改示例的服务器200c的功能配置的示例的图。
图30是描绘根据本公开的第六实施例的修改示例的信息处理方法的示例的流程图。
图31是用于对根据本公开的第六实施例的修改示例的显示示例进行说明的说明图(其1)。
图32是用于对根据本公开的第六实施例的修改示例的显示示例进行说明的说明图(其2)。
图33是示出根据本公开的实施例的修改示例的信息处理***10的示意性配置的示例的***图(其1)。
图34是示出根据本公开的实施例的修改示例的信息处理***10的示意性配置的示例的***图(其2)。
图35是示出根据本公开的实施例的修改示例的信息处理***10的示意性配置的示例的***图(其3)。
图36是示出根据本公开的实施例的修改示例的信息处理***10的示意性配置的示例的***图(其4)。
图37是示出根据本公开的实施例的修改示例的信息处理***10的示意性配置的示例的***图(其5)。
图38是示出根据本公开的实施例的修改示例的信息处理***10的示意性配置的示例的***图(其6)。
图39是示出实现服务器200的功能的计算机的示例的硬件配置图。
具体实施方式
在下文中,将参照附图详细描述本公开的优选的实施例。此外,在本说明书以及附图中,基本上具有相同的功能和结构的结构元件用相同的附图标记来表示,并且省略对这些结构元件的重复说明。此外,在本说明书以及附图中,有时在相同的附图标记之后添加不同的字母来区分不同的实施例中的类似的构成元件。然而,在不需要特别将类似的构成元件彼此区分开的情况下,仅给出相同的附图标记。
按以下的顺序给出描述。
1.本公开的实施例的概要
2.第一实施例
2.1 信息处理***10的概要
2.2 触觉呈现设备100的详细配置
2.3 服务器200的详细配置
2.4 用户终端300的详细配置
2.5 信息处理方法
2.6 修改示例
3.第二实施例
4.第三实施例
5.第四实施例
5.1 服务器200a的详细配置
5.2 信息处理方法
5.3 示例
6.第五实施例
7.第六实施例
7.1 服务器200b的详细配置
7.2 实施例
7.3 修改示例1
7.4 修改示例2
7.5 修改示例3
8.本公开的信息处理***10的修改示例
9.总结
10.关于硬件配置
11.补充
<<1.本公开的实施例的概要>>
首先,在详述本公开的实施例之前,参照图1和图2来描述由本发明人创建的本公开的实施例的概要。图1和图2是用于对本公开的实施例的概要进行说明的说明图。
如前面描述的那样,近来,消费者的消费活动已从“物品消费”向“体验消费”转变。特别地,在娱乐领域中,除了诸如观看由艺术家进行的现场演出等的单向体验之外,消费者还要求诸如与艺术家的交互的、实时且交互的、附加价值更高的体验。
因此,鉴于这样的状况,本发明人努力研究了向观看者提供附加价值更高的体验的可能性,并且想到了使用触觉呈现设备(触觉设备)的构思,该设备将诸如振动的触觉刺激呈现给佩戴设备的人。根据本发明人的考虑,触觉呈现设备的使用使得观看者能够获得附加价值更高的体验。
在基于这样的构思创建的本公开的实施例中,如图1所示,其演出或内容将被观看或分发的艺术家602佩戴例如背心型的触觉呈现设备100。该触觉呈现设备100中包括多个触觉刺激单元(例如,致动器等)。此外,根据接收到的预定信号,触觉刺激单元可以将触觉刺激呈现给佩戴者。而且,如图2所示,观看者600从显示在用户终端300的显示单元302上的具有触觉刺激效果的图章700中选择一个具有触觉刺激效果的图章700,以发送选择的具有触觉刺激效果的图章700;由此,向触觉刺激单元发送了与赋予图章700的触觉刺激对应的预定触觉控制信号(进行所谓的具有触觉刺激效果的“社交投币”)。此外,触觉刺激单元基于接收到的预定触觉控制信号,将与所选择的具有触觉刺激效果的图章700对应的触觉刺激呈现给佩戴者。因此,如果艺术家602感知被呈现的触觉刺激并采取动作,则观看者600可以实时地确认由观看者600已发送的图章700呈现的触觉刺激引起的动作。于是,如果观看者600可以实时地确认由与他/她已发送的图章700有关的触觉刺激引起的动作,则观看者600可以感觉好像他/她与艺术家602直接交互,即,观看者600可以获得附加价值更高的体验。
如上所述,在由发明人创建的本公开的实施例中,观看者600不仅可以向艺术家602发送诸如图示、动画和文本的视觉信息以及诸如音乐的听觉信息,而且还可以向艺术家602发送触觉信息。因此,根据本公开的实施例,可以为观看者600提供实时的、交互的且具有附加价值的体验,这提高了他/她的对演出和内容的满意度,并且提高了他/她的购买这样的“体验”的购买欲望。以下,依次描述由发明人创建的本公开的实施例的细节。
<<2.第一实施例>
<2.1信息处理***10的概要>
首先,参照图3描述根据本公开的第一实施例的信息处理***10的概要。图3是示出根据本公开的第一实施例的信息处理***10的示意性配置的示例的***图。在以下的描述中,假设艺术家(第二用户)602和观看者(第一用户)600存在于不同的空间或者相同空间。具体地,在信息处理***10中,观看者600例如可以直接观看艺术家602,或者可以观看分发的艺术家602的视频。
具体地,如图3所示,根据实施例的信息处理***10例如可以包括触觉呈现设备100、监视器110、摄像装置120、服务器(信息处理设备)200、以及作为用户终端(信息处理终端)300的示例的智能电话300a以及平板终端300b。服务器200和其他设备可以经由诸如有线/无线局域网(LAN)、Wi-Fi(注册商标)、Bluetooth(注册商标)、移动通信网络(长期演进(LTE)和5G(第5代移动通信***))的各种通信网络发送和接收数据。注意,信息处理***10中包括的各设备的数目并不限于图3中所示的数目,并且还可以更大。此外,信息处理***10也可以包括图3中未示出的设备。例如,信息处理***10可以包括通用个人计算机(PC)、游戏机、蜂窝电话、便携式媒体播放器、扬声器、投影仪、显示器(数字标牌等)、诸如耳机、智能眼镜或智能手表的可穿戴设备。以下,描述根据实施例的信息处理***10中包括的各个设备的概要。
(触觉呈现设备100)
触觉呈现设备100由例如可以佩戴在身体上的设备来实现。在实施例中,例如,假设触觉呈现设备100是由艺术家602穿戴的背心型(无袖的外套形状)。如前面所描述的,背心型的触觉呈现设备100中包括多个触觉刺激单元。例如,预定数量(例如6个)的触觉刺激单元可以被布置在触觉呈现设备100的内部,在艺术家602的正面侧以及背面侧中的每一侧上。作为示例,被布置在正面侧的各个触觉刺激单元和被布置在背面侧的各个触觉刺激单元以面对着的位置关系布置。
在实施例中,触觉呈现设备100的形状并不限于背心型,并且可以具有带袖子的外套形状。在这种情况下,不仅可以在艺术家602的胸部和腹部上设置一个或更多个触觉刺激单元,而且还可以在与艺术家602的两臂对应的位置处设置一个或更多个触觉刺激单元。此外,在实施例中,触觉呈现设备100并不限于外套形状,并且可以是裤子、鞋子、腰带、帽子、手套、口罩等。
此外,可以在触觉呈现设备100的肩部部分的每一侧上设置一个麦克风风(下文中,被称为麦克风)(未示出),或者,也可以在该肩部部分的左侧和右侧中的一侧上设置一个麦克风,或者,可以设置三个或更多个麦克风。此外,麦克风可以作为与触觉呈现设备100独立的其他设备设置在艺术家602的周围。此外,触觉呈现设备100可以包括用于检测触觉呈现设备100的佩戴状态的佩戴状态检测传感器(例如,纽扣型的传感器、压力传感器等)(未示出)、用于检测艺术家602的动作和姿势的惯性传感器(惯性测量单元(IMU))(未示出)、用于检测艺术家602的生物信息的生物信息传感器(例如,用于对心率、脉搏、脑电波、呼吸、发汗、肌电位、皮肤温度、皮肤电阻、眼球移动或瞳孔直径等进行感测的传感器)(未示出)。稍后描述触觉呈现设备100的详细配置。
(监视器110)
监视器110可以针对艺术家602显示例如由稍后描述的摄像装置120拍摄的艺术家602的图像,并且监视器110还可以在艺术家602的图像上叠加文本、图标或动画等。例如,监视器110由液晶显示器(LCD)设备和有机发光二极管(OLED)设备实现。此外,在实施例中,监视器110的显示单元(未示出)可以设置为与输入单元(未示出)集成的单元,并且在这种情况下,输入单元由叠加在显示单元上的触摸面板来实现。此外,在实施例中,监视器110可以设置有用于向艺术家602输出声音的扬声器(未示出)。
(摄像装置120)
摄像装置120是从一个视点或多个视点拍摄艺术家602的图像的一个或更多个可见光摄像装置,并且所拍摄的图像经由服务器200发送至观看者600的用户终端300或监视器110。摄像装置120可以拍摄艺术家602的周围环境或者存在于艺术家602周围的真实对象的图像。具体地,摄像装置120包括具有图像拾取透镜、光圈、变焦透镜以及聚焦透镜的透镜***、以及使该透镜***执行聚焦操作和变焦操作的驱动***。摄像装置120还包括对由透镜***拍摄的成像光进行光电转换以生成成像信号的固态成像元件阵列。固态成像元件阵列例如可以由电荷耦合器件(CCD)传感器阵列、互补金属氧化物半导体(CMOS)传感器阵列实现。
(服务器200)
服务器200可以接收由观看者600输入的具有触觉刺激效果的图章(控制命令)700,根据该图章700生成触觉控制信号,并且将生成的触觉控制信号发送至触觉呈现设备100。每个具有触觉刺激效果的图章700与每个预定控制命令相关联,并且每个控制命令包括用于指定要呈现振动刺激的感知位置的信息(位置信息)、以及用于指定振动刺激的例如波形类型和强度的信息(形式信息)。此外,控制命令可以包括标识信息(ID),用于指定触觉呈现设备100的触觉刺激单元和上述形式信息。具体地,服务器200生成要输入至触觉呈现设备100的各个触觉刺激单元以在控制命令所指定的感知位置处以控制命令所指定的强度和波形呈现振动刺激的触觉控制信号(波形数据),并且将触觉控制信号发送至触觉呈现设备100。注意,在本说明书中,“感知位置”包括感知位置的移动路径和具有预定尺寸的感知范围。
此外,在实施例中,服务器200可以由如图3中所示的单个设备实现或由多个设备实现,并且本公开不特别受限于该示例。例如,服务器200可以通过专用于触觉呈现设备100的服务器(未示出)和用于分发内容的分发服务器(未示出)实现。在这种情况下,专用于触觉呈现设备100的服务器经由web应用程序接口(web API)进行认证,监视由观看者600发送的具有触觉刺激效果的图章700等,并且控制触觉呈现设备100。另一方面,分发服务器向用户终端300分发艺术家602等的图像、用于选择具有触觉刺激效果的图章700的图像等。此外,服务器200例如可以包括针对对本信息处理***10的使用执行支付的结算服务器(未示出)。稍后描述服务器200的详细配置。
(用户终端300)
用户终端300是由观看者600使用或者安装在观看者600的附近的终端,并且用于观看者600输入具有触觉刺激效果的图章700等。用户终端300接收由观看者600输入的具有触觉刺激效果的图章(控制命令)700,并且将接收到的图章700发送至服务器200。例如,用户终端300可以是智能电话300a、平板型个人计算机(PC)300b、蜂窝电话、膝上型PC或诸如头戴式显示器(HMD)的可穿戴设备。稍后描述用户终端300的详细配置。
<2.2触觉呈现设备100的详细配置>
接下来,参照图4以及图5来描述触觉呈现设备100的详细配置。图4是示出根据实施例的触觉呈现设备100的外观配置的示例的图,并且图5是示出根据实施例的触觉呈现设备100的功能配置的示例的图。如以上所述的,触觉呈现设备100是附接至艺术家602的身体的一部分并且根据控制命令进行振动以向艺术家602给出触觉刺激的设备。
如图4所示,例如,背心型的触觉呈现设备100如前面描述那样在其中包括多个触觉刺激单元106。触觉刺激单元106例如包括致动器,通过由服务器200生成的触觉控制信号驱动以生成振动,并且将这样的振动呈现作为触觉刺激。致动器的示例包括偏心马达、线性振动器、压电元件等。
如图5所示,触觉呈现设备100包括通信单元102、控制单元104和触觉刺激单元106。通信单元102通过有线方式或无线地连接至服务器200,并且向/从服务器200发送/接收信息。控制单元104是控制器,并且基于经由通信单元102输入的触觉控制信号来驱动触觉刺激单元106。例如响应于由中央处理器(CPU)、微处理单元(MPU)等使用随机存取存储器(RAM)作为工作区域执行的存储在触觉呈现设备100的只读存储器(ROM)等中的各种程序来实现控制单元104。替选地,控制单元104例如可以由诸如专用集成电路(ASIC)、现场可编程门阵列(FPGA)的集成电路来实现。
尽管以上具体描述了根据实施例的触觉呈现设备100的详细配置,但根据实施例的触觉呈现设备100的详细配置并不限于图4以及图5所示的示例。
此外,触觉呈现设备100不限于上述可穿戴型设备,并且也可以被配置为安装在由艺术家602握持的设备上的手持型设备,其中由艺术家602握持的设备例如智能电话、游戏控制器、便携式音乐播放器等。替选地,触觉呈现设备100不限于可穿戴型设备和手持型设备,并且也可以被配置为安装在诸如床或椅子的家具或者各种设施上的岩板/落地式设备。
<2.3服务器200的详细配置>
接下来,参照图6来描述根据本公开的实施例的服务器200的详细配置。图6是示出根据实施例的服务器200的功能配置的示例的图。如图6所示,服务器200主要包括通信单元202、控制单元210以及存储单元240。下文中,依次描述服务器200的各功能块。
(通信单元202)
通信单元202可以向以及从触觉呈现设备100、监视器110、摄像装置120和用户终端(信息处理终端)300发送以及接收信息。通信单元202是具有发送和接收数据的功能的通信接口,并且由诸如通信天线、发送/接收电路和端口的通信设备(未示出)实现。
(控制单元210)
控制单元210是控制器,并且例如响应于由CPU、MPU等使用RAM作为工作区域执行的存储在服务器200的ROM等中的各种程序来实现。具体地,如图6所示,控制单元210可以包括GUI控制单元212、观看者侧输入单元(第一获取单元)214、分发者侧输入单元216、生成单元218、确定单元220和输出控制单元(第一分发单元)222。
图形用户接口(GUI)控制单元212控制观看者600的用户终端300显示用于输入具有触觉刺激效果的图章(控制命令)700的画面。具体地,GUI控制单元212使用户终端300的显示单元302显示如图2所示的画面作为用于选择具有触觉刺激效果的图章700的画面。在该选择画面(图章选择画面)上显示有许多具有触觉刺激效果的图章700。每个具有触觉刺激效果的图章700与针对触觉呈现设备100的控制命令相关联,并且观看者600可以选择显示在选择画面上的图章700来输入控制命令。在实施例中,优选的是,具有触觉刺激效果的图章700的图像直观地唤起观看者600希望发送给艺术家602的触觉刺激、想法(消息)等。
观看者侧输入单元214获取与由观看者600输入的具有触觉刺激效果的图章700相关联的控制命令,并将控制命令输出至稍后描述的生成单元218,该控制命令包括:用于指定由触觉呈现设备100呈现触觉刺激的呈现位置的位置信息和用于指定触觉刺激的形式的形式信息。
分发者侧输入单元216例如获取由用于检测触觉呈现设备100的佩戴状态的佩戴状态检测传感器(未示出)获取的感测数据等,并将感测数据等输出至稍后描述的生成单元218。
生成单元218基于与由观看者600输入的具有触觉刺激效果的图章700相关联的控制命令,生成用于控制触觉呈现设备100的触觉控制信号,并将触觉控制信号输出至稍后描述的确定单元220。具体地,生成单元218基于包括振动刺激的感知位置(位置信息)、振动刺激的波形类型以及关于振动刺激的强度信息(形式信息)的控制命令,生成要输入至触觉呈现设备100的各个触觉刺激单元以在控制命令所指定的感知位置处以控制命令所指定的强度和波形呈现振动刺激的波形数据。注意,触觉控制信号可以包括用于给出下述命令的信息,该命令用于以基于控制命令的触觉刺激的呈现定时、频率、间隔以及呈现时间来呈现振动刺激。如果控制命令所指定的振动刺激的频率和强度具有宽频带(例如,50Hz至500Hz),则生成单元218可以根据触觉呈现设备100的功能将其压缩为窄频带(例如,100Hz),并且生成波形数据。
生成单元218也可以根据艺术家602的触觉呈现设备100的佩戴状态来调整触觉控制信号。例如,生成单元218根据触觉呈现设备100与艺术家602的身体之间的接触率来调整触觉控制信号。更具体地,生成单元218将触觉控制信号调整成使得对于接触率低的位置处的触觉刺激单元106不呈现触觉振动。生成单元218也可以根据艺术家602的属性信息(例如,年龄、性别、身高、体重、体格等)和生物信息来调整触觉控制信号。例如,生成单元218可以根据艺术家602的年龄来调整感知位置、强度等。更具体地,在艺术家602为6岁大的情况下,生成单元218可以将触觉控制信号调整成使得要呈现的触觉刺激的强度是艺术家602是成人的情况的强度的一半。
此外,生成单元218可以与触觉控制信号一起生成用于将预定图像或预定声音呈现给观看者600或艺术家602的呈现控制信号(例如,未佩戴时的控制信号等)。例如,预定图像可以是叠加显示在艺术家602的图像或艺术家602周围的真实空间的图像上或者投影到艺术家602身上的诸如图标、动画、文本的虚拟对象;更具体地,预定图像可以是社交投币从观看者600移动到艺术家602的轨迹、与呈现触觉刺激同时显示的看起来像炸弹***的动画、或与由观看者600输入的具有触觉刺激效果的图章700对应的图标。此外,在由于触觉呈现设备100未佩戴在艺术家602的身体上而不能向该艺术家602呈现触觉刺激的情况下,预定图像或预定声音例如可以是代替触觉刺激而输出至观看者600的图像或声音。
确定单元220基于控制命令和触觉控制信号的内容、观看者600或艺术家602的属性信息等,确定是否向触觉呈现设备100发送触觉控制信号。例如,在由观看者600输入的控制命令指定了由艺术家602预先限制的呈现位置和强度的情况下,确定单元220确定不向触觉呈现设备100发送基于该控制命令生成的触觉控制信号。此外,在不同的观看者600连续地指定相同的呈现位置的情况下,或者在相同的观看者600连续地输入控制命令的情况下,确定单元220可以确定不向触觉呈现设备100发送生成的触觉控制信号。此外,在这种情况下,生成单元218可以改变触觉刺激的呈现位置。
输出控制单元222将生成的触觉控制信号经由通信单元202发送至佩戴在艺术家602的身体上的触觉呈现设备100。
(存储单元240)
存储单元240由诸如存储用于控制单元210的处理的程序和运算参数的ROM、暂时存储适当地变化的参数的RAM、以及存储各种数据库(DB)的硬盘驱动器(HDD)的存储装置来实现。例如,如图6所示,存储单元240可以包括观看者配置文件242、分发者配置文件244以及分发数据DB 246。观看者配置文件242以及分发者配置文件244分别存储观看者600以及艺术家602的属性信息。此外,观看者配置文件242可以与观看者600的标识信息相关联地存储关于观看者600在过去获取或使用的控制命令的信息,并且分发者配置文件244可以与该艺术家602的标识信息相关联地存储关于艺术家602在过去接收的控制命令的信息。此外,分发数据DB 246与每个图章700的标识信息相关联地存储预先生成的触觉数据库(振动波形图案等),并且生成单元218使用触觉数据库来生成触觉控制信号。此外,分发数据DB 246例如可以存储诸如触觉呈现设备100的触觉刺激单元106的数量、其位置、频率特性和最大输入电压的信息,作为触觉呈现设备100的配置文件信息。生成单元218可以参考配置文件信息来调整触觉控制信号。
尽管以上具体描述了根据实施例的服务器200的详细配置,但根据实施例的服务器200的详细配置不限于图6所示的示例。例如,服务器200还可以还包括推荐单元(未示出),该推荐单元参考观看者配置文件242和分发者配置文件244来选择观看者600或者艺术家602频繁使用的控制命令或相反地选择观看者600或者艺术家60较不频繁使用的控制命令,并且向观看者600推荐与选择的控制命令相关联的具有触觉刺激效果的图章700。此外,推荐单元可以向观看者600推荐由艺术家602推荐的具有触觉刺激效果的图章700。
<2.4用户终端300的详细配置>
接下来,参照图7描述根据本公开的实施例的用户终端300的详细配置。图7是示出根据实施例的用户终端300的功能配置的示例的图。如图7所示,用户终端300主要包括显示单元302、操作输入单元304、扬声器306、通信单元(发送单元)(价格获取单元)308、控制单元310、存储单元312以及传感器单元320。在下文中,依次描述用户终端300的各功能块。
(显示单元302)
显示单元302例如可以为观看者600显示用于选择具有触觉刺激效果的图章(控制命令)700的选择画面、艺术家602的图像等。显示单元302还可以在艺术家602的图像上叠加显示文本、图标或动画等。显示单元302由液晶显示器设备、OLED设备等实现。
(操作输入单元304)
操作输入单元304从观看者600接收与控制命令相关联的具有触觉刺激效果的图章700的选择结果,该控制命令包括:用于指定要呈现触觉刺激的呈现位置的位置信息、以及用于指定触觉刺激的形式的形式信息。替选地,操作输入单元304可以直接接收控制命令的输入。例如,操作输入单元304由开关、按钮、触摸面板、或手柄等实现。此外,由操作输入单元304输入的操作的内容可以被显示在显示单元302上。此外,操作输入单元304可以接收关于观看者600在位置选择画面上输入的输入操作的信息(例如,位置信息),该位置选择画面被设置为被叠加在显示单元302上并且被用于指定显示单元304上显示的呈现位置。
(扬声器306)
扬声器306在稍后描述的控制单元310的控制下再现音频信号等。注意,扬声器306可以被设置在用户终端300中,或者,可以是与用户终端300分开的诸如成对的耳机扬声器(未示出)的设备。
(通信单元308)
通信单元308可以向以及从服务器200发送以及接收信息,并且具体地,可以向服务器200发送关于由观看者600输入的具有触觉刺激效果的图章(控制命令)700的信息。此外,通信单元308可以接收从服务器200发送的信息(例如,诸如具有触觉刺激效果的图章(控制命令)700的价格的信息)。例如,通信单元308是具有发送和接收数据的功能的通信接口,并且由诸如通信天线、发送和接收电路以及端口的通信设备(未示出)实现。
(控制单元310)
控制单元310是用户终端300的控制器,并且例如,响应于由CPU、MPU等使用RAM作为工作区域执行的存储在用户终端300的ROM等的各种程序而实现。
(存储单元312)
存储单元312由诸如存储用于控制单元310的处理的程序、操作参数等的ROM以及暂时存储适当地改变的参数等的RAM的存储设备来实现。
(传感器单元320)
传感器单元320可以获取关于来自观看者600的操作(给予用户终端的振动等)的感测数据。例如,如图7所示,传感器单元320主要包括摄像装置322、麦克风324、陀螺仪传感器326和加速度传感器328。注意,这些传感器是示例,并且实施例并不限于此。
例如,摄像装置322例如拍摄观看者600的运动等的图像,以将拍摄的图像输出至控制单元310。而且,该控制单元310可以从由摄像装置322拍摄的图像提取观看者600的预定运动,并且获取与所提取的运动有关的控制命令。具体地,摄像装置322包括具有图像拾取透镜、光圈、变焦透镜以及聚焦透镜的透镜***、以及使该透镜***执行聚焦操作和变焦操作的驱动***。摄像装置322还包括对由透镜***拍摄的成像光进行光电转换以生成成像信号的固态成像元件阵列。注意,该固态成像元件阵列例如可以由CCD传感器阵列或CMOS传感器阵列实现。此外,摄像装置322可以包括飞行时间(ToF)传感器(未示出)。ToF传感器例如用具有预定周期的照射光照射对象,检测从对象反射的反射光,并且检测照射光与反射光之间的相位差和时间差,从而获取对象的深度(depth)信息。这里,对象的深度信息是作为从ToF传感器到对象的表面上的每个点的距离的信息之一的深度信息。而且,通过聚合关于对象的表面上的多个点的深度信息,可以获得关于对象的表面的不平坦性的形状信息,即,对象的外部形状信息。
麦克风324收集观看者600的声音,以将收集到的声音信息输出至控制单元310。然后,控制单元310可以从由麦克风324收集到的声音提取观看者600的预定声音模式,并且获取与所提取的声音模式有关的控制命令。
陀螺仪传感器326例如由三轴陀螺仪传感器实现,并且检测由观看者600进行的用户终端300的移动的角速度(旋转速度)。此外,加速度传感器328例如由三轴加速度传感器(也称为G传感器)实现,并且检测由观看者600进行的用户终端300的移动的加速度。在实施例中,来自这些传感器的感测数据可以用于识别由观看者600对用户终端300执行的操作,从而引起与所识别的操作有关的控制命令的获取。
尽管以上具体地描述了根据实施例的用户终端300的详细配置,但根据实施例的用户终端300的详细配置并不限于图7所示的示例,并且例如还可以包括用于通过振动来向观看者600进行通知的振动设备(未示出)。
<2.5信息处理方法>
以上详细地描述了根据实施例的信息处理***10的各设备。接下来,参照图8至图12来描述根据实施例的信息处理方法的示例。图8是描绘根据实施例的信息处理方法的示例的流程图。图9至图12是用于对根据实施例的显示示例进行说明的说明图。如图8所示,根据实施例的信息处理方法的示例包括从步骤S101至步骤S106的多个步骤。以下,描述根据实施例的信息处理方法的示例中包括的各步骤的细节。
首先,观看者600从显示在用户终端300的显示单元302上的具有触觉刺激效果的图章700中选择一个具有触觉刺激效果的图章700,并将选择的图章700发送至服务器200。在实施例中,在发送之前,观看者600例如可以轻击所显示的图章700,以再现与和图章700相关联的控制命令对应的触觉刺激,并且在这种情况下,例如,用户终端300进行振动以与该触觉刺激对应。
然后,服务器200获取关于从用户终端300发送的、由观看者600选择的、与控制命令相关联的、具有触觉刺激效果的图章700的信息(步骤S101)。
接下来,服务器200参照分发数据DB 246等,获取与获取的图章700相关联的控制命令中所包括的、用于指定呈现触觉刺激的呈现位置的位置信息(步骤S102)。
此外,服务器200参照分发数据DB 246等,获取与获取的图章700相关联的控制命令中所包括的、用于指定触觉刺激的形式的形式信息(步骤S103)。
然后,服务器200基于在步骤S102以及步骤S103中获取的位置信息以及形式信息,生成波形数据作为用于控制触觉呈现设备100的触觉控制信号(步骤S104)。
接下来,服务器200例如基于艺术家602的属性信息来确定是否向触觉呈现设备100发送生成的触觉控制信号(NG确定)(步骤S105)。
在步骤S105中确定为向触觉呈现设备100发送触觉控制信号的情况下,服务器200向佩戴在艺术家602的身体上的触觉呈现设备100发送生成的触觉控制信号(步骤S106),并且结束处理。另一方面,在步骤S105中确定不向触觉呈现设备100发送触觉控制信号的情况下,服务器200可以经由用户终端300向观看者600通知不发送触觉控制信号。
然后,艺术家602感知经由触觉呈现设备100呈现的触觉刺激,并且采取动作。观看者600可以实时地检查由观看者600已发送的图章700呈现的触觉刺激引起的艺术家602的动作。如果观看者600可以实时地确认由与他/她已发送的图章700有关的触觉刺激引起的动作,则观看者600可以感觉好像他/她与艺术家602直接接触,并且可以感觉与艺术家602的一体感。
注意,在实施例中,不仅由佩戴在艺术家602的身体上的触觉呈现设备100呈现触觉刺激,而且例如,如图9所示,也可以在用户终端300的显示单元302上在艺术家602的图像等上叠加显示显示800等。此时,优选地将显示800叠加显示在呈现触觉刺激的位置处。此外,在实施例中,显示800可以具有与由观看者600选择的具有触觉刺激效果的图章700的设计对应的设计。例如,如果图章700被设计成穿过心脏的箭头,则显示800也可以被设计成穿过心脏的箭头。此外,在实施例中,在呈现触觉刺激时,在用户终端300的显示单元302上显示的图像可以根据该触觉刺激上、下、左和右移动。此外,在实施例中,在由佩戴在艺术家602的身体上的触觉呈现设备100呈现触觉刺激时,可以使发送对应的触觉刺激的观看者600的用户终端300振动,或者,也可以使存在于艺术家602或该观看者600的周围的其他观看者600的用户终端300振动。
此外,在实施例中,在向触觉呈现设备100发送生成的触觉控制信号的情况下,如图10所示,可以在用户终端300的显示单元302、监视器110的显示单元(未示出)等上显示诸如硬币的图标(预定图标)806和该图标806从观看者600侧移动到艺术家602的轨迹808。显示这样的轨迹808允许观看者600意识到由他自己/她自己发送的图章700正被发送至艺术家602。
此外,在实施例中,如图11所示,感知了触觉刺激的艺术家602例如可以在用户终端300的显示单元302等上显示经由分发者终端(未示出)输入的评论810。
此外,在实施例中,在艺术家602未佩戴触觉呈现设备100的情况下,服务器200可以停止发送触觉控制信号,并且在这种情况下,服务器200可以在新检测到艺术家602佩戴的触觉呈现设备100的附接的情况下,发送触觉控制信号。此外,在停止了触觉控制信号的发送的情况下,如图12所示,可以将指示停止的通知804显示在例如用户终端300的显示单元302等上,或者,可以使用户终端300振动以进行通知。
此外,在实施例中,在艺术家602未佩戴触觉呈现设备100的情况下,如图12所示,也可以通过佩戴中控制信号,在用户终端300的显示单元302等上显示动画,该动画示出将触觉刺激呈现给作为艺术家602的替代的化身802。此时,优选地在与呈现触觉刺激的位置对应的化身802上的位置处叠加显示显示800。
如以上所述,根据实施例,可以将与由观看者600选择的具有触觉刺激效果的图章700对应的触觉刺激呈现给艺术家602。因此,在实施例中,如果艺术家602感知被呈现的触觉刺激并且采取动作,则观看者600可以实时地确认由由观看者600已发送的图章700呈现的触觉刺激引起的动作。于是,根据实施例,如果观看者600可以实时地确认与由他/她已发送的图章700有关的触觉刺激引起的动作,则观看者可以感觉好像他/她与艺术家602直接交互,即,观看者600可以获得实时的、交互的且具有附加价值的体验。
<2.6修改示例>
此外,在实施例中,在观看者600的身体上佩戴触觉呈现设备100的情况下,可以向观看者600呈现由艺术家602进行的“投回”,换言之,与由艺术家602选择的具有触觉刺激效果的图章700对应的触觉刺激。根据修改示例,在由观看者600发送的图章700呈现的触觉刺激用作起始点、并且艺术家602将触觉刺激返回给观看者600的情况下,观看者600可以感觉好像他/她与艺术家602直接进行交流。
在修改示例中,例如,如第一实施例那样,当艺术家602选择并且发送具有触觉刺激效果的图章700时,观看者600的触觉呈现设备100也将触觉刺激呈现给观看者600。具体地,在修改示例中,服务器200获取由艺术家602输入的具有触觉刺激效果的图章700,根据与获取的图章700相关联的控制命令生成触觉控制信号,并且将生成的触觉控制信号发送至佩戴在观看者600的身体上的触觉呈现设备100。
此外,在修改示例中,在艺术家602进行的“投回”时观看者600的身体上未佩戴触觉呈现设备100的情况下,可以使用用户终端300而代替触觉呈现设备100。
在修改示例中,例如,服务器200根据与由艺术家602输入的具有触觉刺激效果的图章700相关联的控制命令,控制用户终端300输出声音、振动、或闪烁等。具体地,在修改示例中,在这种情况下,服务器200获取由艺术家602输入的具有触觉刺激效果的图章700,基于与获取的图章700相关联的控制命令和用户终端300的功能信息(属性信息)来生成用于用户终端的控制信号,并将生成的用于用户终端的控制信号发送至用户终端300。
<<3.第二实施例>>
在第一实施例中,观看者600通过选择与预先确定的控制命令相关联的图章700来输入控制命令;然而本公开的实施例并不限于这样的形式,并且例如,观看者600可以自由地编辑触觉刺激(控制命令)本身。以这种方式,如果观看者600可以自由地编辑触觉刺激,则例如观看者600可以实时地确认由观看者600已编辑的触觉刺激引起的艺术家602的动作,并且可以感觉好像他/她与艺术家602直接接触。鉴于此,以下参照图13以及图14描述根据这样的编辑方法的实施例作为第二实施例。图13以及图14是用于对根据本公开的第二实施例的显示示例进行说明的说明图。
首先,观看者600可以在如图13所示的显示在用户终端300的显示单元302上的位置选择画面上执行操作,以输入用于指定呈现触觉刺激的感知位置的位置信息。具体地,如图13所示,在位置选择画面中示出人体模型显示812,并且,进一步在该人体模型显示812上在与触觉呈现设备100的触觉刺激单元106对应的位置处示出多个区域814。观看者600可以使标记816移动于要选择的感知位置对应的区域814上,以设置和输入感知位置。注意,实施例不限于精确定位感知位置并且设置和输入感知位置,并且例如,可以通过跟踪人体模型显示812来设置和输入感知位置的移动路径,或者可以设置和输入具有预定尺寸的感知范围。然后,服务器200的观看者侧输入单元214获取在位置选择画面上输入的位置信息。
在实施例中,即使触觉刺激单元106的安装位置和数目受到限制,也可以根据以下的原理在观看者600所期望的感知位置处呈现触觉刺激。具体地,医学上已知被称为幻觉的错觉现象。幻觉是下述错觉现象:当在皮肤上的不同位置处同时呈现刺激时,人在被呈现的刺激位置之间仅感知到一个刺激。因此,在实施例中,通过使用这样的幻觉,例如当向两个触觉刺激单元106同时呈现触觉刺激时,感知到触觉刺激的位置可以是在两个触觉刺激单元106之间的位置。此外,在实施例中,通过改变多个触觉刺激单元106的输出强度,可以在不改变触觉刺激单元106之间的布置间隔的情况下,扩展可以由多个触觉刺激单元106呈现的触觉刺激的范围。
此外,实施例不限于如图13所示的位置选择画面上的设置和输入。例如,在观看者600的身体上佩戴与触觉呈现设备100相似的背心型的传感器(第一传感器)并且该传感器可以检测由观看者600进行的触摸操作的情况下,观看者600可以对该传感器执行操作,以设置和输入感知位置。服务器200的观看者侧输入单元214获取输入至传感器的位置信息。此外,传感器不限于被佩戴在观看者600的身体上,并且例如可以被佩戴在玩偶(未示出)上。
此外,在实施例中,还可以编辑和设置振动刺激的波形类型、强度、呈现定时、频率、间隔、呈现时间等。例如,可以通过在如图14所示的显示在用户终端300的显示单元302上的编辑画面(形式选择画面)上执行操作,来编辑触觉刺激的波形类型、强度、呈现定时、频率、间隔、呈现时间等。具体地,如图14所示,在编辑画面中的时间轴上显示波形826,并且观看者600可以通过对波形826执行操作来编辑波形826。此外,在编辑画面中显示有光标等,并且观看者600可以通过使光标824移动来设置触觉刺激的强度、频率等(图14例如示出了可以设置投掷具有触觉刺激效果的图章700的速度(speed)和触觉刺激的频率的编辑画面)。服务器200的观看者侧输入单元214获取输入到形式选择画面中的形式信息。
在实施例中,可以基于艺术家602的属性信息预先设置观看者600可以编辑的值范围等。例如,对于男性艺术家602,可以以宽的值范围设置强度,并且对于女性艺术家602,可以以窄的值范围设置强度。
此外,感知灵敏度根据身体的位置而变化,并且此外,感知灵敏度在人与人之间变化。鉴于此,在实施例中,存储指示艺术家602的身体的每个位置的感知灵敏度的数据(例如,灵敏度系数)等作为分发者配置文件244,并且生成单元218参照关于分发者配置文件244的信息并且对于艺术家602视情况适当地调整由观看者600设置的强度等。以这种方式,可以避免由于观看者600编辑的触觉刺激而使艺术家602产生不适。
此外,在实施例中,观看者600也可以将控制命令设置成在满足预定条件的情况下呈现触觉刺激。例如,在满足预定条件的情况下,例如到达控制命令所指定的预定时刻的情况、艺术家602说出控制命令所指定的预定关键字(例如,艺术家602的话语由触觉呈现设备100的麦克风检测到)的情况、或艺术家602执行控制命令所指定的预定操作(例如,艺术家602的移动由摄像装置120检测到)的情况下,服务器200可以将与控制命令有关的触觉控制信号分发至触觉呈现设备100。例如,预定条件可以由观看者600来设置。此外,在实施例中,观看者600也可以设置在呈现触觉刺激时显示的虚拟对象的形式、尺寸、显示速度、动画的显示速度等。
此外,在实施例中,不仅通过如上述的位置选择画面、编辑画面等上的操作来编辑和设置触觉刺激,并且例如,还可以使用内置在用户终端300中的各种传感器(第二传感器)或其他的设备。
在实施例中,例如,观看者600可以通过执行诸如使用户终端300振动的触摸操作或诸如改变用户终端300的保持角度的运动操作,来编辑触觉刺激的波形、强度变化等。具体地,在实施例中,内置于用户终端300中的陀螺仪传感器326和加速度传感器328检测运动操作,并且服务器200的观看者侧输入单元214获取检测到的感测数据。此外,服务器200的生成单元218基于获取的感测数据来生成波形等。
更具体地,例如,观看者600使内置于用户终端300中的陀螺仪传感器326和加速度传感器328检测具有预定节奏的运动。然后,服务器200基于从由陀螺仪传感器326和加速度传感器328检测的感测数据提取的节奏来设置触觉刺激的频率。此外,例如,观看者600对于用户终端300说出具有预定节奏的话音,并且使内置于用户终端300中的麦克风(声音传感器)324检测该话语。然后,服务器200使用由麦克风324检测的感测数据来设置触觉刺激的频率。此外,例如,观看者600使内置于用户终端300中的摄像装置(成像设备)322拍摄他/她的运动的图像。服务器200可以分析由摄像装置322拍摄的图像,提取预定动作,并且通过使用提取的动作来生成触觉刺激的波形数据。
此外,在实施例中,内置于用户终端300中的摄像装置322拍摄身体的一部分的图像,并且服务器200可以根据拍摄的图像中包含的位置来设置感知位置,并且在这种情况下,可以基于通过摄像装置322中包括的ToF传感器(未示出)得到的外部形状信息来识别出身体的位置。此外,此时,可以根据该拍摄的图像的视角设置触觉刺激的强度。例如,针对窄视角将强度设置为高,并且针对宽视角将强度设置为低。此外,在例如摄像装置322拍摄到在观看者600的身体的一部分(例如,手臂)上移动的观看者600的手的图像的情况下,可以将手臂设置为感知位置。
此外,在实施例中,用于进行设置的终端不限于用户终端300,并且用于进行设置的终端例如可以是具有乐器数字接口(MIDI)的电子乐器、转盘、游戏接口(棒型等)。
在多个观看者600意欲同时执行编辑和输入的情况下,服务器200可以将多个观看者600限制成依次执行编辑和输入,或者,可以将多个观看者600限制成根据观看者600已开始编辑的顺序或观看者600已支付的金额的顺序依次执行编辑和输入。此外,服务器200可以向等待他们的轮次以执行编辑和输入的观看者600通知对应观看者600轮到他/她将花费多长时间(参见图16)。
此外,在服务器200参照分发者配置文件244的信息、并且确定由观看者600编辑的触觉刺激是艺术家602拒绝接受的触觉刺激或是与其接近的触觉刺激(NG确定)的情况下,服务器200可以停止发送触觉控制信号。在这种情况下,服务器200可以向对应的观看者600、本信息处理***10的操作者等通知由观看者600编辑的触觉刺激与艺术家602拒绝接受的触觉刺激对应,或可以将金钱返回给对应的观看者600。替选地,在这种情况下,服务器200可以调整感知位置、强度等,使得由观看者600编辑的触觉刺激不再与艺术家602拒绝接受的触觉刺激对应。
此外,在实施例中,在观看者600意欲检查由他/她自己编辑的触觉刺激的情况下,观看者600可以在向由艺术家602佩戴的触觉呈现设备100发送之前检查触觉刺激。
例如,在视听者600的身体上佩戴触觉呈现设备100的情况下,服务器200向该触觉呈现设备100发送和与编辑的触觉刺激有关的触觉控制信号相同的触觉控制信号,这使得观看者600能够经由被观看者600佩戴的触觉呈现设备100检查由他/她自己编辑的触觉刺激。此外,在观看者600的身体上未佩戴触觉呈现设备100的情况下,用户终端300可以用于该检查。在这种情况下,服务器200基于用户终端300的功能信息(属性信息)生成和与编辑的触觉刺激有关的触觉控制信号对应的控制信号(用户终端控制信号),并且将该控制信号发送至用户终端300。然后,用户终端300可以根据接收到的控制信号从扬声器(声音输出设备)306输出声音,使光在显示单元(闪烁设备)302中闪烁或使振动设备(未示出)振动,这使得观看者600能够进行检查。
此外,在实施例中,由观看者600编辑的触觉刺激可以作为具有触觉刺激效果的图章700在多个观看者600之间交换。
<<4.第三实施例>>
同时,如作为用于对本公开的第三实施例进行说明的说明图的图15所示,有时多个观看者600向一个艺术家602同时地发送具有触觉刺激效果的图章700。在这种情况下,在根据同时发送的图章700向艺术家602同时呈现多个触觉刺激的情况下,艺术家602可能体验由于多个触觉刺激而引起的不适。此外,如果同时给予触觉刺激,则艺术家602不能个别地感知触觉刺激,并且不能对于每个触觉刺激采取动作。这使得观看者600难以经由观看者600已发送的图章700引起的触觉刺激而感觉好像他/她与艺术家602直接交互。
鉴于此,在本公开的第三实施例中,为了避免不适和不能感知个别的触觉刺激的状况,在多个观看者600同时发送多个具有触觉刺激效果的图章700的情况下,执行如以下描述的处理。参照图16至图20描述根据实施例的处理。图16是用于对根据本公开的第三实施例的显示示例进行说明的说明图,并且图17至图20是用于对根据本公开的第三实施例进行说明的说明图。
例如,在实施例中,如图17所示,在多个观看者600发送多个控制命令702(或者,图章700)的情况下,服务器200暂时地存储控制命令702,按照控制命令702被输入的顺序(预定规则)依次执行处理,生成触觉控制信号,并且将触觉控制信号发送至触觉呈现设备100。在实施例中,在多个观看者600发送多个控制命令702的情况下,服务器200可以暂时停止获取多个控制命令702,并且按照控制命令702被输入的顺序依次获取控制命令702。在这种情况下,如图16所示,服务器200可以经由用户终端300的显示单元302为等待轮到他/她的观看者600显示用于向观看者600通知观看者600轮到他/她将花费多长时间的显示818。
如上所述,在实施例中,由于将触觉刺激依次呈现给艺术家602,因此艺术家602可以避免体验不适,并且由于可以个别地感知触觉刺激,因此可以对每个触觉刺激采取动作。
此外,在实施例中,如图18所示,在预定时间内获取到多个控制命令702(或者,图章700)的情况下,服务器200可以根据获取的控制命令702的数目来调整例如触觉刺激的强度等,生成作为一个触觉刺激的触觉控制信号,并且将触觉控制信号发送至触觉呈现设备100。例如,服务器200使触觉刺激的强度随着获取的相同的控制命令702(例如,感知位置以及波形类型等相同)的数目增加而增强。除了简单地根据获取的控制命令702的数目使强度增强之外,还可以考虑艺术家602的负担等,设置强度的上限或通过减法来对强度进行处理。
此外,在实施例中,根据获取的控制命令702的数目,服务器200可以改变触觉刺激的波形,可以调整呈现时间,或者可以调整感知位置,并且本公开不特别限于该示例。此外,在实施例中,例如基于连续获取的控制命令702所指定的感知位置,可以将感知位置调整为一个感知位置,并且可以生成作为一个触觉刺激的触觉控制信号。更具体地,在连续获取的控制命令702指定右肩和左肩作为感知位置的情况下,服务器200在生成的触觉控制信号中,设置处于右肩与左肩之间的颈部线作为感知位置。
此外,在实施例中,如图19所示,服务器200可以按照与在输入控制命令702(或者,图章700)时由观看者600支付的金额对应的顺序(预定规则)执行处理。例如,服务器200优先处理在输入控制命令702时支付的金额高的控制命令702。即,由于观看者600购买与艺术家602的交互的优先级,因此意欲早些与艺术家602交互的观看者600支付更多的金钱。换言之,处理的该顺序可以促使观看者600支付更多的金钱。
此外,在实施例中,如图20所示,在预定时间内获取多个相同的控制命令702(或者,图章700)的情况下,服务器200可以根据获取的控制命令702的顺序例如依次使触觉刺激的呈现的强度增强。以这种方式,可以鼓励多个观看者600之间的协作或交互,从而引起获取附加价值更高的体验。
此外,在实施例中,服务器200可以根据多个观看者600的多个控制命令702(或者,图章700)的发送的同步性来调整触觉刺激。更具体地,在从不同的观看者600同步发送具有相同内容的控制命令702(所谓的由多个观看者600执行“任务”)的情况下,服务器200可以根据同步性的程度来调整触觉刺激的强度。此外,在实施例中,服务器200可以仅在从不同的观看者600获取的具有相同内容的控制命令702的数目超过预定数目的情况下(预定条件),生成并且发送触觉控制信号。替选地,服务器200可以仅在从不同的观看者600获取的多个控制命令702的种类是预定种类的情况下,生成并且发送触觉控制信号。
此外,在实施例中,在预定时间内连续获取到用于指定多个相同的感知位置的控制命令702(或者,图章700)、并且将这些控制命令702按原样作为多个触觉刺激直接呈现给艺术家602的情况下,艺术家602可能体验由于多个触觉刺激引起的不适。鉴于此,在实施例中,服务器200(具体地,观看者侧输入单元214)可以仅接收并且处理指定与紧之前呈现的感知位置分离预定距离的感知位置的控制命令702。
此外,在实施例中,例如在多个观看者600发送多个控制命令702(或者,图章700)的情况下,服务器200基本上按照控制命令702被输入的顺序依次获取控制命令702;然而,在下次获取的控制命令702的金额(输入控制命令702时支付的金额)等于或大于预定金额的情况下,服务器200可以在中途停止对前次获取的控制命令702的处理,并且优先地处理等于或大于预定金额的下一个控制命令702。替选地,在实施例中,在多个观看者600发送多个控制命令702(或者,图章700)的情况下,服务器200基本上按照控制命令702被输入的顺序依次获取控制命令702;然而,服务器200可以将先前的控制命令702的金额与下一个控制命令702的金额进行比较,并且在下一个控制命令702的金额等于或低于先前的控制命令702的金额的情况下,服务器200可以进行先前的控制命令702的处理。
此外,在实施例中,在下一个控制命令702的金额比先前的控制命令702高的情况下,服务器200可以在中途停止先前获得的控制命令702的处理,并且优先地处理下一个控制命令702。此外,在实施例中,在下一个控制命令702的处理期间发送了比该下一个控制命令702更贵的控制命令702(该下一个控制命令702之后的控制命令702)的情况下,服务器200可以在中途停止该下一个控制命令702的处理,并且优先处理该下一个控制命令702之后的控制命令702。
<<5.第四实施例>>
此外,在本公开的第四实施例中,可以根据触觉呈现设备100与艺术家602的身体之间的接触率、感知位置、观看者600或艺术家602的属性信息等动态地确定具有触觉刺激效果的图章700的价格。在实施例中,由于根据这样的条件确定图章700的价格,而根据由观看者600感受的体验的价值来确定图章700的价格,这可以说服观看者600进行图章700的购买并且使其满意图章700的购买。
<5.1服务器200a的详细配置>
首先,参照图21,描述根据实施例的服务器200a的详细配置的示例。图21是示出根据实施例的服务器200a的功能配置的示例的图。如图21所示,服务器200a如第一实施例那样主要包括通信单元202、控制单元210a以及存储单元240a。以下,依次描述服务器200a的各个功能块;然而,由于通信单元202与第一实施例的通信单元202是共同的,因此这里省略其描述。
(控制单元210a)
控制单元210a是控制器,并且如图21所示,控制单元210a如第一实施例的那样包括GUI控制单元212、观看者侧输入单元214、分发者侧输入单元216(在图21中未示出)、生成单元218和输出控制单元(第一分发单元)222,并且进一步包括价格确定单元224以及结算单元226。注意,由于GUI控制单元212、观看者侧输入单元214、分发者侧输入单元216、生成单元218以及输出控制单元222与第一实施例的那些单元是共同的,因此这里省略其描述,并且仅描述价格确定单元224以及结算单元226。
价格确定单元224
价格确定单元224基于与获取的图章700相关联的控制命令702中包括的位置信息和形式信息、从分发者侧输入单元216(在图21中未示出)获取的触觉呈现设备100与艺术家602的身体之间的接触率、或从存储单元240a获取的观看者600或艺术家602的属性信息,来确定图章700(或者,针对控制命令702的输入)的价格。此时,价格确定单元224可以参考存储在稍后描述的存储单元240a中的价格数据DB 248中的信息来确定价格。
结算单元226
例如,在结算单元226经由通信单元202从用户终端300接收到结算命令的情况下,结算单元226基于由价格确定单元224确定的价格,进行与图章700(或者,针对控制命令702的输入)的购买有关的结算。
(存储单元240a)
如图21所示,存储单元240a如第一实施例那样包括观看者配置文件242、分发者配置文件244以及分发数据DB 246,并且进一步包括用于存储用于确定图章700(或者,针对控制命令702的输入)的价格的信息的价格DB 248。
尽管以上具体地描述了根据实施例的服务器200a的详细配置的示例,但根据实施例的服务器200a的详细配置不限于图21所示的示例,并且例如,服务器200a可以如第一实施例那样进一步包括确定单元220。
<5.2信息处理方法>
以上描述了根据实施例的服务器200a。接下来,参照图22来描述根据实施例的信息处理方法的示例。图22是根据实施例的信息处理方法的示例的流程图。如图22所示,根据实施例的信息处理方法包括从步骤S201至步骤S208的多个步骤。以下,描述根据实施例的信息处理方法中包括的各步骤的细节。
首先,观看者600从显示在用户终端300的显示单元302上的具有触觉刺激效果的图章700中选择一个具有触觉刺激效果的图章700,并将选择的图章700发送至服务器200a。然后,如第一实施例的步骤S101那样,服务器200a获取从用户终端300发送的、由观看者600选择的、与控制命令702相关联的、具有触觉刺激效果的图章700的信息(步骤S201)。
接下来,服务器200a参考价格数据DB 248的信息,并且根据获取的控制命令702中包括的位置信息和形式信息、触觉呈现设备100与艺术家602的身体之间的接触率、或观看者600或艺术家602的属性信息来确定图章700的价格(步骤S202)。稍后描述价格的确定的细节作为示例。
然后,在从用户终端300接收到结算命令的情况下,服务器200a基于在步骤S202中确定的价格,进行与图章700的购买有关的结算(步骤S203)。此时,服务器200a优选地向观看者600通知结算处理的可用性。
接下来,服务器200a执行从步骤S204至步骤S208的处理,其与图8所示的第一实施例中的步骤S102至步骤S106相同,并且因此这里省略其描述。注意,在实施例中,可以仅在执行图22的步骤S207(NG确定)并且确定向触觉呈现设备100发送生成的触觉控制信号的情况下,执行步骤S203中的结算处理,即,也可以不按照图22所示的顺序执行各步骤。
<5.3示例>
以上描述了实施例。接下来,参照示出了具体示例的图23至图25,更具体地描述实施例的示例。图23至图25是用于对根据实施例的实施例的显示示例进行说明的说明图。注意,以下示例仅是实施例的示例,并且实施例并不限于以下示例。
(示例1)
同时,根据艺术家602的体型,触觉呈现设备100的触觉刺激单元106与艺术家602的身体之间的接触可能为差,并且可能不像观看者600期望的那样呈现触觉刺激。而且,在以统一价格设置如期望那样呈现的触觉刺激和未如期望那样呈现的触觉刺激的情况下,这可能引起观看者600的不公平感。鉴于此,在示例中,为了避免这样的不公平,以不同的价格设置如期望那样呈现的触觉刺激和未如期望那样呈现的触觉刺激。具体地,在示例中,服务器200a基于触觉呈现设备100的用于检测佩戴状态的佩戴状态检测传感器(例如,纽扣型的传感器、压力传感器等)(未示出)的感测数据,来确定图章700(或者,针对控制命令702的输入)的价格。例如,在与选择的图章700相关联的控制命令702包括用于使用具有与艺术家602的身体的高接触率的触觉刺激单元106的命令的情况下,服务器200a将该图章700的价格设置为较高。另一方面,在控制命令702包括用于使用具有与艺术家602的身体的低接触率的触觉刺激单元106的命令的情况下,服务器200a将该图章700的价格设置为较低。假设在示例中,佩戴状态检测传感器的感测数据例如可以在作为触发检测到艺术家602佩戴了触觉呈现设备100的情况下被导入到服务器200a中。
(示例2)
在示例中,由于每个艺术家602具有对触觉刺激的感知灵敏度高的感知位置和对触觉刺激的感知灵敏度低的感知位置,因此服务器200a根据每个感知位置的感知灵敏度的差异,确定在每个感知位置处呈现的触觉刺激的图章700的价格。例如,在与选择的图章700相关联的控制命令702包括用于使用存在于感知灵敏度高的感知位置处的触觉刺激单元106的命令的情况下,服务器200a将该图章700的价格设置为较高。另一方面,在控制命令702包括用于使用存在于感知灵敏度低的感知位置处的触觉刺激单元106的命令的情况下,服务器200a将该图章700的价格设置为较低。鉴于此,在示例中,服务器200a将指示艺术家602的每个感知位置的感知灵敏度的指标等存储为分发者配置文件244,并基于存储的指标来确定图章700(或者,针对控制命令702的输入)的价格。此外,示例不限于根据感知灵敏度确定价格,并且例如,可以根据图章700或触觉刺激(波形、感知位置等)在观看者600或艺术家602之间的流行度(其可以基于选择的频率等来估计)来确定价格,并且本公开不特别限于该示例。
(示例3)
在示例中,服务器200a根据观看者600的属性信息(例如,购买记录、会员等级、会员课程等),来确定图章700(或者,针对控制命令702的输入)的价格。例如,在示例中,服务器200a将到目前为止观看者600为购买图章700支付的金钱的金额与观看者600的标识信息相关联地存储为观看者配置文件242,并且基于存储的总金额,确定由观看者600新购买的图章700(或者,针对控制命令702的输入)的价格。在示例中,观看者600到目前为止支付的金钱越多,服务器200a例如可以将图章700的购买价格设置得越低,或者替选地,观看者600到目前为止支付的金钱越多,服务器200a可以将图章700的购买价格设置得越高。此外,示例不限于根据到目前为止购买的金额确定价格,并且例如,可以根据基于到目前为止购买的金额设置的会员等级或在购买图章之前观看者600订阅的会员课程(例如,试听课程、新会员课程、高级课程等)来确定价格,并且本公开不特别限于该示例。此时,服务器200a可以在用户终端300的显示单元302上显示如图23所示的画面作为图章700的选择画面。该画面例如示出了图章700的价格、观看者600的会员等级以及购买根据他/她的购买记录给予观看者600的购买积分。
此外,在示例中,可以不仅根据价格而且还根据观看者600的属性信息(例如,购买记录、会员等级、会员课程等)来确定观看者600能够选择的触觉刺激的波形类型、强度、感知位置等的范围。例如,观看者600到目前为止支付的金钱越多,服务器200a将能够选择的触觉刺激的上限设置得越大。此外,在示例中,服务器200a可以被设置成不仅根据能够选择的范围而且还根据观看者600的属性信息,给出可以发送图章700的顺序的优先级。例如,观看者600到目前为止支付的金额越大,服务器200a给出可以发送图章700的顺序越优先。此时,服务器200a可以在用户终端300的显示单元302上显示如图24所示的画面作为图章700的选择画面。在该画面上例如显示有用于使位置和顺序升级的按钮,并且例如在观看者600对用于将位置升级的按钮执行了操作的情况下,画面转变为如图25所示的位置选择画面。在位置选择画面上,示出了人体模型显示812,并且在该人体模型显示812上示出了与观看者600能够选择的触觉刺激单元106对应的区域814,并且还显示其价格。观看者600可以通过在检查位置选择画面上的价格的同时对区域814执行操作,来选择期望的触觉位置。在如以上所述的示例中,例如,可以提供用于优先对待购买了大量图章700或支付了大量金钱的观看者600的机制,这可以进一步激励观看者600购买图章700。
<<6.第五实施例>>
此外,在实施例中,可以在多个观看者600之间交换或由观看者600收集具有触觉刺激效果的图章700,这可以进一步激励观看者600购买图章700。
具体地,在实施例中,例如,在艺术家602的演出视频的流传输期间,自动地将具有触觉刺激效果的图章700的选择画面或图章700本身分发至观看者600的用户终端300。于是,鼓励观看者600在流传输期间将图章700发送至艺术家602。此外,可以向观看者600分发通常不分发的、有价值的具有触觉刺激效果的图章700(所谓的“稀有图章”),上述通常不分发意味着限制分发的位置以及日期和时间(例如,限制为艺术家在现场音乐会演出时的日期和时间)。以这种方式,观看者600例如为了获得稀有且有价值的图章700而访问现场音乐会,这提高了现场音乐会的吸引消费者的能力。注意,仅在流传输期间,观看者600可以能够通过通信连接而自动地获取稀有图章,或者,可以能够通过执行诸如购买过程的处理来获取稀有图章,并且本公开不特别限于该示例。
此外,可以在多个观看者600之间经由社交联网服务(SNS)交换经由这样的图章选择画面获取的具有触觉刺激效果的图章700,或可以将收集的图章700的数目和种类作为排名来公开。例如,在实施例中,服务器200将关于观看者600到目前为止获取的图章700的信息与该观看者600的标识信息相关联地存储为观看者配置文件242。此外,在实施例中,在可以收集预定种类的具有触觉刺激效果的图章700的情况下(在满足预定条件的情况下),服务器200可以将新的具有触觉刺激效果的图章700(例如,“稀有图章”)给予观看者600。以这种方式,观看者600为了获得有价值的图章700而收集和购买预定种类的图章,这可以进一步激励观看者600购买图章700。
<<7.第六实施例>>
此外,在实施例中,可以通过添加游戏元素,进一步激励观看者600购买具有触觉刺激效果的图章700。
<7.1服务器200b的详细配置>
首先,参照图26来描述根据实施例的服务器200b的详细配置。图26是示出根据实施例的服务器200b的功能配置的示例的图。如图26所示,服务器200b如第一实施例以及第四实施例那样主要包括通信单元202、控制单元210b以及存储单元240a。以下,依次描述服务器200b的各个功能块;然而,由于通信单元202以及存储单元240a与第一实施例以及第四实施例的那些单元是共同的,因此这里省略其描述。
(控制单元210b)
控制单元210b是控制器,并且如图26所示,控制单元210b如第一实施例那样包括GUI控制单元212、观看者侧输入单元214、分发者侧输入单元216、生成单元218、以及输出控制单元(第一分发单元)222,并且进一步包括积分赋予单元228。注意,由于GUI控制单元212、观看者侧输入单元214、分发者侧输入单元216、生成单元218、以及输出控制单元222与第一实施例的单元是共同的,因此省略其描述,并且以下仅描述积分赋予单元228。
积分赋予单元228
积分赋予单元228经由分发者侧输入单元216获取由感知了触觉刺激的艺术家602输入的对该触觉刺激的评价,并根据所获取的评价对观看者600赋予积分。注意,将赋予的积分与观看者600的标识信息相关联地存储在存储单元240a的观看者配置文件242中。
<7.2实施例>
以上描述了根据实施例的服务器200b。接下来,参照图27以及图28描述实施例。图27以及图28是用于对根据实施例的显示示例进行说明的说明图。
这里,例如,假设下述游戏,在该游戏中,两个观看者600向一个艺术家602投掷(发送)具有触觉刺激效果的图章700,并且为了评价而彼此竞争。首先,艺术家602对由投掷的图章700引起的触觉刺激进行评价,并且服务器200b根据该评价向每个观看者600给予积分。然后,服务器200b可以根据赋予的积分的数目来确定两个观看者600的胜败,并且在用户终端300的显示单元302上显示如图27所示的画面来作为指示胜败结果的画面。此外,如图28所示,在一系列这样的比赛之后,服务器200b可以示出基于赋予给每个观看者600的积分的总数目的排名。
此外,在实施例中,由艺术家602进行的评价不限于由艺术家602手动输入的评价,并且例如可以是基于附接至艺术家602的身体的生物信息传感器(未示出)的感测数据的评价。例如,由触觉刺激引起的艺术家602的心率的增加量越大,给予越高的评价。注意,在实施例中,由艺术家602的生物信息传感器得到的感测数据例如可以被显示在用户终端300上。
如以上所述,在实施例中,可以通过添加游戏元素,进一步激励购买具有触觉刺激效果的图章700。
<7.3修改示例1>
此外,在实施例中,包括艺术家602的游戏可以被配置如下:不仅观看者600投掷出具有触觉刺激效果的图章700,而且艺术家602响应于投掷的图章700执行预定操作,在上述情况下,不呈现与该图章700有关的触觉刺激。在下文中,描述与这样的游戏有关的修改示例。
(服务器200c的详细配置)
首先,参照图29,描述根据修改示例的服务器200c的详细配置。图29是示出根据修改示例的服务器200c的功能配置的示例的图。如图29所示,服务器200c如第一实施例那样主要包括通信单元202、控制单元210c以及存储单元240。以下,依次描述服务器200c的各个功能块;然而,由于通信单元202和存储单元240与第一实施例的单元是共同的,因此省略其描述,并且仅描述控制单元210c。
控制单元210c是控制器,并且如图29所示,控制单元210c如第一实施例那样包括GUI控制单元212、观看者侧输入单元214、分发者侧输入单元216、生成单元218、确定单元220以及输出控制单元(第一分发单元)222。此外,在修改示例中,分发者侧输入单元216例如获取触觉呈现设备100的各种传感器的感测数据等,并且将感测数据等输出至确定单元220。
(信息处理方法)
以上描述了根据修改示例的服务器200c。接下来,参照图30以及图31描述根据修改示例的信息处理方法。图30是根据实施例的修改示例的信息处理方法的示例的流程图,并且图31是用于对根据实施例的修改示例的显示示例进行说明的说明图。如图30所示,根据修改示例的信息处理方法包括从步骤S301至步骤S308的多个步骤。以下,描述根据修改示例的信息处理方法中包括的各步骤的细节。
首先,服务器200c执行从步骤S301至步骤S304的处理,其与图8所示的第一实施例中的步骤S101至步骤S104相似,并且因此这里省略其描述。
接下来,服务器200c例如以增强现实(AR)在用户终端300的显示单元302以及监视器110的显示单元(未示出)上显示如图31所示的硬币的图标和该图标从观看者600侧移动到艺术家602的轨迹808(步骤S305)。注意,在修改示例中,观看者600可以在投掷具有触觉刺激效果的图章700之前设置轨迹808和显示轨迹808的速度,或者,可以在显示之后修改轨迹808和显示轨迹808的速度。此外,在修改示例中,可以在AR显示时,从用户终端300或监视器110的扬声器(未示出)等输出预定声音。
然后,艺术家602在视觉上识别在监视器110的显示单元(未示出)等上显示的轨迹808,并且响应于此进行动作(例如,从根据轨迹808估计的图标的下落位置逃离、对预定终端(例如,监视器110)执行触摸操作、说出关键字等)。接下来,服务器200c获取关于艺术家602的动作的感测数据(步骤S306)。例如,艺术家602的逃离动作可以由摄像装置120检测,触摸操作可以由监视器110的触摸面板(未示出)检测,并且艺术家602的话语可以由触觉呈现设备100的麦克风(未示出)检测。
接下来,服务器200c基于在步骤S306中获取的感测数据来确定是否在触觉呈现设备100中呈现触觉刺激(步骤S307)。例如,在艺术家602在预定定时处执行逃离操作的情况下,在艺术家602的触摸操作的定时是预定定时的情况下,或者在艺术家602的话语是预定关键字(例如,如图31所示,消失)的情况下,服务器200c确定不呈现触觉刺激。此外,在修改示例中,在同时发送预定数目或更多个图章700(或者,控制命令702)的情况下,甚至在检测到艺术家602的预定运动的情况下,也可以呈现触觉刺激。此外,在修改示例中,当观看者600投掷具有触觉刺激效果的图章700时,可以输入或者选择期望关键字,并且可以将该关键字显示在监视器110上。在这种情况下,在检测到艺术家602正确地说出了在监视器110上显示的关键字的情况下,服务器200c可以确定不呈现或者呈现触觉刺激。以这种方式,根据修改示例,观看者600不仅可以具有诸如观看艺术家602的演出的单向体验,还可以具有诸如与艺术家602交互的、实时的、交互的且附加价值更高的体验。
然后,服务器200c执行步骤S308的处理,其与图8所示的第一实施例中的步骤S106相似,并且因此这里省略其描述。
在修改示例中,不仅观看者600而且艺术家602也可以玩一种虚拟游戏,例如,类似躲避球的游戏,相互投掷图章700并避开所投掷的图章700。结果,观看者600可以感觉好像他/她以令人激动的方式与艺术家602直接交互,并且可以获得附加价值更高的体验。
注意,修改示例不限于在检测到艺术家602的预定运动的情况下不呈现触觉刺激,并且可以在检测到艺术家602的预定运动的情况下,改变触觉刺激的强度等。此外,在不呈现触觉刺激的情况下,可以经由用户终端300输出预定声音(例如,消失音等),或者,可以使用户终端300振动。此外,在修改示例中,服务器200c可以根据图章700的种类、艺术家602的属性信息、观看者600的属性信息等的组合,来确定是否呈现触觉刺激。
<7.4修改示例2>
此外,可以通过以下配置来进一步增强游戏元素,在该配置中,当观看者600投掷具有触觉刺激效果的图章700时,可以考虑到偶然性和技巧而确定要投掷的图章700的内容。参照图32描述这样的修改示例。图32是用于对根据实施例的修改示例的显示示例进行说明的说明图。
在修改示例中,例如,假设根据在投掷具有触觉刺激效果的图章700时的水平计的值,来确定触觉刺激的强度。具体地,如图32所示,在用户终端300的显示单元302上显示用于指定触觉刺激的强度的光标820的动画。在该动画中,假设光标820总是左右移动。此外,例如在显示单元302上显示有诸如弓和箭的图标822。观看者600可以通过对该图标822进行滑动并将指尖从画面释放,来投掷图章700。然后,服务器200c的观看者侧输入单元214获取与在执行释放操作时的光标820的位置对应的强度,作为与投掷的图章700有关的触觉刺激的强度。
在修改示例中,因为光标820总是左右移动,因此要设置的强度是偶然确定的。此外,为了将强度设置到期望水平,观看者600需要基于光标820的移动仔细地执行对图标822的操作,这需要技巧。因此,在观看者600不能将强度设置到期望水平的情况下,例如,观看者600一再反复投掷图章700,直至可以设置期望水平。即,由于修改示例提供具有技巧和偶然性二者的游戏,因此可以向观看者600提供更有娱乐性的体验。
注意,修改示例不限于对图标822的操作,并且例如,可以根据由观看者600进行的、用于改变用户终端300的保持角度的运动操作的速度来设置触觉刺激的强度等,并且本公开不特别限于该示例。此外,在修改示例中,光标820不限于动画,并且可以是可以响应于由观看者600进行的操作而移动的光标820。在这种情况下,服务器200c的观看者侧输入单元214获取与光标820响应于观看者600的操作而移动到的位置相对应的强度,作为与投掷的图章700有关的触觉刺激的强度。
<7.5修改示例3>
在本公开的实施例以及修改示例中,在设置在触觉呈现设备100的肩部部分上的麦克风(未示出)中,有时存在由于触觉呈现设备100的触觉刺激单元106的振动引起的噪声。鉴于此,以下描述用于消除麦克风中的由于触觉刺激单元106的振动引起的噪声的修改示例。
具体地,服务器200根据给予触觉刺激单元106的波形来预测噪声。例如,服务器200可以通过参考经由预先对触觉刺激单元106施加各种波形并对生成的噪声进行机器学习而获得的数据库(DB)(未示出),来预测噪声。于是,服务器200可以通过从由设置在触觉呈现设备100的肩部部分上的麦克风(未示出)收集的声音中消除预测的噪声,来避免由于噪声引起的声音的劣化。
注意,在修改示例中,服务器200可以根据设置在触觉呈现设备100的肩部部分上的麦克风(未示出)与触觉刺激单元106之间的距离来调整要消除的波形。此外,例如在艺术家602在工作室中演出的情况下,麦克风可以收集在工作室的墙壁上反射的噪声。在这种情况下,服务器200可以根据设置在触觉呈现设备100的肩部部分上的麦克风与墙壁之间的距离来调整要消除的波形。
此外,在修改示例中,作为用于消除由触觉刺激单元106的振动引起的噪声的手段,可以使麦克风(未示出)具有方向性,以使得麦克风集中地收集艺术家602的声音,或者,可以限制麦克风可以收集声音的频率区域,以避免收集由触觉刺激单元106的振动引起的噪声。
<<8.本公开的信息处理***10的修改示例>>
此外,参照图33至图38描述根据本公开的实施例的信息处理***10的修改示例。图33至图38是示出根据本公开的实施例的修改示例的信息处理***10的示意性配置的示例的***图。
首先,在图33所示的信息处理***10中,图3所示的服务器200通过触觉服务器250a、分发数据编辑服务器250b、直播服务器250c以及触觉服务器250d来实现。
具体地,如图33所示,在根据实施例的信息处理***10中,例如,在艺术家602侧布置有触觉呈现设备(触觉背心)100、驱动放大器/接口140、扬声器116、监视器110、麦克风124以及摄像装置120。此外,在信息处理***10中,例如,在艺术家602侧与观看者600侧之间设置有触觉服务器(信息处理设备)250a、分发数据编辑服务器250b、直播服务器(另一信息处理设备)250c以及触觉服务器250d。此外,在信息处理***10中,在观看者600侧设置有作为用户终端300的示例的智能电话或平板终端。包括在信息处理***10中的各个设备可以经由诸如有线/无线局域网(LAN)、Wi-Fi(注册商标)、Bluetooth(注册商标)、移动通信网络(长期演进(LTE)和5G(第5代移动通信***))的各种通信网络发送和接收数据。注意,信息处理***10中包括的各设备的数目并不限于图33中所示的数目,并且还可以更大。此外,信息处理***10也可以包括图33中未示出的设备。例如,信息处理***10可以包括通用个人计算机(PC)、游戏机、蜂窝电话、便携式媒体播放器、扬声器、投影仪、显示器(数字标牌等)、诸如耳机、智能眼镜或智能手表的可穿戴设备。
注意,在图33所示的信息处理***10中,例如,管理触觉刺激的呈现的触觉服务器250a可以由与分发数据编辑服务器250b和直播服务器250c的业务运营商不同的业务运营商来操作,其中,分发数据编辑服务器250b具有用于编辑要分发给观看者600的视频和声音的内置应用,直播服务器250c管理向观看者600的分发。以下是根据实施例的信息处理***10中包括的驱动放大器/接口140、监视器110、摄像装置120、触觉服务器250a、分发数据编辑服务器250b、直播服务器250c以及触觉服务器250d的简要描述。
(驱动放大器/接口140)
驱动放大器/接口140是在触觉呈现设备100与触觉服务器250a之间发送和接收触觉控制信号的接口。例如,驱动放大器/接口140从触觉呈现设备100获取触觉呈现设备100的配置文件信息(功能信息等),或将由触觉服务器250a生成的触觉控制信号进行转换和放大,并且将信号发送至触觉呈现设备100。
(监视器110)
监视器110例如可以为艺术家602显示由稍后描述的摄像装置120拍摄的艺术家602的视频,并且,监视器110还可以在艺术家602的图像上叠加显示文本、图标或动画等。例如,监视器110由液晶显示器(LCD)设备和有机发光二极管(OLED)设备实现。此外,在实施例中,监视器110的显示单元(未示出)可以设置为与输入单元(未示出)集成的单元,并且在这种情况下,输入单元由叠加在显示单元上的触摸面板来实现。此外,在实施例中,监视器110可以设置有用于向艺术家602输出声音的扬声器116。
(摄像装置120)
摄像装置120是从一个或多个视点拍摄艺术家602的图像的一个或更多个可见光摄像装置,并且将由摄像装置120拍摄的视频经由触觉服务器250a、分发数据编辑服务器250b以及直播服务器250c发送至观看者600的用户终端300。摄像装置120可以拍摄艺术家602的周围环境或者存在于艺术家602周围的真实对象的图像。具体地,摄像装置120包括具有图像拾取透镜、光圈、变焦透镜以及聚焦透镜的透镜***、以及使该透镜***执行聚焦操作和变焦操作的驱动***。摄像装置120还包括对由透镜***拍摄的成像光进行光电转换以生成成像信号的固态成像元件阵列。固态成像元件阵列例如可以由电荷耦合器件(CCD)传感器阵列或互补金属氧化物半导体(CMOS)传感器阵列实现。
(触觉服务器250a)
触觉服务器250a可以经由直播服务器250c接收由观看者600输入的具有触觉刺激效果的图章(控制命令)700,根据该图章700生成触觉控制信号,并且将生成的触觉控制信号发送至触觉呈现设备100。每个具有触觉刺激效果的图章700与每个预定控制命令702相关联,并且每个控制命令702包括用于指定呈现振动刺激的感知位置的信息(位置信息)、以及用于指定振动刺激的例如波形类型和强度的信息(形式信息)。此外,控制命令702可以包括标识信息(ID),用于指定触觉呈现设备100的触觉刺激单元(未示出)以及上述形式信息。具体地,触觉服务器250a生成要输入至触觉呈现设备100的各个触觉刺激单元106以在控制命令702所指定的感知位置处以该控制命令所指定的强度和波形呈现振动刺激的触觉控制信号(波形数据),并且将触觉控制信号发送至触觉呈现设备100。
(分发数据编辑服务器250b)
分发数据编辑服务器250b可以编辑经由触觉服务器250a接收到的由摄像装置120得到的视频,并且可以编辑经由触觉服务器250a接收到的由麦克风124得到的声音。分发数据编辑服务器250b可以经由直播服务器250c进一步将编辑的视频以及声音数据发送至用户终端300,并且可以经由触觉服务器250a将编辑的视频以及声音数据输出至扬声器116以及监视器110。例如,分发数据编辑服务器250a可以通过在由摄像装置120拍摄的艺术家602的图像上叠加由观看者600输入的图章700的图像或图章700所关联的视频效果,来生成用于分发的视频数据。
(直播服务器250c)
直播服务器250c可以向用户终端300分发艺术家602等的图像、用于选择具有触觉刺激效果的图章700的图像等。例如,直播服务器250c可以经由web应用程序接口(web API)进行认证,并且监视由观看者600发送的具有触觉刺激效果的图章700等。
(触觉服务器250d)
触觉服务器250d与每个图章700的标识信息(ID)相关联地存储预先生成的触觉数据库(振动波形图案等)。此外,触觉服务器250d例如可以存储诸如触觉呈现设备100的触觉刺激单元106的数目、其位置、频率特性和最大输入电压的信息,作为触觉呈现设备100的配置文件信息。
此外,在实施例中,触觉服务器250a、分发数据编辑服务器250b、直播服务器250c以及触觉服务器250d可以由单个设备或多个设备实现,并且本公开不特别限于该示例。稍后描述细节。
此外,在图34所示的信息处理***10中,触觉服务器250a还具有上述的分发数据编辑服务器250b的功能。在这种情况下,管理触觉刺激的呈现的业务运营商可以不同于管理分发的业务运营商。
此外,在图35所示的信息处理***10中,与图34的示例不同,存储在触觉服务器250d中的信息经由直播服务器250c被提供给触觉服务器250a。
此外,在图36所示的信息处理***10中,存储在触觉服务器250d中的信息经由直播服务器250c以及分发数据编辑服务器250b被提供给触觉服务器250a。
此外,在图37所示的信息处理***10中,用作服务器200的触觉服务器250a在其外部设置有触觉服务器250d,用作存储单元240的功能的一部分。
此外,在图38所示的信息处理***10中,触觉服务器250d可以与直播服务器250c协作以进行向用户终端300的分发。
<<9.总结>>
如以上所述,在本公开的实施例中,可以将与由观看者600选择的具有触觉刺激效果的图章700对应的触觉刺激呈现给艺术家602。因此,在实施例中,如果艺术家602感知被呈现的触觉刺激并且采取动作,则观看者600可以实时地确认由由观看者600已发送的图章700呈现的触觉刺激引起的动作。于是,根据实施例,如果观看者600可以实时地确认与由他/她已发送的图章700有关的触觉刺激引起的动作,则观看者可以感觉好像他/她与艺术家602直接交互,即,观看者600可以获得实时的、交互的且具有附加价值的体验。
本公开的实施例不仅可应用于直播等,并且例如,还可应用于在SNS上交换的图章700等。在这种情况下,例如,代替触觉呈现设备100,用户终端300可以进行振动,以向已发送图章700的人员提供触觉刺激。
<<10.关于硬件配置>>
根据上述实施例的诸如服务器200的信息处理设备例如由具有图39所示的配置的计算机1000来实现。以下描述了根据本公开的实施例的服务器200的示例。图39是示出实现服务器200的功能的计算机的示例的硬件配置的图。计算机1000包括CPU 1100、RAM 1200、只读存储器(ROM)1300、硬盘驱动器(HDD)1400、通信接口1500、以及输入/输出接口1600。计算机1000的各单元通过总线1050彼此连接。
CPU 1100基于存储在ROM 1300或者HDD 1400中的程序进行操作,以控制各单元。例如,CPU 1100将存储在ROM 1300或HDD 1400中的程序扩展到RAM 1200中,并且执行与各种程序对应的处理。
ROM 1300存储诸如由CPU 1100在计算机1000的启动时执行的基本输入输出***(BIOS)的引导程序、依赖于计算机1000的硬件的程序等。
HDD 1400是非暂态地记录由CPU 1100执行的程序、由程序使用的数据等的计算机可读记录介质。具体地,HDD 1400是记录作为程序数据1450的示例的根据本公开的信息处理程序的记录介质。
通信接口1500是用于计算机1000连接至外部网络1550(例如,因特网)的接口。例如,CPU 1100经由通信接口1500从另一设备接收数据,或将由CPU 1100生成的数据发送至另一设备。
输入/输出接口1600是用于将输入/输出设备1650连接至计算机1000的接口。例如,CPU 1100经由输入/输出接口1600从诸如键盘和鼠标的输入设备接收数据。CPU 1100还经由输入/输出接口1600向诸如显示器或打印机的输出设备发送数据。此外,输入/输出接口1600可以用作读取记录在预定记录介质(媒体)中的程序等的介质接口。例如,介质是诸如数字多功能光盘(DVD)或相变可重写盘(PD)的光学记录介质、诸如磁光盘(MO)的磁光记录介质、磁带介质、磁记录介质、半导体存储器等。
例如,在计算机1000用作根据本公开的实施例的服务器200的情况下,计算机1000的CPU 1100执行加载到RAM 1200上的信息处理程序,以实现生成触觉控制信号的功能等。此外,HDD 1400存储根据本公开的实施例的信息处理程序等。注意,CPU 1100从HDD 1400读出程序数据1450以用于执行;然而,作为另一示例,可以经由外部网络1550从另一设备获取程序。
此外,根据实施例的信息处理设备可以应用于包括以连接至网络(或设备之间的通信)为前提的多个设备的***,例如云计算。也就是说,根据上述实施例的信息处理设备例如也可以实现为通过多个设备执行与根据实施例的信息处理方法有关的处理的信息处理***。
<<11.补充>>
此外,上述实施例例如可以包括用于使计算机用作根据实施例的信息处理设备的程序、以及记录有程序的非暂态有形介质。此外,可以经由诸如因特网的通信线路(包括无线通信)来分发程序。
此外,实施例的处理中的各步骤可以不必按照所描述的顺序来处理。例如,各步骤可以适当地以不同的顺序来处理。此外,各步骤可以部分地并行处理地或者单独地处理,而代替按时间顺序处理。此外,各步骤的处理方法不必根据所描述的方法处理,并且例如可以通过其他功能块以其他方式处理。
尽管以上参照附图描述了本公开的优选实施例,但本公开的技术范围不限于以上示例。显然,本领域技术人员可以在所附权利要求书的范围内发现各种变更和修改,并且应当理解的是,这些变更和修改将自然地归入本公开的技术范围。
此外,本说明书中描述的效果仅是说明性或者例示效果,并且不是限制性的。也就是说,与上述效果一起或代替上述效果,根据本公开的技术可以实现对于本领域技术人员来说可以从本说明书中清楚得到的其他效果。
此外,本技术还可以按如下配置。
(1)
一种信息处理设备,包括:
第一获取单元,其被配置成获取由第一用户输入的控制命令,所述控制命令与用于指定用于通过触觉呈现设备呈现触觉刺激的呈现单元的呈现单元信息和用于指定所述触觉刺激的形式的形式信息对应;
生成单元,其被配置成根据所述控制命令生成用于将所述触觉刺激呈现至所述呈现单元的触觉控制信号;以及
第一分发单元,其被配置成将所述触觉控制信号分发至佩戴在第二用户的身体上的所述触觉呈现设备。
(2)
根据(1)所述的信息处理设备,其中,
所述控制命令预先与在图章选择画面中显示的图章相关联,并且
所述第一用户选择在所述图章选择画面中显示的图章以输入所述控制命令。
(3)
根据(1)或(2)所述的信息处理设备,还包括:价格确定单元,其被配置成基于所述呈现单元信息和所述形式信息中的至少一个来确定针对所述控制命令的输入的价格。
(4)
根据(1)至(3)中任一项所述的信息处理设备,还包括:存储单元,其被配置成将由所述第一用户获取的所述控制命令与所述第一用户的标识信息相关联地存储。
(5)
根据(4)所述的信息处理设备,其中,在由所述第一用户获取的多个所述控制命令满足预定条件的情况下,发出新的控制命令。
(6)
根据(4)所述的信息处理设备,其中,
所述存储单元获取由感知到所述触觉刺激的所述第二用户输入的对所述触觉刺激的评价,并且将关于所述评价的信息与输入了与所述触觉刺激对应的所述控制命令的所述第一用户的标识信息相关联地存储。
(7)
根据(1)至(6)中任一项所述的信息处理设备,还包括:
确定单元,其被配置成基于所述第二用户的动作来确定是否在所述触觉呈现设备中呈现所述触觉刺激。
(8)
根据(7)所述的信息处理设备,其中,
所述动作由以下中的至少一个来检测:用于拍摄所述第二用户的图像的成像设备;用于获取关于所述第二用户的运动数据的运动传感器;以及用于收集所述第二用户的话语声音的声音传感器。
(9)
根据(7)所述的信息处理设备,其中,在所述第二用户执行预定动作的情况下,或者替选地在所述第二用户说出预定关键字的情况下,所述确定单元确定不呈现所述触觉刺激。
(10)
根据(1)至(9)中任一项所述的信息处理设备,其中,
所述第一获取单元显示用于指定所述触觉刺激的强度的光标,并且接收通过所述第一用户对所述光标的操作对所述强度的指定。
(11)
根据(10)所述的信息处理设备,其中,
所述第一获取单元显示所述光标移动的动画,并且根据在接收到所述第一用户的操作时的所述光标的位置来接收通过所述第一用户的操作对所述强度的指定。
(12)
一种信息处理终端,包括:
输入单元,其被配置成接收控制命令的输入,所述控制命令包括用于指定用于通过触觉呈现设备呈现触觉刺激的呈现单元的呈现单元信息和用于指定所述触觉刺激的形式的形式信息;以及
发送单元,其被配置成将输入的所述控制命令发送至信息处理设备,所述信息处理设备根据所述控制命令来生成触觉控制信号,并将所述触觉控制信号分发至所述触觉呈现设备。
(13)
根据(1)所述的信息处理设备,其中,所述触觉呈现设备包括触觉刺激单元,并且
所述呈现单元信息包括所述触觉刺激单元的ID信息。
(14)
根据(1)所述的信息处理设备,其中,
所述触觉控制信号是与所述控制命令对应的触觉控制ID,并且
所述触觉呈现设备基于与所述触觉控制ID对应的所述呈现单元信息和所述形式信息来执行触觉呈现。
(15)
根据(1)所述的信息处理设备,其中,所述触觉控制信号与基于所述输入而生成的、被叠加在为所述第一用户分发的真实空间的图像上的预定图像对应。
(16)
根据(15)所述的信息处理设备,其中,
所述预定图像以及所述真实空间的图像从能够与为所述第一用户显示图像的显示设备执行通信的其他的信息处理设备被分发至所述显示设备。
(17)
根据(16)所述的信息处理设备,其中,
所述其他的信息处理设备获取与所述第一用户的输入对应的所述控制命令。
(18)
根据(1)所述的信息处理设备,
还包括:
第二获取单元,其被配置成根据来自所述第一用户的输入,获取与所述触觉刺激的呈现同步地叠加显示在真实空间的图像上的预定图像;
第三获取单元,其被配置成获取所述真实空间的图像;以及
第二分发单元,其被配置成将所述预定图像以及所述真实空间的图像分发至为所述第一用户显示图像的显示设备。
(19)
一种用于使信息处理设备用作控制单元的程序,
所述程序使所述控制单元执行包括以下操作的处理:
获取由第一用户输入的控制命令;
接收第二用户的直播图像;
在显示单元上显示接收到的所述第二用户的直播图像;以及
将获取的所述控制命令经由通信单元发送至服务器;
其中,
根据所述控制命令来生成触觉控制信号,
将所述触觉控制信号分发至佩戴在所述第二用户的身体上的触觉呈现设备,以及
基于与所述控制命令对应的用于指定用于呈现所述触觉呈现设备的触觉刺激的呈现单元的呈现单元信息和用于指定所述触觉刺激的形式的形式信息,经由所述触觉呈现设备来执行触觉呈现。
(20)
一种信息处理设备,包括:
控制单元,其被配置成:
接收由第一用户输入的控制命令,以及
接收第二用户的直播图像;其中,
根据所述控制命令来生成触觉控制信号,
将所述触觉控制信号分发至佩戴在所述第二用户的身体上的触觉呈现设备,以及
基于与所述控制命令对应的用于指定用于呈现所述触觉呈现设备的触觉刺激的呈现单元的呈现单元信息和用于指定所述触觉刺激的形式的形式信息,经由所述触觉呈现设备来执行触觉呈现。
附图标记列表
10 信息处理***
100 触觉呈现设备
102、202、308 通信单元
104、210、210a、210b、210c、310 控制单元
106 触觉刺激单元
110 监视器
116、306 扬声器
120、322 摄像装置
124、324 麦克风
140 驱动放大器/接口
200、200a、200b、200c、250a、250b、250c、250d 服务器
212 GUI控制单元
214 观看者侧输入单元
216 分发者侧输入单元
218 生成单元
220 确定单元
222 输出控制单元
224 价格确定单元
226 结算单元
228 积分赋予单元
240、240a、312 存储单元
242 观看者配置文件
244 分发者配置文件
246 分发数据DB
248 价格数据DB
300 用户终端
300a 智能电话
300b 平板终端
302 显示单元
304 操作输入单元
320 传感器单元
326 陀螺仪传感器
328 加速度传感器
600 观看者
602 艺术家
700 图章
702 控制命令
800 显示
802 化身
804 通知
806、822 图标
808 轨迹
810 评论
812 模型显示
814 区域
816 标记
820、824 光标
826 波形
Claims (20)
1.一种信息处理设备,包括:
第一获取单元,其被配置成获取由第一用户输入的控制命令,所述控制命令与用于指定用于通过触觉呈现设备呈现触觉刺激的呈现单元的呈现单元信息和用于指定所述触觉刺激的形式的形式信息对应;
生成单元,其被配置成根据所述控制命令生成用于将所述触觉刺激呈现至所述呈现单元的触觉控制信号;以及
第一分发单元,其被配置成将所述触觉控制信号分发至佩戴在第二用户的身体上的所述触觉呈现设备。
2.根据权利要求1所述的信息处理设备,其中,
所述控制命令预先与在图章选择画面中显示的图章相关联,并且
所述第一用户选择在所述图章选择画面中显示的图章以输入所述控制命令。
3.根据权利要求1所述的信息处理设备,还包括:价格确定单元,其被配置成基于所述呈现单元信息和所述形式信息中的至少一个来确定针对所述控制命令的输入的价格。
4.根据权利要求1所述的信息处理设备,还包括:存储单元,其被配置成将由所述第一用户获取的所述控制命令与所述第一用户的标识信息相关联地存储。
5.根据权利要求4所述的信息处理设备,其中,在由所述第一用户获取的多个所述控制命令满足预定条件的情况下,发出新的控制命令。
6.根据权利要求4所述的信息处理设备,其中,
所述存储单元获取由感知到所述触觉刺激的所述第二用户输入的对所述触觉刺激的评价,并且将关于所述评价的信息与输入了与所述触觉刺激对应的所述控制命令的所述第一用户的标识信息相关联地存储。
7.根据权利要求1所述的信息处理设备,还包括:
确定单元,其被配置成基于所述第二用户的动作来确定是否在所述触觉呈现设备中呈现所述触觉刺激。
8.根据权利要求7所述的信息处理设备,其中,
所述动作由以下中的至少一个来检测:用于拍摄所述第二用户的图像的成像设备;用于获取关于所述第二用户的运动数据的运动传感器;以及用于收集所述第二用户的话语声音的声音传感器。
9.根据权利要求7所述的信息处理设备,其中,在所述第二用户执行预定动作的情况下,或者替选地在所述第二用户说出预定关键字的情况下,所述确定单元确定不呈现所述触觉刺激。
10.根据权利要求1所述的信息处理设备,其中,
所述第一获取单元显示用于指定所述触觉刺激的强度的光标,并且接收通过所述第一用户对所述光标的操作对所述强度的指定。
11.根据权利要求10所述的信息处理设备,其中,
所述第一获取单元显示所述光标移动的动画,并且根据在接收到所述第一用户的操作时的所述光标的位置来接收通过所述第一用户的操作对所述强度的指定。
12.一种信息处理终端,包括:
输入单元,其被配置成接收控制命令的输入,所述控制命令包括用于指定用于通过触觉呈现设备呈现触觉刺激的呈现单元的呈现单元信息和用于指定所述触觉刺激的形式的形式信息;以及
发送单元,其被配置成将输入的所述控制命令发送至信息处理设备,所述信息处理设备根据所述控制命令来生成触觉控制信号并将所述触觉控制信号分发至所述触觉呈现设备。
13.根据权利要求1所述的信息处理设备,其中,所述触觉呈现设备包括触觉刺激单元,并且
所述呈现单元信息包括所述触觉刺激单元的ID信息。
14.根据权利要求1所述的信息处理设备,其中,
所述触觉控制信号是与所述控制命令对应的触觉控制ID,并且
所述触觉呈现设备基于与所述触觉控制ID对应的所述呈现单元信息和所述形式信息来执行触觉呈现。
15.根据权利要求1所述的信息处理设备,其中,所述触觉控制信号与基于所述输入而生成的、被叠加在为所述第一用户分发的真实空间的图像上的预定图像对应。
16.根据权利要求15所述的信息处理设备,其中,
所述预定图像以及所述真实空间的图像从能够与为所述第一用户显示图像的显示设备执行通信的其他的信息处理设备被分发至所述显示设备。
17.根据权利要求16所述的信息处理设备,其中,
所述其他的信息处理设备获取与所述第一用户的输入对应的所述控制命令。
18.根据权利要求1所述的信息处理设备,
还包括:
第二获取单元,其被配置成根据来自所述第一用户的输入,获取与所述触觉刺激的呈现同步地叠加显示在真实空间的图像上的预定图像;
第三获取单元,其被配置成获取所述真实空间的图像;以及
第二分发单元,其被配置成将所述预定图像以及所述真实空间的图像分发至为所述第一用户显示图像的显示设备。
19.一种用于使信息处理设备用作控制单元的程序,
所述程序使所述控制单元执行包括以下操作的处理:
获取由第一用户输入的控制命令;
接收第二用户的直播图像;
在显示单元上显示接收到的所述第二用户的直播图像;以及
将获取的所述控制命令经由通信单元发送至服务器;其中,
根据所述控制命令来生成触觉控制信号,
将所述触觉控制信号分发至佩戴在所述第二用户的身体上的触觉呈现设备,以及
基于与所述控制命令对应的用于指定用于呈现所述触觉呈现设备的触觉刺激的呈现单元的呈现单元信息和用于指定所述触觉刺激的形式的形式信息,经由所述触觉呈现设备来执行触觉呈现。
20.一种信息处理设备,包括:
控制单元,其被配置成:
接收由第一用户输入的控制命令,以及
接收第二用户的直播图像;其中,
根据所述控制命令来生成触觉控制信号,
将所述触觉控制信号分发至佩戴在所述第二用户的身体上的触觉呈现设备,以及
基于与所述控制命令对应的用于指定用于呈现所述触觉呈现设备的触觉刺激的呈现单元的呈现单元信息和用于指定所述触觉刺激的形式的形式信息,经由所述触觉呈现设备来执行触觉呈现。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202062961914P | 2020-01-16 | 2020-01-16 | |
US62/961,914 | 2020-01-16 | ||
JPPCT/JP2020/035880 | 2020-09-23 | ||
PCT/JP2020/035880 WO2021145024A1 (ja) | 2020-01-16 | 2020-09-23 | 情報処理装置、情報処理端末及びプログラム |
PCT/JP2021/001367 WO2021145454A1 (ja) | 2020-01-16 | 2021-01-15 | 情報処理装置、情報処理端末及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114930274A true CN114930274A (zh) | 2022-08-19 |
Family
ID=76864107
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202180008481.9A Pending CN114930274A (zh) | 2020-01-16 | 2021-01-15 | 信息处理设备、信息处理终端和程序 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20230009322A1 (zh) |
JP (1) | JPWO2021145454A1 (zh) |
CN (1) | CN114930274A (zh) |
DE (1) | DE112021000549T5 (zh) |
WO (2) | WO2021145024A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023037463A1 (ja) * | 2021-09-09 | 2023-03-16 | 豊田合成株式会社 | 触感提示装置 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6750877B2 (en) * | 1995-12-13 | 2004-06-15 | Immersion Corporation | Controlling haptic feedback for enhancing navigation in a graphical environment |
JPH09212331A (ja) * | 1996-02-01 | 1997-08-15 | Seiko Epson Corp | 携帯用情報収集装置およびその情報管理方法 |
EP3089657A4 (en) * | 2014-02-24 | 2017-09-27 | Sony Corporation | Smart wearable devices and methods with attention level and workload sensing |
WO2016151794A1 (ja) * | 2015-03-25 | 2016-09-29 | エヌ・ティ・ティ・ソフトウェア株式会社 | 通信制御装置、ユーザ端末、及びプログラム |
US9875625B2 (en) * | 2015-12-18 | 2018-01-23 | Immersion Corporation | Systems and methods for multifunction haptic output devices |
JP6835070B2 (ja) * | 2016-04-07 | 2021-02-24 | ソニー株式会社 | システム、端末装置、方法及び記録媒体 |
CN109416584B (zh) | 2016-07-07 | 2022-08-02 | 索尼公司 | 信息处理装置、信息处理方法和程序 |
JP2018195068A (ja) * | 2017-05-17 | 2018-12-06 | 日本電産コパル株式会社 | 振動パターン情報伝送システム |
JP2019144629A (ja) * | 2018-02-16 | 2019-08-29 | ソニー株式会社 | 情報処理装置、情報処理方法及び記録媒体 |
JP6611217B2 (ja) * | 2018-10-15 | 2019-11-27 | 日本電信電話株式会社 | 電子装置および皮膚覚提示システム |
-
2020
- 2020-09-23 WO PCT/JP2020/035880 patent/WO2021145024A1/ja active Application Filing
-
2021
- 2021-01-15 WO PCT/JP2021/001367 patent/WO2021145454A1/ja active Application Filing
- 2021-01-15 DE DE112021000549.9T patent/DE112021000549T5/de active Pending
- 2021-01-15 JP JP2021571278A patent/JPWO2021145454A1/ja active Pending
- 2021-01-15 US US17/781,241 patent/US20230009322A1/en active Pending
- 2021-01-15 CN CN202180008481.9A patent/CN114930274A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
JPWO2021145454A1 (zh) | 2021-07-22 |
WO2021145024A1 (ja) | 2021-07-22 |
WO2021145454A1 (ja) | 2021-07-22 |
DE112021000549T5 (de) | 2022-12-01 |
US20230009322A1 (en) | 2023-01-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10083578B2 (en) | Crowd-based haptics | |
WO2020138107A1 (ja) | 配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システム、動画配信方法及び動画配信プログラム | |
US20220038777A1 (en) | Video distribution system, video distribution method, and video distribution program | |
US20190073830A1 (en) | Program for providing virtual space by head mount display, method and information processing apparatus for executing the program | |
CN109479010A (zh) | 通过注视化身的私有通信 | |
JP2020096269A (ja) | 動画配信システム、動画配信方法及び動画配信プログラム | |
JPWO2019234879A1 (ja) | 情報処理システム、情報処理方法およびコンピュータプログラム | |
WO2020027226A1 (ja) | 表示制御システム、表示制御方法、及び、表示制御プログラム | |
JP7416903B2 (ja) | 動画配信システム、動画配信方法、及び動画配信プログラム | |
US11941177B2 (en) | Information processing device and information processing terminal | |
CN116964544A (zh) | 信息处理装置、信息处理终端、信息处理方法和程序 | |
JP2020102782A (ja) | コンテンツ配信システム、配信装置、受信装置及びプログラム | |
CN114930274A (zh) | 信息处理设备、信息处理终端和程序 | |
CN114945893A (zh) | 信息处理设备以及信息处理终端 | |
US11983324B2 (en) | Information processing device, information processing terminal, and program | |
WO2022118746A1 (ja) | 情報処理装置、情報処理方法、プログラム及び情報処理システム | |
WO2022118748A1 (ja) | 情報処理装置、情報処理方法、プログラム及び情報処理システム | |
WO2022118747A1 (ja) | 情報処理装置、情報処理方法、プログラム及び情報処理システム | |
JP6937803B2 (ja) | 配信ユーザの動きに基づいて生成されるキャラクタオブジェクトのアニメーションを含む動画をライブ配信する動画配信システム、動画配信方法及び動画配信プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |