CN113710334B - 信息处理***、信息处理装置、信息处理装置的控制方法，以及程序 - Google Patents

信息处理***、信息处理装置、信息处理装置的控制方法，以及程序 Download PDF

Info

Publication number
CN113710334B
CN113710334B CN202080029786.3A CN202080029786A CN113710334B CN 113710334 B CN113710334 B CN 113710334B CN 202080029786 A CN202080029786 A CN 202080029786A CN 113710334 B CN113710334 B CN 113710334B
Authority
CN
China
Prior art keywords
sound
controller
information processing
processing apparatus
headphones
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202080029786.3A
Other languages
English (en)
Other versions
CN113710334A (zh
Inventor
小木曾彻
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Interactive Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment Inc filed Critical Sony Interactive Entertainment Inc
Publication of CN113710334A publication Critical patent/CN113710334A/zh
Application granted granted Critical
Publication of CN113710334B publication Critical patent/CN113710334B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/215—Input arrangements for video game devices characterised by their sensors, purposes or types comprising means for detecting acoustic signals, e.g. using a microphone
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212—Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/537—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game using indicators, e.g. showing the condition of a game character on screen
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/54—Controlling the output signals based on the game progress involving acoustic signals, e.g. for simulating revolutions per minute [RPM] dependent engine sounds in a driving game or reverberation against a virtual wall
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/85—Providing additional services to players
    • A63F13/87—Communicating with other players during game play, e.g. by e-mail or chat
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/20—Speech recognition techniques specially adapted for robustness in adverse environments, e.g. in noise, of stress induced speech

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Optics & Photonics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biophysics (AREA)
  • Cardiology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

一种信息处理装置连接到由用户穿戴或抓握的***装置，所述***装置中的至少一个***装置包括收集周围的声音并输出代表所收集的声音的声音信号的装置。信息处理装置接收从由用户穿戴或抓握的***装置输出的声音信号、基于预定规则从所接收的声音信号中选择声音信号的至少一部分，输出所选择的声音信号并切断其它声音信号。

Description

信息处理***、信息处理装置、信息处理装置的控制方法，以 及程序
技术领域
本发明涉及信息处理***、信息处理装置、信息处理装置的控制方法，以及程序。
背景技术
近年来，为了通过语音进行控制或聊天的处理，有时将允许声音输入的多个***装置连接到诸如家用游戏机或个人计算机之类的信息处理装置。
发明内容
[技术问题]
但是，如果以这种方式在存在多个声音输入设备的现场处理用户发出的语音等，那么由于声音输入设备收集相同声音的定时不同或声音输入设备的特点的不同，输入的语音有时会变成非预期的声音。
例如，在参加通过网络执行的游戏的多个玩家当中的几个玩家聚集在一个地方的情况下，当玩家试图执行聊天时会发生如下所述的问题。
特别地，聚集的玩家之一发出的语音不仅被说话的玩家的声音输入设备(例如，麦克风)收集，而且还被在与相关玩家相邻的位置处玩的不同玩家的声音输入设备收集。在这种情况下，简单地对玩家的语音执行混合处理会导致由于被压抑的语音的消音或回声的生成而使语音变成难以听到的声音。
本发明是鉴于上述这种情况而做出的，并且本发明的目的是提供通过考虑如上所述的情形而可以通过其实现对多个声音输入设备的控制的信息处理***、信息处理装置、信息处理装置的控制方法以及程序。
[问题的解决方案]
根据解决上述现有技术的问题的本发明的一个方面，提供了一种信息处理***，该信息处理***包括将由用户穿戴或抓握和使用的***装置以及信息处理装置。在该信息处理***中，***装置中的至少一个包括用于收集周围的声音并输出代表所收集的声音的声音信号的声音输入部件，并且信息处理装置包括用于接收从由用户穿戴或抓握的***装置中的至少一个输出的一个或多个声音信号的部件、用于基于预定规则选择所接收的一个或多个声音信号的至少一部分的选择部件，以及用于输出由选择部件选择的一个或多个声音信号并切除任何其它声音信号的部件。
[发明的有益效果]
利用本发明，可以防止由于语音的消音或回声的生成而使语音变成难以听到的声音，从而实现对多个声音输入***装置的控制。
附图说明
图1是描绘根据本发明实施例的信息处理***的配置示例的框图。
图2是描绘根据本发明实施例的信息处理装置的声音输入控制单元的配置示例的框图。
图3是描绘根据本发明实施例的信息处理装置的控制单元的示例的功能框图。
图4描绘了描绘根据本发明实施例的信息处理***的操作示例的解释视图。
具体实施方式
参考附图描述本发明的实施例。根据本发明实施例的信息处理***1的配置如图1中所例示的，并且包括诸如家用游戏机或个人计算机(PC)之类的信息处理装置10以及控制器20。在此，可以包括多个控制器20。此外，信息处理***1还可以包括多个***装置，每个***装置都包括声音输入设备(诸如聊天控制器30、头戴式耳机40或头戴式显示器50)，它们可以连接到信息处理装置10。
如图1中所例示的，信息处理装置10包括控制单元11、存储单元12、操作控制单元13、输出控制单元14、声音输入控制单元15和通信单元16。另外，控制器20包括操作单元21、麦克风22、通信单元23、显示单元24和声音输出单元25。另外，聊天控制器30包括操作单元31、麦克风32、通信单元33和显示单元34。
信息处理装置10的控制单元11是诸如中央处理单元(CPU)之类的程序控制设备并且根据存储在存储单元12中的程序进行操作。在本实施例中，假设控制单元11并行执行多个应用程序(执行一般称为多任务过程的过程)。
特别地，在信息处理装置10是家用游戏机的情况下，控制单元11执行各种应用，诸如用于通过网络传送声音信号游戏应用和聊天应用。另外，控制单元11执行***程序，并且作为***程序的处理，为每个装置执行用于认证使用相关装置(诸如控制器20或头戴式耳机40)的用户的过程，将用于指定用户的信息(例如，用户名)与用于指定装置(诸如控制器20)的每个信息相关联并且存储相关联的信息。
然后，如果控制单元11从操作控制单元13与用于指定控制器20的信息一起接收操作信息的输入，那么控制单元11从正在被执行的应用当中选择变成操作信息的输出目的地的应用。在此，选择输出目的地的条件以以下方式预先确定就足够了：例如，在运行游戏应用时，原则上选择游戏应用并由***异常处理预定的操作信息并且根据条件执行选择。
作为操作信息的输出目的地的应用或***的过程，控制单元11执行使用从操作控制单元13输入的用于指定控制器20的信息以及操作信息的过程。另外，当要混合从多个装置单独接收的多条声音信息时，控制单元11确定每个声音信号的混合的音量。稍后描述控制单元11的操作。
存储单元12是存储器设备、硬盘驱动器等并且保存要由控制单元11执行的程序。另外，存储单元12还作为控制单元11的工作存储器操作。
操作控制单元13通过无线或有线通信连接到控制器20以进行通信，并从控制器20接收代表用户使用控制器20执行的操作的实质的操作信息，以将接收到的操作信息连同用于指定作为操作信息的传输源的控制器20的信息一起输出到控制单元11。
另外，在本实施例中，操作控制单元13根据从控制单元11输入的指令向由该指令指示的控制器20发送出显示控制信号等。
输出控制单元14连接到诸如家用电视机、监视器或头戴式显示器50之类的显示设备，并根据从控制单元11输入的指令向显示设备输出声音、视频等的信号。另外，输出控制单元14可以向彼此不同的装置输出视频和声音信号。例如，可以将视频输出到监视器，并且可以将声音信号输出到控制器20或头戴式耳机40。
声音输入控制单元15从包括诸如声音输入设备的***装置(诸如控制器20、聊天控制器30、头戴式耳机40和头戴式显示器50)接收声音信号。另外，如图2中所例示的，声音输入控制单元15包括混合器单元151、静音单元152、开关单元153和输出单元154，并通过混合器单元151合成接收到的声音信号当中从除预先确定的装置以外(例如，除聊天控制器30以外)的装置输入的声音信号。
特别地，混合器单元151确定从各个装置(诸如控制器20、头戴式耳机40和头戴式显示器50)接收到的每个声音信号的音量并且合成从具有确定音量的各个装置接收到的声音信号。在本实施例的某个示例中，混合器单元151根据从控制单元11输入的指令确定从每个装置接收到的声音信号的音量。
另外，例如，在控制单元11将来自头戴式耳机40的声音信号的音量设置为“255”并将其它声音信号的音量设置为“0”的情况下，混合器单元151也起到作为选择部件的作用。在这个示例中，混合器单元151选择性地仅从头戴式耳机40输出声音信号。另外，在这种情况下，即使存在从头戴式耳机40以外的控制器20、头戴式显示器50等接收到的声音信号，此类声音信号也不包括在混合器单元151的输出中。
另外，在本实施例的示例中，多个控制器20可能连接到信息处理装置10。而且在这种情况下，混合器单元151根据从控制单元11输入的指令确定从每个控制器20接收到的声音信号的音量。例如，在从控制单元11输入指令以将从用户A使用的控制器20a接收到的声音信号的音量设置为“255”并且将从其他用户B和C使用的控制器20b和20c接收到的声音信号的音量设置为“0”的情况下，混合器单元151选择性地输出从控制器20a接收到的声音信号。
静音单元152根据从控制单元11输入的指令在原样输出或不输出(静音)之间切换从混合器单元151输出的声音信号。当控制单元11输出不静音的指令时，静音单元152原样输出从混合器单元151输出的声音信号。另一方面，当控制单元11输出静音指令时，静音单元152丢弃(静音)从混合器单元151输出的声音信号而不向开关单元153输出该信号。
开关单元153从由信息处理装置10接收的声音信号当中接收来自装置的未输入到混合器单元151的声音信号(这种声音信号在下文中被称为中断声音信号；在此处的示例中，从聊天控制器30接收到的声音信号)的输入。另外，当静音单元152输出声音信号时，开关单元153接收声音信号的输入。开关单元153根据从控制单元11输入的指令选择性地输出从静音单元152接收的声音信号(如果有的话)和中断声音信号(如果有的话)之一。
输出单元154将从开关单元153输出的声音信号输出到控制单元11。以这种方式，根据本实施例的一个示例的声音输入控制单元15从各自包括声音输入设备的***装置接收声音信号、混合声音信号或选择声音信号之一，并输出结果所得的声音信号以供在控制单元11中处理。
通信单元16是网络接口等，并且根据从控制单元11输入的指令通过网络传输各种信息。另外，通信单元16将通过网络接收到的信息输出到控制单元11。
控制器20的操作单元21包括按钮、操纵杆等，并且接收用户的操作，以向通信单元23输出代表由用户执行的操作的实质的操作信息。同时，麦克风22收集周围的声音并输出代表收集到的声音的数字声音信号。
通信单元23是例如蓝牙(注册商标)的无线通信部件，并且将代表由用户在操作单元21上执行的操作的实质的信息(操作信息)输出到信息处理装置10。另外，通信单元23将从麦克风22输出的声音信号输出到信息处理装置10。另外，通信单元23向显示单元24输出从信息处理装置10输出的显示控制信号。此外，在从信息处理装置10接收到声音信号后，通信单元23将接收到的声音信号输出到声音输出单元25。
显示单元24包括例如发光二极管(LED)等。显示单元24从通信单元23接收显示控制信号的输入并且打开或关闭LED。声音输出单元25是包括振动器的设备(诸如扬声器)并且基于从信息处理装置10接收到的声音信号生成声音。
另外，聊天控制器30是仅当用户给出关于声音输入的指令时才接收并输出声音的输入的一般被称为一键通设备(PTT设备)，并且聊天控制器30的操作单元31包括例如按钮。另外，麦克风32收集周围的声音并将其转换成声音信号并输出声音信号。
通信单元33是例如蓝牙(注册商标)等的无线通信部件，并且在用户按下操作单元31的按钮的同时将从麦克风32输出的声音信号输出到信息处理装置10。另一方面，当用户没有按下操作单元31的按钮时，通信单元33丢弃从麦克风32输出的声音信号而不将声音信号输出到信息处理装置10。此外，通信单元33将从信息处理装置10输出的显示控制信号输出到显示单元34。
显示单元34包括例如LED等。显示单元34从通信单元33接收显示控制信号的输入并且打开或关闭LED。稍后还将描述聊天控制器30的操作。
头戴式耳机40包括例如耳机、麦克风等。头戴式耳机40基于从信息处理装置10输出的声音信号使扬声器生成声音。另外，头戴式耳机40将由麦克风收集的声音信号送出到信息处理装置10。
头戴式显示器50包括显示器、扬声器和麦克风。头戴式显示器50接收从信息处理装置10输出的视频信号和声音信号，以在显示器上显示图像并使扬声器生成声音。另外，头戴式显示器50将由麦克风收集的声音信号送出到信息处理装置10。
在此，描述信息处理装置10的控制单元11的操作。在本实施例中，控制单元11在功能上包括声音输入处理单元111、静音处理单元112、中断处理单元113和显示处理单元114，如图3中***的处理所例示的。
要注意的是，在本实施例的以下描述中，假设控制单元11预先确定连接到信息处理装置10并且包括声音输入设备的设备之一作为中断装置。
声音输入处理单元111对作为包括声音输入设备的装置的目标装置执行以下处理(在确定中断装置的情况下，中断装置从目标装置中排除)。声音输入处理单元111根据预定规则为连接到信息处理装置10的每个目标装置确定混合的音量。这个预定规则可以是例如诸如如下所述的。特别地，控制单元11预先确定目标装置的优先级次序，并将从与其连接的目标装置当中优先级次序最高的目标装置接收到的声音信号的混合的音量设置为预先确定并且大于0(不包括0)的值。对于这个值，例如可以设置最高值，或者也可以针对每个目标装置设置根据目标装置的类型而不同的不同值；在以下描述中，大于0的值被称为输出值。另外，将从连接的装置当中优先级次序最高的目标装置以外的目标装置接收到的声音信号的混合的音量设置为最低值。这个最低值是表示例如音量“0”的值就足够了。这个最低值在下文中被称为“截止值”。
要注意的是，此处的规则和音量的设置只是示例，并且各种其它方法都可用。例如，控制单元11可以为由用户选择的目标装置将从选择的目标装置接收到的声音信号的混合的音量设置为预先确定的输出值，并且将从任何其它目标装置接收到的声音信号的混合的音量设置为截止值。
另外，考虑其中多个用户使用信息处理装置10的情况，规则可以是诸如下面描述的。特别地，
(1)原则上为每个用户选择一个目标装置；
(2)在为每个用户选择的目标装置是预先确定为包括不太可能收集除相关用户的语音以外的声音的声音输入设备的目标装置的情况下，相关目标装置的混合的音量被设置为输出值；
(3)在为每个用户选择的目标装置不是预先确定为包括不太可能收集除相关用户的语音以外的声音的声音输入设备的装置的目标装置的情况下(为便于描述，这种刚刚描述的目标装置被称为宽范围声音收集装置)，从其选择的目标装置是宽范围声音收集装置的用户当中选择一个用户，并且为所选择的用户选择的目标装置的混合的音量被设置为输出值；以及
(4)其混合中的音量没有被设置为(2)和(3)中的输出值的目标装置的混合的音量被设置为截止值。
根据这个示例，对于使用头戴式耳机40或其中麦克风指向性相对高的类似设备作为声音输入设备的用户，使得由头戴式耳机40收集的声音信号被用在作为应用的处理中。另一方面，对于使用作为其中麦克风指向性相对低的宽范围声音收集装置的控制器20作为声音输入设备的用户，使得仅由由使用控制器20作为声音输入设备的用户之一操作的控制器20收集的声音信号被用在作为应用的处理中。
要注意的是，在这两种情况下，当使用宽范围声音收集装置的用户操作控制器20以发出输入声音信号的请求时，宽范围声音收集装置(诸如用户的控制器20)的混合音量被设置为输出值，并且任何其它宽范围声音收集设备的混合音量被设置为截止值。
当静音处理单元112接收用于静音的操作信息作为从用户操作的控制器20接收的操作信息时，它向声音输入控制单元15输出静音指令。
中断处理单元113可以根据从预先确定的中断装置输入的指令(例如，请求选择的指令)，将选择从中断装置接收到的声音信号的指令输出到声音输入控制单元15。另外，如果从中断装置接收到取消选择的指令，那么控制单元11向声音输入控制单元15输出选择从除中断装置以外的任何装置接收的声音信号的指令。
显示处理单元114响应于从声音输入处理单元111、静音处理单元112和中断处理单元113输出的指令而向装置输出显示控制信号以指示声音信号的输入状态。稍后描述这个显示控制信号的特定示例。
[操作的示例]
本实施例的信息处理***1基本上包括如上所述的这种配置并且以如下方式操作。下面，将描述三个用户A、B和C玩共享一个信息处理装置10的游戏的示例(图4(a))。
此时，假设用户A、B和C分别通过握持控制器20a、20b和20c进行操作。特别地，信息处理装置10最初对操作控制器20的用户进行认证并且与指定控制器的信息相关联地记录指定经认证的用户的信息。另外，假设作为中断装置的聊天控制器30连接到信息处理装置10。
此时，假设信息处理装置10遵守以下规则作为预先确定的规则。
(1)原则上为每个用户选择一个目标装置；
(2)在为每个用户选择的目标装置是预先确定为包括不太可能收集除相关用户的语音以外的声音的声音输入设备的目标装置的情况下，相关目标装置的混合的音量被设置为输出值(图4中的“255”)；
(3)在为每个用户选择的目标装置不是预先确定为包括不太可能收集除相关用户的语音以外的声音的声音输入设备的装置的目标装置的情况下(为便于描述，这种刚刚描述的目标装置被称为宽范围声音收集装置)，从其选择的目标装置是宽范围声音收集装置的用户当中选择一个用户，并且为所选择的用户选择的目标装置的混合的音量被设置为输出值；以及
(4)其混合中的音量没有被设置为(2)和(3)中的输出值的目标装置的混合的音量被设置为截止值。
因此，将连接到信息处理装置10的控制器20a、20b和20c设置为目标装置，信息处理装置10根据预定规则确定用于每个目标装置的混合的音量。在此，假设控制器20是宽范围声音收集装置。在这个示例中，基于上述预定规则，信息处理装置10例如将首先连接的控制器20(假设这是用户A的控制器20a)的混合的音量设置为输出值，并将从任何其它目标装置输出的声音信号的混合的音量设置为截止值。
因此，在信息处理装置10中，由用户A使用的控制器20a收集并送出到信息处理装置10的声音信号被用在应用的处理中。
例如，如果应用是聊天应用，那么信息处理装置10向聊天伙伴发送出已经由控制器20a收集并送出到信息处理装置10的声音信号。另一方面，信息处理装置10将从伙伴接收到的声音信号输出到通过预定方法确定的输出目的地(例如，此处的控制器20a、20b和20c)。
此时，通过信息处理装置10的声音输入控制单元15的操作，丢弃从控制器20b和20c发送出的声音信号。因此，防止由控制器20a、20b和20c收集的声音被混合，从而避免了语音的消音或回声的生成。
另外，如果用户C在此穿戴头戴式耳机40并且被信息处理装置10认证为头戴式耳机40的用户(图4(b))，那么使用新装置的认证作为触发器，信息处理装置10再次将连接到信息处理装置10的控制器20a、20b和20c和用户C使用的头戴式耳机40设置为目标装置，并根据上面提到的规则确定每个目标装置的混合的音量。
在此，假设头戴式耳机40不是宽范围声音收集装置，那么此处的信息处理装置10首先基于上述预定规则为用户C将头戴式耳机40的混合的音量确定为输出值。另一方面，对于其他用户A和B，信息处理装置10例如首先将连接的控制器20(此处是用户A的控制器20a)的混合的音量确定为输出值，并将从任何其它目标装置(用户B的控制器20b)接收到的声音信号的混合的音量确定为截止值。
此时，由用户C发出的声音被头戴式耳机40收集。然后，由用户A使用的控制器20a收集并送出到信息处理装置10的声音信号和从头戴式耳机40发送出的声音信号被混合并用在应用的处理中。
此时，通过信息处理装置10的声音输入控制单元15的操作，丢弃从控制器20b和20c发送出的声音信号。因此，防止由控制器20a、20b和20c收集的声音被混合，从而避免了语音的消音或回声的生成。要注意的是，由于头戴式耳机40具有相对高的指向性，因此从头戴式耳机40输出的声音信号中包括的用户A的声音足够小。因此，即使通过头戴式耳机40的声音收集获得的声音信号与从控制器20a发送出的声音信号混合，也防止声音信号混合，从而避免语音的消音或回声的生成。
另外，如果用户B在此操作控制器20b以执行用于请求输入声音信号的操作，那么代表操作实质的信息被传输到信息处理装置10。信息处理装置10接收该请求，并将头戴式耳机40的混合的音量维持在用于用户C的输出值。另外，信息处理装置10将已请求输入声音信号的控制器20b的混合的音量设置为输出值，并将从任何其它目标装置(用户A的控制器20a)接收到的声音信号的混合的音量设置为截止值。
此时，通过信息处理装置10的声音输入控制单元15的操作，丢弃从控制器20a和20c发送出的声音信号。因此，防止由控制器20a、20b和20c收集的声音被混合，从而避免了语音的消音或回声的生成。
另外，执行聊天应用的处理的信息处理装置10将从聊天伙伴接收的声音信号输出到每个控制器20，使得声音由控制器20生成。
[静音]
另外，在本实施例的示例中，如果用户之一操作其控制器20以发出静音指令，那么来自包括声音输入设备的每个装置(除中断装置外)的声音信号被静音。简而言之，在本实施例的示例中，如果从控制器20等中的任何一个发出静音指令，那么切断所有声音输入。
特别地，如果用户A、B和C之一操作由用户自己操作的控制器20以发出静音指令，那么表示已执行静音操作的操作信息被送出到信息处理装置10。
信息处理装置10从控制器20接收指示要执行静音的操作信息并且向声音输入控制单元15输出静音指令。此时，无论声音输入控制单元15的混合器单元151正在用哪种音量设置混合从各个装置发送出的声音信号，静音单元152都以使得从混合器单元151输出的声音信号不被输出(静音)的方式执行控制。
因此，静音一般由用户的一次操作来执行，不需要为每个装置设置静音的劳力，并且提高了静音的可操作性。
另外，取决于静音指令的实质(例如，在用于静音指令的按钮被长按等的情况下)，控制单元11可以执行不输出声音信号(全部静音)的这种控制，作为输出控制单元14的过程。由此，也停止从电视机、头戴式耳机和控制器20输出的声音。
[包括声音输入设备的***装置侧的静音]
在此，在包括声音输入设备的***装置侧(诸如控制器20)有可能控制是否要发送出声音信号的情况下，当某个用户操作其控制器20以发出静音指令时，信息处理装置10可以指示上述这种***装置停止发送出声音信号。
[输出模式]
另外，在本实施例中，从声音输入控制单元15接收声音信号的输入的控制单元11通常执行这种控制，使得输入的声音信号可以被控制单元11正在执行的任何应用使用。在下文中，为了便于描述，其中控制单元11执行刚刚描述的这种控制的操作模式被称为共享模式。但是，在本实施例的某个示例中，有时优选的是输入的声音信号仅由特定应用使用。
特别地，来自中断装置的声音信号(在此处的示例中，来自聊天控制器30)可以仅由特定应用使用。
另外，如果即使应用要求声音输入静音状态也有效，那么声音输入被禁用。因此，当响应于来自应用侧的请求而暂时建立可以取消静音的状态时，在暂时取消静音的状态下输入的声音信号应当仅输出到通过其已发出这个请求的应用。
因此，如果在一个应用的处理中声音输入变得必要，那么控制单元11将指示请求声音输入的显示输出到监视器等，并且暂时保留指定应用的信息(可以是应用名称)。
在此，如果用户通过其控制器20执行预定操作以取消静音，那么控制单元11检测到该操作已被执行并控制声音输入控制单元15的混合器单元151使得已为其执行操作的控制器20的混合音量被设为最大(对于其它控制器20等，混合音量被设置为截止值)。要注意的是，当对多个控制器20执行取消静音操作时，可以仅针对最早执行取消静音操作的控制器20将混合音量设置为最大。
然后，控制单元11在一段时间内使用已经从控制器20接收到的声音信号，直到用户随后通过其控制器20执行静音操作或者直到预定时间段经过之后，用于处理由之前暂时保留的信息(暂时取消静音)指定的应用。这个声音信号被设置为对于除由该信息指定的应用以外的任何应用不可用。为了便于描述，将执行这个设置时控制单元11的操作模式称为排他模式。
刚刚描述的这种排他模式的控制类似于众所周知的操作***的操作，该操作***在仅特定应用的处理中使用输入的信息，因此在此省略详细描述。
[静音状态等的显示]
现在，描述显示处理单元114的显示控制信号的示例。在本实施例的示例中，控制单元11在各个情况下输出
(1)用于在非静音状态下关闭显示单元24的LED的显示控制信号，
(2)用于在静音状态下开启显示单元24的LED的显示控制信号，以及
(3)用于在全静音状态下使显示单元24的LED闪烁的显示控制信号。
据此，由于从信息处理装置10输出代表静音/取消静音状态的显示控制信号并且控制器20等根据显示控制信号改变显示单元24的显示(改变为关闭、开启或闪烁)从而清楚地指示静音状态有效，因此用户可以容易地识别出有可能输入声音的状态是否有效。
另外，在本实施例中，控制单元11
(4)可以向其混合音量被设置为截止值的设备输出显示控制信号，该显示控制信号以可以区分闪烁与全静音状态下的闪烁的模式使显示单元24的LED闪烁。
在此，可以将闪烁与全静音状态下的闪烁区分开来的模式可以是使得闪烁的周期比全静音状态下更长。据此，可以清楚地指示不能通过用户自己拥有的控制器20执行声音输入的情况作为不同人正在执行声音输入的情况。
另外，虽然在此控制显示单元24的LED，但是显示单元24可以被形成为例如液晶显示单元，使得改变液晶显示单元的背光的颜色或显示内容改变以向用户通知状态。
[附图标记列表]
1：信息处理***；
10：信息处理装置；
11：控制单元；
12：存储单元；
13：操作控制单元；
14：输出控制单元；
15：声音输入控制单元；
16：通信单元；
20：控制器；
21：操作单元；
22：麦克风；
23：通信单元；
24：显示单元；
25：声音输出单元；
30：聊天控制器；
31：操作单元；
32：麦克风；
33：通信单元；
34：显示单元；
40：头戴式耳机；
50：头戴式显示器；
111：声音输入处理单元；
112：静音处理单元；
113：中断处理单元；
114：显示处理单元；
151：混合器单元；
152：静音单元；
153：开关单元；
154：输出单元。

Claims (6)

1.一种信息处理装置，连接到多个头戴式耳机或控制器，所述头戴式耳机或控制器单独包括输入部件收集周围的声音并输出代表所收集的声音的声音信号的声音输入部件，所述信息处理装置包括：
用于接收从由一个或多个用户穿戴的所述头戴式耳机或由一个或多个用户抓握的所述控制器当中的至少一个头戴式耳机或控制器输出的声音信号的部件；
选择部件，用于基于预定规则选择所述接收的一个或多个声音信号的至少部分；以及
用于输出由所述选择部件选择的所述一个或多个声音信号并切断任何其它声音信号的部件，其中
所述选择部件：
当由所述用户使用的所述头戴式耳机或所述控制器是预先确定的头戴式耳机或控制器时，选择相关的头戴式耳机或控制器，但是
从要由所述用户使用但不是预先确定的所述头戴式耳机或控制器的头戴式耳机或控制器当中选择所述相关的头戴式耳机或控制器之一。
2.根据权利要求1所述的信息处理装置，其中
所述信息处理装置向其输出声音信号被切断并且属于所述头戴式耳机或控制器的任何头戴式耳机或控制器输出显示控制信号，使得所述头戴式耳机或控制器执行代表通过所述相关的头戴式耳机或控制器输入的声音不可用的状态的显示。
3.根据权利要求1或2所述的信息处理装置，其中
由所述选择部件选择并输出的所述一个或多个声音信号被用在聊天应用的处理中。
4.一种信息处理***，其包括将由一个或多个用户穿戴或抓握并使用的一个或多个头戴式耳机或控制器以及信息处理装置，其中
所述头戴式耳机或控制器中的至少一个头戴式耳机或控制器包括用于收集周围的声音并输出代表所收集的声音的声音信号的声音输入部件，
所述信息处理装置包括：
用于接收从由所述用户穿戴或抓握的所述头戴式耳机或控制器中的至少一个头戴式耳机或控制器输出的一个或多个声音信号的部件；
选择部件，用于基于预定规则选择所接收的一个或多个声音信号的至少部分；以及
用于输出由所述选择部件选择的所述一个或多个声音信号并切断任何其它声音信号的部件，以及
所述信息处理装置的所述选择部件：
当由所述用户使用的所述头戴式耳机或所述控制器是预先确定的头戴式耳机或控制器时，选择相关的头戴式耳机或控制器，但是
从要由所述用户使用但不是预先确定的所述头戴式耳机或控制器的头戴式耳机或控制器当中选择所述相关的头戴式耳机或控制器之一。
5.一种用于信息处理装置的控制方法，所述信息处理装置连接到多个头戴式耳机或控制器，所述头戴式耳机或控制器单独包括收集周围的声音并输出代表所收集的声音的声音信号的声音输入部件，其中所述信息处理装置执行以下步骤：
通过用于接收声音信号的部件接收从由用户穿戴或抓握的所述头戴式耳机或控制器中的至少一个头戴式耳机或控制器输出的声音信号，
通过选择部件基于预定规则选择所接收的一个或多个声音信号的至少部分，以及
通过用于控制声音信号的输出的部件输出由所述选择部件选择的所述一个或多个声音信号并切断任何其它声音信号，以及
所述选择部件：
当由所述用户使用的所述头戴式耳机或所述控制器是预先确定的头戴式耳机或控制器时，选择所相关的头戴式耳机或控制器，但是
从要由所述用户使用但不是预先确定的所述头戴式耳机或控制器的头戴式耳机或控制器当中选择所述相关的头戴式耳机或控制器之一。
6.一种非暂时性计算机可读存储介质，其上存储有程序，所述程序用于使连接到多个头戴式耳机或控制器的信息处理装置用作以下部件，所述头戴式耳机或控制器将由一个或多个用户穿戴或抓握并使用并且单独包括收集周围的声音并输出代表所收集的声音的声音信号的声音输入部件：
用于接收从由所述用户穿戴或抓握的所述头戴式耳机或控制器中的至少一个头戴式耳机或控制器输出的一个或多个声音信号的部件；
选择部件，用于基于预定规则选择所接收的一个或多个声音信号的至少部分；以及
用于输出由所述选择部件选择的所述一个或多个声音信号并切断任何其它声音信号的部件，其中
在使所述信息处理装置用作所述选择部件时，所述程序使所述计算机：
当由所述用户使用的所述头戴式耳机或所述控制器是预先确定的头戴式耳机或控制器时，选择相关的头戴式耳机或控制器，但是
从要由所述用户使用但不是预先确定的所述头戴式耳机或控制器的头戴式耳机或控制器当中选择所述相关的头戴式耳机或控制器之一。
CN202080029786.3A 2019-04-26 2020-04-14 信息处理***、信息处理装置、信息处理装置的控制方法，以及程序 Active CN113710334B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2019086343 2019-04-26
JP2019-086343 2019-04-26
PCT/JP2020/016480 WO2020218094A1 (ja) 2019-04-26 2020-04-14 情報処理システム、情報処理装置、情報処理装置の制御方法、及びプログラム

Publications (2)

Publication Number Publication Date
CN113710334A CN113710334A (zh) 2021-11-26
CN113710334B true CN113710334B (zh) 2024-06-18

Family

ID=72941893

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080029786.3A Active CN113710334B (zh) 2019-04-26 2020-04-14 信息处理***、信息处理装置、信息处理装置的控制方法，以及程序

Country Status (5)

Country Link
US (1) US20220161128A1 (zh)
EP (1) EP3960259A4 (zh)
JP (1) JP7170851B2 (zh)
CN (1) CN113710334B (zh)
WO (1) WO2020218094A1 (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101179693A (zh) * 2007-09-26 2008-05-14 深圳市丽视视讯科技有限公司 一种会议电视***的混音处理方法
CN107431852A (zh) * 2015-04-17 2017-12-01 索尼公司 信号处理装置、信号处理方法及程序

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4202640B2 (ja) * 2001-12-25 2008-12-24 株式会社東芝 短距離無線通信用ヘッドセット、これを用いたコミュニケーションシステム、および短距離無線通信における音響処理方法
CN1985497B (zh) * 2004-10-26 2011-05-18 松下电器产业株式会社 信息输出装置和信息输出控制方法
US9529905B2 (en) * 2011-11-09 2016-12-27 Sony Corporation Information processing device, information processing method, program, and information storage medium
BR112015020150B1 (pt) 2013-02-26 2021-08-17 Mediatek Inc. Aparelho para gerar um sinal de fala, e, método para gerar um sinal de fala
US20150249736A1 (en) * 2014-02-28 2015-09-03 Plantronics, Inc. Notification of Muting During Voice Activity for Multiple Muters
US10104218B2 (en) * 2014-09-23 2018-10-16 Lg Electronics Inc. Mobile terminal and method for controlling same
JP2017047784A (ja) 2015-09-02 2017-03-09 アルパイン株式会社 音声入力装置
WO2017098775A1 (ja) * 2015-12-11 2017-06-15 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US20170351476A1 (en) * 2016-06-03 2017-12-07 Avaya Inc. Create private interaction workspace
US10425781B1 (en) * 2018-02-22 2019-09-24 Amazon Technologies, Inc. Outputting notifications using device groups

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101179693A (zh) * 2007-09-26 2008-05-14 深圳市丽视视讯科技有限公司 一种会议电视***的混音处理方法
CN107431852A (zh) * 2015-04-17 2017-12-01 索尼公司 信号处理装置、信号处理方法及程序

Also Published As

Publication number Publication date
WO2020218094A1 (ja) 2020-10-29
JP7170851B2 (ja) 2022-11-14
EP3960259A4 (en) 2023-05-17
EP3960259A1 (en) 2022-03-02
JPWO2020218094A1 (ja) 2021-11-11
US20220161128A1 (en) 2022-05-26
CN113710334A (zh) 2021-11-26

Similar Documents

Publication Publication Date Title
US8064972B2 (en) User interface for wireless headset on a gaming console
US9800977B2 (en) Headphone audio and ambient sound mixer
US20220201394A1 (en) Dual radio gaming headset
US20080146290A1 (en) Changing a mute state of a voice call from a bluetooth headset
US20070021205A1 (en) Voice input in a multimedia console environment
JP2008183453A (ja) 特定のプレーヤによる口頭のコミュニケーションを防止するための方法及びそのシステム
US10306366B2 (en) Audio system, audio device, and audio signal playback method
US20180084361A1 (en) Audio System, Audio Device, and Audio Device Setting Method
US11749293B2 (en) Audio signal processing device
CN113710334B (zh) 信息处理***、信息处理装置、信息处理装置的控制方法，以及程序
CN113271376A (zh) 通信控制方法、电子设备和耳机
JP7220780B2 (ja) 情報処理システム、コントローラ、情報処理装置、情報処理装置の制御方法、及びプログラム
JP7189334B2 (ja) 情報処理システム、情報処理装置、情報処理装置の制御方法、及びプログラム
CN113573195B (zh) 蓝牙耳机的模式控制方法、设备及计算机可读存储介质
CN115038021A (zh) 真实无线立体声耳机、音频处理、发光以及震动方法
JP2022063332A (ja) コントローラ装置、及びその制御方法
US10904716B1 (en) Wireless audio and communication system
CN111464989B (zh) 音频数据处理方法、操控设备和可读存储介质
US20220391245A1 (en) Information processing apparatus
US11524224B2 (en) Operating device
JP2024036087A (ja) 会議システム、サーバ、音声出力方法及びユーザ端末
JP2023097781A (ja) 音声処理システム及び音声処理方法
JP2007110477A (ja) 音量認識トークバック装置
JP2022085072A (ja) 音入出力装置、音入出力システム、サーバ、及び音入出力方法
JP2005341605A (ja) 通信システムおよび通信端末装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant