CN111712873A - 控制信息获取***和控制信息获取方法 - Google Patents

控制信息获取***和控制信息获取方法 Download PDF

Info

Publication number
CN111712873A
CN111712873A CN201980013162.XA CN201980013162A CN111712873A CN 111712873 A CN111712873 A CN 111712873A CN 201980013162 A CN201980013162 A CN 201980013162A CN 111712873 A CN111712873 A CN 111712873A
Authority
CN
China
Prior art keywords
control
information
sound
control information
acquisition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980013162.XA
Other languages
English (en)
Inventor
城户清规
田中敬一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of CN111712873A publication Critical patent/CN111712873A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M11/00—Telephonic communication systems specially adapted for combination with other electrical systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Telephonic Communication Services (AREA)

Abstract

控制***(30)具备：第一通信部(41)，其从输出声音控制信息的声音控制***(20)获取声音控制信息，该声音控制信息用于基于由声音输入终端(21)获取到的声音来对设备进行控制；以及第二通信部(51)，其从声音控制***(20)获取与声音输入终端(21)相关联的关联信息。

Description

控制信息获取***和控制信息获取方法
技术领域
本发明涉及一种用于进行基于声音的设备控制的控制信息获取***和控制信息获取方法。
背景技术
被称为VPA(Virtual Personal Assistant：虚拟个人助理)的服务已开始普及。作为这种VPA的一个方式，存在通过声音来操作设备的服务。在专利文献1中公开了一种家电设备控制***，其中，能够与网络连接的集音设备收集声音信息，基于收集到的声音信息来经由网络控制家电设备。
现有技术文献
专利文献
专利文献1：国际公开第2014/171144号
发明内容
发明要解决的问题
本发明提供一种能够根据输入了声音的情形来自适应地对设备进行控制的控制信息获取***和控制信息获取方法。
用于解决问题的方案
本发明的一个方式所涉及的控制信息获取***具备：第一获取部，其从输出声音控制信息的声音控制***获取所述声音控制信息，所述声音控制信息用于基于由声音获取部获取到的声音来对设备进行控制；以及第二获取部，其从所述声音控制***获取与所述声音获取部相关联的关联信息。
本发明的一个方式所涉及的控制信息获取方法包括以下步骤：从输出声音控制信息的声音控制***获取所述声音控制信息，所述声音控制信息用于基于由声音获取部获取到的声音来对设备进行控制；以及从所述声音控制***获取与所述声音获取部相关联的关联信息。
本发明的一个方式所涉及的程序是用于使计算机执行所述控制信息获取方法的程序。
发明的效果
根据本发明，实现能够根据输入了声音的情形来自适应地对设备进行控制的控制信息获取***和控制信息获取方法。
附图说明
图1是示出实施方式1所涉及的声音识别***的功能结构的框图。
图2是实施方式1所涉及的控制***的动作例1的流程图。
图3是实施方式1所涉及的控制***的动作例2的流程图。
图4是实施方式1所涉及的控制***的动作例3的流程图。
图5是示出实施方式2所涉及的声音识别***的功能结构的框图。
图6是示出实施方式3所涉及的声音识别***的功能结构的框图。
具体实施方式
以下，参照附图来具体地说明实施方式。此外，以下说明的实施方式均示出概括性的或具体的例子。以下的实施方式中示出的数值、形状、材料、构成要素、构成要素的配置位置及连接方式、步骤以及步骤的顺序等是一例，并非旨在限定本发明。另外，关于以下实施方式的构成要素中的没有记载在表示最上位概念的独立权利要求中的构成要素，设为任意的构成要素来进行说明。
此外，各图是示意图，并不一定严格地进行了图示。另外，在各图中，对实质上相同的结构标注相同的附图标记，有时省略或简化重复的说明。
(实施方式1)
[结构]
首先，对实施方式1所涉及的声音识别***的结构进行说明。图1是示出实施方式1所涉及的声音识别***的功能结构的框图。
如图1所示，实施方式1所涉及的声音识别***10具备声音控制***20、控制***30以及路由器70。在住宅内设置了声音控制***20的声音输入终端21、控制***30的控制对象设备50以及路由器70。声音控制***20的声音识别服务器22和控制***30的设备控制服务器40以云(云服务器)来实现。另外，在图1中，还图示了配置在住宅外的声音输入终端80。
[声音控制***的结构]
声音控制***20是用于以声音为输入来对控制对象设备进行控制的***。声音控制***20具备声音输入终端21和声音识别服务器22。声音控制***20也可以具备声音输入终端21以外的声音输入终端(例如声音输入终端80)。
声音输入终端21是获取住宅内的用户等的声音的声音输入接口装置。声音输入终端21是声音获取部的一例。声音输入终端21例如是智能扬声器等固置型的终端，被设置在推断为有人的空间。声音输入终端21也可以是智能手机等便携式终端。声音输入终端21只要具备麦克风等集音装置和用于将获取到的声音的声音信号发送到声音识别服务器22的通信电路等，则可以是任何装置。
路由器70是对住宅内的本地通信网络和住宅外的广域通信网络(例如因特网等公共网络)进行中继的中继装置。路由器70例如将由声音输入终端21获取到的声音的声音信号发送到云上的声音识别服务器22。
声音识别服务器22是对从声音输入终端21发送的声音信号进行声音识别处理的服务器。提供声音识别服务的业务商使用声音识别服务器22来提供该声音识别服务。声音识别服务器22例如将从声音输入终端21发送的声音信号转换为文本信息，将文本信息转换为与该文本信息相对应的命令。命令是用于基于由声音输入终端21获取到的声音来对设备进行控制的声音控制信息的一例。例如，在文本信息表示“请打开空调”这样的文本的情况下，这样的文本信息被转换为用于使空调开始动作的命令。另外，声音识别服务器22将命令发送到控制***30的设备控制服务器40。
[控制***的结构]
控制***30是与声音控制***20协作来对设置在住宅内的控制对象设备进行控制的***。控制***30是控制信息获取***的一例。控制***30具备设备控制服务器40和控制对象设备50。
设备控制服务器40是基于从声音识别服务器22发送的命令来对住宅内的控制对象设备50进行控制的服务器。提供设备控制服务的业务商使用设备控制服务器40来提供该设备控制服务。设备控制服务器40具备第一通信部41、第一控制部42以及第一存储部43。
第一通信部41与声音控制***20进行通信。第一通信部41是第一获取部的一例。具体而言，第一通信部41通过与声音控制***20进行通信，来获取声音控制信息。如上所述，声音控制信息例如是由声音识别服务器22发送出的命令。第一通信部41例如是通过通信电路实现的。
第一控制部42将由第一通信部41获取到的命令转换为用于对住宅内的控制对象设备50进行控制的个别命令。另外，第一控制部42利用第一通信部41来向控制对象设备50发送个别命令。此外，也可以是，从声音识别服务器22发送文本信息作为声音控制信息，第一控制部42进行将文本信息转换为命令和将命令转换为个别命令这两者。第一控制部42例如是通过微计算机或处理器实现的。
第一存储部43是存储由第一控制部42执行的程序的存储装置。第一存储部43例如是通过半导体存储器等实现的。
控制对象设备50是接收由设备控制服务器40的第一通信部41发送的个别命令并且按照所接收到的个别命令进行动作的设备。控制对象设备50例如是空调等家电设备，但也可以是门窗(例如玄关的门)的上锁装置等家电设备以外的设备。另外，在控制***30的控制对象设备中，不仅包括控制对象设备50，也可以包括声音输入终端21。
在这种声音识别***10中，不仅能够使用住宅内的声音输入终端21，还能够使用住宅外的声音输入终端80对控制对象设备50进行控制。这样的话，难以判断作为声音控制信息之源的声音是从哪里由谁输入的。
因此，在声音识别***10中，控制***30从声音控制***20除了获取声音控制信息以外，还获取与声音输入终端相关联的关联信息。这种关联信息例如是声音输入终端的识别信息。识别信息例如是声音输入终端的MAC(Media Access Control：介质访问控制)地址，但只要是能够识别出声音输入终端的信息，则可以是任何信息。
根据这种关联信息，能够实现安全性的提高、与场景相应的对控制对象设备50的控制以及控制***30的便利性的提高等。也就是说，实现与输入了声音的情形相应的自适应控制。
[控制对象设备的具体结构]
在实施方式1中，在控制对象设备50中进行使用了关联信息的信息处理。以下，继续参照图1对控制对象设备50的具体结构进行说明。控制对象设备50具备第二通信部51、第二控制部52以及第二存储部53。
第二通信部51经由路由器70接收由设备控制服务器40的第一通信部41发送的个别命令。另外，第二通信部51是第二获取部的一例，用于获取由声音输入终端21或声音输入终端80等声音输入终端输出的声音输入终端的识别信息。第二通信部51例如是通过通信电路实现的。
第二通信部51例如通过获取路径r1来获取声音输入终端的识别信息。获取路径r1是使用了住宅外的广域通信网络的路径，是经由声音识别服务器22和设备控制服务器40的路径。获取路径r1与由第一控制部42获取声音控制信息的获取路径实质上相同。也就是说，第二通信部51通过与用于第一通信部41获取声音控制信息的获取路径相同的获取路径，来获取声音输入终端的识别信息。
另外，第二通信部51也可以通过获取路径r2来获取声音输入终端的识别信息。获取路径r2是使用了比住宅外的广域通信网络窄的住宅内的本地通信网络的路径，是不经由声音识别服务器22和设备控制服务器40的路径。获取路径r2与由第一控制部42获取声音控制信息的获取路径不同。也就是说，第二通信部51也可以通过与用于第一通信部41获取声音控制信息的获取路径不同的获取路径，来获取声音输入终端的识别信息。
第二控制部52具备输出部54和设备控制部55。第二控制部52例如是通过微计算机实现的，但也可以是通过处理器实现的。
输出部54基于由第二通信部51获取到的识别信息，来输出用于对控制对象设备50进行控制的控制信息。输出部54例如基于由第一通信部41获取到的声音控制信息(更具体而言，是由第二通信部51接收到的个别命令)和由第二通信部51获取到的声音输入终端的识别信息，来输出用于对控制对象设备50进行控制的控制信息。
设备控制部55基于由输出部54输出的控制信息来使控制对象设备50进行动作。例如，在控制对象设备50是空调设备的情况下，设备控制部55基于由输出部54输出的控制信息来使空调进行动作。
第二存储部53是存储由第二控制部52执行的程序等的存储装置。另外，在第二存储部53中登记有特定的声音输入终端的识别信息。在第二存储部53中例如还预先存储有声音输入终端21的识别信息和声音输入终端80的识别信息等。第二存储部53具体而言是通过半导体存储器等实现的。
[控制***的动作例1]
接着，对控制***30的动作例1进行说明。图2是控制***30的动作例1的流程图。
首先，第一通信部41通过与声音控制***20进行通信，来获取用于指示第一控制的声音控制信息(S11)。另外，第二通信部51从声音控制***20获取声音输入终端的识别信息(S12)。此外，“从声音控制***20获取”是指例如至少经由声音控制***20中包括的至少一个装置来获取。
接着，输出部54判定在步骤S12中获取到的识别信息是否与第二存储部53中登记的识别信息一致(S13)。也就是说，输出部54判定在步骤S12中获取到的识别信息是否满足规定的必要条件。
输出部54在判定为识别信息与第二存储部53中登记的识别信息一致的情况下(在S13中为“是”)，输出用于对控制对象设备50进行第一控制的控制信息(S14)。例如，如果控制对象设备50是空调设备且第一控制是开启空调设备的控制，则输出部54输出用于开启控制对象设备50(也就是空调设备)的控制信息。
另一方面，输出部54在判定为识别信息与第二存储部53中登记的识别信息不一致的情况下(在S13中为“否”)，不输出用于对控制对象设备50进行第一控制的控制信息。也就是说，输出部54不按照用于指示第一控制的声音控制信息，而忽视该声音控制信息。
根据这种动作例1，只有通过登记有识别信息的声音输入终端进行的声音的输入是有效的，通过没有登记识别信息的声音输入终端进行的声音的输入是无效的，因此安全性提高。
[控制***的动作例2]
接着，对控制***30的动作例2进行说明。图3是控制***30的动作例2的流程图。
在动作例2中，第二通信部51获取表示声音输入终端的位置的位置信息作为与声音输入终端相关联的关联信息。在声音输入终端是智能手机等便携式终端的情况下，从声音输入终端所具备的GPS模块等位置检测元件获得位置信息。在声音输入终端是固置型的终端的情况下，例如在设置时将表示设置位置的位置信息登记到声音输入终端内的存储部中。
另外，在第二存储部53中登记有用于进行步骤S23中的判定的对象区域信息。对象区域信息是表示对象区域的位置范围的信息，在动作例2中表示住宅内的位置范围。也就是说，对象区域信息是用于判定位置信息所表示的位置是否属于住宅内的信息。此外，对象区域不限定于住宅内，可以任意地决定。
与动作例1同样地，第一通信部41获取用于指示第一控制的声音控制信息(S21)。第二通信部51从声音控制***20获取声音输入终端的位置信息(S22)。位置信息例如是从声音输入终端输出并经由声音识别服务器22获取的。
接着，输出部54通过参照存储在第二存储部53中的对象区域信息，来判定在步骤S22中获取到的位置信息所表示的位置是否属于住宅内(S23)。也就是说，输出部54判定被输入了作为声音控制信息之源的声音的声音输入终端是否存在于住宅内。这样，输出部54判定在步骤S12中获取到的位置信息是否满足规定的必要条件。
输出部54在判定为位置信息所表示的位置属于住宅内的情况下，也就是说，在推断为被输入了作为声音控制信息之源的声音的声音输入终端处于住宅内的情况下(在S23中为“是”)，输出用于对控制对象设备50的设备控制部55进行第一控制的控制信息(S24)。例如，在控制对象设备50是空调设备且第一控制是使空调设备以25℃进行制冷动作的控制的情况下，输出部54输出用于使控制对象设备50(也就是空调设备)以25℃进行制冷动作的控制信息。
另一方面，输出部54在判定为位置信息所表示的位置不属于住宅内的情况下，也就是说，在推断为被输入了作为声音控制信息之源的声音的声音输入终端处于住宅外的情况下(在S23中为“否”)，输出用于对控制对象设备50进行第二控制的控制信息(S25)。第二控制是与通过在步骤S21中获取到的声音控制信息指示的第一控制不同的控制。也就是说，输出部54在推断为在步骤S11中获取到的声音控制信息不是基于住宅内存在的人的声音的信息的情况下，不按照声音控制信息，而是改变控制内容。
例如，在控制对象设备50是空调设备且第一控制是使空调设备以25℃进行制冷动作的控制的情况下，第二控制是使空调设备以28℃进行制冷动作的控制。也就是说，由于推断为发出了作为声音控制信息之源的声音的用户不处于住宅内，因此输出部54改变控制内容，使得避免过度的制冷(降低消耗电力)。换言之，输出部54自适应地变更通过声音控制信息指示的控制内容。
根据这种动作例2，在推断为发出了作为声音控制信息之源的声音的用户不处于住宅内的情况下，抑制控制对象设备50进行不恰当的动作。也就是说，实现与场景相应的对控制对象设备50的控制。
[控制***的动作例3]
接着，对控制***30的动作例3进行说明。图4是控制***30的动作例3的流程图。
在动作例3中，第二通信部51获取表示由声音输入终端21获取到的声音的讲话人的讲话人信息作为与声音输入终端相关联的关联信息。例如，声音识别服务器22通过对从声音输入终端21输出的声音信号进行利用了该声音信号的特征量的讲话人识别处理，来生成讲话人信息。
另外，在第二存储部53中存储有将多个用户(讲话人信息)与控制中用到的设定值(例如，空调设备的温度的设定值)对应起来的设定信息。
第一通信部41获取用于指示第一控制的声音控制信息(S31)。第二通信部51从声音控制***20(更具体而言，从声音识别服务器22)获取讲话人信息(S32)。
接着，输出部54通过参照存储在第二存储部53中的设定信息来确定与在步骤S32中获取到的讲话人信息相对应的设定值(S33)。输出部54向控制对象设备50的设备控制部55输出用于进行反映出在步骤S33中确定的设定值的第一控制的控制信息(S34)。
例如，如果控制对象设备50是空调设备，且第一控制是使空调设备进行制冷动作的控制，且在设定信息中多个用户的讲话人信息与该用户的喜好温度的设定值相对应，则控制对象设备50以讲话人的喜好温度的设定值进行制冷动作。
根据这种动作例3，能够使控制对象设备50以与讲话人相应的设定进行动作，从而提高控制***30的便利性。
[变形例1]
动作例1～3也可以适当组合。例如，在动作例1中，也可以仅在识别信息、位置信息以及讲话人信息全部满足规定的必要条件时进行第一控制。更具体而言，也可以仅在识别信息是设置在住宅内的声音输入终端21的识别信息、且位置信息所表示的位置属于住宅内、且讲话人信息所表示的讲话人是特定的用户A的情况下，进行第一控制。在该情况下，在识别信息是声音输入终端80的识别信息、且位置信息所表示的位置属于住宅外、且讲话人信息所表示的讲话人是用户B的情况下，不进行第一控制。另外，在识别信息是声音输入终端21的识别信息、且位置信息所表示的位置属于住宅内、且讲话人信息所表示的讲话人是用户B的情况下，也不进行第一控制。
另外，在动作例1中，也可以是，在识别信息、位置信息以及讲话人信息中的至少一个满足规定的必要条件时，进行第一控制。
[变形例2]
此外，第一通信部41也可以获取与由声音输入终端21获取到的声音的方向有关的信息。输出部54也可以基于与声音的方向有关的信息和关联信息来输出控制信息。
在该情况下，由声音输入终端21所具备的传感器探测声音的方向，声音输入终端生成与声音的输入有关的信息。声音输入终端21除了将所获取到的声音的声音信号发送到声音识别服务器22以外，还将与所获取到的声音的方向有关的信息发送到声音识别服务器22。
由第一通信部41获取与声音的方向有关的信息。例如，在上述动作例1中使用与声音的方向有关的信息的情况下，追加与声音的方向有关的信息所表示的方向是规定的方向这一条件来作为进行第一控制的必要条件。也就是说，在识别信息等关联信息满足规定的必要条件且与声音的方向有关的信息所表示的方向是规定的方向的情况下，进行第一控制。
另外，第一通信部41也可以获取与由声音输入终端21获取到的声音的强度(具体而言，是声压)有关的信息。输出部54也可以基于与声音的强度有关的信息以及关联信息来输出控制信息。
在该情况下，由声音输入终端21所具备的传感器探测声音的强度，声音输入终端生成与声音的输入有关的信息。声音输入终端21除了将所获取到的声音的声音信号发送到声音识别服务器22以外，还将与所获取到的声音的强度有关的信息发送到声音识别服务器22。
由第一通信部41获取与声音的强度有关的信息。例如，在上述动作例1中使用与声音的强度有关的信息的情况下，追加与声音的强度有关的信息所表示的强度为规定的强度以上这一条件来作为进行第一控制的必要条件。也就是说，在识别信息等关联信息满足规定的必要条件且与声音的强度有关的信息所表示的强度为规定的强度以上的情况下，进行第一控制。
(实施方式2)
[结构]
接着，对实施方式2所涉及的声音识别***的结构进行说明。图5是示出实施方式2所涉及的声音识别***的功能结构的框图。此外，在以下的实施方式2中，以与实施方式1的不同点为中心进行说明，省略或简化对已出现事项的说明。关于实施方式3及其之后的实施方式也同样。
如图5所示，实施方式2所涉及的声音识别***10a所具备的控制***30a具备设备控制服务器40a和控制对象设备50a。
在实施方式2中，在设备控制服务器40a中进行使用了关联信息的信息处理。设备控制服务器40a具备第一通信部41a、第一控制部42a以及第一存储部43。
第一通信部41a与声音控制***20进行通信。第一通信部41a是第一获取部的一例。具体而言，第一通信部41通过与声音控制***20进行通信，来获取声音控制信息。另外，第一通信部41a是第二获取部的一例，从声音控制***20获取与声音输入终端相关联的关联信息。第一通信部41a例如是通过通信电路实现的。
第一控制部42a具备输出部44a。第一控制部42a例如是通过微计算机或处理器实现的。输出部44a将由第一通信部41获取到的控制命令转换为用于对住宅内的控制对象设备50a进行控制的个别命令。
另外，输出部44a基于由第一通信部41a获取到的关联信息，来输出用于对控制对象设备50a进行控制的控制信息。具体而言，输出部44a进行如通过图2～图4所说明的那样的信息处理。这里的控制信息是上述个别命令。此外，在实施方式2中，在第一存储部43中存储有在使用了关联信息的信息处理中使用的各种信息(例如，识别信息、对象区域信息以及设定信息等)。
在从输出部44a输出控制信息的情况下，由第一通信部41a将控制信息发送到控制对象设备50a，当由控制对象设备50a的第二通信部51接收到控制信息时，第二控制部52a所具备的设备控制部55基于接收到的控制信息来使控制对象设备50a进行动作。
如以上所说明的那样，在声音识别***10a中，不是在控制对象设备50a中，而是在设备控制服务器40a中进行使用了关联信息的信息处理。也就是说，通过设备控制服务器40a侧的规格变更，来实现与输入了声音的情形相应的自适应控制。换言之，抑制控制对象设备50a的规格的变更规模，与此同时，实现与输入了声音的情形相应的自适应控制。
(实施方式3)
[结构]
接着，对实施方式3所涉及的声音识别***的结构进行说明。图6是示出实施方式3所涉及的声音识别***的功能结构的框图。此外，在图6中，设备控制服务器40和控制对象设备50a的功能结构被简化。
如图6所示，实施方式3所涉及的声音识别***10b所具备的控制***30b具备设备控制服务器40、控制装置90以及控制对象设备50a。在实施方式3中，在控制装置90中进行使用了关联信息的信息处理。
控制装置90是对住宅内的设备进行控制的装置。控制装置90例如是HEMS(HomeEnergy Management System：家庭能源管理***)控制器(换言之，是家庭网关)。控制装置90具备第三通信部91、第三控制部92以及第三存储部93。
第三通信部91经由路由器70接收由设备控制服务器40的第一通信部41发送的个别命令。另外，第三通信部91是第二获取部的一例，用于从声音控制***20获取与声音输入终端相关联的关联信息。第三通信部91例如是通过通信电路实现的。
第三控制部92具备输出部94。第三控制部92例如是通过微计算机实现的，但也可以是通过处理器实现的。
输出部94基于由第一通信部41获取到的声音控制信息(更具体而言，是由第三通信部91接收到的个别命令)和由第三通信部91获取到的关联信息，来输出用于对控制对象设备50a进行控制的控制信息。
第三存储部93是存储由第三控制部92执行的程序等的存储装置。在第三存储部93中还存储有在使用了关联信息的信息处理中使用的各种信息(具体而言，是识别信息、对象区域信息以及设定信息等)。具体而言，第三存储部93是通过半导体存储器等实现的。
在从输出部94输出控制信息的情况下，由第三通信部91通过住宅内的本地通信网络将控制信息发送到控制对象设备50a。当由控制对象设备50a的第二通信部51(在图6中省略图示)接收到控制信息时，设备控制部55基于接收到的控制信息来使控制对象设备50a进行动作。
如以上所说明的那样，在声音识别***10b中，不是在设备控制服务器40和控制对象设备50a中，而是在控制装置90中进行使用了关联信息的信息处理。也就是说，通过导入控制装置90，来实现与输入了声音的情形相应的自适应控制。换言之，抑制设备控制服务器40和控制对象设备50a的规格的变更规模，与此同时，实现与输入了声音的情形相应的自适应控制。
(效果等)
如以上所说明的那样，控制***30具备：第一通信部41，其从输出声音控制信息的声音控制***20获取声音控制信息，该声音控制信息用于基于由声音输入终端21获取到的声音来对设备进行控制；以及第二通信部51，其从声音控制***20获取与声音输入终端21相关联的关联信息。控制***30是控制信息获取***的一例，声音输入终端21是声音获取部的一例。第一通信部41是第一获取部的一例，第二通信部51是第二获取部的一例。
这种控制***30通过进行使用了关联信息的信息处理，能够根据向声音输入终端21输入了声音的情形，来自适应地对设备进行控制。
另外，例如，第二通信部51通过与用于第一通信部41获取声音控制信息的获取路径相同的获取路径，来获取关联信息。
这种控制***30能够通过与用于第一通信部41获取声音控制信息的获取路径相同的获取路径，来容易地获取关联信息。
另外，例如，第二通信部51通过与用于第一通信部41获取声音控制信息的获取路径不同的获取路径，来获取关联信息。
这种控制***30在用于第一通信部41获取声音控制信息的获取路径被黑客攻击的情况下，能够通过与该获取路径不同的通信路径来获取可靠性高的关联信息。
另外，例如，第二通信部51获取与设置在被推断为有人的空间内的声音输入终端21相关联的关联信息。
这种控制***30能够获取固置型的智能扬声器等声音输入终端21的关联信息。
另外，例如，控制***30还具备输出部54，该输出部54基于所获取到的声音控制信息和所获取到的关联信息，来输出用于对控制对象设备50进行控制的控制信息。
这种控制***30能够基于关联信息，根据输入了声音的情形来自适应地对控制对象设备50进行控制。
另外，例如，在由第一通信部41获取到声音控制信息的情况下，输出部54基于关联信息来输出用于对控制对象设备50a进行与通过声音控制信息指示的第一控制不同的第二控制的控制信息。
这种控制***30能够基于关联信息来自适应地改变针对控制对象设备50的控制内容。
另外，例如，在由第一通信部41获取到声音控制信息的情况下，在关联信息满足规定的必要条件时，输出部54输出用于对控制对象设备50进行第一控制的控制信息，在关联信息不满足规定的必要条件时，输出部54输出用于对控制对象设备50进行第二控制的控制信息。
这种控制***30能够基于关联信息是否满足规定的必要条件来自适应地改变针对控制对象设备50的控制内容。
另外，例如，关联信息是声音输入终端21的识别信息。
这种控制***30能够根据被输入了声音的声音输入终端21的识别信息，来自适应地对设备进行控制。
另外，例如，关联信息是表示声音输入终端21的位置的信息。
这种控制***30能够根据被输入了声音的声音输入终端21的位置，来自适应地对设备进行控制。
另外，例如，关联信息是表示由声音输入终端21获取到的声音的讲话人的信息。
这种控制***30能够根据由声音输入终端21获取到的声音的讲话人，来自适应地对设备进行控制。
(其它实施方式)
以上，对实施方式进行了说明，但本发明不限定于上述实施方式。
例如，对于上述实施方式中的装置间的通信方法，没有特别限定。在装置之间，例如进行使用了特定小功率无线、ZigBee(注册商标)、Bluetooth(注册商标)或Wi-Fi(注册商标)等通信标准的无线通信。此外，无线通信具体而言是电波通信或红外线通信等。
另外，在装置之间，也可以进行电力线传输通信(PLC：Power LineCommunication)或使用了有线LAN的通信等有线通信，来代替无线通信。另外，在装置之间，也可以将无线通信与有线通信相结合。
另外，在上述实施方式中，也可以由其它处理部执行特定的处理部所执行的处理。另外，既可以变更多个处理的顺序，也可以并行地执行多个处理。
另外，在上述实施方式中，控制部等构成要素也可以是通过执行适合于各构成要素的软件程序实现的。各构成要素也可以是通过由CPU或处理器等程序执行部读出硬盘或半导体存储器等记录介质中记录的软件程序并执行该软件程序来实现的。
另外，控制部等构成要素也可以是通过硬件实现的。例如，控制部等构成要素也可以是电路(或集成电路)。这些电路既可以整体上构成一个电路，也可以分别为不同的电路。另外，这些电路各自既可以是通用的电路，也可以是专用的电路。
另外，本发明的整体或具体的方式也可以是通过***、装置、方法、集成电路、计算机程序或计算机可读的CD-ROM等记录介质来实现的。另外，也可以是通过***、装置、方法、集成电路、计算机程序以及记录介质的任意的组合来实现的。
例如，本发明也可以实现为控制对象设备、设备控制服务器或控制装置。另外，本发明既可以实现为控制信息获取方法，也可以实现为用于使计算机执行控制信息获取方法的程序，还可以实现为记录有这样的程序的非暂态记录介质。
另外，在上述实施方式中说明的各***既可以作为单个装置来实现，也可以通过多个装置来实现。在***通过多个装置实现的情况下，上述实施方式中说明的***所具备的构成要素也可以以任意方式分配给多个装置。
除此以外，对各实施方式施加本领域技术人员所想到的各种变形所得到的方式、或者在不脱离本发明的宗旨的范围内将各实施方式中的构成要素和功能任意地组合所实现的方式也包括在本发明中。
附图标记说明
20：声音控制***；21：声音输入终端(声音获取部)；22：声音识别服务器；30、30a、30b、30c：控制***(控制信息获取***)；41：第一通信部(第一获取部)；41a：第一通信部(第一获取部、第二获取部)；44a、54、94：输出部；50、50a：控制对象设备；51：第二通信部(第二获取部)；91：第三通信部(第二获取部)。

Claims (12)

1.一种控制信息获取***，具备：
第一获取部，其从输出声音控制信息的声音控制***获取所述声音控制信息，所述声音控制信息用于基于由声音获取部获取到的声音来对设备进行控制；以及
第二获取部，其从所述声音控制***获取与所述声音获取部相关联的关联信息。
2.根据权利要求1所述的控制信息获取***，其中，
所述第二获取部通过与用于所述第一获取部获取所述声音控制信息的获取路径相同的获取路径，来获取所述关联信息。
3.根据权利要求1所述的控制信息获取***，其中，
所述第二获取部通过与用于所述第一获取部获取所述声音控制信息的获取路径不同的获取路径，来获取所述关联信息。
4.根据权利要求1～3中的任一项所述的控制信息获取***，其中，
所述第二获取部获取与设置在被推断为有人的空间内的所述声音获取部相关联的关联信息。
5.根据权利要求1所述的控制信息获取***，其中，
所述控制信息获取***还具备输出部，所述输出部基于所获取到的所述声音控制信息和所获取到的所述关联信息，来输出用于对控制对象设备进行控制的控制信息。
6.根据权利要求5所述的控制信息获取***，其中，
在由所述第一获取部获取到所述声音控制信息的情况下，所述输出部基于所述关联信息来输出用于对所述控制对象设备进行与通过所述声音控制信息指示的第一控制不同的第二控制的所述控制信息。
7.根据权利要求6所述的控制信息获取***，其中，
在由所述第一获取部获取到所述声音控制信息的情况下，
在所述关联信息满足规定的必要条件时，所述输出部输出用于对所述控制对象设备进行所述第一控制的所述控制信息，
在所述关联信息不满足所述规定的必要条件时，所述输出部输出用于对所述控制对象设备进行所述第二控制的所述控制信息。
8.根据权利要求1～7中的任一项所述的控制信息获取***，其中，
所述关联信息是所述声音获取部的识别信息。
9.根据权利要求1～7中的任一项所述的控制信息获取***，其中，
所述关联信息是表示所述声音获取部的位置的信息。
10.根据权利要求1～7中的任一项所述的控制信息获取***，其中，
所述关联信息是表示由所述声音获取部获取到的声音的讲话人的信息。
11.一种控制信息获取方法，包括以下步骤：
从输出声音控制信息的声音控制***获取所述声音控制信息，所述声音控制信息用于基于由声音获取部获取到的声音来对设备进行控制；以及
从所述声音控制***获取与所述声音获取部相关联的关联信息。
12.一种程序，用于使计算机执行根据权利要求11所述的控制信息获取方法。
CN201980013162.XA 2018-02-14 2019-01-24 控制信息获取***和控制信息获取方法 Pending CN111712873A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018-024283 2018-02-14
JP2018024283A JP6928842B2 (ja) 2018-02-14 2018-02-14 制御情報取得システム、及び、制御情報取得方法
PCT/JP2019/002360 WO2019159646A1 (ja) 2018-02-14 2019-01-24 制御情報取得システム、及び、制御情報取得方法

Publications (1)

Publication Number Publication Date
CN111712873A true CN111712873A (zh) 2020-09-25

Family

ID=67621014

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980013162.XA Pending CN111712873A (zh) 2018-02-14 2019-01-24 控制信息获取***和控制信息获取方法

Country Status (4)

Country Link
US (1) US20210035578A1 (zh)
JP (1) JP6928842B2 (zh)
CN (1) CN111712873A (zh)
WO (1) WO2019159646A1 (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102855116A (zh) * 2011-06-13 2013-01-02 索尼公司 信息处理设备、信息处理方法及程序
CN103229520A (zh) * 2010-08-30 2013-07-31 雅马哈株式会社 信息处理设备、音响处理设备、音响处理***和程序
CN103945108A (zh) * 2013-01-17 2014-07-23 卡西欧计算机株式会社 信息提供***、服务器***、终端装置以及信息提供方法
CN106506442A (zh) * 2016-09-14 2017-03-15 上海百芝龙网络科技有限公司 一种智能家居多用户身份识别及其权限管理***
CN107015781A (zh) * 2017-03-28 2017-08-04 联想(北京)有限公司 语音识别方法和***

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7039590B2 (en) * 2001-03-30 2006-05-02 Sun Microsystems, Inc. General remote using spoken commands
US7099825B1 (en) * 2002-03-15 2006-08-29 Sprint Communications Company L.P. User mobility in a voice recognition environment
JP3715584B2 (ja) * 2002-03-28 2005-11-09 富士通株式会社 機器制御装置および機器制御方法
US7949529B2 (en) * 2005-08-29 2011-05-24 Voicebox Technologies, Inc. Mobile systems and methods of supporting natural language human-machine interactions
US20070299670A1 (en) * 2006-06-27 2007-12-27 Sbc Knowledge Ventures, Lp Biometric and speech recognition system and method
JP5351855B2 (ja) * 2010-08-10 2013-11-27 ヤフー株式会社 情報家電システム、情報取得方法及びプログラム
US20120059655A1 (en) * 2010-09-08 2012-03-08 Nuance Communications, Inc. Methods and apparatus for providing input to a speech-enabled application program
US8825020B2 (en) * 2012-01-12 2014-09-02 Sensory, Incorporated Information access and device control using mobile phones and audio in the home environment
US9271111B2 (en) * 2012-12-14 2016-02-23 Amazon Technologies, Inc. Response endpoint selection
WO2015029379A1 (ja) * 2013-08-29 2015-03-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 機器制御方法、表示制御方法及び購入決済方法
JP6282516B2 (ja) * 2014-04-08 2018-02-21 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 複数機器の音声操作システム、音声操作方法及び、プログラム
US10170123B2 (en) * 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
JP6482911B2 (ja) * 2014-07-01 2019-03-13 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 機器制御方法および電気機器
US10783888B2 (en) * 2015-09-10 2020-09-22 Crestron Electronics Inc. System and method for determining recipient of spoken command in a control system
CN106814639A (zh) * 2015-11-27 2017-06-09 富泰华工业（深圳）有限公司 语音控制***及方法
JP6657025B2 (ja) * 2016-06-17 2020-03-04 シャープ株式会社 操作者推定システム
CN107765838A (zh) * 2016-08-18 2018-03-06 北京北信源软件股份有限公司 人机交互辅助方法及装置
WO2018123067A1 (ja) * 2016-12-29 2018-07-05 ヤマハ株式会社 コマンドデータ送信装置、ローカルエリア装置、機器制御システム、コマンドデータ送信装置の制御方法、ローカルエリア装置の制御方法、機器制御方法、及びプログラム
CA3155437C (en) * 2017-02-07 2024-01-09 Lutron Technology Company Llc Audio-based load control system
TW201834437A (zh) * 2017-03-08 2018-09-16 捷音特科技股份有限公司 聲控無線系統及其穿戴式語音收發裝置
US10038938B1 (en) * 2017-06-02 2018-07-31 Rovi Guides, Inc. Systems and methods for controlling permissions to change parental control settings based on vocal characteristics of a user
US11489691B2 (en) * 2017-07-12 2022-11-01 Universal Electronics Inc. Apparatus, system and method for directing voice input in a controlling device
KR102419374B1 (ko) * 2017-07-21 2022-07-11 삼성전자주식회사 사용자 발화를 처리하는 전자 장치 및 그 전자 장치의 제어 방법
US11290518B2 (en) * 2017-09-27 2022-03-29 Qualcomm Incorporated Wireless control of remote devices through intention codes over a wireless connection
EP3493200B1 (en) * 2017-11-30 2023-07-26 Vestel Elektronik Sanayi ve Ticaret A.S. Voice-controllable device and method of voice control
US10971173B2 (en) * 2017-12-08 2021-04-06 Google Llc Signal processing coordination among digital voice assistant computing devices
US10713007B2 (en) * 2017-12-12 2020-07-14 Amazon Technologies, Inc. Architecture for a hub configured to control a second device while a connection to a remote system is unavailable
CN111512365B (zh) * 2017-12-31 2023-06-13 美的集团股份有限公司 对多个家庭装置进行控制的方法和***
US10795332B2 (en) * 2018-01-16 2020-10-06 Resilience Magnum IP, LLC Facilitating automating home control

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103229520A (zh) * 2010-08-30 2013-07-31 雅马哈株式会社 信息处理设备、音响处理设备、音响处理***和程序
CN102855116A (zh) * 2011-06-13 2013-01-02 索尼公司 信息处理设备、信息处理方法及程序
CN103945108A (zh) * 2013-01-17 2014-07-23 卡西欧计算机株式会社 信息提供***、服务器***、终端装置以及信息提供方法
CN106506442A (zh) * 2016-09-14 2017-03-15 上海百芝龙网络科技有限公司 一种智能家居多用户身份识别及其权限管理***
CN107015781A (zh) * 2017-03-28 2017-08-04 联想(北京)有限公司 语音识别方法和***

Also Published As

Publication number Publication date
WO2019159646A1 (ja) 2019-08-22
JP2019139645A (ja) 2019-08-22
US20210035578A1 (en) 2021-02-04
JP6928842B2 (ja) 2021-09-01

Similar Documents

Publication Publication Date Title
EP3252998B1 (en) Method and apparatus for controlling smart home device to upload data, method and apparatus for acquiring data uploaded by smart home device
US9390716B2 (en) Control method for household electrical appliance, household electrical appliance control system, and gateway
KR102307701B1 (ko) 주변 기기 제어 방법 및 장치
EP4155782B1 (en) Systems and methods of ultrasonic sensing in smart devices
US20160132029A1 (en) Method for configuring and controlling smart home products
KR102250421B1 (ko) Ai 음성인식 스피커 및 세대 내 설치된 네트워크 장치를 이용한 홈 네트워킹 방법, 이를 운용하기 위한 장치 및 시스템
EP3852102B1 (en) Voice assistant proxy for voice assistant servers
CN110661888B (zh) 家电设备的语音控制方法、控制装置及可读存储介质
US10930142B2 (en) Remote control device and remote control system
CN111712873A (zh) 控制信息获取***和控制信息获取方法
US20220122600A1 (en) Information processing device and information processing method
KR102573242B1 (ko) 비명소리 인식을 위한 사운드장치
KR102495019B1 (ko) 동물소리 인식 사운드장치
JP7245999B2 (ja) 制御情報取得システム、及び、制御情報取得方法
KR101188043B1 (ko) 홈 네트워크 제어 방법, 장치 및 기록매체
KR102495028B1 (ko) 휘파람소리 인식 기능이 구비된 사운드장치
US20220036876A1 (en) Speech apparatus, server, and control system
JP7065314B2 (ja) 制御システム、及び、制御方法
CN106878049B (zh) 一种配置方法及装置
KR20200062623A (ko) 전자 장치 및 그것의 타 전자 장치를 제어하는 방법
KR102503468B1 (ko) 홈 시어터 사운드 제어 방법 및 시스템
KR102645469B1 (ko) 출입 인지를 위한 사운드장치
JP6150516B2 (ja) 施設管理システム、携帯端末、施設管理装置および施設管理方法
KR200394217Y1 (ko) 자동 환경설정용 제어신호 변환장치
KR20190036252A (ko) 음성데이터를 이용한 건물 내의 기기 제어서비스 제공시스템 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20200925

WD01 Invention patent application deemed withdrawn after publication