CN104170413A - 基于环境上下文控制移动装置中的应用程序 - Google Patents
基于环境上下文控制移动装置中的应用程序 Download PDFInfo
- Publication number
- CN104170413A CN104170413A CN201380012762.7A CN201380012762A CN104170413A CN 104170413 A CN104170413 A CN 104170413A CN 201380012762 A CN201380012762 A CN 201380012762A CN 104170413 A CN104170413 A CN 104170413A
- Authority
- CN
- China
- Prior art keywords
- mobile device
- leader
- application program
- context
- sound characteristic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W52/00—Power management, e.g. TPC [Transmission Power Control], power saving or power classes
- H04W52/02—Power saving arrangements
- H04W52/0209—Power saving arrangements in terminal devices
- H04W52/0225—Power saving arrangements in terminal devices using monitoring of external events, e.g. the presence of a signal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
- G06F1/3215—Monitoring of peripheral devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
- G06F1/3231—Monitoring the presence, absence or movement of users
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3234—Power saving characterised by the action undertaken
- G06F1/329—Power saving characterised by the action undertaken by task scheduling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/30—Services specially adapted for particular environments, situations or purposes
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02J—CIRCUIT ARRANGEMENTS OR SYSTEMS FOR SUPPLYING OR DISTRIBUTING ELECTRIC POWER; SYSTEMS FOR STORING ELECTRIC ENERGY
- H02J9/00—Circuit arrangements for emergency or stand-by power supply, e.g. for emergency lighting
- H02J9/005—Circuit arrangements for emergency or stand-by power supply, e.g. for emergency lighting using a power saving mode
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Hardware Design (AREA)
- Human Computer Interaction (AREA)
- Environmental & Geological Engineering (AREA)
- Telephone Function (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明揭示一种用于控制移动装置中的应用程序的方法。所述方法包含:接收环境信息;从所述环境信息推断环境上下文;以及基于与所述推断的环境上下文相关联的一组参考模型控制所述应用程序的激活。另外,所述方法可包含:接收声音输入;从所述声音输入提取声音特征;将所述声音特征发射到服务器,所述服务器经配置以将多个移动装置分组到至少一个相似上下文群组中;以及从所述服务器接收关于领导装置或非领导装置和所述至少一个相似上下文群组的信息。
Description
相关申请案的交叉参考
本申请案在35U.S.C.§119(e)的权益下主张2012年3月20日申请的第61/613,457号美国临时专利申请案和2013年2月14日申请的第13/767,028号美国非临时专利申请案的优先权,以上申请案的内容特此以引用方式并入本文。
技术领域
本发明大体上涉及控制移动装置中的应用程序。更具体来说,本发明涉及基于移动装置的环境上下文控制移动装置中的应用程序。
背景技术
当前存在多种便携式计算装置(即,移动装置),包含例如移动电话、个人数字助理(PDA)、平板计算机和膝上型计算机等无线计算装置,其小型、重量轻且容易由用户携带。例如蜂窝式电话、因特网协议(IP)电话和智能电话装置等移动装置可在无线网络上传送音频和数据包。另外,移动装置还可处理软件应用程序,例如网络浏览器应用程序、音乐播放器、电子邮件程序、游戏等等。
此外,许多此类移动装置可包含用以俘获音频信号的一或多个麦克风。通过无线能力,在移动装置上通过数字技术发射例如语音和音乐等音频信息已变得广泛。也可处理音频信号以用于音频辨识,其用于例如在移动装置中搜索音乐等许多应用。
然而,此类应用通常经配置以在移动装置上连续运行,例如用于自动俘获移动装置的环境声。由于应用程序在连续运行,因此移动装置可能消耗大量电力,进而限制移动装置的电池寿命。
另外,应用程序可在网络上连续地传送音频信息,从而进一步耗尽移动装置的电力资源。因此,需要用于控制移动装置中的应用程序以改善电力资源的使用的方法和设备。
发明内容
本发明提供用于控制移动装置中的应用程序的方法、***和装置。
根据本发明的一个方面,揭示一种用于控制移动装置中的应用程序的方法。所述方法包含接收指示至少一个环境条件的环境信息,从环境信息推断移动装置的环境上下文,以及基于与推断的环境上下文相关联的一组参考模型控制应用程序的激活和/或其它特征。
另外,所述方法可包含:接收从环境声音俘获的声音输入;从所述声音输入提取声音特征;将所述声音特征发射到服务器,所述服务器经配置以基于来自多个移动装置的所述声音特征的相似性将所述多个移动装置分组到至少一个相似上下文群组中且识别所述至少一个相似上下文群组中的领导装置或非领导装置;以及从所述服务器接收关于所述领导装置或所述非领导装置和所述至少一个相似上下文群组的信息。服务器可从所述至少一个相似上下文群组中的领导装置接收声音特征。此外,发射声音特征可包含当在所述移动装置中推断出不同环境上下文时将新声音特征发射到所述服务器。本发明还描述与此方法有关的装置、***、服务器、装置组合和计算机可读媒体。
根据本发明的另一方面,移动装置可包含接收器,其经配置以接收指示至少一个环境条件的环境信息;上下文推断单元,其经配置以从所述环境信息推断所述移动装置的环境上下文;以及应用程序控制单元,其经配置以基于与所述推断的环境上下文相关联的一组参考模型控制所述应用程序的激活。
此外,所述移动装置可包含:声音传感器,其经配置以接收从环境声音俘获的声音输入;声音特征提取器,其经配置以从所述声音输入提取声音特征;发射器,其经配置以将所述声音特征发射到服务器,所述服务器经配置以基于来自多个移动装置的所述声音特征的相似性将所述多个移动装置分组到至少一个相似上下文群组中且识别所述至少一个相似上下文群组中的领导装置或非领导装置;以及群组信息接收器,其经配置以从所述服务器接收关于所述领导装置或所述非领导装置和所述至少一个相似上下文群组的信息。所述至少一个相似上下文群组中的领导装置可将声音特征发射到服务器。此外,发射器可经配置以当所述上下文推断单元推断出不同环境上下文时将新声音特征发射到所述服务器。
提供此概述是为了以简化形式介绍下文中在详细描述内容中进一步描述的概念选择。此概述无意识别所主张标的物的关键特征或本质特征,也无意用于限制所主张标的物的范围。
附图说明
以上概述以及以下说明性实施例的详细描述在结合附图阅读时更好地理解。为了说明实施例的目的,在图中展示实施例的实例性构造;然而,实施例不限于所揭示的特定方法和工具。
图1说明根据一些实施例的基于移动装置的位置信息控制移动装置中的应用程序。
图2说明根据一些实施例的当移动装置在汽车中时控制移动装置中的应用程序。
图3说明根据一些实施例的基于当前时间信息控制移动装置中的应用程序。
图4说明根据一些实施例的用于控制移动装置中的至少一个应用程序的方法的流程图。
图5说明根据一些实施例的用于控制移动装置中的至少一个应用程序的另一方法的流程图。
图6说明根据一些实施例的用于通过基于光强度、位置信息、运动信息和时间信息推断环境上下文来控制应用程序的移动装置的框图。
图7说明根据一些实施例的用于通过基于环境声音推断环境上下文来控制应用程序的移动装置的框图。
图8说明根据一些实施例的用于通过接入服务器中的参考数据库来控制移动装置中的应用程序的***的概况。
图9说明根据一些实施例的用于基于移动装置的位置信息控制应用程序的方法的流程图。
图10说明根据一些实施例的用于基于时间信息和光强度控制应用程序的方法的流程图。
图11说明根据一些实施例的用于基于时间信息、光强度和对象的接近控制应用程序的方法的流程图。
图12说明根据一些实施例的用于基于环境声音控制应用程序的方法的流程图。
图13说明根据一些实施例的用于基于推断的环境上下文将移动装置分组到相似上下文群组中的***的概况图。
图14说明根据一些实施例的用于基于推断的环境上下文将移动装置分组到相似上下文群组中的方法的流程图。
图15是根据一些实施例的具有无线通信能力的示范性移动装置的框图。
具体实施方式
现在将详细参考各种实施例,所述实施例的实例在附图中说明。在以下详细描述中,陈述许多具体细节以便提供对本发明标的物的详尽了解。然而所属领域的技术人员将明了,可在没有这些具体细节的情况下实践本发明标的物。在其它实例中,未详细描述众所周知的方法、程序、***和组件,以免不必要地混淆各种实施例的方面。
在移动装置处,接收指示环境条件的环境信息。移动装置根据环境信息推断其环境上下文,且基于与所推断的环境上下文相关联的一组参考模型控制应用程序的激活和其它特征。这些其它特征包含调整应用程序的工作循环,控制应用程序的目标和网络资源,以及调整应用程序的可允许等待时间。“环境上下文推断”指代基于指示例如位置、光强度、运动、时间等至少一个环境条件的环境信息导出用户在某一环境中登记的结论的动作或过程。
图1说明根据一些实施例的其中基于移动装置的位置信息在移动装置130中控制应用程序的情境100。如本文使用,“位置信息”指代指示移动装置位于何处的任何信息或任何类型的数据,例如纬度、经度、海拔、附近建筑物的信息、地区名称等等。另外,“控制应用程序”指代激活、解除激活或执行应用程序的任何操作。此外,“应用程序”指代用以执行特定任务的任何方法或功能,例如由处理芯片或DSP(数字信号处理器)处理的软件、固件、功能性和服务。
举例来说,移动装置130可基于位置信息推断其环境上下文,例如电影院,且基于环境上下文推断激活电影院应用程序(或调整其特征、设定和/或算法)。以此方式,电影院应用程序可仅在必要时激活,且移动装置130可减少操作应用程序所需的电力,因为移动装置130的环境上下文推断可使用比操作应用程序少得多的电力。
更特定来说,在电影屏幕110或其它显示器上观看电影的用户120在其去看电影时通常拥有移动装置130,例如智能电话和平板计算机。观看电影的一些用户可能忘记在放电影时关掉其移动装置以免烦扰他人。在此情况下,当在剧院中通告例如“请关掉您的电话”的消息时,在移动装置130中运行的电影院应用程序可辨识此消息以关掉移动装置。
具体来说,移动装置130可接收通告“请关掉您的电话”以产生所述通告的音频指纹。如本文使用,“音频指纹”指代唯一地描述或表示声音的任何信息或数据且包含声音特征或任何其它声音识别符。在移动装置130产生此音频指纹之后,将产生的音频指纹与参考音频指纹(即,“声音识别”)进行比较,所述参考音频指纹从参考通告“请关掉您的电话”预先产生且预先存储在服务器或移动装置130中。如果确定产生的音频指纹匹配于参考音频指纹,那么电影院应用程序可关掉移动装置130。
在一些实施例中,电影院应用程序可总是经激活以俘获通告“请关掉您的电话”。然而在此情况下,尽管用户120不位于电影院中也将激活应用程序,且将浪费操作应用程序的电力。因此,为了节省移动装置130中的电力消耗,可仅在移动装置130的用户120位于电影院中时激活电影院应用程序。
为了识别移动装置130是否位于电影院中,移动装置130可从GPS(全球定位***)卫星140或基站150接收位置信息。具体来说,移动装置130可基于来自地球上方高处的GPS卫星140的信号计算移动装置130的位置。如果移动装置130由于移动装置130与GPS卫星140之间的障碍而无法接收到来自GPS卫星140的信号,那么移动装置130可接收来自附近基站150的位置信息。另外,移动装置130可协调来自GPS卫星140和基站150的位置信息。在接收到位置信息之后,移动装置130可基于位置信息确定移动装置130是否位于电影院中。如果移动装置130确定移动装置130位于电影院中,那么移动装置130可激活电影院应用程序以俘获从电影院发出的声音。
在以上实施例中,移动装置130基于位置信息推断移动装置130的环境上下文(例如电影院),且基于环境上下文推断而激活电影院应用程序。以此方式,电影院应用程序可仅在必要的情况下激活,且移动装置130可减少操作应用程序所需的电力,因为移动装置的环境上下文推断可使用比操作应用程序少得多的电力。因此,在一些实施例中,仅用于上下文推断的操作可总是在移动装置130上激活而不是操作应用程序,因为用于上下文推断的操作可使用比操作应用程序少的电力来实施。
作为另一实例,用户(例如,驾驶员)可具有移动装置且收听汽车或其它交通工具中的广播。图2说明根据一些实施例的其中当移动装置130在汽车210(或其它交通工具)中时在移动装置130中控制应用程序的另一情境200。用户120(例如,驾驶员)可具有移动装置130且收听汽车210中的广播。移动装置130可接收来自GPS卫星140和/或基站150的位置信息。
在实施例中,移动装置130可在移动装置130的位置高速改变时或在移动装置130位于道路上时推断移动装置130的用户120在汽车210中。在此情况下,移动装置130可激活音乐搜索应用程序以基于来自广播的音乐执行搜索。此外,基于上文的环境上下文推断,移动装置130可在电影院应用程序被激活的情况下解除激活电影院应用程序。
图3说明根据一些实施例的其中基于当前时间信息在移动装置130中控制应用程序的又一情境300。用户120可在他睡觉时将移动装置130放在床附近。在此情况下,移动装置130可接收时间信息且在时间处于例如午夜12点与上午7点之间的情况下推断用户120正在睡觉。移动装置130可随后解除激活(或另外调整其特征、设定和/或算法)所有应用程序(例如,电影院应用程序和音乐搜索应用程序)以减少操作电力和网络资源的使用。在实施例中,移动装置130可使用光传感器或接近传感器来确定用户120是否正在睡觉。
应了解,以上情境100、200和300是为了提供控制移动装置130中的应用程序的实例的目的而描述,所述控制例如在移动装置130位于电影院中时激活电影院应用程序,在移动装置130位于汽车210中时激活音乐搜索应用程序,且在用户120正在睡觉时解除激活所有应用程序。许多其它应用是可能的。在一些实施例中,用户120可预设激活或解除激活应用程序时的条件。举例来说,用户120可预设当移动装置130位于电影院中、运动传感器未检测到运动且光传感器未检测到光时激活电影院应用程序。
在一实施方案中,总是运行的应用程序基于其环境上下文而配备经优化资源集合(例如,网络使用、编解码器工作、参考模型集合等等)。这允许低电力操作。因此,总是运行的应用程序由其环境上下文控制。举例来说,应用程序总是在运行。在一实施方案中,当环境设定是在汽车中时,所述应用程序将其参考模型设定为音乐数据库(具有或不具有网络资源)。随后,在预定量的时间过去之后,所述应用程序可推断移动装置在电影院中。在该点,所述应用程序设定其用于电影院应用程序的资源。
在一些实施方案中,工作循环指代用以监视输入声音的音频编解码器的工作循环(例如,与声音俘获特征相关的装置的工作循环,例如编解码器)。连续监视输入声音可耗尽电力。为了避免此情况,音频编解码器可在其工作循环模式中操作。假定10%工作编解码器:在其不工作状态(占据90%时间),音频编解码器可空闲且不执行功能,因此消耗最小电力。在其工作中状态中,音频编解码器可分析输入声音且在输入声音可为关注声音(例如音乐/语音)的情况下激活声音推断应用程序。通过此做法,可例如将电力减少1/10。通过取决于环境条件配置“工作中/不工作比率”来节省电力。对于需要快速响应的应用程序,这可为例如1/10,但取决于实施方案可使用其它值。对于允许宽松响应时间的应用程序,这可为例如1/100。
替代地或另外,在一些实施方案中,工作循环可指代高级应用程序(例如,用以推断环境上下文的应用程序)的工作循环。
在一实施方案中,可使用两种类型的工作循环:一种用于俘获环境信息且另一种用于推断环境上下文。基于推断的环境上下文和可允许的等待时间,移动装置130可控制这两个工作循环以获得电力减少。
图4说明根据一些实施例的用于控制移动装置中的至少一个应用程序的方法310的流程图。在312处,使用第一工作循环从移动装置的至少一个传感器俘获环境信息。在314处,使用第二工作循环从环境信息推断移动装置的环境上下文。
在316处,基于推断的环境上下文配置第一工作循环和第二工作循环。在318处,基于与推断的环境上下文相关联的一组参考模型来控制移动装置中的至少一个应用程序。因此,可调整或控制(例如,使得为作用中、使得空闲、使得以减少或受限特征集合为作用中等等)应用程序的操作模式,例如声音推断应用程序、网络使用、编解码器工作循环等等。这可例如节省电力且减少网络使用。在一些实施方案中,可使用推断的环境上下文和所述至少一个应用程序的可允许的等待时间来控制第一工作循环和/或第二工作循环。
图5说明根据一些实施例的用于控制移动装置中的至少一个应用程序的另一方法330的流程图。在332处,从移动装置的至少一个传感器俘获环境信息。在334处,从环境信息推断移动装置的环境上下文。在336处,基于与推断的环境上下文相关联的一组参考模型控制移动装置中的至少一个应用程序。取决于实施方案,控制可包括设定应用程序的工作循环和/或设定应用程序的可允许等待时间。因此,控制移动装置中的应用程序的工作循环或等待时间可基于推断的环境上下文。
在一些实施例中,移动装置130可包含经配置以基于环境上下文推断将其操作模式切换到与多个数据库相关联的多个作用中模式中的一者中的应用程序。举例来说,应用程序可经配置以将其操作模式切换到与包含从电影院提取的参考声音的电影院数据库、包含参考音乐的音乐数据库和包含公共运输(例如公共汽车或火车)上的参考通告声音的通告数据库相关联的作用中模式中的一者。应用程序还可经配置以将其操作模式切换到空闲模式,其中环境上下文推断指示移动装置130不位于目标环境中的任一者中。在这些实施例中,如果移动装置130推断其位于目标环境中的任一者中,那么应用程序的操作模式从空闲模式改变为作用中模式。
在激活应用程序之后,应用程序基于环境上下文推断从所述多个数据库确定数据库。举例来说,如果移动装置130推断移动装置130位于电影院中,那么应用程序可选择电影院数据库以用于声音识别(即,确定通告“请关掉电话”是否从电影院发出)。此外,如果移动装置130推断移动装置130位于汽车中,那么应用程序可选择音乐数据库以用于声音识别(即,搜索音乐的名称)。在完成声音识别之后,可将应用程序的操作模式改变回到空闲模式以节省电力消耗。
图6说明用于通过基于光强度、位置信息、运动信息和时间信息推断环境上下文来控制应用程序的移动装置400的框图。移动装置400可包含用以检测光强度的光传感器410、用以接收来自GPS卫星的信号的GPS传感器420、用以检测移动装置400的运动的运动传感器430,以及用以从GPS卫星、基站或移动装置400自身接收时间信息的时间接收器440。来自每一传感器的信息可用作移动装置400的环境信息。
在接收到环境信息之后,上下文推断单元450可推断移动装置400的环境上下文。举例来说,如果GPS传感器420的位置信息指示电影院,那么移动装置400推断用户120在电影院中且在观看电影。替代地,如果移动装置400的移动速度大于预定值,那么移动装置400推断用户在汽车中。
在上下文推断单元450处推断移动装置400的环境上下文之后,应用程序控制单元460可基于推断的环境上下文控制应用程序。举例来说,如果推断的环境上下文是电影院,那么移动装置400可确定与推断的剧院上下文相关联且包含参考通告“请关掉您的电话”的参考声音模型的一组参考声音模型(即,数据库)。随后,移动装置400可激活或调整经授权以使用数据库的电影院应用程序。电影院应用程序可存储在存储器470中。此外,数据库可包含在移动装置400或服务器中。
经激活电影院应用程序可通过使用声音传感器480从环境声音俘获声音(或音频信号)。处理所俘获声音以提取音频指纹(“音频指纹”指代唯一地描述或表示声音且包含声音特征或任何其它声音识别符的任何信息或数据)。随后,将提取的音频指纹与所述组参考声音模型(即,参考音频指纹)进行比较,且使用任何已知相似性确定或测量技术确定音频指纹之间的相似性值。在确定相似性值之后,从所述组参考音频指纹识别与提取的音频指纹具有最大相似性值或最佳匹配的参考音频指纹。在这些实施例中,从通告“请关掉您的电话”提取的音频指纹将匹配于从同一通告提取的参考音频指纹。在确定参考音频指纹之后,确定与所识别参考音频指纹相关联的功能。举例来说,从参考通告“请关掉您的电话”提取的参考音频指纹可与用于关掉或另外调整移动装置400的其它设定或功能性的功能相关联。随后,在移动装置400上执行功能。
在一些实施例中,所述组参考声音模型可包含在服务器中。在此情况下,移动装置400可将提取的音频指纹发射到服务器。随后,服务器可将提取的音频指纹与参考声音模型进行比较,且基于比较结果确定将在移动装置400上执行的功能。在确定功能之后,服务器可将关于所确定功能的信息发射到移动装置400。
如上所述,应用程序可经配置以接收声音输入,从声音输入提取音频指纹,将指纹发送到服务器,将音频指纹与参考音频指纹进行比较,且确定将在移动装置400上执行的动作(或功能)以最小化操作能量和网络资源的使用。因此,在以上实施例中,通过在上下文推断单元450处推断上下文,仅当应用程序需要激活或调整其设定时激活应用程序或调整其设定。
应了解,移动装置400包含用于接收音频信号、数字地处理音频信号以计算音频指纹、确定相关联动作和执行相关联动作所必要的所有组件。在其它实施例中,移动装置400的组件中的一或多者可从远程位置(例如,服务器装置)操作。
图7说明根据一些实施例的用于通过基于环境声音推断环境上下文来控制应用程序的移动装置500的框图。在这些实施例中,移动装置500可从环境声音接收声音输入以推断移动装置500的环境上下文。具体来说,移动装置500可在声音传感器510处从环境声音接收声音输入,且在声音特征提取器520处从接收的声音输入提取声音特征(例如,频域谱或功率谱)。可通过使用任何合适的信号处理方法来提取声音特征。举例来说,此些方法可包含作为众所周知的技术的谱分析、MFCC(梅尔频率倒谱系数)、LPC(线性预测译码)和/或LSP(线谱对)技术。
基于提取的声音特征,上下文推断单元530可推断移动装置500的环境上下文。举例来说,在一些实施例中,移动装置500可从环境声音接收声音输入,且提取声音输入的功率谱。如果声音输入的功率大于预定阈值,那么移动装置500可推断移动装置500处于发声环境中,其涉及声音(例如,音乐或通告)来自于的地点。
在一些实施例中,移动装置500可确定声音输入是否为来自扬声器的声音。在此情况下,移动装置500可包含具有从可从扬声器发出的参考声音(例如,CD上的音乐)提取的参考声音特征的数据库。具体来说,移动装置500可从环境声音接收声音输入,且从接收的声音输入提取声音特征。随后,移动装置500计算提取的声音特征与参考声音特征之间的相似性值。如果相似性值大于预定阈值,那么移动装置500可推断来自移动装置500的接收的声音是从扬声器发出(例如,来自扬声器的通告)。
在一些实施例中,移动装置500可取决于环境上下文而提取不同类型的声音特征。举例来说,移动装置500可确定声音输入是否为音乐或语音,且对于每一情况,其提取不同类型的声音特征。具体来说,移动装置500可从环境声音接收声音输入,且从接收的声音输入提取声音特征(例如,频率功率域谱)。如果频域中的功率分量集中在例如0到4KHz频率范围之间,那么移动装置500可推断声音是人的话音,且如果功率分量集中在例如0到8KHz频率范围之间,那么移动装置500可推断声音是音乐。在移动装置500推断声音是人的话音的情况下,移动装置可发射从0到4KHz而不是0到8KHz之间的频率范围提取的声音特征。因此,提取的声音特征的大小可减小,且因此网络资源的使用可减少。
在推断移动装置500的环境上下文之后,应用程序控制单元540可基于推断的环境上下文激活存储在存储器550中的应用程序。举例来说,如果移动装置500推断移动装置500在发声环境中,那么应用程序控制单元540可激活存储在存储器550中的声音记录应用程序。
图8说明根据一些实施例的用于通过接入服务器中的参考数据库来控制移动装置中的应用程序的***600的概况。如上所述,移动装置130可基于环境信息推断移动装置130的环境上下文610。在推断环境上下文610之后,移动装置130可激活与环境上下文610有关的应用程序。举例来说,如果推断的环境上下文610是音乐,那么移动装置130可激活与音乐有关的应用程序,例如音乐搜索应用程序。音乐搜索应用程序可从接收的音乐提取音频指纹,且将提取的音频指纹发射到与音乐搜索应用程序相关联的音乐搜索服务器630。
在经由网络620将提取的音频指纹从移动装置130发射到音乐搜索服务器630的接收器632之后,识别单元634可将接收的音频指纹与音乐指纹数据库636的参考音乐指纹进行比较。通过比较指纹,识别单元634可识别最佳匹配参考音乐指纹。随后,发射器638可将所识别参考音乐指纹的音乐名称发射到移动装置130。
应了解,如果移动装置推断环境声音是通告,那么在通告服务器650处的操作是以与音乐搜索服务器630相同的方式执行,且因此为了简明而省略其描述。类似于音乐搜索服务器630,通告服务器650包括接收器652、识别单元654、通告指纹数据库656和发射器658。此外,在一些其它实施例中,数据库636和656可包含在移动装置130中。
在一些实施例中,当移动装置130连接到因特网或基站时,移动装置130可将提取的声音特征发射到服务器630和650。举例来说,移动装置130可包含缓冲器,且在移动装置130从因特网断开时将提取的声音特征存储在缓冲器中。当移动装置130连接到因特网时,移动装置130可将存储的声音特征从缓冲器发射到服务器630和650。
图9说明用于基于移动装置的位置信息控制应用程序的方法700的流程图。在710处移动装置从GPS卫星和基站接收移动装置的位置信息。随后,在720、740和760处移动装置基于位置信息推断移动装置的环境上下文。
在720处,如果移动装置位于电影院中,那么在730处移动装置激活与电影有关的应用程序(例如,当移动装置俘获到通告“请关掉您的电话”时关掉电话的应用程序)。
在740处,如果移动装置位于家中,那么在750处移动装置激活与电视(TV)有关的应用程序(例如,自动搜索在TV上广告的产品的信息的应用程序)。在一实施方案中,TV频道应用程序可基于俘获的声音输入来尝试找到哪一频道现在正在广播。
在760处,如果移动装置位于汽车中,那么在770处移动装置激活与汽车有关的应用程序(例如,搜索在广播中播放的音乐的名称的应用程序)。
在另一实施方案中,可基于推断的环境上下文将多个移动装置分组为相似上下文群组。在此***中,通过移动装置中的每一者中的声音传感器感测和俘获环境声音。随后从俘获的环境声音提取声音特征,且将提取的声音特征发射到服务器。基于发射的声音特征,服务器可将移动装置分组为在相似上下文群组中,因为相似环境中的声音可大体上相同,从而导致提取大体上相同的声音特征。随后将相似上下文群组中的移动装置的列表从服务器发射到移动装置,且用于在移动装置中提供预定服务(例如,在经分组装置的用户之间聊天)。
在一实施方案中,服务器用以基于移动装置的声音特征来分组移动装置。在分组时,将一群组中的一些装置指示为领导装置。领导装置连续地将其声音特征发送到服务器。每一非领导装置在所述非领导装置的环境上下文改变时将其声音特征发送到服务器。在服务器处,当接收到非领导装置的声音输入时,服务器找到声音特征与非领导装置的声音特征具有最大相似性的领导,且将所述非领导装置指派于发现的领导装置的群组。在一些实施方案中,替代地或另外,领导可连续地、按工作循环或当环境改变发生或存在时发送其声音特征。
在一些实施方案中,在分组移动装置之后,服务器可识别与领导装置在相似上下文群组中的移动装置或识别与非领导装置在相似上下文群组中的移动装置。随后,服务器可将关于领导装置或非领导装置的信息发射到所述相似上下文群组中的移动装置。在此情况下,仅领导装置可将声音特征发射到服务器,而非领导装置不可将声音特征发射到服务器。因此,用以发射声音特征的网络资源的使用可减少。
在一些实施方案中,当发现新装置的上下文相似于相似上下文群组的上下文时,所述新装置可加入相似上下文群组。具体来说,新装置可将从环境声音提取的声音特征发射到服务器。随后,服务器通过比较从新装置发射的声音特征与来自领导装置的声音特征来识别相似上下文群组。如果服务器确定从新装置发射的声音特征相似于来自领导装置的声音特征,那么服务器可将新装置添加到相似上下文群组。
另外,其它移动装置可仅当推断出不同环境上下文时将声音特征发射到服务器。举例来说,移动装置可在移动装置移动到另一地点时推断出不同环境上下文,因为移动装置的位置信息改变。在此情况下,移动装置可发射从改变的环境声音提取的新声音特征。随后,服务器可从先前的相似上下文群组排除所述移动装置。
图10说明根据一些实施例的用于基于时间信息和光强度控制应用程序的方法800的流程图。移动装置基于时间信息和光强度信息推断移动装置的环境上下文。具体来说,在810处移动装置从时间接收器接收当前时间信息。时间接收器可从GPS卫星、基站或移动装置中包含的时钟接收时间信息。如果在820处当前时间在午夜12点到上午7点之间(但取决于实施方案可使用任何时间),那么在825处移动装置感测来自光传感器的光强度。
随后,如果在830处光传感器的输出指示光强度低于预定阈值,那么在840处移动装置推断移动装置的用户正在睡觉且解除激活所有应用程序。替代地,移动装置可解除激活所有应用程序,除了例如经配置以通过在早晨使用吵闹的闹钟唤醒用户的早晨闹钟应用程序。
图11说明根据一些实施例的用于基于时间信息、光强度和对象的接近来控制应用程序的方法900的流程图。应了解,在方法900的910到930和950处的操作是以与在方法800的810到830和840处的操作相同的方式执行,且因此省略其描述。
在935处,移动装置通过使用接近传感器感测附近的对象。在940处,如果移动装置中包含的接近传感器检测到附近的对象,那么移动装置推断移动装置在用户的口袋中或用户正在使用移动电话。在此情况下,移动装置确定用户不在睡觉。然而,如果在940处接近传感器未检测到附近的对象,那么在950处移动装置解除激活所有应用程序。
图12说明根据一些实施例的用于基于环境声音控制应用程序的方法1000的流程图。在1010处移动装置从环境声音接收声音输入。随后,在1020处,移动装置计算所接收声音输入的功率(或电平)以确定是否存在声音。
在1030处,移动装置确定声音输入的功率是否超过预定阈值。如果声音输入的功率超过阈值,那么在1035处移动装置将声音输入分离为噪声和非噪声声音。
在分离所接收声音输入之后,在1040处移动装置计算声音输入为噪声的可能性以确定声音输入是否为将由应用程序处理的声音或将忽略的噪声。声音输入为噪声的可能性可如下计算:
其中L指示声音输入为噪声的可能性,λs指示非噪声声音的声音模型,且λn指示噪声的声音模型。非噪声声音和噪声的声音模型可通过使用众所周知的方法产生,例如高斯混合建模(GMM)。在1050处,如果所述可能性超过预定阈值,那么移动装置推断声音输入不是噪声。因此,在1060处移动装置激活应用程序(例如,记录环境声音的应用程序)。
图13说明根据一些实施例的用于基于推断的环境上下文将移动装置1132、1134、1136、1138、1152、1154和1156分组为相似上下文群组1130和1150的***1100的概况图。在此***中,通过移动装置1132、1134、1136、1138、1152、1154和1156中的每一者中的声音传感器感测和俘获环境声音。随后从俘获的环境声音提取声音特征,且将提取的声音特征发射到服务器1110。
基于发射的声音特征,服务器1110可将移动装置1132、1134和1136分组为在相似上下文群组1130中,因为相似环境中的声音可大体上相同,从而导致提取大体上相同的声音特征。随后将相似上下文群组1130中的移动装置的列表从服务器1110发射到移动装置1132、1134和1136,且用于在移动装置1132、1134和1136中提供预定服务(例如,在经分组装置的用户之间聊天)。
在一些实施例中,在分组移动装置1132、1134和1136之后,服务器1110可将相似上下文群组1130中的移动装置1132识别为领导装置或将相似上下文群组中的移动装置1134或1136识别为非领导装置。随后,服务器1110可将关于领导装置1132或非领导装置1134和1136的信息发射到相似上下文群组1130中的移动装置1132、1134和1136。在此情况下,仅领导装置1132可将声音特征发射到服务器1110,而非领导装置1134和1136不可将声音特征发射到服务器1110。因此,用以发射声音特征的网络资源的使用可减少。
在一些实施例中,当发现新装置1138的上下文相似于相似上下文群组1130的上下文时,所述新装置1138可加入相似上下文群组。具体来说,新装置1138可将从环境声音提取的声音特征发射到服务器1110。随后,服务器1110通过比较从新装置1138发射的声音特征与来自领导装置1132的声音特征来识别相似上下文群组。如果服务器1110确定从新装置1138发射的声音特征相似于来自领导装置1132的声音特征,那么服务器1110可将新装置1138添加到相似上下文群组1130。
另外,其它移动装置1134和1136可仅当推断出不同环境上下文时将声音特征发射到服务器1110。举例来说,移动装置1134可在移动装置1134移动到另一地点时推断出不同环境上下文,因为移动装置的位置信息改变。在此情况下,移动装置1134可发射从改变的环境声音提取的新声音特征。随后,服务器1110可从先前的相似上下文群组1130排除所述移动装置1134。应了解,在群组1150的移动装置1152、1154和1156处的操作是以与在群组1130的移动装置1132、1134和1136相同的方式执行,且因此为了简明而省略其描述。
图14说明用于基于推断的环境上下文将移动装置分组到相似上下文群组中的方法1200的流程图。在1210处,每一移动装置基于环境上下文推断激活应用程序(例如,用于搜索歌曲的名称的应用程序)。在1220处,移动装置接收从环境声音俘获的声音输入。在1230处,移动装置从声音输入提取声音指纹。
在提取声音指纹之后,在1240处移动装置将声音指纹发射到服务器。服务器比较来自多个移动装置(“客户端装置”)的声音指纹,且通过使用任何已知比较技术比较声音指纹将客户端装置分组到相似上下文群组中(例如,对接收到相同音乐的移动装置进行分组)。随后,在1250处服务器将分组列表发射到移动装置。
在分组客户端装置之后,在1260处当移动装置检测到环境上下文改变时(例如,光强度、声音强度、位置或网络连接状态的改变)移动装置将新声音指纹发射到服务器。服务器从移动装置接收新声音指纹,且在1270处从分组列表排除所述移动装置。
图15是根据一些实施例的具有无线通信能力的示范性移动装置1300的框图。移动装置1300可为蜂窝式电话、终端、手持机、个人数字助理(PDA)、无线调制解调器、无绳电话等等。无线通信***可为码分多址(CDMA)***、全球移动通信***(GSM)***、宽带CDMA(W-CDMA)***、长期演进(LTE)***、高级LTE***等等。
移动装置1300可能够经由接收路径和发射路径提供双向通信。在接收路径上,由基站发射的信号由天线1312接收且提供到接收器(RCVR)1314。接收器1314调节且数字化接收的信号且将经调节和数字化的信号提供到数字区段1320用于进一步处理。在发射路径上,发射器(TMTR)接收将从数字区段1320发射的数据,处理且调节数据,且产生经调制信号,所述信号经由天线1312发射到基站。接收器1314和发射器1316是支持CDMA、GSM、W-CDMA、LTE、高级LTE等等的收发器的部分。
数字区段1320包含各种处理、接口和存储器单元,例如调制解调器处理器1322、精简指令集计算机/数字信号处理器(RISC/DSP)1324、控制器/处理器1326、内部存储器1328、一般化音频编码器1332、一般化音频解码器1334、图形/显示处理器1336和/或外部总线接口(EBI)1338。调制解调器处理器1322执行用于数据发射和接收的处理,例如编码、调制、解调和解码。RISC/DSP 1324执行用于无线装置1300的一般和专门处理。控制器/处理器1326控制数字区段1320内的各种处理和接口单元的操作。内部存储器1328存储用于数字区段1320内的各种单元的数据和/或指令。
一般化音频编码器1332执行用于来自音频源1342、麦克风1343等等的输入信号的编码。一般化音频解码器1334执行用于经译码音频数据的解码且将输出信号提供到扬声器/头戴式耳机1344。应注意,一般化音频编码器1332和一般化音频解码器1334对于与音频源、麦克风1343和扬声器/头戴式耳机1344的接口来说不一定是需要的,且因此在移动装置1300中未图示。图形/显示处理器1336执行用于呈现到显示单元1346的图形、视频、图像和文本的处理。EBI 1338促进数字区段1320与主存储器1348之间的数据传送。
数字区段1320是以一或多个处理器、DSP、微处理器、RISC等等实施。数字区段1320还制造于一或多个专用集成电路(ASIC)和/或某种其它类型的集成电路(IC)上。
大体上,本文描述的任一装置指示各种类型的装置,例如无线电话、蜂窝式电话、膝上型计算机、无线多媒体装置、无线通信个人计算机(PC)卡、PDA、外部或内部调制解调器、通过无线信道通信的装置等等。装置可具有各种名称,例如接入终端(AT)、接入单元、订户单元、移动台、客户端装置、移动单元、移动电话、移动装置、远程台、远程终端、远程单元、用户装置、用户设备、手持式装置等等。本文描述的任一装置可具有用于存储指令和数据的存储器,以及硬件、软件、固件或其组合。
本文描述的上下文确定和分组技术通过各种装置实施。举例来说,这些技术是以硬件、固件、软件或其组合实施。所属领域的技术人员将进一步了解,此处结合本发明描述的各种说明性逻辑块、模块、电路和算法步骤可实施为电子硬件、计算机软件或两者的组合。为清楚说明硬件与软件的此互换性,上文已大致关于其功能性而描述了各种说明性组件、块、模块、电路及步骤。此功能性是实施为硬件还是软件取决于特定应用及施加于整个***的设计约束。所属领域的技术人员可针对每一特定应用以不同方式实施所描述功能性,但此类实施决策不应被解释为导致偏离本发明的范围。
对于硬件实施方案,用以执行所述技术的处理单元实施于一或多个ASIC、DSP、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、电子装置、经设计以执行本文中所描述的功能的其它电子单元、计算机,或其组合内。
因此,此处结合本发明描述的各种说明性逻辑块、模块和电路是以经设计以执行本文描述的功能的通用处理器、DSP、ASIC、FPGA或其它可编程逻辑装置、离散门或晶体管逻辑、离散硬件组件或其任一组合来实施或执行。通用处理器可以是微处理器,但在替代方案中,处理器可以是任何常规处理器、控制器、微控制器或状态机。处理器还可实施为计算装置的组合,例如,DSP与微处理器的组合、多个微处理器、一或多个微处理器与DSP核心的联合,或任何其它此配置。
如果以软件实施,则可将功能作为计算机可读媒体上的一或多个指令或代码而加以存储或传输。计算机可读媒体包含计算机存储媒体与包含促进计算机程序从一处传递到另一处的任何媒体的通信媒体两者。存储媒体可为可由计算机存取的任何可用媒体。以实例方式(且并非限制),此计算机可读媒体可包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁性存储装置,或可用于载送或存储呈指令或数据结构的形式的所要程序代码且可由计算机存取的任何其它媒体。此外,任何连接适当地称为计算机可读媒体。举例来说,如果使用同轴电缆、光纤电缆、双绞线、数字订户线(DSL)或例如红外线、无线电及微波的无线技术从网站、服务器或其它远程源传输软件,则同轴电缆、光纤电缆、双绞线、DSL或例如红外线、无线电及微波的无线技术包含于媒体的定义中。如本文中所使用,磁盘及光盘包含压缩光盘(CD)、激光光盘、光学光盘、数字多功能光盘(DVD)、软磁盘及蓝光光盘,其中磁盘通常磁性地再生数据,而光盘使用激光光学地再生数据。上文的组合也应包含在计算机可读媒体的范围内。
提供本发明的先前描述以使所属领域的技术人员能够制作或使用本发明。所属领域的技术人员将容易了解对本发明的各种修改,且本文中界定的一般原理应用于其它变化而不脱离本发明的精神或范围。因此,本发明并非希望限于本文中所描述的实例,而是应被赋予与本文中所揭示的原理和新颖特征一致的最广泛范围。
尽管示范性实施方案涉及在一或多个独立计算机***的上下文中利用当前揭示的标的物的方面,但所述标的物不限于此,而是可结合任何计算环境实施,例如网络或分布式计算环境。再者,当前揭示的标的物的方面可在多个处理芯片或装置中或者跨越多个处理芯片或装置实施,且可跨越多个装置相似地实现存储。此些装置可包含PC、网络服务器和手持式装置。
尽管已用结构特征和/或方法动作特定的语言描述了标的物,但应理解,所附权利要求书中所界定的标的物不一定限于上文所描述的特定特征或动作。相反,上文所描述的特定特征和动作是作为实施权利要求书的实例形式而揭示的。
Claims (56)
1.一种用于控制移动装置中的至少一个应用程序的方法,所述方法包括:
从所述移动装置的至少一个传感器俘获环境信息;
从所述环境信息推断所述移动装置的环境上下文;以及
基于与所述推断的环境上下文相关联的一组参考模型控制所述移动装置中的至少一个应用程序,其中控制包括设定所述应用程序的工作循环或设定所述应用程序的可允许等待时间。
2.根据权利要求1所述的方法,其中从所述移动装置的所述至少一个传感器俘获所述环境信息使用第一工作循环,且从所述环境信息推断所述移动装置的所述环境上下文使用第二工作循环,且所述方法进一步包括:
基于所述推断的环境上下文配置所述第一工作循环和所述第二工作循环。
3.根据权利要求2所述的方法,其进一步包括使用所述推断的环境上下文和所述至少一个应用程序的可允许等待时间控制所述第一工作循环。
4.根据权利要求2所述的方法,其进一步包括使用所述推断的环境上下文和所述至少一个应用程序的可允许等待时间控制所述第二工作循环。
5.根据权利要求1所述的方法,其中所述至少一个传感器包括光传感器、声音传感器、位置传感器或全球定位***GPS模块。
6.根据权利要求1所述的方法,其中所述环境信息指示至少一个环境条件。
7.根据权利要求1所述的方法,其中所述环境信息包括声音、位置、光强度、运动或时间中的至少一者。
8.根据权利要求1所述的方法,其中控制包括激活、减活或调整所述工作循环、控制网络资源或设定所述应用程序的所述可允许等待时间,且其中控制是基于光传感器的输出、指示预定位置的位置信息、声音输入的电平或至少一个提取的声音特征中的至少一者。
9.根据权利要求1所述的方法,其进一步包括当所述环境上下文指示所述输入声音是声音源的再生时激活音乐搜索应用程序或电视频道应用程序。
10.根据权利要求1所述的方法,其进一步包括当所述环境上下文指示网络被激活时将声音特征发射到服务器。
11.根据权利要求1所述的方法,其进一步包括:
接收从环境声音俘获的声音输入;
从所述声音输入提取声音特征;
将所述声音特征发射到服务器,其中所述服务器经配置以基于来自多个移动装置的所述声音特征的相似性将所述多个移动装置分组到至少一个相似上下文群组中且识别所述至少一个相似上下文群组中的领导装置或非领导装置;以及
从所述服务器接收关于所述领导装置或所述非领导装置和所述至少一个相似上下文群组的信息。
12.根据权利要求11所述的方法,其中使用所述服务器基于移动装置的声音特征来分组所述移动装置,且所述方法进一步包括将群组中的一些装置指示为领导装置,其中所述领导装置将其声音特征连续发送到服务器。
13.根据权利要求12所述的方法,其中每一非领导装置在所述非领导装置的环境上下文改变时将其声音特征发送到所述服务器,且所述方法进一步包括:
在所述服务器处,
从非领导装置接收声音输入;
找到其声音特征与所述非领导装置的声音特征具有最大相似性的领导;以及
将所述非领导装置指派于所述找到的领导装置的群组。
14.根据权利要求11所述的方法,其中如果所述非领导装置是具有所述推断的环境上下文的所述移动装置,那么发射所述声音特征包含当在所述移动装置中推断出不同环境上下文时将新声音特征发射到所述服务器。
15.一种存储用于控制移动装置中的至少一个应用程序的指令的非暂时性计算机可读存储媒体,所述指令致使处理器执行以下操作:
从所述移动装置的至少一个传感器俘获环境信息;
从所述环境信息推断所述移动装置的环境上下文;以及
基于与所述推断的环境上下文相关联的一组参考模型控制所述移动装置中的至少一个应用程序,其中控制包括设定所述应用程序的工作循环或设定所述应用程序的可允许等待时间。
16.根据权利要求15所述的计算机可读存储媒体,其中从所述移动装置的所述至少一个传感器俘获所述环境信息使用第一工作循环,且从所述环境信息推断所述移动装置的所述环境上下文使用第二工作循环,且所述计算机可读存储媒体进一步包括致使所述处理器执行以下操作的指令:
基于所述推断的环境上下文配置所述第一工作循环和所述第二工作循环。
17.根据权利要求16所述的计算机可读存储媒体,其进一步包括致使所述处理器执行以下操作的指令:使用所述推断的环境上下文和所述至少一个应用程序的可允许等待时间控制所述第一工作循环。
18.根据权利要求16所述的计算机可读存储媒体,其进一步包括致使所述处理器执行以下操作的指令:使用所述推断的环境上下文和所述至少一个应用程序的可允许等待时间控制所述第二工作循环。
19.根据权利要求15所述的计算机可读存储媒体,其中所述至少一个传感器包括光传感器、声音传感器、位置传感器或全球定位***GPS模块。
20.根据权利要求15所述的计算机可读存储媒体,其中所述环境信息指示至少一个环境条件。
21.根据权利要求15所述的计算机可读存储媒体,其中所述环境信息包括声音、位置、光强度、运动或时间中的至少一者。
22.根据权利要求15所述的计算机可读存储媒体,其中控制包括激活、减活或调整所述工作循环、控制网络资源或设定所述应用程序的所述可允许等待时间,且其中控制是基于光传感器的输出、指示预定位置的位置信息、声音输入的电平或至少一个提取的声音特征中的至少一者。
23.根据权利要求15所述的计算机可读存储媒体,其进一步包括致使所述处理器执行以下操作的指令:当所述环境上下文指示所述输入声音是声音源的再生时激活音乐搜索应用程序或电视频道应用程序。
24.根据权利要求15所述的计算机可读存储媒体,其进一步包括致使所述处理器执行以下操作的指令:当所述环境上下文指示网络被激活时将声音特征发射到服务器。
25.根据权利要求15所述的计算机可读存储媒体,其进一步包括致使所述处理器执行以下操作的指令:
接收从环境声音俘获的声音输入;
从所述声音输入提取声音特征;
将所述声音特征发射到服务器,其中所述服务器经配置以基于来自多个移动装置的所述声音特征的相似性将所述多个移动装置分组到至少一个相似上下文群组中且识别所述至少一个相似上下文群组中的领导装置或非领导装置;以及
从所述服务器接收关于所述领导装置或所述非领导装置和所述至少一个相似上下文群组的信息。
26.根据权利要求25所述的计算机可读存储媒体,其中所述服务器用以基于移动装置的声音特征来分组所述移动装置,且将群组中的一些装置指示为领导装置,其中所述领导装置将其声音特征连续发送到服务器。
27.根据权利要求26所述的计算机可读存储媒体,其中每一非领导装置在所述非领导装置的环境上下文改变时将其声音特征发送到所述服务器,且所述计算机可读存储媒体进一步包括:
在所述服务器处,
从非领导装置接收声音输入;
找到其声音特征与所述非领导装置的声音特征具有最大相似性的领导;以及
将所述非领导装置指派于所述找到的领导装置的群组。
28.根据权利要求25所述的计算机可读存储媒体,其中如果所述非领导装置是具有所述推断的环境上下文的所述移动装置,那么发射所述声音特征包含当在所述移动装置中推断出不同环境上下文时将新声音特征发射到所述服务器。
29.一种用于控制至少一个应用程序的移动装置,所述移动装置包括:
用于从所述移动装置的至少一个传感器俘获环境信息的装置;
用于从所述环境信息推断所述移动装置的环境上下文的装置;以及
用于基于与所述推断的环境上下文相关联的一组参考模型控制所述移动装置中的至少一个应用程序的装置,其中控制包括设定所述应用程序的工作循环或设定所述应用程序的可允许等待时间。
30.根据权利要求29所述的移动装置,其中从所述移动装置的所述至少一个传感器俘获所述环境信息使用第一工作循环,且从所述环境信息推断所述移动装置的所述环境上下文使用第二工作循环,且所述移动装置进一步包括:
用于基于所述推断的环境上下文配置所述第一工作循环和所述第二工作循环的装置。
31.根据权利要求30所述的移动装置,其进一步包括用于使用所述推断的环境上下文和所述至少一个应用程序的可允许等待时间控制所述第一工作循环的装置。
32.根据权利要求30所述的移动装置,其进一步包括用于使用所述推断的环境上下文和所述至少一个应用程序的可允许等待时间控制所述第二工作循环的装置。
33.根据权利要求29所述的移动装置,其中所述至少一个传感器包括光传感器、声音传感器、位置传感器或全球定位***GPS模块。
34.根据权利要求29所述的移动装置,其中所述环境信息指示至少一个环境条件。
35.根据权利要求29所述的移动装置,其中所述环境信息包括声音、位置、光强度、运动或时间中的至少一者。
36.根据权利要求29所述的移动装置,其中控制包括激活、减活或调整所述工作循环、控制网络资源或设定所述应用程序的所述可允许等待时间,且其中控制是基于光传感器的输出、指示预定位置的位置信息、声音输入的电平或至少一个提取的声音特征中的至少一者。
37.根据权利要求29所述的移动装置,其进一步包括用于当所述环境上下文指示所述输入声音是声音源的再生时激活音乐搜索应用程序或电视频道应用程序的装置。
38.根据权利要求29所述的移动装置,其进一步包括用于当所述环境上下文指示网络被激活时将声音特征发射到服务器的装置。
39.根据权利要求29所述的移动装置,其进一步包括:
用于接收从环境声音俘获的声音输入的装置;
用于从所述声音输入提取声音特征的装置;
用于将所述声音特征发射到服务器的装置,其中所述服务器经配置以基于来自多个移动装置的所述声音特征的相似性将所述多个移动装置分组到至少一个相似上下文群组中且识别所述至少一个相似上下文群组中的领导装置或非领导装置;以及
用于从所述服务器接收关于所述领导装置或所述非领导装置和所述至少一个相似上下文群组的信息的装置。
40.根据权利要求39所述的移动装置,其中所述服务器用以基于移动装置的声音特征来分组所述移动装置,且将群组中的一些装置指示为领导装置,其中所述领导装置将其声音特征连续发送到服务器。
41.根据权利要求40所述的移动装置,其中每一非领导装置在所述非领导装置的环境上下文改变时将其声音特征发送到所述服务器,且所述移动装置进一步包括:
在所述服务器处,
从非领导装置接收声音输入;
找到其声音特征与所述非领导装置的声音特征具有最大相似性的领导;以及
将所述非领导装置指派于所述找到的领导装置的群组。
42.根据权利要求39所述的移动装置,其中如果所述非领导装置是具有所述推断的环境上下文的所述移动装置,那么发射所述声音特征包含当在所述移动装置中推断出不同环境上下文时将新声音特征发射到所述服务器。
43.一种用于控制至少一个应用程序的移动装置,所述移动装置包括:
接收器,其经配置以从所述移动装置的至少一个传感器俘获环境信息;
上下文推断单元,其经配置以从所述环境信息推断所述移动装置的环境上下文;以及
应用程序控制单元,其经配置以基于与所述推断的环境上下文相关联的一组参考模型控制所述移动装置中的至少一个应用程序,其中控制包括设定所述应用程序的工作循环或设定所述应用程序的可允许等待时间。
44.根据权利要求43所述的移动装置,其中从所述移动装置的所述至少一个传感器俘获所述环境信息使用第一工作循环,且从所述环境信息推断所述移动装置的所述环境上下文使用第二工作循环,且其中所述应用程序控制单元进一步经配置以基于所述推断的环境上下文控制所述第一工作循环和所述第二工作循环。
45.根据权利要求44所述的移动装置,其中所述应用程序控制单元进一步经配置以使用所述推断的环境上下文和所述至少一个应用程序的可允许等待时间控制所述第一工作循环。
46.根据权利要求44所述的移动装置,其中所述应用程序控制单元进一步经配置以使用所述推断的环境上下文和所述至少一个应用程序的可允许等待时间控制所述第二工作循环。
47.根据权利要求43所述的移动装置,其中所述至少一个传感器包括光传感器、声音传感器、位置传感器或全球定位***GPS模块。
48.根据权利要求43所述的移动装置,其中所述环境信息指示至少一个环境条件。
49.根据权利要求43所述的移动装置,其中所述环境信息包括声音、位置、光强度、运动或时间中的至少一者。
50.根据权利要求43所述的移动装置,其中控制包括激活、减活或调整所述工作循环、控制网络资源或设定所述应用程序的所述可允许等待时间,且其中控制是基于光传感器的输出、指示预定位置的位置信息、声音输入的电平或至少一个提取的声音特征中的至少一者。
51.根据权利要求43所述的移动装置,其进一步包括执行单元,所述执行单元用于当所述环境上下文指示所述输入声音是声音源的再生时激活音乐搜索应用程序或电视频道应用程序。
52.根据权利要求43所述的移动装置,其进一步包括发射器,所述发射器经配置以当所述环境上下文指示网络被激活时将声音特征发射到服务器。
53.根据权利要求43所述的移动装置,其进一步包括:
声音传感器,其经配置以接收从环境声音俘获的声音输入;
声音特征提取器,其经配置以从所述声音输入提取声音特征;
发射器,其经配置以将所述声音特征发射到服务器,其中所述服务器经配置以基于来自多个移动装置的所述声音特征的相似性将所述多个移动装置分组到至少一个相似上下文群组中且识别所述至少一个相似上下文群组中的领导装置或非领导装置;以及
群组信息接收器,其经配置以从所述服务器接收关于所述领导装置或所述非领导装置和所述至少一个相似上下文群组的信息。
54.根据权利要求43所述的移动装置,其中所述服务器用以基于移动装置的声音特征来分组所述移动装置,且将群组中的一些装置指示为领导装置,其中所述领导装置将其声音特征连续发送到服务器。
55.根据权利要求54所述的移动装置,其中每一非领导装置在所述非领导装置的环境上下文改变时将其声音特征发送到所述服务器,且所述移动装置进一步包括:
在所述服务器处,
从非领导装置接收声音输入;
找到其声音特征与所述非领导装置的声音特征具有最大相似性的领导;以及
将所述非领导装置指派于所述找到的领导装置的群组。
56.根据权利要求53所述的移动装置,其中如果所述非领导装置是具有所述推断的环境上下文的所述移动装置,那么发射所述声音特征包含当在所述移动装置中推断出不同环境上下文时将新声音特征发射到所述服务器。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201261613457P | 2012-03-20 | 2012-03-20 | |
US61/613,457 | 2012-03-20 | ||
US13/767,028 | 2013-02-14 | ||
US13/767,028 US9167520B2 (en) | 2012-03-20 | 2013-02-14 | Controlling applications in a mobile device based on environmental context |
PCT/US2013/026324 WO2013141986A1 (en) | 2012-03-20 | 2013-02-15 | Controlling applications in a mobile device based on the environmental context |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104170413A true CN104170413A (zh) | 2014-11-26 |
CN104170413B CN104170413B (zh) | 2019-04-23 |
Family
ID=49212284
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201380012762.7A Active CN104170413B (zh) | 2012-03-20 | 2013-02-15 | 基于环境上下文控制移动装置中的应用程序 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9167520B2 (zh) |
EP (1) | EP2829087B1 (zh) |
CN (1) | CN104170413B (zh) |
IN (1) | IN2014MN01717A (zh) |
WO (1) | WO2013141986A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105022640A (zh) * | 2015-08-27 | 2015-11-04 | 广东小天才科技有限公司 | 应用程序控制方法、装置及智能设备 |
CN107211012A (zh) * | 2015-01-27 | 2017-09-26 | 飞利浦灯具控股公司 | 用于设备控制的接近检测的方法和装置 |
CN107995357A (zh) * | 2017-11-15 | 2018-05-04 | 广东欧珀移动通信有限公司 | 资源配置方法及装置 |
CN108347520A (zh) * | 2017-01-23 | 2018-07-31 | 阿里巴巴集团控股有限公司 | 情景模式的发送方法及装置、应用的启动方法及装置 |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9414183B2 (en) * | 2012-03-20 | 2016-08-09 | Nokia Technologies Oy | Method and apparatus for providing group context sensing and inference |
US9654977B2 (en) | 2012-11-16 | 2017-05-16 | Visa International Service Association | Contextualized access control |
US10448217B2 (en) * | 2013-09-15 | 2019-10-15 | Technion Research & Development Foundation Limited | Interactive channel |
CN106031127B (zh) * | 2013-11-08 | 2020-11-03 | 瑞典爱立信有限公司 | 用于应用的管理的方法和装置 |
TWI571117B (zh) * | 2013-12-18 | 2017-02-11 | 財團法人資訊工業策進會 | 提供第二螢資訊的方法 |
KR20150106299A (ko) * | 2014-03-11 | 2015-09-21 | 주식회사 사운들리 | 저 전력 연관 콘텐츠 제공 시스템, 방법, 및 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체 |
US10007555B1 (en) * | 2014-12-05 | 2018-06-26 | Google Llc | Dynamic resource management |
US10268254B2 (en) | 2016-01-15 | 2019-04-23 | Google Llc | Systems and methods for extending battery life by monitoring mobile application activity |
US10462745B2 (en) * | 2016-01-15 | 2019-10-29 | Google Llc | Systems and methods for extending battery life by monitoring device activity |
CN107426802B (zh) | 2016-05-24 | 2020-06-26 | 华为终端有限公司 | 一种终端管理方法以及装置 |
US9667772B1 (en) | 2016-06-17 | 2017-05-30 | International Business Machines Corporation | Transient, context-dependent grouping of content for mobile device display |
US11368457B2 (en) | 2018-02-20 | 2022-06-21 | Visa International Service Association | Dynamic learning system for intelligent authentication |
KR20210055387A (ko) | 2019-11-07 | 2021-05-17 | 삼성전자주식회사 | 컨텍스트에 기반하여 애플리케이션을 제공하는 서버 및 그 제어 방법 |
WO2023033639A1 (en) * | 2021-09-02 | 2023-03-09 | Kaisen Technology Sdn Bhd | A system and method for preparing home-made peritoneal dialysis dialysate |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080008313A1 (en) * | 2004-11-24 | 2008-01-10 | Research In Motion Limited | System and method for selectively activating a communication device |
US20080160976A1 (en) * | 2006-12-27 | 2008-07-03 | Nokia Corporation | Teleconferencing configuration based on proximity information |
US8082122B2 (en) * | 2006-12-12 | 2011-12-20 | Samsung Electronics Co., Ltd. | Mobile device having a motion detector |
CN102339121A (zh) * | 2010-07-22 | 2012-02-01 | 林有健 | 电源管理方法以及使用该方法的计算机*** |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020072982A1 (en) | 2000-12-12 | 2002-06-13 | Shazam Entertainment Ltd. | Method and system for interacting with a user in an experiential environment |
US20130024778A1 (en) * | 2011-07-13 | 2013-01-24 | Z124 | Dynamic cross-environment application configuration/orientation |
US7327245B2 (en) | 2004-11-22 | 2008-02-05 | Microsoft Corporation | Sensing and analysis of ambient contextual signals for discriminating between indoor and outdoor locations |
WO2006085379A1 (ja) * | 2005-02-10 | 2006-08-17 | Fujitsu Limited | 移動体診断を含む各種サービスを提供するサービス提供システム及び該システムに用いるカーa/v |
US7467353B2 (en) | 2005-10-28 | 2008-12-16 | Microsoft Corporation | Aggregation of multi-modal devices |
US7319908B2 (en) | 2005-10-28 | 2008-01-15 | Microsoft Corporation | Multi-modal device power/mode management |
JP4682912B2 (ja) * | 2006-05-08 | 2011-05-11 | 株式会社日立製作所 | センサネットシステム、センサネット位置特定プログラム |
US7973857B2 (en) | 2006-12-27 | 2011-07-05 | Nokia Corporation | Teleconference group formation using context information |
US8260366B2 (en) * | 2007-09-28 | 2012-09-04 | At&T Intellectual Property I, Lp | Automatic setting of an alert mode on a wireless device |
CN112019976A (zh) * | 2009-11-24 | 2020-12-01 | 诺基亚技术有限公司 | 用于处理音频信号的设备和方法 |
US8838169B2 (en) * | 2010-01-19 | 2014-09-16 | Ringcentral, Inc. | Provisioning interfaces for accessing virtual private branch exchange services through a mobile device |
US8654152B2 (en) * | 2010-06-21 | 2014-02-18 | Microsoft Corporation | Compartmentalizing focus area within field of view |
WO2012010929A1 (en) * | 2010-07-20 | 2012-01-26 | Nokia Corporation | A reverberation estimator |
US11120818B2 (en) * | 2010-11-12 | 2021-09-14 | Nokia Technologies Oy | Processing audio with a visual representation of an audio source |
JP2012114771A (ja) * | 2010-11-26 | 2012-06-14 | Nec Saitama Ltd | 携帯端末、その制御プログラム及び制御方法 |
US20120191966A1 (en) * | 2011-01-25 | 2012-07-26 | Qualcomm Incorporated | Methods and apparatus for changing the duty cycle of mobile device discovery based on environmental information |
US9692611B1 (en) * | 2011-04-06 | 2017-06-27 | Google Inc. | Context-based sensor selection |
US8626198B2 (en) * | 2011-11-16 | 2014-01-07 | Qualcomm Incorporated | Characterizing an indoor structure based on detected movements and/or position locations of a mobile device |
-
2013
- 2013-02-14 US US13/767,028 patent/US9167520B2/en active Active
- 2013-02-15 EP EP13707965.3A patent/EP2829087B1/en active Active
- 2013-02-15 IN IN1717MUN2014 patent/IN2014MN01717A/en unknown
- 2013-02-15 CN CN201380012762.7A patent/CN104170413B/zh active Active
- 2013-02-15 WO PCT/US2013/026324 patent/WO2013141986A1/en active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080008313A1 (en) * | 2004-11-24 | 2008-01-10 | Research In Motion Limited | System and method for selectively activating a communication device |
US8082122B2 (en) * | 2006-12-12 | 2011-12-20 | Samsung Electronics Co., Ltd. | Mobile device having a motion detector |
US20080160976A1 (en) * | 2006-12-27 | 2008-07-03 | Nokia Corporation | Teleconferencing configuration based on proximity information |
CN102339121A (zh) * | 2010-07-22 | 2012-02-01 | 林有健 | 电源管理方法以及使用该方法的计算机*** |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107211012A (zh) * | 2015-01-27 | 2017-09-26 | 飞利浦灯具控股公司 | 用于设备控制的接近检测的方法和装置 |
CN107211012B (zh) * | 2015-01-27 | 2020-10-16 | 飞利浦灯具控股公司 | 用于设备控制的接近检测的方法和装置 |
CN105022640A (zh) * | 2015-08-27 | 2015-11-04 | 广东小天才科技有限公司 | 应用程序控制方法、装置及智能设备 |
CN108347520A (zh) * | 2017-01-23 | 2018-07-31 | 阿里巴巴集团控股有限公司 | 情景模式的发送方法及装置、应用的启动方法及装置 |
CN107995357A (zh) * | 2017-11-15 | 2018-05-04 | 广东欧珀移动通信有限公司 | 资源配置方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
EP2829087B1 (en) | 2020-10-07 |
US9167520B2 (en) | 2015-10-20 |
IN2014MN01717A (zh) | 2015-05-29 |
US20130252597A1 (en) | 2013-09-26 |
EP2829087A1 (en) | 2015-01-28 |
WO2013141986A1 (en) | 2013-09-26 |
CN104170413B (zh) | 2019-04-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104170413A (zh) | 基于环境上下文控制移动装置中的应用程序 | |
EP3384489B1 (en) | Generation of notifications based on context data in response to speech phrase from user | |
EP3754652B1 (en) | Method and apparatus for adjusting detection threshold for activating voice assistant function | |
KR102571011B1 (ko) | 분류기 모델과 컨텍스트 파라미터를 사용한 원격 미디어 분류 쿼리에 대한 응답 | |
US9892729B2 (en) | Method and apparatus for controlling voice activation | |
US10770075B2 (en) | Method and apparatus for activating application by speech input | |
US9443511B2 (en) | System and method for recognizing environmental sound | |
JP6883119B2 (ja) | オーディオ透かしによるキーフレーズ検出 | |
CN106782540B (zh) | 语音设备及包括所述语音设备的语音交互*** | |
US9143571B2 (en) | Method and apparatus for identifying mobile devices in similar sound environment | |
US20130201800A1 (en) | Controlling mobile device based on sound identification | |
EP2847984A1 (en) | Systems and methods for content delivery and management | |
CN103370920A (zh) | 用于基于背景相似度对客户端装置进行分组的方法和设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |