CN104978029B - 一种屏幕操控方法及装置 - Google Patents

Abstract

本发明公开了一种屏幕操控方法及装置，所述方法包括：对所有用户所在的第一区域进行拍摄；根据预设的规则从拍摄的图像中分别识别出主用户和次用户；根据所述主用户或次用户各自对应的操控模式，对所述屏幕执行相应的操控。上述方法根据不同的人数，利用不同的方案对主用户和次用户进行识别确认，并且实现了自动对主次用户进行身份转变，从而可以更高效的对屏幕进行操控，提高了智能化程度和用户体验效果。

Description

一种屏幕操控方法及装置

技术领域

本发明涉及电子设备领域，特别涉及一种屏幕操控方法及装置。

背景技术

随着近年来电子技术的发展，电子设备的操控方式也趋于多样化，智能化水平也逐渐提高。尤其是基于肢体运动感应操控的电子设备，由于具有较高的贴近真实的体验效果，被越来越广泛的应用于教学和娱乐领域。但是目前的相关技术中，当多人使用该类电子设备进行互动操控时，通常需要手动对主用户和次用户进行设定，并且当主用户中途退出时，需要重新进行手动设置，智能化程度和体验效果仍然很低下。

发明内容

本发明提供一种屏幕操控方法及装置，用以更加简捷地识别确定主次用户，并且自动对主次用户进行身份转变。

根据本发明实施例的第一方面，提供一种屏幕操控方法，可包括：

对所有用户所在的第一区域进行拍摄；

根据预设的规则从拍摄的图像中分别识别出主用户和次用户；

根据所述主用户或次用户各自对应的操控模式，对所述屏幕执行相应的操控。

优选地，所述根据预设的规则从拍摄的图像中分别识别出主用户和次用户，可包括：

根据拍摄的图像，判断主用户和次用户的总人数；

当判定所述总人数大于阈值时，按照第一策略识别出主用户和次用户；

否则，按照第二策略识别出主用户和次用户；

其中，所述第一策略为通过识别用户发出特定动作的先后顺序来确定主用户和次用户；所述第二策略为通过识别在第二区域内用户出现的先后顺序来确定主用户和次用户，所述第二区域位于第一区域内。

优选地，所述按照第一策略识别出主用户和次用户，可包括：

输出按照第一策略确定主用户和次用户的提示信息；

从拍摄的图像中识别出所述第一区域内用户发出的特定动作；

将首先发出特定动作且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

优选地，所述按照第二策略识别出主用户和次用户，可包括：

输出按照第二策略确定主用户和次用户的提示信息；

从拍摄的图像中识别出所述第二预设区域内出现的用户；

将首先出现在所述第二区域内且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

优选地，所述按照第一策略或第二策略确定主用户和次用户之后，还可包括：

存储主用户和次用户的特征信息；

根据所述储存的特征信息对主用户和次用户进行识别并跟踪；

当识别跟踪主用户失败时，删除所述主用户的信息特征，并将后续所述第一区域内首先发出特定动作且持续时间达到预设时间的用户确定为新的主用户，其他用户确定为次用户。

优选地，根据所述主用户或次用户各自对应的操控模式，对所述屏幕执行相应的操控，可包括：

当主用户或次用户的身份发生转变时，对所述主用户或次用户各自对应的操控模式进行刷新；根据刷新后的所述主用户或次用户各自对应的操控模式对所述屏幕执行相应的操控。

根据本发明实施例的第二方面，提供一种屏幕操控装置，可包括：

拍摄模块，用于对所有用户所在的第一区域进行拍摄；

识别模块，用于根据预设的规则从拍摄的图像中分别识别出主用户和次用户；

操控模块，用于根据所述主用户或次用户各自对应的操控模式，对所述屏幕执行相应的操控。

优选地，所述识别模块可包括：

判断子模块，用于根据拍摄的图像，判断主用户和次用户的总人数；

第一识别子模块，用于当判定所述总人数大于阈值时，按照第一策略识别出主用户和次用户；

第二识别子模块，用于当判定所述总人数不大于阈值时，按照第二策略识别出主用户和次用户。

优选地，所述第一识别子模块可包括：

第一输出单元，用于输出按照第一策略确定主用户和次用户的提示信息；

第一识别单元，用于从拍摄的图像中识别出所述第一区域内用户发出的特定动作；

第一确定单元，用于将首先发出特定动作且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

优选地，所述第二识别子模块可包括：

第二输出单元，用于输出按照第二策略确定主用户和次用户的提示信息；

第二识别单元，用于从拍摄的图像中识别出所述第二预设区域内出现的用户；

第二确定单元，用于将首先出现在所述第二区域内且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

优选地，所述识别模块还可包括：

储存子模块，用于存储主用户和次用户的特征信息；

跟踪子模块，用于根据所述储存的特征信息对主用户和次用户进行识别并跟踪；

确定子模块，用于当识别跟踪主用户失败时，删除所述主用户的信息特征，并将后续所述第一区域内首先发出特定动作且持续时间达到预设时间的用户确定为新的主用户，其他用户确定为次用户。

优选地，所述操控模块可包括：

刷新子模块，用于当主用户或次用户的身份发生转变时，对所述主用户或次用户各自对应的操控模式进行刷新；

操控子模块，用于根据刷新后的所述主用户或次用户各自对应的操控模式对所述屏幕执行相应的操控。

本发明实施例提供的技术方案可产生以下有益效果：通过对所有用户所在的第一区域进行拍摄；根据预设的规则从拍摄的图像中分别识别出主用户和次用户；根据所述主用户或次用户各自对应的操控模式，对所述屏幕执行相应的操控。上述方法根据不同的人数，利用不同的方案对主用户和次用户进行识别确任，并且实现了自动对主次用户进行身份转变，从而可以更加简捷地识别确定主次用户，并且自动对主次用户进行身份转变。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

附图说明

附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：

图1为本发明根据一示例性实施例示出的屏幕操控方法的流程图；

图2为本发明根据一示例性实施例示出的另一屏幕操控方法的流程图；

图3为本发明根据一示例性实施例示出的另一屏幕操控方法的流程图；

图4为本发明根据一示例性实施例示出的另一屏幕操控方法的流程图；

图5为本发明根据一示例性实施例示出的另一屏幕操控方法的流程图；

图6为本发明根据一示例性实施例示出的屏幕操控装置的框图；

图7为本发明根据一示例性实施例示出的另一屏幕操控装置的框图；

图8为本发明根据一示例性实施例示出的另一屏幕操控装置的框图；

图9为本发明根据一示例性实施例示出的另一屏幕操控装置的框图；

图10为本发明根据一示例性实施例示出的另一屏幕操控装置的框图；

图11为本发明根据一示例性实施例示出的另一屏幕操控装置的框图；

具体实施方式

以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。

根据本发明实施例的第一方面，提供一种屏幕操控方法，该方法可用于基于肢体感应操控屏幕的程序或设备中，如图1所示，该方法包括步骤S101-S103：

在步骤S101中，对所有用户所在的第一区域进行拍摄。

其中，拍摄的方式可以为可见光拍摄或非可见光拍摄第，亦或者是两者结合使用，第一区域位于可拍摄并识别的范围之内，可由用户设置进行限定。

在步骤S102中，根据预设的规则从拍摄的图像中分别识别出主用户和次用户。

具体地，预设规则有两种实施方式，根据从拍摄的图像中判断出的用户人数，确定出使用何种实施方式进行识别，进而根据确定出的实施方式识别出主用户和次用户。其中，主用户只有一人，次用户可以是一人或多人。

在步骤S103中，根据主用户或次用户各自对应的操控模式，对屏幕执行相应的操控。

其中，对屏幕的操控可由多人同时进行，而为了使操控的过程主次有序，设置了主用户操控模式和次用户操控模式，此时将上述确定的主用户和次用户分别与主用户操控模式和次用户操控模式建立一一对应的关系，从而使该操控过程井然有序的进行。

上述方法可以更加简捷地识别和确定主次用户，提高用户的使用体验。

在一个实施例中，如图2所示，步骤S102可实施为S1021-S1023：

步骤S1021，根据拍摄的图像，判断主用户和次用户的总人数，当判定总人数大于阈值时，执行步骤S1022；当判定总人数不大于阈值时，执行步骤S1023。

其中，阈值可通过用户根据使用情况进行设置，例如设置阈值为3，则当判断第一区域内的用户人数为4人时，根据步骤S1022的实施方式识别出主用户和次用户，当判断第一区域内的用户人数为3人时，根据步骤S1023的实施方式识别出主用户和次用户。

步骤S1022，按照第一策略识别出主用户和次用户。

步骤S1023，按照第二策略识别出主用户和次用户。

其中，上述第一策略为通过识别用户发出特定动作的先后顺序来确定主用户和次用户；上述第二策略为通过识别在第二区域内用户出现的先后顺序来确定主用户和次用户，第二区域位于第一区域内，可由用户设置进行限定。这样一来使识别主次用户的过程更加灵活多变，提高了识别的效率。

在一个实施例中，如图3所示，上述步骤S1022可实施为S201-S203：

在步骤S201中，输出按照第一策略确定主用户和次用户的提示信息。

在步骤S202中，从拍摄的图像中识别出第一区域内用户发出的特定动作。

在步骤S203中，将首先发出特定动作且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

具体地，当判定采用第一策略识别主用户和次用户后，向屏幕输出并显示采用第一策略识别主次用户的提示信息，提示用户规定时间内在第一区域内做出特定动作，例如举手高于肩膀并保持2秒以上，并将随后规定时间内用户做出的动作进行识别，将第一个举手高于肩膀并保持2秒以上的用户确定为主用户，将其他举手高于肩膀并保持2秒以上的用户确定为次用户。该实施方式适宜于在用户人数较多的情况下，能够高效的完成对主次用户的识别。

在一个实施例中，如图4所示，上述步骤S1023可实施为S301-S303：

在步骤S301中，输出按照第二策略确定主用户和次用户的提示信息。

在步骤S302中，从拍摄的图像中识别出所述第二预设区域内出现的用户。

在步骤S303中，将首先出现在所述第二区域内且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

具体地，当判定采用第二策略识别主用户和次用户后，向屏幕输出并显示采用第二策略识别主次用户的提示信息，提示用户规定时间内站在第二区域内保持2秒以上，随后对规定时间内出现在第二区域内的用户进行识别，并将第一个站在第二区域内保持2秒以上的用户确定为主用户，其他站在第二区域内保持2秒以上的用户确定为次用户。实施方式适用于用户人数较少的情况下，高效准确的识别出主次用户。

在一个实施例中，当识别出主用户和次用户之后，运行相应的程序，例如游戏或教学软件，此时，如图5所示，上述方法还可包括步骤S401-S402：

在步骤S401中，存储主用户和次用户的特征信息。

在步骤S402中，根据所述储存的特征信息对主用户和次用户进行识别并跟踪。

在步骤S403中，当识别跟踪主用户失败时，删除所述主用户的信息特征，并将后续所述第一区域内首先发出特定动作且持续时间达到预设时间的用户确定为新的主用户，其他用户确定为次用户。

具体地，当上述程序开始运行后，如果对主用户的跟踪失败，例如主用户站在次用户身后5秒以上，或者主用户离开第一区域，则将主用户的特征信息删除，并取消主用户的操控权限。此后，将第一区域内首先发出特定动作(例如举手过肩)且持续时间达到预设时间(例如2秒)的用户确定为新的主用户，其他用户仍作为次用户，继续操控该程序的运行。

在一个实施例中，步骤S103可实施为：

当主用户或次用户的身份发生转变时，对所述主用户或次用户各自对应的操控模式进行刷新；根据刷新后的所述主用户或次用户各自对应的操控模式对所述屏幕执行相应的操控。

其中，当上述步骤中，原主用户被删除，原次用户或其他用户的身份转变为新的主用户时，对新的主用户进行识别并跟踪，同时还须对新的主用户与主用户操控模式的对应关系进行刷新，以便继续对正在运行应用程序进行操控。该实施例能够有效应对程序运行中主次用户身份发生转变的突发情况，提高了智能化程度和用户使用体验。

根据本发明实施例的第二方面，如图6所示，提供一种屏幕操控装置，可包括：

拍摄模块61，用于对所有用户所在的第一区域进行拍摄；

识别模块62，用于根据预设的规则从拍摄的图像中分别识别出主用户和次用户；

操控模块63，用于根据主用户或次用户各自对应的操控模式，对所述屏幕执行相应的操控。

在一个实施例中，如图7所示，识别模块62可包括：

判断子模块621，用于根据拍摄的图像，判断主用户和次用户的总人数；

第一识别子模块622，用于当判定总人数大于阈值时，按照第一策略识别出主用户和次用户；

第二识别子模块623，用于当判定总人数不大于阈值时，按照第二策略识别出主用户和次用户；

在一个实施例中，如图8所示，第一识别子模块622可包括：

第一输出单元6221，用于输出按照第一策略确定主用户和次用户的提示信息；

第一识别单元6222，用于从拍摄的图像中识别出第一区域内用户发出的特定动作；

第一确定单元6223，用于将首先发出特定动作且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

在一个实施例中，如图9所示，第二识别子模块623可包括：

第二输出单元6231，用于输出按照第二策略确定主用户和次用户的提示信息；

第二识别单元6232，用于从拍摄的图像中识别出第二预设区域内出现的用户；

第二确定单元6233，用于将首先出现在第二区域内且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

在一个实施例中，如图10所示，识别模块62还可包括：

储存子模块624，用于存储主用户和次用户的特征信息；

跟踪子模块625，用于根据储存的特征信息对主用户和次用户进行识别并跟踪；

确定子模块626，用于当识别跟踪主用户失败时，删除主用户的信息特征，并将后续第一区域内首先发出特定动作且持续时间达到预设时间的用户确定为新的主用户，其他用户确定为次用户。

在一个实施例中，如图11所示，操控模块63可包括：

刷新子模块631，用于当主用户或次用户的身份发生转变时，对主用户或次用户各自对应的操控模式进行刷新；

操控子模块632，用于根据刷新后的主用户或次用户各自对应的操控模式对屏幕执行相应的操控。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种屏幕操控方法，其特征在于，包括：

对所有用户所在的第一区域进行拍摄；

根据预设的规则从拍摄的图像中分别识别出主用户和次用户；

根据所述主用户或次用户各自对应的操控模式，对所述屏幕执行相应的操控；

所述根据预设的规则从拍摄的图像中分别识别出主用户和次用户，包括：

根据拍摄的图像，判断主用户和次用户的总人数；

当判定所述总人数大于阈值时，按照第一策略识别出主用户和次用户；

否则，按照第二策略识别出主用户和次用户；

其中，所述第一策略为通过识别用户发出特定动作的先后顺序来确定主用户和次用户；所述第二策略为通过识别在第二区域内用户出现的先后顺序来确定主用户和次用户，所述第二区域位于第一区域内。

2.如权利要求1所述的方法，其特征在于，所述按照第一策略识别出主用户和次用户，包括：

输出按照第一策略确定主用户和次用户的提示信息；

从拍摄的图像中识别出所述第一区域内用户发出的特定动作；

将首先发出特定动作且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

3.如权利要求1所述的方法，其特征在于，所述按照第二策略识别出主用户和次用户，包括：

输出按照第二策略确定主用户和次用户的提示信息；

从拍摄的图像中识别出所述第二区域内出现的用户；

将首先出现在所述第二区域内且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

4.如权利要求2或3所述的方法，其特征在于，所述按照第一策略或第二策略确定主用户和次用户之后，还包括：

存储主用户和次用户的特征信息；

根据所述储存的特征信息对主用户和次用户进行识别并跟踪；

当识别跟踪主用户失败时，删除所述主用户的特征信息，并将后续所述第一区域内首先发出特定动作且持续时间达到预设时间的用户确定为新的主用户，其他用户确定为次用户。

5.如权利要求1所述的方法，其特征在于，根据所述主用户或次用户各自对应的操控模式，对所述屏幕执行相应的操控，包括：

当主用户或次用户的身份发生转变时，对所述主用户或次用户各自对应的操控模式进行刷新；根据刷新后的所述主用户或次用户各自对应的操控模式对所述屏幕执行相应的操控。

6.一种屏幕操控装置，其特征在于，包括：

拍摄模块，用于对所有用户所在的第一区域进行拍摄；

识别模块，用于根据预设的规则从拍摄的图像中分别识别出主用户和次用户；

操控模块，用于根据所述主用户或次用户各自对应的操控模式，对所述屏幕执行相应的操控；

所述识别模块包括：

判断子模块，用于根据拍摄的图像，判断主用户和次用户的总人数；

第一识别子模块，用于当判定所述总人数大于阈值时，按照第一策略识别出主用户和次用户；

第二识别子模块，用于当判定所述总人数不大于阈值时，按照第二策略识别出主用户和次用户；

其中，所述第一策略为通过识别用户发出特定动作的先后顺序来确定主用户和次用户；所述第二策略为通过识别在第二区域内用户出现的先后顺序来确定主用户和次用户，所述第二区域位于第一区域内。

7.如权利要求6所述的装置，其特征在于，所述第一识别子模块包括：

第一输出单元，用于输出按照第一策略确定主用户和次用户的提示信息；

第一识别单元，用于从拍摄的图像中识别出所述第一区域内用户发出的特定动作；

第一确定单元，用于将首先发出特定动作且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

8.如权利要求6所述的装置，其特征在于，所述第二识别子模块包括：

第二输出单元，用于输出按照第二策略确定主用户和次用户的提示信息；

第二识别单元，用于从拍摄的图像中识别出所述第二区域内出现的用户；

第二确定单元，用于将首先出现在所述第二区域内且持续时间达到预设时间的用户确定为主用户，其他用户确定为次用户。

9.如权利要求7或8所述的装置，其特征在于，所述识别模块还包括：

储存子模块，用于存储主用户和次用户的特征信息；

跟踪子模块，用于根据所述储存的特征信息对主用户和次用户进行识别并跟踪；

确定子模块，用于当识别跟踪主用户失败时，删除所述主用户的特征信息，并将后续所述第一区域内首先发出特定动作且持续时间达到预设时间的用户确定为新的主用户，其他用户确定为次用户。

10.如权利要求6所述的装置，其特征在于，所述操控模块包括：

刷新子模块，用于当主用户或次用户的身份发生转变时，对所述主用户或次用户各自对应的操控模式进行刷新；

操控子模块，用于根据刷新后的所述主用户或次用户各自对应的操控模式对所述屏幕执行相应的操控。