CN113495617A - 设备控制的方法、装置、终端设备以及存储介质 - Google Patents
设备控制的方法、装置、终端设备以及存储介质 Download PDFInfo
- Publication number
- CN113495617A CN113495617A CN202010252369.7A CN202010252369A CN113495617A CN 113495617 A CN113495617 A CN 113495617A CN 202010252369 A CN202010252369 A CN 202010252369A CN 113495617 A CN113495617 A CN 113495617A
- Authority
- CN
- China
- Prior art keywords
- gesture
- target
- household equipment
- image
- acquiring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 84
- 230000009471 action Effects 0.000 claims abstract description 128
- 238000003384 imaging method Methods 0.000 claims abstract description 94
- 230000033001 locomotion Effects 0.000 claims abstract description 75
- 230000001276 controlling effect Effects 0.000 claims description 55
- 230000000875 corresponding effect Effects 0.000 claims description 48
- 230000002596 correlated effect Effects 0.000 claims description 5
- 230000008569 process Effects 0.000 description 14
- 230000006870 function Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 238000010801 machine learning Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 238000004590 computer program Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 241000209094 Oryza Species 0.000 description 2
- 235000007164 Oryza sativa Nutrition 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 150000001875 compounds Chemical class 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 235000009566 rice Nutrition 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 239000012535 impurity Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
- G05B19/4183—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM] characterised by data acquisition, e.g. workpiece identification
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/26—Pc applications
- G05B2219/2642—Domotique, domestic, home control, automation, smart house
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Automation & Control Theory (AREA)
- Human Computer Interaction (AREA)
- Manufacturing & Machinery (AREA)
- Quality & Reliability (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了一种设备控制的方法、装置、终端设备以及存储介质。所述方法包括：获取摄像装置采集到的第一手势动作和至少一个家居设备的图像；基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备；获取摄像装置采集到的第二手势动作；基于第二手势动作控制目标家居设备。本申请通过根据获取到的手势动作确定被控家居设备，并根据手势动作控制被控家居设备，从而实现灵活控制家居设备。结合成像时的手势动作与家居设备之间的位置关系可以设定多种控制模式，操作方便简洁，准确性高，打破了只有几种手势控制的单调性。
Description
技术领域
本申请涉及智能家居技术领域，更具体地，涉及一种设备控制的方法、装置、终端设备以及存储介质。
背景技术
随着通信技术和智能家居的发展，智能家居设备的数量和功能越来越多，为人们的日常生活带来了许多便利。对于数量众多的智能家居设备，如何进行快捷便利的控制是用户越来越关心的问题。目前，可以在智能终端中安装控制智能家居设备的应用程序，通过应用程序中的用户界面对相应的智能家居设备进行控制。但是，当智能家居设备较多时，需要在APP中寻找对应的智能家居设备，其灵活性较差。
发明内容
本申请实施例提出了一种设备控制的方法、装置、终端设备以及存储介质，以解决上述问题。
第一方面，本申请实施例提供了一种设备控制的方法，所述方法包括：获取所述摄像装置采集到的第一手势动作和至少一个家居设备的图像；基于所述第一手势动作和所述至少一个家居设备的图像，从所述至少一个家居设备中确定目标家居设备；获取所述摄像装置采集到的第二手势动作；基于所述第二手势动作控制所述目标家居设备。
第二方面，本申请实施例提供了一种设备控制的装置，所述装置包括：第一动作获取模块，用于获取所述摄像装置采集到的第一手势动作和至少一个家居设备的图像；目标设备确定模块，用于基于所述第一手势动作和所述至少一个家居设备的图像，从所述至少一个家居设备中确定目标家居设备；第二动作获取模块，用于获取所述摄像装置采集到的第二手势动作；目标设备控制模块，用于基于所述第二手势动作控制所述目标家居设备。
第三方面，本申请实施例提供了一种终端设备，包括存储器和处理器，所述存储器耦接到所述处理器，所述存储器存储指令，当所述指令由所述处理器执行时所述处理器执行上述的方法。
第四方面，本申请实施例提供了一种计算机可读取存储介质，所述计算机可读取存储介质中存储有程序代码，所述程序代码可被处理器调用执行上述方法。
在本申请实施例中，获取摄像装置采集到的第一手势动作和至少一个家居设备的图像；基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备；获取摄像装置采集到的第二手势动作；基于第二手势动作控制目标家居设备。本申请通过根据获取到的手势动作确定被控家居设备，并根据手势动作控制被控家居设备，从而实现灵活控制家居设备。结合成像时的手势动作与家居设备之间的位置关系可以设定多种控制模式，操作方便简洁，准确性高，打破了只有几种手势控制的单调性。建立成像区域内被控设备与手势动作之间的关联关系，成像区域内的被控设备可以随意变换，从而使得针对被控设备的控制更加丰富。相对于单一的手势控制设备，本案中的被控设备可以灵活的变换，使得控制方式更为灵活。
本申请的这些方面或其他方面在以下实施例的描述中会更加简明易懂。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1示出了本申请实施例提供的设备控制的方法的应用环境示意图；
图2示出了本申请一个实施例提供的设备控制的方法的流程示意图；
图3示出了本申请又一个实施例提供的设备控制的方法的流程示意图；
图4示出了本申请再一个实施例提供的设备控制的方法的流程示意图；
图5示出了本申请另一个实施例提供的设备控制的方法的流程示意图；
图6示出了本申请还一个实施例提供的设备控制的方法的流程示意图；
图7示出了本申请再又一个实施例提供的设备控制的方法的流程示意图；
图8示出了本申请实施例提供的设备控制的装置的结构框图；
图9示出了本申请实施例用于执行根据本申请实施例的设备控制的方法的终端设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
随着通信技术和智能家居的发展，智能家居设备的数量和功能越来越多，为人们的日常生活带来了许多便利。对于数量众多的智能家居设备，如何进行快捷便利的控制是用户越来越关心的问题。目前，可以在智能终端中安装控制智能家居设备的应用程序，通过应用程序中的用户界面对相应的智能家居设备进行控制。但是，当智能家居设备较多时，需要在APP中寻找对应的智能家居设备，其灵活性较差。
于是，发明人提出了本申请实施例提供的设备控制的方法、装置、终端设备以及存储介质，基于获取到的手势图像确定被控家居设备，并根据手势图像控制被控家居设备，从而实现灵活控制家居设备。
下面将先对本申请所涉及的一种应用环境进行介绍。
请参阅图1，图1为适用于本申请实施例的一种应用环境示意图。本申请实施例提供的设备控制的方法可以应用于如图1所示的智能家居***10中。该智能家居***10中包括终端设备100以及家居设备200。其中，终端设备 100与家居设备200进行连接，该终端设备可以包括个人电脑、智能手机、平板电脑、穿戴式电子设备等，在此不做限定。作为一种实施方式，终端设备 100可以包括摄像装置，可以用于采集家居设备200的图像。
进一步地，在智能家居***10中，还可以包括家居设备200，其中，家居设备200可以包括但不限于门窗传感器、智能开关、灯、空调、窗帘、电视、冰箱、电扇。其中，家居设备200的数量至少为一个，该至少一个家居设备 200与终端设备100连接。其中，终端设备100与家居设备200可以通过蓝牙、 Wifi或者ZigBee等方式进行连接。
下面将结合附图具体描述本申请的各实施例。
请参阅图2，图2示出了本申请一个实施例提供的设备控制的方法的流程示意图。下面将针对图2所示的实施例进行详细的阐述，所述方法具体可以包括但不限于以下步骤：
步骤S110：获取摄像装置采集到的第一手势动作和至少一个家居设备的图像。
在本申请实施例中，终端设备可以包括摄像装置，用户在想要对家居设备进行控制时，可以通过该终端设备模拟人眼，结合手势动作对家居设备进行控制。具体地，终端设备可以获取摄像装置采集到的第一手势动作和至少一个家居设备的图像。其中，家居设备包括但不限于门窗传感器、智能开关、灯、空调、窗帘、电视、冰箱、电扇。进一步地，至少一个家居设备的图像至少包括用户想要进行控制的家居设备的图像。在一些实施方式中，至少一个家居设备的图像可以包括用户想要进行控制的家居设备的图像，以及其他家居设备的图像。进一步地，第一手势动作可以是单一手势动作，即可以是单指手势、多指手势、握拳等，其中，多指可以是两指及两指以上；第一手势动作也可以是复合手势动作，即第一手势动作可以包括至少两个动作，例如第一手势动作可以是先进行握拳，再进行单指手势等，在此不作限定。
步骤S120：基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备。
在本申请实施例中，可以基于获取到的第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备，其中，目标家居设备即用户想要进行控制的家居设备。
在一些实施方式中，可以根据第一手势动作和至少一个家居设备的图像，确定第一手势动作和至少一个家居设备的相对位置关系，根据该相对位置关系确定目标家居设备。作为一种实施方式，可以通过相对位置关系确定手势是指向哪个设备，则将该设备作为目标家居设备。例如，若摄像装置采集到电视的图像、冰箱的图像，根据第一手势动作与电视的图像、冰箱的图像，确定第一手势动作与电视、冰箱的相对位置关系，当确定第一手势动作是指向电视的，可以认为用户想要控制电视的操作，则可以将电视作为目标家居设备。
在一些实施方式中，还可以先通过第一手势动作确定第一手势动作的类型，当第一手势动作的类型满足指定类型时，再获取第一手势动作和至少一个家居设备的相对位置关系，根据该相对位置关系确定目标家居设备。例如，第一手势动作的类型为伸出食指，且食指是指向空调的，则可以将空调作为目标家居设备。在一些实施方式中，第一手势动作可以是复合手势，例如，第一手势动作为多指手势和单指手势相配合的复合手势，可以先采用多指手势对成像区域进行缩放处理，然后采用单指手势指向成像区域内的目标家居设备，以确定被控设备。
作为一种实施方式，还可以获取第一手势动作在家居设备上的停留时间，当停留时间满足预设时间时，则可以将该家居设备作为目标家居设备，如此，在一定程度上可以解决误触发的问题。例如，当第一手势动作指在台灯上持续了一秒，则可以将台灯作为目标家居设备。
在一些实施方式中，终端设备可以将获取到的第一手势动作和至少一个家居设备的图像，在屏幕上实时显示，使得用户可以实时看到第一手势动作在图像中的位置，从而用户可以根据查看图像调整手势的位置。进一步地，在摄像装置的成像区域内的家居设备可以随意变换，从而使得针对被控设备的控制更加丰富。
在一些实施方式中，在成像区域中可以有多个家居设备，且多个家居设备的远近距离各不相同，因此，可以通过变焦的方式使得目标家居设备变得更加清晰，以便于建立第一手势与目标家居设备之间的关联关系。
步骤S130：获取摄像装置采集到的第二手势动作。
在本申请实施例中，在确定目标家居设备后，可以根据第二手势对目标家居设备进行控制。具体地，可以获取摄像装置采集到的第二手势动作。在一些实施方式中，采用第二手势动作控制目标家居设备的过程中，摄像装置的成像区域可以包括目标家居设备的图像，也可以不包括目标家居设备的图像，在此不做限定。其中，第二手势动作可以是单一手势动作，即可以是单指手势、多指手势、握拳等，其中，多指可以是两指及两指以上；第二手势动作也可以是复合手势动作，即第二手势动作可以包括至少两个动作，例如第二手势动作可以是先进行握拳，再进行单指手势等，在此不作限定。
在一些实施方式中，获取第一手势动作的场景与获取第二手势动作的场景可以为同一场景，即在同一场景内，通过第一手势动作确定被控设备，接着通过第二手势动作控制被控设备。作为一种实施方式，终端设备可以确定摄像装置采集第一手势动作和至少一个家居设备的图像的目标成像区域，在目标成像区域内获取第二手势动作。例如，成像区域包括区域a、b、c，区域b为获取电视机控制权限区域，即目标成像区域，当手势出现在该区域时，可以获取电视机的控制权，并可以在区域b内获取第二手势动作。进一步地，还可以将目标成像区域放大，以便更准确的获取第二手势动作。例如，区域b为获取电视机控制权限区域，当手势出现在该区域时，自动将区域b的面积放大，与此同时，可以通过变换第二手势动作类型进行音量加减、频道加减。
在一些实施方式中，获取第一手势动作的场景与获取第二手势动作的场景可以不在同一个场景内，即在第一场景中采用第一手势动作确定被控设备，在第二场景中采用第二手势动作控制被控设备。例如，成像区域包括区域a、b、 c，终端设备确定摄像装置采集第一手势动作和至少一个家居设备的图像的目标成像区域为区域b，则可以在区域a或区域c内获取第二手势动作。
步骤S140：基于第二手势动作控制目标家居设备。
在本申请实施例中，可以基于第二手势动作控制目标家居设备。
在一些实施方式中，可以对第二手势动作进行识别，获取第二手势的类型，基于第二手势的类型确定对目标家居设备的控制方式。例如，目标家居设备为电视，对第二手势动作进行识别后，若识别到右手手指向上则可以完成向上调节频道，右手手指向下可以完成向下调节频道，左手手指向上可以调高音量，左手手指向下可以调低音量，右手手指向右可以完成快进，右手手指向左可以完成倒退，握拳可以关闭电视机等操作。如目标家居设备为窗帘，握拳可以表示关闭窗帘、手掌可以表示打开窗帘；如目标家居设备为灯光，握拳可以表示关闭灯光，手掌可以表示打开灯光；如目标家居设备为空调，握拳可以表示关闭空调，手掌可以表示打开空调，右手手指向上可以完成向上调节温度，右手手指向下可以完成向下调节温度等。上述举例仅为示例，在此不作限定。
在一些实施方式中，还可以通过确定第二手势动作在摄像装置的成像区域中的所在区域，确定对目标家居设备的控制方式。例如，目标家居设备为台灯，当第二手势动作位于成像区域的左侧，则可以将台灯打开。上述方式仅为实例，在此不做限定。在一些实施方式中，可以通过维持手势在区域的时间防止误触发，例如，将成像区域分为左中右三个区域，如手势落在左侧三秒则可设定用来控制设备的开启，手势落在右侧一秒可设定用来控制设备的关闭。
上述实施例提供的设备控制的方法，获取摄像装置采集到的第一手势动作和至少一个家居设备的图像；基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备；获取摄像装置采集到的第二手势动作；基于第二手势动作控制目标家居设备。本申请通过根据获取到的手势确定被控家居设备，并根据手势动作制被控家居设备，从而实现灵活控制家居设备。结合成像时的手势动作与家居设备之间的位置关系可以设定多种控制模式，操作方便简洁，准确性高，打破了只有几种手势控制的单调性。建立成像区域内被控设备与手势动作之间的关联关系，成像区域内的被控设备可以随意变换，从而使得针对被控设备的控制更加丰富。相对于单一的手势控制设备，本案中的被控设备可以灵活的变换，使得控制方式更为灵活。
请参阅图3，图3示出了本申请又一个实施例提供的设备控制的方法的流程示意图。下面将针对图3所示的流程进行详细的阐述，所述方法具体可以包括但不限于以下步骤：
步骤S210：获取摄像装置采集到的第一手势动作和至少一个家居设备的图像。
其中，步骤S210的具体描述请参阅步骤S110，在此不再赘述。
步骤S220：基于第一手势动作和至少一个家居设备的图像，获取第一手势动作与至少一个家居设备的相对位置关系。
在本申请实施例中，可以基于第一手势动作和至少一个家居设备的图像，获取第一手势与至少一个家居设备的相对位置关系。
在一些实施方式中，可以以成像区域的中心为原点建立坐标系，获取第一手势在坐标系中的坐标，以及至少一个家居设备在坐标系中的坐标，进而根据获取到的坐标计算第一手势与至少一个家居设备的相对位置关系。
步骤S230：基于第一手势动作与至少一个家居设备的相对位置关系，从至少一个家居设备中确定目标家居设备。
在一些实施方式中，可以基于第一手势与至少一个家居设备的相对位置关系，从至少一个家居设备中确定目标家居设备。
在一些实施方式中，可以根据第一手势与至少一个家居设备的相对位置关系，确定第一手势落在哪个家居设备，则可将该家居设备作为目标家居设备。例如，当确定第一手势是落在电饭锅上，则可以将电饭锅作为目标家居设备。
在一些实施方式中，当成像区域中有多个家居设备，且多个家居设备部分重叠，远近距离不同时，可以通过变焦来确定目标家居设备，以提高控制的精准性。
在一些实施方式中，可以根据第一手势与至少一个家居设备的相对位置关系，确定第一手势与至少一个家居设备的距离，可以距离最小的家居设备作为目标家居设备。例如，第一手势与台灯距离最小，可以说明第一手势与台灯最近，则可以将台灯作为目标家居设备。
步骤S240：获取摄像装置采集到的第二手势动作。
步骤S250：基于第二手势动作控制目标家居设备。
其中，步骤S240-步骤S250的具体描述请参阅步骤S130-步骤S140，在此不再赘述。
上述实施例提供的设备控制的方法，获取摄像装置采集到的第一手势动作和至少一个家居设备的图像；基于第一手势动作和至少一个家居设备的图像，获取第一手势与至少一个家居设备的相对位置关系；基于第一手势与至少一个家居设备的相对位置关系，从至少一个家居设备中确定目标家居设备；获取摄像装置采集到的第二手势动作；基于第二手势动作控制目标家居设备。上述实施例通过根据第一手势与家居设备的位置关系，确定目标家居设备，提高了家居设备控制的灵活性。
请参阅图4，图4示出了本申请再一个实施例提供的设备控制的方法的流程示意图。下面将针对图4所示的流程进行详细的阐述，所述方法具体可以包括但不限于以下步骤：
步骤S310：获取摄像装置采集到的第一手势动作和至少一个家居设备的图像。
步骤S320：基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备。
步骤S330：获取摄像装置采集到的第二手势动作。
其中，步骤S310-步骤S330的具体描述请参阅步骤S110-步骤S130，在此不再赘述。
步骤S340：获取摄像装置的成像区域中包含第一手势动作和目标家居设备的图像的区域，作为第一目标区域。
在本申请实施例中，可以通过放大第一手势与目标家居设备的图像的区域，从而更准确的确定手势的具体指向对象，根据第二手势对象对具体指向对象进行控制。具体地，可以获取摄像装置的成像区域中包含第一手势动作和目标家居设备的图像的区域，作为第一目标区域。
在一些实施方式，在摄像装置的成像区域可以包含第一手势动作、目标家居设备的图像以及背景图像等，可以获取包含第一手势动作以及目标家居设备的图像的区域，作为第一目标区域进行放大。
在一些实施方式中，可以先将终端设备与家居设备进行绑定，然后在成像区域中，可以将背景图像和未被绑定的家居设备的图像去除，或者，可以用素色填充，只保留第一手势动作以及与终端设备建立绑定关系的家居设备，以此提高识别目标家居设备的准确性。
步骤S350：将第一目标区域放大，并获取放大后的第一手势动作与放大后的目标家居设备的图像的相对位置关系。
在本申请实施例中，可以将第一目标区域放大，以便确定第一手势的具体指向对象。具体地，可以将第一目标区域放大，并获取放大后的第一手势动作与放大后的目标家居设备的图像的相对位置关系。
进一步的，可以在将第一目标区域放大后，对放大后的第一目标区域内的图像进行处理，例如，可以去除图像中的杂物，也可以对图像进行降噪、增强等，从而提高图像的质量，使得可以更准确的确定第一手势动作对应的目标家居设备上的部件。
在一些实施方式中，可以以成像区域的中心为原点建立坐标系，获取放大后的第一手势动作的坐标，然后获取放大后的目标家居设备的图像的坐标，计算得到放大后的第一手势动作与放大后的目标家居设备的图像的相对位置关系。
步骤S360：基于放大后的第一手势动作与放大后的目标家居设备的图像的相对位置关系，从目标家居设备的至少一个部件中确定目标部件。
在本申请实施例中，可以基于放大后的第一手势动作与放大的目标家居设备的图像的相对位置关系，从目标家居设备的至少一个部件中确定目标部件。
在一些实施方式中，目标家居设备的图像可以包含至少一个部件的图像，例如，电视的图像上可以包含控制音量的部件的图像、控制频道的部件的图像、控制开关的部件的图像等。作为一种实施方式，可以以成像区域的中心为原点建立坐标系，获取放大后的目标家居设备的图像中至少一个部件的坐标，以及第一手势的坐标，确定第一手势具体指向的部件作为目标部件。
在一些实施方式中，可以以成像区域的中心为原点建立坐标系，获取放大后的第一手势动作的坐标，然后可以将放大后的目标家居设备的图像划分为几个区域，每个区域包括至少一个部件，并分别获取每个区域的坐标，根据第一手势动作的坐标以及每个区域的坐标，确定第一手势具体指向的区域，并可以将该区域里的部件作为目标部件。
步骤S370：基于第二手势动作控制目标部件。
在本申请实施例中，可以基于第二手势动作控制目标部件。
在一些实施方式中，可以对第二手势动作进行识别，获取第二手势的类型，基于第二手势的类型确定对目标部件的控制方式。例如，目标部件为电视的控制频道的部件，对第二手势动作进行识别后，获取到第二手势的类型为左手手指向上，则可以向上调节频道。
上述实施例提供的设备控制的方法，获取摄像装置采集到的第一手势动作和至少一个家居设备的图像；基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备；获取摄像装置采集到的第二手势动作；获取摄像装置的成像区域中包含第一手势动作和目标家居设备的图像的区域，作为第一目标区域；将第一目标区域放大，并获取放大后的第一手势动作与放大后的目标家居设备的图像的相对位置关系；基于放大后的第一手势动作与放大后的目标家居设备的图像的相对位置关系，从目标家居设备的至少一个部件中确定目标部件；基于第二手势动作控制目标部件。上述实施例通过将包含第一手势动作和至少一个家居设备的图像的区域进行放大，以便于提取手势的具体指向对象，从而更精确的建立手势与目标家居设备之间的对应关系。
请参阅图5，图5示出了本申请另一个实施例提供的设备控制的方法的流程示意图，下面将针对图5所示的流程进行详细的阐述，所述方法具体可以包括但不限于以下步骤：
步骤S410：获取摄像装置采集到的第一手势动作和至少一个家居设备的图像。
步骤S420：基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备。
步骤S430：获取摄像装置采集到的第二手势动作。
其中，步骤S410-步骤S430的具体描述请参阅步骤S110-步骤S130，在此不再赘述。
步骤S440：对第二手势动作进行识别，将第二手势动作在成像区域中所在的区域作为第一目标区域。
在本申请实施例中，摄像装置的成像区域包括多个区域，且该多个区域中的每个区域对应至少一个指令信息，可以根据第二手势在成像区域中所在的区域，确定第二手势对应的控制方式。具体地，可以对获取到的第二手势图像进行识别，获取第二手势在成像区域中所在的区域，作为目标区域。
在一些实施方式中，可以实时采集摄像装置采集到的第二手势图像，并通过终端设备的屏幕进行显示，使得用户可以准确知道手指所在区域，通过维持手势在区域的时间可以防止误触发。
步骤S450：获取第一目标区域对应的第一指令信息。
在本申请实施例中，可以获取目标区域对应的第一指令信息。
在一些实施方式中，成像区域可以包括多个区域，其中，可以预先存储有区域与指令信息的对应关系，在获取到第二手势在成像区域中所在的区域，即目标区域后，可以根据区域与指令信息的对应关系，获取目标区域对应的第一指令信息。例如，可以将成像区域分为左中右三个区域，左侧区域对应控制设备的开，右侧区域对应控制设备的关，当检测到第二手势位于左侧区域时，可以获取到第一指令信息为控制设备的开。
步骤S460：基于第一指令信息控制目标家居设备。
在本申请实施例中，可以基于第一指令信息控制目标家居设备。例如，可以将成像区域分为左中右三个区域，左侧区域对应控制设备的开，右侧区域对应控制设备的关，当检测到第二手势位于左侧区域时，可以获取到第一指令信息为控制设备的开，则可以控制目标家居设备打开。
上述实施例提供的设备控制的方法，获取摄像装置采集到的第一手势动作和至少一个家居设备的图像；基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备；获取摄像装置采集到的第二手势动作；对第二手势动作进行识别，获取第二手势在成像区域中所在的区域，作为目标区域；获取目标区域对应的第一指令信息；基于第一指令信息控制目标家居设备。上述实施例通过根据第二手势在成像区域中的位置，确定目标家居设备的控制方式，从而使得目标家居设备的控制更加丰富。
请参阅图6，图6示出了本申请还一个实施例提供的设备控制的方法的流程示意图，下面将针对图6所示的流程进行详细的阐述，所述方法具体可以包括但不限于以下步骤：
步骤S510：获取摄像装置采集到的第一手势动作和至少一个家居设备的图像。
步骤S520：基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备。
步骤S530：获取摄像装置采集到的第二手势动作。
其中，步骤S510-步骤S530的具体描述请参阅步骤S110-步骤S130，在此不再赘述。
步骤S540：对第二手势动作进行识别，获取第二手势动作对应的手势类型。
在本申请实施例中，可以基于第二手势的类型确定目标家居设备的控制方式。具体地，可以对第二手势动作进行识别，获取第二手势对应的手势类型。
在一些实施方式中，可以预先建立有机器学习模型，该机器学习模型可以是以手势图像以及手势图像对应的手势类型为训练样本训练得到的，因此，可以将第二手势动作输入该机器学习模型，得到该机器学习模型输出的第二手势对应的手势类型。
在一些实施方式中，可以适当增大手势所在区域的面积，以便于更为完整的提取到手势动作，增加控制的精度。具体地，可以获取摄像装置的成像区域中包含第二手势动作的区域，将摄像装置的成像区域中包含第二手势动作的区域作为第二目标区域，将第二目标区域放大，并对放大后的第二手势动作进行识别，得到第二手势对应的手势类型。作为一种实施方式，可以将放大后的第二手势动作输入至机器学习模型，获得机器学习模型输出的与放大后的第二手势动作对应的手势类型。
步骤S550：根据目标家居设备，获取手势类型对应的第二指令信息。
在本申请实施例中，在获取到第二手势对应的手势类型后，可以根据目标家居设备获取手势类型对应的第二指令信息。
在一些实施方式中，可以预先存储有家居设备、手势类型与第二指令信息的对应关系。例如，家居设备为空调时，握拳表示关闭空调，手掌表示打开空调，右手手指向上完成向上调节温度，右手手指向下完成向下调节温度等。家居设备为电视时，右手手指向上完成向上调节频道，右手手指向下完成向下调节频道，左手手指向上调高音量，左手手指向下调低音量，握拳关闭电视机等操作。上述距离仅为实例，在此不作限定。可以通过确定的目标家居设备以及第二手势对应的类型，根据家居设备、手势类型与第二指令信息的对应关系，确定对应的第二指令信息。
步骤S560：基于第二指令信息控制目标家居设备。
在本申请实施例中，可以基于第二指令信息控制目标家居设备。例如，目标家居设备为空调时，第二指令信息为向上调节温度，则可以控制空调调高温度。
上述实施例提供的设备控制的方法，获取摄像装置采集到的第一手势动作和至少一个家居设备的图像；基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备；获取摄像装置采集到的第二手势动作；对第二手势动作进行识别，获取第二手势对应的手势类型；获取手势类型对应的第二指令信息；基于第二指令信息控制目标家居设备。上述实施例通过根据第二手势对应的类型，确定家居设备的控制方式，从而使得目标家居设备的控制方式更加丰富。
请参阅图7，图7示出了本申请再又一个实施例提供的设备控制的方法的流程示意图，在获取摄像装置采集到的第一手势动作和至少一个家居设备的图像之前，还可以执行如图7所示的步骤S610-步骤S620，下面将针对图7所示的流程进行详细的阐述，所述方法具体可以包括但不限于以下步骤：
步骤S610：当摄像装置的成像区域中包含多个家居设备时，分别获取多个家居设备在指定时间段内的使用频率。
在本申请实施例中，当摄像装置的成像区域中包含多个家居设备时，可以分别获取多个家居设备在指定时间段内的使用频率。
在一些实施方式中，可以通过获取指定时间段内，多个家居设备的历史使用信息，从而根据历史使用信息确定多个家居设备的使用频率。例如，当19:30 时，摄像装置的成像区域中包含电视、空调，可以获取19:00-19:30的时间段内，电视、空调的使用时间，若用户在这半个小时中多次操作电视，而没有操作空调，则可以得到电视的使用频率高于空调的使用频率。
步骤S620：基于使用频率确定多个家居设备中的每个家居设备在成像区域中对应的区域大小，其中，使用频率与区域大小呈正相关。
在一些实施方式中，可以基于使用频率确定多个家居设备中的每个家居设备在成像区域中对应的区域大小，其中，使用频率与区域大小呈正相关，即使用频率越高，对应的区域大小越大。例如，在19:00-19:30的时间段内，电视的使用频率高于空调的使用频率，则电视在成像区域中对应的区域大于空调在成像区域中对应的区域。
在一些实施方式中，步骤S620之后还可以包括步骤S630：基于区域大小在成像区域中显示多个家居设备。
在本申请实施例中，可以基于区域大小在成像区域中显示多个家居设备。在一些实施方式中，区域越大，在成像区域中显示的面积的越大。
上述实施例提供的设备控制的方法，当摄像装置的成像区域中包含多个家居设备时，分别获取多个家居设备在指定时间段内的使用频率；基于使用频率确定多个家居设备中的每个家居设备在成像区域中对应的区域大小，其中，使用频率与区域大小呈正相关；基于区域大小在成像区域中显示多个家居设备。上述实施例可以通过家居设备在历史时间段内的使用频率，分配在成像区域所对应的区域大小，从而可以更准确的将家居设备和手势动作关联起来。
请参阅图8，图8示出了本申请实施例提供的设备控制的装置800的模块框图。下面将针对图8所示的框图进行阐述，所述设备控制的装置800应用于终端设备，该终端设备包括摄像装置，所述设备控制的装置800包括：第一动作获取模块810、目标设备确定模块820、第二动作获取模块830以及目标设备控制模块840，其中：
第一动作获取模块810，用于获取摄像装置采集到的第一手势动作和至少一个家居设备的图像。
目标设备确定模块820，用于基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备。
进一步地，目标设备确定模块820包括：位置关系获取子模块以及目标设备确定子模块，其中：
位置关系获取子模块，用于基于第一手势动作和至少一个家居设备的图像，获取第一手势动作与至少一个家居设备的相对位置关系。
目标设备确定子模块，用于基于第一手势动作与至少一个家居设备的相对位置关系，从至少一个家居设备中确定目标家居设备。
第二动作获取模块830，用于获取摄像装置采集到的第二手势动作。
进一步地，第二动作获取模块830包括：目标区域确定子模块以及第二动作获取子模块，其中：
目标区域确定子模块，用于确定摄像装置采集第一手势动作和至少一个家居设备的图像的目标成像区域。
第二动作获取子模块，用于在目标成像区域内获取第二手势动作。
目标设备控制模块840，用于基于第二手势动作控制目标家居设备。
进一步地，目标设备控制模块840包括：第一区域获取子模块、位置关系获取子模块、目标部件确定子模块以及目标部件控制子模块，其中；
第一区域获取子模块，用于获取摄像装置的成像区域中包含第一手势动作和目标家居设备的图像的区域，作为第一目标区域。
位置关系获取子模块，用于将第一目标区域放大，并获取放大后的第一手势动作与放大后的目标家居设备的图像的相对位置关系。
目标部件确定子模块，用于基于放大后的第一手势动作与放大后的目标家居设备的图像的相对位置关系，从目标家居设备的至少一个部件中确定目标部件。
目标部件控制子模块，用于基于第二手势动作控制目标部件。
进一步地，摄像装置的成像区域包括多个区域，且个区域中的每个区域对应至少一个指令信息，目标设备控制模块840还包括：第一图像识别子模块、第一信息获取子模块以及第一控制子模块，其中：
第一图像识别子模块，用于对第二手势动作进行识别，获取第二手势动作在成像区域中所在的区域，作为目标区域。
第一信息获取子模块，用于获取目标区域对应的第一指令信息。
第一控制子模块，用于基于第一指令信息控制目标家居设备。
进一步地，目标设备控制模块840还包括：第二图像识别子模块、第二信息获取子模块以及第二控制子模块，其中：
第二图像识别子模块，用于对第二手势动作进行识别，获取第二手势动作对应的手势类型。
进一步地，第二图像识别子模块包括区域获取单元以及图像识别单元，其中：
区域获取单元，用于获取摄像装置的成像区域中包含第二手势动作的区域，将摄像装置的成像区域中包含第二手势动作的区域作为第二目标区域。
图像识别单元，用于将第二目标区域放大，并对放大后的第二手势动作进行识别，得到第二手势动作对应的手势类型。
第二信息获取子模块，用于获取手势类型对应的第二指令信息。
第二控制子模块，用于基于第二指令信息控制目标家居设备。
进一步地，设备控制的装置800还包括：使用频率获取模块、区域大小确定模块以及家居设备显示模块，其中：
使用频率获取模块，用于当摄像装置的成像区域中包含多个家居设备时，分别获取多个家居设备在指定时间段内的使用频率。
区域大小确定模块，用于基于使用频率确定多个家居设备中的每个家居设备在成像区域中对应的区域大小，其中，使用频率与区域大小呈正相关。
家居设备显示模块，用于基于区域大小在成像区域中显示多个家居设备。
本申请实施例提供的设备控制的装置，第一动作获取模块，用于获取摄像装置采集到的第一手势动作和至少一个家居设备的图像；目标设备确定模块，用于基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备；第二动作获取模块，用于获取摄像装置采集到的第二手势动作；目标设备控制模块，用于基于第二手势动作控制目标家居设备，从而通过根据获取到的手势动作确定被控家居设备，并根据手势动作控制被控家居设备，实现灵活控制家居设备。结合成像时的手势动作与家居设备之间的位置关系可以设定多种控制模式，操作方便简洁，准确性高，打破了只有几种手势控制的单调性。建立成像区域内被控设备与手势动作之间的关联关系，成像区域内的被控设备可以随意变换，从而使得针对被控设备的控制更加丰富。相对于单一的手势控制设备，本案中的被控设备可以灵活的变换，使得控制方式更为灵活。
所属领域的技术人员可以清楚地了解到，本申请实施例提供的设备控制的装置能够实现图2到图7的方法实施例中终端设备实现的各个过程，为描述的方便和简洁，上述描述装置和模块的具体工作过程，可以参阅前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，所显示或讨论的模块相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或模块的间接耦合或通信连接，可以是电性，机械或其它的形式。另外，在本申请各个实施例中的各功能模块可以集成在一个处理模块中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。
图9为实现本申请各个实施例的一种终端设备的硬件结构示意图。
该终端设备100包括但不限于：射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解，图9中示出的终端设备结构并不构成对终端设备的限定，终端设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本申请实施例中，终端设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端设备、可穿戴设备、以及计步器等。
其中，处理器110，用于响应设备入网指令，基于短距离无线通信技术扫描智能设备，从扫描到的智能设备中获取满足预设入网条件的目标智能设备，将该目标智能设备按预设规则推送，从而能够快速、准确地选中目标智能设备进行网络连接，提高用户体验。
应理解的是，本申请实施例中，射频单元101可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器 110处理；另外，将上行的数据发送给基站。通常，射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元101还可以通过无线通信***与网络和其他设备通信。
终端设备通过网络模块102为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元103可以将射频单元101或网络模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元103还可以提供与终端设备100执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元103包括扬声器、蜂鸣器以及受话器等。
输入单元104用于接收音频或视频信号。输入单元104可以包括图形处理器(Graphics Processing Unit，GPU)1041和麦克风1042，图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或网络模块102进行发送。麦克风1042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。
终端设备100还包括至少一种传感器105，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度，接近传感器可在终端设备100移动到耳边时，关闭显示面板1061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别终端设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器105还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。
显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元 106可包括显示面板1061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置显示面板 1061。
用户输入单元107可用于接收输入的数字或字符信息，以及产生与终端设备的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元107 包括触控面板1071以及其他输入设备1072。触控面板1071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作)。触控面板1071 可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器 110，接收处理器110发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071，用户输入单元107还可以包括其他输入设备1072。具体地，其他输入设备1072 可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。
进一步的，触控面板1071可覆盖在显示面板1061上，当触控面板1071 检测到在其上或附近的触摸操作后，传送给处理器110以确定触摸事件的类型，随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图9中，触控面板1071与显示面板1061是作为两个独立的部件来实现终端设备的输入和输出功能，但是在某些实施例中，可以将触控面板1071与显示面板1061集成而实现终端设备的输入和输出功能，具体此处不做限定。
接口单元108为外部装置与终端设备100连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/ 输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到终端设备100内的一个或多个元件或者可以用于在终端设备100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作***、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器109 可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器110是终端设备的控制中心，利用各种接口和线路连接整个终端设备的各个部分，通过运行或执行存储在存储器109内的软件程序和/或模块，以及调用存储在存储器109内的数据，执行终端设备的各种功能和处理数据，从而对终端设备进行整体监控。处理器110可包括一个或多个处理单元；优选的，处理器110可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作***、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器110中。
终端设备100还可以包括给各个部件供电的电源111(比如电池)，优选的，电源111可以通过电源管理***与处理器110逻辑相连，从而通过电源管理***实现管理充电、放电、以及功耗管理等功能。
另外，终端设备100包括一些未示出的功能模块，在此不再赘述。
本申请实施例还提供一种终端设备，包括处理器110，存储器109，存储在存储器109上并可在所述处理器110上运行的计算机程序，该计算机程序被处理器110执行时实现上述设备控制的方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
本申请实施例提供的终端设备，执行获取摄像装置采集到的第一手势动作和至少一个家居设备的图像；基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备；获取摄像装置采集到的第二手势动作；基于第二手势动作控制目标家居设备。本申请通过根据获取到的手势动作确定被控家居设备，并根据手势动作控制被控家居设备，从而实现灵活控制家居设备。结合成像时的手势动作与家居设备之间的位置关系可以设定多种控制模式，操作方便简洁，准确性高，打破了只有几种手势控制的单调性。建立成像区域内被控设备与手势动作之间的关联关系，成像区域内的被控设备可以随意变换，从而使得针对被控设备的控制更加丰富。相对于单一的手势控制设备，本案中的被控设备可以灵活的变换，使得控制方式更为灵活。
本申请实施例还提供一种计算机可读存储介质900，计算机可读存储介质 900上存储有计算机程序910，该计算机程序910被处理器执行实现上述设备控制的方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质900，如只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random AccessMemory，RAM)、磁碟或者光盘等。
综上所述，本申请实施例公开了一种设备控制的方法、装置、终端设备以及存储介质。获取摄像装置采集到的第一手势动作和至少一个家居设备的图像；基于第一手势动作和至少一个家居设备的图像，从至少一个家居设备中确定目标家居设备；获取摄像装置采集到的第二手势动作；基于第二手势动作控制目标家居设备。本申请通过根据获取到的手势确定被控家居设备，并根据手势图像控制被控家居设备，从而实现灵活控制家居设备。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是智能网关，手机，计算机，服务器，空调器或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请各实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护范围之内。
Claims (11)
1.一种设备控制的方法，其特征在于，应用于终端设备，所述终端设备包括摄像装置，所述方法包括：
获取所述摄像装置采集到的第一手势动作和至少一个家居设备的图像；
基于所述第一手势动作和所述至少一个家居设备的图像，从所述至少一个家居设备中确定目标家居设备；
获取所述摄像装置采集到的第二手势动作；
基于所述第二手势动作控制所述目标家居设备。
2.根据权利要求1所述的方法，其特征在于，所述基于所述第一手势动作和所述至少一个家居设备的图像，从所述至少一个家居设备中确定目标家居设备，包括：
基于所述第一手势动作和所述至少一个家居设备的图像，获取所述第一手势动作与所述至少一个家居设备的相对位置关系；
基于所述第一手势动作与所述至少一个家居设备的相对位置关系，从所述至少一个家居设备中确定所述目标家居设备。
3.根据权利要求1所述的方法，其特征在于，所述基于所述第二手势动作控制所述目标家居设备，包括：
获取所述摄像装置的成像区域中包含所述第一手势动作和目标家居设备的图像的区域，作为第一目标区域；
将所述第一目标区域放大，并获取放大后的所述第一手势动作与放大后的所述目标家居设备的图像的相对位置关系；
基于所述放大后的所述第一手势动作与放大后的所述目标家居设备的图像的相对位置关系，从所述目标家居设备的至少一个部件中确定目标部件；
基于所述第二手势动作控制所述目标部件。
4.根据权利要求1所述的方法，其特征在于，所述摄像装置的成像区域包括多个区域，且所述多个区域中的每个区域对应至少一个指令信息，所述基于所述第二手势动作控制所述目标家居设备，包括：
对所述第二手势动作进行识别，将所述第二手势动作在所述成像区域中的区域作为第一目标区域；
获取所述第一目标区域对应的第一指令信息；
基于所述第一指令信息控制所述目标家居设备。
5.根据权利要求1所述的方法，其特征在于，所述基于所述第二手势动作控制所述目标家居设备，包括：
对所述第二手势动作进行识别，获取所述第二手势动作对应的手势类型；
根据所述目标家居设备，获取所述手势类型对应的第二指令信息；
基于所述第二指令信息控制所述目标家居设备。
6.根据权利要求5所述的方法，其特征在于，所述对所述第二手势动作进行识别，获取所述第二手势动作对应的手势类型，包括：
获取所述摄像装置的成像区域中包含所述第二手势动作的区域，将所述摄像装置的成像区域中包含所述第二手势动作的区域作为第二目标区域；
将所述第二目标区域放大，并对放大后的所述第二手势动作进行识别，得到所述第二手势动作对应的手势类型。
7.根据权利要求1所述的方法，其特征在于，所述获取所述摄像装置采集到的第一手势动作和至少一个家居设备的图像之前，还包括：
当所述摄像装置的成像区域中包含多个家居设备时，分别获取所述多个家居设备在指定时间段内的使用频率；
基于所述使用频率确定所述多个家居设备中的每个家居设备在成像区域中对应的区域大小，其中，所述使用频率与所述区域大小呈正相关。
8.根据权利要求1-7任一项所述的方法，其特征在于，所述获取所述摄像装置采集到的第二手势动作包括：
确定所述摄像装置采集所述第一手势动作和至少一个所述家居设备的图像的目标成像区域；
在所述目标成像区域内获取所述第二手势动作。
9.一种设备控制的装置，其特征在于，应用于终端设备，所述终端设备包括摄像装置，所述装置包括：
第一图像获取模块，用于获取所述摄像装置采集到的第一手势动作和至少一个家居设备的图像；
目标设备确定模块，用于基于所述第一手势动作和所述至少一个家居设备的图像，从所述至少一个家居设备中确定目标家居设备；
第二图像获取模块，用于获取所述摄像装置采集到的第二手势动作；
目标设备控制模块，用于基于所述第二手势动作控制所述目标家居设备。
10.一种终端设备，其特征在于，包括存储器和处理器，所述存储器耦接到所述处理器，所述存储器存储指令，当所述指令由所述处理器执行时所述处理器执行如权利要求1-8任一项权利要求所述的方法。
11.一种计算机可读取存储介质，其特征在于，所述计算机可读取存储介质中存储有程序代码，所述程序代码可被处理器调用执行如权利要求1-8任一项权利要求所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010252369.7A CN113495617A (zh) | 2020-04-01 | 2020-04-01 | 设备控制的方法、装置、终端设备以及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010252369.7A CN113495617A (zh) | 2020-04-01 | 2020-04-01 | 设备控制的方法、装置、终端设备以及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113495617A true CN113495617A (zh) | 2021-10-12 |
Family
ID=77994336
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010252369.7A Pending CN113495617A (zh) | 2020-04-01 | 2020-04-01 | 设备控制的方法、装置、终端设备以及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113495617A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114253396A (zh) * | 2021-11-15 | 2022-03-29 | 青岛海尔空调电子有限公司 | 一种目标控制方法、装置、设备和介质 |
| CN115616928A (zh) * | 2022-10-21 | 2023-01-17 | 广州视声智能股份有限公司 | 基于人工智能的控制面板控制方法和装置 |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101604224A (zh) * | 2009-07-08 | 2009-12-16 | 宇龙计算机通信科技(深圳)有限公司 | 一种应用程序的功能图标显示方法、***及移动终端 |
| CN102508599A (zh) * | 2011-10-11 | 2012-06-20 | 宇龙计算机通信科技(深圳)有限公司 | 一种桌面图标的显示方法及其通信终端 |
| CN103472796A (zh) * | 2013-09-11 | 2013-12-25 | 厦门狄耐克电子科技有限公司 | 一种基于手势识别的智能家居*** |
| CN104699244A (zh) * | 2015-02-26 | 2015-06-10 | 小米科技有限责任公司 | 智能设备的操控方法及装置 |
| CN106489080A (zh) * | 2014-08-07 | 2017-03-08 | 谷歌公司 | 基于雷达的手势感测和数据传输 |
| CN107678551A (zh) * | 2017-10-19 | 2018-02-09 | 京东方科技集团股份有限公司 | 手势识别方法和装置、电子设备 |
| CN108710465A (zh) * | 2018-03-19 | 2018-10-26 | 西安艾润物联网技术服务有限责任公司 | 车牌号输入法虚拟按键显示控制方法、存储介质及用户终端 |
| CN208723929U (zh) * | 2018-09-20 | 2019-04-09 | 塔普翊海（上海）智能科技有限公司 | 一种ar遥控器 |
| CN109814717A (zh) * | 2019-01-29 | 2019-05-28 | 珠海格力电器股份有限公司 | 一种家居设备控制方法、装置、控制设备及可读存储介质 |
-
2020
- 2020-04-01 CN CN202010252369.7A patent/CN113495617A/zh active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101604224A (zh) * | 2009-07-08 | 2009-12-16 | 宇龙计算机通信科技(深圳)有限公司 | 一种应用程序的功能图标显示方法、***及移动终端 |
| CN102508599A (zh) * | 2011-10-11 | 2012-06-20 | 宇龙计算机通信科技(深圳)有限公司 | 一种桌面图标的显示方法及其通信终端 |
| CN103472796A (zh) * | 2013-09-11 | 2013-12-25 | 厦门狄耐克电子科技有限公司 | 一种基于手势识别的智能家居*** |
| CN106489080A (zh) * | 2014-08-07 | 2017-03-08 | 谷歌公司 | 基于雷达的手势感测和数据传输 |
| CN104699244A (zh) * | 2015-02-26 | 2015-06-10 | 小米科技有限责任公司 | 智能设备的操控方法及装置 |
| CN107678551A (zh) * | 2017-10-19 | 2018-02-09 | 京东方科技集团股份有限公司 | 手势识别方法和装置、电子设备 |
| CN108710465A (zh) * | 2018-03-19 | 2018-10-26 | 西安艾润物联网技术服务有限责任公司 | 车牌号输入法虚拟按键显示控制方法、存储介质及用户终端 |
| CN208723929U (zh) * | 2018-09-20 | 2019-04-09 | 塔普翊海（上海）智能科技有限公司 | 一种ar遥控器 |
| CN109814717A (zh) * | 2019-01-29 | 2019-05-28 | 珠海格力电器股份有限公司 | 一种家居设备控制方法、装置、控制设备及可读存储介质 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114253396A (zh) * | 2021-11-15 | 2022-03-29 | 青岛海尔空调电子有限公司 | 一种目标控制方法、装置、设备和介质 |
| CN115616928A (zh) * | 2022-10-21 | 2023-01-17 | 广州视声智能股份有限公司 | 基于人工智能的控制面板控制方法和装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108459797B (zh) | 一种折叠屏的控制方法及移动终端 | |
| CN110557566B (zh) | 视频拍摄方法及电子设备 | |
| CN108471498B (zh) | 一种拍摄预览方法及终端 | |
| CN107817939B (zh) | 一种图像处理方法及移动终端 | |
| CN107734175B (zh) | 一种通知消息的提示方法及移动终端 | |
| CN108427873B (zh) | 一种生物特征识别方法及移动终端 | |
| CN108710458B (zh) | 一种分屏控制方法和终端设备 | |
| CN108762877B (zh) | 一种移动终端界面的控制方法及移动终端 | |
| CN109558046B (zh) | 一种信息显示方法及终端设备 | |
| CN109922294B (zh) | 一种视频处理方法及移动终端 | |
| CN107728923B (zh) | 一种操作的处理方法及移动终端 | |
| CN108958593B (zh) | 一种确定通讯对象的方法及移动终端 | |
| CN109600468B (zh) | 可折叠终端的控制方法及可折叠终端 | |
| CN109145731B (zh) | 一种指纹识别方法、装置和移动终端 | |
| CN108509141B (zh) | 一种控件的生成方法及移动终端 | |
| CN109446775A (zh) | 一种声控方法及电子设备 | |
| CN109542321B (zh) | 一种屏幕显示内容的控制方法及装置 | |
| CN109871253A (zh) | 一种显示方法及终端 | |
| CN107967418B (zh) | 人脸识别方法及移动终端 | |
| CN109240575A (zh) | 一种屏幕控制方法及电子设备 | |
| CN113495617A (zh) | 设备控制的方法、装置、终端设备以及存储介质 | |
| CN109902679B (zh) | 一种图标显示方法及终端设备 | |
| CN108924413B (zh) | 拍摄方法及移动终端 | |
| CN110769303A (zh) | 播放控制方法、装置及移动终端 | |
| CN108366171B (zh) | 一种温升控制方法和移动终端 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |