CN102799299A - 具触控式屏幕的电脑***及其手势的处理方法 - Google Patents

Abstract

本发明为一种具触控式屏幕的电脑***及其快速反应手势的处理方法。此电脑***中新增手势挂勾单元以接收第一手势引擎与第二手势引擎所产生的第一手势事件与第二手势事件并据以调整上层画面，使得使用者利用手势控制触控式屏幕时对应的工作区域内容的调整能更平顺。

Description

具触控式屏幕的电脑***及其手势的处理方法

技术领域

本发明是有关于一种电脑***，尤指一种以手势控制的电脑***与处理方法。

背景技术

由于科技的进步，现在电脑***中的操作***(0S)已经能够支持触控式屏幕，因此，使用者可以利用手指的点选来取代电脑***的鼠标，并进一步控制电脑***。换言之，当电脑***的屏幕改为触控式屏幕之后，使用者仅需利用手指的点选即可取代鼠标的操控。同时，利用使用者的手势(gesture)也可以进行缩放(zoom)、旋转(rotate)、平移(translate)的动作。

请参照图1a与图1b，其所示为电脑***中利用手势在触控式屏幕上进行放大动作的示意图。基本上，于触控式屏幕100上可显示出操作***的工具栏110，而工具栏110上有多个使用者介面，例如开始按钮112、以及网络状态图形114。而在触控式屏幕100显示应用模块120视窗。而应用模块120的工作区域(work space)中则呈现第一影像160a。再者，工作区域即为应用模块120视窗中，可供使用者进行放大、缩小、旋转、移动的区域。

当使用者欲放大应用模块120中工作区域上的第一影像160a时，使用者将二个触控点150、155接触于触控式屏幕100上应用模块120的工作区域中。接着，二个触控点150、155向外移动使得二个触控点150、155之间的距离变大。之后，将二触控点150、155移离开触控式屏幕。因此，如图1b所示，应用模块120的工作区域上会呈现第二影像160b。亦即，应用程序120会根据使用者的手势来将第一影像160a放大成为第二影像160b。

当使用者欲缩小影像时，就如上述方式进行，但使用者是将二个触控点150、155向内移动，使得二个触控点150、155之间的距离变小，就可达成缩小影像的效果。其他缩放、旋转或平移的动作也可利用二个触控点之间的变化来达成，视电脑***供货商所定义的手势而定。

而为了要因应触控式屏幕的技术，使得电脑***可以针对使用者的手势来进行对应的指令动作，电脑***中建立了触控信号的处理架构。此处理架构可以根据使用者的触控点来判断出使用者的手势，并使得应用程序进行相对应的控制动作。

请参照图2，其所示为已知具触控式屏幕的电脑***中触控信号的处理架构示意图。此架构包括触控单元(touch unit)300与手势引擎模块(gesture engine)304、应用模块(application module)310。而触控单元300中包括触控式屏幕301及驱动模块(driver)302。其中，手势引擎模块304接收触控单元300输出的位置信号并产生手势事件(gesture event)后经由应用程序介面(application programinterface，简称API)220将手势事件传递至应用模块310，使得应用模块310根据手势事件来执行。

当使用者于触控式屏幕301上产生多个触控点，驱动模块302即可据以输出相对应多个触控点的位置信号，而此位置信号可为坐标信号。再者，手势引擎模块304根据位置信号的变化而判断出使用者的手势并产生对应的手势事件至应用模块。

然而，许多支持手势的应用模块虽然可以处理手势事件，但无法平滑地进行缩放、旋转、平移的动作，而是以不连贯的方式呈现手势效果。因此，使用者在操作上会感觉到影像的变化不连贯，并感觉到应用模块反应不佳的情形。

举例来说，如图3a所示，其为使用者利用二触控点来进行放大的动作的二个触控点轨迹示意图。而二个触控点的轨迹所对应的第一位置信号610与第二位置信号620会持续地由触控单元300输入手势引擎模块304。由图3a可知，使用者在时间点t0开始产生二触控点，而在时间点t3将二触控点移离开触控式屏幕。

为了要确定使用者的手势类型以及作用方式，手势引擎模块304需要利用时间点t0至时间点t1的时间周期T1来进行判断进而于时间点t1产生第一次的放大手势事件至应用模块310。于第一次放大手势事件产生后，需要T2时间周期来持续进行判断并产生相同型态的放大手势事件，也就是会在t2、t3点持续产生第二次放大手势事件以及第三次放大手势事件至应用模块310。而应用模块310即根据第一次放大手势事件、第二次放大手势事件、第三次放大手势事件来放大工作区域的内容。

经过实际的统计，T1时间周期约为1.3秒而T2周期约为0.7秒。由于许多支持手势的应用模块在收到一定的手势事件数量或累积到一定的手势变化量后，才会以不连贯的方式呈现手势效果。因此，如图3b所示，使用者很可能会观察到呈现的影像直接从时间点t0变化至时间点t 3，期间并没有平顺的放大效果。而使用者会认为此应用模块的操作反应不佳，并造成使用者的困扰。

发明内容

本发明提出一种手势处理方法，搭配触控式屏幕，此方法包括下列步骤：接受位置信号；传递位置信号至第一手势引擎模块与一第二手势引擎模块；产生上层影像；判断第一手势事件是否出现以调整上述上层影像，其中，当上述第一手势事件尚未出现，以多个第二手势事件来调整上述上层影像；当上述第一手势事件出现后，以上述第一手势事件来调整上述上层影像；当上述第一手势事件停止时，产生手势结束事件；以及，移除上述上层影像。

本发明还提出一种具有触控式屏幕的电脑***，包括：触控单元，根据触控点来产生位置信号；第一手势引擎模块，接收上述位置信号产生第一手势事件；第二手势引擎模块，接收上述位置信号产生多个第二手势事件；应用模块，具有工作区域内容；以及，手势挂勾单元，撷取上述工作区域内容以产生上层影像；其中，上述手势挂勾单元判断上述第一手势事件是否出现以调整上述上层影像，当上述第一手势事件尚未出现，以多个第二手势事件来调整上述上层影像；当上述第一手势事件出现后，以上述第一手势事件来调整上述上层影像，以及当上述第一手势事件停止时，产生手势结束事件，移除上述上层影像。

综上所述，本发明于第一手势引擎模块产生第一手势事件之前，即开始进行上层影像的手势调整。因此，使用者可以感觉影像的变化平顺，且电脑***反应较佳。

为了对本发明的上述及其他方面有更佳的了解，下文特举较佳实施例，并配合所附图式，作详细说明如下。

附图说明

图1a与图1b所示为已知电脑***中利用手势在触控式屏幕上进行放大动作的示意图。

图2所示为已知具触控式屏幕的电脑***中触控信号的处理架构示意图。

图3a与图3b所示为已知的使用者利用二触控点来进行放大的动作的二个触控点轨迹以及工作区域示意图。

图4所示为本发明一实施例电脑***中触控信号的处理架构。

图5a、图5b与图5c所示为利用本发明一实施例电脑***中触控信号的处理架构进行放大动作的示意图。

图6所示为本发明一实施例触控信号的处理架构的粗略动作流程图。

图7所示为本发明一实施例触控信号的处理架构的详细动作流程图。

具体实施方式

由于许多支持手势的应用模块在收到一定的手势事件数量或累积到一定的手势变化量后，才会以不连贯的方式进行缩放、旋转、平移的处理。因此，本发明的触控信号的处理架构中利用手势挂勾单元(gesture hook unit)，在使用者欲进行放大、缩小、旋转、移动手势时，将应用模块的影像先撷取(capture)下来，并作为上层影像(top-1ayer image)并覆盖于应用模块的工作区域上的内容。而根据使用者的手势来实时调整上层影像的放大、缩小、旋转、移动动作。接着，当使用者触控点移离开触控式屏幕后，并等待应用模块将实际的工作区域内容完成放大、缩小、旋转、移动动作后，手势挂勾单元再将上层影像移除，使得触控式屏幕呈现工作区域被手势作用后的实际内容。

请参照图4，其所示为本发明电脑***中触控信号的处理架构。此架构包括触控单元700、过滤单元(filtering unit)710、第一手势引擎模块722、第二手势引擎模块725、手势挂勾单元730、应用模块740。而触控单元700中包括触控式屏幕701及驱动模块702。

其中，过滤单元710接收触控单元700输出的位置信号，并将位置信号同时传递至第一手势引擎模块722与第二手势引擎模块725。由于第一手势引擎模块722与图2的手势引擎模块同由操作***所提供，因此，其产生第一手势事件的间隔会较长。而第二手势引擎模块725可快速地判断位置信号并产生第二手势事件。而第一手势引擎模块722与第二手势引擎模块725产生的第一手势事件与第二手势事件皆经由应用程序介面(API)320传递至手势挂勾单元730。

根据本发明的实施例，当使用者欲进行放大、缩小、旋转、移动动作时，手势挂勾单元730会将应用模块的影像先撷取(capture)下来，并作为上层影像(top-layer image)并覆盖于应用模块740的工作区域(work space)的内容。

由于第一手势引擎模块722产生第一个第一手势事件的时间周期(T1)很长，本发明即设计第二手势引擎模块725快速判断位置信号并持续传递多个第二手势事件至手势挂勾单元730。也就是说，在第一手势引擎模块722产生第一次的第一手势事件之前的时间周期，手势挂勾单元730根据第二手势引擎模块725产生的多个第二手势事件来对上层影像进行放大、缩小、旋转、移动动作。因此，使用者可在上层影像上看到影像随着使用者的手势平顺地动作。

再者，当手势挂勾单元730接收到第一手势引擎模块722产生的第一次第一手势事件时，即通知第二手势引擎模块725停止产生第二手势事件。此后，手势挂勾单元730根据第一手势引擎模块722的多个第一手势事件来对上层影像进行放大、缩小、旋转、移动动作。因此，使用者也可在上层影像上看到影像随着使用者的手势平顺地动作。

当使用者将触控点移开触控式屏幕时，第一手势引擎模块722产生最后一次的第一手势事件至手势挂勾单元730。此时，手势挂勾单元730根据接收到的手势结束事件，使得应用模块740根据手势从起始到结束的手势变化量进行实际工作区域内容的一次放大、缩小、旋转、或移动动作。

当应用模块740根据手势结束事件放大、缩小、旋转、移动动作完成后，手势挂勾单元730即将上层影像直接移除，显示出实际工作区域内容。当然，由于上层影像移除的速度很快，使用者无法察觉，并认为手势很平顺的在动作中。

请参照图5a、图5b、图5c，其所示为利用本发明电脑***中触控信号的处理架构对应用模块的工作区域进行放大动作的示意图。如图5a所示，其为使用者利用二触控点来进行放大的动作的二个触控点轨迹示意图。由第5a图可知，使用者在时间点t0开始产生二触控点，而在时间点t3将二触控点移离开触控式屏幕。

再者，二个触控点的轨迹所对应的第一位置信号810与第二位置信号820会持续地由触控单元700输入过滤单元710，而过滤单元710将第一位置信号810与第二位置信号820传递至第一手势引擎模块722与第二手势引擎模块725。

由图5a可知，第一手势引擎模块722由操作***所提供，产生第一放大手势事件(饼图案)的时间间隔较长，会在时间点t1、t2、t3产生第一放大手势事件至手势挂勾单元730。再者，由于第二手势引擎模块725可快速地判断手势类型与作用方式，因此在时间点t0至t1之间的时间，可产生多个第二放大手势事件(三角形图案)至手势挂勾单元730。

如图5b所示，其为手势挂勾单元730撷取应用模块740的上层影像示意图。于时间点t0至时间点t1之间的影像变化由手势挂勾单元730接收第二手势引擎模块725所产生的第二放大手势事件所对应的变化。由于第二放大手势事件快速地产生，因此撷取上层影像与进行缩放的动作可快速反应。

于时间点t1后，第一手势引擎模块722开始产生第一放大手势事件，此时手势挂勾单元730通知第二手势引擎模块725停止产生第二放大手势事件。而时间点t 1至时间点t3之间的影像变化由手势挂勾单元730接收第一手势引擎模块722所产生的第一放大手势事件所对应的变化。

因此，由图5b所示的上层影像可知，放大影像的动作将更为平顺。再者，在放大动作的过程，使用者仅能够看到覆盖在工作区域上的上层影像，因此实际上使用者并不易察觉。

如图5c所示，其为应用模块740实际工作区域呈现的影像示意图。由于实际的工作区域内容已经被上层影像所覆盖，因此使用者无法看见其内容。

根据本发明的实施例，手势挂勾单元730会拦截第二手势事件以及第一手势事件并据以调整上层影像。所以应用模块740在使用者进行放大动作的过程中并无法接收到第一手势事件以及第二手势事件，因此在时间点t3之前实际工作区域内容皆未有任何的改变。

于时间点t3时，由于手势挂勾单元730已确定使用者的触控点已经消失，因此手势挂勾单元730会据以产生一个手势结束事件至应用模块740。而应用模块740即根据上述手势结束事件直接放大实际工作区域内容。

当手势挂勾单元730确认应用模块740已经完成工作区域内容调整后，手势挂勾单元730即移除上层影像，而使用者即可看到影像质量以及分辨率较佳的实际工作区域内容。并且完成此次放大动作。

上述的说明是以放大动作为例，缩小动作、旋转动作、移动动作也是利用相同方式来运作，因此不再赘述。

请参照图6，其所示为本发明触控信号的处理架构之粗略动作流程图。首先，过滤单元710接收位置信号并传递至第一手势引擎模块722与第二手势引擎模块725(步骤S850)。而手势挂勾单元730亦产生上层影像(步骤S852)。

接着，手势挂勾单元730判断第一手势事件出现与否并且调整上层影像(步骤S854)。也就是说，当第一手势事件尚未出现前，手势挂勾单元730以多个第二手势事件来调整上层影像；当第一手势事件出现后，手势挂勾单元730以第一手势事件来调整上述上层影像。

当第一手势事件停止时，手势挂勾单元730产生手势结束事件并移除上层影像(步骤S856)。

请参照图7，其所示为本发明触控信号的处理架构的详细动作流程图。当使用者在应用模块的工作区域上产生触控点并使得触控单元产生相对应的位置信号(步骤S910)。基本上，当使用者在进行移动动作时，会有一个触控点产生；当使用者在进行放大、缩小、旋转动作时，会有二个触控点产生。

接着，过滤单元将位置信号传递第一手势引擎模块与第二手势引擎模块(步骤S912)。而第一手势引擎模块与第二手势引擎模块即可根据位置信号来判断使用者的手势。由于第一手势引擎模块由操作***所提供，所以产生第一手势事件的时间较长，而第二手势引擎模块可快速的产生第二手势事件。因此，当过滤单元接收到第二手势事件时，即产生上层影像(S914)。

接着，手势挂勾单元需判断是否接收到第一手势引擎模块产生的第一手势事件(步骤S916)。当手势挂勾单元尚未接收到第一手势事件之前，手势挂勾单元会根据第二手势事件调整上层影像且覆盖于应用模块的工作区域的内容(步骤S918)。

当手势挂勾单元接收到第一手势事件后，手势挂勾单元通知第二手势引擎模块停止产生第二手势事件(步骤S920)。并且，手势挂勾单元根据第一手势事件调整上层影像且覆盖于应用模块的工作区域的内容(步骤S922)。

接着，手势挂勾单元需判断第一手势引擎模块是否停止产生第一手势事件(步骤S924)。于第一手势引擎模块尚未停止产生第一手势事件之前，手势挂勾单元根据第一手势事件调整上层影像且覆盖于应用模块的工作区域的内容(步骤S922)。反之，当确认第一手势引擎模块停止产生第一手势事件后，手势挂勾单元产生手势结束事件至应用模块(步骤S926)，使得应用模块根据手势从起始到结束的手势变化量来调整实际工作区域内容。

接着，手势挂勾单元判断实际工作区域内容是否调整完成(步骤S928)。于尚未完成之前，继续进行步骤S928的判断动作。当手势挂勾单元确认实际工作区域内容已经调整完成后，手势挂勾单元移除上层影像(步骤S930)，并完成此次手势控制的动作。

由以上的说明可知，本发明在第一手势引擎模块产生第一手势事件之前，即开始进行上层影像的手势调整。因此，使用者可以感觉影像的变化平顺，且电脑***反应较佳。

综上所述，虽然本发明已以较佳实施例揭露如上，然其并非用以限定本发明。任何熟习此技艺者，在不脱离本发明的精神和范围内，当可作各种更动与润饰，因此本发明的保护范围当视权利要求书所界定者为准。

Claims (10)

1.一种手势处理方法，搭配触控式屏幕，其特征在于，上述方法包括下列步骤：

接受位置信号；

传递上述位置信号至第一手势引擎模块与第二手势引擎模块；

产生上层影像；

判断第一手势事件是否出现以调整上述上层影像，其中，当上述第一手势事件尚未出现，以多个第二手势事件来调整上述上层影像；当上述第一手势事件出现后，以上述第一手势事件来调整上述上层影像；

当上述第一手势事件停止时，产生手势结束事件；以及

移除上述上层影像。

2.根据权利要求1所述的手势处理方法，其特征在于，其中上述第一手势事件与上述多个第二手势事件包括缩放手势事件、旋转手势事件、平移手势事件。

3.根据权利要求1所述的手势处理方法，其特征在于，其中上述上层影像是撷取上述触控式屏幕上的工作区域内容所产生。

4.根据权利要求1所述的手势处理方法，其特征在于，其中上述第一手势事件是由上述第一手势引擎模块所产生，且上述多个第二手势事件是由上述手势引擎模块所产生。

5.根据权利要求1所述的手势处理方法，其特征在于，其中当上述上层影像调整后，覆盖于上述工作区域内容上。

6.根据权利要求1所述的手势处理方法，其特征在于，其中上述手势结束事件是由上述第一手势引擎模块停止产生上述第一手势事件产生。

7.一种具有触控式屏幕的电脑***，其特征在于，包括：

触控单元，根据触控点来产生位置信号；

第一手势引擎模块，接收上述位置信号产生第一手势事件；

第二手势引擎模块，接收上述位置信号产生多个第二手势事件；

应用模块，具有工作区域内容；以及

手势挂勾单元，撷取上述工作区域内容以产生上层影像；

其中，上述手势挂勾单元判断上述第一手势事件是否出现以调整上述上层影像，当上述第一手势事件尚未出现，以上述多个第二手势事件来调整上述上层影像；当上述第一手势事件出现后，以上述第一手势事件来调整上述上层影像，以及当上述第一手势事件停止时，产生手势结束事件，移除上述上层影像。

8.根据权利要求7所述的具有触控式屏幕的电脑***，其特征在于，其中上述第一手势事件与上述多个第二手势事件包括缩放手势事件、旋转手势事件、平移手势事件。

9.根据权利要求7所述的具有触控式屏幕的电脑***，其特征在于，还包括过滤单元接受上述触控单元产生的上述位置信号，并将上述位置信号传递至上述第一手势引擎模块与上述第二手势引擎模块。

10.根据权利要求7所述的具有触控式屏幕的电脑***，其特征在于，其中上述手势结束事件是由上述第一手势引擎模块停止产生上述第一手势事件产生。

Images