CN104407692B - 基于超声波的全息图像交互式显示方法、控制方法及*** - Google Patents
基于超声波的全息图像交互式显示方法、控制方法及*** Download PDFInfo
- Publication number
- CN104407692B CN104407692B CN201410526303.7A CN201410526303A CN104407692B CN 104407692 B CN104407692 B CN 104407692B CN 201410526303 A CN201410526303 A CN 201410526303A CN 104407692 B CN104407692 B CN 104407692B
- Authority
- CN
- China
- Prior art keywords
- target object
- axis
- ultrasonic detection
- detection device
- dimensions
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
Abstract
本发明公开了一种基于超声波的全息图像交互式显示方法、控制方法及装置，解决了现有技术存在的只能在屏幕平面上进行操作的问题。该交互式显示方法包括：控制超声波检测装置扫描三维空间以确定目标物体；再确定目标物体的第一位置以及在一显示区域的第二位置显示对应于所述目标物体的可视图像。所述控制方法包括控制超声波检测装置扫描三维空间以确定目标物体手势操作；确定所述手势以及执行所述手势对应的控制操作。装置包括用于确定目标物体的超声波检测单元、用于确定目标物体第一位置的位置确定单元以及用于控制显示区域显示可视图像的显示控制单元。本发明能够依据使用者在显示屏幕前的三维空间中进行的手势操作，实现三维立体交互操作。
Description
技术领域
本发明涉及用户应用技术领域，特别是涉及一种基于超声波的全息图像交互式显示方法、控制方法及***。
背景技术
用户交互界面(User Interface，UI)设计是指对软件的人机交互、操作逻辑、界面美观的整体设计。在人和机器互动获取信息、体验的过程中，有一个媒介，即可视化的人机交互界面，以及相应于该人机交互界面的交互设备及方法。举例来讲，触摸屏手机的出现把触摸交互方式带给了广大消费大众。与此同时，传统鼠标、键盘的交互界面迅速转向了适应于触摸交互方式的交互界面。用户可以通过触摸屏点击或拖动屏幕上显示的图标，以进行相应的交互操作。
然而，现有的触摸屏中，无论是电容式触摸屏或电阻式触摸屏，都会在液晶显示(liquid crystal display，LCD)面板前再增加一片触控玻璃或薄膜，因而会增加显示屏幕的厚度及重量。同时，当消费者通过手指触碰显示屏幕以控制电子装置时，容易造成装置本身的晃动，并且显示屏幕与消费者之间有一定的距离及角度。此外，以手指对显示屏幕直接进行触碰控制，容易导致指纹残留在显示屏幕的问题。进一步地，通过触摸操作的平面交互界面中内容的丰富程度受到较大限制，通过移动光标到某按键上并停留一段时间的方式进行确认选择，这种操作只能进行一种确认或进入的操作，交互的丰富性受到限制，此外用户感觉不够自然，交互操作时感受到拘束。
现在出现的全息(Holography)显示技术，全息可以理解为三维显示物体和画面，即展示一个物体全部视角的全部画面的图像。全息图像技术包括利用特殊的技术手段记录并再现一个物体全部视角的全部画面的图像，从而使人眼产生和实际环境完全感觉一样的视觉效果。因此，若能出现一种脱离触摸屏操作而利用(全息的)三维立体图像进行交互操作的方式将大大提升用户的操作感受。
发明内容
本发明主要解决的技术问题是提供一种实现全息图像显示的交互式显示方法、控制方法及装置，可依据使用者在显示屏幕前的三维空间中进行的手势操作，提供对应手势的全息图像，实现三维立体交互操作。
为解决上述技术问题，本发明采用的一个技术方案是：提供一种基于超声波的全息图像交互式显示方法。该基于超声波的全息图像交互式显示方法包括：控制超声波检测装置扫描一三维空间以确定位于所述三维空间的目标物体。根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置；其中，所述目标物体在所述三维空间中的角度以所述超声波检测装置为球心的球形空间为参考坐标系确定。以及在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
进一步地，所述控制超声波检测装置扫描一三维空间以确定位于所述三维空间的目标物体的步骤具体为：持续地调整所述超声波检测装置以改变所述超声波检测装置发出的超声波的方向，并当所述超声波检测装置接收到被所述目标物体反射的超声波时确定检测到所述目标物体。
进一步地，所述根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置的步骤包括：根据所述超声波检测装置发出超声波至接收到反射回的超声波所经历的时间计算所述超声波检测装置与所述目标物体之间的距离L。确定所述超声波检测装置与所述目标物体连线的角度(θ，)以得到所述目标物体在所述三维空间中的角度；其中，θ为所述超声波检测装置和所述目标物体的连线与X轴、Y轴所在平面的夹角，为所述超声波检测装置和所述目标物体的连线在X轴、Y轴所在平面的投影与X轴或Y轴的夹角。以及根据所述角度(θ，)与所述距离L计算X轴、Y轴、Z轴的坐标以确定所述目标物体的位置。
进一步地，所述根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置的步骤之后，还包括：根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定。以及执行所述手势对应的控制操作。
进一步地，所述根据所述目标物体的位置及其移动轨迹确定对应的手势的步骤之后，还包括：根据所述手势在所述三维空间中的位置在所述显示区域中相对应的位置上显示一手势图标。
进一步地，所述根据所述目标物体的位置及其移动轨迹确定对应的手势的步骤之后，还包括：在所述显示区域的一个或多个子显示区域中显示物件，并定义各所述子显示区域中用以感应所述手势的感应区域。判断所述手势在所述显示区域中对应的手势区域是否在所述感应区域内，以确定是否依照所述手势操作控制所述显示区域中显示的物件。
进一步地，所述在一显示区域的第二位置显示对应于所述目标物体的可视图像的步骤具体为：在所述显示区域的第二位置显示对应于所述目标物体的全息图像。
为解决上述技术问题，本发明采用的另一个技术方案是：提供一种基于超声波的全息图像交互式控制方法。该基于超声波的全息图像交互式控制方法包括：控制超声波检测装置扫描一三维空间以确定在所述三维空间中一目标物体进行的手势操作。根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述手势。以及执行所述手势对应的控制操作。
为解决上述技术问题，本发明采用的另一个技术方案是：提供一种基于超声波的全息图像交互式显示装置。该显示装置包括：超声波检测单元，用于扫描一三维空间以确定位于所述三维空间的目标物体；位置确定单元，用于根据所述目标物体在所述三维空间中的角度以及所述超声波检测单元与所述目标物体之间的距离确定所述目标物体的第一位置；其中，所述目标物体在所述三维空间中的角度以所述超声波检测单元为球心的球形空间为参考坐标系确定；以及显示控制单元，用于控制所述显示单元在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
进一步地，所述装置还包括角度调整单元，用于持续地调整所述超声波检测单元以改变所述超声波检测单元发出超声波的方向。所述超声波检测单元接收到被所述目标物体反射的超声波时确定检测到所述目标物体；所述位置确定单元用于：根据所述超声波检测单元发出超声波至接收到反射回的超声波所经历的时间计算所述超声波检测单元与所述目标物体之间的距离L；确定所述超声波检测单元与所述目标物体连线的角度(θ，)以得到所述目标物体在所述三维空间中的角度；其中，θ为所述超声波检测单元和所述目标物体的连线与X轴、Y轴所在平面的夹角，为所述超声波检测单元和所述目标物体的连线在X轴、Y轴所在平面的投影与X轴的夹角；以及根据所述角度与所述距离L计算X轴、Y轴、Z轴的坐标以确定所述目标物体的位置。
本发明的有益效果是：区别于现有技术的情况，本发明可以依据使用者在显示屏幕前的三维空间中进行的手势操作，实现三维立体交互操作。由于是在屏幕前的三维空间内进行操作，不用触摸到显示屏幕，因而不会造成装置本身的晃动，同时能够避免指纹残留在显示屏幕上。此外，用户在进行交互操作时，移动，按压等的操作都可以在一个三维空间内进行，而不是仅停留在一个平面内，这样的方式能使用户感觉自然，交互丰富性得到提高。
附图说明
图1-1是本发明第一实施方式的一种基于超声波的全息图像交互式显示方法的流程示意图；
图1-2是本发明第一实施方式的一种基于超声波的全息图像交互式显示方法的原理示意图；
图2-1是本发明第二实施方式的一种基于超声波的全息图像交互式显示方法的流程示意图；
图2-2是本发明第二实施方式的一种基于超声波的全息图像交互式显示方法的原理示意图；
图3-1是本发明第三实施方式的一种基于超声波的全息图像交互式显示方法的流程示意图；
图3-2本发明第三实施方式的一种基于超声波的全息图像交互式显示方法的原理示意图；
图3-3为本发明第三实施方式中确定目标物体的第一位置的方法流程示意图；
图4-1是本发明第四实施方式的一种基于超声波的全息图像交互式显示方法的流程示意图；
图4-2是本发明第四实施方式的一种基于超声波的全息图像交互式显示方法中按压手势时的原理示意图；
图4-3是本发明第四实施方式的一种基于超声波的全息图像交互式显示方法中下拉手势时的原理示意图；
图4-4为本发明第四实施方式中确定目标物体的第一位置的方法流程示意图；
图5-1是本发明第五实施方式的一种基于超声波的全息图像交互式显示方法的流程示意图；
图5-2是本发明第五实施方式的一种基于超声波的全息图像交互式显示方法中按压前的原理示意图；
图5-3是本发明第五实施方式的一种基于超声波的全息图像交互式显示方法中按压后的原理示意图；
图6-1是本发明第六实施方式的一种基于超声波的全息图像交互式显示方法的流程示意图；
图6-2是本发明第六实施方式的一种基于超声波的全息图像交互式显示方法中手指在感应区域内的原理示意图；
图6-3是本发明第六实施方式的一种基于超声波的全息图像交互式显示方法中手指不在感应区域内的原理示意图；
图7-1是本发明第七实施的一种基于超声波的全息图像交互式显示方法的流程示意图；
图7-2是本发明的一种基于超声波的全息图像交互式显示方法的第七实施方式俯视时第一状态的示意图；
图7-3是本发明的一种基于超声波的全息图像交互式显示方法的第七实施方式俯视时第二状态的示意图；
图8是本发明的一种基于超声波的全息图像交互式控制方法的一个实施例的流程示意图；
图9是本发明第一实施方式的一种基于超声波的全息图像交互式显示装置的结构示意图；
图10是本发明第二实施方式的一种基于超声波的全息图像交互式显示装置的结构示意图；
图11是本发明第三实施方式的一种基于超声波的全息图像交互式显示装置的结构示意图；
图12是本发明第四实施方式的一种基于超声波的全息图像交互式显示装置的结构示意图。
其中，10、超声波检测装置；101、超声波发射器；102、超声波接收器；11、三维空间；12、显示区域；13、手指；14(14')、可视图像；15、发射的超声波；20、反射的超声波；61、按键一；62、按键二；63、按键三；
元件符号：
超声波检测单元 91、102、112、122
位置确定单元 92、103、113、123
显示控制单元 93、104、115、124
显示单元 94、105、117、125
角度调整单元 101、111
手势确定单元 114
功能执行单元 116
超声波发射区域调整单元 121
具体实施方式
为详细说明本发明的技术内容、构造特征、所实现目的及效果，以下结合附图和实施例对本发明进行详细说明。
请参阅图1-1，为本发明的一种基于超声波的全息图像交互式显示方法的第一实施方式的流程示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S10，控制超声波检测装置扫描一三维空间以确定位于所述三维空间的目标物体。
S11，根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置。
其中，所述目标物体在所述三维空间中的角度以所述超声波检测装置为球心的球形空间为参考坐标系确定。
S12，在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
如图1-2所示，当手指13处于该三维空间11中时，超声波检测装置10在扫描该三维空间11时，超声波检测装置10发出的超声波遇到手指13，其传播会发生变化，确定该发生变化的点在三维空间11中的角度和超声波检测装置10与手指13之间的距离，通过该角度和距离的数值可以确定该点的三维坐标，从而确定该手指13所在的第一位置。在显示区域12中的第二位置中，映射有该手指13对应的可视图像14。
进一步地，在所述显示区域的第二位置显示对应于该目标物体的可视图像可以为该目标物体对应的全息图像。
请参阅图2-1，为本发明第二实施方式的一种基于超声波的全息图像交互式显示方法的流程示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S20，控制超声波检测装置扫描一三维空间以确定位于所述三维空间的目标物体。超声波检测装置包括超声波发射器和超声波接收器。
本实施例中，目标物体的确定步骤如下：
持续地调整所述超声波检测装置以改变所述超声波检测装置发出的超声波的方向，并当所述超声波检测装置接收到被所述目标物体反射的超声波时确定检测到所述目标物体。
S21，根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置。
其中，所述目标物体在所述三维空间中的角度以所述超声波检测装置为球心的球形空间为参考坐标系确定。
S22，在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
如图2-2所示，本实施例中，超声波检测装置10包括超声波发射器101和超声波接收器102，超声波的传播发生变化是指超声波发射器101发出的超声波遇到手指13之后，被手指13反射回来，反射回来的超声波被超声波接收器102接收。超声波检测装置10在一三维空间11进行扫描，超声波发射器101发出的超声波的方向在持续地改变，手指13进入该三维空间11后，超声波发射到该手指13所在的位置时，超声波被手指13反射回去，超声波接收器102接收到该反射的超声波20，从而确定检测到了手指13。通过被反射回去的超声波来确定手指13在三维空间11中的角度和超声波检测装置10与手指13之间的距离，通过该角度和距离的数值可以确定该点的三维坐标，从而确定该手指13所在的第一位置。在显示区域12中的第二位置中，映射有该手指13对应的可视图像14。
请参阅图3-1，为本发明第三实施方式的一种基于超声波的全息图像交互式显示方法的流程示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S30，控制超声波检测装置扫描一三维空间以确定位于所述三维空间的目标物体。
本实施例中，目标物体的确定步骤如下：
持续地调整所述超声波检测装置以改变所述超声波检测装置发出的超声波的方向，并当所述超声波检测装置接收到被所述目标物体反射的超声波时确定检测到所述目标物体。
S31，根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置。
其中，所述目标物体在所述三维空间中的角度以所述超声波检测装置为球心的球形空间为参考坐标系确定。
请参阅图3-3，确定所述目标物体的第一位置的步骤包括：
S310，根据所述超声波检测装置发出超声波至接收到反射回的超声波所经历的时间计算所述超声波检测装置与所述目标物体之间的距离L。
S311，确定所述超声波检测装置与所述目标物体连线的角度(θ，)以得到所述目标物体在所述三维空间中的角度；其中，θ为所述超声波检测装置和所述目标物体的连线与X轴、Y轴所在平面的夹角，为所述超声波检测装置和所述目标物体的连线在X轴、Y轴所在平面的投影与X轴或Y轴的夹角。
S312，根据所述角度(θ，)与所述距离L计算X轴、Y轴、Z轴的坐标以确定所述目标物体的位置。
S32，在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
如图3-2所示，本实施例中，超声波检测装置持续地调整其发出的超声波的方向了，手指进入超声波检测装置扫描的三维空间之后，会将从手指所在位置经过的超声波反射回去，从而使超声波检测装置确定该处有阻挡物，然后，通过该超声波发出到接收反射回的超声波的时间计算出超声波检测装置到阻挡物之间的距离L。再根据超声波遇到手指时的方向确定出超声波检测装置和手指的连线与X轴、Y轴所在平面的夹角θ，以及超声波检测装置和手指的连线在X轴、Y轴所在平面的投影与X轴的夹角手指到X轴、Y轴所在平面的距离h可以通过关系式计算出，其中，h即为手指在Z轴上的坐标。超声波检测装置到手指之间的连线在X轴、Y轴所在平面的投影的长度L′可以根据关系式L′＝L×cosθ计算出。其中，超声波检测装置在X轴和Y轴所形成的平面上的坐标是已知的，为(x0，y0，z0)，因此通过可以计算出手指在X轴和Y轴所形成的平面上的投影点S’在X轴上的坐标，通过y′＝y0+可以计算出投影点S’在Y轴上的坐标。由此，根据x＝x′、y＝y′、z＝h可以确定手指在三维空间中的位置坐标(x，y，z)。确定手指的位置之后，显示区域的第二位置处显示出对应于手指的可视图像，如一个箭头或者手的形状的图标等，该图像是通过手指的空间位置(x，y，z)沿着Y轴映射到显示区域。
请参阅图4-1，为本发明第四实施方式的一种基于超声波的全息图像交互式显示方法的流程示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S40，控制超声波检测装置扫描一三维空间以确定位于所述三维空间的目标物体。
S41，根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置。
其中，所述目标物体在所述三维空间中的角度以所述超声波检测装置为球心的球形空间为参考坐标系确定。
请同时参阅图4-4，确定所述目标物体的第一位置的步骤包括：
S410，根据所述超声波检测装置发出超声波至接收到反射回的超声波所经历的时间计算所述超声波检测装置与所述目标物体之间的距离L。
S411，确定所述超声波检测装置与所述目标物体连线的角度(θ，)以得到所述目标物体在所述三维空间中的角度；其中，θ为所述超声波检测装置和所述目标物体的连线与X轴、Y轴所在平面的夹角，为所述超声波检测装置和所述目标物体的连线在X轴、Y轴所在平面的投影与X轴或Y轴的夹角。
S412，根据所述角度(θ，)与所述距离L计算X轴、Y轴、Z轴的坐标以确定所述目标物体的位置。
S42，根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定。
S43，执行所述手势对应的控制操作。
如图4-2所示，本实施例中，手指沿着Y轴向靠近显示区域的方向移动，请参阅图4-1，即相当于按压的手势，其移动轨迹是平行于Y轴的直线，由于超声波检测装置在持续改变其发出的超声波的方向，因而其能检测出手指在该预定时间内移动时所在的多个位置的坐标，如图4-1中的点A(x，ya，z)、点B(x，yb，z)和点C(x，yc，z)，再根据点A点B和点C来确定出手的移动轨迹。确定出的移动轨迹是平行于Y轴的直线，从而判断出手指在进行按压的手势，从而执行按压对应的控制操作。
请参阅图4-3，手指在进行下拉的手势，在预定时间内，手指沿着Z轴向下移动。超声波检测装置检测出手指在该预定时间内的n个位置的坐标分别是点A(x，y，z1)，点B(x，y，z2)，点C(x，y，z3)，……，点N(x，y，zn)，由此可以确定手指移动的轨迹是平行于Z轴的直线，从而判断出手指的手势是下拉手势，在显示区域则进行下拉对应的控制操作。
请参阅图5-1，为本发明第五实施方式的一种基于超声波的全息图像交互式显示方法的流程示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S50，控制超声波检测装置扫描一三维空间以确定位于所述三维空间11的目标物体。
S51，根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置。
其中，所述目标物体在所述三维空间中的角度以所述超声波检测装置为球心的球形空间为参考坐标系确定。
S52，根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定。
S53，根据所述手势在所述三维空间中的位置在所述显示区域中相对应的位置上显示一手势图标。
S54，执行所述手势对应的控制操作。
本实施例中，通过如同第四实施例的方法确定了手指13的手势之后，显示区域12中对应于手指13的位置处会显示手势图标，如图5-2中的手指13的可视图像14，在按压前可视图像14的手指为伸直状态，当手指13的动作为按压手势的时候，显示区域12中可视图像14的手指的图标也相应做按压的动作，如图5-3中的可视图像14′的手指为弯曲状态。手势图标的显示可以是多种，如本实施例中的图像状态的改变，或者颜色的改变、或者位置的改变等本领域中常用的显示方式。
请参阅图6-1，为本发明第六实施方式的一种基于超声波的全息图像交互式显示方法的流程示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S60，控制超声波检测装置扫描一三维空间以确定位于所述三维空间的目标物体。
S61，根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置。
其中，所述目标物体在所述三维空间中的角度以所述超声波检测装置为球心的球形空间为参考坐标系确定。
S62，根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定。
S63，在所述显示区域的一个或多个子显示区域中显示物件，并定义各所述子显示区域中用以感应所述手势的感应区域。
S64，判断所述手势在所述显示区域中对应的手势区域是否在所述感应区域内，以确定是否依照所述手势操作控制所述显示区域中显示的物件。
S65，执行所述手势对应的控制操作。
请参阅图6-2，确定手指13的轨迹线为按压手势，在所述显示区域12的一个或多个子显示区域12中显示物件，定义显示区域12中的按键一61、按键二62和按键三63作为该手势的感应区域，在做按压动作的时侯，手指13在显示区域12中对应的可视图像14落在该感应区域中时，如图6-1中，手指13在显示区域12中对应的可视图像14落在按键三63的区域中，按压手势完成后，会依照按压手势操作控制显示区域12中显示物件。如果手指13在显示区域12中对应的可视图像14′并没有在按键一61、按键二62和按键三63任何一个按键上，如图6-3所示，而是在其它非感应区域，则不会依照按压手势操作控制显示区域12中显示物件。
请参阅图7-1，为本发明第七实施的一种基于超声波的全息图像交互式显示方法的流程示意图。该实施方式示出的交互式显示方法的流程包括以下步骤：
S70，控制超声波检测装置扫描一三维空间以确定位于所述三维空间的目标物体。
本实施例中，目标物体的确定与上述实施例不同，其具体步骤如下：
首先，超声波检测装置发出的超声波是呈半球型分布，俯视或仰视的时候，超声波的分布呈圆形，并且超声波检测装置在发射超声波的时候分为若干个区域来发射，该若干个区域定义为第一级区域，当超声波遇到障碍物时，被障碍物反射，超声波检测装置接收到该反射回来的超声波，根据接收到的反射的超声波可以确定障碍物所在的第一级区域。
然后，其它未接收到反射超声波的第一级区域停止发出超声波，而接收到反射超声波的第一级区域则继续发出超声波，并且在该第一级区域内再分为若干个第二级区域。同样，在第二级区域中的一个区域会接收到反射的超声波。
接着，其它未接收到反射的超声波的第二级区域停止发出超声波，接收到反射超声波的第二级区域则继续发出超声波，并同时将该第二级区域再分为若干个第三级区域，……，通过多次细分超声波发出的区域，一步步缩小该区域，直到最终确定检测到目标物体和目标物体所在的位置与超声波检测装置的连线。
其中，下一级区域可以是超声波发出超声波的上一极区域平均分成的也可以是不平均分成的。本实施例中以手指的一个点N进行描述，如图7-2所示，在俯视图时，超声波的发射区域平均分为6个第一级区域，分别是区域A、区域B、区域C、区域D、区域E和区域F，当超声波检测装置发出的超声波遇到手指时，超声波被手指反射，超声波检测装置接收到该反射回来的超声波，接收到的反射超声波来自区域B，从而可以确定点N在区域B。然后，其它是第一级区域停止发出超声波，区域B再平均分为6个第二级区域发出超声波，如图7-3所示该6个第二级区域分别是区域a、区域b、区域c、区域d、区域e和区域f，超声波检测装置再根据接收到的反射超声波确定到手指所在位置为区域d。然后，其它的第二级区域停止发出超声波，区域d则再分成6个第三级区域，以此类推，通过多次划分区域，多次确认位置，直到最终确定检测到目标物体和目标物体所在的位置与超声波检测装置的连线。
S71，根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置。
其中，所述目标物体在所述三维空间中的角度以所述超声波检测装置为球心的球形空间为参考坐标系确定。
S72，在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
请参阅图8，为本发明的一种基于超声波的全息图像交互式控制方法的一个实施例的流程示意图，一种交互式控制方法，该方法包括以下步骤：
S80，控制超声波检测装置扫描一三维空间以确定在所述三维空间中一目标物体进行的手势操作。
请再参阅图5-3，控制超声波检测装置在三维空间中扫描，当手指在该三维空间内沿着Y轴方向移动时，超声波检测装置能检测到手指在三维空间中的多个位置，从而确定手指的移动轨迹，进而确定了手指的手势。
S81，根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述手势。
所述手势是通过手指的移动实现，确定手势需要先确定手指移动轨迹，手指的移动表现为在空间中的点的位置的变化。请再参阅图3-2，在一预定时间内，手指移动所经过的每个点的确定方法如下：
通过该超声波发出到接收反射回的超声波的时间计算出超声波检测装置到阻挡物之间的距离L。再根据超声波遇到手指时的方向确定出超声波检测装置和手指的连线与X轴、Y轴所在平面的夹角θ，以及超声波检测装置和手指的连线在X轴、Y轴所在平面的投影与X轴的夹角手指到X轴、Y轴所在平面的距离h可以通过关系式计算出，其中，h即为手指在Z轴上的坐标。超声波检测装置到手指之间的连线在X轴、Y轴所在平面的投影的长度L′可以根据关系式L′＝L×cosθ计算出。其中，超声波检测装置在X轴和Y轴所形成的平面上的坐标是已知的，为(x0，y0，z0)，因此通过可以计算出手指在X轴和Y轴所形成的平面上的投影点S’在X轴上的坐标，通过可以计算出投影点S’在Y轴上的坐标。由此，由x＝x′、y＝y′、z＝h可以确定手指在三维空间中的位置坐标(x，y，z)。确定手指的位置之后，显示区域的第二位置处显示出对应于手指的可视图像，如一个箭头或者手的形状的图标等，该图像是通过手指的空间位置(x，y，z)沿着Y轴映射到显示区域的。
确定好每个点的位置之后即可确定手指移动的轨迹线，具体如下：
请再参阅图4-3，手指在进行下拉的手势，在预定时间内，手指沿着Z轴向下移动。超声波检测装置检测出手指在该预定时间内的n个位置的坐标分别是点A(x，y，z1)，点B(x，y，z2)，点C(x，y，z3)，……，点N(x，y，zm)，由此可以确定手指移动的轨迹是平行于Z轴的直线，从而判断出手指的手势是下拉手势。
S82，执行所述手势对应的控制操作。判断出手势为下拉手势之后，开始执行下拉对应的控制操作。
请参阅图9，为发明第一实施方式的一种基于超声波的全息图像交互式显示装置的结构示意图，该交互式显示装置包括显示单元94、超声波检测单元91、位置确定单元92和显示控制单元93。
超声波检测单元91用于扫描一三维空间以确定位于所述三维空间的目标物体。
位置确定单元92用于根据所述目标物体在所述三维空间中的角度以及所述超声波检测单元91与所述目标物体之间的距离确定所述目标物体的第一位置。其中，所述目标物体在所述三维空间中的角度以所述超声波检测单元91为球心的球形空间为参考坐标系确定。
显示控制单元93用于控制所述显示单元94在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
本实施例中，当手指进入超声波检测单元91扫描的三维空间之后，经过手指所在位置超声波被手指反射，超声波检测单元91接收到反射回来的超声波之后，确定检测到手指。确定检测到手指之后，位置确定单元92则根据手指在三维空间中的角度和超声波检测单元91与手指之间的距离确定手指的第一位置。显示控制单元93则控制显示区域的第二位置处显示对应于手指的图像，如图1-2中的可视图像。
请参阅图10，为本发明第二实施方式的一种基于超声波的全息图像交互式显示装置的结构示意图，该交互式显示装置包括显示单元105、超声波检测单元102、位置确定单元103和显示控制单元104以及角度调整单元101。
角度调整单元101用于持续地调整所述超声波检测单元102以改变所述超声波检测单元102发出超声波的方向。
超声波检测单元102接收到被所述目标物体反射的超声波时确定检测到所述目标物体。
位置确定单元103用于根据所述超声波检测单元102发出超声波至接收到反射回的超声波所经历的时间计算所述超声波检测单元102与所述目标物体之间的距离L。
显示控制单元104用于控制所述显示单元105在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系。
本实施例中的角度调整单元101持续调整超声波检测单元102旋转，从而使得超声波的方向在不断改变。当手指进入超声波检测单元102扫描的三维空间之后，经过手指所在位置超声波被手指反射，超声波检测单元102接收到反射回来的超声波之后，确定检测到手指。
位置确定单元103确定三维空间中一点的位置的方法如下：
如图3-2，是三维空间中的点S的确定示意图，位置确定单元103根据超声波检测单元102发出超声波至接收到反射回的超声波所经历的时间计算所述超声波检测单元102与所述目标物体之间的距离L。
再根据超声波遇到手指时的方向确定出超声波检测装置和手指的连线与X轴、Y轴所在平面的夹角θ，以及超声波检测装置和手指的点S的连线在X轴、Y轴所在平面的投影与X轴的夹角
手指到X轴、Y轴所在平面的距离h可以通过关系式 计算出，其中，h即为手指在Z轴上的坐标。超声波检测装置到手指之间的连线在X轴、Y轴所在平面的投影的长度L′可以根据关系式L′＝L×cosθ计算出。其中，超声波检测装置在X轴和Y轴所形成的平面上的坐标是已知的，为(x0，y0，z0)，因此通过x′＝x0+可以计算出手指在X轴和Y轴所形成的平面上的投影点S’在X轴上的坐标，通过可以计算出投影点S’在Y轴上的坐标。由此，由x＝x′、y＝y′、z＝h可以确定手指在三维空间中的位置坐标(x，y，z)。确定手指的位置之后，显示区域的第二位置处显示出对应于手指的可视图像，如一个箭头或者手的形状的图标或者对应的全息图像等，该图像是通过手指的空间位置(x，y，z)沿着Y轴映射到显示区域的，如图2-2所示。
请参阅图11，为本发明第三实施方式的一种基于超声波的全息图像交互式显示装置的结构示意图，该交互式显示装置包括显示单元117、超声波检测单元112、位置确定单元113、显示控制单元115、角度调整单元111和手势确定单元114以及功能执行单元116。
所述超声波检测单元112、显示控制单元115、角度调整单元111的作用如上述第二实施例，位置确定单元113用于根据所述目标物体在所述三维空间中的角度以及所述超声波检测单元112与所述目标物体之间的距离确定所述目标物体的第一位置之外，还用于根据所述目标物体在一预定时间内的多个位置确定移动轨迹。
手势确定单元114，用于根据所述位置确定单元113确定的所述目标物体的位置及其移动轨迹确定对应的手势。
功能执行单元116，用于执行所述手势确定单元114确定的所述手势对应的控制操作。
在本实施例中，手指在进行下拉的手势，位置确定单元113确定手指在三维空间中的第一位置，并且根据手指在一预定时间内的多个位置确定手指的移动轨迹。如图4-3所示，在预定时间内，手指沿着Z轴向下移动。手势确定单元114确定了手指在该预定时间内的n个位置的坐标分别是(x，y，z1)，(x，y，z2)，(x，y，z3)，……，(x，y，zn)，因而可以确定出手指的移动轨迹是平行于Z轴的直线。手势确定单元114根据位置确定单元113确定的手指的位置和移动轨迹确认出手指的手势是下拉手势。显示控制单元115则在显示区域显示出对应于下拉手势的手势图标，该手势图标在显示区域中同样进行下拉动作。功能执行单元116则执行对应的下拉操作。
请参阅图12，为本发明第四实施方式的一种基于超声波的全息图像交互式显示装置的结构示意图，该交互式显示装置包括显示单元125、超声波检测单元122、位置确定单元123和显示控制单元124以及超声波发射区域调整单元121。所述显示单元125、超声波检测单元122、位置确定单元123和显示控制单元124的作用均与一种交互式显示装置的第二实施例相同，超声波发射区域调整单元121用于持续地调整所述超声波检测单元122以改变所述超声波检测单元122发出超声波的区域。发出超声波的区域的调整如下：
请再参阅图7-2和图7-3，在俯视方向，超声波的发射区域平均分为6个第一级区域，分别是区域A、区域B、区域C、区域D、区域E和区域F，当超声波检测装置发出的超声波遇到手指时，超声波被手指反射，超声波检测装置接收到该反射回来的超声波，接收到的反射超声波来自区域B，从而可以确定点N在区域B。然后，其它是第一级区域停止发出超声波，区域B再平均分为6个第二级区域发出超声波，如图7-3所示该6个第二级区域分别是区域a、区域b、区域c、区域d、区域e和区域f，超声波检测装置再根据接收到的反射超声波确定到手指所在位置为区域d。然后，其它的第二级区域停止发出超声波，区域d则再分成6个第三级区域，以此类推，通过多次划分区域，多次确认位置，直到最终确定检测到目标物体和目标物体所在的位置与超声波检测装置的连线。
上述实施例是以超声波检测装置来扫描三维空间检测目标物体，实际上还可以使用激光检测装置或者红外线检测装置等本领域技术人员常用的检测装置来替换。
以上所述仅为本发明的实施方式，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。
Claims (5)
1.一种基于超声波的全息图像交互式显示方法，其特征在于，所述方法包括：
控制超声波检测装置扫描一三维空间以确定位于所述三维空间的目标物体；
根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置；其中，所述目标物体在所述三维空间中的角度以所述超声波检测装置为球心的球形空间为参考坐标系确定；以及
在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系；
所述控制超声波检测装置扫描一三维空间以确定位于所述三维空间的目标物体的步骤具体为：
持续地调整所述超声波检测装置以改变所述超声波检测装置发出的超声波的方向，并当所述超声波检测装置接收到被所述目标物体反射的超声波时确定检测到所述目标物体；
所述根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置的步骤包括：
根据所述超声波检测装置发出超声波至接收到反射回的超声波所经历的时间计算所述超声波检测装置与所述目标物体之间的距离L；
确定所述超声波检测装置与所述目标物体连线的角度以得到所述目标物体在所述三维空间中的角度；其中，θ为所述超声波检测装置和所述目标物体的连线与X轴、Y轴所在平面的夹角，为所述超声波检测装置和所述目标物体的连线在X轴、Y轴所在平面的投影与X轴的夹角；以及
根据所述角度与所述距离L计算X轴、Y轴、Z轴的坐标以确定所述目标物体的位置；
所述根据所述角度与所述距离L计算X轴、Y轴、Z轴的坐标以确定所述目标物体的位置的步骤包括：
根据关系式计算得到所述目标物体到X轴、Y轴所在平面的距离，其中，h即为所述目标物体在Z轴上的坐标；
根据关系式L′＝L×cosθ计算得到所述超声波检测装置到所述目标物体之间的连线在X轴、Y轴所在平面的投影的长度L′；
根据关系式计算得到所述目标物体在X轴和Y轴所形成的投影点S′在X轴上的坐标，根据关系式 计算出所述投影点S′在Y轴上的坐标，其中，(x0，y0，z0)为所述超声波检测装置在X轴和Y轴所形成的平面上的坐标；
根据x＝x′、y＝y′、z＝h确定所述目标物体在三维空间中的位置坐标(x、y、z)；
所述根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置的步骤之后，还包括：
根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定；以及
执行所述手势对应的操作控制；
所述根据所述目标物体的位置及其移动轨迹确定对应的手势的步骤之后，还包括：
在所述显示区域的一个或多个子显示中显示物件，并定义各所述子显示区域中用以感应所述手势的感应区域；
判断所述手势在所述显示区域中对应的手势区域是否在所述感应区域内，以确定是否依照所述手势操作控制所述显示区域中显示的物件。
2.根据权利要求1所述的基于超声波的全息图像交互式显示方法，其特征在于，所述根据所述目标物体的位置及其移动轨迹确定对应的手势的步骤之后，还包括：
根据所述手势在所述三维空间中的位置在所述显示区域中相对应的位置上显示一手势图标。
3.根据权利要求1所述的基于超声波的全息图像交互式显示方法，其特征在于，所述在一显示区域的第二位置显示对应于所述目标物体的可视图像的步骤具体为：在所述显示区域的第二位置显示对应于所述目标物体的全息图像。
4.一种基于超声波的全息图像交互式控制方法，其特征在于，所述方法包括：
控制超声波检测装置扫描一三维空间以确定位于所述三维空间中的目标物体；
根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置；其中，所述目标物体在所述三维空间中的角度以所述超声波检测装置为球心的球形空间为参考坐标系确定；以及
在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系；
所述控制超声波检测装置扫描一三维空间以确定位于所述三维空间的目标物体的步骤具体为：
持续地调整所述超声波检测装置以改变所述超声波检测装置发出的超声波的方向，并当所述超声波检测装置接收到被所述目标物体反射的超声波时确定检测到所述目标物体；
所述根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置的步骤包括：根据所述超声波检测装置发出超声波至接收到反射回的超声波所经历的时间计算所述超声波检测装置与所述目标物体之间的距离L；
确定所述超声波检测装置与所述目标物体连线的角度以得到所述目标物体在所述三维空间中的角度；其中，θ为所述超声波检测装置和所述目标物体的连线与X轴、Y轴所在平面的夹角，为所述超声波检测装置和所述目标物体的连线在X轴、Y轴所在平面的投影与X轴的夹角；以及
根据所述角度与所述距离L计算X轴、Y轴、Z轴的坐标以确定所述目标物体的位置；
所述根据所述角度与所述距离L计算X轴、Y轴、Z轴的坐标以确定所述目标物体的位置的步骤包括：
根据关系式计算得到所述目标物体到X轴、Y轴所在平面的距离，其中，h即为所述目标物体在Z轴上的坐标；
根据关系式L′＝L×cosθ计算得到所述超声波检测装置到所述目标物体之间的连线在X轴、Y轴所在平面的投影的长度L′；
根据关系式计算得到所述目标物体在X轴和Y轴所形成的投影点S′在X轴上的坐标，根据关系式 计算出所述投影点S′在Y轴上的坐标，其中，(x0，y0，z0)为所述超声波检测装置在X轴和Y轴所形成的平面上的坐标；
根据x＝x′、y＝y′、z＝h确定所述目标物体在三维空间中的位置坐标(x、y、z)；
所述根据所述目标物体在所述三维空间中的角度以及所述超声波检测装置与所述目标物体之间的距离确定所述目标物体的第一位置的步骤之后，还包括：
根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定；以及
执行所述手势对应的操作控制；
所述根据所述目标物体的位置及其移动轨迹确定对应的手势的步骤之后，还包括：
在所述显示区域的一个或多个子显示中显示物件，并定义各所述子显示区域中用以感应所述手势的感应区域；
判断所述手势在所述显示区域中对应的手势区域是否在所述感应区域内，以确定是否依照所述手势操作控制所述显示区域中显示的物件。
5.一种基于超声波的全息图像交互式显示装置，包括显示单元，其特征在于，所述装置包括：
超声波检测单元，用于扫描一三维空间以确定位于所述三维空间的目标物体；
位置确定单元，用于根据所述目标物体在所述三维空间中的角度以及所述超声波检测单元与所述目标物体之间的距离确定所述目标物体的第一位置；其中，所述目标物体在所述三维空间中的角度以所述超声波检测单元为球心的球形空间为参考坐标系确定；以及
显示控制单元，用于控制所述显示单元在一显示区域的第二位置显示对应于所述目标物体的可视图像，并且所述第二位置与所述第一位置具有映射关系；
所述装置还包括角度调整单元，用于持续地调整所述超声波检测单元以改变所述超声波检测单元发出的超声波的方向；
所述超声波检测单元接收到被所述目标物体反射的超声波时检测到所述目标物体；
所述位置确定单元还用于：
根据所述超声波检测单元发出超声波至接收到反射回的超声波所经历的时间计算所述超声波检测单元与所述目标物体之间的距离L；
确定所述超声波检测单元与所述目标物体连线的角度以得到所述目标物体在所述三维空间中的角度；其中，θ为所述超声波检测单元和所述目标物体的连线与X轴、Y轴所在平面的夹角，为所述超声波检测单元和所述目标物体的连线在X轴、Y轴所在平面的投影与X轴的夹角；以及
根据所述角度与所述距离L计算X轴、Y轴、Z轴的坐标以确定所述目标物体的位置；
所述根据所述角度与所述距离L计算X轴、Y轴、Z轴的坐标以确定所述目标物体的位置的步骤包括：
根据关系式计算得到所述目标物体到X轴、Y轴所在平面的距离，其中，h即为所述目标物体在Z轴上的坐标；
根据关系式L′＝L×cosθ计算得到所述超声波检测单元到所述目标物体之间的连线在X轴、Y轴所在平面的投影的长度L′；
根据关系式计算得到所述目标物体在X轴和Y轴所形成的投影点S′在X轴上的坐标，根据关系式 计算出所述投影点S′在Y轴上的坐标，其中，(x0，y0，z0)为所述超声波检测单元在X轴和Y轴所形成的平面上的坐标；
根据x＝x′、y＝y′、z＝h确定所述目标物体在三维空间中的位置坐标(x、y、z)；
所述装置还包括手势确定单元，所述手势确定单元用于根据所述目标物体的位置及其移动轨迹确定对应的手势，所述移动轨迹根据所述目标物体在一预定时间内的多个位置确定；
所述装置还包括功能执行单元，所述功能执行单元用于执行所述手势对应的操作控制；
所述显示控制单元还用于在所述显示区域的一个或多个子显示中显示物件，并定义各所述子显示区域中用以感应所述手势的感应区域；判断所述手势在所述显示区域中对应的手势区域是否在所述感应区域内，以确定是否依照所述手势操作控制所述显示区域中显示的物件。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410526303.7A CN104407692B (zh) | 2014-09-30 | 2014-09-30 | 基于超声波的全息图像交互式显示方法、控制方法及*** |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410526303.7A CN104407692B (zh) | 2014-09-30 | 2014-09-30 | 基于超声波的全息图像交互式显示方法、控制方法及*** |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104407692A CN104407692A (zh) | 2015-03-11 |
| CN104407692B true CN104407692B (zh) | 2018-09-07 |
Family
ID=52645329
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410526303.7A Active CN104407692B (zh) | 2014-09-30 | 2014-09-30 | 基于超声波的全息图像交互式显示方法、控制方法及*** |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104407692B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106355165B (zh) * | 2016-09-30 | 2020-11-10 | 北京小米移动软件有限公司 | 指纹数据的采集方法及装置 |
| CN109069105B (zh) * | 2017-02-07 | 2021-08-24 | 深圳迈瑞生物医疗电子股份有限公司 | 超声医学检测设备及成像控制方法、成像***、控制器 |
| CN106843502B (zh) * | 2017-03-10 | 2019-10-18 | 京东方科技集团股份有限公司 | 一种三维显示的触控互动***及方法 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1904806A (zh) * | 2006-07-28 | 2007-01-31 | 上海大学 | 手、眼关系引导的非接触式位置输入***和方法 |
| CN1960395A (zh) * | 2005-11-02 | 2007-05-09 | 三星电子株式会社 | 移动通信终端的外部操作信号识别*** |
| CN103246351A (zh) * | 2013-05-23 | 2013-08-14 | 刘广松 | 一种用户交互***和方法 |
| TW201405414A (zh) * | 2012-06-30 | 2014-02-01 | Hewlett Packard Development Co | 以組合資料爲基礎之虛擬手 |
| CN103793060A (zh) * | 2014-02-14 | 2014-05-14 | 杨智 | 一种用户交互***和方法 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| TWI451344B (zh) * | 2012-08-27 | 2014-09-01 | Pixart Imaging Inc | 手勢辨識系統及手勢辨識方法 |
| US8933882B2 (en) * | 2012-12-31 | 2015-01-13 | Intentive Inc. | User centric interface for interaction with visual display that recognizes user intentions |
| US20140240227A1 (en) * | 2013-02-26 | 2014-08-28 | Corel Corporation | System and method for calibrating a tracking object in a vision system |
-
2014
- 2014-09-30 CN CN201410526303.7A patent/CN104407692B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1960395A (zh) * | 2005-11-02 | 2007-05-09 | 三星电子株式会社 | 移动通信终端的外部操作信号识别*** |
| CN1904806A (zh) * | 2006-07-28 | 2007-01-31 | 上海大学 | 手、眼关系引导的非接触式位置输入***和方法 |
| TW201405414A (zh) * | 2012-06-30 | 2014-02-01 | Hewlett Packard Development Co | 以組合資料爲基礎之虛擬手 |
| CN103246351A (zh) * | 2013-05-23 | 2013-08-14 | 刘广松 | 一种用户交互***和方法 |
| CN103793060A (zh) * | 2014-02-14 | 2014-05-14 | 杨智 | 一种用户交互***和方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104407692A (zh) | 2015-03-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10606442B2 (en) | Touch-free gesture recognition system and method | |
| US10852913B2 (en) | Remote hover touch system and method | |
| US8416206B2 (en) | Method for manipulating a graphic widget in a three-dimensional environment displayed on a touch panel of an interactive input system | |
| US9753547B2 (en) | Interactive displaying method, control method and system for achieving displaying of a holographic image | |
| Wang et al. | Detecting and leveraging finger orientation for interaction with direct-touch surfaces | |
| JP5405572B2 (ja) | 曲面ディスプレイを用いたタッチ対話 | |
| US20170024017A1 (en) | Gesture processing | |
| CN104246682B (zh) | 增强的虚拟触摸板和触摸屏 | |
| US8279168B2 (en) | Three-dimensional virtual-touch human-machine interface system and method therefor | |
| US20140098049A1 (en) | Systems and methods for touch-based input on ultrasound devices | |
| US9524097B2 (en) | Touchscreen gestures for selecting a graphical object | |
| KR101019254B1 (ko) | 공간 투영 및 공간 터치 기능이 구비된 단말 장치 및 그 제어 방법 | |
| US20140160073A1 (en) | User interface device with touch pad enabling original image to be displayed in reduction within touch-input screen, and input-action processing method and program | |
| US20160041617A1 (en) | Radar-Based Gesture Recognition | |
| CN106030495A (zh) | 利用单个感测***的基于多模式姿势的交互***及方法 | |
| US20090201289A1 (en) | Method and apparatus for inputting three-dimensional location | |
| Rekimoto | Organic interaction technologies: from stone to skin | |
| CN104407692B (zh) | 基于超声波的全息图像交互式显示方法、控制方法及*** | |
| CN105353904B (zh) | 互动显示***及其触控互动遥控器和互动触控方法 | |
| US9280259B2 (en) | System and method for manipulating an object in a three-dimensional desktop environment | |
| KR102169236B1 (ko) | 터치스크린 장치 및 그 제어방법 그리고 디스플레이 장치 | |
| KR102254091B1 (ko) | 터치스크린 장치 및 그 제어방법 그리고 디스플레이 장치 | |
| Huot | Touch Interfaces | |
| EP2829949B1 (en) | System and method for manipulating an object in a three-dimensional desktop environment | |
| Soleimani et al. | Converting every surface to touchscreen |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20211117 Address after: 518000 Room 201, building A, No. 1, Qian Wan Road, Qianhai Shenzhen Hong Kong cooperation zone, Shenzhen, Guangdong (Shenzhen Qianhai business secretary Co., Ltd.) Patentee after: Shenzhen Rongyi investment partnership (L.P.) Address before: 518000 Zone C, floor 2, building B1, digital technology park, South District, high tech Zone, Nanshan District, Shenzhen, Guangdong Patentee before: SHENZHEN ESTAR TECHNOLOGY GROUP Co.,Ltd. |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20221011 Address after: 518000 warehouse 2 of Baisha logistics company, 3011 Shahe West Road, Shuguang community, Xili street, Nanshan District, Shenzhen, Guangdong 224 Patentee after: Shenzhen quechao parking Technology Co.,Ltd. Address before: 518000 Room 201, building A, No. 1, Qian Wan Road, Qianhai Shenzhen Hong Kong cooperation zone, Shenzhen, Guangdong (Shenzhen Qianhai business secretary Co., Ltd.) Patentee before: Shenzhen Rongyi investment partnership (L.P.) |
|
| TR01 | Transfer of patent right |