CN102508546B - 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法 - Google Patents
一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法 Download PDFInfo
- Publication number
- CN102508546B CN102508546B CN201110336545.6A CN201110336545A CN102508546B CN 102508546 B CN102508546 B CN 102508546B CN 201110336545 A CN201110336545 A CN 201110336545A CN 102508546 B CN102508546 B CN 102508546B
- Authority
- CN
- China
- Prior art keywords
- user
- virtual
- binocular images
- user interface
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开一种3D虚拟投影及虚拟触摸的用户交互界面及实现方法，包括深度探测器、双眼图像视差计算模块、双眼图像处理模块、3D显示设备、手势识别模块、摄像头和虚拟触摸控制器。深度探测器探测得到用户头部和手部与3D显示设备距离信息；双眼图像视差计算模块根据距离信息计算双眼图像视差，双眼图像处理模块根据双眼图像视差信息处理图像，再将处理后的图像发送给3D显示设备虚拟投影在用户臂长范围；手势识别模块根据深度探测器和摄像头识别到用户手指移动轨迹，虚拟触摸控制器根据用户手势及移动轨迹做出相应的反应。本发明不仅可以实现增加一种带反馈的，虚拟投影、虚拟触摸的3D用户界面，而且带给用户使用方便和全新的交互体验。
Description
技术领域
本发明涉及显示设备，尤其涉及一种在显示设备中实现3D虚拟投影及虚拟触摸的用户交互界面及实现方法。
背景技术
目前，已经有出现在虚拟屏幕上实现触摸的操作，但还没有在3D虚拟显示的用户交互界面上实现虚拟触摸操作。
例如，专利号为200910197205.2，专利名称为“一种可视可操作无实体的触摸屏***”中，公开了一种可视可操作无实体的触摸屏***，该***由一台计算机，两个网络摄像头，一个头戴式显示器，以及一个标定参照物组成，该参照物标定了一个虚拟触摸屏。用户可以通过头戴式显示器观察含有虚拟触摸屏的现实世界。并且可以直接用手操作没有实体的触摸屏。本发明采用两个摄像头进行实时的图像采集。计算机***根据摄像头输入的图像。在标定参照物的配合下进行空间定标与指尖位置动作识别，并且合成相应的图像。头戴式显示器把含有虚拟触摸屏的图像输出给用户。用户通过头戴式显示器直接观察到虚拟触摸屏的反馈。该专利中，虽然实现了在虚拟屏幕上进行触摸的操作，但未实现在3D虚拟显示的用户交互界面上实现虚拟触摸工作。
发明内容
为了克服现有技术的不足，本发明的目的在于提供一种给用户带来全新的交互体验的3D虚拟投影及虚拟触摸的用户交互界面及实现方法。
本发明的技术方案为：一种3D虚拟投影及虚拟触摸的用户交互界面，其包括以下部件：
深度探测器：用于探测用户头部及手部与3D显示设备的距离信息；
双眼图像视差计算模块：根据接收的距离信息计算出将用户交互界面上显示的画面通过3D显示虚拟投影到距用户头部臂长范围的双眼图像视差；
双眼图像处理模块：将左右眼显示的图像处理达到双眼图像视差计算模块计算的双眼图像视差，再将处理后的图像发送给3D显示设备；
3D显示设备：把双眼图像处理模块进行处理过的双眼视差图像以3D显示，使用户交互界面上显示的画面以3D虚拟投影的方式显示在用户头部臂长范围内；
手势识别模块：使用摄像头摄取用户手部运动轨迹，并结合深度探测器得到的用户手部与3D显示设备的距离信息，识别手势；
摄像头：摄取用户手部的运动轨迹；
虚拟触摸控制器：接收手势识别模块的信息，并做出相应反应；
其中，所述深度探测器的输出端与双眼图像视差计算模块的输入端连接，双眼图像视差计算模块的输出端与双眼图像处理模块的输入端连接；双眼图像处理模块的输出端与3D显示设备连接；手势识别模块的输入端分别与深度探测器和摄像头连接，手势识别模块的输出端与虚拟触摸控制器连接。
所述3D显示设备为电视机、电脑、一体机或手机等手持显示设备。
本发明中， 3D虚拟投影及虚拟触摸的用户交互界面的实现方法包括以下步骤：
1）、深度探测器探测得到用户头部和手部与3D显示设备距离信息，并将探测的距离信息发送给双眼图像视差计算模块；
2）、双眼图像视差计算模块根据接收的距离信息计算出将用户交互界面上显示的画面通过3D显示虚拟投影到用户头部臂长范围的双眼图像视差，并将双眼图像视差信息发送给双眼图像处理模块；
3）、双眼图像处理模块根据接收的双眼图像视差信息，将左右眼显示的图像处理达到双眼视差模块计算的双眼图像视差，再将处理后的图像发送给3D显示设备；
4）、3D显示模块接收双眼图像处理模块发送的处理好的3D图像，以3D方式显示并将图像虚拟投影在用户臂长范围；
5）、手势识别模块根据深度探测器和摄像头识别到用户手势及手指移动轨迹，并将接收的信息发送给虚拟触摸控制器，虚拟触摸控制器根据用户手势及移动轨迹做出相应的反应。
本发明所述步骤5中，当用户做出手势动作时，深度探测器探测用户手指到3D显示设备的距离，并将获取的距离信息发送给手势识别模块；摄像头摄取用户手势动作的图像，也将获取的信息发送给手势识别模块，手势识别模块接收两者的信息后，与3D虚拟显示的用户交互界面上显示的画面的位置做比对，判断用户是否触摸到3D虚拟显示的用户交互界面上显示的画面，并将判断结果发送给虚拟触摸控制器，若有触摸到，则虚拟触摸控制器做出反应，在用户手指触摸到的3D虚拟显示的用户交互界面显示的画面上产生诸如水波纹或高亮等变化；若没触摸到，虚拟触摸控制器则不反应；
当用户手指在3D虚拟显示的用户交互界面显示的画面上移动时，摄像头摄取手指移动轨迹，并将获取的信息发送给手势识别模块，手势识别模块判别用户的手势，并将判断结构发送给虚拟触摸控制器，虚拟触摸控制器收到信息后，做出相应反应。
采用本发明的技术方案，综合利用深度探测技术，3D显示技术以及手势识别技术，创造出一种全新的3D虚拟触摸交互方式，克服目前触摸不能离开屏幕，而手势不能与交互的对象距离较远的问题；用户不仅可以实现在虚拟屏幕上进行触摸操作，还可实现3D虚拟投影。本发明不仅可以实现增加一种带反馈的，虚拟投影、虚拟触摸的3D用户界面，而且带给用户使用方便和全新的交互体验。
附图说明
下面结合附图和具体实施方式对本发明作进一步详细的说明：
图1是发明的结构示意图；
图2是本发明的流程图。
具体实施方式
下面结合具体实施方式对本发明作进一步详细的说明：
如图1或图2所示，本发明的技术方案为：一种3D虚拟投影及虚拟触摸的用户交互界面，其包括以下部件：
深度探测器1：用于探测用户头部及手部与3D显示设备4的距离信息；
双眼图像视差计算模块2：根据接收的距离信息计算出将用户交互界面上显示的画面通过3D显示虚拟投影到距用户头部臂长范围的双眼图像视差；
双眼图像处理模块3：将左右眼显示的图像处理达到双眼图像视差计算模块2计算的双眼图像视差，再将处理后的图像发送给3D显示设备4；
3D显示设备4：把双眼图像处理模块3进行处理过的双眼视差图像以3D显示，使用户交互界面上显示的画面以3D虚拟投影的方式显示在用户头部臂长范围内；
手势识别模块5：使用摄像头摄取用户手部运动轨迹，并结合深度探测器得到的用户手部与3D显示设备的距离信息，识别手势；
摄像头6：摄取用户手部的运动轨迹；
虚拟触摸控制器7：接收手势识别模块的信息，并做出相应反应；
其中，所述深度探测器1的输出端与双眼图像视差计算模块2的输入端连接，双眼图像视差计算模块2的输出端与双眼图像处理模块3的输入端连接；双眼图像处理模块3的输出端与3D显示设备4连接；手势识别模块5的输入端分别与深度探测器1和摄像头6连接，手势识别模块5的输出端与虚拟触摸控制器7连接。
所述3D显示设备4为电视机、电脑、一体机或手机等手持显示设备。
本发明中， 3D虚拟投影及虚拟触摸的用户交互界面的实现方法包括以下步骤：
1）、深度探测器1探测得到用户头部和手部与3D显示设备4距离信息，并将探测的距离信息发送给双眼图像视差计算模块2；
2）、双眼图像视差计算模块2根据接收的距离信息计算出将用户交互界面上显示的画面通过3D显示虚拟投影到用户头部臂长范围的双眼图像视差，并将双眼图像视差信息发送给双眼图像处理模块3；
3）、双眼图像处理模块3根据接收的双眼图像视差信息，将左右眼显示的图像处理达到双眼视差模块计算2的双眼图像视差，再将处理后的图像发送给3D显示设备4；
4）、3D显示模块4接收双眼图像处理模块3发送的处理好的3D图像，以3D方式显示并将图像虚拟投影在用户臂长范围；
5）、手势识别模块5根据深度探测器1和摄像头6识别到用户手势及手指移动轨迹，并将接收的信息发送给虚拟触摸控制器7，虚拟触摸控制器7根据用户手势及移动轨迹做出相应的反应。
本发明所述步骤5中，当用户做出手势动作时，深度探测器1探测用户手指到3D显示设备4的距离，并将获取的距离信息发送给手势识别模块5；摄像头6摄取用户手势动作的图像，也将获取的信息发送给手势识别模块5，手势识别模块5接收两者的信息后，与3D虚拟显示的用户交互界面上显示的画面的位置做比对，判断用户是否触摸到3D虚拟显示的用户交互界面上显示的画面，并将判断结果发送给虚拟触摸控制器7，若有触摸到，则虚拟触摸控制器7做出反应，在用户手指触摸到的3D虚拟显示的用户交互界面显示的画面上产生诸如水波纹或高亮等变化；若没触摸到，虚拟触摸控制器7则不反应；
当用户手指在3D虚拟显示的用户交互界面显示的画面上移动时，摄像头6摄取手指移动轨迹，并将获取的信息发送给手势识别模块5，手势识别模块5判别用户的手势，并将判断结构发送给虚拟触摸控制器7，虚拟触摸控制器7收到信息后，做出相应反应。例如若用户触摸到的是按键，虚拟触摸控制器7则响应这个按键功能；若触摸到的是缩放按键，则虚拟触摸控制器7响应屏幕缩放功能。若手势识别模块5检测到触摸有手的位移，则虚拟触摸控制器7根据预先设定的手势定义做出相应反应。
采用本发明的技术方案，综合利用深度探测技术，3D显示技术以及手势识别技术，创造出一种全新的3D虚拟触摸交互方式，克服目前触摸不能离开屏幕，而手势不能与交互的对象距离较远的问题，给用户提供一种带反馈的，虚拟投影、虚拟触摸的3D用户界面，而且带给用户使用方便和全新的交互体验。
Claims (4)
1.一种3D虚拟投影及虚拟触摸的用户交互界面，其特征在于：其包括以下部件：
深度探测器：用于探测用户头部和手部与3D显示设备的距离信息；
双眼图像视差计算模块：根据接收的距离信息计算出将用户交互界面上显示的画面通过3D显示虚拟投影到距用户头部臂长范围内的双眼图像视差；
双眼图像处理模块：将左右眼显示的图像进行处理达到双眼图像视差计算模块计算的双眼图像视差，再将处理后的图像发送给3D显示设备；
3D显示设备：把双眼图像处理模块处理过的双眼视差图像以3D显示，使用户交互界面上显示的画面以3D虚拟投影的方式显示在用户头部臂长范围内；
手势识别模块：使用摄像头摄取用户手部运动轨迹，并结合深度探测器得到的用户手部与3D显示设备的距离信息，识别手势；
摄像头：摄取用户手部的运动轨迹；
虚拟触摸控制器：接收手势识别模块的信息，并做出相应反应；
其中，所述深度探测器的输出端与双眼图像视差计算模块的输入端连接，双眼图像视差计算模块的输出端与双眼图像处理模块的输入端连接；双眼图像处理模块的输出端与3D显示设备连接；手势识别模块的输入端分别与深度探测器和摄像头连接，手势识别模块的输出端与虚拟触摸控制器连接。
2.根据权利要求1所述的3D虚拟投影及虚拟触摸的用户交互界面，其特征在于：所述3D显示设备为电视机、电脑、一体机、手机或手持显示设备。
3.一种3D虚拟投影及虚拟触摸的用户交互界面的实现方法，其特征在于：所述实现方法包括以下步骤：
1）深度探测器探测得到用户头部和手部与3D显示设备距离信息，并将探测的距离信息发送给双眼图像视差计算模块；
2）双眼图像视差计算模块根据接收的距离信息计算出将用户交互界面上显示的画面通过3D显示虚拟投影到用户头部臂长范围的双眼图像视差，并将双眼图像视差信息发送给双眼图像处理模块；
3）双眼图像处理模块根据接收的双眼图像视差信息，将左右眼显示的图像处理达到双眼视差模块计算的双眼图像视差，再将处理后的图像发送给3D显示设备；
4）3D显示模块接收双眼图像处理模块发送的处理好的3D图像，以3D方式显示并将图像虚拟投影在用户臂长范围；
5）手势识别模块根据深度探测器和摄像头识别到用户手势及手指移动轨迹，并将接收的信息发送给虚拟触摸控制器，虚拟触摸控制器根据用户手势及移动轨迹做出相应的反应。
4.根据权利要求3所述的3D虚拟投影及虚拟触摸的用户交互界面的实现方法，其特征在于：所述步骤5中，当用户做出手势动作时，深度探测器探测用户手指到3D显示设备的距离，并将获取的距离信息发送给手势识别模块；摄像头摄取用户手势动作的图像，也将获取的信息发送给手势识别模块，手势识别模块接收两者的信息后，与3D虚拟显示的用户交互界面上显示的画面的位置做比对，判断用户是否触摸到3D虚拟显示的用户交互界面上显示的画面，并将判断结果发送给虚拟触摸控制器，若有触摸到，则虚拟触摸控制器做出反应，在用户手指触摸到的3D虚拟显示的用户交互界面显示的画面上产生水波纹或高亮变化；若没触摸到，虚拟触摸控制器则不反应；
当用户手指在3D虚拟显示的用户交互界面显示的画面上移动时，摄像头摄取手指移动轨迹，并将获取的信息发送给手势识别模块，手势识别模块判别用户的手势，并将判断结果发送给虚拟触摸控制器，虚拟触摸控制器收到信息后，做出相应反应。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201110336545.6A CN102508546B (zh) | 2011-10-31 | 2011-10-31 | 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201110336545.6A CN102508546B (zh) | 2011-10-31 | 2011-10-31 | 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102508546A CN102508546A (zh) | 2012-06-20 |
| CN102508546B true CN102508546B (zh) | 2014-04-09 |
Family
ID=46220646
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201110336545.6A Active CN102508546B (zh) | 2011-10-31 | 2011-10-31 | 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102508546B (zh) |
Families Citing this family (40)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2680228B1 (en) * | 2012-06-25 | 2014-11-26 | Softkinetic Software | Improvements in or relating to three dimensional close interactions. |
| CN102880288B (zh) * | 2012-08-20 | 2016-04-27 | 深圳市维尚境界显示技术有限公司 | 一种3d显示的人机交互的方法、装置以及设备 |
| DE102012216193B4 (de) * | 2012-09-12 | 2020-07-30 | Continental Automotive Gmbh | Verfahren und Vorrichtung zur Bedienung einer Kraftfahrzeugkomponente mittels Gesten |
| US8482527B1 (en) * | 2012-09-14 | 2013-07-09 | Lg Electronics Inc. | Apparatus and method of providing user interface on head mounted display and head mounted display thereof |
| KR101938648B1 (ko) * | 2012-10-23 | 2019-01-15 | 삼성전자주식회사 | 이미지 센서를 포함하는 모바일 기기, 이미지 센서의 구동 방법 및 모바일 기기의 구동 방법 |
| CN103176667A (zh) * | 2013-02-27 | 2013-06-26 | 广东工业大学 | 基于Android***的投影屏幕触摸终端设备 |
| CN104049719B (zh) * | 2013-03-11 | 2017-12-01 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
| CN103176605A (zh) * | 2013-03-27 | 2013-06-26 | 刘仁俊 | 一种手势识别控制装置及控制方法 |
| CN103412681A (zh) * | 2013-04-22 | 2013-11-27 | 深圳市富兴科技有限公司 | 一种智能化3d投影虚拟触控显示技术 |
| CN103412680A (zh) * | 2013-04-22 | 2013-11-27 | 深圳市富兴科技有限公司 | 一种智能3d投影虚拟触控显示技术 |
| JP5845211B2 (ja) | 2013-06-24 | 2016-01-20 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
| CN105339862A (zh) * | 2013-06-25 | 2016-02-17 | 汤姆逊许可公司 | 用于字符输入的方法和设备 |
| CN103474007B (zh) * | 2013-08-27 | 2015-08-19 | 湖南华凯文化创意股份有限公司 | 一种互动式显示方法及*** |
| CN103530060B (zh) * | 2013-10-31 | 2016-06-22 | 京东方科技集团股份有限公司 | 显示装置及其控制方法、手势识别方法 |
| CN103529947A (zh) * | 2013-10-31 | 2014-01-22 | 京东方科技集团股份有限公司 | 显示装置及其控制方法、手势识别方法 |
| CN103559809B (zh) * | 2013-11-06 | 2017-02-08 | 常州文武信息科技有限公司 | 基于计算机的现场交互演示*** |
| CN103593585A (zh) * | 2013-12-02 | 2014-02-19 | 深圳中兴网信科技有限公司 | 远程诊断*** |
| CN103995620A (zh) * | 2013-12-02 | 2014-08-20 | 深圳市云立方信息科技有限公司 | 一种空中触控*** |
| CN103744608B (zh) * | 2014-01-20 | 2018-02-27 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
| CN104951059B (zh) * | 2014-03-31 | 2018-08-10 | 联想(北京)有限公司 | 一种数据处理方法、装置及一种电子设备 |
| CN103995586B (zh) * | 2014-05-12 | 2018-04-06 | 上海大学 | 基于虚拟触摸屏的非穿戴指势人机交互方法 |
| CN105530365A (zh) * | 2014-12-26 | 2016-04-27 | 比亚迪股份有限公司 | 一种车载电话***及包含该***的车辆 |
| CN104714646A (zh) * | 2015-03-25 | 2015-06-17 | 中山大学 | 一种基于立体视觉的3d虚拟触控人机交互方法 |
| CN104759095A (zh) * | 2015-04-24 | 2015-07-08 | 吴展雄 | 一种虚拟现实头戴显示*** |
| US9841836B2 (en) * | 2015-07-28 | 2017-12-12 | General Electric Company | Control of non-destructive testing devices |
| CN105204627B (zh) * | 2015-09-01 | 2016-07-13 | 济南大学 | 一种基于手势的数字输入方法 |
| CN105488802B (zh) * | 2015-12-07 | 2018-12-28 | 清华大学 | 一种指尖深度检测方法及*** |
| CN105824408A (zh) * | 2016-02-15 | 2016-08-03 | 乐视致新电子科技（天津）有限公司 | 虚拟现实头盔瞳距调节同步装置及方法 |
| US10496353B2 (en) | 2016-09-29 | 2019-12-03 | Jiang Chang | Three-dimensional image formation and color correction system and method |
| CN106648063B (zh) * | 2016-10-19 | 2020-11-06 | 北京小米移动软件有限公司 | 手势识别方法及装置 |
| CN106919294B (zh) * | 2017-03-10 | 2020-07-21 | 京东方科技集团股份有限公司 | 一种3d触控交互装置、其触控交互方法及显示装置 |
| CN107300975A (zh) * | 2017-07-13 | 2017-10-27 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
| CN107515714B (zh) * | 2017-07-27 | 2020-08-28 | 歌尔股份有限公司 | 一种手指触控识别方法、装置和触控投影设备 |
| CN108113638A (zh) * | 2018-02-05 | 2018-06-05 | 中国人民解放军空军航空医学研究所 | 一种动态视力检测方法 |
| CN108989661B (zh) * | 2018-06-19 | 2021-06-29 | 北京淳中科技股份有限公司 | 一种摄像设备控制方法、装置和*** |
| CN108920088A (zh) * | 2018-07-18 | 2018-11-30 | 成都信息工程大学 | 一种基于隔空触摸操作的桌面投影交互方法及*** |
| CN109375834A (zh) * | 2018-09-27 | 2019-02-22 | 东莞华贝电子科技有限公司 | 投影键盘的反馈方法及投影键盘 |
| CN109683765A (zh) * | 2018-12-27 | 2019-04-26 | 张家港康得新光电材料有限公司 | 一种资源分配方法、装置以及3d显示终端 |
| CN111028494B (zh) * | 2019-11-04 | 2021-01-29 | 珠海格力电器股份有限公司 | 一种电器设备的虚拟遥控方法、计算机可读存储介质及智能家电 |
| WO2024026638A1 (en) * | 2022-08-01 | 2024-02-08 | Huawei Technologies Co., Ltd. | Haptic interaction with 3d object on naked eye 3d display |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101393497A (zh) * | 2008-10-30 | 2009-03-25 | 上海交通大学 | 基于双目立体视觉的多点触摸方法 |
| CN101566875A (zh) * | 2008-04-24 | 2009-10-28 | 索尼株式会社 | 图像处理装置、图像处理方法、程序和记录介质 |
| CN101587386A (zh) * | 2008-05-21 | 2009-11-25 | 深圳华为通信技术有限公司 | 光标处理方法、装置及*** |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5499762B2 (ja) * | 2010-02-24 | 2014-05-21 | ソニー株式会社 | 画像処理装置、画像処理方法、プログラム及び画像処理システム |
-
2011
- 2011-10-31 CN CN201110336545.6A patent/CN102508546B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101566875A (zh) * | 2008-04-24 | 2009-10-28 | 索尼株式会社 | 图像处理装置、图像处理方法、程序和记录介质 |
| CN101587386A (zh) * | 2008-05-21 | 2009-11-25 | 深圳华为通信技术有限公司 | 光标处理方法、装置及*** |
| CN101393497A (zh) * | 2008-10-30 | 2009-03-25 | 上海交通大学 | 基于双目立体视觉的多点触摸方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102508546A (zh) | 2012-06-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102508546B (zh) | 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法 | |
| US9962839B2 (en) | Robot apparatus, method for controlling the same, and computer program | |
| CN110083202B (zh) | 与近眼显示器的多模交互 | |
| TWI540461B (zh) | 手勢輸入的方法及系統 | |
| US20110118877A1 (en) | Robot system and method and computer-readable medium controlling the same | |
| EP2790089A1 (en) | Portable device and method for providing non-contact interface | |
| US10234955B2 (en) | Input recognition apparatus, input recognition method using maker location, and non-transitory computer-readable storage program | |
| TWI403922B (zh) | 徒手人機介面操作系統及其方法 | |
| KR20120068253A (ko) | 사용자 인터페이스의 반응 제공 방법 및 장치 | |
| KR102147430B1 (ko) | 가상 공간 멀티 터치 인터랙션 장치 및 방법 | |
| JP2013029958A5 (zh) | ||
| CN104571510A (zh) | 一种3d场景中输入手势的***和方法 | |
| EP2590060A1 (en) | 3D user interaction system and method | |
| WO2015093130A1 (ja) | 情報処理装置、情報処理方法およびプログラム | |
| CN102929547A (zh) | 智能终端无接触交互方法 | |
| WO2013149475A1 (zh) | 一种用户界面的控制方法及装置 | |
| TWI486815B (zh) | 顯示設備及其控制系統和方法 | |
| KR20160055407A (ko) | 홀로그래피 터치 방법 및 프로젝터 터치 방법 | |
| WO2018076609A1 (zh) | 一种操作终端的方法和终端 | |
| CN104834410A (zh) | 输入装置以及输入方法 | |
| CN105302310B (zh) | 一种手势识别装置、***及方法 | |
| CN104102332B (zh) | 显示设备及其控制***和方法 | |
| Kojima et al. | Hand manipulation of virtual objects in wearable augmented reality | |
| Huang et al. | Over-the-air manipulation: An intuitive control system for smart home | |
| CN103365408A (zh) | 虚拟屏的反馈方法及*** |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant |