CN106354316A - 一种基于ar技术和图像识别技术的操作面板 - Google Patents

一种基于ar技术和图像识别技术的操作面板 Download PDF

Info

Publication number
CN106354316A
CN106354316A CN201610784639.2A CN201610784639A CN106354316A CN 106354316 A CN106354316 A CN 106354316A CN 201610784639 A CN201610784639 A CN 201610784639A CN 106354316 A CN106354316 A CN 106354316A
Authority
CN
China
Prior art keywords
technology
function
app
user
image recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610784639.2A
Other languages
English (en)
Inventor
曹珣
王守国
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Galanz Enterprises Co Ltd
Original Assignee
Guangdong Galanz Enterprises Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Galanz Enterprises Co Ltd filed Critical Guangdong Galanz Enterprises Co Ltd
Priority to CN201610784639.2A priority Critical patent/CN106354316A/zh
Publication of CN106354316A publication Critical patent/CN106354316A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种基于AR技术和图像识别技术的操作面板,包括以下生成步骤:a)打开智能终端上的APP;b)通过APP对家电设备上的控制面板、遥控器面板或二维码进行图片信息采集,确定每个按键的功能;c)采集的图片上传至服务器,并在服务器的属性值库进行识别分析,再将相应的功能与家电设备功能进行匹配,匹配成功后,在APP中添加对应的功能按钮;d)利用AR技术,将APP中的功能按钮以3D虚拟操作界面呈现;e)用户通过手势操作选取3D虚拟操作界面上的功能按钮或对3D虚拟操作界面进行编辑;f)家电设备根据用户选取的功能启动工作;或者,根据用户的手势编辑,生成用户喜爱的3D虚拟操作界面。其使用方便简单、适用范围广、体现新颖。

Description

一种基于AR技术和图像识别技术的操作面板
技术领域
本发明涉及一种操作面板,特别涉及一种基于AR技术和图像识别技术的操作面板。
背景技术
随着智能家电越来越普及和AR技术的发展,人们对设备的操作要求越来越高,尤其在虚拟世界里,人们想有不一样的体验。AR(Augmented Reality增强实境)技术是一种全新的人机交互技术,利用这样一种技术,可以模拟真实的现场景观,它是以交互性和构想为基本特征的计算机高级人机界面。使用者不仅能够通过虚拟现实***感受到在客观物理世界中所经历的"身临其境"的逼真性,而且能够突破空间、时间以及其它客观限制,感受到在真实世界中无法亲身经历的体验。
在家电上,APP交互是厂家给用户体验最重要的一步,大多的用户不仅需要真实的需求体验,更多的用户更加希望AR技术能实现在家电上,给用户不一样的体验,并且在此基础上进行功能的编辑(排序、删除、添加等操作)。
发明内容
本发明的目的旨在提供一种使用方便简单、适用范围广、手势操作、利用AR技术生成3D虚拟操作界面的基于AR技术和图像识别技术的操作面板,给用户崭新的使用体现,并可根据个人喜好进行编辑。本技术可以应用到所有家电设备,例如:微波炉、空调、电视机等。
按此目的设计的一种基于AR技术和图像识别技术的操作面板,其特征在于:包括以下生成步骤:
a)、打开智能终端上的APP;
b)、通过APP对家电设备上的控制面板、遥控器面板或二维码进行图片信息采集,确定每个按键的功能;
c)、采集的图片上传至服务器,并在服务器的属性值库进行识别分析,再将相应的功能与家电设备功能进行匹配,匹配成功后,在APP中添加对应的功能按钮;
d)、利用AR技术,将APP中的功能按钮以3D虚拟操作界面呈现;
e)、用户通过手势操作选取3D虚拟操作界面上的功能按钮或对3D虚拟操作界面进行编辑;
f)、家电设备根据用户选取的功能启动工作;或者,根据用户的手势编辑,生成用户喜爱的3D虚拟操作界面。
家电设备上的控制面板或遥控器面板通过摄像方式采集图片信息;二维码通过扫描方式采集图片信息,该二维码设置于家电设备、遥控器上或使用说明书上。
3D虚拟操作界面的编辑包括对功能按钮的拖动、删除和添加,对界面背景的删除和切换。
手势操作方式包括左划、右划、双手相互远离或靠拢。
智能终端包括智能手机、带摄像头的平板电脑。
本发明针对用户体验和设备功能,结合AR技术和图像识别技术完善APP的操作方式。其通过APP对家电设备的控制面板、遥控器或二维码进行图片信息采集,并将每个按键与服务器属性值库进行匹配,最后利用AR技术在APP上生成3D虚拟操作界面供用户使用,给用户带来崭新的使用体现;用户通过手势操作对3D虚拟操作界面实现操作和编辑,以满足用户的基本交互需求和对增强现实操作方式的渴望,其操作方便简单,具有一定的趣味性,可玩性高。此外,可减少APP功能的开发,以降低开发成本。
附图说明
图1为本发明一实施例的流程图。
具体实施方式
下面结合附图及实施例对本发明作进一步描述。
参见图1,本基于AR技术和图像识别技术的操作面板,包括以下生成步骤:
a)、打开智能终端上的APP;
b)、通过APP对家电设备上的控制面板、遥控器面板或二维码进行图片信息采集,确定每个按键的功能;
c)、采集的图片上传至服务器,并在服务器的属性值库进行识别分析,再将相应的功能与家电设备功能进行匹配,匹配成功后,在APP中添加对应的功能按钮;
d)、利用AR技术,将APP中的功能按钮以3D虚拟操作界面呈现;
e)、用户通过手势操作选取3D虚拟操作界面上的功能按钮或对3D虚拟操作界面进行编辑;
f)、家电设备根据用户选取的功能启动工作;或者,根据用户的手势编辑,生成用户喜爱的3D虚拟操作界面。
进一步说,家电设备上的控制面板或遥控器面板通过摄像方式采集图片信息;二维码通过扫描方式采集图片信息,该二维码设置于家电设备、遥控器上或使用说明书上。
进一步说,3D虚拟操作界面的编辑包括对功能按钮的拖动、删除和添加,对界面背景的删除和切换,以满足用户的正常需求,通过编辑,用户可将不用的功能删除,将常用的功能保留,将需要的功能添加,将常用的功能拖至显眼位置,将不常用的功能拖至一边;通过单击或双击方式选取3D虚拟操作界面中的按钮。
进一步说,手势操作方式包括左划、右划、双手相互远离或靠拢。
进一步说,智能终端包括智能手机、带摄像头的平板电脑。
具体操作如下:通过手势滑动完成操作,比如从智能手机屏幕右边缘滑入,会出现一个页面(可以是半页面也可以是全屏页面),单击屏幕添加符号,输入相应程序,比如微波炉需要输入:“火力:P100、时间:10min”等,输入完成后,点击确定,将功能保存下来,如需使用,滑出页面,单击功能即可启动。
上述为本发明的优选方案,显示和描述了本发明的基本原理、主要特征和本发明的优点。本领域的技术人员应该了解本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等同物界定。

Claims (5)

1.一种基于AR技术和图像识别技术的操作面板,其特征在于:包括以下生成步骤:
a)、打开智能终端上的APP;
b)、通过APP对家电设备上的控制面板、遥控器面板或二维码进行图片信息采集,确定每个按键的功能;
c)、采集的图片上传至服务器,并在服务器的属性值库进行识别分析,再将相应的功能与家电设备功能进行匹配,匹配成功后,
在APP中添加对应的功能按钮;
d)、利用AR技术,将APP中的功能按钮以3D虚拟操作界面呈现;
e)、用户通过手势操作选取3D虚拟操作界面上的功能按钮或对3D虚拟操作界面进行编辑;
f)、家电设备根据用户选取的功能启动工作;或者,根据用户的手势编辑,生成用户喜爱的3D虚拟操作界面。
2.根据权利要求1所述基于AR技术和图像识别技术的操作面板,其特征在于:家电设备上的控制面板或遥控器面板通过摄像方式采集图片信息;二维码通过扫描方式采集图片信息,该二维码设置于家电设备、遥控器上或使用说明书上。
3.根据权利要求2所述基于AR技术和图像识别技术的操作面板,其特征在于:3D虚拟操作界面的编辑包括对功能按钮的拖动、删除和添加,对界面背景的删除和切换。
4.根据权利要求3所述基于AR技术和图像识别技术的操作面板,其特征在于:手势操作方式包括左划、右划、双手相互远离或靠拢。
5.根据权利要求4所述基于AR技术和图像识别技术的操作面板,其特征在于:智能终端包括智能手机、带摄像头的平板电脑。
CN201610784639.2A 2016-08-31 2016-08-31 一种基于ar技术和图像识别技术的操作面板 Pending CN106354316A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610784639.2A CN106354316A (zh) 2016-08-31 2016-08-31 一种基于ar技术和图像识别技术的操作面板

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610784639.2A CN106354316A (zh) 2016-08-31 2016-08-31 一种基于ar技术和图像识别技术的操作面板

Publications (1)

Publication Number Publication Date
CN106354316A true CN106354316A (zh) 2017-01-25

Family

ID=57856257

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610784639.2A Pending CN106354316A (zh) 2016-08-31 2016-08-31 一种基于ar技术和图像识别技术的操作面板

Country Status (1)

Country Link
CN (1) CN106354316A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106896736A (zh) * 2017-03-03 2017-06-27 京东方科技集团股份有限公司 智能远程看护方法及装置
CN108711174A (zh) * 2018-04-13 2018-10-26 北京航天自动控制研究所 一种新型的机械臂近似平行视觉定位***
CN108762482A (zh) * 2018-04-16 2018-11-06 北京大学 一种大屏幕和增强现实眼镜间数据交互方法和***
CN109189228A (zh) * 2018-09-25 2019-01-11 信阳百德实业有限公司 一种利用ar和图像识别技术对标牌进行图案识别方法
CN111124216A (zh) * 2018-10-30 2020-05-08 九阳股份有限公司 一种家电设备的控制界面设置方法和装置
TWI804294B (zh) * 2022-04-28 2023-06-01 中華電信股份有限公司 用於擴增實境協作之遠端設備控制系統、方法及電腦可讀媒介

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102111586A (zh) * 2009-12-23 2011-06-29 康佳集团股份有限公司 一种电视机及其人性化操作界面的设定及使用方法
CN102402842A (zh) * 2010-09-15 2012-04-04 宏碁股份有限公司 增景实境遥控方法及其装置
US20120208621A1 (en) * 2011-02-15 2012-08-16 Aruze Gaming America, Inc. Gaming machine
CN102692881A (zh) * 2012-05-16 2012-09-26 中国海洋大学 一种基于二维码的家电控制方法及控制***
CN105843054A (zh) * 2016-03-22 2016-08-10 美的集团股份有限公司 控制家居设备的方法、智能家居***及移动设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102111586A (zh) * 2009-12-23 2011-06-29 康佳集团股份有限公司 一种电视机及其人性化操作界面的设定及使用方法
CN102402842A (zh) * 2010-09-15 2012-04-04 宏碁股份有限公司 增景实境遥控方法及其装置
US20120208621A1 (en) * 2011-02-15 2012-08-16 Aruze Gaming America, Inc. Gaming machine
CN102692881A (zh) * 2012-05-16 2012-09-26 中国海洋大学 一种基于二维码的家电控制方法及控制***
CN105843054A (zh) * 2016-03-22 2016-08-10 美的集团股份有限公司 控制家居设备的方法、智能家居***及移动设备

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106896736A (zh) * 2017-03-03 2017-06-27 京东方科技集团股份有限公司 智能远程看护方法及装置
CN108711174A (zh) * 2018-04-13 2018-10-26 北京航天自动控制研究所 一种新型的机械臂近似平行视觉定位***
CN108711174B (zh) * 2018-04-13 2021-12-07 北京航天自动控制研究所 一种机械臂近似平行视觉定位***
CN108762482A (zh) * 2018-04-16 2018-11-06 北京大学 一种大屏幕和增强现实眼镜间数据交互方法和***
CN109189228A (zh) * 2018-09-25 2019-01-11 信阳百德实业有限公司 一种利用ar和图像识别技术对标牌进行图案识别方法
CN111124216A (zh) * 2018-10-30 2020-05-08 九阳股份有限公司 一种家电设备的控制界面设置方法和装置
CN111124216B (zh) * 2018-10-30 2023-11-10 九阳股份有限公司 一种家电设备的控制界面设置方法和装置
TWI804294B (zh) * 2022-04-28 2023-06-01 中華電信股份有限公司 用於擴增實境協作之遠端設備控制系統、方法及電腦可讀媒介

Similar Documents

Publication Publication Date Title
CN106354316A (zh) 一种基于ar技术和图像识别技术的操作面板
CN106406111A (zh) 一种基于ar技术和图像识别技术的智能家电操作方法
CN107820138B (zh) 视频播放方法、装置、终端及存储介质
KR102294191B1 (ko) 스크린 샷 처리 디바이스 및 그 방법
CN104090762B (zh) 一种截图处理装置和方法
JP4536638B2 (ja) 表示情報選択装置及び方法、プログラム並びに記録媒体
CN104090761B (zh) 一种截图应用装置和方法
CN106201170B (zh) 一种应用图标的角标处理方法及终端
CN105204351B (zh) 空调机组的控制方法及装置
CN108156407A (zh) 一种视频剪辑方法及终端
CN105335048A (zh) 具有隐藏应用图标的电子设备及隐藏应用图标的方法
CN107479818B (zh) 一种信息交互方法及移动终端
CN103399692A (zh) 移动终端单手操作的方法及其移动终端
CN102929552B (zh) 终端和信息搜索方法
CN108810637A (zh) 视频播放方法、装置及终端设备
CN107102786B (zh) 一种信息处理方法及客户端
CN108924622A (zh) 一种视频处理方法及其设备、存储介质、电子设备
US20180101284A1 (en) Selecting a picture of a device to identify an associated codeset
CN104333688B (zh) 基于拍摄的图像生成表情符的设备和方法
CN104636027A (zh) 一种基于智能电视实现桌面图标整理的方法及***
CN109799941A (zh) 控制方法、控制设备、***及计算机可读存储介质
CN102929492A (zh) 输入法中调整候选项顺序的方法、客户端及字符库
CN104834687B (zh) 一种图片显示方法
CN109614021A (zh) 交互方法、装置及设备
CN106817484A (zh) 一种会话信息的获取方法及移动终端

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170125