CN204576413U - 一种基于自然用户界面的互联网智能镜 - Google Patents
一种基于自然用户界面的互联网智能镜 Download PDFInfo
- Publication number
- CN204576413U CN204576413U CN201420798478.9U CN201420798478U CN204576413U CN 204576413 U CN204576413 U CN 204576413U CN 201420798478 U CN201420798478 U CN 201420798478U CN 204576413 U CN204576413 U CN 204576413U
- Authority
- CN
- China
- Prior art keywords
- mirror
- luminescent screen
- mainboard
- filtering
- user interface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000001914 filtration Methods 0.000 claims abstract description 25
- 230000008859 change Effects 0.000 claims abstract description 11
- 239000000203 mixture Substances 0.000 claims abstract description 3
- 230000009471 action Effects 0.000 claims description 24
- 230000000694 effects Effects 0.000 claims description 19
- 239000011248 coating agent Substances 0.000 claims description 10
- 238000000576 coating method Methods 0.000 claims description 10
- 238000003384 imaging method Methods 0.000 claims description 7
- 230000003190 augmentative effect Effects 0.000 claims description 6
- 230000003595 spectral effect Effects 0.000 claims description 5
- 230000009467 reduction Effects 0.000 claims description 3
- 230000033001 locomotion Effects 0.000 abstract description 17
- 238000004458 analytical method Methods 0.000 abstract description 7
- 230000003993 interaction Effects 0.000 abstract description 6
- 230000036541 health Effects 0.000 abstract description 4
- 210000000988 bone and bone Anatomy 0.000 abstract description 2
- 238000005516 engineering process Methods 0.000 description 47
- 230000006870 function Effects 0.000 description 27
- 238000000034 method Methods 0.000 description 16
- 239000000463 material Substances 0.000 description 15
- 230000008569 process Effects 0.000 description 9
- 239000003086 colorant Substances 0.000 description 7
- 238000013461 design Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 239000002537 cosmetic Substances 0.000 description 5
- 239000011521 glass Substances 0.000 description 5
- 210000003128 head Anatomy 0.000 description 5
- 238000011161 development Methods 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000002708 enhancing effect Effects 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 230000006855 networking Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000007634 remodeling Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000037147 athletic performance Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000013499 data model Methods 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000009189 diving Effects 0.000 description 1
- 230000003631 expected effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 239000007943 implant Substances 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000009545 invasion Effects 0.000 description 1
- 238000004215 lattice model Methods 0.000 description 1
- 238000013178 mathematical model Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000005693 optoelectronics Effects 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000000059 patterning Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000009288 screen filtration Methods 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000000392 somatic effect Effects 0.000 description 1
- 230000009182 swimming Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
- 238000011179 visual inspection Methods 0.000 description 1
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本实用新型提供一种基于自然用户界面的互联网智能镜,主要由底座、方形镜框、以及位于方形镜框内的滤波单透镜、发光屏幕和主板组成,滤波单透镜位于智能镜面对用户的一面,发光屏幕、主板位于滤波单透镜的后侧,其中主板位于发光屏幕的下方;在方形镜框正面上方从左至右依次有扬声器A、红外线发射器、彩色摄像机、深度感应器、麦克风、扬声器B。使用时面对镜面可以通过语音、手势和智能镜互动,实现测量身体数据,虚拟试穿等体验。也可以听懂人类语言,看懂人类操作手势的含义,面对镜子时,通过语音控制来查阅互联网信息,通过手势控制来更换虚拟服饰决定当天的穿着,记录和分析身体骨骼的运动轨迹,辅助练习各类身体姿势要求高的运动项目。
Description
技术领域
本实用新型涉及一种镜子,尤其是一种基于自然用户界面交互和互联网技术的智能镜。
背景技术
自然用户界面是指一类无形的用户界面,只需要人们以最自然的交流方式(如语言和身体姿势及动作)与机器互动。特别是触控技术和体感技术将使人机交互变得更加自然直观,更为人性化。
人体三维扫描***也称三维人体测量***,人体数字化***,广泛应用于服装,动画,人机工程以及医学等领域,是发展人体(人脸)模式识别,特种服装设计(如航空航天服,潜水服),人体特殊装备(人体假肢,个性化武器装备),以及开展人机工程研究的理想工具。
人体全身(半身)扫描***获取的人体点云数据包含了完整人体各个部位的准确的三维信息。基于人体点云数据即点云数据模型可生成完整的人体网格模型即面片模型;基于人体点云数据,通过人体参数化数字处理软件可获得不同部位的准确人体参数尺寸。
机器的视觉反应***-体感控制,在于人们可以很直接地使用肢体动作,与周边的装置或环境互动,而无需使用任何复杂的控制设备,便可让人们身历其境地与内容做互动。 举个例子,当你站在一台电视前方,假使有某个体感设备可以侦测你手部的动作,此时若是我们将手部分别向上、向下、向左及向右挥,用来控制电视台的快转、倒 转、暂停以及终止等功能。并且,随着技术的进步,体感控制还可以用在商场的服装店, 甚至用户可以在网上随意试穿自己喜欢的衣服;在高尔夫练习场配合用户练习挥杆(纪录并回放用户挥杆全过程的身体骨骼运动轨迹),等等。
机器的听觉反应***-语音控制,与机器进行语音交流,让机器明白你说什么,这是人们长期以来梦寐以求的事情。语音识别技术就是让机器通过识别和理解过程把语音信号转变为相应的文本或命令的技术。语音识别技术主要包括特征提取技术、模式匹配准则及模型训练技术三个方面。语音识别技术车联网也得到了充分的引用,例如在翼卡车联网中,只需按一键,通过客服人员口述即可设置目的地直接导航,安全、便捷。
单向透视玻璃,是一种对可见光具有很高反射比的特种玻璃,单向透视玻璃在使用时反射面必须是迎光面或朝向室外一侧。当室外比室内明亮时,单向透视玻璃与普通镜子相似,室外看不到室内的景物,但室内可以看清室外的景物。而当室外比室内昏暗时,室外可看到室内的景物,且室内也能 看到室外的景物,其清晰程度取决于室外照度的强弱。单向透视玻璃主要适用于隐蔽性观察窗、孔等。
增强现实技术(Augmented Reality Technique,简称AR),是在虚拟现实基础上发展起来的新技术,是通过计算机***提供的信息增加用户对现实世界感知的技术,并将计算机生成的虚拟物体、场景或***提示信息叠加到真实场景中,从而实现对现实的“增强”。同时,由于用于与真实世界的联系并未被切断,交互方式也就显得更加自然。
和VR(虚拟现实技术)比较起来,在AR(增强虚拟现实技术)中,真实的周遭环境扮演一个非常重要的角色。AR(增强虚拟现实技术)主要的目的是把人造的虚拟对象,置于真实的环境当中,或是真实环境的实时影片。
综合以上背景技术,目前市场上已经存在诸多集成了红外扫描、体感控制、3D建模和3D动作控制等技术的应用和发明,例如基于Kinect的体感游戏,虚拟试衣间等等,这些应用其主要采集输入视频数据的设备为体感摄像头、输出设备则以电脑和电视为主。
但是,由于受到视频采集设备的分辨率限制,服装试衣等应用目前尚无法达到“高度清晰”的效果,一旦真实的输出画质很差,那么便无法实现AR或VR的预计效果,而目前市场上的所有虚拟试衣间都是用电视画面结合服图案来作为结果输出的,画面分辨率普遍很低。
综上所述,这类试衣***的应用就只能称之为“聊胜于无”,并不能带给用户最佳体验,无法让用户真正的感受到仿佛是站在“镜子”面前来进行一些虚拟服饰试穿。
类似于试衣,目前在门店试妆,姿势矫正所使用的镜子,均不能带给用户最佳的体验。在阅读新闻方面,目前可以通过触碰电脑屏幕来获取,但不能与镜子这样的物体进行仿真互动交流。
发明内容
为了解决上述技术问题,本实用新型提供一种基于自然用户界面的互联网智能镜,智能镜本身具有传统镜子的反射功能,通过在其滤波单透镜基础上涂上光谱滤波涂层,这样能够根据镜子前后侧光线变化实现单面成像,实现智能镜的透射功能,通过透射和反射技术,实现将现实与屏幕影像的融合。
本实用新型解决其技术问题所采取的技术方案是:
一种基于自然用户界面的互联网智能镜,主要由底座、方形镜框、以及位于方形镜框内的滤波单透镜、发光屏幕和主板组成。
所述滤波单透镜位于智能镜面对用户的一面,发光屏幕、主板位于滤波单透镜的后侧,其中主板位于发光屏幕的下方;在方形镜框正面的上方从左至右依次有扬声器A、红外线发射器、彩色摄像机、深度感应器、麦克风、扬声器B;在所述主板下方依次有音频输入接口、视频输入接口和电源状态显示灯。
所述滤波单透镜是在单透镜基础上涂有一层光谱滤波涂层,能够根据镜子前后侧光线变化实现单面成像。在使用时将其内部一侧光线控制在最黑暗的状态,以保证高清、高还原的成像效果。
所述光谱滤波涂层位于在滤波单透镜内侧,即与发光屏幕连接面上,将发光屏幕发出的彩色影像中不需要的单色光(如黑色光)过滤掉。这样站在单透镜前通过自然光的反射可以看到自身及周围环境的镜像,叠加上发光屏滤过后的衣服素材效果,即可形成衣服素材与真实人体影像的叠加,实现增强技术能达到的换装体验。
所述发光屏幕是普通的电子显示屏,可以用电视机显示屏或背部投影仪替代,连接电脑主机,程序运行后,试衣软件会显示在屏幕上,经过滤光处理,衣服等素材会投在的单透镜上,与镜前的人体叠加显示在镜中,实现高清换装效果。
所述主板,是微型电脑主机,置于发光屏幕下方的底座中。
所述扬声器在镜框上方左右两侧各有一个,实现语音播报功能。
所述红外线发射器,能够捕捉镜头前发热物体,即人体,并根据人体所作出的不同动作来识别并完成相应指令。
所述彩色摄影机,采集镜头前画面数据,使得活动人体真实的影射在镜子后面的发光屏上,据此附着经过处理的3D服装投射在镜子上,以达成增强现实的效果。
摄像机是进行光电转换的设备,他利用三基色原理,通过光学***,把彩色的景物的光像分解为红绿蓝三种基本光像,由摄像器件完成光信号到电信号的转换,憨厚进项信号处理,编码成彩色信号输出到显示器,再由显示器将将三基色的电信号,按照电信号的不同比例显示出不同颜色,产生彩色图像被用户看到。
所述深度感应器,捕捉镜前动态人体,进行即时三维扫描,获取人体身材的各项数据,保证完整真实的还原镜前不同用户的不同身材。
所述麦克风, 用来收集用户声音信息,且将声音信号转换成电信号以供电脑主机识别,例如,“天气预报”则***自动弹出天气预报窗口,播报当日天气状况。
主机通过麦克风采集到的声音数据,通过算法识别声音内容,通过声音内容实现同能的操作。
所述扬声器,是将电脑主机的电信号转化成声音信号被用户听见主机输出提示说明的电信号给扬声器,扬声器通过转化让人们听到提示语言。
所述音频输入、视频输入接口,通过该接口将捕捉机器面前的声音影像信息录入到主机中进行处理。
所述电源状态显示灯,指示机器关机和待机状态。
本实用新型的有益效果是,
本实用新型将体感试衣***和单面透镜技术结合,给用户身临其境的试衣体验,用户的感受就是在一面镜子面前虚拟的更换身上的衣服(服装3D图案),
1、只要用户站在它面前,它就能展示店内各种衣服穿在用户身上的3D效果。如果用户不满意,也只需挥挥手,碰碰智能镜中的虚拟按钮就可以实现换装;
2、它可以让用户在挑选衣服时,不用非得穿上才可以看到效果,体感技术可以察觉用户的一举一动,比如用户转身,就可以看到背后的衣服效果;
3、彩色摄影机可以监测到用户的一举一动,当他们转身的时候,机器可以自动分辨,同时将衣服的背面展示出来;
4、镜子背后可以通过电视或背投技术投放3D服装,用户可以在镜子中及时的感受自己试装的效果,同时还可以通过手势来来控制整个换衣服的过程。
另外,本实用新型还具有互联网新闻、天气预报、更换妆容饰品假发、拍照分享等功能,均可以一键操作或语音操作。
本实用新型的发光屏幕可以投放标准的动作姿势,因此本实用新型还具有纠正运动或舞蹈姿势的功能。
附图说明
下面结合附图和实施例对本实用新型进行进一步说明。
图1为本实用新型正面结构示意图。
图2为本实用新型背面结构示意图。
图3为本实用新型侧面结构示意图。
图4是本实用新型立体结构示意图。
图5是本实用新型成像原理图。
图6是本实用新型进行试衣效果图。
图7是本实用新型进行高尔夫姿势矫正效果图。
图8是本实用新型进行更换口红效果图。
图9是本实用新型进行更换眼镜效果图。
图10是本实用新型进行更换假发效果图。
具体实施方式
下面结合附图对本实用新型进行进一步说明。
如图1和图3所示,本实用新型主要由底座1、方形镜框2、以及位于方形镜框内的滤波单透镜3、发光屏幕4和主板5组成。
在方形镜框2正面的上方从左至右依次有扬声器A21、红外线发射器22、彩色摄像机23、深度感应器24、麦克风25、扬声器B26。
如图2所示,在所述主板5下方依次有音频输入接口51、视频输入接口52和电源状态显示灯53。
图4是本实用新型的立体效果示意图。
图5是本实用新型成像原理图,在滤波单透镜3内侧即与发光屏幕4连接面,涂上一层光谱滤波涂层31,将发光屏幕4发出的彩色影像中不需要的单色光(如黑色光,箭头a)过滤掉,没有过滤的部分(箭头b)穿过滤波单透镜,投射到用户一侧,自然光通过镜面进行反射到用户一侧(箭头c),这样用户的镜像和发光屏幕过滤后的影像叠加到一起,其效果如图6所示,在图中d为人物头像镜面反射成像,e为服装彩色背投影像,即试衣效果。
如图7所示,是本实用新型的另一个应用的效果图,即作为姿势矫正镜,通过发光屏幕展现标准的运动姿势,并以此与镜前的人的姿势进行吻合度比对,实现纪录和分析用户做出的各类动作姿势,协助用户纠正各类对身体姿势要求很高的运动项目,图中示意的是高尔夫姿势。
图8-10是本实用新型的门店试妆镜效果图,通过kinect2的深度识别人脸功能,本专利试衣镜还可应用在化妆品饰品门店中,一键更换不同颜色的口红(f)、眼镜(g)以及假发(h)。
本专利除了具有试衣镜功能外,还具有以下三方面的应用,详细介绍如下:
应用一,门店试妆镜功能:
本专利还可应用在化妆品饰品门店中,一键更换不同颜色的口红、眼镜以及假发(如图8—图10所示)。门店中,女士们在购买口红和假发等化妆品和饰品时,常常会感到涂卸和穿戴都非常麻烦,有了智能试妆镜,麻烦的试装过程会变得轻松许多。智能镜后接电脑主机,电脑获取kinect2.0 的红外深度数据扫描人***置,同过深度图像的解析分析计算出头部的位置,同时获取kinect2.0 高清摄像头的数据,通过头部位置截取人脸图像,通过人脸识别算法计算出人面部的五官的位置。该技术可捕捉顾客的面部特征,顾客只需点击屏幕上的口红颜色,摄像头就能通过将眼影“涂抹”在顾客嘴部的准确位置,顾客转动头部就能从不同角度观察上妆的效果,不仅完全省却了顾客试妆的麻烦,也帮助化妆品零售商节省了准备小样和化妆工具的费用。同时,我们还可以在眼部、头部更换数千款不同的眼镜、眼影以及假发素材,素材与真实人像结合,不仅可以看到逼真的效果,更可以快速的从众多的产品中找到自己喜欢的某几款款,再涂上嘴巴体验真实效果。平日女士们逛街买口红假发等产品,往往因为太过于麻烦,而不能试遍所有颜色款式,而本专利智能镜的这一试妆功能方便了用户体验产品的不同款式颜色,同时也大大提高了购买效率。
应用二,姿势矫正镜功能:
姿势矫正功能主要利用了摄像头的动态捕捉、体感控制等功能。本专利中所应用到的kinect2.0版本摄像头是微软公司在10年公布的一款3D体感摄像机(微软最初开发代号为“Project Natal”),它不需要使用任何控制器,依靠相机捕捉三维空间中用户的运动,其植入了即时动态捕捉、影像辨识、麦克风输入、语音辨识等功能,纠正运动与舞蹈姿势的功能很大程度上基于kinect的这些工作原理。这其中,摄像头起到了很大的作用,它负责捕捉人肢体的动作,然后其内置程序教它如何去识别、记忆、分析处理这些动作。从技术上来说,kinect的体感技术是同类型体感设备中最为先进的,它不只是一个摄像头,虽然它一秒可以捕捉30次,但是这只是整个***的一部分。除此之外,kinect还有一个传感器负责探测力度和深度、四个麦克风负责采集声音。它也不仅仅是一个控制器,kinect会将你所处的房间形成一个3D影像,然后分析你身体的运动,因此整个***是着眼于你所处的全部真实环境,并形成一个综合的控制***,真正做到“你的身体就是控制器”。应用在本专利中的kinect2.0不仅仅是一个放置在房间里的静态传感器,它可以捕获人体运动并做出数据分析,还可以让用户随心所欲的以声音和动作来控制整个***的运作。
国内外一些体育运动的训练和比赛中,特别是一些须要高速转动或跑动的运动项目,追求进步和精确度的时候都应用到了高速摄像仪。例如高尔夫球,田径运动,游泳,体操等等。对每一项运动来说,正确的运动姿势和动作是练***的重要因素。
高速摄像仪在满幅分辨率2560*1920下最高速度可达2000帧/秒甚至更高。然而,这种拍摄仪器只能做到记录和还原动作,并不能提供标准动作的精确参照与对比,教练和练习者需要事后再利用慢速或每帧回播功能,从而人为对比动作的不足找出原因、纠正错误动作,但是肉眼观察并不能保证动作改进的精准度,这一点互联网智能镜可以解决。
不是千家万户的运动爱好者都能够有教练的全程陪同与拍摄,在我们的互联网智能镜项目中,和捕捉动作的高速摄像仪雷同,虚拟试衣镜中的高速红外数据采集技术和人体骨骼识别技术可以代替摄像仪捕捉镜头前人体完成一个动作的整套骨骼运动的红外数据、捕捉骨骼运动轴。Kinect2.0中的红外发射器(Infrared Projector)发射出镭射光,通过红外发射器镜头前的光栅(diffuser),均匀地投射到测量空间,测量空间的粗糙物体反射,形成随机的散斑,再通过红外摄影机(Infrared Camera)记录空间的每个散斑,通过晶片的计算便得到3D深度图像,从而得出并记录下测量空间中完整的人体3D信息。同时主机接收到上述的摄像机采集的彩色信号经过处理显示在荧光屏上,通过kinect接收的3D深度图像经过一系列算法,计算出人体(骨骼)位置,将衣服模型穿在彩色图像的人身上并记录人体骨骼的一系列运动。将其完整的记录下来后将一个动作分解成数千帧做慢镜头回放,在这个过程中我们可以看到每个动作每一帧与标准动作的重叠和合成,经过电脑的运算与比对,分析拍摄下来的每一帧用户动作与标准动作的细微差别,标记出过程中的不规范动作,保证动作改进精确度的同时还可达到无需教练,全程自助便可纠正自己在运动中不规范动作的目的。
Kinect的功用并不局限于体感控制,它还具备3D纵深扫描以及人脸识别技术,本专利中所述新闻镜即使用了这一技术。面部识别使用kinect摄像机作为识别信息获取装置。以非接触的方式获取识别对象的面部图像,计算机***在获取图像后与数据库图像进行比对后完成识别过程。面部识别是基于生物特征的识别方式,与指纹识别等传统的识别方式相比,具有实时、准确、高精度、易于使用、稳定性高、难仿冒、性价比高和非侵扰等特性,较容易被用户接受。人脸识别技术中被广泛采用的区域特征分析算法,它融合了计算机图像处理技术与生物统计学原理于一体,利用计算机图像处理技术从视频中提取人像特征点,利用生物统计学的原理进行分析建立数学模型,即人脸特征模板。之后将已建成的人脸特征模板与被测者的面像进行特征分析,根据分析的结果来给出一个相似值。通过这个值即可确定是否为同一人。基于此技术,本专利可以识别用户身份,识别通过后利用体感和声控技术分辨用户指令,将其转换为计算机可识别的代码控制***做出相应应答,计算机同时还相当于我们日常所使用的PC连接网络,实时连接互联网云端获取大量网络资讯并保持同步更新,经过处理后成为镜中可被用户获取的新闻内容。用户通过手势与语音控制***播送新闻天气(通过***的扬声器发出声音、后置放光屏播放画面)或切换到姿势矫正镜、快速换装等其他功能。
应用三,新闻天气镜功能:
相信很多人都在影视剧中看到过一个桥段:演员在跑步机或其他运动器材上锻炼身体的同时带着耳机收听音乐或者看电视中的新闻,在我们的虚拟试衣镜中,电视机、音乐播放器等外置设备被电脑主机所替代,需要使用者反复手动操作的步骤也被试衣镜的语音及体感控制技术替代,省去了摆放外置设备和伸手控制设备的麻烦。
举个例子:清晨起床换装或者在门店中对镜试装的时候,当用户在试衣镜中找寻适合自己的服装的同时,可以对着配备了音频采集***的试衣镜用发声的方式来控制试衣镜(语音控制技术)调出当日新闻或天气信息以供用户用手势选择(体感控制技术)阅读观看,也可以语音控制后台搜索出自己喜欢的音乐,伴随着动听的音乐对镜运动调整不规范姿势。
增强现实的虚拟试衣、高速红外数据采集技术纠正运动动作、语音体感控制查阅收听信息三大功能即为互联网智能镜的主要功能,这些功能的实现,依托于数种互联网新兴技术的糅合应用。将科技带入现实生活、以创新推动极致体验,互联网智能镜,不仅仅可以为生活增添更多的便利,更是标志着一个全新生活方式的到来。
本实用新型具体实施过程如下:
该部分分为三个实施步骤:软件开发、硬件组装和服务器的架设。
1.软件开发:
软件开发所涉及到的编程软件语言及开源库有: Visul studio2010、C++、C#、openNI、openCV、openGL、Unity3D以及webservice。
软件开发所使用的环境:利用windows平台作为软件开发大环境,以确保软件可以在winxp、win7、win8等使用最广泛的电脑***中使用。
涉及到的编程软件及语言:使用微软公司推出的Visul studio2010为主要编程软件,它是目前最通用的Windows平台应用程序开发环境,支持开发面向Windows 7的应用程序。编程主要语言为C++,C++应用较为广泛,是一种静态数据类型检查的,支持多重编程的通用程序设计语言。openNI、openCV、openGL等则为程序所使用的主要开源库。
3D版本制作:主要使用Unity3D软件,该软件是由Unity Technologies开发的一个让创建诸如三维视频游戏、建筑可视化、实时三维动画等类型互动内容的多平台的综合型游戏开发工具,可运行在Windows 和Mac OS X下,类似于Director,Blender game engine, Virtools 或 Torque Game Builder等利用交互的图型化开发环境为首要方式的软件其编辑器,所制成的3D素材可发布至Windows、Mac、Wii、iPhone、Windows phone 8和Android平台,二维衣服素材等可由Unity3D编辑为绑定人体骨骼的3D服装放进软件中供用户使用。
软件和服务器接口开发:利用webservice和C#编写连接软件和服务器的接口,确保软件及其中各种素材可以上传至服务器并由服务器调用。
2 .硬件组装:
高清3D版本的智能试衣镜所需硬件设备:Kinect 2代、配备win8(win7、winXP)***的小型电脑主机(主机配置:i3处理器、8G内存、GT×860显卡或以上、1TB硬盘)、1117×651mm电视机显示屏或同等大小的背部投影仪、显示屏(或背投)同等大小的滤光膜一块、1300×700mm大小单透镜一块、切割板材若干。
组装方式:将电视机(或背投)与kinect 2代摄像头连接在电脑主机上,摄像头放置于电视机(或背投)顶,面对用户,电视机(或背投)竖置于主机上,屏幕外部包裹一层特制滤光膜将其三者放置在利用坚固板材打造的容器中,设备面对用户的最外部用同等大小的单透镜密封即可。
面对用户的摄像头相当于整套设备的“眼睛”,用于采集用户身体的红外数据,其中所带深度感应器则可捕捉用户不同的动作,将这些数据实时反馈给后台,衣服便会贴在用户身体上,通过电视机(或背投)屏幕前的滤光膜,衣服素材会投射在单透镜上,被设备面前站立的用户看到,实现“智能穿衣”的效果。同时,麦克风和深度感应器可以获取用户的语音和动作信息,根据用户不同的操作和语音指令完成不同的功能切换,以体感交互的方式实现“挥手”换装和收听新闻等功能。
3. 服务器的架设:
服务器是架设在线上与后台的桥梁,用于沟通各种客户端设备,它可以发布通用的信息公告到各个客户端,也可以从客户端收集各种有价值的数据,甚至可以打通客户端和客户端之间的屏障。
所架设服务器配置要求(可供约100台设备共享):
云主机配置 2核CPU+4G内存+200GB硬盘+10M带宽 3台
4核CPU+8G内存+200GB硬盘+10M带宽 2台
带宽类型 云主机组件10M带宽 2台
IP地址 云主机组件IP地址 10个
软件素材更新
软件中所应用的所有服装素材及新闻、分享等功能均上传保存在后台服务器,由后台程序控制各种新素材(软件版本)的更新发布、旧素材(软件版本)的下架删除等,后台服务器可以保证整个软件在设备上的正常运行。
使用设备验证
服务器在整个项目运行中起到门卫的作用,所有使用的设备必须经过管控服务器的后台工作人员的授权才可正常运行,否则无法访问服务器上的任何素材,其所使用时所产生数据也不会被服务器记录与认可。
数据行为分析
服务器可记录其授权使用的设备所产生的各种人流、试穿次数等数据,并在后台将其分析生成直观可见的图表。
监控使用情况
设备开关机、运行中以及运行中是否出现故障均可体现在后台服务器上,且后台操作者可使用服务器对软件进行修补和管理。
本实用新型的核心技术方案是建立在自然用户界面的交互(语音控制技术、体感控制技术)、3D人体模型扫描和控制技术、单透玻璃、增强现实技术、互联网数据云加密技术、互联网服务技术等诸多应用技术之上的智能体感试衣镜。
通过硬件设备和软件服务技术的相结合,为用户制定出一套完整的互动型虚拟试衣解决方案,它主要由试衣终端,内容管理服务器,两大部分组合而成。不仅涵盖了普通的试衣镜功能、多媒体信息发布功能,还可以整合衣服属性展示、打折促销宣传、多机联网管理等功能,同时还能接入互联网、微博等新兴媒体。“智能体感试衣镜”通过全高清摄像头实时捕捉现场人物影像,并结合体感探测装置将服装的2D图片或3D模型“穿着”到顾客的影像上,实现虚拟服装与真实顾客身形的完美融合。实现了当用户站在这虚拟试衣镜前时,装置将自动显示试穿新衣以后的三维图像,而用户要做的只是简单的挥挥手旋转屏幕上的按钮,便可以轻松换衣。
综上所述,本实用新型具备两大特点:
1. 智能镜和普通镜子的不同点在于:智能镜相当于一个智能机器人,它可以听懂人的语言,看懂人的手势,通过分辨人类不同的语言和手势来为人提供各种普通镜子无法实现的互联网信息(图文、语音、视频等)服务。
2. 智能镜和普通电视的不同点则在于:他是镜子,可以反射出“真实”的世界,提供电视低清分辨率无法达到的高清和身临其境的带入感,让AR和VR技术得到更充分的应用,为用户带来绝佳的视觉体验和换装感受。
本领域的技术人员可以对本实用新型进行各种改型和改变。因此,本实用新型覆盖了落入所附的权利要求书及其等同物的范围内的各种改型和改变。
Claims (6)
1.一种基于自然用户界面的互联网智能镜,主要由底座、方形镜框、以及位于方形镜框内的滤波单透镜、发光屏幕和主板组成,其特征是:所述滤波单透镜位于该智能镜面对用户的一面,发光屏幕、主板位于滤波单透镜的后侧,其中主板位于发光屏幕的下方;在方形镜框正面的上方从左至右依次有扬声器A、红外线发射器、彩色摄像机、深度感应器、麦克风、扬声器B;所述滤波单透镜是在单透镜基础上涂有一层光谱滤波涂层,涂层位于滤波单透镜内侧与发光屏幕连接面上,能够将发光屏幕发出的彩色影像中不需要的单色光过滤掉,所述滤波单透镜能够根据镜子前后侧光线变化实现单面成像;所述红外线发射器能够捕捉镜头前发热物体,即人体,并根据人体所作出的不同动作来识别并完成相应指令;所述彩色摄影机,采集镜头前画面数据,使得活动人体真实的影射在镜子后面的发光屏幕上,据此附着经过处理的3D服装或人体骨骼结构投射在镜子上,以达成增强现实的效果;所述深度感应器,捕捉镜前动态人体行为,进行即时三维扫描,获取人体身材的数据,保证完整真实的还原镜前不同用户的不同身材。
2.根据权利要求1所述的基于自然用户界面的互联网智能镜,其特征是:在所述主板下方依次有音频输入接口、视频输入接口和电源状态显示灯。
3.根据权利要求1所述的基于自然用户界面的互联网智能镜,其特征是:所述发光屏幕是普通的电子显示屏,可以用电视机显示屏或背部投影仪替代。
4.根据权利要求1所述的基于自然用户界面的互联网智能镜,其特征是:所述主板,是微型电脑主机,置于发光屏幕下方的底座中。
5.根据权利要求1所述的基于自然用户界面的互联网智能镜,其特征是:所述扬声器在镜框上方左右两侧各有一个,实现语音播报功能。
6.根据权利要求1所述的基于自然用户界面的互联网智能镜,其特征是:所述麦克风用来收集用户声音信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201420798478.9U CN204576413U (zh) | 2014-12-17 | 2014-12-17 | 一种基于自然用户界面的互联网智能镜 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201420798478.9U CN204576413U (zh) | 2014-12-17 | 2014-12-17 | 一种基于自然用户界面的互联网智能镜 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN204576413U true CN204576413U (zh) | 2015-08-19 |
Family
ID=53869023
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201420798478.9U Expired - Fee Related CN204576413U (zh) | 2014-12-17 | 2014-12-17 | 一种基于自然用户界面的互联网智能镜 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN204576413U (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105761117A (zh) * | 2016-03-15 | 2016-07-13 | 成都爆米花信息技术有限公司 | 一种虚拟试衣扫描检测装置 |
CN106773852A (zh) * | 2016-12-19 | 2017-05-31 | 北京小米移动软件有限公司 | 智能镜子及其工作控制方法、装置 |
CN106909538A (zh) * | 2015-12-21 | 2017-06-30 | 腾讯科技(北京)有限公司 | 使用效果展示方法及装置 |
CN107808128A (zh) * | 2017-10-16 | 2018-03-16 | 深圳市云之梦科技有限公司 | 一种虚拟形象重建人体五官测量的方法及*** |
WO2018060232A1 (en) * | 2016-09-27 | 2018-04-05 | Koninklijke Philips N.V. | Apparatus and method for supporting at least one user in performing a personal care activity |
CN108294561A (zh) * | 2017-01-11 | 2018-07-20 | 张庆东 | 一种美容镜装置 |
CN108711373A (zh) * | 2018-05-11 | 2018-10-26 | 陕西铁路工程职业技术学院 | 一种电子信息显示*** |
CN109619800A (zh) * | 2018-12-14 | 2019-04-16 | 深圳市丰利源节能科技有限公司 | 一种语音智能化妆镜 |
TWI714362B (zh) * | 2019-11-22 | 2020-12-21 | 中國科技大學 | 生態系統學習裝置 |
WO2022110422A1 (zh) * | 2020-11-27 | 2022-06-02 | 广州视源电子科技股份有限公司 | 健身镜 |
-
2014
- 2014-12-17 CN CN201420798478.9U patent/CN204576413U/zh not_active Expired - Fee Related
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106909538A (zh) * | 2015-12-21 | 2017-06-30 | 腾讯科技(北京)有限公司 | 使用效果展示方法及装置 |
CN105761117A (zh) * | 2016-03-15 | 2016-07-13 | 成都爆米花信息技术有限公司 | 一种虚拟试衣扫描检测装置 |
WO2018060232A1 (en) * | 2016-09-27 | 2018-04-05 | Koninklijke Philips N.V. | Apparatus and method for supporting at least one user in performing a personal care activity |
CN106773852A (zh) * | 2016-12-19 | 2017-05-31 | 北京小米移动软件有限公司 | 智能镜子及其工作控制方法、装置 |
CN108294561A (zh) * | 2017-01-11 | 2018-07-20 | 张庆东 | 一种美容镜装置 |
CN107808128A (zh) * | 2017-10-16 | 2018-03-16 | 深圳市云之梦科技有限公司 | 一种虚拟形象重建人体五官测量的方法及*** |
CN107808128B (zh) * | 2017-10-16 | 2021-04-02 | 深圳市云之梦科技有限公司 | 一种虚拟形象重建人体五官测量的方法及*** |
CN108711373A (zh) * | 2018-05-11 | 2018-10-26 | 陕西铁路工程职业技术学院 | 一种电子信息显示*** |
CN109619800A (zh) * | 2018-12-14 | 2019-04-16 | 深圳市丰利源节能科技有限公司 | 一种语音智能化妆镜 |
CN109619800B (zh) * | 2018-12-14 | 2022-06-28 | 深圳市丰利源节能科技有限公司 | 一种语音智能化妆镜 |
TWI714362B (zh) * | 2019-11-22 | 2020-12-21 | 中國科技大學 | 生態系統學習裝置 |
WO2022110422A1 (zh) * | 2020-11-27 | 2022-06-02 | 广州视源电子科技股份有限公司 | 健身镜 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104461006A (zh) | 一种基于自然用户界面的互联网智能镜 | |
CN204576413U (zh) | 一种基于自然用户界面的互联网智能镜 | |
CN105556508B (zh) | 虚拟镜子的装置、***和方法 | |
CN107154069B (zh) | 一种基于虚拟角色的数据处理方法及*** | |
US10403036B2 (en) | Rendering glasses shadows | |
US5325473A (en) | Apparatus and method for projection upon a three-dimensional object | |
CN109671142B (zh) | 一种智能美妆方法及智能美妆镜 | |
Magnenat-Thalmann et al. | Handbook of virtual humans | |
US20170032577A1 (en) | Real-time virtual reflection | |
EP3243331B1 (en) | Devices, systems and methods for auto-delay video presentation | |
CN107231531A (zh) | 一种网络虚拟现实技术与实拍结合影视制作*** | |
CN109035373A (zh) | 三维特效程序文件包的生成及三维特效生成方法与装置 | |
US10755489B2 (en) | Interactive camera system with virtual reality technology | |
CN109696961A (zh) | 基于vr技术的文物虚拟拆装导赏实现***及方法、介质 | |
JP2010507854A (ja) | ビデオイメージシーケンスを仮想シミュレーションする方法及び装置 | |
CN108762508A (zh) | 一种基于vr体验舱的人体与虚拟人合成***及方法 | |
CN110121103A (zh) | 视频自动剪辑合成的方法及装置 | |
CN108648061A (zh) | 图像生成方法和装置 | |
CN114821675B (zh) | 对象的处理方法、***和处理器 | |
Wang et al. | Wuju opera cultural creative products and research on visual image under VR technology | |
CN106780761A (zh) | 基于增强现实技术的自闭症儿童兴趣点信息采集*** | |
CN112218111A (zh) | 图像的显示方法和装置、存储介质和电子设备 | |
CN108733216A (zh) | 一种基于立体专属名片的企业展示交易平台 | |
CN113450448A (zh) | 图像的处理方法、装置和*** | |
WO2023130715A1 (zh) | 一种数据处理方法、装置、电子设备、计算机可读存储介质及计算机程序产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20170905 Address after: 200241 Shanghai city Minhang District Zixing Road No. 588 2 Building 3 room 318 Patentee after: Shanghai, like me, Mdt InfoTech Ltd Address before: 200025 Shanghai city Luwan District Madang Road No. 83 Lane 437 Patentee before: Lu Chenhua |
|
TR01 | Transfer of patent right | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20150819 Termination date: 20201217 |
|
CF01 | Termination of patent right due to non-payment of annual fee |