CN106530406A - 增强及虚拟现实的光场光源定向法及前端设备 - Google Patents

增强及虚拟现实的光场光源定向法及前端设备 Download PDF

Info

Publication number
CN106530406A
CN106530406A CN201611086214.0A CN201611086214A CN106530406A CN 106530406 A CN106530406 A CN 106530406A CN 201611086214 A CN201611086214 A CN 201611086214A CN 106530406 A CN106530406 A CN 106530406A
Authority
CN
China
Prior art keywords
light source
headend equipment
colour disk
brightness
pixel colour
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611086214.0A
Other languages
English (en)
Inventor
伊恩·罗伊·舒
李建亿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TOYO Ltd
Original Assignee
TOYO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TOYO Ltd filed Critical TOYO Ltd
Priority to CN201611086214.0A priority Critical patent/CN106530406A/zh
Priority to US15/381,137 priority patent/US10002464B1/en
Publication of CN106530406A publication Critical patent/CN106530406A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/06—Ray-tracing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/50—Lighting effects
    • G06T15/506—Illumination models
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G09G5/026—Control of mixing and/or overlay of colours in general
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10—Intensity circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2215/00—Indexing scheme for image rendering
    • G06T2215/16—Using real world measurements to influence rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2012—Colour editing, changing, or manipulating; Use of colour codes
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/02—Improving the quality of display appearance
    • G09G2320/0242—Compensation of deficiencies in the appearance of colours
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0626—Adjustment of display parameters for control of overall brightness
    • G09G2320/0646—Modulation of illumination source brightness and image signal correlated to each other
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0666—Adjustment of display parameters for control of colour parameters, e.g. colour temperature

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Architecture (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种增强及虚拟现实的光场光源定向法及前端设备,该方法包括：A.识别目标标记，B.追踪目标标记；C.解析某个物体上的像素色盘；D.解析某个物体上的灰色地带；E.将数据推送到虚拟物体的光场，F、补偿调整虚拟物体成像：能够搜集周围环境因素诸如光源方向，使电脑合成的物体投射到现实环境中具有与现实一致的阴影，使得增强现实环境更具真实性，还原物体的真实效果。

Description

增强及虚拟现实的光场光源定向法及前端设备
技术领域
本发明涉及计算机仿真技术领域，具体是指增强及虚拟现实的光场光源定向法及***。
背景技术
现阶段增强现实没有直接将虚拟物体和现实环境的光场交互并做出相应的调整达到物体的真实度，这包括物体的影子变化，物体表面的融合度。只有通过硬件感光器或GPS和位置数据两种方式与现实环境进行交互。现阶段的增强现实缺点：
前期虚拟物体的3D数据采集要求极高，需处理的数据过大,造成反应速度慢。用户的设备如：AR头盔，移动端设备硬件需求高，成本高。内容制作复杂，条件限制多，效率低。依赖硬件解决方案，提高设备配置，造成设备过大，用户体验差。
发明内容
本发明的主要目的是提供一种增强及虚拟现实的光场光源定向法及前端设备,能够搜集周围环境因素诸如光源方向，使电脑合成的物体投射到现实环境中具有与现实一致的阴影，使得增强现实环境更具真实性，还原物体的真实效果。
本发明解决其技术问题所采用的技术方案是：
本发明提供一种增强及虚拟现实的光场光源定向法，其特征在于，包括步骤：
A.识别目标标记，具体为：通过前端设备采集图像数据，并识别所述采集图像数据，
B.追踪目标标记；具体为：前端设备追踪该图像数据中某个物体的位置；得到某个物体的表面形状和特征，通过算法绑定和引擎匹配联建，锁定该某个物体像素色盘；
C.解析某个物体上的像素色盘；具体为：采集所述被锁定的某个物体的像素色盘，解析并得到该像素色盘的数据值；
D.解析某个物体上的灰色地带；具体为：前端设备解析某个物体的BLOB，根据该BLOB判断该某个物体的灰色地带的折射角度、长度和亮度，并根据该灰色地带的折射角度、长度和亮度确定前端设备所在地的光源方向、前端设备与光源的之间距离和该光源的强弱；
E.将数据推送到虚拟物体的光场，具体为：根据某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱转换为前端设备可识别的数据后推送到虚拟物体的光场里；
F、补偿调整虚拟物体成像：通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体和虚拟物体的影子进行调整，以使虚拟场景更加逼真和清晰。
优选地，所述像素色盘的数据值包括：色相－色彩的基本属性、饱和度－色彩的纯度取0-100％数值，明度和亮度取0-100％数值。
优选地，所述步骤D具体为：把该折射角度、长度和亮度换成前端能够识别的代码，根据折射角度的识别代码中确定出前端设备所在地的光源方向，根据灰色地带长度的识别代码确定前端设备与光源的之间距离，根据灰色地带亮度的识别代码来确定该光源的强弱。
优选地，所述前端设备为手机或头盔眼镜。
优选地，通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体调整亮度、色相和饱和度；以及根据光源方向、前端设备与光源的之间距离、光源的强弱调整虚拟物体影子的折射角度、长度和亮度；虚拟场景更加逼真和清晰。
本发明实施例还提供一种前端设备，其包括：
识别目标标记单元，用于采集图像数据，并识别所述采集图像数据，
追踪目标标记单元；用于追踪该图像数据中某个物体的位置；得到某个物体的表面形状和特征，通过算法绑定和引擎匹配联建，锁定该某个物体像素色盘；
像素色盘解析单元，用于采集所述被锁定的某个物体的像素色盘，解析并得到该像素色盘的数据值；
灰色地带解析单元，用于解析某个物体的BLOB，根据该BLOB判断该某个物体的灰色地带的折射角度、长度和亮度，并根据该灰色地带的折射角度、长度和亮度确定前端设备所在地的光源方向、前端设备与光源的之间距离和该光源的强弱；
数据推送单元，用于根据某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱转换为前端设备可识别的数据后推送到虚拟物体的光场里；
补偿调整单元，用于通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体和虚拟物体的影子进行调整，以使虚拟场景更加逼真和清晰。
优选地，所述灰色地带解析单元，用于把该折射角度、长度和亮度换成前端能够识别的代码，根据折射角度的识别代码中确定出前端设备所在地的光源方向，根据灰色地带(影子)长度的识别代码确定前端设备与光源的之间距离，根据灰色地带亮度的识别代码来确定该光源的强弱。
优选地，所述像素色盘的数据值包括：色相－色彩的基本属性、饱和度－色彩的纯度取0-100％数值，明度和亮度取0-100％数值。
优选地，所述所述补偿单元，用于通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体调整亮度、色相和饱和度；以及根据光源方向、前端设备与光源的之间距离、光源的强弱调整虚拟物体影子的折射角度、长度和亮度；虚拟场景更加逼真和清晰。
优选地，所述前端设备包括手机或头盔眼镜。
实施本发明的技术方案，具有以下有益效果：本发明提供的方法和设备,解决了前端数据采集硬件配置过高，数据传输设备成本，显示端头盔设备用户体验差。解决虚拟物体不能融合现实环境的光场问题，影子不能准确跟踪，光线角度不明确，物体显示漂浮隔空问题；以及颜色因为光场影响而造成严重色差问题；以及虚体物体只能局限为数字化影像、投射真实物体制作成本高的问题。通过对现实环境光源方向的侦测，使得虚拟增强环境投射出来的物体与现实阴影方向一致，反光折射角度，亮度调整，增加投射物体在现实环境中的真实性。在不需要强大的前端数据采集设备，复杂的前期制作和后期成本高的终端显示硬件去完成虚拟物体的光场还原，可以实时把虚拟物体融合到现实环境的光场里，用户的肉眼体验更接近现实。
附图说明
图1为本发明实施例提供的方法流程图；
图2为本发明实施例提供的设备结构示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
本发明实施例提供一种增强及虚拟现实的光场光源定向法,如图1所示，包括步骤：
A.识别目标标记，具体为：通过前端设备采集图像数据，并识别所述采集图像数据，在本实施例中，更为具体的，所述前端设备为手机或头盔眼镜。
B.追踪目标标记；具体为：前端设备追踪该图像数据中某个物体的位置，该某个物体为该图像中的一个物体，如一副山水图中的山上的一只鸟，或者一棵树，就作为某一个物体，本实施例后面的描述内容均以该某一个物体为基础；得到某个物体的表面形状和特征，通过算法绑定和引擎匹配联建，锁定该某个物体像素色盘；
C.解析某个物体上的像素色盘；具体为：采集所述被锁定的某个物体的像素色盘，解析并得到该像素色盘的数据值；在本实施例中，更为具体的，所述像素色盘的数据值包括：色相－色彩的基本属性(H)、饱和度－色彩的纯度取0-100％数值(S)，明度(V)和亮度(L)取0-100％数值。
D.解析某个物体上的灰色地带；具体为：前端设备解析某个物体的BLOB(二进制大对象)，根据该BLOB判断该某个物体的灰色地带的折射角度、长度和亮度，并根据该灰色地带的折射角度、长度和亮度确定前端设备所在地的光源方向、前端设备与光源的之间距离和该光源的强弱；在本述实施例中，更为具体的，所述步骤D具体为：把该折射角度、长度和亮度换成前端能够识别的代码，根据折射角度的识别代码中确定出前端设备所在地的光源方向，根据灰色地带(影子)长度的识别代码确定前端设备与光源的之间距离，根据灰色地带亮度的识别代码来确定该光源的强弱。
E.将数据推送到虚拟物体的光场，具体为：根据某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱转换为前端设备可识别的数据后推送到虚拟物体(该某个物体所要被投射的出来图像)的光场里。
F、补偿调整虚拟物体成像：通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体和虚拟物体的影子进行调整，以使虚拟场景更加逼真和清晰。在本实施例中更为具体的，该步骤F为：通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体调整亮度、色相和饱和度；以及根据光源方向、前端设备与光源的之间距离、光源的强弱调整虚拟物体影子的折射角度、长度和亮度；虚拟场景更加逼真和清晰。
上述实施例提供的方法解决了前端数据采集硬件配置过高，数据传输设备成本，显示端头盔设备用户体验差。解决虚拟物体不能融合现实环境的光场问题，影子不能准确跟踪，光线角度不明确，物体显示漂浮隔空问题；以及颜色因为光场影响而造成严重色差问题；以及虚体物体只能局限为数字化影像、投射真实物体制作成本高的问题。通过对现实环境光源方向的侦测，使得虚拟增强环境投射出来的物体与现实阴影方向一致，反光折射角度，亮度调整，增加投射物体在现实环境中的真实性。在不需要强大的前端数据采集设备，复杂的前期制作和后期成本高的终端显示硬件去完成虚拟物体的光场还原，可以实时把虚拟物体融合到现实环境的光场里，用户的肉眼体验更接近现实。
本发明实施例还提供一种前端设备，如图2所示，其包括：
识别目标标记单元，用于采集图像数据，并识别所述采集图像数据，
追踪目标标记单元；用于追踪该图像数据中某个物体的位置；得到某个物体的表面形状和特征，通过算法绑定和引擎匹配联建，锁定该某个物体像素色盘；
像素色盘解析单元，用于采集所述被锁定的某个物体的像素色盘，解析并得到该像素色盘的数据值；
灰色地带解析单元，用于解析某个物体的BLOB(二进制大对象)，根据该BLOB判断该某个物体的灰色地带的折射角度、长度和亮度，并根据该灰色地带的折射角度、长度和亮度确定前端设备所在地的光源方向、前端设备与光源的之间距离和该光源的强弱；
数据推送单元，用于根据某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱转换为前端设备可识别的数据后推送到虚拟物体(该某个物体所要被投射的出来图像)的光场里；
补偿调整单元，用于通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体和虚拟物体的影子进行调整，以使虚拟场景更加逼真和清晰。
在上述实施例中，更为具体的，所述灰色地带解析单元，用于把该折射角度、长度和亮度换成前端能够识别的代码，根据折射角度的识别代码中确定出前端设备所在地的光源方向，根据灰色地带(影子)长度的识别代码确定前端设备与光源的之间距离，根据灰色地带亮度的识别代码来确定该光源的强弱。
在上述实施例中，更为具体的，所述像素色盘的数据值包括：色相－色彩的基本属性(H)、饱和度－色彩的纯度取0-100％数值(S)，明度(V)和亮度(L)取0-100％数值。
在上述实施例中，更为具体的，所述所述补偿单元，用于通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体调整亮度、色相和饱和度；以及根据光源方向、前端设备与光源的之间距离、光源的强弱调整虚拟物体影子的折射角度、长度和亮度；虚拟场景更加逼真和清晰。
在上述实施例中，更为具体的，所述前端设备包括手机或头盔眼镜。
上述实施例提供的设备解决了前端数据采集硬件配置过高，数据传输设备成本，显示端头盔设备用户体验差。解决虚拟物体不能融合现实环境的光场问题，影子不能准确跟踪，光线角度不明确，物体显示漂浮隔空问题；以及颜色因为光场影响而造成严重色差问题；以及虚体物体只能局限为数字化影像、投射真实物体制作成本高的问题。通过对现实环境光源方向的侦测，使得虚拟增强环境投射出来的物体与现实阴影方向一致，反光折射角度，亮度调整，增加投射物体在现实环境中的真实性。在不需要强大的前端数据采集设备，复杂的前期制作和后期成本高的终端显示硬件去完成虚拟物体的光场还原，可以实时把虚拟物体融合到现实环境的光场里，用户的肉眼体验更接近现实。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种增强及虚拟现实的光场光源定向法，其特征在于，包括步骤：
A.识别目标标记，具体为：通过前端设备采集图像数据，并识别所述采集图像数据，
B.追踪目标标记；具体为：前端设备追踪该图像数据中某个物体的位置；得到某个物体的表面形状和特征，通过算法绑定和引擎匹配联建，锁定该某个物体像素色盘；
C.解析某个物体上的像素色盘；具体为：采集所述被锁定的某个物体的像素色盘，解析并得到该像素色盘的数据值；
D.解析某个物体上的灰色地带；具体为：前端设备解析某个物体的BLOB，根据该BLOB判断该某个物体的灰色地带的折射角度、长度和亮度，并根据该灰色地带的折射角度、长度和亮度确定前端设备所在地的光源方向、前端设备与光源的之间距离和该光源的强弱；
E.将数据推送到虚拟物体的光场，具体为：根据某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱转换为前端设备可识别的数据后推送到虚拟物体的光场里；
F、补偿调整虚拟物体成像：通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体和虚拟物体的影子进行调整，以使虚拟场景更加逼真和清晰。
2.如权利要求1所述的方法，其特征在于，所述像素色盘的数据值包括：色相－色彩的基本属性、饱和度－色彩的纯度取0-100％数值，明度和亮度取0-100％数值。
3.如权利要求1所述的方法，其特征在于，所述步骤D具体为：把该折射角度、长度和亮度换成前端能够识别的代码，根据折射角度的识别代码中确定出前端设备所在地的光源方向，根据灰色地带长度的识别代码确定前端设备与光源的之间距离，根据灰色地带亮度的识别代码来确定该光源的强弱。
4.如权利要求1所述的方法，其特征在于，所述前端设备为手机或头盔眼镜。
5.如权利要求1所述的方法，其特征在于，通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体调整亮度、色相和饱和度；以及根据光源方向、前端设备与光源的之间距离、光源的强弱调整虚拟物体影子的折射角度、长度和亮度；虚拟场景更加逼真和清晰。
6.一种前端设备，其特征在于，包括：
识别目标标记单元，用于采集图像数据，并识别所述采集图像数据，
追踪目标标记单元；用于追踪该图像数据中某个物体的位置；得到某个物体的表面形状和特征，通过算法绑定和引擎匹配联建，锁定该某个物体像素色盘；
像素色盘解析单元，用于采集所述被锁定的某个物体的像素色盘，解析并得到该像素色盘的数据值；
灰色地带解析单元，用于解析某个物体的BLOB，根据该BLOB判断该某个物体的灰色地带的折射角度、长度和亮度，并根据该灰色地带的折射角度、长度和亮度确定前端设备所在地的光源方向、前端设备与光源的之间距离和该光源的强弱；
数据推送单元，用于根据某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱转换为前端设备可识别的数据后推送到虚拟物体的光场里；
补偿调整单元，用于通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体和虚拟物体的影子进行调整，以使虚拟场景更加逼真和清晰。
7.如权利要求6所述前端设备，其特征在于，所述灰色地带解析单元，用于把该折射角度、长度和亮度换成前端能够识别的代码，根据折射角度的识别代码中确定出前端设备所在地的光源方向，根据灰色地带(影子)长度的识别代码确定前端设备与光源的之间距离，根据灰色地带亮度的识别代码来确定该光源的强弱。
8.如权利要求6所述前端设备，其特征在于，所述像素色盘的数据值包括：色相－色彩的基本属性、饱和度－色彩的纯度取0-100％数值，明度和亮度取0-100％数值。
9.如权利要求6所述前端设备，其特征在于，所述所述补偿单元，用于通过某个物体的像素色盘的数据值、光源方向、前端设备与光源的之间距离、光源的强弱对虚拟物体调整亮度、色相和饱和度；以及根据光源方向、前端设备与光源的之间距离、光源的强弱调整虚拟物体影子的折射角度、长度和亮度；虚拟场景更加逼真和清晰。
10.如权利要求6所述前端设备，其特征在于，所述前端设备包括手机或头盔眼镜。
CN201611086214.0A 2016-11-29 2016-11-29 增强及虚拟现实的光场光源定向法及前端设备 Pending CN106530406A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201611086214.0A CN106530406A (zh) 2016-11-29 2016-11-29 增强及虚拟现实的光场光源定向法及前端设备
US15/381,137 US10002464B1 (en) 2016-11-29 2016-12-16 Light field light source orientation method for augmented reality and virtual reality and front-end device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611086214.0A CN106530406A (zh) 2016-11-29 2016-11-29 增强及虚拟现实的光场光源定向法及前端设备

Publications (1)

Publication Number Publication Date
CN106530406A true CN106530406A (zh) 2017-03-22

Family

ID=58354252

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611086214.0A Pending CN106530406A (zh) 2016-11-29 2016-11-29 增强及虚拟现实的光场光源定向法及前端设备

Country Status (2)

Country Link
US (1) US10002464B1 (zh)
CN (1) CN106530406A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107492144A (zh) * 2017-07-12 2017-12-19 联想(北京)有限公司 光影处理方法及电子设备
CN107845132A (zh) * 2017-11-03 2018-03-27 太平洋未来科技（深圳）有限公司 虚拟对象色彩效果的渲染方法和装置
CN108933954A (zh) * 2017-05-22 2018-12-04 中兴通讯股份有限公司 视频图像处理方法、机顶盒以及计算机可读存储介质

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10930049B2 (en) 2018-08-27 2021-02-23 Apple Inc. Rendering virtual objects with realistic surface properties that match the environment
WO2020072591A1 (en) * 2018-10-03 2020-04-09 Google Llc Placement and manipulation of objects in augmented reality environment
KR20210052090A (ko) 2019-10-31 2021-05-10 삼성전자주식회사 증강 현실 장치
CN112040596B (zh) * 2020-08-18 2022-11-08 张雪媛 虚拟空间灯光控制方法、计算机可读存储介质和***

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102426695A (zh) * 2011-09-30 2012-04-25 北京航空航天大学 一种单幅图像场景的虚实光照融合方法
US20160203641A1 (en) * 2015-01-14 2016-07-14 International Business Machines Corporation Augmented reality device display of image recognition analysis matches

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7869631B2 (en) * 2006-12-11 2011-01-11 Arcsoft, Inc. Automatic skin color model face detection and mean-shift face tracking
US8477246B2 (en) * 2008-07-11 2013-07-02 The Board Of Trustees Of The Leland Stanford Junior University Systems, methods and devices for augmenting video content
US20130278631A1 (en) * 2010-02-28 2013-10-24 Osterhout Group, Inc. 3d positioning of augmented reality information
US8964298B2 (en) * 2010-02-28 2015-02-24 Microsoft Corporation Video display modification based on sensor input for a see-through near-to-eye display
US9269022B2 (en) * 2013-04-11 2016-02-23 Digimarc Corporation Methods for object recognition and related arrangements
US9754416B2 (en) * 2014-12-23 2017-09-05 Intel Corporation Systems and methods for contextually augmented video creation and sharing

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102426695A (zh) * 2011-09-30 2012-04-25 北京航空航天大学 一种单幅图像场景的虚实光照融合方法
US20160203641A1 (en) * 2015-01-14 2016-07-14 International Business Machines Corporation Augmented reality device display of image recognition analysis matches

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JORGE LOPEZ-MORENO等: "Compositing images through light source detection", 《COMPUTERS & GRAPHICS》 *
刘万奎等: "用于增强现实的光照估计研究综述", 《计算机辅助设计与图形学学报》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108933954A (zh) * 2017-05-22 2018-12-04 中兴通讯股份有限公司 视频图像处理方法、机顶盒以及计算机可读存储介质
CN107492144A (zh) * 2017-07-12 2017-12-19 联想(北京)有限公司 光影处理方法及电子设备
CN107492144B (zh) * 2017-07-12 2020-07-24 联想(北京)有限公司 光影处理方法及电子设备
CN107845132A (zh) * 2017-11-03 2018-03-27 太平洋未来科技（深圳）有限公司 虚拟对象色彩效果的渲染方法和装置
CN107845132B (zh) * 2017-11-03 2021-03-02 太平洋未来科技（深圳）有限公司 虚拟对象色彩效果的渲染方法和装置

Also Published As

Publication number Publication date
US10002464B1 (en) 2018-06-19
US20180150998A1 (en) 2018-05-31

Similar Documents

Publication Publication Date Title
CN106530406A (zh) 增强及虚拟现实的光场光源定向法及前端设备
US11721076B2 (en) System for mixing or compositing in real-time, computer generated 3D objects and a video feed from a film camera
CN105956539B (zh) 一种应用背景建模和双目视觉原理的人体身高测量方法
US8854470B2 (en) Vision-based augmented reality system using invisible marker
CN107277495B (zh) 一种基于视频透视的智能眼镜***及其透视方法
US7736000B2 (en) Method and apparatus for tracking eye movement
US6633304B2 (en) Mixed reality presentation apparatus and control method thereof
US10628964B2 (en) Methods and devices for extended reality device training data creation
CN114140867A (zh) 使用眼睛特征的眼睛姿态识别
CN107250728A (zh) 所显示彩色符号表示的视觉感知加强
CN106326930A (zh) 一种确定虚拟现实中被跟踪物***置的方法、装置及***
WO2019047985A1 (zh) 图像处理方法和装置、电子装置和计算机可读存储介质
CN104423046A (zh) 图像处理装置及具有其的头部安装型显示装置
CN105740778A (zh) 一种改进的三维人脸活体检测方法及其装置
CN112684892B (zh) 一种增强现实弹药识别眼镜-手柄连携***
CN110276286A (zh) 一种基于tx2的嵌入式全景视频拼接***
US20230334806A1 (en) Scaling neural representations for multi-view reconstruction of scenes
CN113971682A (zh) 一种基于深度信息实时可变绿幕生成方法及抠像方法
US11875080B2 (en) Object sharing method and apparatus
CN206378680U (zh) 基于结构光多模块360度空间扫描和定位的3d相机
CN104980727B (zh) 基于虚拟现实技术的图像合成方法和头戴式显示设备
US11328487B2 (en) Method and program for providing augmented reality image by using depth data
CN111161399B (zh) 基于二维影像生成三维模型的数据处理方法及组件
CN104599231A (zh) 一种基于Kinect和网络摄像机的动态人像合成方法
CN110910487A (zh) 构建方法、构建装置、电子装置和计算机可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170322

WD01 Invention patent application deemed withdrawn after publication