CN107103209A - 3d数字内容交互和控制 - Google Patents
3d数字内容交互和控制 Download PDFInfo
- Publication number
- CN107103209A CN107103209A CN201611170937.9A CN201611170937A CN107103209A CN 107103209 A CN107103209 A CN 107103209A CN 201611170937 A CN201611170937 A CN 201611170937A CN 107103209 A CN107103209 A CN 107103209A
- Authority
- CN
- China
- Prior art keywords
- computing device
- digital content
- control
- multiple image
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000003993 interaction Effects 0.000 claims abstract description 31
- 230000008859 change Effects 0.000 claims abstract description 20
- 238000000034 method Methods 0.000 claims description 35
- 238000012545 processing Methods 0.000 claims description 12
- 230000006835 compression Effects 0.000 claims description 11
- 238000007906 compression Methods 0.000 claims description 11
- 238000012937 correction Methods 0.000 claims description 5
- 238000009877 rendering Methods 0.000 claims description 5
- 238000005516 engineering process Methods 0.000 abstract description 25
- 230000006870 function Effects 0.000 description 24
- 239000002609 medium Substances 0.000 description 24
- 238000003860 storage Methods 0.000 description 18
- 238000007726 management method Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 238000009826 distribution Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000001010 compromised effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000012120 mounting media Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/10—Protecting distributed programs or content, e.g. vending or licensing of copyrighted material ; Digital rights management [DRM]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/06—Ray-tracing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Human Computer Interaction (AREA)
- Databases & Information Systems (AREA)
- Health & Medical Sciences (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Architecture (AREA)
- Multimedia (AREA)
- Technology Law (AREA)
- Processing Or Creating Images (AREA)
- Storage Device Security (AREA)
Abstract
本申请的各实施例涉及3D数字内容交互和控制。描述了三维数字内容交互和控制技术。数字媒体环境被配置为防范对三维数字内容的未授权访问。接收一个或者多个输入,该一个或者多个输入涉及用户选择用户交互特征的一个或者多个参数以改变三维数字内容的外观。根据三维数字内容来渲染多个图像。渲染的多个图像相互具有一个或者多个参数中的差异。关联如下控件,该控件支持用户交互以基于一个或者多个参数中的差异来在多个图像内导航。控制分发多个图像和关联的控件以用于消费,包括对于用户交互特征的一个或者多个参数使用关联的控件来在多个图像内导航。
Description
相关申请的交叉引用
本申请要求对通过完全引用而将其公开内容结合于此、提交于2016年2月19日并且名称为“3D Digital Content Interaction and Control”的第62/297,607号美国临时专利申请以及提交于2016年7月27日并且名称为“3D Digital Content Interaction andControl”的第15/221,134号美国专利申请的优先权。
技术领域
本申请的各实施例涉及3D数字内容交互和控制。
背景技术
可以用多种方式配置三维数字内容以支持多种特征。在一个示例中,三维数字内容用来对具有多个对象的景物建模。用户然后能够与内容交互以改变参数以便实现内容的不同二维视图。可用来实现这些不同视图的参数中的改变的示例包括景物的视点中的改变、照明、颜色中的改变等等。以这一方式,用户可以容易地通过与这些参数交互来获得希望的二维视图而无需手动地重绘这一视图。
然而,用来支持三维数字内容的常规格式容易被恶意方危害。例如,即使具有基本计算机技能的用户也能够在常规三维数字内容经由网络被暴露时下载和使用它们,例如,在内容使用动态运行时间语言被实施时下载内容。因而,已经开发了常规技术以保护三维内容免于危害。然而,这些常规技术涉及生成三维数字内容的一个或者多个二维视图。虽然这保护了三维数字内容免于危害(例如,免于访问用来形成内容的网格、纹理或者多边形),但是用户被限于这些视图并且不支持用户交互。因而,用户不能改变参数以便实现不同的希望的视图以便确定希望的视图或者交互是否被内容支持。这限制了用户对哪些参数被内容支持的了解,由此限制了用户的交互并且使在三维中创建这一内容这一具体失败。
发明内容
描述了三维数字内容交互和控制技术。数字媒体环境被配置为防范对三维数字内容的未授权访问。接收一个或者多个输入,该一个或者多个输入涉及用户选择用户交互特征的一个或者多个参数以改变三维数字内容的外观。根据三维数字内容来渲染多个图像。渲染的多个图像相互具有一个或者多个参数中的差异。关联控件,该控件支持用户交互以基于一个或者多个参数中的差异来在多个图像内导航。控制分发多个图像和关联的控件以用于消费,包括对于用户交互特征的一个或者多个参数使用关联的控件来在多个图像内导航。
这一发明内容以简化的形式介绍了以下在具体实施方式中进一步描述的概念的选集。这样,这一发明内容并未旨在于标识要求保护的主题内容的实质特征,也未旨在于在确定要求保护的主题内容的范围时用作辅助。
附图说明
参照附图描述了具体实施方式。在各图中,标号的最左数位标识该标号在其中首次出现的图。在描述和各图中在不同实例中使用相同标号可以指示相似或者相同项目。在各图中代表的实体可以指示一个或者多个实体,并且因此可以在讨论中可互换地指代实体的单数或者复数形式。
图1是可操作用于运用这里描述的三维数字内容交互和控制技术的一个示例实现方式中的环境的图示。
图2描绘了一个示例实现方式中的***,该示例实现方式更详细地示出了图1的3D数字内容管理器模块的操作。
图3描绘了可用来形成图2的图像的射线追踪的一个示例实现方式。
图4描绘了与图2的数字内容汇集的用户交互的示例。
图5是描绘了其中数字媒体环境被配置为防范对三维数字内容的未授权访问的一个示例实现方式中的过程的流程图。
图6图示了包括示例设备的各种部件的示例***,该示例设备可以被实施为如描述的任何类型的计算设备和/或参照图1至图5用来实施这里描述的技术的实施例。
具体实施方式
概述
用来创建支持用户交互(例如,视图中的改变)的三维数字内容的常规技术在这一内容被暴露时容易被恶意方危害。虽然已经开发了常规技术以防范危害,但是这些常规技术生成内容的不支持用户交互的二维视图。因而,创建数字内容的艺术家被迫在其中用户可以与内容交互、但是内容容易被危害的“要么全部要么没有”或者放弃支持这一交互、但是内容被保护之间选择。
因而,描述了三维数字内容交互和控制技术和***。在一个示例中,三维数字内容由用户创建。例如,用户可以与在本地或者经由网络远程地提供的工具交互以生成三维数字内容为作为被生成为多个多边形的在其之上形成了纹理的网格等。作为这一创建的部分,用户也可以指定参数,这些参数可改变以变换三维数字内容的外观。参数的示例包括定向、景深、颜色强度、光的方向、观看者的位置、透镜参数、过滤器、色校正等。以这一方式,支持用户交互以改变三维数字内容的外观。
一旦被创建,三维数字内容就被处理以用于暴露以形成被保护以防被恶意方危害而仍然支持用户交互的版本。为了这样做,接收用户输入,这些用户输入指定支持用户交互的待暴露的参数。例如,用户可以指定将使用以四十五度增量取得的水平视图以及也以四十五度增量沿着纵轴的光的方向中的改变。然后例如通过使用射线追踪来生成这些参数的每个组合作为二维图像。例如,三维数字内容的单个前视图包括使用沿着纵轴的光的方向中的每个改变而被渲染的图像。然后对于每个指定的视图重复这一过程以形成二维图像的汇集。
然后向这些图像应用压缩技术以减少用来传输和存储图像的带宽和存储器的数量。压缩技术例如可以用来利用图像的相互的相似性以减少图像中的用来描述这些相似性的数据量。以这一方式,可以增加这些图像的通信和存储中的效率。
控件也与图像关联以根据相应的参数来控制在不同视图内导航。继续前例,控件可以用来改变沿着纵轴的光的方向以使得示出该方向的对应的图像被显示在用户界面中。另一控件也可以用来以相似的方式改变水平视图。以这一方式,以与如何与三维数字内容本身执行交互相似的方式保留与从三维数字内容取得的视图的用户交互。这也用以保护三维数字内容免于被恶意方危害,因为用来生成三维数字内容(例如,网格、纹理和多边形)的下层功能不可通过这些图像为恶意方所访问。在以下章节中包括对这些和其它示例的进一步描述。
在以下讨论中,首先描述可以运用这里描述的技术的示例环境。然后描述可以在示例环境以及其它环境中被执行的示例过程。因而,对示例过程的执行不限于示例环境并且示例环境不限于对示例过程的执行。
示例环境
图1是可操作用于运用这里描述的三维数字内容交互和控制技术的一个示例实现方式中的环境100的图示。所示的环境100包括经由网络108相互通信地耦合的服务提供商102、计算设备104和另一计算设备106。可以用多种方式配置计算设备104、106以及实施服务提供商102的计算设备。
例如,计算设备可以被配置为台式计算机、膝上型计算机、移动设备(例如,假设手持配置,比如如图所示的平板计算机或者移动电话)等。因此,计算设备可以范围从具有大量存储器和处理器资源的全资源设备(例如,个人计算机、游戏控制台)到具有有限存储器和/或处理资源的低资源设备(例如,移动设备)。附加地,虽然示出了单个计算设备,但是计算设备可以代表多个不同的设备,比如由企业用来如相对于图6进一步描述的那样为服务提供商102“在云之上”执行操作的多个服务器。
在这一示例中,计算设备104、106各自包括代表用于经由网络108与服务提供商102的图像处理***114交互的功能的相应的通信模块110、112。因而,可以用多种方式实施通信模块110、112,比如由计算设备104、106中的相应的计算设备执行的支持浏览器或者网络的应用。虽然在下文中将图像处理***114的功能描述为经由web服务被实施,但是这一功能也可以由计算设备104、106中的相应的计算设备在本地实施。
图像处理***114的功能的示例被图示为3D数字内容管理器模块116。至少部分地在硬件中实施3D数字内容管理器模块116(例如,如相对于图6描述的那样通过处理***、计算机可读存储介质、集成电路等)以管理对被图示为存储在存储装置120中的3D数字内容118的创建和暴露。3D数字内容118可以被配置为多种方式,比如使用几何数据(例如,网格和纹理、多边形)而形成的三维模型,然后可以在用户界面124中将该3D数字内容渲染为二维图像122。3D数字内容118例如可以将物理对象(比如如图所示的货车)表示为三维空间中的由各种几何实体(比如三角形、线条、弯曲的表面等)连接的点的汇集。通常地,支持与3D数字内容118的用户交互以比如改变用户查看图像的位置。
如先前描述的那样,用来生成和维护3D数字内容118的常规技术容易甚至被具有基本计算机技能的用户危害。例如,计算设备104的用户可以与服务提供商102交互并且创建和暴露3D数字内容118以用于由其他用户(比如计算设备106的用户)经由存货内容网站购买。常规地,希望使用常规技术来行销3D数字内容118的用户被迫在以容易被危害的方式暴露这一内容到提供从这一内容捕获的不支持用户交互的二维图像之间选择。然而,在下文中描述了如下技术,在这些技术中,3D数字内容管理器模块116形成3D数字内容118的安全以免被恶意方危害而又支持用户交互的版本,在下文中更详细地描述其示例。
图2描绘了一个示例实现方式中的***200,该示例实现方式更详细地示出了图1的3D数字内容管理器模块的操作。从一开始,计算设备104的用户经由网络108与这一示例中的3D数字内容管理器模块202交互以创建3D数字内容118。3D数字内容管理器模块116例如包括3D内容创建模块202,该3D内容创建模块202代表至少部分地在硬件中实施的用于提供形成一个或者多个对象的3D模型的工具的功能。这些工具可以用来定义在其之上应用纹理以形成模型的三维网格。在另一示例中,工具可以用来形成具有用于形成模型的纹理的多边形的汇集
无论如何被建模,计算设备104的用户都向3D内容创建模块202提供输入204以指定将如何创建3D数字内容118。这些输入204然后由3D内容创建模块202用来形成模型并且渲染图像206以用于在计算设备104的用户界面中查看作为这一创建的部分以例如操控在其之上形成了纹理的网格。这可以全部或者部分通过配置3D数字内容管理器模块116作为web服务的部分(例如,由服务提供商102配置)来远程地执行或者在计算设备104本身上被在本地执行。
一旦创建了3D数字内容118,3D内容创建模块202就在用户界面中提供用于形成3D数字内容118的被保护以防恶意方而又仍然支持用户交互的版本的用户选项。用于这样做的功能由3D内容暴露模块208代表,至少部分地在硬件中实施该3D内容暴露模块作为用于根据3D数字内容118形成图像并且关联支持与那些图像的用户交互的控件与那些图像的逻辑。
首先运用参数选择模块212以输出用于支持用户选择参数214以用作与内容的用户交互的基础的选项。在这一示例中的参数214描述用户可控差异作为用户交互的部分以变换3D数字内容118的可以用多种方式定义的外观。在第一个这样的示例中,定向216可用来改变3D数字内容118的对象在三维空间内的位置。在另一示例中,景深218用来描述在由3D数字内容118定义的三维空间内的焦距,即,聚焦为与查看空间的用户的不同距离。在又一示例中,颜色强度220可用来改变对象和对象的周围环境的颜色强度作为3D数字内容的部分。在再一示例中,光的方向222参数可用来指定一个或者多个光的方向作为包括对象的环境的部分,比如指定一个或者多个虚拟光源的放置以定义在环境中形成的阴影的对应的方向。
用户通过与参数选择模块212的交互来指定将用作用户交互的基础的选择的参数232以及将如何使用这些参数的差异。例如,对于观看者的位置224参数,用户可以指定沿着水平面的90度增量以模拟用户绕着图1的货车行走。以这一方式,3D数字内容118的创建者可以指定将用作用于与内容的保护的版本的用户交互的基础的选择的参数232,并且也定义该交互将如何出现。
接着,基于选择的参数232根据3D数字内容118来渲染图像。3D内容暴露模块208例如可以运用射线追踪模块242,该射线追踪模块242代表至少部分地在硬件中实施的用于使用射线追踪来渲染图像236的功能。
图3描绘了可用来形成图像236的射线追踪的示例实现方式300。射线跟踪是如下技术,在该技术中追踪3D数字内容118的环境中的光的射线的效果,包括在环境内的对象的吸收和反射光的射线。例如,射线追踪涉及追踪在虚拟查看平面306中从假想相机302经过每个像素的路径304,并且计算来自经过它而可查看的景物的对象的颜色。如图所示,虚拟光源308可以被定位在环境内作为与对象312相交的光射线源。射线追踪模块242可以计算对象的材料性质以确定如何从对象反射光用于由相机302查看的光。经过追踪和处理这些个别光射线,可以支持逼真效果,比如在由三维数字内容118建模的景物内包括阴影314。其它技术也可以用来根据3D数字内容118来渲染图像236以生成二维图像,比如射线投射、扫描线渲染或者其它图像渲染技术。
现在再次参照图2,至少部分地在硬件中实施的参数控件关联模块236然后由3D内容暴露模块208运用以关联参数控件模块238与图像238以基于选择的参数232来支持用户交互。由参数控件模块238实施的控件例如可以用来在作为用于生成图像236的基础而被供应的选择的参数232中的指定的差异之间导航。例如,在观看者的位置224的示例中,该控件可以用来例如通过使用滑块、通过使用光标控制设备“抓取”图像的一部分等来沿着水平面在九十度视图内导航。以这一方式,参数控件模块238支持与图像236的用户交互。这样,图像236和支持的用户交互可以被称为3D数字内容118的“2.5”维版本,该版本落在支持完全用户交互的三维版本与不支持用户交互的二维版本之间。
压缩模块240也可以由3D内容暴露模块208运用以促进图像236的高效通信和存储。在前例中,描述了添加每个选择的参数造成生成具有该参数中的定义的差异的至少一个附加图像集合。因而,可以创建多个图像236以支持用户交互。为了减少用于通信和存储图像236的带宽数量,压缩模块240运用一种或者多种压缩技术(例如,H.264)以利用图像236中的相互相似性以压缩图像以形成压缩的图像242。
3D内容暴露模块208然后可以暴露压缩的图像242和关联参数控件模块238作为数字内容汇集244以用于例如由计算设备106的用户消费。3D内容暴露模块208例如可以暴露数字内容汇集244作为存货内容服务的部分以用于由用户交互。与数字内容汇集244交互的用户可以对选择的参数做出改变,并且这样数字内容汇集244支持动态用户交互。在另一方面,压缩的图像242保护内容免于被恶意方危害,因为这些恶意方不能访问3D数字内容118的下层3D功能,例如,网格、纹理、多边形等。服务提供商102然后可以基于交互来向用户提供实际3D数字内容118,例如,以用于购买。因此,由这里描述的技术支持的用户交互可用来增加购买对应的3D数字内容118的可能性而又仍然保护这一内容。
图4描绘了与图2的数字内容汇集244的用户交互的示例400。使用用户界面124中的第一阶段402、第二阶段404、第三阶段406和第四408来图示这一示例400。在这一示例中,数字内容汇集244包括多个压缩的图像242和嵌入的参数控件模块238。执行嵌入的参数控件模块238以输出控件410,该控件410支持用户交互以在这一实例中沿着水平面以九十度增量在选择的参数232(该参数232是观看者的位置224)中的差异内导航。在这一实例中控件410被图示为滑块,并且也设想了其它配置,比如“抓取和拖动”控件、支持手势、语音命令等。
在第一阶段402处,控件410被定位以渲染对象的左侧视图的图像412,对象在这一实例中是货车。然后经由光标控制设备检测用户交互以移动控件,这引起输出选择的参数中的差异。作为响应,输出与这一差异对应的图像,该图像是视图在第二阶段404处的后视图。这一导航经过第三阶段406和第四408继续以示出货车的相应的右侧视图416和前视图418。以这一方式,用户能够与图像交互以使用选择的参数“绕着”货车“行走”而还保护用来创建图像的3D功能免于被恶意方危害。
示例过程
以下讨论描述了可以利用先前描述的***和设备而被实施的技术。可以在硬件、固件或者软件或者它们的组合中实施过程中的每个过程的方面。过程被示出为指定由一个或者多个设备执行的操作的块的集合而未必限于被示出用于由相应的块执行操作的顺序。在以下讨论的部分中,将参照图1至图4。
图5描绘了其中数字媒体环境被配置为防范对三维数字内容的未授权访问的一个示例实现方式中的过程500。接收一个或者多个输入,该一个或者多个输入涉及用户选择用户交互特征的一个或者多个参数以改变三维数字内容的外观(块502)。用户例如可以从可用来变换3D数字内容的外观的参数的多个预配置的选项选择。参数的示例包括定向、景深、色强度、光的方向、观看者的位置、透镜参数、过滤器或者色校正。一个或者多个输入也可以指定将用于参数的差异,比如定向按九十度的增量、色强度的不同数量、光的方向的位置等。
根据三维数字内容来渲染多个图像。渲染的多个图像相互具有一个或者多个参数中的差异(块504)。继续前例,射线追踪模块234可以基于选择的参数232和那些参数中的差异来渲染图像236。也可以渲染这些图像的其它版本以比如支持不同分辨率、保真度或者交互级别(例如,光标比对触屏)以对应于从将消耗图像的计算设备可用的功能中的差异。
关联控件,该控件支持用户交互以基于一个或者多个参数中的差异来在多个图像内导航(块506)。控件例如可以使用参数控件模块128被嵌入,并且用来比如通过使用滑块在差异内依次地递增。插值技术也可以用来生成在这些不同图像之间被布置的图像的附加版本以比如生成四十五度视图、颜色、景深中的其他差异等。
压缩多个图像(块508)。可以用多种方式执行压缩,比如使用H.264或者其它图像压缩技术。
控制分发多个图像和关联的控件以用于消费,包括对于用户交互特征的一个或者多个参数使用关联的控件来在多个图像内导航(块510)。3D内容暴露模块208例如可以配置数字内容汇集244以用于由3D数字内容的创建者使用以防范恶意方。也设想了其它示例,比如经由存货内容服务发布内容。附加地,对分发的控制可以包括定位和提供数字内容汇集244的与请求访问的设备的功能对应(比如用于特定分辨率、保真度或者交互级别)的版本。
示例***和设备
图6大体地在600处图示了示例***,该示例***包括代表可以实施这里描述的各种技术的一个或者多个计算***和/或设备的示例计算设备602。通过包括3D数字内容管理器模块116来图示这一点。计算设备602可以例如是服务器提供商的服务器、与客户端关联的设备(例如,客户端设备)、片上***和/或任何其它适当计算设备或者计算***。
如图所示的示例计算设备602包括相互通信地耦合的处理***604、一个或者多个计算机可读介质606和一个或者多个I/O接口608。虽然未被示出,但是计算设备602还可以包括相互耦合各种部件的***总线或者其它数据和命令传送***。***总线可以包括不同总线结构(比如存储器总线或者存储器控制器、***总线、通用串行总线和/或利用多种总线架构)中的任何总线架构的处理器或者本地总线中的任何总线结构或者组合。也设想了多种其它示例,比如控制和数据线。
处理***604代表用于使用硬件来执行一个或者多个操作的功能。因而,处理***604被图示为包括可以被配置为处理器、功能块等的硬件单元610。这可以包括在硬件中实施为专用集成电路或者使用一个或者多个半导体形成的其它逻辑器件。硬件单元610不受形成它们的材料或者其中运用的处理机制限制。例如,处理器可以由半导体和/或晶体管(例如,电子集成电路(IC))组成。在这样的上下文中,处理器可执行指令可以是电子地可执行的指令。
计算机可读存储介质606被图示为包括存储器/存储装置612。存储器/存储装置612代表与一个或者多个计算机可读介质关联的存储器/存储容量。存储器/存储装置612可以包括易失性介质(比如随机存取存储器(RAM))和/或非易失性介质(比如只读存储器(ROM)、闪存、光盘、磁盘等)。存储器/存储装置612可以包括固定介质(例如,RAM、ROM、固定硬驱动等)以及可拆卸介质(例如,闪存、可拆卸硬驱动、光盘等)。可以用如以下进一步描述的多种其它方式配置计算机可读介质606。
输入/输出接口608代表用于允许用户使用各种输入设备向计算设备602录入命令和信息并且也允许使用各种输出设备向用户和/或其它部件或者设备呈现信息的功能。输入设备的示例包括键盘、光标控制设备(例如,鼠标)、麦克风、扫描仪、触摸功能(例如,被配置为检测物理触摸的电容或者其它传感器)、相机(例如,该相机可以运用可见光或者不可见光波长(比如红外线频率)以将移动识别为未涉及触摸的手势)等。输出设备的示例包括显示设备(例如,监视器或者投影仪)、扬声器、打印机、网卡、触觉响应设备等。因此,可以用如以下进一步描述的多种方式配置计算设备602以支持用户交互。
这里在软件、硬件单元或者程序模块的一般上下文中描述各种技术。一般而言,这样的模块包括执行特定任务或者实施特定抽象数据类型的例程、程序、对象、单元、部件、数据结构等。如这里所用的术语“模块”、“功能”和“部件”一般地代表软件、固件、硬件或者其组合。这里描述的技术的特征独立于平台,这意味着可以在具有多种处理器的多种商用计算平台上实施技术。
可以在某个形式的计算机可读介质上存储或者跨越该计算机可读介质传输描述的模块和技术的实现方式。计算机可读介质可以包括计算设备602可以访问的多种介质。举例而言而非限制,计算机可读介质包括“计算机可读存储介质”和“计算机可读信号介质”。
“计算机可读存储介质”可以是指与仅信号传输、载波或者信号本身对照地实现持久和/或非瞬态信息存储的介质和/或设备。因此,计算机可读存储介质是指非信号承载介质。计算机可读存储介质包括硬件(比如在适合用于存储信息(比如计算机可读指令、数据结构、程序模块、逻辑元件/电路或者其它数据)的方法或者技术中实施的易失性和非易失性、可拆卸和非可拆卸介质和/或存储设备。计算机可读存储介质的示例可以包括但不限于RAM、ROM、EEPROM、闪存或者其它存储器技术、CD-ROM、数字万用盘(DVD)或者其它光存储装置、硬盘、磁盒、磁带、磁盘存储装置或者其它磁存储设备或者适合用来存储希望的信息并且可以由计算机访问的其它存储设备、有形介质或者制造品。
“计算机可读信号介质”可以是指被配置为比如经由网络向计算设备602的硬件传输指令的信号承载介质。信号介质通常地可以在调制的数据信号(比如载波、数据信号)或者其它传送机制中体现计算机可读指令、数据结构、程序模块或者其它数据。信号介质也包括任何信息递送介质。术语“调制的数据信号”意味着如下信号,该信号让它的特性中的一个或者多个特性以对信号中的信息进行编码这样的方式被设置或者改变。举例而言而非限制,通信介质包括有线介质(比如有线网络或者直接有线连接)和无线介质(比如声学、RF、红外线和其它无线介质)。
如先前描述的那样,硬件单元610和计算机可读介质606代表以如下硬件形式实施的模块、可编程逻辑器件和/或固定器件逻辑,可以在一些实现方式中运用该硬件形式以实施这里描述的技术的至少一些方面,比如执行一个或者多个指令。硬件可以包括集成电路或者片上***的部件、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、复杂可编程逻辑器件(CPLD)和在硅或者其它硬件中的其它实现方式。在本文中,硬件可以作为处理设备操作,该处理设备执行由指令定义的程序任务和/或由硬件体现的逻辑以及用来存储用于执行的指令的硬件,例如,先前描述的计算机可读存储介质。
也可以运用前述各项的组合以实施这里描述的各种技术。因而,软件、硬件或者可执行模块可以被实施为在某个形式的计算机可读存储介质上和/或由一个或者多个硬件单元610体现的一个或者多个指令和/或逻辑。计算设备602可以被配置为实施与软件和/或硬件模块对应的特定指令和/或功能。因而,可以至少部分地在硬件中(例如,通过使用计算机可读存储介质和/或处理***604的硬件单元610)来实现作为软件可由计算设备602执行的模块的实现方式。指令和/或功能可以由一个或者多个制造品(例如,一个或者多个计算设备602和/或处理***604)可执行/可操作以实施这里描述的技术、模块和示例。
这里描述的技术可以由计算设备602的各种配置支持而不限于这里描述的技术的具体示例。也可以全部或者部分通过使用分布式***(比如如以下描述的那样经由平台616在“云”614之上)来实施这一功能。
云614包括和/或代表用于资源618的平台616。平台616将云614的硬件(例如,服务器)和软件资源的下层功能抽象化。资源618可以包括可以在从计算设备602远离的服务器上执行计算机处理之时被利用的应用和/或数据。资源618也可以包括通过因特网和/或通过订户网络(比如蜂窝或者Wi-Fi网络)提供的服务。
平台616可以将用于连接计算设备602与其它计算设备的资源和功能抽象化。平台616也可以服务于将资源的伸缩抽象化以提供与对于经由平台616被实施的资源618的所遇需求对应的规模级别。因而,在一个互连设备实施例中,可以贯穿***600分布这里描述的功能的实现方式。例如,可以部分在计算设备602上以及经由将云614的功能抽象化的平台616实施功能。
结论
虽然已经用结构特征和/或方法动作特有的言语描述了本发明,但是将理解,在所附权利要求中定义的本发明未必限于描述的具体特征或者动作。实际上,具体特征和动作被公开作为实施要求保护的本发明的示例形式。
Claims (20)
1.在用于防范对三维数字内容的未授权访问的数字媒体环境中的一种由计算设备实施的方法,所述方法包括:
由所述计算设备接收一个或者多个输入,所述一个或者多个输入涉及用户选择用户交互特征的一个或者多个参数以改变所述三维数字内容的外观;
由所述计算设备根据所述三维数字内容来渲染多个图像,渲染的所述多个图像相互具有所述一个或者多个参数中的差异;
由所述计算设备关联控件,所述控件支持用户交互以基于所述一个或者多个参数中的所述差异来在所述多个图像内导航;以及
由所述计算设备控制分发所述多个图像和关联的所述控件以用于消费,包括对于所述用户交互特征的所述一个或者多个参数使用关联所述的控件来在所述多个图像内导航。
2.根据权利要求1所述的方法,其中所述渲染包括射线追踪所述三维数字内容以生成所述多个图像。
3.根据权利要求1所述的方法,其中所述一个或者多个参数包括定向、景深、色强度、光的方向、观看者的位置、透镜参数、过滤器或者色校正。
4.根据权利要求1所述的方法,还包括由所述计算设备压缩所述多个图像。
5.根据权利要求1所述的方法,其中如渲染的所述多个图像不包括所述三维数字内容的网格和纹理。
6.根据权利要求1所述的方法,其中如渲染的所述多个图像不包括所述三维数字内容的多边形。
7.根据权利要求1所述的方法,其中所述多个图像的所述渲染包括渲染所述多个图像以具有关联的所述控件的分辨率、保真度或者交互级别中的不同项。
8.根据权利要求7所述的方法,其中所述控制包括确定由请求访问所述多个图像的计算设备支持的分辨率、保真度或者交互级别中的至少一项,以及向进行请求的所述计算设备分发对应的所述图像。
9.根据权利要求1所述的方法,其中所述接收包括在由服务提供商实施web服务时在所述计算设备处经由网络接收所述一个或者多个输入。
10.在用于防范对三维数字内容的未授权访问的数字媒体环境中,一种***包括:
参数选择模块,所述参数选择模块至少部分地在硬件中被实施以接收一个或者多个输入,所述一个或者多个输入涉及用户选择用户交互特征的一个或者多个参数以改变所述三维数字内容的外观;
射线追踪模块,所述射线追踪模块至少部分地在硬件中被实施以使用射线追踪根据所述三维数字内容来渲染多个图像,渲染的所述多个图像相互具有所述一个或者多个参数中的差异;以及
参数控件关联模块,所述参数控件关联模块至少部分地在硬件中被实施以关联控件与所述多个图像,所述控件可用来基于所述一个或者多个参数中的所述差异来在所述多个图像内导航。
11.根据权利要求10所述的***,其中所述一个或者多个参数包括定向、景深、色强度、光的方向、观看者的位置、透镜参数、过滤器或者色校正。
12.根据权利要求10所述的***,还包括压缩模块,所述压缩模块至少部分地在硬件中被实施以压缩所述多个图像。
13.根据权利要求10所述的***,其中所述射线追踪模块被配置为渲染所述多个图像以具有关联的所述控件的分辨率、保真度或者交互级别中的不同项。
14.根据权利要求13所述的***,还包括三维内容暴露模块,所述三维内容暴露模块用于确定由请求访问所述多个图像的计算设备支持的分辨率、保真度或者交互级别中的至少一项,并且向进行请求的所述计算设备分发对应的所述图像。
15.根据权利要求10所述的***,其中所述参数选择模块被配置为在实施服务提供商的web服务时经由网络接收所述一个或者多个输入。
16.在用于防范对三维数字内容的未授权访问的数字媒体环境中的一个或者多个计算设备,具有web服务的处理***和计算机可读存储介质,所述一个或者多个计算设备被配置为执行操作,所述操作包括:
接收一个或者多个输入,所述一个或者多个输入涉及用户选择用户交互特征的一个或者多个参数以改变所述三维数字内容的外观;
使用射线追踪根据所述三维数字内容来渲染多个图像,渲染的所述多个图像相互具有所述一个或者多个参数中的差异;
压缩所述多个图像;
由所述计算设备关联控件,所述控件可用来基于所述一个或者多个参数中的所述差异来在所述多个图像内导航;以及
暴露具有压缩的所述多个图像和关联的所述控件的数字内容包以用于消费,以支持对于所述用户交互特征的所述一个或者多个参数使用关联所述的控件来在所述多个图像内导航。
17.根据权利要求16所述的一个或者多个计算设备,其中所述一个或者多个参数包括定向、景深、色强度、光的方向、观看者的位置、透镜参数、过滤器或者色校正。
18.根据权利要求16所述的一个或者多个计算设备,其中如渲染的所述多个图像不包括所述三维数字内容的网格和纹理并且不包括所述三维数字内容的多边形。
19.根据权利要求16所述的一个或者多个计算设备,其中所述多个图像的所述渲染包括渲染所述多个图像以具有关联的所述控件的分辨率、保真度或者交互级别中的不同项。
20.根据权利要求19所述的一个或者多个计算设备,其中所述暴露包括确定由请求访问所述多个图像的计算设备支持的分辨率、保真度或者交互级别中的至少一项,以及向进行请求的所述计算设备分发对应的所述图像。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662297607P | 2016-02-19 | 2016-02-19 | |
US62/297,607 | 2016-02-19 | ||
US15/221,134 | 2016-07-27 | ||
US15/221,134 US10579812B2 (en) | 2016-02-19 | 2016-07-27 | 3D digital content interaction and control |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107103209A true CN107103209A (zh) | 2017-08-29 |
CN107103209B CN107103209B (zh) | 2022-04-29 |
Family
ID=58284280
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611170937.9A Active CN107103209B (zh) | 2016-02-19 | 2016-12-16 | 3d数字内容交互和控制 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10579812B2 (zh) |
CN (1) | CN107103209B (zh) |
AU (1) | AU2016277556B2 (zh) |
DE (1) | DE102016015136A1 (zh) |
GB (1) | GB2547529B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10776995B2 (en) | 2017-10-17 | 2020-09-15 | Nvidia Corporation | Light fields as better backgrounds in rendering |
US11288733B2 (en) * | 2018-11-14 | 2022-03-29 | Mastercard International Incorporated | Interactive 3D image projection systems and methods |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090128562A1 (en) * | 2007-11-19 | 2009-05-21 | Caustic Graphics, Inc. | Systems and methods for rendering with ray tracing |
US20120200568A1 (en) * | 2008-03-21 | 2012-08-09 | Google Inc. | Lightweight three-dimensional display |
CN103198511A (zh) * | 2011-09-15 | 2013-07-10 | 佳能株式会社 | 图像处理装置及图像处理方法 |
US20130238901A1 (en) * | 2007-04-16 | 2013-09-12 | Kelley Wise | System for interactive matrix manipulation control of streamed data and media |
CN103959288A (zh) * | 2011-11-30 | 2014-07-30 | 诺基亚公司 | 用于基于web的增强现实应用查看器的方法和装置 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
IL120867A0 (en) | 1997-05-20 | 1997-09-30 | Cadent Ltd | Computer user interface for orthodontic use |
US7873237B2 (en) * | 2006-02-17 | 2011-01-18 | Dassault Systèmes | Degrading 3D information |
US8018457B2 (en) * | 2006-09-19 | 2011-09-13 | Caustic Graphics, Inc. | Ray tracing system architectures and methods |
KR102099086B1 (ko) * | 2013-02-20 | 2020-04-09 | 삼성전자주식회사 | 디지털 텔레비전 및 사용자 디바이스를 이용하여 사용자 맞춤형 인터랙션을 제공하는 방법, 그 디지털 텔레비전 및 사용자 디바이스 |
US20150049011A1 (en) * | 2013-08-15 | 2015-02-19 | Blackberry Limited | Method and apparatus for enhancing three-dimensional image processing |
KR102193684B1 (ko) * | 2013-11-04 | 2020-12-21 | 삼성전자주식회사 | 레이 트레이싱 처리 장치 및 방법 |
-
2016
- 2016-07-27 US US15/221,134 patent/US10579812B2/en active Active
- 2016-12-16 CN CN201611170937.9A patent/CN107103209B/zh active Active
- 2016-12-19 AU AU2016277556A patent/AU2016277556B2/en active Active
- 2016-12-19 GB GB1621608.7A patent/GB2547529B/en active Active
- 2016-12-19 DE DE102016015136.6A patent/DE102016015136A1/de active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130238901A1 (en) * | 2007-04-16 | 2013-09-12 | Kelley Wise | System for interactive matrix manipulation control of streamed data and media |
US20090128562A1 (en) * | 2007-11-19 | 2009-05-21 | Caustic Graphics, Inc. | Systems and methods for rendering with ray tracing |
US20120200568A1 (en) * | 2008-03-21 | 2012-08-09 | Google Inc. | Lightweight three-dimensional display |
CN103198511A (zh) * | 2011-09-15 | 2013-07-10 | 佳能株式会社 | 图像处理装置及图像处理方法 |
CN103959288A (zh) * | 2011-11-30 | 2014-07-30 | 诺基亚公司 | 用于基于web的增强现实应用查看器的方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
AU2016277556B2 (en) | 2021-04-15 |
GB2547529A (en) | 2017-08-23 |
GB201621608D0 (en) | 2017-02-01 |
US20170243022A1 (en) | 2017-08-24 |
DE102016015136A1 (de) | 2017-08-24 |
CN107103209B (zh) | 2022-04-29 |
GB2547529B (en) | 2019-07-17 |
US10579812B2 (en) | 2020-03-03 |
AU2016277556A1 (en) | 2017-11-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106997613A (zh) | 根据2d图像的3d模型生成 | |
US20130187905A1 (en) | Methods and systems for capturing and moving 3d models and true-scale metadata of real world objects | |
US20180144545A1 (en) | Method of simplifying a geometry model | |
KR20210013150A (ko) | 조명 추정 | |
KR20220013903A (ko) | 다중 사용자 증강 현실에서 사용자 상호 작용을 표현하기 위한 시스템 및 방법 | |
US10599807B2 (en) | Automatic generation of via patterns with coordinate-based recurrent neural network (RNN) | |
US20180059644A1 (en) | Methods and systems for verifying and modifying a 3d printing process | |
KR20220119180A (ko) | 혼합 현실에서 동적 가상 콘텐츠들을 생성하기 위한 디바이스 및 방법 | |
CN108459704A (zh) | 用于三维数字内容的笔画操作预测 | |
WO2016040153A1 (en) | Environmentally mapped virtualization mechanism | |
CN108885793A (zh) | 电子文档中的墨水 | |
US10956649B2 (en) | Semiconductor package metal shadowing checks | |
KR102469624B1 (ko) | 채색된 3차원 디지털 모델 생성 | |
CN105518618B (zh) | 将针对视觉元素的输入路由到图形框架的方法和*** | |
CN107103209A (zh) | 3d数字内容交互和控制 | |
WO2022217830A1 (zh) | 虚拟对象构建方法及装置、存储介质 | |
JP2014006901A (ja) | 関与媒質により受光された光量を推定する方法及び対応する装置 | |
CN107545597A (zh) | 在基板上渲染数字图像 | |
KR102637774B1 (ko) | Xr 온라인 플랫폼을 위한 3d 모델링 자동화 방법 및 시스템 | |
CN108090110A (zh) | 推荐软件动作以创建图像和推荐图像以示范软件动作的效果 | |
CN109523588B (zh) | 一种自定义拼花方法及*** | |
CN109242941A (zh) | 三维对象合成通过使用视觉引导作为二维数字图像的一部分 | |
CN107967709A (zh) | 数字媒体环境中的通过使用透视图或者传送的改进的对象涂绘 | |
KR101630257B1 (ko) | 3d 이미지 제공 시스템 및 그 제공방법 | |
KR102056985B1 (ko) | 가상 현실 인터랙션 방법 및 그 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |