CN103929634A - 3d动画效果产生方法和*** - Google Patents

3d动画效果产生方法和*** Download PDF

Info

Publication number
CN103929634A
CN103929634A CN201410012369.4A CN201410012369A CN103929634A CN 103929634 A CN103929634 A CN 103929634A CN 201410012369 A CN201410012369 A CN 201410012369A CN 103929634 A CN103929634 A CN 103929634A
Authority
CN
China
Prior art keywords
area
scene
interest
vision
visual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410012369.4A
Other languages
English (en)
Inventor
阿列克谢·威尔金
伊利亚·萨夫洛夫
康斯坦丁·克雷扎诺夫斯基
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from RU2013101015/08A external-priority patent/RU2540786C2/ru
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN103929634A publication Critical patent/CN103929634A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

提供了一种产生三维(3D)动画效果的方法和装置。该方法包括:在视觉多媒体对象上检测至少一个感兴趣区域,并确定检测到的感兴趣区域的至少一个特征;构建包括视觉多媒体对象的3D场景;根据感兴趣区域以及感兴趣区域的特征,在3D场景中产生动画效果的至少一个3D视觉对象;以及执行3D场景空间中3D视觉对象的转换和3D场景的转换中的至少一个,使得由于3D场景的可视化而产生3D动画效果。

Description

3D动画效果产生方法和***
相关申请
本申请要求2013年1月11日在俄国专利局提交的俄国专利申请No.2013101015以及2013年4月1日在韩国知识产权局提交的韩国专利申请No.10-2013-0035465的优先权,其全部公开通过引用合并于此。
技术领域
根据示例实施例的方法和装置涉及产生三维(3D)动画效果,所述3D动画效果在3D显示器上实时地实现。
背景技术
现有技术中已知多种向静止图像中添加动态二维(2D)艺术效果的方法。具体地,这样的解决方案在许多特殊编辑工具(例如,Adobe AfterEffects和Ulead Video Studio)中是众所周知的。
可以通过执行可以在计算机上可执行的转换来将使用数字摄相机接收到的2D图像转换成艺术图像,使得形成如人手绘制的自然图像,如,油画、用画笔(brush)绘制的插图(illustration)、动画图像或马赛克。
近来三维(3D)显示器和3D电视(TV)变得非常流行。然而主要视觉源仍然是2D的。因此,许多技术方案针对2D图像和视频到3D的转换。然而现有技术已知的方案仅仅是提出了立体或运动摄像机,移动一个或多个动画对象的集合,并根据非线性比率来确定摄像机和对象之间的距离,以将图像可视化。
目前3D显示器很普遍,特别是具有被动眼镜或主动眼镜的3D电视。消费者存储大量的2D照片和视频。然而尽管存在增加3D内容量的趋向,但是3D照片和视频的普及程度要小得多。现有技术已知的方案不允许运行中(on-the-fly)实时地产生真实的3D动画效果。
发明内容
一个或多个实施例提供了一种方法和装置,针对诸如2D图像、3D图像或视频等多媒体对象实时地产生真实的3D动画效果。
各个方面将在下面的描述中被部分地阐述并且通过描述将部分地变得清楚,或者通过实践提出的实施例可以得到各个方面。
根据示例实施例的方面,提供了一种产生三维(3D)动画效果的方法,所述方法包括:在视觉多媒体对象上检测至少一个感兴趣区域,并确定检测到的感兴趣区域的至少一个特征;构建包括视觉多媒体对象的3D场景;根据感兴趣区域以及感兴趣区域的特征,在3D场景中产生动画效果的至少一个3D视觉对象;并且执行3D场景空间中3D视觉对象的转换和3D场景的转换中的至少一个,使得由于3D场景的可视化而产生3D动画效果。
视觉多媒体对象可以包括以下中的至少一个:2D图像、3D图像和视频序列。
当检测到视觉多媒体对象上的感兴趣区域时,可以通过以下中的至少一个对视觉多媒体对象进行预处理:亮度调节、着色、伽马校正、白平衡调节和颜色***转换。
检测至少一个感兴趣区域可以是检测多个感兴趣区域,可以通过从检测到的多个感兴趣区域中随机选择选定数目的感兴趣区域,来执行3D视觉对象的产生。
检测至少一个感兴趣区域可以是检测多个感兴趣区域,可以通过基于选定数目的感兴趣区域的特征,从检测到的多个感兴趣区域中选择选定数目的感兴趣区域,来执行3D视觉对象的产生。
可以通过使用视觉多媒体对象作为叠加在3D场景的背景上的纹理,来执行3D场景的构建。
可以通过检测与关于视觉多媒体对象的场景深度有关的信息,来执行3D场景的构建,并且检测到的信息用于构建3D场景的背景。
3D视觉对象的转换可以包括以下中的至少一个:移动、旋转、扭曲、改变大小和合并至少两个3D对象,或者将3D对象分成至少两个新的3D视觉对象。
可以通过使用视觉多媒体对象作为3D场景的背景并针对视觉多媒体对象产生3D动画效果,来执行3D场景的可视化。
根据另一示例实施例的方面,提供了一种在显示器上产生3D动画效果的装置,所述装置包括:感兴趣区域检测模块,配置为在视觉多媒体对象上检测至少一个感兴趣区域;特征确定模块,配置为确定视觉多媒体对象的检测到的感兴趣区域的至少一个特征;3D视觉对象产生模块,配置为基于感兴趣区域的特征产生至少一个3D视觉对象;3D场景产生模块,配置为基于视觉多媒体对象和产生的3D视觉对象来产生3D场景;3D转换模块,配置为在3D场景的空间中转换3D视觉对象;以及帧产生模块,配置为通过使用包含转换后的3D视觉对象的3D场景来产生3D帧。
附图说明
结合附图,根据以下对示例实施例的描述,上述和/或其他方面将变得更清楚并且易于理解,在附图中:
图1是示出了根据示例实施例的3D动画中的若干帧的图,其中对静止图像应用了“肥皂泡”效果;
图2是根据示例实施例的由3D动画效果产生***执行的在3D显示器上实时产生3D动画效果的方法的流程图;
图3是根据示例实施例的在不存在对象运动的2D或3D图像上动态地(运行中)产生3D动画效果的方法的流程图;
图4是根据示例实施例的在3D显示器上实时产生3D动画效果的***的框图;
图5是根据示例实施例的产生深度图的方法的流程图;
图6是根据示例实施例的检测关注区的方法的流程图;
图7是根据示例实施例的检测文本区域的方法的流程图;
图8是根据示例实施例的检测针对“闪光(Flashing Light)”的感兴趣区域的方法的流程图,其中“闪光”是3D动画效果;
图9是根据示例实施例的产生“肥皂泡”效果的方法的流程图,其中“肥皂泡”效果是3D动画效果;
图10是根据示例实施例的产生“闪光”效果的方法的流程图,其中“闪光”效果是3D动画效果;
图11是根据示例实施例的产生“信标灯光”效果的方法的流程图,其中“信标灯光”效果是3D动画效果。
具体实施方式
现在将详细参考附图中所示的示例实施例,贯穿附图相似的参考数字表示相似的单元。对此,示例实施例可以具有不同的形式,发明构思不应被解释为限于本文阐述的内容。因此,以下参考附图描述了示例实施例仅用于说明本说明书的一些方面。本文中使用的术语“和/或”包含相关所列项目中一个或多个的任意所有组合。在元件列表前面的例如“……中的至少一个”等表述修饰整个元件列表但不修饰列表中的单独的元件。
在示例实施例的描述中,当认为对相关技术的特定详细说明可能不必要地模糊本发明构思的实质时,省略了这种对相关技术的特定详细说明。
将理解,当提到元件与另一元件“连接”或“耦合”时,可以将该元件与另一元件“直接连接或耦合”,或者以二者之间具有中间元件的形式“电连接”。还将理解,除非特别指出,否则本文中使用的术语“包括”和/或“包含”表明组件的存在,但并不排除一个或多个其他组件的存在或添加。
在以下描述示例实施例时,在用于显示3D图像的屏幕上获得三维(3D)动画效果的多媒体对象可以是平面2D图像、立体3D图像和运动图像中的至少一个。
下文中将参考附图更全面地描述示例实施例。
图1是示出了根据示例实施例的3D动画中的若干帧的图,其中对静止图像应用“肥皂泡”效果。
可以对允许产生动画帧的图像应用肥皂泡的参数,例如,大小、颜色、运动路径等等,在实践中所述动画帧在时间上不重复。在开始产生动画之前用户仅看到静止图像101。此外,当产生动画效果时,用户可以看到在图像前面在3D空间中飞舞的肥皂泡102和103。
图2是根据示例实施例的在3D显示器上实时产生3D动画的方法的流程图,所述方法由3D动画效果产生***来执行。
在操作201,选择视觉多媒体对象。视觉多媒体对象可以是不动的(静止的)2D或3D图像或者视频序列。
在操作202,在视觉多媒体对象上检测至少一个感兴趣区域,并确定感兴趣区域的至少一个特征。感兴趣区域可以是被选择为对视觉多媒体对象中的图像进行处理的区域。例如可以使用感兴趣区域来处理图像中的必要区域而不是整个图像。感兴趣区域和特征可以随着动画效果的类型的不同而不同。在视觉多媒体对象上检测感兴趣区域期间,可以执行对视觉多媒体对象的预处理。可以使用例如以下中的至少一个来预处理该对象:亮度调节、着色、伽马校正、白平衡调节以及颜色***转换。
在操作203,构建包含所选视觉多媒体对象的3D场景。本文中,将所选视觉多媒体对象用作叠加在3D场景背景上的纹理。对于3D视觉对象,可以检测与所选视觉多媒体对象上呈现的场景的深度有关的信息。3D视觉对象可以是包含在所选视觉多媒体对象中的对象、不同的对象、或者应用了3D效果的视觉对象。可以使用与场景深度有关的信息来构建3D场景的背景。如上所述,将所选视觉多媒体对象作为纹理叠加在3D场景的背景上。在操作203中,可以执行操作204和205。然而本发明的实施例不限于此。
在操作204,根据感兴趣区域及其特征来产生至少一个3D视觉对象,并将3D视觉对象放置在3D场景中。3D视觉对象包括将出现在3D场景中的3D动画效果。存在两种产生3D视觉对象的方法。在第一种方法中,可以从所有检测到的感兴趣区域中随机选择若干感兴趣区域。在第二种方法中,可以根据若干感兴趣区域的特征从所有检测到的感兴趣区域中选择若干感兴趣区域。
在操作205,可以执行3D对象的转换以及3D场景空间中3D动画效果的产生。如果可以顺次执行3D对象的转换。当执行3D空间中3D对象的顺次转换时,可以执行以下转换:移动、旋转、扭曲、改变尺寸、将至少两个3D对象合并成一个、将对象分成至少两个新的3D视觉对象。除此之外,可以针对用作场景背景的视觉对象产生附加的动画效果。
图3是根据示例实施例的在不存在对象运动的2D或3D图像上动态(运行中)产生3D动画效果的方法的流程图。
在操作301,从适当的源接收图像,例如通过从硬盘读取,。
然后在操作302,针对图像产生深度图。
在操作303,在图像上检测至少一个感兴趣区域。在操作304,针对至少一个感兴趣区域中的每一个确定至少一个特征。
在操作305,基于所确定的特征产生至少一个3D视觉对象。
在操作306,通过将3D视觉对象与3D场景中的至少一幅图像相组合,来产生多个3D动画帧。可以针对每个3D帧来变换和显示3D视觉对象。可以将3D视觉对象放置在每个3D帧中的不同位置。因此,当播放产生的3D帧时,可以在3D场景的空间中将3D视觉对象显示为移动或变换。
在操作307,将动画的帧可视化。
在操作308,确定是否要停止动画。如果不停止动画,则执行操作306。在停止动画之前,始终连续地重复操作306和307。
图4是根据示例实施例的用于在3D显示器上实时产生3D动画效果的***的框图。
参考图4,用于产生3D动画效果的***400可以包括感兴趣区域检测模块401、特征确定模块402、3D视觉对象产生模块403、3D场景产生模块404、3D转换模块405、帧产生模块以及3D显示器407。
感兴趣区域检测模块401接收视觉多媒体对象作为输入。感兴趣区域检测模块401在视觉多媒体对象上检测至少一个感兴趣区域。特征确定模块402接收至少一个检测到的感兴趣区域的列表并确定感兴趣区域的至少一个特征。
接收视觉多媒体对象和检测到的感兴趣区域的列表的特征确定模块402确定视觉多媒体对象上感兴趣区域的特征。将所确定的感兴趣区域的特征输入到3D视觉对象产生模块403,其中3D视觉对象产生模块403产生至少一个3D视觉对象。
将所确定的感兴趣区域的特征输入到3D视觉对象产生模块403。3D视觉对象产生模块403根据感兴趣区域的特征来产生3D视觉对象。将产生的3D视觉对象输入到3D场景产生模块404,其中3D场景产生模块404产生3D场景。
接收视觉多媒体对象和3D视觉对象的3D场景产生模块404针对视觉多媒体对象和产生的3D视觉对象构建3D场景。将3D场景输入到3D转换模块405。
接收3D场景的3D转换模块405在3D场景的空间中转换3D对象。如果3D视觉对象产生模块403产生了两个或更多个3D对象,则3D转换模块405在3D场景的空间中顺次转换这两个或更多个3D对象。将转换后的3D对象和3D场景输入到帧产生模块406。
接收转换后的3D对象和3D场景的帧产生模块406以适合于在3D显示器上可视化的格式产生多个3D帧,然后将产生的3D帧输出到3D显示器407,其中3D显示器407将帧可视化。
如图4所示并且如上所述在用于产生3D动画效果的***400中包含的模块401至406可以以片上***(SoC)、现场可编程门阵列(FPGA)或专用集成电路(ASIC)的形式来实现。
图5是根据示例实施例的产生深度图的方法的流程图,所述深度图用于限定视觉对象的参数,具体地,移动路径。深度图的产生可以对应于图3的操作302。在操作501中,确定图像格式。如果图像格式是立体图像(条件502),则可以使用用于估计场景深度和视差图(disparity map)的方法之一来接收深度图。视差指的是立体图像中人的左右眼观看的图像点之间的差异。图像中位于互不相同的距离处的对象可以具有互不相同的视差值。估计方法可以是例如论文“Robust Phase Correlation BasedSub-pixel Disparity Estimation”(H.Yan and J.Guo Liu,Proc.of 4th SEASDTC Technical Conference,2009)中描述的方法。
在操作503,如果图像类型是平面图像,则可以使用将静态图像从2D转换到3D的方法之一来接收深度图。例如,转换方法可以是论文“2D-to-3D conversion by using visual attention analysis”(J.Kim,A.Baik,Y.Ju Jung,D.Park,Proc.SPIE 7524,Stereoscopic Displays andApplications XXI,2010)中描述的基于注意区的检测来执行的方法。
注意区不仅可以用于2D到3D的转换,还可以用于将被看做是感兴趣区域的一些类型的动画效果。根据示例实施例,注意区是由于以下的组合而接收到的:具有文本图像的区域、人脸图像的区域以及根据人类即时视野(human instant sight)模型来确定的特征图/显著图(saliencymap)。
图6是根据示例实施例的检测注意区的方法的流程图。在操作601,检测文本区域。这是参考图7来描述的。在操作602,检测人脸图像区域。可以使用论文“An Improvement of face detection algorithm for colorphotos”(Egorova,M.A.,Murynin,A.B.,Safonov,I.V.,Pattern Recognitionand Image Analysis,vol.19,No.4,pp.634-640,2009)中描述的方法来检测人脸图像区域。在操作603,计算特征图。可以使用在论文“GlobalContrast based Salient Region Detection”(M.M.Cheng,G.X.Zhang,N.J.Mitra X.Huang,S.M.Hu,Proc.of IEEE CVPR,pp.409-416,2011)中描述的方法来有效地计算特征图。在操作604,在注意区的映射图中组合所有检测到的区域和特征图。可以通过对标记出的文本区域和人脸区域的图像并且还有特征图进行加权求和,来执行该操作。
图7是根据示例实施例的检测文本区域的方法的流程图。在操作701,可以检测轮廓差(contour difference)。对此,可以采用具有后续阈值切除(subsequent threshold cutting)的高斯拉普拉斯(LoG)滤波器。在操作702,计算不存在轮廓的区域,并通过执行形态学(morphological)操作来进一步恢复计算出的区域。在基本情形下可以使用操作“闭合(close)”。在操作703,利用具有检测到的轮廓差的图像来标记相干区域。在操作704,将相邻的相干区域组合成组。将每一组分类为文本区域和非文本区域。可以使用论文“Bottom-up Document Segmentation MethodBased on Textural Features”(A.M.Vii’kin,I.V.Safonov,M.A.Egorova,Pattern Recognition and Image Analysis,vol.21,No.3,pp.565-568,2011)中描述的方法来进行这种分类。
上述示例实施例的示例可以是3D动画艺术效果“闪光”。“闪光”效果示出了位于图像的较小亮片段中白色或彩色星星的闪烁和旋转。图8是根据示例实施例的针对“闪光”效果检测感兴趣区域的方法的流程图。在操作801,构造图像像素的亮度直方图。在操作802,进一步执行针对分割的阈值计算。在操作803,通过执行阈值切除来分割图像,以在图像中找到最亮的地方。在操作804,进一步执行对相干区域的标记,所述相干区域是要对其应用“闪光”效果的感兴趣区域。针对每个感兴趣区域计算特征集合。此外,特征集合可以包括以下之中的至少一个:
·区域极限中颜色分量的平均值
·权重中心的坐标
·感兴趣区域与图像区域的面积比值
·球系数(rotundity coefficient)——面积与感兴趣区域的面积相同的圆形的直径跟感兴趣区域的最大线性尺寸之间的比值;以及
·与小光源的相似度系数——作为感兴趣区域的最大亮度、平均亮度、球系数和感兴趣区域的相对面积的加权和而计算的集成参数。
从所有感兴趣区域中进一步选择特征满足预定标准的区域。用于产生3D视觉对象的模块产生视觉对象列表。根据感兴趣区域的特征,视觉对象列表可以包括例如闪烁并且旋转的星星或者各个星星的位置、大小或颜色清晰度(color definition)。
图9是根据示例实施例的产生“肥皂泡”效果的方法的流程图,其中“肥皂泡”效果是3D动画效果。肥皂泡效果可以显示在图像中飞舞的肥皂泡。在操作901,通过使用与深度有关的信息来改变肥皂泡的位置。在操作902,肥皂泡的颜色随着图像的适当区域中照明的方向而变化。在操作903,在调节了参数之后,在动画的当前帧中将源图像可视化。在操作904,将肥皂泡可视化。可以在当前帧中执行肥皂泡的可视化。
图10是根据示例实施例的产生“闪光”效果的方法的流程图,其中“闪光”效果是3D动画效果。在操作1001,闪光的类型根据当前的时间以及场景的深度而变化。可以根据深度图来调节Z轴上的坐标。可以基于z坐标和光源参数来确定大小、亮度和颜色的初始值。其他参数可以在对用户产生更亮印象的时间过程中逐步改变。在操作1002,在调节了参数之后,在动画的当前帧中将源图像可视化。在操作1003,将闪光可视化,作为准备动画的当前帧的最后步骤。
图11是根据示例实施例的产生“信标灯光”效果的方法的流程图,其中“信标灯光”效果是动画效果。可以在从信标的光锥获得的光斑(lightstain)的图像中形成“信标灯光”效果。光斑首先位于作为图像中最合适位置的较亮位置处,然后移向图像的注意区。在操作1101,信标灯光的光斑的方向在3D空间中改变。信标灯光的光斑的位置可以随着图像上的移动而变化。在注意区上产生信标灯光的移动路径。如上所述产生注意区。在操作1102,根据场景深度来确定光斑的大小、亮度、形状和颜色。这可以允许产生为用户提供真实印象的效果。在操作1103,在调节了参数之后,将动画的当前帧中变黑的(blackout)源图像可视化。可以应用变暗(darkening)以使光斑更显著。在操作1104,将信标灯光的光斑可视化,作为准备动画的当前帧的最后步骤。
对于多媒体对象的内容,例如,照片上呈现的内容,可以修改效果的外观。根据上述实施例中的一个或多个,动态(运行中)产生3D动画效果的方法可以提供一种印象深刻并且具有吸引力的方法,其中可以在现代3D显示器上审阅多媒体对象。上述实施例可以即使在用户审阅2D照片时为用户提供满意的体验。根据上述实施例,动态产生3D动画效果的方法和***可以用于包含3D显示器并且可以采用多媒体对象的显示功能的设备。这种设备的示例可以是具有多媒体能力的3D电视、移动电话、平板电脑、数字摄相机、相框或者用于PC以进行多媒体显示的软件。
本领域技术人员将理解,在不脱离所附权利要求所限定的本发明的精神和范围的前提下,可以对上述装置和方法做出形式和细节上的各种删除、替换和改变。
此外,其他实施例还可以通过介质(例如,计算机可读介质)中的计算机可读代码/指令来实现,以控制至少一个处理元件实现任何上述实施例。介质可以与允许存储和/或存储计算机可读代码的任何介质/媒介相对应。
可以以多种方式在介质上记录/传递计算机可读代码,介质的示例包括诸如磁性存储介质(例如,ROM、软盘、硬盘等)和光学存储介质(例如,CD-ROM或DVD)之类的记录介质以及诸如互联网传输介质之类的传输介质。因此,介质可以是如此定义的并且可测量的结构,包括或承载信标或信息,如,根据一个或多个实施例,承载比特流的设备。介质还可以是分布式网络,使得以分布的方式存储/传递并执行计算机可读代码。此外,处理元件可以包括处理器或计算机处理器,处理元件可以分布在和/或包含在单一设备中。
应理解,上述实施例仅应被看作是描述性的,不用于限制。每个实施例中特征或方面的描述应当典型地被看作是可用于其他实施例中的其他类似特征或方面。例如,以单一形式描述的每个组件是可以以分布的形式来执行的。同样,以分布的形式描述的组件是可以以组合的形式来执行的。
尽管参考附图描述了一个或多个实施例,然而本领域技术人员将理解,在不脱离以上权利要求限定的本发明构思的精神和范围的前提下可以做出形式和细节上的各种改变。

Claims (15)

1.一种产生三维3D动画效果的方法,所述方法包括:
在视觉多媒体对象上检测至少一个感兴趣区域,并确定检测到的感兴趣区域的至少一个特征;
构建包括视觉多媒体对象的3D场景;
根据感兴趣区域以及感兴趣区域的特征,在3D场景中产生动画效果的至少一个3D视觉对象;并且
执行3D场景空间中3D视觉对象的转换和3D场景的转换中的至少一个,使得由于3D场景的可视化而产生3D动画效果。
2.根据权利要求1所述的方法,其中,视觉多媒体对象包括以下中的至少一个:二维2D图像、3D图像和视频序列。
3.根据权利要求1所述的方法,其中,当在视觉多媒体对象上检测到感兴趣区域时,通过以下中的至少一个对视觉多媒体对象进行预处理:亮度调节、着色、伽马校正、白平衡调节和颜色***转换。
4.根据权利要求1所述的方法,其中,检测至少一个感兴趣区域包括检测多个感兴趣区域,并且
通过从检测到的多个感兴趣区域中随机选择选定数目的感兴趣区域,来执行3D视觉对象的产生。
5.根据权利要求1所述的方法,其中,检测至少一个感兴趣区域包括检测多个感兴趣区域,并且
通过基于选定数目的感兴趣区域的特征从检测到的多个感兴趣区域中选择选定数目的感兴趣区域,来执行3D视觉对象的产生。
6.根据权利要求1所述的方法,其中,通过使用视觉多媒体对象作为叠加在3D场景的背景上的纹理,来执行3D场景的构建。
7.根据权利要求6所述的方法,其中,通过检测与关于视觉多媒体对象的场景深度有关的信息,来执行3D场景的构建,并且
检测到的信息用于构建3D场景的背景。
8.根据权利要求1所述的方法,其中,3D视觉对象的转换包括以下中的至少一个:移动、旋转、扭曲、改变大小和合并至少两个3D对象,或者将3D对象分成至少两个新的3D视觉对象。
9.根据权利要求1所述的方法,其中,通过使用视觉多媒体对象作为3D场景的背景并针对视觉多媒体对象产生3D动画效果,来执行3D场景的可视化。
10.一种在显示器上产生三维3D动画效果的装置,所述装置包括:
感兴趣区域检测模块,配置为在视觉多媒体对象上检测至少一个感兴趣区域;
特征确定模块,配置为确定视觉多媒体对象上检测到的感兴趣区域的至少一个特征;
3D视觉对象产生模块,配置为基于感兴趣区域的特征来产生至少一个3D视觉对象;
3D场景产生模块,配置为基于视觉多媒体对象和产生的3D视觉对象来产生3D场景;
3D转换模块,配置为在3D场景空间中转换3D视觉对象;以及
帧产生模块,配置为通过使用包含转换后的3D视觉对象的3D场景来产生3D帧。
11.根据权利要求10所述的装置,其中,当检测到视觉多媒体对象上的感兴趣区域时,感兴趣区域检测模块通过亮度调节、着色、伽马校正、白平衡调节和颜色***转换中的至少一个对视觉多媒体对象进行预处理。
12.根据权利要求10所述的装置,其中,感兴趣区域检测模块检测多个感兴趣区域,并且
3D视觉对象产生模块通过从检测到的多个感兴趣区域中随机选择选定数目的感兴趣区域来产生3D视觉对象。
13.根据权利要求10所述的装置,其中,感兴趣区域检测模块检测多个感兴趣区域,并且
3D视觉对象产生模块通过基于选定数目的感兴趣区域的特征从检测到的多个感兴趣区域中选择选定数目的感兴趣区域,来产生3D视觉对象。
14.根据权利要求10所述的装置,其中,3D场景产生模块通过使用视觉多媒体对象作为叠加在3D场景的背景上的纹理,来产生3D场景。
15.根据权利要求10所述的装置,其中,3D场景产生模块通过检测与关于视觉多媒体对象的场景深度有关的信息来产生3D场景,并且
检测到的信息用于构建3D场景的背景。
CN201410012369.4A 2013-01-11 2014-01-10 3d动画效果产生方法和*** Pending CN103929634A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
RU2013101015 2013-01-11
RU2013101015/08A RU2540786C2 (ru) 2013-01-11 2013-01-11 Способ и система динамической генерации трехмерных анимационных эффектов
KR10-2013-0035465 2013-04-01
KR1020130035465A KR20140091428A (ko) 2013-01-11 2013-04-01 3d 애니메이션 효과의 생성 방법 및 시스템

Publications (1)

Publication Number Publication Date
CN103929634A true CN103929634A (zh) 2014-07-16

Family

ID=49955913

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410012369.4A Pending CN103929634A (zh) 2013-01-11 2014-01-10 3d动画效果产生方法和***

Country Status (3)

Country Link
US (1) US20140198101A1 (zh)
EP (1) EP2755187A3 (zh)
CN (1) CN103929634A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104574484A (zh) * 2014-12-31 2015-04-29 北京奇虎科技有限公司 一种基于交互操作产生图片动态效果的方法和装置
CN104574483A (zh) * 2014-12-31 2015-04-29 北京奇虎科技有限公司 一种生成可定制动态图的方法和装置
CN105700769A (zh) * 2015-12-31 2016-06-22 宇龙计算机通信科技(深圳)有限公司 一种动态素材添加方法、装置和电子设备
CN106303491A (zh) * 2015-05-27 2017-01-04 深圳超多维光电子有限公司 图像处理方法及装置
CN106303493A (zh) * 2015-05-27 2017-01-04 深圳超多维光电子有限公司 图像处理方法及装置
CN106303494A (zh) * 2015-05-27 2017-01-04 深圳超多维光电子有限公司 视频处理方法及装置
CN106303492A (zh) * 2015-05-27 2017-01-04 深圳超多维光电子有限公司 视频处理方法及装置
CN107835403A (zh) * 2017-10-20 2018-03-23 华为技术有限公司 一种以3d视差效果显示的方法及装置
CN109847360A (zh) * 2019-03-14 2019-06-07 网易(杭州)网络有限公司 游戏道具的3d效果处理方法、装置、电子设备及介质
CN114049384A (zh) * 2021-11-09 2022-02-15 北京字节跳动网络技术有限公司 图像生成视频的方法、装置及电子设备

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105631924B (zh) * 2015-12-28 2018-09-11 北京像素软件科技股份有限公司 一种场景中扭曲效果的实现方法
US9983697B1 (en) 2016-05-18 2018-05-29 Meta Company System and method for facilitating virtual interactions with a three-dimensional virtual environment in response to sensor input into a control device having sensors
US10303323B2 (en) * 2016-05-18 2019-05-28 Meta Company System and method for facilitating user interaction with a three-dimensional virtual environment in response to user input into a control device having a graphical interface
US10713853B2 (en) 2016-10-25 2020-07-14 Microsoft Technology Licensing, Llc Automatically grouping objects in three-dimensional graphical space
US10168789B1 (en) 2017-05-31 2019-01-01 Meta Company Systems and methods to facilitate user interactions with virtual content having two-dimensional representations and/or three-dimensional representations
BR102017012517A2 (pt) * 2017-06-12 2018-12-26 Samsung Eletrônica da Amazônia Ltda. método para exibição de mídia ou interface de bolhas em 360°
US11966793B1 (en) 2017-10-18 2024-04-23 Campfire 3D, Inc. Systems and methods to extend an interactive space across multiple platforms
KR20210107955A (ko) * 2020-02-24 2021-09-02 삼성전자주식회사 컬러 스테인 분석 방법 및 상기 방법을 이용하는 전자 장치
US20230209003A1 (en) * 2021-12-28 2023-06-29 At&T Intellectual Property I, L.P. Virtual production sets for video content creation

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070098290A1 (en) * 2005-10-28 2007-05-03 Aepx Animation, Inc. Automatic compositing of 3D objects in a still frame or series of frames
US20080007567A1 (en) * 2005-12-18 2008-01-10 Paul Clatworthy System and Method for Generating Advertising in 2D or 3D Frames and Scenes
CN101281656A (zh) * 2007-04-05 2008-10-08 三星电子株式会社 用于将纹理映射到三维对象模型的方法和装置
CN101542536A (zh) * 2006-11-20 2009-09-23 汤姆森特许公司 用于合成三维图像的***和方法
US20110169853A1 (en) * 2010-01-13 2011-07-14 Nintendo Co., Ltd. Image processing program, image processing apparatus, image processing method and image processing system
US20120068996A1 (en) * 2010-09-21 2012-03-22 Sony Corporation Safe mode transition in 3d content rendering

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6809745B1 (en) * 2001-10-01 2004-10-26 Adobe Systems Incorporated Compositing two-dimensional and 3-dimensional images
US7636089B2 (en) * 2005-09-09 2009-12-22 Microsoft Corporation Photo mantel view and animation
US20110187832A1 (en) * 2008-07-15 2011-08-04 Kenji Yoshida Naked eye three-dimensional video image display system, naked eye three-dimensional video image display device, amusement game machine and parallax barrier sheet

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070098290A1 (en) * 2005-10-28 2007-05-03 Aepx Animation, Inc. Automatic compositing of 3D objects in a still frame or series of frames
US20080007567A1 (en) * 2005-12-18 2008-01-10 Paul Clatworthy System and Method for Generating Advertising in 2D or 3D Frames and Scenes
CN101542536A (zh) * 2006-11-20 2009-09-23 汤姆森特许公司 用于合成三维图像的***和方法
CN101281656A (zh) * 2007-04-05 2008-10-08 三星电子株式会社 用于将纹理映射到三维对象模型的方法和装置
US20110169853A1 (en) * 2010-01-13 2011-07-14 Nintendo Co., Ltd. Image processing program, image processing apparatus, image processing method and image processing system
US20120068996A1 (en) * 2010-09-21 2012-03-22 Sony Corporation Safe mode transition in 3d content rendering

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104574484A (zh) * 2014-12-31 2015-04-29 北京奇虎科技有限公司 一种基于交互操作产生图片动态效果的方法和装置
CN104574483A (zh) * 2014-12-31 2015-04-29 北京奇虎科技有限公司 一种生成可定制动态图的方法和装置
CN106303492A (zh) * 2015-05-27 2017-01-04 深圳超多维光电子有限公司 视频处理方法及装置
CN106303491A (zh) * 2015-05-27 2017-01-04 深圳超多维光电子有限公司 图像处理方法及装置
CN106303493A (zh) * 2015-05-27 2017-01-04 深圳超多维光电子有限公司 图像处理方法及装置
CN106303494A (zh) * 2015-05-27 2017-01-04 深圳超多维光电子有限公司 视频处理方法及装置
CN106303493B (zh) * 2015-05-27 2018-06-29 深圳超多维光电子有限公司 图像处理方法及装置
CN106303494B (zh) * 2015-05-27 2018-07-17 深圳超多维光电子有限公司 视频处理方法及装置
CN105700769A (zh) * 2015-12-31 2016-06-22 宇龙计算机通信科技(深圳)有限公司 一种动态素材添加方法、装置和电子设备
CN105700769B (zh) * 2015-12-31 2018-11-30 宇龙计算机通信科技(深圳)有限公司 一种动态素材添加方法、装置和电子设备
CN107835403A (zh) * 2017-10-20 2018-03-23 华为技术有限公司 一种以3d视差效果显示的方法及装置
US11080943B2 (en) 2017-10-20 2021-08-03 Huawei Technologies Co., Ltd. Method and apparatus for displaying with 3D parallax effect
CN109847360A (zh) * 2019-03-14 2019-06-07 网易(杭州)网络有限公司 游戏道具的3d效果处理方法、装置、电子设备及介质
CN114049384A (zh) * 2021-11-09 2022-02-15 北京字节跳动网络技术有限公司 图像生成视频的方法、装置及电子设备
WO2023083179A1 (zh) * 2021-11-09 2023-05-19 北京字节跳动网络技术有限公司 图像生成视频的方法、装置及电子设备

Also Published As

Publication number Publication date
EP2755187A2 (en) 2014-07-16
EP2755187A3 (en) 2016-02-10
US20140198101A1 (en) 2014-07-17

Similar Documents

Publication Publication Date Title
CN103929634A (zh) 3d动画效果产生方法和***
US10652522B2 (en) Varying display content based on viewpoint
US8982192B2 (en) Visual information display on curvilinear display surfaces
CN102075694B (zh) 用于视频制作、后期制作和显示适应的立体编辑
US9445072B2 (en) Synthesizing views based on image domain warping
Feng et al. Object-based 2D-to-3D video conversion for effective stereoscopic content generation in 3D-TV applications
US20080246759A1 (en) Automatic Scene Modeling for the 3D Camera and 3D Video
US10484599B2 (en) Simulating depth of field
US10621777B2 (en) Synthesis of composite images having virtual backgrounds
US20150379720A1 (en) Methods for converting two-dimensional images into three-dimensional images
CN103250184A (zh) 基于全局运动的深度估计
CN103609105A (zh) 用于生成用于显示器的信号的方法和设备
Kuo et al. Depth estimation from a monocular view of the outdoors
KR20210038659A (ko) 2차원 이미지를 외삽하기 위해 깊이 정보를 사용하는 시스템 및 방법
KR101125061B1 (ko) Ldi 기법 깊이맵을 참조한 2d 동영상의 3d 동영상 전환방법
Zhang et al. Interactive stereoscopic video conversion
Yang et al. Depth map generation using local depth hypothesis for 2D-to-3D conversion
KR101785203B1 (ko) 깊이 이미지를 이용한 다시점 객체 분리 방법 및 시스템
US11418725B1 (en) Increasing dynamic range of a virtual production display
JP7387029B2 (ja) ソフトレイヤ化および深度認識インペインティングを用いた単画像3d写真技術
RU2540786C2 (ru) Способ и система динамической генерации трехмерных анимационных эффектов
CN104952099A (zh) 一房一景数字看房***
Su et al. View synthesis from multi-view RGB data using multilayered representation and volumetric estimation
Shin et al. Flickering Elimination Method for Background Region in Depth Video
Richardt Colour videos with depth: acquisition, processing and evaluation

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140716