CN111124228A - 一种信息处理方法及电子设备 - Google Patents
一种信息处理方法及电子设备 Download PDFInfo
- Publication number
- CN111124228A CN111124228A CN201911338484.XA CN201911338484A CN111124228A CN 111124228 A CN111124228 A CN 111124228A CN 201911338484 A CN201911338484 A CN 201911338484A CN 111124228 A CN111124228 A CN 111124228A
- Authority
- CN
- China
- Prior art keywords
- gesture
- image
- track
- information
- position information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请公开了一种信息处理方法及电子设备,第一设备确定对第一物体执行的第一手势,识别第一手势的第一手势轨迹及第一手势的第一位置信息,基于第一位置信息、第一手势的第一手势轨迹与第一物体相结合后得到第一图像,使第二设备呈现第一图像,并能够基于获取的第二设备对第一图像的调整信息在第一物体上呈现调整后的轨迹。本方案通过将第一手势的手势轨迹与第一物体结合后得到第一图像,并在第二设备上呈现第一图像,以使第二设备能够对第一图像进行调整,实现了在第一图像上将第一物体与第一手势轨迹基于其所在位置进行结合,实现了通过手势对物体添加轨迹并形成图像,实现了在远程会议交互过程中对图像或实物的标注或修订,提高了用户体验。
Description
技术领域
本申请涉及控制领域,尤其涉及一种信息处理方法及电子设备。
背景技术
目前,在进行远程会议时,通常仅能通过视频会议的方式实现对图像或实物的解说。
而在会议过程中,若要实现对图像或实物的修订或批注内容的共享,就需要一方将图像上传,之后进行批注或修订,将经过批注或修订的图像或实物图像发送给另一方,这一过程操作复杂,降低了用户体验。
发明内容
有鉴于此,本申请提供一种信息处理方法及电子设备,其具体方案如下:
一种信息处理方法,应用于第一设备,所述方法包括:
所述第一设备确定对第一物体执行的第一手势;
识别所述第一手势的第一手势轨迹及所述第一手势的第一位置信息;
基于所述第一位置信息、所述第一手势的第一手势轨迹与所述第一物体相结合后得到第一图像;
将所述第一图像发送至第二设备,以使所述第二设备呈现所述第一图像,并能够基于获取的所述第二设备对所述第一图像的调整信息在所述第一物体上呈现调整后的轨迹。
进一步的,所述基于所述第一位置信息,所述第一手势的第一手势轨迹与所述第一物体相结合后得到第一图像,包括:
基于所述第一手势的第一位置信息,确定所述第一手势在所述第一物体上对应的第二位置信息;
将所述第一手势的第一手势轨迹添加至所述第一物体上的第二位置信息,得到所述第一手势的第一手势轨迹与所述第一物体相结合后的第一图像。
进一步的,所述能够基于获取的所述第二设备对所述第一图像的调整信息在所述第一物体上呈现调整后的轨迹,包括:
获取所述第二设备对所述第一图像的调整信息;
确定所述调整信息作用于所述第一图像后得到的调整结果;
将所述调整结果与所述第一物体结合后进行显示。
进一步的,所述调整信息至少包括:
所述第二设备对所述第一图像中所述第一手势轨迹的调整信息,或,对所述第一图像中的所述第一物体的图像执行第二手势生成的第二手势轨迹。
进一步的,所述确定所述调整信息作用于所述第一图像后得到的调整结果,包括:
若所述调整信息为对所述第一图像中的所述第一物体的图像执行第二手势生成的第二手势轨迹,则识别所述第二手势的第三位置信息;
基于所述第二手势的第三位置信息,对所述第二手势轨迹进行显示。
进一步的,所述基于所述第二手势的第三位置信息,对所述第二手势轨迹进行显示,包括:
基于所述第二手势的第三位置信息,确定所述第二手势在所述第一物体上对应的第四位置信息;
在所述第一物体的第四位置信息处,显示所述第二手势轨迹。
进一步的,所述基于所述第二手势的第三位置信息,对所述第二手势轨迹进行显示,包括:
基于所述第二手势的第三位置信息,确定所述第二手势在所述第一物体上对应的第四位置信息;
基于所述第一手势的第一位置信息,确定所述第一手势在所述第一物体上对应的第二位置信息;
在所述第一物体的第四位置信息处,显示所述第二手势轨迹,同时在所述第一物体的第二位置信息处,显示所述第一手势轨迹。
一种电子设备,包括:处理器及传感器,其中:
所述传感器用于获取对第一物体执行的第一手势;
所述处理器用于识别所述第一手势的第一手势轨迹及所述第一手势的第一位置信息;基于所述第一位置信息、所述第一手势的第一手势轨迹与所述第一物体相结合后得到第一图像;将所述第一图像发送至第二设备,以使所述第二设备呈现所述第一图像,并能够基于获取的所述第二设备对所述第一图像的调整信息在所述第一物体上呈现调整后的轨迹。
进一步的,所述处理器用于:
基于所述第一手势的第一位置信息,确定所述第一手势在所述第一物体上对应的第二位置信息,将所述第一手势的第一手势轨迹添加至所述第一物体上的第二位置信息,得到所述第一手势的第一手势轨迹与所述第一物体相结合后的第一图像。
进一步的,所述处理器用于:
获取所述第二设备对所述第一图像的调整信息,确定所述调整信息作用于所述第一图像后得到的调整结果,将所述调整结果与所述第一物体结合后进行显示。
从上述技术方案可以看出,本申请公开的信息处理方法及电子设备,第一设备确定对第一物体执行的第一手势,识别第一手势的第一手势轨迹及第一手势的第一位置信息,基于第一位置信息、第一手势的第一手势轨迹与第一物体相结合后得到第一图像,将第一图像发送至第二设备,以使第二设备呈现第一图像,并能够基于获取的第二设备对第一图像的调整信息在第一物体上呈现调整后的轨迹。本方案通过将第一手势的手势轨迹与第一物体结合后得到第一图像,并在第二设备上呈现第一图像,以使第二设备能够对第一图像进行调整,实现了在第一图像上将第一物体与第一手势轨迹基于其所在位置进行结合,实现了通过手势对物体添加轨迹并形成图像,实现了在远程会议交互过程中对图像或实物的标注或修订,提高了用户体验。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例公开的一种信息处理方法的流程图;
图2为本申请实施例公开的一种第一手势与第一物体相接触的示意图;
图3为本申请实施例公开的一种第一手势与第一物体未接触的示意图;
图4为本申请实施例公开的一种获取第一手势轨迹的示意图;
图5为本申请实施例公开的一种第一位置信息与第二位置信息的示意图;
图6为本申请实施例公开的一种第二设备呈现第一图像的示意图;
图7为本申请实施例公开的一种信息处理方法的流程图;
图8为本申请实施例公开的一种电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请公开了一种信息处理方法,应用于第一设备,其流程图如图1所示,包括:
步骤S11、第一设备确定对第一物体执行的第一手势;
第一设备可以为图像采集装置,能够获取其取景框内的图像信息,并将采集到的图像信息发送至第二设备,由第二设备通过投影的方式显示该图像信息;进一步的,在第二设备通过投影方向显示该图像信息后,在第二设备端的用户可以对图像信息进行编辑或修订之后再返回给第一设备,第一设备通过投影的方式显示第二设备发回的图像信息。
具体的,在双方远程交互过程中,若一方想将其看到的三维或二维物体传输给另一方看到,可以通过视频图像的方式传输;若一方想对三维或二维物体做标记,则需要首先获取二维或三维物体的图像,之后直接在图像上做标记,再将有标记的图像传输给另一方,使其看到,然而这样的过程操作复杂,并且仅能对图像做标记,而不能对二维或三维物体直接做标记,就导致用户体验较低。
基于此,本方案中首先由用户对第一物体执行第一手势,该第一手势可以与第一物体相接触,如图2所示,也可以不与第一物体直接接触,如图3所示,第一预设范围为边框31。
另外,第一手势可以具有指向性,指向第一物体,从而使第一设备可以采集到该第一手势。
进一步的,第一手势也可以为某一预设手势,当用户执行该预设手势时,第一设备对其进行采集,之后识别。
需要说明的是,第一设备设置在能够采集到第一物体的图像的范围内,并且,可以采集到第一物体的第一预设范围内的图像,其中,第一设备能够采集到的图像的范围是大于第一预设范围的,或者,与第一预设范围相同。若第一设备能够采集到的图像的范围大于第一预设范围,则只有当第一手势是在第一预设范围之内执行的,第一设备才会将其确认为是对第一物体执行的;若第一手势是在第一预设范围之外执行的,则第一设备可以对其进行图像采集,但是不会将采集到的图像确认为是对第一物体执行的手势。
如图3所示,只有第一手势在第一预设范围内才能够被第一设备确认为是对第一物体执行的,若第一手势在边框31之外执行,则即使第一设备能够采集第一手势,也不会将其确认为是对第一物体执行的。
步骤S12、识别第一手势的第一手势轨迹及第一手势的第一位置信息;
由于第一手势是对第一物体执行的,在执行第一手势时,其必然有其执行该手势时的位置,即第一手势的第一位置信息,确定第一手势的第一位置信息,可具体通过距离传感器确定。
确定第一手势的第一位置信息,即确定第一手势的具体坐标位置,也可以是直接确定第一手势相对于第一物体的相对位置信息。
第一手势是连续的手势,那么,通过用户执行的第一手势必然可形成一个手势轨迹,获取第一手势的第一手势轨迹。
如图4所示,通过操作体41执行第一手势,第一手势可形成第一手势轨迹42,确定第一手势相对于第一物体的相对位置关系,同时,获取第一手势轨迹。
步骤S13、基于第一位置信息、第一手势的第一手势轨迹与第一物体相结合后得到第一图像;
在第一位置信息的基础上,将第一手势轨迹与第一物体相结合,可得到第一图像。
具体的,基于第一手势的第一位置信息,确定第一手势在第一物体上对应的第二位置信息,将第一手势的第一手势轨迹添加至第一物体上的第二位置信息,得到第一手势的第一手势轨迹与第一物体相结合后的第一图像。
由于第一手势是针对第一物体执行的,第一手势的第一位置信息在第一物体上是有相对应的第二位置信息的,如图5所示,包括:操作体51,操作体执行第一手势在第一位置信息处形成的第一手势轨迹52,第一手势的第一位置信息在第一物体上对应的第二位置信息处53。
需要说明的是,如果操作体执行的第一手势是直接作用于第一物体上的,则其第一位置信息即是位于第一物体上的,此时,不需要对第二位置信息进行获取;而对于操作体执行的第一手势并非直接作用于第一物体上的情况,则需要获取第二位置信息,以便实现在第一物体上第一手势轨迹的添加。
将第一手势轨迹直接添加至第二位置信息处,以便于获取将第一手势添加至第二位置信息处的图像,该图像中不仅包括第一物体,还包括添加至第一物体的第二位置信息处的第一手势轨迹。由此,即实现了将手势的轨迹添加至第一物体上并形成图像的方案,避免了现有技术中直接获取第一手势对第一物体执行操作的完整图像,以便识别出手势轨迹的方案,也避免了现有技术中需要手动在图像上添加轨迹的方案,减少了用户的操作,提高了用户体验。
进一步的,第一图像中不仅包括有对第一物体及第一手势轨迹进行获取得到的RGB平面图像,还包括上述平面图像的深度信息,即获取该平面图像中各点的三维坐标信息,以便确定该第一手势轨迹具体是作用于第一物体的什么三维位置的。
步骤S14、将第一图像发送至第二设备,以使第二设备呈现第一图像,并能够基于获取的第二设备对第一图像的调整信息在第一物体上呈现调整后的轨迹。
第一设备获取到添加有第一手势轨迹后的第一物体的第一图像后,将该第一图像发送至第二设备,以便于通过第二设备呈现第一图像。
具体的,第二设备呈现第一图像,可以具体为第二设备呈现二维平面的第一图像,也可以为第二设备呈现三维立体的第一图像,即第二设备呈现的不仅有三维的第一物体,还包括附加了第二位置信息的第一手势轨迹,即将图5所得到的添加有三维位置信息的第一手势轨迹的第一物体的图像由第二设备呈现,最终呈现结果如图6所示。
第二设备呈现出图6所示的三维图像后,位于第二设备端的用户同样可以对第二设备呈现的第一图像进行操作,如:手势操作,位于第二设备端的用户可以在第一图像的基础上增加手势轨迹,也可以在第一图像的基础上删除第一手势轨迹,或者,执行其他操作以便对第一物体进行编辑或调整。
其中,第一设备确定第一手势可以具体为:第一设备中包括用于识别手势的图像采集装置,该图像采集装置采集用户的手势,将其确定为第一手势图像,对第一手势图像进行识别,确定第一手势图像中第一手势的第一手势轨迹及第一手势的第一位置信息,以便形成第二手势图像。其中,第一手势图像可以为连续的录像,录制的是第一手势的轨迹图像,第二手势图像包括的是第一手势图像中的第一手势形成的轨迹的图像,之后将第二手势图像与第一物体的图像结合,使其呈现在第一物体的图像上,发送至第二设备,由第二设备投影显示第一手势图像与第一物体结合的图像。
另外,还可以为:在确定第一手势之后,还可以基于第一手势确定第一手势对应的手势指令,之后与第一物体结合形成第一图像的是第一手势对应的手势指令,即将第一图像发送至第二设备,由第二设备进行呈现,其呈现的是第一物体的图像以及第一手势对应的手势指令的图像,其中,手势指令可以具体为:建议删除,确认修改,或不接受修改等。此处能够形成手势指令的可以为静态的手势本身,也可以为动态的手势形成手势轨迹。
例如:第一设备检测到第一手势的手势轨迹为“√”,则其对应的手势指令为“确认修改”,那么,第一图像为第一物体的图像以及带有“确认修改”字样的图像,将该第一图像发送至第二设备,由第二设备进行呈现,使第二设备端的用户可以明确第一设备端的用户已确认了之前的修改。
另外,在第二设备端的用户对第一图像进行调整之后,可以确定第二设备端的调整轨迹及调整位置,以便将该调整轨迹添加到第一图像上与调整位置相对应的位置,从而得到调整后的图像,直接将调整后的图像反馈至第一设备,由第一设备呈现,以使第一设备端的用户能够明确第二设备端用户针对第一物体的想法;或者,上述第二设备端对第一图像的调整过程的识别可以由第一设备进行,而第二设备端仅是对第二设备端用户的调节进行获取,如:获取调节位置及调节轨迹,以便使第一设备在对该调整进行响应时,有响应依据。
本实施例公开的信息处理方法,第一设备确定对第一物体执行的第一手势,识别第一手势的第一手势轨迹及第一手势的第一位置信息,基于第一位置信息、第一手势的第一手势轨迹与第一物体相结合后得到第一图像,将第一图像发送至第二设备,以使第二设备呈现第一图像,并能够基于获取的第二设备对第一图像的调整信息在第一物体上呈现调整后的轨迹。本方案通过将第一手势的手势轨迹与第一物体结合后得到第一图像,并在第二设备上呈现第一图像,以使第二设备能够对第一图像进行调整,实现了在第一图像上将第一物体与第一手势轨迹基于其所在位置进行结合,实现了通过手势对物体添加轨迹并形成图像,实现了在远程会议交互过程中对图像或实物的标注或修订,提高了用户体验。
本实施例公开了一种信息处理方法,应用于第一设备,其流程图如图7所示,包括:
步骤S71、第一设备确定对第一物体执行的第一手势;
步骤S72、识别第一手势的第一手势轨迹及第一手势的第一位置信息;
步骤S73、基于第一位置信息、第一手势的第一手势轨迹与第一物体相结合后得到第一图像;
步骤S74、将第一图像发送至第二设备,以使第二设备呈现第一图像;
步骤S75、获取第二设备对第一图像的调整信息;
步骤S76、确定调整信息作用于第一图像后得到的调整结果;
步骤S77、将调整结果与第一物体结合后进行显示。
在第二设备获取第一图像,并对其进行呈现后,第二设备可以对其呈现的第一图像进行调整,以生成调整信息。
其中,对该第一图像进行调整,该第一图像为三维图像,其是包括有三维的第一物体以及呈现在第一物体上的第一手势轨迹,通过第二设备呈现的第一图像为虚像,第二设备端的用户可以基于第二设备呈现的虚像对其进行调整。其调整可以为:遮挡第一图像中的一部分,或者,增加其他手势轨迹,或者,删除第一手势轨迹等。
第二设备端的用户对第一图像进行调整,由于第一图像是三维图像,那么,第二设备端的用户对其进行的调整也是三维调整。
第二设备端的用户执行第二手势,第二设备获取该第二手势,其获取的不仅有第二手势的第二手势轨迹,还包括第二手势的位置,如:第二手势相对于第二设备呈现的第一物体的相对位置关系。之后第二设备将其识别到的信息统一发送至第一设备,由第一设备对上述信息进行识别,如:识别第二手势轨迹及第二手势的第三位置信息,基于第二手势的第三位置信息,对第二手势轨迹进行显示。
具体的,与基于第一设备端的用户执行的第一手势对第一物体进行调整的方式类似,确定第二手势的第三位置信息,获取第二图像中与第三位置信息相对应的第四位置信息,在第四位置信息处,显示第二手势轨迹,从而使得在第一设备确定第二设备端的用户对第一图像进行调整后得到的最终的图像为:第一物体的三维图像,第一位置信息处的第一手势轨迹及第四位置信息处的第二手势轨迹的结合。
若第二手势轨迹是用于对第一手势轨迹进行消除的,那么,第二手势轨迹可以为针对第一手势轨迹所在位置处执行的擦除动作对应的轨迹,其中,擦除动作对应的轨迹可以为预先设定的特定动作,即执行该特定动作,则会对执行该特定动作位置处的图像进行删除,其具体可以为:仅删除执行该特定动作位置处在本次之前的、与本次轨迹输入距离时间最近的一次轨迹输入中输入的手势轨迹。
例如:第一次手势是在第一位置处执行,第二次手势是在第二位置处执行,第三次手势是在第一位置处执行,第四次手势是执行的特定动作,并且其是在第一位置处执行的,由于该特定动作是用于删除手势轨迹的,那么,其仅能删除第三次手势所输入的手势轨迹。
另外,擦除手势轨迹也可以通过:在获取每一次手势时,同时获取手势轨迹的方向,当检测到在同一位置处有两次形状相同的手势轨迹,只是方向相反,则删除该位置处的这两个相同的手势轨迹。如:第一次手势是在第一位置处执行的沿顺时针方向的某一手势轨迹,第二次手势是在第一位置处执行的沿逆时针方向的该手势轨迹,则删除第一次手势及第二次手势形成的手势轨迹。
若第二手势轨迹并非是用于对第一手势轨迹进行消除的,则直接在三维的第一图像的基础上在第四位置信息处叠加第二手势轨迹即可。
在确定调整结果后,由第一设备对该调整结果进行输出显示。
进一步的,对第二手势轨迹进行显示,可以具体为:在第一图像的基础上对第二手势轨迹进行显示,或者,还可以为:在第一物体的基础上对第二手势轨迹进行显示。
若在第一图像的基础上对第二手势轨迹进行显示,第一物体的放置位置未发生变化,在第一设备获取到第二设备的调整信息后,需要在第一物体的基础上叠加显示第一图像中的第一物体,即第一物体的放置位置上,不止放置有第一物体的实体,还显示有第一物体的三维虚像,第一物体的实体与第一物体的三维虚像重合,使第一图像与第一物体不会产生错位,在第一物体的实体上叠加显示第一图像中第一物体的虚像,在第一图像中除第一物体的虚像外,还包括第一手势轨迹及第二手势轨迹,即在第一物体上在第一位置信息处显示第一手势轨迹,在第四位置信息处显示第二手势轨迹。
若在第一物体的基础上对第二手势轨迹进行显示,第一物体的放置位置未发生变化,第二设备的调整信息是基于第一图像进行的,而第一图像中是包括有第一物体的三维虚像的,那么,在第一设备获取到第二设备的调整信息后,直接仅显示针对第一物体的调整,而不显示第一物体的三维虚像。即第一设备获取到第二设备的调整信息后,直接在第一物体的实物的基础上,显示第一手势轨迹及第二手势轨迹,不再对第一物体的三维虚像进行叠加显示。由于第一设备获取到第二设备的调整信息,其仍然在第一物体的放置位置处进行显示,则无需显示调整信息中的第一物体的虚像。
另外,对第二手势轨迹进行显示,还可以为:第一设备获取第二设备发送的调整信息,第一设备对该调整信息进行提取,仅在第四位置信息处显示该调整信息中的第二手势轨迹。由于第一手势轨迹是第一设备端用户执行的,则第一设备端用户无需再获取其自身输入的第一手势轨迹,直接获取第二设备端用户对第一物体的图像执行的第二手势轨迹即可。因此,在显示时,可以直接在第一物体的放置位置处第一物体上的第四位置信息处显示第二手势轨迹,或者,在显示时,将图像中第一物体的虚像与第一物体的实物重叠之后,在第一物体的第四位置信息处显示第二手势轨迹。
当然,上述针对的第一物体及第一图像,可以为三维物体、三维图像,也可以为二维物体、二维图像,在此不对其做具体限定,仅是以三维物体、三维图像为例进行说明。
上述过程可以全部由第一设备完成,当然,关于第二设备端的调整信息对第一图像的调整结果也可以由第二设备执行,之后得到调整结果,直接将调整结果发送至第一设备即可,此时,第一设备与第二设备是两个功能完全相同的设备,均可以对手势进行识别,并将识别到的轨迹基于手势位置叠加到物体上,无论该物体是三维实物,还是三维虚像,均可以实现叠加并输出显示。
进一步的,第一设备除包括用于获取第一物体及第一手势的图像获取装置外,还包括:投影装置,用于对第二设备端发送的图像进行投影显示;另外,第一设备还可以包括:声音采集装置及声音输出装置,声音采集装置用于获取第一设备端用户在对第一物体执行第一手势时的声音信息的获取,并将获取到的声音信息与第一图像同步发送至第二设备进行输出;声音输出装置用于输出获取到的第二设备端用户在对第一图像进行调整时的语音信息。
同理,第二设备也可以包括:图像获取装置及投影装置,还可以包括:声音采集装置及声音输出装置。
本实施例公开的信息处理方法,第一设备确定对第一物体执行的第一手势,识别第一手势的第一手势轨迹及第一手势的第一位置信息,基于第一位置信息、第一手势的第一手势轨迹与第一物体相结合后得到第一图像,将第一图像发送至第二设备,以使第二设备呈现第一图像,并能够基于获取的第二设备对第一图像的调整信息在第一物体上呈现调整后的轨迹。本方案通过将第一手势的手势轨迹与第一物体结合后得到第一图像,并在第二设备上呈现第一图像,以使第二设备能够对第一图像进行调整,实现了在第一图像上将第一物体与第一手势轨迹基于其所在位置进行结合,实现了通过手势对物体添加轨迹并形成图像,实现了在远程会议交互过程中对图像或实物的标注或修订,提高了用户体验。
本实施例公开了一种电子设备,其结构示意图如图8所示,包括:
处理器81及传感器82。
其中,传感器82用于获取对第一物体执行的第一手势;
处理器81用于识别第一手势的第一手势轨迹及第一手势的第一位置信息,基于第一位置信息、第一手势的第一手势轨迹与第一物体相结合后得到第一图像,将第一图像发送至第二设备,以使第二设备呈现第一图像,并能够基于获取的第二设备对第一图像的调整信息在第一物体上呈现调整后的轨迹。
其中,本实施例公开的电子设备可以为以下表述中的第一设备,也可以为以下表述中的第二设备。以下,以电子设备为第一设备为例进行说明。
第一设备可以为图像采集装置,能够获取其取景框内的图像信息,并将采集到的图像信息发送至第二设备,由第二设备通过投影的方式显示该图像信息;进一步的,在第二设备通过投影方向显示该图像信息后,在第二设备端的用户可以对图像信息进行编辑或修订之后再返回给第一设备,第一设备通过投影的方式显示第二设备发回的图像信息。
具体的,在双方远程交互过程中,若一方想将其看到的三维或二维物体传输给另一方看到,可以通过视频图像的方式传输;若一方想对三维或二维物体做标记,则需要首先获取二维或三维物体的图像,之后直接在图像上做标记,再将有标记的图像传输给另一方,使其看到,然而这样的过程操作复杂,并且仅能对图像做标记,而不能对二维或三维物体直接做标记,就导致用户体验较低。
基于此,本方案中首先由用户对第一物体执行第一手势,该第一手势可以与第一物体相接触,如图2所示,也可以不与第一物体直接接触,如图3所示,第一预设范围为边框31。
另外,第一手势可以具有指向性,指向第一物体,从而使第一设备可以采集到该第一手势。
进一步的,第一手势也可以为某一预设手势,当用户执行该预设手势时,第一设备对其进行采集,之后识别。
需要说明的是,第一设备设置在能够采集到第一物体的图像的范围内,并且,可以采集到第一物体的第一预设范围内的图像,其中,第一设备能够采集到的图像的范围是大于第一预设范围的,或者,与第一预设范围相同。若第一设备能够采集到的图像的范围大于第一预设范围,则只有当第一手势是在第一预设范围之内执行的,第一设备才会将其确认为是对第一物体执行的;若第一手势是在第一预设范围之外执行的,则第一设备可以对其进行图像采集,但是不会将采集到的图像确认为是对第一物体执行的手势。
如图3所示,只有第一手势在第一预设范围内才能够被第一设备确认为是对第一物体执行的,若第一手势在边框31之外执行,则即使第一设备能够采集第一手势,也不会将其确认为是对第一物体执行的。
由于第一手势是对第一物体执行的,在执行第一手势时,其必然有其执行该手势时的位置,即第一手势的第一位置信息,确定第一手势的第一位置信息,可具体通过距离传感器确定。
确定第一手势的第一位置信息,即确定第一手势的具体坐标位置,也可以是直接确定第一手势相对于第一物体的相对位置信息。
第一手势是连续的手势,那么,通过用户执行的第一手势必然可形成一个手势轨迹,获取第一手势的第一手势轨迹。
如图4所示,通过操作体41执行第一手势,第一手势可形成第一手势轨迹42,确定第一手势相对于第一物体的相对位置关系,同时,获取第一手势轨迹。
在第一位置信息的基础上,将第一手势轨迹与第一物体相结合,可得到第一图像。
具体的,基于第一手势的第一位置信息,确定第一手势在第一物体上对应的第二位置信息,将第一手势的第一手势轨迹添加至第一物体上的第二位置信息,得到第一手势的第一手势轨迹与第一物体相结合后的第一图像。
由于第一手势是针对第一物体执行的,第一手势的第一位置信息在第一物体上是有相对应的第二位置信息的,如图5所示,包括:操作体51,操作体执行第一手势在第一位置信息处形成的第一手势轨迹52,第一手势的第一位置信息在第一物体上对应的第二位置信息处53。
将第一手势轨迹直接添加至第二位置信息处,以便于获取将第一手势添加至第二位置信息处的图像,该图像中不仅包括第一物体,还包括添加至第一物体的第二位置信息处的第一手势轨迹。由此,即实现了将手势的轨迹添加至第一物体上并形成图像的方案,避免了现有技术中直接获取第一手势对第一物体执行操作的完整图像,以便识别出手势轨迹的方案,也避免了现有技术中需要手动在图像上添加轨迹的方案,减少了用户的操作,提高了用户体验。
进一步的,第一图像中不仅包括有对第一物体及第一手势轨迹进行获取得到的RGB平面图像,还包括上述平面图像的深度信息,即获取该平面图像中各点的三维坐标信息,以便确定该第一手势轨迹具体是作用于第一物体的什么三维位置的。
第一设备获取到添加有第一手势轨迹后的第一物体的第一图像后,将该第一图像发送至第二设备,以便于通过第二设备呈现第一图像。
具体的,第二设备呈现第一图像,可以具体为第二设备呈现二维平面的第一图像,也可以为第二设备呈现三维立体的第一图像,即第二设备呈现的不仅有三维的第一物体,还包括附加了第二位置信息的第一手势轨迹,即将图5所得到的添加有三维位置信息的第一手势轨迹的第一物体的图像由第二设备呈现,最终呈现结果如图6所示。
第二设备呈现出图6所示的三维图像后,位于第二设备端的用户同样可以对第二设备呈现的第一图像进行操作,如:手势操作,位于第二设备端的用户可以在第一图像的基础上增加手势轨迹,也可以在第一图像的基础上删除第一手势轨迹,或者,执行其他操作以便对第一物体进行编辑或调整。
其中,第一设备确定第一手势可以具体为:第一设备中包括用于识别手势的图像采集装置,该图像采集装置采集用户的手势,将其确定为第一手势图像,对第一手势图像进行识别,确定第一手势图像中第一手势的第一手势轨迹及第一手势的第一位置信息,以便形成第二手势图像。其中,第一手势图像可以为连续的录像,录制的是第一手势的轨迹图像,第二手势图像包括的是第一手势图像中的第一手势形成的轨迹的图像,之后将第二手势图像与第一物体的图像结合,使其呈现在第一物体的图像上,发送至第二设备,由第二设备投影显示第一手势图像与第一物体结合的图像。
另外,还可以为:在确定第一手势之后,还可以基于第一手势确定第一手势对应的手势指令,之后与第一物体结合形成第一图像的是第一手势对应的手势指令,即将第一图像发送至第二设备,由第二设备进行呈现,其呈现的是第一物体的图像以及第一手势对应的手势指令的图像,其中,手势指令可以具体为:建议删除,确认修改,或不接受修改等。此处能够形成手势指令的可以为静态的手势本身,也可以为动态的手势形成手势轨迹。
例如:第一设备检测到第一手势的手势轨迹为“√”,则其对应的手势指令为“确认修改”,那么,第一图像为第一物体的图像以及带有“确认修改”字样的图像,将该第一图像发送至第二设备,由第二设备进行呈现,使第二设备端的用户可以明确第一设备端的用户已确认了之前的修改。
另外,在第二设备端的用户对第一图像进行调整之后,可以确定第二设备端的调整轨迹及调整位置,以便将该调整轨迹添加到第一图像上与调整位置相对应的位置,从而得到调整后的图像,直接将调整后的图像反馈至第一设备,由第一设备呈现,以使第一设备端的用户能够明确第二设备端用户针对第一物体的想法;或者,上述第二设备端对第一图像的调整过程的识别可以由第一设备进行,而第二设备端仅是对第二设备端用户的调节进行获取,如:获取调节位置及调节轨迹,以便使第一设备在对该调整进行响应时,有响应依据。
进一步的,处理器81具体用于:获取第二设备对第一图像的调整信息,确定调整信息作用于第一图像后得到的调整结果,将调整结果与第一物体结合后进行显示。
在第二设备获取第一图像,并对其进行呈现后,第二设备可以对其呈现的第一图像进行调整,以生成调整信息。
其中,对该第一图像进行调整,该第一图像为三维图像,其是包括有三维的第一物体以及呈现在第一物体上的第一手势轨迹,通过第二设备呈现的第一图像为虚像,第二设备端的用户可以基于第二设备呈现的虚像对其进行调整。其调整可以为:遮挡第一图像中的一部分,或者,增加其他手势轨迹,或者,删除第一手势轨迹等。
第二设备端的用户对第一图像进行调整,由于第一图像是三维图像,那么,第二设备端的用户对其进行的调整也是三维调整。
第二设备端的用户执行第二手势,第二设备获取该第二手势,其获取的不仅有第二手势的第二手势轨迹,还包括第二手势的位置,如:第二手势相对于第二设备呈现的第一物体的相对位置关系。之后第二设备将其识别到的信息统一发送至第一设备,由第一设备对上述信息进行识别,如:识别第二手势轨迹及第二手势的第三位置信息,基于第二手势的第三位置信息,对第二手势轨迹进行显示。
具体的,与基于第一设备端的用户执行的第一手势对第一物体进行调整的方式类似,确定第二手势的第三位置信息,获取第二图像中与第三位置信息相对应的第四位置信息,在第四位置信息处,显示第二手势轨迹,从而使得在第一设备确定第二设备端的用户对第一图像进行调整后得到的最终的图像为:第一物体的三维图像,第一位置信息处的第一手势轨迹及第四位置信息处的第二手势轨迹的结合。
若第二手势轨迹是用于对第一手势轨迹进行消除的,那么,第二手势轨迹可以为针对第一手势轨迹所在位置处执行的擦除动作对应的轨迹,其中,擦除动作对应的轨迹可以为预先设定的特定动作,即执行该特定动作,则会对执行该特定动作位置处的图像进行删除,其具体可以为:仅删除执行该特定动作位置处在本次之前的、与本次轨迹输入距离时间最近的一次轨迹输入中输入的手势轨迹。
例如:第一次手势是在第一位置处执行,第二次手势是在第二位置处执行,第三次手势是在第一位置处执行,第四次手势是执行的特定动作,并且其是在第一位置处执行的,由于该特定动作是用于删除手势轨迹的,那么,其仅能删除第三次手势所输入的手势轨迹。
另外,擦除手势轨迹也可以通过:在获取每一次手势时,同时获取手势轨迹的方向,当检测到在同一位置处有两次形状相同的手势轨迹,只是方向相反,则删除该位置处的这两个相同的手势轨迹。如:第一次手势是在第一位置处执行的沿顺时针方向的某一手势轨迹,第二次手势是在第一位置处执行的沿逆时针方向的该手势轨迹,则删除第一次手势及第二次手势形成的手势轨迹。
若第二手势轨迹并非是用于对第一手势轨迹进行消除的,则直接在三维的第一图像的基础上在第四位置信息处叠加第二手势轨迹即可。
在确定调整结果后,由第一设备对该调整结果进行输出显示。
进一步的,对第二手势轨迹进行显示,可以具体为:在第一图像的基础上对第二手势轨迹进行显示,或者,还可以为:在第一物体的基础上对第二手势轨迹进行显示。
若在第一图像的基础上对第二手势轨迹进行显示,第一物体的放置位置未发生变化,在第一设备获取到第二设备的调整信息后,需要在第一物体的基础上叠加显示第一图像中的第一物体,即第一物体的放置位置上,不止放置有第一物体的实体,还显示有第一物体的三维虚像,第一物体的实体与第一物体的三维虚像重合,使第一图像与第一物体不会产生错位,在第一物体的实体上叠加显示第一图像中第一物体的虚像,在第一图像中除第一物体的虚像外,还包括第一手势轨迹及第二手势轨迹,即在第一物体上在第一位置信息处显示第一手势轨迹,在第四位置信息处显示第二手势轨迹。
若在第一物体的基础上对第二手势轨迹进行显示,第一物体的放置位置未发生变化,第二设备的调整信息是基于第一图像进行的,而第一图像中是包括有第一物体的三维虚像的,那么,在第一设备获取到第二设备的调整信息后,直接仅显示针对第一物体的调整,而不显示第一物体的三维虚像。即第一设备获取到第二设备的调整信息后,直接在第一物体的实物的基础上,显示第一手势轨迹及第二手势轨迹,不再对第一物体的三维虚像进行叠加显示。由于第一设备获取到第二设备的调整信息,其仍然在第一物体的放置位置处进行显示,则无需显示调整信息中的第一物体的虚像。
另外,对第二手势轨迹进行显示,还可以为:第一设备获取第二设备发送的调整信息,第一设备对该调整信息进行提取,仅在第四位置信息处显示该调整信息中的第二手势轨迹。由于第一手势轨迹是第一设备端用户执行的,则第一设备端用户无需再获取其自身输入的第一手势轨迹,直接获取第二设备端用户对第一物体的图像执行的第二手势轨迹即可。因此,在显示时,可以直接在第一物体的放置位置处第一物体上的第四位置信息处显示第二手势轨迹,或者,在显示时,将图像中第一物体的虚像与第一物体的实物重叠之后,在第一物体的第四位置信息处显示第二手势轨迹。
当然,上述针对的第一物体及第一图像,可以为三维物体、三维图像,也可以为二维物体、二维图像,在此不对其做具体限定,仅是以三维物体、三维图像为例进行说明。
上述过程可以全部由第一设备完成,当然,关于第二设备端的调整信息对第一图像的调整结果也可以由第二设备执行,之后得到调整结果,直接将调整结果发送至第一设备即可,此时,第一设备与第二设备是两个功能完全相同的设备,均可以对手势进行识别,并将识别到的轨迹基于手势位置叠加到物体上,无论该物体是三维实物,还是三维虚像,均可以实现叠加并输出显示。
进一步的,第一设备除包括用于获取第一物体及第一手势的图像获取装置外,还包括:投影装置,用于对第二设备端发送的图像进行投影显示;另外,第一设备还可以包括:声音采集装置及声音输出装置,声音采集装置用于获取第一设备端用户在对第一物体执行第一手势时的声音信息的获取,并将获取到的声音信息与第一图像同步发送至第二设备进行输出;声音输出装置用于输出获取到的第二设备端用户在对第一图像进行调整时的语音信息。
同理,第二设备也可以包括:图像获取装置及投影装置,还可以包括:声音采集装置及声音输出装置。
本实施例公开的电子设备,第一设备确定对第一物体执行的第一手势,识别第一手势的第一手势轨迹及第一手势的第一位置信息,基于第一位置信息、第一手势的第一手势轨迹与第一物体相结合后得到第一图像,将第一图像发送至第二设备,以使第二设备呈现第一图像,并能够基于获取的第二设备对第一图像的调整信息在第一物体上呈现调整后的轨迹。本方案通过将第一手势的手势轨迹与第一物体结合后得到第一图像,并在第二设备上呈现第一图像,以使第二设备能够对第一图像进行调整,实现了在第一图像上将第一物体与第一手势轨迹基于其所在位置进行结合,实现了通过手势对物体添加轨迹并形成图像,实现了在远程会议交互过程中对图像或实物的标注或修订,提高了用户体验。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种信息处理方法,应用于第一设备,所述方法包括:
所述第一设备确定对第一物体执行的第一手势;
识别所述第一手势的第一手势轨迹及所述第一手势的第一位置信息;
基于所述第一位置信息、所述第一手势的第一手势轨迹与所述第一物体相结合后得到第一图像;
将所述第一图像发送至第二设备,以使所述第二设备呈现所述第一图像,并能够基于获取的所述第二设备对所述第一图像的调整信息在所述第一物体上呈现调整后的轨迹。
2.根据权利要求1所述的方法,其中,所述基于所述第一位置信息,所述第一手势的第一手势轨迹与所述第一物体相结合后得到第一图像,包括:
基于所述第一手势的第一位置信息,确定所述第一手势在所述第一物体上对应的第二位置信息;
将所述第一手势的第一手势轨迹添加至所述第一物体上的第二位置信息,得到所述第一手势的第一手势轨迹与所述第一物体相结合后的第一图像。
3.根据权利要求1所述的方法,其中,所述能够基于获取的所述第二设备对所述第一图像的调整信息在所述第一物体上呈现调整后的轨迹,包括:
获取所述第二设备对所述第一图像的调整信息;
确定所述调整信息作用于所述第一图像后得到的调整结果;
将所述调整结果与所述第一物体结合后进行显示。
4.根据权利要求3所述的方法,其中,所述调整信息至少包括:
所述第二设备对所述第一图像中所述第一手势轨迹的调整信息,或,对所述第一图像中的所述第一物体的图像执行第二手势生成的第二手势轨迹。
5.根据权利要求4所述的方法,其中,所述确定所述调整信息作用于所述第一图像后得到的调整结果,包括:
若所述调整信息为对所述第一图像中的所述第一物体的图像执行第二手势生成的第二手势轨迹,则识别所述第二手势的第三位置信息;
基于所述第二手势的第三位置信息,对所述第二手势轨迹进行显示。
6.根据权利要求5所述的方法,其中,所述基于所述第二手势的第三位置信息,对所述第二手势轨迹进行显示,包括:
基于所述第二手势的第三位置信息,确定所述第二手势在所述第一物体上对应的第四位置信息;
在所述第一物体的第四位置信息处,显示所述第二手势轨迹。
7.根据权利要求5所述的方法,其中,所述基于所述第二手势的第三位置信息,对所述第二手势轨迹进行显示,包括:
基于所述第二手势的第三位置信息,确定所述第二手势在所述第一物体上对应的第四位置信息;
基于所述第一手势的第一位置信息,确定所述第一手势在所述第一物体上对应的第二位置信息;
在所述第一物体的第四位置信息处,显示所述第二手势轨迹,同时在所述第一物体的第二位置信息处,显示所述第一手势轨迹。
8.一种电子设备,包括:处理器及传感器,其中:
所述传感器用于获取对第一物体执行的第一手势;
所述处理器用于识别所述第一手势的第一手势轨迹及所述第一手势的第一位置信息;基于所述第一位置信息、所述第一手势的第一手势轨迹与所述第一物体相结合后得到第一图像;将所述第一图像发送至第二设备,以使所述第二设备呈现所述第一图像,并能够基于获取的所述第二设备对所述第一图像的调整信息在所述第一物体上呈现调整后的轨迹。
9.根据权利要求8所述的设备,其中,所述处理器用于:
基于所述第一手势的第一位置信息,确定所述第一手势在所述第一物体上对应的第二位置信息,将所述第一手势的第一手势轨迹添加至所述第一物体上的第二位置信息,得到所述第一手势的第一手势轨迹与所述第一物体相结合后的第一图像。
10.根据权利要求8所述的设备,其中,所述处理器用于:
获取所述第二设备对所述第一图像的调整信息,确定所述调整信息作用于所述第一图像后得到的调整结果,将所述调整结果与所述第一物体结合后进行显示。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911338484.XA CN111124228A (zh) | 2019-12-23 | 2019-12-23 | 一种信息处理方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911338484.XA CN111124228A (zh) | 2019-12-23 | 2019-12-23 | 一种信息处理方法及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111124228A true CN111124228A (zh) | 2020-05-08 |
Family
ID=70501272
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911338484.XA Pending CN111124228A (zh) | 2019-12-23 | 2019-12-23 | 一种信息处理方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111124228A (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101888302A (zh) * | 2010-07-02 | 2010-11-17 | 江苏省现代企业信息化应用支撑软件工程技术研发中心 | 一种远程会议用交互式图像信息传递***和方法 |
US20140168072A1 (en) * | 2012-12-17 | 2014-06-19 | Lenovo (Beijing) Co., Ltd. | Processing method and electronic device |
CN104656890A (zh) * | 2014-12-10 | 2015-05-27 | 杭州凌手科技有限公司 | 虚拟现实智能投影手势互动一体机及互动实现方法 |
CN104777991A (zh) * | 2015-04-22 | 2015-07-15 | 四川华立德科技有限公司 | 一种基于手机的远程互动投影*** |
CN109559370A (zh) * | 2017-09-26 | 2019-04-02 | 华为技术有限公司 | 一种三维建模方法及装置 |
WO2019082188A1 (en) * | 2017-10-26 | 2019-05-02 | Yeda Research And Development Co. Ltd. | METHOD AND SYSTEM FOR MULTILAYER VISUALIZATION |
CN110597442A (zh) * | 2019-09-20 | 2019-12-20 | 北京华捷艾米科技有限公司 | 一种手机ar绘画方法及装置 |
-
2019
- 2019-12-23 CN CN201911338484.XA patent/CN111124228A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101888302A (zh) * | 2010-07-02 | 2010-11-17 | 江苏省现代企业信息化应用支撑软件工程技术研发中心 | 一种远程会议用交互式图像信息传递***和方法 |
US20140168072A1 (en) * | 2012-12-17 | 2014-06-19 | Lenovo (Beijing) Co., Ltd. | Processing method and electronic device |
CN104656890A (zh) * | 2014-12-10 | 2015-05-27 | 杭州凌手科技有限公司 | 虚拟现实智能投影手势互动一体机及互动实现方法 |
CN104777991A (zh) * | 2015-04-22 | 2015-07-15 | 四川华立德科技有限公司 | 一种基于手机的远程互动投影*** |
CN109559370A (zh) * | 2017-09-26 | 2019-04-02 | 华为技术有限公司 | 一种三维建模方法及装置 |
WO2019082188A1 (en) * | 2017-10-26 | 2019-05-02 | Yeda Research And Development Co. Ltd. | METHOD AND SYSTEM FOR MULTILAYER VISUALIZATION |
CN110597442A (zh) * | 2019-09-20 | 2019-12-20 | 北京华捷艾米科技有限公司 | 一种手机ar绘画方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102194094B1 (ko) | 가상과 실제 물체의 합성 방법, 장치, 프로그램 및 기록매체 | |
US11288871B2 (en) | Web-based remote assistance system with context and content-aware 3D hand gesture visualization | |
JP6229314B2 (ja) | 情報処理装置、表示制御方法及びプログラム | |
CN110321048B (zh) | 三维全景场景信息处理、交互方法及装置 | |
KR20190013308A (ko) | 이동 단말기 및 그 제어 방법 | |
JPWO2005076210A1 (ja) | 画像処理方法、画像処理装置及び移動通信端末装置 | |
US10810801B2 (en) | Method of displaying at least one virtual object in mixed reality, and an associated terminal and system | |
US10888228B2 (en) | Method and system for correlating anatomy using an electronic mobile device transparent display screen | |
KR102061867B1 (ko) | 이미지 생성 장치 및 그 방법 | |
JP5598232B2 (ja) | 情報処理装置、情報処理システムおよび情報処理方法 | |
CN108124102B (zh) | 图像处理方法、装置及计算机可读存储介质 | |
US11122220B2 (en) | Augmented video reality | |
US10389976B2 (en) | Information processing apparatus, information processing system, and information processing method | |
JP2016213677A (ja) | 遠隔コミュニケーションシステム、その制御方法、及びプログラム | |
WO2023016107A1 (zh) | 远程交互方法、装置、***、电子设备以及存储介质 | |
JP4417292B2 (ja) | オブジェクト出力方法及び情報処理装置 | |
US10298907B2 (en) | Method and system for rendering documents with depth camera for telepresence | |
CN104133553B (zh) | 网页内容展示方法及装置 | |
CN113918070A (zh) | 同步显示方法、装置、可读存储介质及电子设备 | |
WO2015072091A1 (ja) | 画像処理装置、画像処理方法及びプログラム記憶媒体 | |
CN113286073A (zh) | 拍摄方法、拍摄装置及存储介质 | |
CN111124228A (zh) | 一种信息处理方法及电子设备 | |
JP2015184986A (ja) | 複合現実感共有装置 | |
US10200606B2 (en) | Image processing apparatus and control method of the same | |
JP2015179947A (ja) | 撮影動画像に指示画像を同期して重畳する映像指示表示方法、システム、端末、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |