CN115185437A - 一种投影交互方法、设备、介质及程序产品 - Google Patents

一种投影交互方法、设备、介质及程序产品 Download PDF

Info

Publication number
CN115185437A
CN115185437A CN202210726966.8A CN202210726966A CN115185437A CN 115185437 A CN115185437 A CN 115185437A CN 202210726966 A CN202210726966 A CN 202210726966A CN 115185437 A CN115185437 A CN 115185437A
Authority
CN
China
Prior art keywords
information
target user
image information
computer
annotation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210726966.8A
Other languages
English (en)
Inventor
廖春元
方中慧
杨浩
林祥杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hiscene Information Technology Co Ltd
Original Assignee
Hiscene Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hiscene Information Technology Co Ltd filed Critical Hiscene Information Technology Co Ltd
Publication of CN115185437A publication Critical patent/CN115185437A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0489Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using dedicated keyboard keys or combinations thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请的目的是提供一种投影交互方法、设备、介质及程序产品,具体包括:通过顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息;获取目标用户设备对应目标用户的、关于所述顶部图像信息的图像标注信息,其中,所述图像标注信息包括对应标注信息及所述标注信息的标注位置信息,所述标注信息由所述目标用户的第一用户操作确定;基于所述标注位置信息确定对应投影位置信息,并基于所述投影位置信息投影呈现所述标注信息。本申请通过能够为当前用户进行趣味性的互动同时,为当前用户提供更加真实、自然的增强现实交互。

Description

一种投影交互方法、设备、介质及程序产品
本案要求CN 202210241557.9(申请日2022-03-11)的优先权
技术领域
本申请涉及通信领域,尤其涉及一种用于投影交互的技术。
背景技术
增强现实技术(Augmented Reality):是一种实时地计算摄影机影像的位置及角度并加上相应虚拟三维模型动画、视频、文字、图片等数字信息的技术,这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。视频通话技术通常指基于互联网和移动互联网端,通过智能设备之间实时传送人的语音和图像的一种通信方式。现有的计算机设备除视频通讯外,缺少其它互动能力。
发明内容
本申请的一个目的是提供一种投影交互方法、设备、介质及程序产品。
根据本申请的一个方面,提供了一种投影交互方法,其中,该方法应用于计算机设备,该计算机设备包括顶部摄像装置以及投影装置,该方法包括:
通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息;
获取所述目标用户设备对应目标用户的、关于所述顶部图像信息的图像标注信息,其中,所述图像标注信息包括对应标注信息及所述标注信息的标注位置信息,所述标注信息由所述目标用户的第一用户操作确定;
基于所述标注位置信息确定对应投影位置信息,并基于所述投影位置信息投影呈现所述标注信息。
根据本申请的另一个方面,提供了一种投影交互方法,其中,应用于目标用户设备,该方法包括:
接收并呈现对应计算机设备传输的、通过对应顶部摄像装置采集的顶部图像信息,
获取目标用户设备对应目标用户的第一用户操作,基于所述第一用户操作生成关于所述顶部图像信息的标注信息;
将所述标注信息返回至所述计算机设备,供所述计算机设备通过对应投影装置呈现所述标注信息。
根据本申请的一个方面,提供了一种投影交互的计算机设备,该计算机设备包括顶部摄像装置以及投影装置,该设备包括:
一一模块,用于通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息;
一二模块,用于获取所述目标用户设备对应目标用户的、关于所述顶部图像信息的图像标注信息,其中,所述图像标注信息包括对应标注信息及所述标注信息的标注位置信息,所述标注信息由所述目标用户的第一用户操作确定;
一三模块,用于基于所述标注位置信息确定对应投影位置信息,并基于所述投影位置信息投影呈现所述标注信息。
根据本申请的另一个方面,提供了一种投影交互的目标用户设备,其中,该设备包括:
二一模块,用于接收并呈现对应计算机设备传输的、通过对应顶部摄像装置采集的顶部图像信息;
二二模块,用于获取目标用户设备对应目标用户的第一用户操作,基于所述第一用户操作生成关于所述顶部图像信息的标注信息;
二三模块,用于将所述标注信息返回至所述计算机设备,供所述计算机设备通过对应投影装置呈现所述标注信息。
根据本申请的一个方面,提供了一种计算机设备,其中,该设备包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行如上任一所述方法的步骤。
根据本申请的一个方面,提供了一种计算机可读存储介质,其上存储有计算机程序/指令,其特征在于,该计算机程序/指令在被执行时使得***进行执行如上任一所述方法的步骤。
根据本申请的一个方面,提供了一种计算机程序产品,包括计算机程序/指令,其特征在于,该计算机程序/指令被处理器执行时实现如上任一所述方法的步骤。
与现有技术相比,本申请通过双方交互在计算机设备端投影呈现目标用户的图像标注信息,能够为当前用户进行趣味性的互动同时,为当前用户提供更加真实、自然的增强现实交互。特别地,能够为不在孩子身边的父母增强亲子陪伴的互动和参与体验。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1示出根据本申请一个实施例的一种投影交互的***拓扑图;
图2示出根据本申请一个实施例的一种投影交互方法的方法流程图;
图3示出根据本申请一个实施例的一种投影交互方法的方法流程图;
图4示出根据本申请一个实施例的一种计算机设备的功能模块;
图5示出根据本申请一个实施例的一种目标用户设备的功能模块;
图6示出可被用于实施本申请中所述的各个实施例的示例性***。
附图中相同或相似的附图标记代表相同或相似的部件。
具体实施方式
下面结合附图对本申请作进一步详细描述。
在本申请一个典型的配置中,终端、服务网络的设备和可信方均包括一个或多个处理器(例如,中央处理器(Central Processing Unit,CPU))、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RandomAccess Memory,RAM)和/或非易失性内存等形式,如只读存储器(Read Only Memory,ROM)或闪存(Flash Memory)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(Phase-Change Memory,PCM)、可编程随机存取存储器(Programmable Random Access Memory,PRAM)、静态随机存取存储器(Static Random-Access Memory,SRAM)、动态随机存取存储器(Dynamic Random AccessMemory,DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(Compact Disc Read-Only Memory,CD-ROM)、数字多功能光盘(Digital Versatile Disc,DVD)或其他光学存储、磁盒式磁带,磁带磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。
本申请所指设备包括但不限于用户设备、网络设备、或用户设备与网络设备通过网络相集成所构成的设备。所述用户设备包括但不限于任何一种可与用户进行人机交互的移动电子产品,例如智能手机、平板电脑、智能台灯等,所述移动电子产品可以采用任意操作***,如Android操作***、iOS操作***等。其中,所述网络设备包括一种能够按照事先设定或存储的指令,自动进行数值计算和信息处理的电子设备,其硬件包括但不限于微处理器、专用集成电路(Application Specific Integrated Circuit,ASIC)、可编程逻辑器件(Programmable Logic Device,PLD)、现场可编程门阵列(Field Programmable GateArray,FPGA)、数字信号处理器(Digital Signal Processor,DSP)、嵌入式设备等。所述网络设备包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云;在此,云由基于云计算(Cloud Computing)的大量计算机或网络服务器构成,其中,云计算是分布式计算的一种,由一群松散耦合的计算机集组成的一个虚拟超级计算机。所述网络包括但不限于互联网、广域网、城域网、局域网、VPN网络、无线自组织网络(Ad Hoc网络)等。优选地,所述设备还可以是运行于所述用户设备、网络设备、或用户设备与网络设备、网络设备、触摸终端或网络设备与触摸终端通过网络相集成所构成的设备上的程序。
当然,本领域技术人员应能理解上述设备仅为举例,其他现有的或今后可能出现的设备如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。
在本申请的描述中,“多个”的含义是两个或者更多,除非另有明确具体的限定。
图1示出了本申请的一个典型场景,计算机设备100与目标用户设备200建立了通信连接,计算机设备100向该目标用户设备200传输对应顶部图像信息;目标用户设备200接收该顶部图像信息,并基于顶部图像信息确定对应标注信息或者图像标注信息,随后将标注信息或者图像标注信息返回至所述计算机设备100。所述计算机设备100包括但不限于任何一种可与用户进行人机交互的电子产品,例如智能手机、平板电脑、智能台灯、智能投影装置等。所述计算机设备包括顶部摄像装置,用于从计算机设备所属当前用户的操作对象(例如,用户当前正在阅读的书籍或者操作的工作零部件等)的上方(例如,正上方或斜上方等)采集关于操作对象相关的图像信息,如摄像头或者深度摄像头等。所述目标用户设备包括但不限于任何一种可与用户进行人机交互的移动电子产品,例如智能手机、平板电脑、个人电脑等,所述目标用户设备包括显示装置,用于呈现所述顶部图像信息,例如,液晶显示屏或者投影仪等;所述目标用户设备还包括输入装置,用于采集用户关于顶部图像信息的标注信息或者图像标注信息,该标注信息包括但不限于关于顶部图像信息中交互对象的贴纸、文字、图形、视频、涂鸦、2D标记或者3D标记等标记信息,对应图像标注信息包括上述标注信息及对应标注位置信息,如该标注信息或标注信息的交互对象在图像坐标系中的图像坐标信息等,其中标注位置信息仅为举例,在此不做限定。在此,本申请中关于目标用户设备与计算机设备之间的数据传输可以是基于两个设备之间的直接通信连接进行,还可以是经由相应服务器转发完成等。
图2示出根据本申请一个方面的一种投影交互的方法,该方法应用于计算机设备100,可应用于图1所示的***拓扑,该方法包括步骤S101、步骤S102以及步骤S103。在步骤S101中,通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息;在步骤S102中,获取所述目标用户设备对应目标用户的、关于所述顶部图像信息的图像标注信息,其中,所述图像标注信息包括对应标注信息及所述标注信息的标注位置信息,所述标注信息由所述目标用户的第一用户操作确定;在步骤S103中,基于所述标注位置信息确定对应投影位置信息,并基于所述投影位置信息投影呈现所述标注信息。
具体而言,在步骤S101中,通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息。例如,当前用户(例如,用户甲)持有计算机设备,通过该计算机设备可以与目标用户(例如,用户乙)持有的目标用户设备进行通信,如通过有线或者无线的方式建立计算机设备与目标用户设备之间的通信连接,或者经由网络设备进行两者之间数据通信传输等。所述计算机设备包括顶部摄像装置,该顶部摄像装置用于采集当前用户的操作对象相关图像信息,例如,顶部摄像装置从操作对象的上方采集关于操作对象相关的图像信息(例如,正上方或斜上方等),在一些情形下,所述顶部摄像装置设置于操作对象正上方,顶部摄像装置的光轴能够穿过操作对象的形体或者中心等。当然,为了使顶部摄像装置能够满足要求,计算机设备通常设置有向前的延伸杆,并在延伸杆上将顶部摄像装置正对下方设置,采集下方的图像信息,在该延伸杆下方、计算机设备与所属用户之间位置,设置有对应操作对象的操作区域,该操作区域可以是计算机设备本身在下方的延伸区域(例如,通过计算机设备本身自带的延伸区域从而能够较为精准获取顶部图像信息),或者通过在计算机设备与所属用户之间设置空白区域作为对应的操作区域(例如,设置空白桌面作为操作区域等)。当然,在一些情形下,计算机设备的底座保持水平状态,从而保持计算机设备的稳定,相应地,对应顶部摄像装置的光轴垂直向下,所述操作区域所在面保持水平,从而使得计算机设备采集的顶部图像信息中操作对象各个区域相对于顶部摄像装置的距离相近。
所述计算机设备通过顶部摄像装置采集关于操作对象的顶部图像信息,并将该顶部图像信息直接发送或者经由网络设备发送至目标用户设备。在一些实施例中,计算机设备可以先对顶部图像信息进行识别(例如,预先设置的模板特征,通过对应模板特征进行识别和跟踪)等,从而确保该顶部图像信息中存在对应操作对象。若当前顶部图像信息中不存在操作对象,计算机设备可以调节该顶部摄像装置的摄像角度,采集其他区域的图像,从而确保顶部图像信息中存在操作对象,例如,通过调整延伸杆的延伸角度、高度或者直接调整顶部摄像装置的摄像位姿信息,从而达到改变顶部摄像装置的摄像角度的效果。若采集各个角度后一直不存在操作对象或者连续采集一定数量的顶部图像信息均不存在操作对象,则计算机设备呈现对应提示信息,用于提示当前用户当前操作区域不存在操作对象等。若当前顶部图像信息中存在操作对象,则将该顶部图像信息传输至目标用户设备。所述目标用户设备接收到顶部图像信息后,呈现该顶部图像信息,例如,通过显示屏显示该顶部图像信息或者通过投影仪投影显示该顶部图像信息。
所述目标用户设备接收并呈现该顶部图像信息,供目标用户基于顶部图像信息进行操作交互等。所述目标用户设备在呈现顶部图像信息的同时,还能够通过输入装置采集目标用户关于顶部图像信息中交互对象的标注信息,该交互对象的交互位置可以是预先确定,也可以是当前用户确定并传输至目标用户设备,还可以是基于目标用户的操作位置(例如,触摸位置、光标所处位置、手势识别结果或者语音识别结果等)确定等。若所述顶部图像信息中交互位置是预先确定或者当前用户确定的,则目标用户设备直接将该标注信息传输至计算机设备;若所述顶部图像信息中交互位置是目标用户的操作位置确定,则目标用户设备将该交互位置确定为标注位置信息,并结合标注信息生成对应图像标注信息,将该图像标注信息返回至计算机设备等。
在步骤S102中,获取所述目标用户设备对应目标用户的、关于所述顶部图像信息的图像标注信息,其中,所述图像标注信息包括对应标注信息及所述标注信息的标注位置信息,所述标注信息由所述目标用户的第一用户操作确定。例如,所述顶部图像信息包括基于该顶部图像信息建立的图像坐标系,该图像坐标系以某个像素点(例如,图像左上角的像素点等)为原点,并以横轴作为X轴、纵轴作为Y轴建立对应图像/像素坐标系等,对应标注位置信息包括对应标注信息或标注信息的交互对象在图像坐标系中的坐标位置信息,该坐标位置信息可以是用于指示标注信息或标注信息的交互对象的中心位置或者区域范围的坐标集合等。所述标注位置信息可以是基于当前用户、目标用户的用户操作确定,也可以是预先设定的。对应标注信息由目标用户设备基于目标用户关于顶部图像的第一用户操作确定,例如,基于目标用户关于鼠标输入、键盘输入、触摸屏输入、手势输入或者语音输入操作等方式添加的标记信息确定对应标注信息;在一些情形下,该标注位置信息基于对应鼠标的点击位置、键盘输入对应位置、触摸屏的触摸位置、手势识别、语音识别结果在顶部图像信息中图像坐标信息确定,或者基于该鼠标的点击位置、键盘输入对应位置、触摸屏的触摸位置、手势识别、语音识别结果先在顶部图像信息中确定对应交互对象,再基于交互对象确定对应的图像标注位置等。
所述标注信息包括但不限于关于顶部图像信息中交互对象的贴纸、文字、图形、视频、涂鸦、2D标记或者3D标记等标记信息,在一些实施例中,基于不同类型的标注信息,对应图像位置信息的表现形式也存在区别。
在步骤S103中,基于所述标注位置信息确定对应投影位置信息,并基于所述投影位置信息投影呈现所述标注信息。例如,所述投影装置被安置于顶部摄像装置附近,如对应投影机与顶部摄像头一同安置于顶部延伸杆上等。对应投影装置与顶部摄像装置的映射关系可以通过计算获得,例如,s1:将含特定图案(如棋盘格)的标定图像,使用投影装置投影到操作区域上;s2:顶部摄像头采集包含操作区域的视频图像;s3:使用s2步骤采集的图像,识别各个图案在显示画面中的坐标信息;s4:建立s1投影原始标定图像中图案与s2中采集到包含操作区域的视频图像的图案坐标之间的对应关系;s5:根据s4中两类坐标估算相机内、外参数,以及畸变参数;s6:使用s5得到参数用来实现两种图像之间的映射。其中,本领域技术人员应能理解,上述投影装置与顶部摄像装置的映射关系计算方法仅为举例,其他现有的或今后可能出现的投影装置与顶部摄像装置的映射关系计算方法等如可适用于本申请,也应包含在本申请保护范围以内,并在此以引用方式包含于此。基于投影装置与顶部摄像装置的映射关系,可以将所述标注位置信息换算到投影位置信息,如标注信息在投影图像对应投影图像坐标系中的投影坐标信息,其中,投影位置信息仅为举例,在此不做限定。计算机设备根据对应投影坐标信息将标注信息投影至对应操作区域,从而将标注信息呈现于操作对象中对应区域。
在一些实施方式中,所述计算机设备还包括显示装置,所述方法还包括步骤S104(未示出),在步骤S104中,接收所述目标用户设备传输的目标图像信息,通过所述显示装置呈现所述目标图像信息。例如,所述计算机设备还包括显示装置,该显示装置用于呈现计算机设备存储或者接收到的图像信息等,如液晶显示屏等。在一些情形下,便于当前用户观看对应图像信息,该显示装置安置于计算机设备正对当前用户的正前方或附近位置。计算机设备与目标用户设备进行通信过程中,为了方便双方用户进行沟通交流,提高互动的即时性和交流效率,目标用户设备设置有对应摄像装置,用于采集目标用户设备端的目标图像信息,目标图像信息包括关于目标用户的图像信息,目标用户设备可以将该目标图像信息传输至计算机设备,计算机设备接收并通过显示装置呈现该目标图像信息。在一些情形下,该目标图像信息及对应顶部图像信息包含于实时采集的视频流,则计算机设备和目标用户设备均可以通过对应显示装置呈现顶部图像信息、目标图像信息对应的实时视频流等,对应视频流中不仅包含摄像装置采集的图像,还包括通过语音录入装置采集的语音信息等;对应计算机设备、目标用户设备在显示目标图像信息、顶部图像信息对应的实时视频流的同时,还通过语音输出装置播放对应的语音信息等,也即目标用户设备与计算机设备进行音视频通信。
在一些实施方式中,所述计算机设备还包括前置摄像装置,其中,所述前置摄像装置用于采集关于所述计算机设备对应当前用户的前置图像信息;其中,所述方法还包括步骤S105(未示出),在步骤S105中,将所述前置图像信息传输至所述目标用户设备,供所述目标用户设备呈现所述前置图像信息。例如,计算机设备还包括前置摄像装置,用于采集关于计算机设备持有者的当前用户相关的图像信息,该前置摄像装置安置于计算机设备正对当前用户的一方,例如,可以设置于显示装置的上方。在一些情形下,该前置摄像装置主要用于采集当前用户的用户头部相关的图像信息,用于实现当前用户与目标用户之间的视频互动交流。对应前置摄像装置在启用时采集关于当前用户的前置图像信息,并将该前置图像信息传输至目标用户设备,供目标用户设备的显示装置进行显示,在一些情形下,该前置图像信息包含于实时采集的视频流,则目标用户设备可以通过对应显示装置呈现前置图像信息对应的实时视频流等,在此,该前置摄像装置的启用与顶部摄像装置的启用可以存在一定联系,也可以是相互独立的摄像装置,对应目标用户设备可以同时呈现两个摄像装置的视频流,或者呈现该两个摄像装置的视频流之一等。所述前置摄像装置的启用状态可以是基于目标用户设备或者计算机设备的视频建立请求而开启,或者从顶部摄像装置的启用状态切换而来,还或者基于该前置摄像装置的独立的启用控件的触发而开启等。
在一些实施方式中,所述方法还包括步骤S106(未示出),在步骤S106中,获取关于所述计算机设备与所述目标用户设备的当前视频交互的摄像切换请求,其中,所述当前视频交互的图像信息包括所述前置图像信息;其中,在步骤S101中,响应于所述摄像切换请求,关闭所述前置摄像装置并启用所述顶部摄像装置,通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息。例如,所述计算机设备的前置摄像装置与顶部摄像装置同一时刻仅有一个处于启用状态,从而减少视频交互的带宽压力,保证视频交互过程的效率和有序性等。在一些实施例中,所述计算机设备设置有对应摄像切换控件,该摄像切换控件可以是设置于计算机设备上的实体按键,也可以是呈现于当前屏幕中的虚拟控件等,摄像切换控件用于实现从前置摄像装置的启用状态切换至顶部摄像装置的启用状态,在一些情形下,该摄像切换控件还用于将计算机设备从顶部摄像装置的启用状态调节至前置摄像装置的启用状态,换言之,该摄像切换控件用于实现顶部摄像装置与前置摄像装置的启用状态的切换;在另一些情形下,该摄像切换控件仅用于实现从前置摄像装置的启用状态切换至顶部摄像装置的启用状态,计算机设备还设置有对应摄像还原控件,摄像还原控件用于将计算机设备从顶部摄像装置的启用状态调节至前置摄像装置的启用状态。在另一些实施例中,所述计算机设备通过识别当前用户的手势、语音、头部运动等交互输入操作,确定摄像切换请求。在另一些实施例中,类似地,所述目标用户设备也可以设置有对应摄像切换控件,或者,目标用户设备通过识别目标用户的手势、语音、头部运动等交互输入操作,确定摄像切换请求,在此不再赘述。计算机设备在视频交互过程中处于采集前置图像信息的状态,当获取用户(例如,当前用户或者目标用户均可)关于摄像切换控件的触控操作,计算机设备关闭前置摄像装置并启用顶部摄像装置,通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息。进一步地,目标用户可以对顶部图像信息进行第一用户操作确定该顶部图像信息的图标标注信息,计算机设备基于标注位置信息确定投影位置信息,并基于投影位置信息投影呈现标注信息,由此,目标用户可以对当前用户的操作对象进行直观的指导。
在一些情形下,不同摄像装置的启用状态对应不同的交互模式,例如,计算机设备当前仅开启前置摄像装置时,计算机设备处于视频沟通模式,用于实现当前用户与目标用户的视频沟通交流等;计算机设备当前仅开启顶部摄像装置时,计算机设备处于视频指导模式,用于实现目标用户关于当前用户的操作对象的沟通指导等;计算机设备当前同时开启前置摄像装置和顶部摄像装置时,计算机设备实现目标用户关于当前用户的操作对象的沟通指导的同时,还方便目标用户与当前用户进行视频沟通交流等。
在一些实施方式中,在步骤S105中,接收所述目标用户设备传输的、关于所述计算机设备与目标用户设备的当前视频交互的摄像切换请求,其中,所述摄像切换请求基于所述目标用户的第二用户操作确定。例如,所述目标用户设备可以基于目标用户的第二用户操作(例如,关于摄像切换控件的触发操作,或者关于摄像切换的交互输入操作指令等),目标用户设备可以生成关于当前视频交互的摄像切换请求,目标用户设备将该摄像切换请求传输至对应计算机设备;或者,目标用户设备将该第二用户操作发送至对应服务器,服务器根据该第二用户操作生成对应摄像切换请求,并将该摄像切换请求发送至计算机设备等。在此,所述第一用户操作、第二用户操作仅用于区分用户操作对应作用,并不涉及次序、大小等操作的关联。目标用户设备在视频交互建立之后,在获取并呈现前置摄像装置的前置图像信息时,在一些实施例中,在当前屏幕中呈现对应的摄像切换控件,目标用户设备可以通过采集第二用户操作,如目标用户关于该摄像切换控件的触控操作,确定摄像切换请求,在另一些实施例中,目标用户设备可以通过采集第二用户操作,如目标用户的手势、语音、头部运动等交互输入操作指令,确定摄像切换请求。该摄像切换请求通常发生在视频建立之后,在视频建立时,对应前置摄像装置可以基于视频建立请求同时启用,也可以是在目标用户设备与计算机设备建立通信之后基于双方的交互操作启用前置摄像装置等,还可以是在目标用户设备与计算机设备建立通信并启用顶部摄像装置之后从顶部摄像装置的启用状态切换至该前置摄像装置的启用状态等。
在一些实施方式中,在步骤S105中,获取关于所述当前视频交互的视频建立请求;响应于所述视频建立请求,基于所述视频建立请求建立所述计算机设备与所述目标用户设备的所述当前视频交互,通过所述前置摄像装置采集对应前置图像信息并传输至所述目标用户设备,供所述目标用户设备呈现所述前置图像信息。例如,所述当前视频交互可以是基于当前用户或者目标用户的用户操作确定的视频建立请求而发起,在当前视频交互之初便在目标用户设备与计算机设备之间传输视频流,如计算机设备向目标用户设备传输对应前置图像信息,目标用户设备向计算机设备传输对应目标图像信息,或者,仅计算机设备向目标用户设备单独传输前置图像信息等。该视频建立请求可以是基于当前用户在计算机设备端的发起操作(例如,关于视频建立控件的触发操作,或者关于视频建立的交互输入操作指令等)确定,该视频建立请求包括对应目标用户的用户标识信息,用户标识信息包括但不限于用于标识目标用户的唯一性标记信息,具体地,例如名称、图像、身份证、手机号、应用序列号或者设备存取控制地址信息等;计算机设备可以将该视频建立请求发送至网络设备,供网络设备建立转发至目标用户设备并建立两者的视频交互,或者计算机设备直接将该视频建立请求发送至目标用户设备并建立两者的视频交互。还如,该视频建立请求可以是基于目标用户在目标用户设备端的发起操作(例如,关于视频建立控件的触发操作,或者关于视频建立的交互输入操作指令等)确定,该视频建立请求包括对应当前用户的用户标识信息;目标用户设备可以将该视频建立请求发送至网络设备,供网络设备建立转发至计算机设备并建立两者的视频交互,或者目标用户设备直接将该视频建立请求发送至计算机设备并建立两者的视频交互。
在一些实施方式中,所述方法还包括步骤S107(未示出),在步骤S107中,获取关于所述计算机设备与目标用户设备的当前视频交互的摄像还原请求;响应于所述摄像还原请求,关闭所述顶部摄像装置并启用所述前置摄像装置,通过所述前置摄像装置采集对应前置图像信息,将所述前置图像信息传输至对应所述目标用户设备。例如,所述摄像还原请求用于将计算机设备从顶部摄像装置的启用状态调整至前置摄像装置的启用状态,该还原状态后对应顶部摄像装置处于关闭状态,仅进行前置图像信息的采集和传输,如计算机设备向目标用户设备传输对应前置图像信息,目标用户设备向计算机设备传输对应目标图像信息,或者,仅计算机设备向目标用户设备单独传输前置图像信息等。在一些实施例中,所述摄像还原请求基于当前用户/目标用户关于摄像还原控件的触控操作而发起,在另一些实施例中,所述摄像还原请求基于当前用户/目标用户关于摄像还原的交互输入操作指令(如手势、语音、头部运动等)而发起,基于该摄像还原请求,计算机设备关闭当前视频交互处于启用状态的顶部摄像装置,并启用对应前置摄像装置,从而实现从对操作对象的视频指导还原成双方的视频沟通交流。
在一些实施方式中,所述方法还包括步骤S108(未示出),在步骤S108中,获取关于所述计算机设备与目标用户设备的视频交互的摄像开启请求;其中,在步骤S101中,响应于所述摄像开启请求,通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备;在步骤S105中,响应于所述摄像开启请求,通过所述前置摄像装置采集对应的前置图像信息,将所述前置图像信息传输至所述目标用户设备。例如,所述摄像开启请求用于同时启用前置摄像装置和顶部摄像装置,该摄像开启请求可以包含于视频建立请求中,用于在视频建立过程中同时启用前置摄像装置与顶部摄像装置,并分别呈现关于该前置摄像装置与顶部摄像装置的关闭控件,供当前用户和/或目标用户对前置摄像装置或顶部摄像装置进行关闭操作,当然,若同时关闭前置摄像装置和顶部摄像装置,则关闭计算机设备与目标用户设备之间的视频交互。在一些情形下,该摄像开启请求还可以是在视频交互建立后即视频交互过程(视频交互过程中,前置摄像装置与顶部摄像装置之一处于启用状态)中调用前置摄像装置或顶部摄像装置,达到两个摄像装置同时处于启用状态的效果。在一些实施例中,所述摄像开启请求可以是基于当前用户或者目标用户关于开启控件的触控操作生成,在另一些实施例中,所述摄像开启请求可以是基于当前用户或者目标用户关于摄像开启的交互输入操作指令(如手势、语音、头部运动等)而生成,基于计算机设备或者目标用户设备对于摄像开启请求的响应而同时启用两个摄像装置。
在一些实施方式中,所述计算机设备包括照明装置;其中,所述方法还包括步骤S109(未示出),在步骤S109中,若获取到关于所述照明装置的启用请求,开启所述照明装置。例如,计算机设备可以包括照明装置,用于调节操作区域亮度。所述启用请求用于开启对应照明装置,对操作区域投射一定强度的光线从而改变环境亮度,该启用请求可以是计算机设备基于当前用户的操作生成,还可以是基于目标用户设备对应目标用户的操作(如关于照明控件的触控等)生成并传输至计算机设备等。在一些情形下,该启用请求包含于对应视频建立请求,用于在进行视频交互建立同时,开启照明装置;在另一些情形下,该启用请求基于目标用户/当前用户在视频交互进行过程中、或者未进行视频交互时的用户操作确定,从而开启照明装置调节环境亮度。
在一些实施方式中,所述计算机设备还包括环境光检测装置,所述方法还包括步骤S110(未示出),在步骤S110中,基于所述环境光检测装置获取当前环境的光照强度信息,检测所述光照强度信息是否满足预设照明阈值;若不满足,则调节所述照明装置,直至所述光照强度信息满足所述预设照明阈值。例如,计算机设备的照明装置包括亮度可调节的照明装置,例如,可以基于当前用户或者目标用户关于亮度调节控件的触控选择操作等,对照明装置的照明亮度进行调节,又例如,可以基于当前用户或者目标用户关于亮度调节的交互输入操作指令(如手势、语音、头部运动等)等,对照明装置的照明亮度进行调节。在一些情形下,所述计算机设备包括环境光检测装置,用于配合照明装置实现照明灯光的自动化调节,保证环境亮度的可控性及适用性等。计算机设备基于该环境光检测装置测量当前环境的光照强度信息,并将该光照强度信息与预设照明阈值进行比较,该预设照明阈值可以是一个具体的光照强度数值,也可以多个光照强度数值组成的区间等,在此不做限制。若所述光照强度信息与照明阈值信息相同或者强度差值小于预设差值阈值等,则确定该光照强度信息满足预设照明阈值;或者,若所述光照强度信息处于照明阈值区间内,则确定该光照强度信息满足预设照明阈值等。若不满足,则基于该光照强度信息与照明阈值信息计算对应光照调节信息,并基于光照调节信息调节对应照明装置,所述光照调节信息包括对应当前光照强度信息的增大或者减少的光照调节数值等。
在一些实施方式中,所述方法还包括步骤S111(未示出),在步骤S111中,基于所述顶部图像信息确定所述顶部图像信息对应图像亮度信息,检测所述图像亮度信息是否满足预设亮度阈值;若不满足,则调节所述照明装置,直至所述图像亮度信息满足所述预设亮度阈值。例如,计算机设备还可以基于顶部图像信息确定对应图像亮度信息,例如,基于顶部图像信息中部分(例如,抽样取部分像素等)或者全部像素的像素亮度信息计算当前图像信息的平均亮度信息等。并将该图像亮度信息与预设亮度阈值进行比较,该预设亮度阈值可以是一个具体的图像亮度数值,也可以多个图像亮度数值组成的区间等,在此不做限制。若所述图像亮度信息与亮度阈值信息相同或者亮度差值小于预设差值阈值等,则确定该图像亮度信息满足预设亮度阈值;或者,若所述图像亮度信息处于亮度阈值区间内,则确定该图像亮度信息满足预设亮度阈值等。若不满足,则基于该图像亮度信息与亮度阈值信息计算对应光照调节信息,并基于光照调节信息调节对应照明装置,所述光照调节信息包括对应当前光照强度信息的增大或者减少的光照调节数值等。在一些情形下,所述计算机设备还可以基于顶部图像信息的特定区域的图像亮度信息进行照明装置的亮度调节,该特定区域可以是基于交互对象确定的交互区域(例如,边界区域、外接矩形区域等)或者基于目标用户/当前用户的用户操作从顶部图像信息中确定。
在一些实施方式中,所述方法还包括步骤S112(未示出),在步骤S112中,获取所述当前用户关于所述顶部图像信息的交互位置信息;基于所述交互位置信息确定对应的虚拟呈现信息,并通过所述投影装置投影呈现所述虚拟呈现信息。例如,在视频交互过程中,关于顶部图像信息中交互对象的交互位置信息,可以是基于当前用户的用户操作得到,如,当前用户在显示装置中呈现对应顶部图像信息,并基于用户的框选、点击或者触摸等操作,从顶部图像信息中确定一个或多个像素位置或者像素区域,将该一个或多个像素位置或者像素区域作为对应交互位置信息,该交互位置信息包括在顶部图像信息的图像坐标系中的坐标位置信息等。还如,计算机设备基于当前用户在操作对象上的用户操作(例如,用手指或笔尖指向某位置等),通过图像识别技术确定手指或者笔等所指位置,将所指位置作为对应交互位置信息。
计算机设备可以直接基于该交互位置信息呈现对应的虚拟呈现信息,例如,计算机设备从数据库中匹配与交互位置信息对应的虚拟信息,又如,通过对交互位置信息对应的交互对象进行目标识别,从而在数据库中匹配与之对应的虚拟信息,将对应虚拟信息确定为虚拟呈现信息,并通过交互位置信息确定该虚拟呈现信息的投影位置信息,从而通过投影装置将虚拟呈现信息投影至交互对象所处空间位置等。还如,在一些实施方式中,所述计算机设备包括红外测量装置;其中,所述获取所述当前用户关于所述顶部图像信息的交互位置信息,包括:通过所述红外测量装置确定所述顶部图像信息的交互位置信息。例如,计算机设备还包括红外测量装置,在一些实施例中,红外测量装置包括红外摄像头和红外发射器,例如,该红外摄像头与顶部摄像头一同安置于顶部延伸杆上等,该红外发射器安装在计算机设备底座上,该红外发射器在操作对象表面形成一个高于表面一定距离阈值的不可见光膜,当手指或任何不透明的物体接触该表面时,光线被反射到红外摄像头,再通过对光电位置的精确计算,得到手指或任何不透明的物体接触操作对象的位置。在另一些实施例中,红外测量装置包括红外摄像头和红外笔,当前用户使用红外笔接触操作对象表面时,红外摄像头能够确定红外笔接触操作对象的位置。基于手指、任何不透明的物体或者红外笔接触操作对象的位置确定对应交互位置信息等。
在一些实施方式中,在步骤S102中,将所述交互位置信息发送至所述目标用户设备,接收所述目标用户设备传输的、基于所述交互位置信息返回的标注信息,从而确定所述顶部图像信息的图像标注信息,其中,所述图像标注信息包括所述标注信息及所述交互位置信息,所述标注信息由所述目标用户的第一用户操作确定。例如,所述交互位置信息用于提示目标用户当前在顶部图像信息中交互对象所处区域,目标用户设备接收计算机设备传输的顶部图像信息的同时还接收该交互位置信息,并采集目标用户关于该交互位置信息对应交互对象的用户操作,从而基于第一用户操作确定对应标注信息。目标用户设备直接将该标注信息返回至计算机设备,计算机设备基于接收到的标注信息,结合之前确定的交互位置信息,实现标注信息的投影呈现等。
在一些实施方式中,所述计算机设备还包括距离测量装置;其中,所述方法还包括步骤S113(未示出),在步骤S113中,通过所述距离测量装置确定所述当前用户与所述计算机设备之间的距离信息,若所述距离信息不满足预设距离阈值,所述计算机设备发出通知。例如,所述距离测量装置设置于所述计算机设备平行于对应操作区域、正对当前用户的一方,用于实现计算机设备与当前用户的实时距离信息的测量,如激光测距仪等。计算机设备设置有对应距离阈值区间,当所述计算机设备与当前用户的距离信息处于该距离阈值区间时,确定距离信息满足预设距离阈值,当前用户的位姿符合要求。若所述计算机设备与当前用户的距离信息处于距离阈值区间之外,则确定距离信息不满足预设距离阈值,计算机设备发出对应提示通知,如通过声音、图像、震动、文字等形式提醒当前用户需要调整姿态,以保证对应距离信息满足预设距离阈值。
图3示出根据本申请一个方面的一种投影交互方法,其中,该方法适用于图1所示***,应用于目标用户设备200,主要包括步骤S201、步骤S202以及步骤S203。在步骤S201中,接收并呈现对应计算机设备传输的、通过对应顶部摄像装置采集的顶部图像信息;在步骤S202中,获取目标用户设备对应目标用户的第一用户操作,基于所述第一用户操作生成关于所述顶部图像信息的标注信息;在步骤S203中,将所述标注信息返回至所述计算机设备,供所述计算机设备通过对应投影装置呈现所述标注信息。
例如,当前用户(例如,用户甲)持有计算机设备,通过该计算机设备可以与目标用户(例如,用户乙)持有的目标用户设备进行通信,如通过有线或者无线的方式建立计算机设备与目标用户设备之间的通信连接,或者经由网络设备进行两者之间数据通信传输等。所述计算机设备包括顶部摄像装置,该顶部摄像装置用于采集当前用户的操作对象相关图像信息,例如,顶部摄像装置从操作对象的上方采集关于操作对象相关的图像信息(例如,正上方或斜上方等),在一些情形下,所述顶部摄像装置设置于操作对象正上方,顶部摄像装置的光轴能够穿过操作对象的形体或者中心等。当然,为了使顶部摄像装置能够满足要求,计算机设备通常设置有向前的延伸杆,并在延伸杆上将顶部摄像装置正对下方设置,采集下方的图像信息,在该延伸杆下方、计算机设备与所属用户之间位置,设置有对应操作对象的操作区域,该操作区域可以是计算机设备本身在下方的延伸区域(例如,通过计算机设备本身自带的延伸区域从而能够较为精准获取顶部图像信息),或者通过在计算机设备与所属用户之间设置空白区域作为对应的操作区域(例如,设置空白桌面作为操作区域等)。当然,在一些情形下,计算机设备的底座保持水平状态,从而保持计算机设备的稳定,相应地,对应顶部摄像装置的光轴垂直向下,所述操作区域所在面保持水平,从而使得计算机设备采集的顶部图像信息中操作对象各个区域相对于顶部摄像装置的距离相近。
所述计算机设备通过顶部摄像装置采集关于操作对象的顶部图像信息,并将该顶部图像信息直接发送或者经由网络设备发送至目标用户设备。在一些实施例中,计算机设备可以先对顶部图像信息进行识别(例如,预先设置的模板特征,通过对应模板特征进行识别和跟踪)等,从而确保该顶部图像信息中存在对应操作对象。若当前顶部图像信息中不存在操作对象,计算机设备可以调节该顶部摄像装置的摄像角度,采集其他区域的图像,从而确保顶部图像信息中存在操作对象,例如,通过调整延伸杆的延伸角度、高度或者直接调整顶部摄像装置的摄像位姿信息,从而达到改变顶部摄像装置的摄像角度的效果。若采集各个角度后一直不存在操作对象或者连续采集一定数量的顶部图像信息均不存在操作对象,则计算机设备呈现对应提示信息,用于提示当前用户当前操作区域不存在操作对象等。若当前顶部图像信息中存在操作对象,则将该顶部图像信息传输至目标用户设备。所述目标用户设备接收到顶部图像信息后,呈现该顶部图像信息,例如,通过显示屏显示该顶部图像信息或者通过投影仪投影显示该顶部图像信息。
所述目标用户设备接收并呈现该顶部图像信息,供目标用户基于顶部图像信息进行操作交互等。所述目标用户设备在呈现顶部图像信息的同时,还能够通过输入装置采集目标用户关于顶部图像信息中交互对象的标注信息,该交互对象的交互位置可以是预先确定,也可以是当前用户确定并传输至目标用户设备,还可以是基于目标用户的操作位置(例如,触摸位置、光标所处位置、手势识别结果或者语音识别结果等)确定等。若所述顶部图像信息中交互位置是预先确定或者当前用户确定的,则目标用户设备直接将该标注信息传输至计算机设备;若所述顶部图像信息中交互位置是目标用户的操作位置确定,则目标用户设备将该交互位置确定为标注位置信息,并结合标注信息生成对应图像标注信息,将该图像标注信息返回至计算机设备等。如在一些实施方式中,所述方法还包括步骤S204(未示出),在步骤S204中,基于所述第一用户操作确定对应标注位置信息;其中,在步骤S203中,将所述标注信息及所述标注位置信息返回至所述计算机设备,供所述计算机设备基于所述标注位置信息通过对应投影装置呈现所述标注信息。
例如,所述顶部图像信息包括基于该顶部图像信息建立的图像坐标系,该图像坐标系以某个像素点(例如,图像左上角的像素点等)为原点,并以横轴作为X轴、纵轴作为Y轴建立对应图像/像素坐标系等,对应标注位置信息包括对应标注信息或标注信息的交互对象在图像坐标系中的坐标位置信息,该坐标位置信息可以是用于指示标注信息或标注信息的交互对象的中心位置或者区域范围的坐标集合等。所述标注位置信息可以是基于当前用户、目标用户的用户操作确定,也可以是预先设定的。对应标注信息由目标用户设备基于目标用户关于顶部图像的第一用户操作确定,例如,基于目标用户关于鼠标输入、键盘输入、触摸屏输入、手势输入或者语音输入操作等方式添加的标记信息确定对应标注信息;在一些情形下,该标注位置信息基于对应鼠标的点击位置、键盘输入对应位置、触摸屏的触摸位置、手势识别、语音识别结果在顶部图像信息中图像坐标信息确定,或者基于该鼠标的点击位置、键盘输入对应位置、触摸屏的触摸位置、手势识别、语音识别结果先在顶部图像信息中确定对应交互对象,再基于交互对象确定对应的图像标注位置等。
所述标注信息包括但不限于关于顶部图像信息中交互对象的贴纸、文字、图形、视频、涂鸦、2D标记或者3D标记等标记信息,在一些实施例中,基于不同类型的标注信息,对应图像位置信息的表现形式也存在区别。
例如,所述投影装置被安置于顶部摄像装置附近,如对应投影机与顶部摄像头一同安置于顶部延伸杆上等。对应投影装置与顶部摄像装置的映射关系可以通过计算获得,基于投影装置与顶部摄像装置的映射关系,可以将所述标注位置信息换算到投影位置信息,如标注信息在投影图像对应投影图像坐标系中的投影坐标信息,其中,投影位置信息仅为举例,在此不做限定。计算机设备根据对应投影坐标信息将标注信息投影至对应操作区域,从而将标注信息呈现于操作对象中对应区域。
上文主要对本申请一种投影交互方法的各实施例进行介绍,此外,本申请还提供了能够实施上述各实施例的计算机设备和目标用户设备,下面我们结合图4、图5进行介绍。
图4示出根据本申请一个方面的一种投影交互的计算机设备100,该设备包括一一模块101、一二模块102以及一三模块103。一一模块101,用于通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息;一二模块102,用于获取所述目标用户设备对应目标用户的、关于所述顶部图像信息的图像标注信息,其中,所述图像标注信息包括对应标注信息及所述标注信息的标注位置信息,所述标注信息由所述目标用户的第一用户操作确定;一三模块103,用于基于所述标注位置信息确定对应投影位置信息,并基于所述投影位置信息投影呈现所述标注信息。
在此,所述图4示出的一一模块101、一二模块102以及一三模块103对应的具体实施方式与前述图2示出的步骤S101、步骤S102以及步骤S103的实施例相同或相似,因而不再赘述,以引用的方式包含于此。
在一些实施方式中,所述计算机设备还包括显示装置,所述设备还包括一四模块(未示出),用于接收所述目标用户设备传输的目标图像信息,通过所述显示装置呈现所述目标图像信息。
在一些实施方式中,所述计算机设备还包括前置摄像装置,其中,所述前置摄像装置用于采集关于所述计算机设备对应当前用户的前置图像信息;其中,所述设备还包括一五模块(未示出),用于将所述前置图像信息传输至所述目标用户设备,供所述目标用户设备呈现所述前置图像信息。
在一些实施方式中,所述设备还包括一六模块(未示出),用于获取关于所述计算机设备与所述目标用户设备的当前视频交互的摄像切换请求,其中,所述当前视频交互的图像信息包括所述前置图像信息;其中,一一模块101,用于响应于所述摄像切换请求,关闭所述前置摄像装置并启用所述顶部摄像装置,通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息。
在一些实施方式中,一五模块,用于接收所述目标用户设备传输的、关于所述计算机设备与目标用户设备的当前视频交互的摄像切换请求,其中,所述摄像切换请求基于所述目标用户的第二用户操作确定。
在一些实施方式中,一五模块,用于获取关于所述当前视频交互的视频建立请求;响应于所述视频建立请求,基于所述视频建立请求建立所述计算机设备与所述目标用户设备的所述当前视频交互,通过所述前置摄像装置采集对应前置图像信息并传输至所述目标用户设备,供所述目标用户设备呈现所述前置图像信息。
在一些实施方式中,所述设备还包括一七模块(未示出),用于获取关于所述计算机设备与目标用户设备的当前视频交互的摄像还原请求;响应于所述摄像还原请求,关闭所述顶部摄像图像并启用所述前置摄像装置,通过所述前置摄像装置采集对应前置图像信息,将所述前置图像信息传输至对应所述目标用户设备。
在一些实施方式中,所述设备还包括一八模块(未示出),用于获取关于所述计算机设备与目标用户设备的视频交互的摄像开启请求;其中,一一模块101,用于响应于所述摄像开启请求,通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备;一五模块,用于响应于所述摄像开启请求,通过所述前置摄像装置采集对应的前置图像信息,将所述前置图像信息传输至所述目标用户设备。
在一些实施方式中,所述计算机设备包括照明装置;其中,所述设备还包括一九模块(未示出),用于若获取到关于所述照明装置的启用请求,开启所述照明装置。
在一些实施方式中,所述计算机设备还包括环境光检测装置,所述设备还包括一十模块(未示出),用于基于所述环境光检测装置获取当前环境的光照强度信息,检测所述光照强度信息是否满足预设照明阈值;若不满足,则调节所述照明装置,直至所述光照强度信息满足所述预设照明阈值。
在一些实施方式中,所述设备还包括一十一模块(未示出),用于基于所述顶部图像信息确定所述顶部图像信息对应图像亮度信息,检测所述图像亮度信息是否满足预设亮度阈值;若不满足,则调节所述照明装置,直至所述图像亮度信息满足所述预设亮度阈值。
在一些实施方式中,所述设备还包括一十二模块(未示出),用于获取所述当前用户关于所述顶部图像信息的交互位置信息;基于所述交互位置信息确定对应的虚拟呈现信息,并通过所述投影装置投影呈现所述虚拟呈现信息。
在一些实施方式中,所述计算机设备包括红外测量装置;其中,所述获取所述当前用户关于所述顶部图像信息的交互位置信息,包括:通过所述红外测量装置确定所述顶部图像信息的交互位置信息。
在一些实施方式中,一二模块102,用于将所述交互位置信息发送至所述目标用户设备,接收所述目标用户设备传输的、基于所述交互位置信息返回的标注信息,从而确定所述顶部图像信息的图像标注信息,其中,所述图像标注信息包括所述标注信息及所述交互位置信息,所述标注信息由所述目标用户的第一用户操作确定。
在一些实施方式中,所述计算机设备还包括距离测量装置;其中,所述设备还包括一十三模块(未示出),用于通过所述距离测量装置确定所述当前用户与所述计算机设备之间的距离信息,若所述距离信息不满足预设距离阈值,所述计算机设备发出通知。
在此,所述一四模块至一十三模块对应的具体实施方式与前述步骤S104至步骤S113的实施例相同或相似,因而不再赘述,以引用的方式包含于此。
图5示出根据本申请一个方面的一种投影交互的目标用户设备200,主要包括二一模块201、二二模块202以及二三模块203。二一模块201,用于接收并呈现对应计算机设备传输的、通过对应顶部摄像装置采集的顶部图像信息;二二模块202,用于获取目标用户设备对应目标用户的第一用户操作,基于所述第一用户操作生成关于所述顶部图像信息的标注信息;二三模块203,用于将所述标注信息返回至所述计算机设备,供所述计算机设备通过对应投影装置呈现所述标注信息。
在此,所述图5示出的二一模块201、二二模块202以及二三模块203对应的具体实施方式与前述图3示出的步骤S201、步骤S202以及步骤S203的实施例相同或相似,因而不再赘述,以引用的方式包含于此。
在一些实施方式中,所述设备还包括二四模块(未示出),用于基于所述第一用户操作确定对应标注位置信息;其中,二三模块203,用于将所述标注信息及所述标注位置信息返回至所述计算机设备,供所述计算机设备基于所述标注位置信息通过对应投影装置呈现所述标注信息。
在此,所述二四模块对应的具体实施方式与前述步骤S204的实施例相同或相似,因而不再赘述,以引用的方式包含于此。
除上述各实施例介绍的方法和设备外,本申请还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机代码,当所述计算机代码被执行时,如前任一项所述的方法被执行。
本申请还提供了一种计算机程序产品,当所述计算机程序产品被计算机设备执行时,如前任一项所述的方法被执行。
本申请还提供了一种计算机设备,所述计算机设备包括:
一个或多个处理器;
存储器,用于存储一个或多个计算机程序;
当所述一个或多个计算机程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如前任一项所述的方法。
图6示出了可被用于实施本申请中所述的各个实施例的示例性***;
如图6所示在一些实施例中,***300能够作为各所述实施例中的任意一个上述设备。在一些实施例中,***300可包括具有指令的一个或多个计算机可读介质(例如,***存储器或NVM/存储设备320)以及与该一个或多个计算机可读介质耦合并被配置为执行指令以实现模块从而执行本申请中所述的动作的一个或多个处理器(例如,(一个或多个)处理器305)。
对于一个实施例,***控制模块310可包括任意适当的接口控制器,以向(一个或多个)处理器305中的至少一个和/或与***控制模块310通信的任意适当的设备或组件提供任意适当的接口。
***控制模块310可包括存储器控制器模块330,以向***存储器315提供接口。存储器控制器模块330可以是硬件模块、软件模块和/或固件模块。
***存储器315可被用于例如为***300加载和存储数据和/或指令。对于一个实施例,***存储器315可包括任意适当的易失性存储器,例如,适当的DRAM。在一些实施例中,***存储器315可包括双倍数据速率类型四同步动态随机存取存储器(DDR4SDRAM)。
对于一个实施例,***控制模块310可包括一个或多个输入/输出(I/O)控制器,以向NVM/存储设备320及(一个或多个)通信接口325提供接口。
例如,NVM/存储设备320可被用于存储数据和/或指令。NVM/存储设备320可包括任意适当的非易失性存储器(例如,闪存)和/或可包括任意适当的(一个或多个)非易失性存储设备(例如,一个或多个硬盘驱动器(HDD)、一个或多个光盘(CD)驱动器和/或一个或多个数字通用光盘(DVD)驱动器)。
NVM/存储设备320可包括在物理上作为***300被安装在其上的设备的一部分的存储资源,或者其可被该设备访问而不必作为该设备的一部分。例如,NVM/存储设备320可通过网络经由(一个或多个)通信接口325进行访问。
(一个或多个)通信接口325可为***300提供接口以通过一个或多个网络和/或与任意其他适当的设备通信。***300可根据一个或多个无线网络标准和/或协议中的任意标准和/或协议来与无线网络的一个或多个组件进行无线通信。
对于一个实施例,(一个或多个)处理器305中的至少一个可与***控制模块310的一个或多个控制器(例如,存储器控制器模块330)的逻辑封装在一起。对于一个实施例,(一个或多个)处理器305中的至少一个可与***控制模块310的一个或多个控制器的逻辑封装在一起以形成***级封装(SiP)。对于一个实施例,(一个或多个)处理器305中的至少一个可与***控制模块310的一个或多个控制器的逻辑集成在同一模具上。对于一个实施例,(一个或多个)处理器305中的至少一个可与***控制模块310的一个或多个控制器的逻辑集成在同一模具上以形成片上***(SoC)。
在各个实施例中,***300可以但不限于是:服务器、工作站、台式计算设备或移动计算设备(例如,膝上型计算设备、手持计算设备、平板电脑、上网本等)。在各个实施例中,***300可具有更多或更少的组件和/或不同的架构。例如,在一些实施例中,***300包括一个或多个摄像机、键盘、液晶显示器(LCD)屏幕(包括触屏显示器)、非易失性存储器端口、多个天线、图形芯片、专用集成电路(ASIC)和扬声器。
需要注意的是,本申请可在软件和/或软件与硬件的组合体中被实施,例如,可采用专用集成电路(ASIC)、通用目的计算机或任何其他类似硬件设备来实现。在一个实施例中,本申请的软件程序可以通过处理器执行以实现上文所述步骤或功能。同样地,本申请的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中,例如,RAM存储器,磁或光驱动器或软磁盘及类似设备。另外,本申请的一些步骤或功能可采用硬件来实现,例如,作为与处理器配合从而执行各个步骤或功能的电路。
另外,本申请的一部分可被应用为计算机程序产品,例如计算机程序指令,当其被计算机执行时,通过该计算机的操作,可以调用或提供根据本申请的方法和/或技术方案。本领域技术人员应能理解,计算机程序指令在计算机可读介质中的存在形式包括但不限于源文件、可执行文件、安装包文件等,相应地,计算机程序指令被计算机执行的方式包括但不限于:该计算机直接执行该指令,或者该计算机编译该指令后再执行对应的编译后程序,或者该计算机读取并执行该指令,或者该计算机读取并安装该指令后再执行对应的安装后程序。在此,计算机可读介质可以是可供计算机访问的任意可用的计算机可读存储介质或通信介质。
通信介质包括藉此包含例如计算机可读指令、数据结构、程序模块或其他数据的通信信号被从一个***传送到另一***的介质。通信介质可包括有导的传输介质(诸如电缆和线(例如,光纤、同轴等))和能传播能量波的无线(未有导的传输)介质,诸如声音、电磁、RF、微波和红外。计算机可读指令、数据结构、程序模块或其他数据可被体现为例如无线介质(诸如载波或诸如被体现为扩展频谱技术的一部分的类似机制)中的已调制数据信号。术语“已调制数据信号”指的是其一个或多个特征以在信号中编码信息的方式被更改或设定的信号。调制可以是模拟的、数字的或混合调制技术。
作为示例而非限制,计算机可读存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其它数据的信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动的介质。例如,计算机可读存储介质包括,但不限于,易失性存储器,诸如随机存储器(RAM,DRAM,SRAM);以及非易失性存储器,诸如闪存、各种只读存储器(ROM,PROM,EPROM,EEPROM)、磁性和铁磁/铁电存储器(MRAM,FeRAM);以及磁性和光学存储设备(硬盘、磁带、CD、DVD);或其它现在已知的介质或今后开发的能够存储供计算机***使用的计算机可读信息/数据。
在此,根据本申请的一个实施例包括一个装置,该装置包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器,其中,当该计算机程序指令被该处理器执行时,触发该装置运行基于前述根据本申请的多个实施例的方法和/或技术方案。
对于本领域技术人员而言,显然本申请不限于上述示范性实施例的细节,而且在不背离本申请的精神或基本特征的情况下,能够以其他的具体形式实现本申请。因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本申请的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本申请内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。

Claims (22)

1.一种投影交互方法,其中,该方法应用于计算机设备,该计算机设备包括顶部摄像装置以及投影装置,该方法包括:
通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息;
获取所述目标用户设备对应目标用户的、关于所述顶部图像信息的图像标注信息,其中,所述图像标注信息包括对应标注信息及所述标注信息的标注位置信息,所述标注信息由所述目标用户的第一用户操作确定;
基于所述标注位置信息确定对应投影位置信息,并基于所述投影位置信息投影呈现所述标注信息。
2.根据权利要求1所述的方法,其中,所述计算机设备还包括显示装置,所述方法还包括:
接收所述目标用户设备传输的目标图像信息,通过所述显示装置呈现所述目标图像信息。
3.根据权利要求1或2所述的方法,其中,所述计算机设备还包括前置摄像装置,其中,所述前置摄像装置用于采集关于所述计算机设备对应当前用户的前置图像信息;其中,所述方法还包括:
将所述前置图像信息传输至所述目标用户设备,供所述目标用户设备呈现所述前置图像信息。
4.根据权利要求3所述的方法,其中,所述方法还包括:
获取关于所述计算机设备与所述目标用户设备的当前视频交互的摄像切换请求,其中,所述当前视频交互的图像信息包括所述前置图像信息;
其中,所述通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息,包括:
响应于所述摄像切换请求,关闭所述前置摄像装置并启用所述顶部摄像装置,通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息。
5.根据权利要求4所述的方法,其中,所述获取关于所述计算机设备与所述目标用户设备的当前视频交互的摄像切换请求,包括:
接收所述目标用户设备传输的、关于所述计算机设备与目标用户设备的当前视频交互的摄像切换请求,其中,所述摄像切换请求基于所述目标用户的第二用户操作确定。
6.根据权利要求3或4所述的方法,其中,所述将所述前置图像信息传输至所述目标用户设备,供所述目标用户设备呈现所述前置图像信息,包括:
获取关于所述当前视频交互的视频建立请求;
响应于所述视频建立请求,基于所述视频建立请求建立所述计算机设备与所述目标用户设备的所述当前视频交互,通过所述前置摄像装置采集对应前置图像信息并传输至所述目标用户设备,供所述目标用户设备呈现所述前置图像信息。
7.根据权利要求4所述的方法,其中,所述方法还包括:
获取关于所述计算机设备与目标用户设备的当前视频交互的摄像还原请求;
响应于所述摄像还原请求,关闭所述顶部摄像图像并启用所述前置摄像装置,通过所述前置摄像装置采集对应前置图像信息,将所述前置图像信息传输至对应所述目标用户设备。
8.根据权利要求3所述的方法,其中,所述方法还包括:
获取关于所述计算机设备与目标用户设备的视频交互的摄像开启请求;
其中,所述通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息,包括:
响应于所述摄像开启请求,通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备;
其中,所述将所述前置图像信息传输至所述目标用户设备,供所述目标用户设备呈现所述前置图像信息,包括:
响应于所述摄像开启请求,通过所述前置摄像装置采集对应的前置图像信息,将所述前置图像信息传输至所述目标用户设备。
9.根据权利要求1所述的方法,其中,所述计算机设备包括照明装置;其中,所述方法还包括:
若获取到关于所述照明装置的启用请求,开启所述照明装置。
10.根据权利要求9所述的方法,其中,所述计算机设备还包括环境光检测装置,所述方法还包括:
基于所述环境光检测装置获取当前环境的光照强度信息,检测所述光照强度信息是否满足预设照明阈值;
若不满足,则调节所述照明装置,直至所述光照强度信息满足所述预设照明阈值。
11.根据权利要求9所述的方法,其中,所述方法还包括:
基于所述顶部图像信息确定所述顶部图像信息对应图像亮度信息,检测所述图像亮度信息是否满足预设亮度阈值;
若不满足,则调节所述照明装置,直至所述图像亮度信息满足所述预设亮度阈值。
12.根据权利要求1所述的方法,其中,所述方法还包括:
获取所述当前用户关于所述顶部图像信息的交互位置信息;
基于所述交互位置信息确定对应的虚拟呈现信息,并通过所述投影装置投影呈现所述虚拟呈现信息。
13.根据权利要求12所述的方法,其中,所述计算机设备包括红外测量装置;其中,所述获取所述当前用户关于所述顶部图像信息的交互位置信息,包括:
通过所述红外测量装置确定所述顶部图像信息的交互位置信息。
14.根据权利要求12或13所述的方法,其中,所述获取所述目标用户设备对应目标用户的、关于所述顶部图像信息的图像标注信息,包括:
将所述交互位置信息发送至所述目标用户设备,接收所述目标用户设备传输的、基于所述交互位置信息返回的标注信息,从而确定所述顶部图像信息的图像标注信息,其中,所述图像标注信息包括所述标注信息及所述交互位置信息,所述标注信息由所述目标用户的第一用户操作确定。
15.根据权利要求1所述的方法,其中,所述计算机设备还包括距离测量装置;其中,所述方法还包括:
通过所述距离测量装置确定所述当前用户与所述计算机设备之间的距离信息,若所述距离信息不满足预设距离阈值,所述计算机设备发出通知。
16.一种投影交互方法,其中,应用于目标用户设备,该方法包括:
接收并呈现对应计算机设备传输的、通过对应顶部摄像装置采集的顶部图像信息;
获取目标用户设备对应目标用户的第一用户操作,基于所述第一用户操作生成关于所述顶部图像信息的标注信息;
将所述标注信息返回至所述计算机设备,供所述计算机设备通过对应投影装置呈现所述标注信息。
17.根据权利要求16所述的方法,其中,所述方法还包括:
基于所述第一用户操作确定对应标注位置信息;
其中,所述将所述标注信息返回至所述计算机设备,供所述计算机设备通过对应投影装置呈现所述标注信息,包括:
将所述标注信息及所述标注位置信息返回至所述计算机设备,供所述计算机设备基于所述标注位置信息通过对应投影装置呈现所述标注信息。
18.一种投影交互的计算机设备,该计算机设备包括顶部摄像装置以及投影装置,该设备包括:
一一模块,用于通过所述顶部摄像装置采集对应的顶部图像信息,将所述顶部图像信息传输至对应的目标用户设备,供所述目标用户设备呈现所述顶部图像信息;
一二模块,用于获取所述目标用户设备对应目标用户的、关于所述顶部图像信息的图像标注信息,其中,所述图像标注信息包括对应标注信息及所述标注信息的标注位置信息,所述标注信息由所述目标用户的第一用户操作确定;
一三模块,用于基于所述标注位置信息确定对应投影位置信息,并基于所述投影位置信息投影呈现所述标注信息。
19.一种投影交互的目标用户设备,其中,该设备包括:
二一模块,用于接收并呈现对应计算机设备传输的、通过对应顶部摄像装置采集的顶部图像信息;
二二模块,用于获取目标用户设备对应目标用户的第一用户操作,基于所述第一用户操作生成关于所述顶部图像信息的标注信息;
二三模块,用于将所述标注信息返回至所述计算机设备,供所述计算机设备通过对应投影装置呈现所述标注信息。
20.一种计算机设备,其中,该设备包括:
处理器;以及
被安排成存储计算机可执行指令的存储器,所述可执行指令在被执行时使所述处理器执行如权利要求1至17中任一项所述方法的步骤。
21.一种计算机可读存储介质,其上存储有计算机程序/指令,其特征在于,该计算机程序/指令在被执行时使得***进行执行如权利要求1至17中任一项所述方法的步骤。
22.一种计算机程序产品,包括计算机程序/指令,其特征在于,该计算机程序/指令被处理器执行时实现权利要求1至17中任一项所述方法的步骤。
CN202210726966.8A 2022-03-11 2022-06-24 一种投影交互方法、设备、介质及程序产品 Pending CN115185437A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202210241557 2022-03-11
CN2022102415579 2022-03-11

Publications (1)

Publication Number Publication Date
CN115185437A true CN115185437A (zh) 2022-10-14

Family

ID=83514634

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210726966.8A Pending CN115185437A (zh) 2022-03-11 2022-06-24 一种投影交互方法、设备、介质及程序产品

Country Status (2)

Country Link
CN (1) CN115185437A (zh)
WO (1) WO2023168836A1 (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107689082A (zh) * 2016-08-03 2018-02-13 腾讯科技(深圳)有限公司 一种数据投影方法以及装置
CN110138831A (zh) * 2019-03-29 2019-08-16 亮风台(上海)信息科技有限公司 一种进行远程协助的方法与设备
CN111757074A (zh) * 2019-03-29 2020-10-09 福建天泉教育科技有限公司 一种影像共享标注***
CN111752376A (zh) * 2019-03-29 2020-10-09 福建天泉教育科技有限公司 一种基于影像获取的标注***
CN111988493A (zh) * 2019-05-21 2020-11-24 北京小米移动软件有限公司 交互处理方法、装置、设备及存储介质
CN112231023A (zh) * 2019-07-15 2021-01-15 北京字节跳动网络技术有限公司 一种信息显示方法、装置、设备及存储介质
CN113741698A (zh) * 2021-09-09 2021-12-03 亮风台(上海)信息科技有限公司 一种确定和呈现目标标记信息的方法与设备

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103577788A (zh) * 2012-07-19 2014-02-12 华为终端有限公司 增强现实的实现方法和装置
JP2022046059A (ja) * 2020-09-10 2022-03-23 セイコーエプソン株式会社 情報生成方法、情報生成システム、及びプログラム
CN113096003B (zh) * 2021-04-02 2023-08-18 北京车和家信息技术有限公司 针对多视频帧的标注方法、装置、设备和存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107689082A (zh) * 2016-08-03 2018-02-13 腾讯科技(深圳)有限公司 一种数据投影方法以及装置
CN110138831A (zh) * 2019-03-29 2019-08-16 亮风台(上海)信息科技有限公司 一种进行远程协助的方法与设备
CN111757074A (zh) * 2019-03-29 2020-10-09 福建天泉教育科技有限公司 一种影像共享标注***
CN111752376A (zh) * 2019-03-29 2020-10-09 福建天泉教育科技有限公司 一种基于影像获取的标注***
CN111988493A (zh) * 2019-05-21 2020-11-24 北京小米移动软件有限公司 交互处理方法、装置、设备及存储介质
CN112231023A (zh) * 2019-07-15 2021-01-15 北京字节跳动网络技术有限公司 一种信息显示方法、装置、设备及存储介质
CN113741698A (zh) * 2021-09-09 2021-12-03 亮风台(上海)信息科技有限公司 一种确定和呈现目标标记信息的方法与设备

Also Published As

Publication number Publication date
WO2023168836A1 (zh) 2023-09-14

Similar Documents

Publication Publication Date Title
JP7109553B2 (ja) 追加オブジェクトの表示方法及びその、装置、コンピュータ装置並びに記憶媒体
CN113741698B (zh) 一种确定和呈现目标标记信息的方法与设备
US9584766B2 (en) Integrated interactive space
CN108304075B (zh) 一种在增强现实设备进行人机交互的方法与设备
US8957856B2 (en) Systems, methods, and apparatuses for spatial input associated with a display
US11244511B2 (en) Augmented reality method, system and terminal device of displaying and controlling virtual content via interaction device
US9723293B1 (en) Identifying projection surfaces in augmented reality environments
CN103391411A (zh) 图像处理设备、投影控制方法及程序
US9632592B1 (en) Gesture recognition from depth and distortion analysis
US11880999B2 (en) Personalized scene image processing method, apparatus and storage medium
JP2014533347A (ja) レーザー深度マップの範囲拡張方法
US20150169085A1 (en) Information processing apparatus, program, information processing method, and information processing system
JP2014170511A (ja) システム、画像投影装置、情報処理装置、情報処理方法およびプログラム
US9304582B1 (en) Object-based color detection and correction
CN109582122B (zh) 增强现实信息提供方法、装置及电子设备
US20210004599A1 (en) Real time object surface identification for augmented reality environments
CN104166509A (zh) 一种非接触式屏幕交互方法及***
US11561651B2 (en) Virtual paintbrush implementing method and apparatus, and computer readable storage medium
KR20150079387A (ko) 카메라 광 데이터로 가상 환경을 조명하는 방법
US20160117553A1 (en) Method, device and system for realizing visual identification
CN113965665A (zh) 一种用于确定虚拟直播图像的方法与设备
CN111913560B (zh) 虚拟内容的显示方法、装置、***、终端设备及存储介质
CN110213407B (zh) 一种电子装置的操作方法、电子装置和计算机存储介质
CN210691314U (zh) 一种基于活体检测的接入控制***及登录设备
CN115185437A (zh) 一种投影交互方法、设备、介质及程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 201210 7th Floor, No. 1, Lane 5005, Shenjiang Road, China (Shanghai) Pilot Free Trade Zone, Pudong New Area, Shanghai

Applicant after: HISCENE INFORMATION TECHNOLOGY Co.,Ltd.

Address before: Room 501 / 503-505, 570 shengxia Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai, 201203

Applicant before: HISCENE INFORMATION TECHNOLOGY Co.,Ltd.