CN116888650A - 将动态5g ar/mr体验流式传输到具有可更新场景的5g设备的方法 - Google Patents
将动态5g ar/mr体验流式传输到具有可更新场景的5g设备的方法 Download PDFInfo
- Publication number
- CN116888650A CN116888650A CN202280015977.3A CN202280015977A CN116888650A CN 116888650 A CN116888650 A CN 116888650A CN 202280015977 A CN202280015977 A CN 202280015977A CN 116888650 A CN116888650 A CN 116888650A
- Authority
- CN
- China
- Prior art keywords
- media
- scene
- session loop
- loop
- media content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 238000009877 rendering Methods 0.000 claims abstract description 20
- 230000003190 augmentative effect Effects 0.000 claims abstract description 11
- 238000012545 processing Methods 0.000 claims description 16
- 238000012384 transportation and delivery Methods 0.000 claims description 16
- 230000008569 process Effects 0.000 claims description 14
- 230000005540 biological transmission Effects 0.000 claims description 8
- 230000006870 function Effects 0.000 description 48
- 238000010586 diagram Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 7
- 238000012546 transfer Methods 0.000 description 5
- 230000001419 dependent effect Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000013475 authorization Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 239000003999 initiator Substances 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 230000001066 destructive effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000013508 migration Methods 0.000 description 1
- 230000005012 migration Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/003—Navigation within 3D models or images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1069—Session establishment or de-establishment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/35—Categorising the entire scene, e.g. birthday party or wedding scene
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/10—Architectures or entities
- H04L65/1059—End-user terminal functionalities specially adapted for real-time communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/10—Architectures or entities
- H04L65/1063—Application servers providing network services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/131—Protocols for games, networked simulations or virtual reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/2866—Architectures; Arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/2866—Architectures; Arrangements
- H04L67/2869—Terminals specially adapted for communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/34—Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W48/00—Access restriction; Network selection; Access point selection
- H04W48/17—Selecting a data network PoA [Point of Attachment]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/08—Bandwidth reduction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Computer Security & Cryptography (AREA)
- Information Transfer Between Computers (AREA)
- Computer And Data Communications (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
提供了一种方法。该方法包括:选择媒体内容,该媒体内容包括场景;在外部会话循环中创建对该媒体内容进行流式传输的增强现实(AR)/混合现实(MR)会话;在该外部会话循环内的内部会话循环中渲染该媒体内容;以及在该内部会话循环正在渲染该媒体内容的同时,在该外部会话循环中通过向该内部会话循环提供新场景,来用该新场景更新该场景。
Description
交叉引用
本申请要求于2021年11月3日在美国专利商标局提交的美国临时申请第63/275,358号的优先权,其公开内容通过引用结合在本文中。
技术领域
本公开总体上涉及第5代(5G,5th generation)增强现实(AR,AugmentedReality)/混合现实(MR,Mixed Reality),并且尤其涉及一种向其中场景被动态更新的5G设备提供AR/MR内容的方法和装置。
背景技术
第3代合作伙伴计划(3GPP,the 3rd Generation Partnership Project)TS26.501定义了用于第5代(5G)网络的媒体流式传输架构。3GPP开始了一项关于支持增强现实(AR)/混合现实(MR)应用程序的技术报告。3GPP TR 26.998定义了对5G网络中的玻璃型AR/MR设备的支持。考虑了两种设备类别:完全能够对复杂的AR/MR内容进行解码和播放的设备(即,独立AR(STAR)),和具有较小计算资源和/或较小物理尺寸的设备(即,较小电池),并且只有当在5G边缘服务器、网络或云端上而非设备(边缘相关AR(EDGAR))上进行较大部分的计算时,这两种设备类别才能够运行此类应用程序。然而,STAR设备的呼叫流程不能更新场景描述。
发明内容
根据本公开的一方面,一种方法可包括:选择媒体内容,该媒体内容包括场景;在外部会话循环中创建对该媒体内容进行流式传输的增强现实(AR)/混合现实(MR)会话;在该外部会话循环内的内部会话循环中渲染该媒体内容;以及在该内部会话循环正在渲染该媒体内容的同时,在该外部会话循环中通过向该内部会话循环提供新场景,来用该新场景更新该场景。
根据本公开的一方面,一种设备可包括:至少一个存储器,其被配置为存储程序代码;以及至少一个处理器,其被配置为读取该程序代码并按照该程序代码的指示进行操作。该程序代码包括:第一选择代码,其被配置为使该至少一个处理器选择媒体内容,该媒体内容包括场景;第一创建代码,其被配置为使该至少一个处理器在外部会话循环中创建对该媒体内容进行流式传输的AR/MR会话;第一渲染代码,其被配置为使该至少一个处理器在该外部会话循环内的内部会话循环中渲染该媒体内容;以及第一更新代码,其被配置为使该至少一个处理器,在该内部会话循环正在渲染该媒体内容的同时,在该外部会话循环中通过向该内部会话循环提供新场景,来用该新场景更新该场景。
根据本公开的一方面,一种非易失性计算机可读介质可存储指令,这些指令包括:一个或多个指令,该一个或多个指令在由设备的一个或多个处理器执行时使该一个或多个处理器:选择媒体内容,该媒体内容包括场景;在外部会话循环中创建对该媒体内容进行流式传输的AR/MR会话;在该外部会话循环内的内部会话循环中渲染该媒体内容;以及在该内部会话循环正在渲染该媒体内容的同时,在该外部会话循环中通过向该内部会话循环提供新场景,来用该新场景更新该场景。
附图说明
根据以下详细描述和附图,所公开的主题的其它特征、性质和各种优点将更加明显,其中:
图1为根据实施例的本文所述的方法、装置和***可在其中实现的环境的图。
图2为图1的一个或多个设备的示例部件的框图。
图3为根据实施例的用于媒体上行链路流式传输的媒体架构的图。
图4为根据实施例的用于媒体下行链路流式传输的媒体架构的图。
图5为根据实施例的独立增强现实(AR)(STAR)第5代媒体流式传输下行链路(5GMSd,5th Generation media streaming downlink)下载架构的图。
图6A、图6B和图6C为根据实施例的基于STAR的5G下行链路流式传输的操作流程的图。
图7为根据实施例的基于STAR的5G下行链路流式传输的方法的流程图。
具体实施方式
图1是根据实施例的可以在其中实现本文中描述的方法、装置和***的环境100的示意图。如图1中所示,环境100可以包括用户设备110、平台120和网络130。环境100的设备可以通过有线连接、无线连接、或者有线和无线连接的组合来互连。
用户设备110包括能够接收、生成、存储、处理和/或提供与平台120相关联的信息的一个或多个设备。例如,用户设备110可以包括计算设备(例如,台式计算机、膝上型计算机、平板计算机、手持计算机、智能扬声器、服务器等)、移动电话(例如,智能电话、无线电话等)、可穿戴设备(例如,一副智能眼镜或智能手表)或类似设备。在一些实施方案中,用户设备110可以从平台120接收信息和/或向平台120发送信息。
平台120包括如本文别处所述的一个或多个设备。在一些实施方案中,平台120可以包括云服务器或云服务器组。在一些实施方案中,平台120可以被设计为模块化,使得可以根据特定的需要换入或换出软件部件。这样,平台120可以容易地和/或快速地被重新配置以用于不同的用途。
在一些实施方案中,如图所示,平台120可以被托管在云计算环境122中。值得注意的是,虽然本文所述的实施方案将平台120描述为被托管在云计算环境122中,但是在一些实施方案中,平台120可以不是基于云的(即,可以在云计算环境之外实施)或者可以是部分基于云的。
云计算环境122包括托管平台120的环境。云计算环境122可以提供计算、软件、数据访问、存储等服务,所述服务不需要终端用户(例如,用户设备110)了解用于托管上述平台120的一个或多个***和/或一个或多个设备的物理位置和配置。如图所示,云计算环境122可以包括一组计算资源124(统称为“计算资源124”并单独称为“计算资源124”)。
计算资源124包括一个或多个个人计算机、工作站计算机、服务器设备或其它类型的计算和/或通信设备。在一些实施方案中,计算资源124可以托管上述平台120。云资源可以包括在计算资源124中执行的计算实例、在计算资源124中提供的存储装置、由计算资源124提供的数据传输设备等。在一些实施方案中,计算资源124可以通过有线连接、无线连接、或有线和无线连接的组合来与其它计算资源124通信。
如图1进一步所示,计算资源124包括一组云资源,诸如一个或多个应用(“APP”)124-1、一个或多个虚拟机(“VM”)124-2、虚拟化存储(“VS”)124-3、一个或多个管理程序(“HYP”)124-4等。
应用124-1包括可以提供给用户设备110和/或平台120或由用户设备110和/或平台120访问的一个或多个软件应用。应用124-1可以消除在用户设备110上安装和执行软件应用的需求。例如,应用124-1可以包括与平台120相关联的软件和/或能够通过云计算环境122提供的任何其它软件。在一些实施方案中,一个应用124-1可以通过虚拟机124-2向/从一个或多个其它应用124-1发送/接收信息。
虚拟机124-2包括类似物理机一样执行程序的机器(例如计算机)的软件实现。根据虚拟机124-2的使用和与任何真实机器的对应程度,虚拟机124-2可以是***虚拟机或过程虚拟机。***虚拟机可以提供支持完整操作***(“OS”)的执行的完整***平台。过程虚拟机可以执行单个程序,并且可以支持单个过程。在一些实施方案中,虚拟机124-2可以代表用户(例如,用户设备110)执行,并且可以管理云计算环境122的基础设施,诸如数据管理、同步或长时间数据传输(long-duration data transfers)。
虚拟化存储124-3包括一个或多个存储***和/或一个或多个设备,所述一个或多个存储***和/或一个或多个设备在计算资源124的存储***或设备内使用虚拟化技术。在一些实施方案中,在存储***的上下文内,虚拟化的类型可以包括块虚拟化和文件虚拟化。块虚拟化可以指逻辑存储与物理存储的抽象(或分离),使得可以在不考虑物理存储或异构结构的情况下访问存储***。该分离可以允许存储***的管理员在如何为终端用户管理存储方面具有灵活性。文件虚拟化可以消除以文件级别访问的数据和文件被物理存储的位置之间的依赖性。这可以优化存储用途、服务器整合和/或非破坏性的文件迁移的性能。
管理程序124-4可以提供允许多个操作***(例如“客户操作***”)在主机(诸如计算资源124)上并发执行的硬件虚拟化技术。管理程序124-4可以向客户操作***呈现虚拟操作平台,并且可以管理客户操作***的执行。各种操作***的多个实例可以共享虚拟化硬件资源。
网络130包括一个或多个有线和/或无线网络。例如,网络130可包括蜂窝网络(例如,第五代(5G,fifth generation)网络、长期演进(LTE,long-term evolution)网络、第三代(3G,third generation)网络、码分多址(CDMA,third generation)网络等)、公共陆地移动网络(PLMN,public land mobile network)、局域网(LAN,local area network)、广域网(WAN,wide area network)、城域网(MAN,metropolitan area network)、电话网络(例如,公共交换电话网(PSTN,Public Switched Telephone Network))、专用网络、自组织网络、内联网、因特网、基于光纤的网络等,和/或这些或其它类型的网络的组合。
图1所示的设备和网络的数量和布置是作为示例提供的。实际上,可以存在附加的设备和/或网络、更少的设备和/或网络、不同的设备和/或网络、或者与图1所示的设备和/或网络不同地布置的设备和/或网络。此外,图1所示的两个或更多个设备可以在单个设备内实施,或者可以将图1所示的单个设备实施为多个分布式设备。附加地或可选地,环境100的一组设备(例如,一个或多个设备)可以执行一个或多个功能,所述一个或多个功能被描述为由环境100的另一组设备执行。
图2是图1的一个或多个设备的示例部件的框图。设备200可以对应于用户设备110和/或平台120。如图2所示,设备200可以包括总线210、处理器220、存储器230、存储部件240、输入部件250、输出部件260和通信接口270。
总线210包括允许在设备200的部件之间进行通信的部件。处理器220以硬件、固件或硬件和软件的组合来实施。处理器220是中央处理单元(CPU,central processingunit)、图形处理单元(GPU,graphics processing unit)、加速处理单元(APU,acceleratedprocessing unit)、微处理器、微控制器、数字信号处理器(DSP,digital signalprocessor)、现场可编程门阵列(FPGA,field-programmable gate array)、专用集成电路(ASIC,application-specific integrated circuit)或另一种类型的处理部件。在一些实施方案中,处理器220包括一个或多个处理器,所述一个或多个处理器能够被编程用于执行功能。存储器230包括随机访问存储器(RAM,random access memory)、只读存储器(ROM,read only memory)和/或另一种类型的动态或静态存储设备(例如,快闪存储器、磁存储器和/或光存储器),所述另一种类型的动态或静态存储设备用于存储供处理器220使用的信息和/或指令。
存储部件240存储与设备200的操作和使用相关的信息和/或软件。例如,存储部件240可以包括硬盘(例如磁盘、光盘、磁光盘和/或固态盘)、压缩盘(CD)、数字多功能盘(DVD)、软盘、盒式磁带、磁带和/或另一种类型的非易失性计算机可读介质,以及对应的驱动器。
输入部件250包括允许设备200通过诸如用户输入(例如,触摸屏显示器、键盘、小键盘、鼠标、按钮、开关和/或麦克风)接收信息的部件。附加地或可选地,输入部件250可以包括用于感测信息的传感器(例如,全球定位***(GPS,global positioning system)部件、加速度计、陀螺仪和/或致动器)。输出部件260包括提供来自设备200的输出信息的部件(例如显示器、扬声器和/或一个或多个发光二极管(LED))。
通信接口270包括收发器类部件(例如,收发器和/或单独的接收器和发送器),其使得设备200能够通过例如有线连接、无线连接或有线和无线连接的组合与其它设备通信。通信接口270可以允许设备200从另一个设备接收信息和/或向另一个设备提供信息。例如,通信接口270可以包括以太网接口、光接口、同轴接口、红外接口、射频(RF,radiofrequency)接口、通用串行总线(USB,universal serial bus)接口、Wi-Fi接口、蜂窝网络接口等。
设备200可以执行本文所述的一个或多个过程。设备200可以响应于处理器220执行由诸如存储器230和/或存储部件240等非易失性计算机可读介质所存储的软件指令来执行这些过程。计算机可读介质在本文中被定义为非易失性存储设备。存储设备包括单个物理存储设备内的存储空间或分布在多个物理存储设备上的存储空间。
可以从另一个计算机可读介质或通过通信接口270从另一个设备将软件指令读取到存储器230和/或存储部件240中。当被执行时,存储在存储器230和/或存储部件240中的软件指令可以使处理器220执行本文所述的一个或多个过程。附加地或可选地,可以使用硬件电路来代替软件指令或与软件指令组合以执行本文所述的一个或多个过程。因此,本文所述的实施方案不限于硬件电路和软件的任何特定组合。
图2所示的部件的数量和布置是作为示例提供的。实际上,设备200可以包括附加的组件、更少的组件、不同的组件或者与图2所示的组件不同地布置的组件。附加地或可选地,设备200的一组部件(例如,一个或多个部件)可以执行一个或多个功能,所述一个或多个功能被描述为由设备200的另一组部件执行。
5G媒体流式传输(5GMS,5G Media Streaming)***可为来自5G媒体流式传输架构的应用程序功能、应用程序服务器和接口的组件,该5G媒体流式传输架构支持下行链路媒体流式传输服务或上行链路媒体流式传输服务,或两者。5GMS应用程序提供者可包括与5GMS***进行功能交互并提供5GMS感知应用程序的一方,该5GMS感知应用程序与该5GMS***进行功能交互。5GMS感知应用程序可指由5GMS应用程序提供者提供的用户设备(UE)中的应用程序,其包含5GMS应用程序服务的服务逻辑,并且经由5GMS架构中定义的接口和应用程序编程接口(API)与其它5GMS客户端以及网络功能进行交互。5GMS客户端可指UE功能,该UE功能是5GMS下行链路(5GMSd)客户端或5GMS上行链路(5GMSu)客户端,或两者。
5GMSd客户端可指UE功能,该UE功能至少包括5G媒体流式传输播放器和用于下行链路流式传输的媒体会话处理器,并且该UE功能可通过明确定义的接口/API进行访问。5GMSu客户端可指可通过明确定义的接口/API进行访问的5GMSu服务的发起者。5GMSu媒体流播放器可指UE功能,该UE功能能够将流媒体内容上行链路递送到5GMS应用程序提供者的应用程序服务器(AS)功能,并且可以与用于媒体采集和后续流式传输的5GMSu感知应用程序以及用于媒体会话控制的媒体会话处理器进行交互。
动态策略可指在媒体会话期间用于上行链路或下行链路应用程序流程的动态策略与计费控制(PCC,charging control)规则。排出会话(Egest Session)可指从5GMS AS到5GMSu应用程序提供者的上行链路媒体流式传输会话。摄取会话(Ingest Session)可指将媒体内容上载到5GMSd AS的会话。策略模板可指(半静态)策略或控制功能(PCF,Policy orControl Function)/网络开放功能(NEF,Network Exposure Function)API参数的集合,这些参数是5GMS应用程序提供者所特有的,也是由此产生的PCC规则。策略模板ID可标识期望的策略模板,其被5GMSd应用程序功能(AF,Application Function)使用以向5G***选择适当的PCF/NEF API,使得PCF可以编译期望的PCC规则。媒体播放器条目可指文档或指向定义媒体展示的文档的指针(例如,DASH的媒体呈现描述(MPD,media presentationdescription)或视频剪辑文件的统一资源***(URL,uniform resource locator))。媒体流播放器条目可指定义上行链路媒体流式传输会话的进入点的指针(例如,以URL的形式)。展示条目(presentation entry)可指文档或指向定义应用程序展示的文档的指针,如HTML5文档。
供应会话可指由5GMSd应用程序提供者在接口(M1d)处提供的数据结构,该5GMSd应用程序提供者配置了与一组5GMSd感知应用程序相关的5GMSd特征。5GMSd媒体播放器可指UE功能,能够基于媒体播放条目来对媒体展示进行重放和渲染,并且向5GMSd感知应用程序展示一些基本控制,如播放、暂停、寻找、停止。服务器访问信息可指激活流式传输会话的接收所需的一组参数和地址(包括5GMSd AF地址和5GMSd AS地址)。服务和内容发现可指由5GMSd应用程序提供者向5GMS感知应用程序提供的功能和过程,其使得终端用户能够发现可用的流式传输服务和内容提供,并选择特定的服务或内容项来进行访问。服务通告可指在5GMS感知应用程序和5GMS应用程序提供者之间进行的过程,使得5GMS感知应用程序能够直接或以引用该信息的形式获得5GMS服务访问信息。
第三方播放器可指应用程序的一部分,其使用API来执行所选择的5GMSd功能以对媒体内容进行回放。第三方上行链路流播器可指应用程序的一部分,其使用API来执行所选择的5GMSu功能以对媒体内容进行采集和流式传输。
图3为根据实施例的用于媒体上行链路流式传输的媒体架构300的图。5GMSu应用程序提供者301可使用5GMSu进行上行链路流式传输服务。5GMSu应用程序提供者301可在UE303上提供5GMSu感知应用程序302,以通过使用5GMSu中定义的接口和API来利用5GMSu客户端304和网络功能。5GMSu AS可为专用于5G媒体上行链路流式传输的AS。5GMSu客户端304可为专用于5G媒体上行链路流式传输的UE 303内部功能。
5GMSu AF 306和5GMSu AS 305可为数据网络(DN)307功能。可信DN中的功能可被运营商的网络所信任。因此,可信DN中的AF可直接与所有5G核心功能进行通信。外部DN中的功能仅可使用链路320经由NEF 308,与5G核心功能进行通信。
媒体架构300可连接用于5G媒体上行链路流式传输的UE 303内部功能和相关网络功能。因此,媒体架构300可包括多个功能。例如,UE 303上的5GMSu客户端304为可通过接口/API进行访问的5GMSu服务的发起者。5GMSu客户端304可包括两个子功能,媒体会话处理器309和媒体流播放器310。媒体会话处理器309可与5GMSu AF 306进行通信以建立、控制和支持媒体会话的递送。媒体会话处理器309可展示可以由5GMSu感知应用程序302使用的API。媒体流播放器310可与5GMSu AS 305进行通信以对媒体内容进行流式传输、向5GMSu感知应用程序302提供用于进行媒体采集和流式传输的服务、以及向媒体会话处理器309提供用于进行媒体会话控制的服务。5GMSu感知应用程序302可通过实现外部应用程序或内容服务提供者专用逻辑以及启用媒体会话的建立,来控制5GMSu客户端304。例如,5GMSu AS 305可托管5G媒体功能,并且可被实现为内容分发网络(CDN,content delivery network)。5GMSu应用程序提供者301可以为外部应用程序或内容特定媒体功能,例如媒体存储、消费、代码转换和重新分布,其使用5GMSu来从5GMSu感知应用程序302对媒体进行流式传输。5GMSu AF 306可向UE 303上的媒体会话处理器309和/或5GMSu应用程序提供者301提供各种控制功能。5GMSu AF 306可中继或发起不同的PCF 311处理的请求或与其它网络功能进行交互。
媒体架构300可包括多个不同的接口。例如,链路321可涉及M1u,M1u可为由5GMSuAF 306展示的5GMSu供应API,以提供媒体架构300的用法并获得反馈。链路322可与M2u相关,M2u可为由5GMSu AS 305展示的5GMSu发布API,并且当可信DN(如DN 307)中的5GMSu AS305被选择以接收用于流式传输服务的内容时,使用M2u。链路323可与M3u相关,M3u可为内部API,该内部API用于在可信DN(如DN 307)中交换5GMSu AS 305上的内容托管信息。链路324可与M4u相关,M4u可为由5GMSu AS 323向媒体流播放器310展示的媒体上行链路流式传输API,以对媒体内容进行流式传输。链路325可与M5u相关,M5u可为由5GMSu AF 305向媒体会话处理器展示的媒体会话处理API,以用于媒体会话处理、控制和辅助,所述媒体会话处理、控制和辅助还包括适当的安全机制,例如授权和认证。链路326可与M6u相关,M6u可为由媒体会话处理器309向5GMSu感知应用程序302展示的UE 303媒体会话处理API,以利用5GMSu功能。链路327可与M7u相关,M7u可为由媒体流播放器310向5GMSu感知应用程序302和媒体会话处理器309展示的UE媒体流播放器API,以利用媒体流播放器310。链路328可与M8u相关,M8u可为用于在5GMSu感知应用程序302和5GMSu应用程序提供者301之间进行信息交换的应用程序API,例如向5GMSu感知应用程序302提供服务访问信息。UE 303也可以独立的方式被实施,使得接口M6u 326和接口M7u 327不会被暴露。
图4为根据实施例的用于媒体下行链路流式传输的媒体架构400的图。5GMSd应用程序提供者401可使用5GMSd进行下行链路流式传输服务。5GMSd应用程序提供者401可在UE403上提供5GMSd感知应用程序402,以通过使用5GMSd中定义的接口和API来利用5GMSd客户端404和网络功能。5GMSd AS可为专用于5G媒体下行链路流式传输的AS。5GMSd客户端404可为专用于5G媒体下行链路流式传输的UE 403内部功能。
5GMSd AF 406和5GMSd AS 405可为DN 407功能。可信DN中的功能可被运营商的网络所信任。因此,可信DN中的AF可直接与所有5G核心功能进行通信。外部DN中的功能仅可使用链路420经由NEF 408,与5G核心功能进行通信。
媒体架构400可连接用于5G媒体下行链路流式传输的UE 403内部功能和相关网络功能。因此,媒体架构400可包括多个功能。例如,UE 403上的5GMSd客户端404为可通过接口/API进行访问的5GMSd服务的接收机。5GMSd客户端404可包括两个子功能,媒体会话处理器409和媒体播放器410。媒体会话处理器409可与5GMSd AF 406进行通信以建立、控制和支持媒体会话的递送。媒体会话处理器409可展示由5GMSd感知应用程序402使用的API。媒体播放器410可与5GMSd AS 405进行通信,以对媒体内容进行流式传输、向5GMSd感知应用程序402提供用于进行媒体回放的服务、以及向媒体会话处理器409提供用于进行媒体会话控制的服务。5GMSd感知应用程序402可通过实现外部应用程序或内容服务提供者专用逻辑以及启用媒体会话的建立,来控制5GMSd客户端404。5GMSd AS 405可托管5G媒体功能。5GMSd应用程序提供者401可为外部应用程序或内容特定媒体功能,例如媒体创建、编码和格式化,其使用5GMSd将媒体流式传输到5GMSd感知应用程序402。5GMSd AF 406可向UE 403上的媒体会话处理器409和/或5GMSd应用程序提供者401提供各种控制功能。5GMSd AF 406可中继或发起不同的PCF 411处理的请求或与其它网络功能进行交互。
媒体架构400可包括多个不同的接口。例如,链路421可与M1d相关,M1d可为由5GMSd AF 406展示的5GMSd供应API,以提供媒体架构400的使用并获得反馈。链路422可与M2d相关,M2d可为由5GMSd AS 405展示的5GMSd排出API,并且当选择可信DN(如DN 407)中的5GMSd AS 405来接收用于流式传输服务的内容时,使用M2d。链路423可与M3d相关,M3d可为内部API,其用于在可信DN(如DN 407)中交换5GMSd AS 405上的内容托管信息。链路424可与M4d相关,M4d可为由5GMSd AS 423向媒体播放器410展示的媒体下行链路流式传输API,以对媒体内容进行流式传输。链路425可与M5d相关,M5d可为由5GMSd AF 405向媒体会话处理器展示的媒体会话处理API,用于媒体会话处理、控制和辅助,所述媒体会话处理、控制和辅助还包括适当的安全机制,例如授权和认证。链路426可与M6d相关,M6d可为由媒体会话处理器409向5GMSd感知应用程序402展示的UE 403媒体会话处理API,以利用5GMSd功能。链路427可与M7d相关,M7d可为由媒体播放器410向5GMSd感知应用程序402和媒体会话处理器409展示的UE媒体播放器API,以利用媒体播放器410。链路428可与M8d相关,M8d可为应用程序API,其用于在5GMSd感知应用程序402和5GMSd应用程序提供者401之间进行信息交换,例如向5GMSd感知应用程序402提供服务访问信息。
图5为根据实施例的独立增强现实(AR,Augmented Reality)(STAR)第5代媒体流式传输下行链路(5GMSd,5th Generation media streaming downlink)下载架构500的图。AR STAR 5GMSd架构500也可应用于混合现实(MR,Mixed Reality)。架构500包括5G STARUE 502、5G***504(即,5G服务器和计算)和AR/MR应用程序提供者506。5G STAR UE 502包括AR运行时间508、AR场景管理器510、媒体访问功能512和AR/MR应用程序514。AR运行时间508包括扩展现实(XR,extended reality)计算模块516、姿势校正模块518和声场映射模块520。AR场景管理器510包括场景图处理器(SGH,scene graph handler)521、合成器522、沉浸式视觉呈现器523和沉浸式音频呈现器524。媒体访问功能512包括媒体会话处理器526和媒体客户端528。媒体客户端528包括二维(2D)编解码器530、沉浸式媒体解码器532、场景描述递送模块534、内容递送模块536和XR空间描述递送模块538。5G STAR UE 502包括5G***(Uu)540,其与5G***504的5G节点(gNb)542彼此通信。
5G***504包括媒体AF 544和媒体AS 546。AR/MR应用程序提供者506包括AR功能548和AR场景模块550。媒体客户端528通过M4接口582与媒体AS 546进行通信。媒体会话处理器526通过M5接口586与媒体AF 544进行通信。AR/MR应用程序514通过M8接口588与AR/MR应用程序提供者506进行通信。AR/MR应用程序514可从AR运行时间508接收用户输入591和AR运行时间API 590的数据。AR运行时间508可从相机592和传感器593接收数据,并且可将数据输出到显示器594和扬声器595。
本公开的实施例提供了包括两个循环的呼叫流程:流式传输场景和场景更新为外部循环,每个场景的流式传输媒体对象作为内部循环。
图6A、图6B和图6C为根据实施例的基于STAR的5G下行链路流式传输的操作流程的图。执行图6的操作流程的***可包括AR/MR应用程序606、AR运行时间608、AR/MR场景管理器610、媒体客户端612和媒体会话处理器614,其可为STAR UE 602的一部分(此外,媒体客户端612和媒体会话处理器614可为媒体访问功能的一部分)。该***还包括5GMSd AF 616和5GMSd AS 618。该***还可包括AR/MR应用程序提供者620。该应用程序提供者620可指场景服务器。
在操作630中,场景内容被5GMSd AS 618摄取。在操作632中,服务通告和内容递送被AR/MR应用程序606触发。服务访问信息包括媒体客户端条目,或者通过M8d接口提供对服务访问信息的引用。在操作634中,选择媒体内容/场景。在操作636中,根据需要获取或更新服务访问信息(即,操作636为可选的)。在操作638中,AR/MR应用程序606利用入口点(即,完整场景描述)URL,来对场景管理器610进行初始化。在操作640中,媒体客户端612建立用于接收入口点的传输会话。
在操作641至操作672中,建立场景会话循环,其中该***请求并渲染场景和场景更新。
在操作641中,媒体客户端612请求并接收入口点或对场景描述的更新。在操作642中,处理入口点。在操作644中,AR/MR场景管理器610请求从AR运行时间608创建新的AR/MR会话。在操作646中,AR运行时间608创建新的AR/MR会话。在操作648中,创建流式传输会话。媒体客户端612和/或AR/MR场景管理器610可向媒体会话处理器614提供必要的服务质量(QoS,quality of service)信息。在操作650中,配置一个或多个流式传输会话。在一些实施例中,媒体会话处理器614可与5GMSd AF 616共享信息,该信息包括期望的QoS信息。基于AR/MR应用程序提供者620的现有供应,5GMSd AF 616可请求对协议数据单元(PDU,protocol data unit)会话进行QoS修改。
在操作652至操作656中,为每个媒体流对象建立媒体会话。在操作652中,建立用于递送清单的传输会话。对于所需的媒体内容,媒体客户端612建立传输会话以获取递送清单信息。在操作654中,媒体客户端612从5GMSd AS 618请求并接收递送清单。在操作656中,媒体客户端612处理该递送清单。例如,媒体客户端612确定获取媒体所需的传输会话的数量。媒体客户端612被配置为使用递送清单信息来对每个媒体流的媒体管线进行初始化。
在操作658中,AR/MR场景管理器610和媒体客户端612配置媒体管线的渲染和递送。在操作660中,媒体客户端612建立传输会话以获取媒体内容。
在操作662至操作672中,在场景会话循环(即,外部会话循环)内建立媒体会话循环(即,内部会话循环)。在外部循环建立会话并接收对媒体内容的更新时,媒体会话循环可运行渲染和展示媒体内容。当内部会话循环正在渲染内容时,更新可以从外部会话循环被发送到内部会话循环。
在操作662中,最新姿势信息(例如,更新的场景或内容)由AR/MR场景管理器610获取并与媒体客户端612进行共享。在操作664中,媒体客户端612根据经处理的递送清单,请求沉浸式媒体数据。媒体客户端612可考虑姿势信息(例如,视口相关流式传输)。在操作666中,媒体客户端612接收沉浸式数据并相应地触发一个或多个媒体渲染管线,包括将AR内容注册到真实世界。在操作668中,媒体客户端612对媒体数据进行解码和处理。对于加密的媒体数据,媒体客户端612还可进行解密。在操作670中,媒体客户端612将媒体数据,传递到AR/MR场景管理器610。在操作672中,AR/MR场景管理器610渲染媒体并将其传递到AR运行时间608。AR运行时间608可进一步进行处理,例如将AR内容注册到现实世界、姿势校正等。
可在流式传输到STAR设备期间,动态更新AR/MR场景,并且因此,可以在流式传输会话期间完全改变场景。STAR设备的场景更新是通过双循环呼叫流程来实现的,其中,在内部循环中,场景的媒体对象被流式传输,而在外部循环中,场景被更新或被改变。通过本文公开的实施例,每当场景被改变和更新时,内部循环被中断,并且先前的媒体对象被与新场景相关的新媒体对象所替换,并且因此,对于在新场景中不再相关的媒体对象,不会浪费流传输带宽。
图7为根据实施例的基于STAR的5G下行链路流式传输的方法的流程图。在操作702中,***选择媒体内容,该媒体内容包括场景。在操作704中,***在外部会话循环中,创建用于对媒体内容进行流式传输的AR/MR会话。在操作706中,***在外部会话循环内的内部会话循环中,渲染媒体内容。在操作708中,在该内部会话循环正在渲染媒体内容的同时,***在该外部会话循环中,通过向该内部会话循环提供新场景,来用该新场景更新该场景。
尽管图7示出了过程700的示例块,在一些实施方式中,过程700可包括额外的块、较少的块、不同的块或与图7所示的块排列方式不同的块。另外地或可选地,过程700的两个或更多个块可被并行地执行。
此外,所提出的方法可通过对电路(例如,一个或多个处理器或一个或多个集成电路)进行处理来实现。在一个示例中,一个或多个处理器执行存储在非易失性计算机可读介质中的程序以执行所提出的方法中的一个或多个。
上述技术可使用计算机可读指令被实现为计算机软件,且被物理地存储在一个或多个计算机可读介质中。
本公开的实施例可单独使用或以任何顺序组合使用。此外,各实施例(及其方法)可通过对电路(例如,一个或多个处理器或一个或多个集成电路)进行处理来实现。在一个示例中,一个或多个处理器执行存储在非易失性计算机可读介质中的程序。
上述公开内容提供了说明和描述,但并不旨在穷举或将实施方式限于公开的精确形式。根据上述公开内容,修改和变化是可能的,或者可以从实施方式的实践中获得。
如本文所用,术语组件旨在被广泛地解释为硬件、固件或硬件和软件的组合。
即使在权利要求中叙述和/或在说明书中公开了特征的组合,但这些组合并不旨在限制可能的实施方式的公开。实际上,这些特征中的许多可以以未在权利要求中具体叙述和/或在说明书中公开的方式组合。虽然下面列出的每个从属权利要求可以直接依赖于仅一个权利要求,但是可能的实施方式的公开包括与权利要求集中的所有其他权利要求结合的每个从属权利要求。
本文使用的元件、动作或指令不应被解释为关键的或必要的,除非这样明确地描述。此外,如本文所用,冠词“一个(a)”和“一种(an)”旨在包括一个或多个项目,并且可与“一个或多个”互换使用。此外,如本文所用,术语“组”旨在包括一个或多个项目(例如,相关项目、不相关项目、相关和不相关项目的组合等),并且可与“一个或多个”互换使用。当意指仅一个项目时,使用术语“一个(one)”或类似的语言。此外,如本文所用,术语“具有(has/have/having)”等旨在被理解为开放式术语。此外,短语“基于”旨在表示“至少部分地基于”,除非另有明确说明。
Claims (20)
1.一种方法,其特征在于,包括:
选择媒体内容,所述媒体内容包括场景;
在外部会话循环中创建对所述媒体内容进行流式传输的增强现实AR/混合现实MR会话;
在所述外部会话循环内的内部会话循环中渲染所述媒体内容;以及
在所述内部会话循环正在渲染所述媒体内容的同时,在所述外部会话循环中通过向所述内部会话循环提供新场景,来用所述新场景更新所述场景。
2.根据权利要求1所述的方法,其特征在于,更新所述场景包括:将更新的姿势信息发送到所述内部会话循环。
3.根据权利要求2所述的方法,其特征在于,更新所述场景进一步包括:在所述内部会话循环中,基于所述更新的姿势信息请求沉浸式媒体。
4.根据权利要求3所述的方法,其特征在于,更新所述场景进一步包括:
在所述内部会话循环中,接收所述沉浸式媒体;以及
在所述内部会话循环中,将所述沉浸式媒体的AR内容注册到真实世界。
5.根据权利要求4所述的方法,其特征在于,更新所述场景进一步包括:在所述内部会话循环中对所述沉浸式媒体进行解码和处理。
6.根据权利要求1所述的方法,其特征在于,进一步包括:在所述外部会话循环中,基于所述媒体内容确定获取媒体所需的传输会话的数量。
7.根据权利要求6所述的方法,其特征在于,所述所需的传输会话的数量是基于递送清单信息来确定的。
8.一种设备,其特征在于,包括:
至少一个存储器,被配置为存储程序代码;以及
至少一个处理器,被配置为读取所述程序代码并按照所述程序代码的指示进行操作,所述程序代码包括:
第一选择代码,被配置为使所述至少一个处理器选择媒体内容,所述媒体内容包括场景;
第一创建代码,被配置为使所述至少一个处理器在外部会话循环中创建对所述媒体内容进行流式传输的增强现实AR/混合现实MR会话;
第一渲染代码,被配置为使所述至少一个处理器在所述外部会话循环内的内部会话循环中渲染所述媒体内容;以及
第一更新代码,被配置为使所述至少一个处理器在所述内部会话循环正在渲染所述媒体内容的同时,在所述外部会话循环中通过向所述内部会话循环提供新场景,来用所述新场景更新所述场景。
9.根据权利要求8所述的设备,其特征在于,所述第一更新代码进一步使所述至少一个处理器将更新的姿势信息发送到所述内部会话循环。
10.根据权利要求9所述的设备,其特征在于,所述第一更新代码进一步使所述至少一个处理器在所述内部会话循环中,基于所述更新的姿势信息请求沉浸式媒体。
11.根据权利要求10所述的设备,其特征在于,所述第一更新代码进一步使所述至少一个处理器:
在所述内部会话循环中,接收所述沉浸式媒体;以及
在所述内部会话循环中,将所述沉浸式媒体的AR内容注册到真实世界。
12.根据权利要求11所述的设备,其特征在于,所述第一更新代码进一步使所述至少一个处理器在所述内部会话循环中对所述沉浸式媒体进行解码和处理。
13.根据权利要求8所述的设备,其特征在于,进一步包括第一确定代码,所述第一确定代码被配置为使所述至少一个处理器在所述外部会话循环中,基于所述媒体内容确定获取媒体所需的传输会话的数量。
14.根据权利要求13所述的设备,其特征在于,所述所需的传输会话的数量是基于递送清单信息来确定的。
15.一种存储指令的非易失性计算机可读介质,其特征在于,所述指令包括:一个或多个指令,所述一个或多个指令在由设备的一个或多个处理器执行时使所述一个或多个处理器:
选择媒体内容,所述媒体内容包括场景;
在外部会话循环中创建对所述媒体内容进行流式传输的增强现实AR/混合现实MR会话;
在所述外部会话循环内的内部会话循环中渲染所述媒体内容;以及
在所述内部会话循环正在渲染所述媒体内容的同时,在所述外部会话循环中通过向所述内部会话循环提供新场景,来用所述新场景更新所述场景。
16.根据权利要求15所述的非易失性计算机可读介质,其特征在于,所述指令在由所述一个或多个处理器执行时进一步使所述一个或多个处理器通过将更新的姿势信息发送到所述内部会话循环来更新所述场景。
17.根据权利要求16所述的非易失性计算机可读介质,其特征在于,所述指令在由所述一个或多个处理器执行时进一步使所述一个或多个处理器通过在所述内部会话循环中,基于所述更新的姿势信息请求沉浸式媒体来更新所述场景。
18.根据权利要求17所述的非易失性计算机可读介质,其特征在于,所述指令在由所述一个或多个处理器执行时进一步使所述一个或多个处理器通过以下方式来更新所述场景:
在所述内部会话循环中,接收所述沉浸式媒体;以及
在所述内部会话循环中,将所述沉浸式媒体的AR内容注册到真实世界。
19.根据权利要求18所述的非易失性计算机可读介质,其特征在于,所述指令在由所述一个或多个处理器执行时进一步使所述一个或多个处理器通过在所述内部会话循环中,对所述沉浸式媒体进行解码和处理来更新所述场景。
20.根据权利要求15所述的非易失性计算机可读介质,其特征在于,所述指令在由所述一个或多个处理器执行时进一步使所述一个或多个处理器在所述外部会话循环中,基于所述媒体内容确定获取媒体所需的传输会话的数量。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202163275358P | 2021-11-03 | 2021-11-03 | |
US63/275,358 | 2021-11-03 | ||
US17/725,985 | 2022-04-21 | ||
US17/725,985 US20230135220A1 (en) | 2021-11-03 | 2022-04-21 | Methods for providing light 5g ar/mr devices by running ar/mr processing on 5g edge servers/cloud including simplified dynamic scene updates |
PCT/US2022/028690 WO2023080926A1 (en) | 2021-11-03 | 2022-05-11 | Methods for providing light 5g ar/mr devices by running ar/mr processing on 5g edge servers |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116888650A true CN116888650A (zh) | 2023-10-13 |
Family
ID=86145401
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280007867.2A Pending CN116601546A (zh) | 2021-11-03 | 2022-03-29 | 将动态5g ar/mr体验流式传输到具有可更新场景的5g设备的方法 |
CN202280015977.3A Pending CN116888650A (zh) | 2021-11-03 | 2022-05-11 | 将动态5g ar/mr体验流式传输到具有可更新场景的5g设备的方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280007867.2A Pending CN116601546A (zh) | 2021-11-03 | 2022-03-29 | 将动态5g ar/mr体验流式传输到具有可更新场景的5g设备的方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20230135220A1 (zh) |
JP (2) | JP2024508487A (zh) |
KR (2) | KR20230118150A (zh) |
CN (2) | CN116601546A (zh) |
WO (2) | WO2023080920A1 (zh) |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018027983A1 (zh) * | 2016-08-12 | 2018-02-15 | 华为技术有限公司 | 一种数据传输方法及设备 |
US10063612B2 (en) * | 2016-09-30 | 2018-08-28 | Amazon Technologies, Inc. | Request-based encoding for streaming content portions |
US20180285129A1 (en) * | 2017-04-04 | 2018-10-04 | General Dynamics Mission Systems, Inc. | Systems and methods for providing computer interface interaction in a virtualized environment |
EP3619688A1 (en) * | 2017-05-01 | 2020-03-11 | Magic Leap, Inc. | Matching content to a spatial 3d environment |
US11026122B2 (en) * | 2019-08-15 | 2021-06-01 | At & T Intellectual Property I, L.P. | Radio access network intelligent controller-based dynamic time division duplex communication in a radio communication network |
EP4046139A4 (en) * | 2019-10-15 | 2023-11-22 | Magic Leap, Inc. | EXTENDED REALITY SYSTEM WITH LOCATION SERVICE |
US11496532B2 (en) * | 2020-04-10 | 2022-11-08 | Samsung Electronics Co., Ltd. | Offering media services through network edge |
EP4189649A4 (en) * | 2020-08-27 | 2024-01-10 | Samsung Electronics Co., Ltd. | METHOD AND APPARATUS FOR PERFORMING ANCHOR-BASED RENDERING FOR AUGMENTED REALITY MULTIMEDIA OBJECTS |
KR20230085767A (ko) * | 2021-12-07 | 2023-06-14 | 삼성전자주식회사 | 성능 기반의 스플릿 컴퓨팅 제공 방법 및 장치 |
US20230215075A1 (en) * | 2022-01-01 | 2023-07-06 | Samsung Electronics Co., Ltd. | Deferred rendering on extended reality (xr) devices |
-
2022
- 2022-03-29 CN CN202280007867.2A patent/CN116601546A/zh active Pending
- 2022-03-29 JP JP2023552288A patent/JP2024508487A/ja active Pending
- 2022-03-29 KR KR1020237022961A patent/KR20230118150A/ko active Search and Examination
- 2022-03-29 WO PCT/US2022/022269 patent/WO2023080920A1/en active Application Filing
- 2022-04-21 US US17/725,985 patent/US20230135220A1/en active Pending
- 2022-05-11 KR KR1020237021669A patent/KR20230109755A/ko active Search and Examination
- 2022-05-11 WO PCT/US2022/028690 patent/WO2023080926A1/en active Application Filing
- 2022-05-11 CN CN202280015977.3A patent/CN116888650A/zh active Pending
- 2022-05-11 JP JP2023552350A patent/JP2024508491A/ja active Pending
Also Published As
Publication number | Publication date |
---|---|
JP2024508487A (ja) | 2024-02-27 |
US20230135220A1 (en) | 2023-05-04 |
CN116601546A (zh) | 2023-08-15 |
KR20230118150A (ko) | 2023-08-10 |
JP2024508491A (ja) | 2024-02-27 |
WO2023080920A1 (en) | 2023-05-11 |
KR20230109755A (ko) | 2023-07-20 |
US20230139635A1 (en) | 2023-05-04 |
WO2023080926A1 (en) | 2023-05-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11889506B2 (en) | Method and apparatus for configuring 5G application servers in connected uplink-to-downlink streaming | |
US20230050360A1 (en) | Procedures for providing ar/mr applications to 5g devices by running ar/mr processing on 5g edge servers/cloud including dynamic scene updates | |
US20230138606A1 (en) | Method and apparatus for delivering 5g ar/mr cognitive experience to 5g devices | |
CN116250221A (zh) | 用于5g网络中上行链路流式传输的贡献报告的方法和装置 | |
KR20220147664A (ko) | 5g 네트워크에서의 적시 콘텐츠 준비를 위한 방법들 및 장치 | |
CN115516439A (zh) | 5g网络中应用提供商的媒体流式传输内容准备的方法 | |
US20230135220A1 (en) | Methods for providing light 5g ar/mr devices by running ar/mr processing on 5g edge servers/cloud including simplified dynamic scene updates | |
US12045940B2 (en) | Method for streaming dynamic 5G AR/MR experience to 5G devices with updatable scenes | |
JP7512421B2 (ja) | 5gアップリンク・ストリーミングにおけるエジェスト・コンフィギュレーション及びプロトコルを定める方法及び装置 | |
US11799937B2 (en) | CMAF content preparation template using NBMP workflow description document format in 5G networks | |
US12052693B2 (en) | Method and apparatus for defining egest configuration and protocols in 5G uplink streaming | |
US20220369073A1 (en) | Methods for implementing various uplink streaming deployment scenarios in 5g networks | |
CN115715461A (zh) | 5g网络中用于上行链路和下行链路流式传输的媒体服务入口的发现方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40098254 Country of ref document: HK |