CN110392071A - 流媒体资源的上传、下载方法、分发***及流媒体服务器 - Google Patents

流媒体资源的上传、下载方法、分发***及流媒体服务器 Download PDF

Info

Publication number
CN110392071A
CN110392071A CN201810349757.XA CN201810349757A CN110392071A CN 110392071 A CN110392071 A CN 110392071A CN 201810349757 A CN201810349757 A CN 201810349757A CN 110392071 A CN110392071 A CN 110392071A
Authority
CN
China
Prior art keywords
streaming media
media resource
target
stream
resource
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810349757.XA
Other languages
English (en)
Other versions
CN110392071B (zh
Inventor
邹爽
吕士表
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wangsu Science and Technology Co Ltd
Original Assignee
Wangsu Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wangsu Science and Technology Co Ltd filed Critical Wangsu Science and Technology Co Ltd
Priority to CN201810349757.XA priority Critical patent/CN110392071B/zh
Priority to PCT/CN2018/086181 priority patent/WO2019200631A1/zh
Priority to US16/098,574 priority patent/US11316910B2/en
Priority to EP18821981.0A priority patent/EP3598716A4/en
Publication of CN110392071A publication Critical patent/CN110392071A/zh
Application granted granted Critical
Publication of CN110392071B publication Critical patent/CN110392071B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/141—Setup of application sessions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种流媒体资源的上传、下载方法、分发***及流媒体服务器，其中，所述上传方法包括：接收推流客户端发来的指向目标流媒体资源的上传请求，所述上传请求中包括候选流媒体信息；基于所述候选流媒体信息生成应答流媒体信息，并生成用于访问所述目标流媒体资源的访问地址；向所述推流客户端反馈所述应答流媒体信息以及所述访问地址；接收所述推流客户端上传的经过处理的目标流媒体资源，并将所述经过处理的目标流媒体资源和所述应答流媒体信息关联存储。本申请提供的技术方案，能够在降低网络带宽需求的同时，提高通信的时效性。

Description

流媒体资源的上传、下载方法、分发***及流媒体服务器
技术领域
本发明涉及互联网技术领域，特别涉及一种流媒体资源的上传、下载方法、分发***及流媒体服务器。
背景技术
WebRTC(Web Real-Time Communication，源自网页实时通信)协议由于具有跨平台、高实时性的特点，被广泛用于基于网络的视频会议、视频通话等应用场景。
请参阅图1，标准的WebRTC协议中，通常可以在用户A和用户B之间建立点对点的通信链路。具体的过程可以包括以下多个步骤：
步骤1：用户A向P2P服务器发起查询，获得自己的公网地址；
步骤2：用户A根据自身的硬件采集到的流媒体信息，生成Offer SDP，通过信令服务器中转，将Offer SDP发送给用户B；
步骤3：用户B接受并处理Offer SDP，同时根据自身的硬件采集到的流媒体信息，生成Answer SDP，通过信令服务器中转，将Answer SDP发送给用户A；
步骤4：用户B向P2P服务器发起查询，获得自己的公网地址。
步骤5：用户A根据自身的公网地址生成ICE Candidate，通过信令服务器中转，发送给用户B。
步骤6：用户B根据自身的公网地址生成ICE Candidate，通过信令服务器中转，发送给用户A。
步骤7：用户A和用户B双方根据交换的SDP和ICE Candidate，从而可以发送自身的流媒体给对方，同时接收对方发送来的流媒体。
对于多人视频会议的场景，会议参与者需要和会议中所有的其他用户执行一次上述的标准流程，从而可以与其他用户建立通信连接。在与其他用户建立通信连接之后，当其中一个会议参与者需要共享一个流媒体资源时，需要分别向其他各个用户均发送一次该流媒体资源。举例来说，当前共有N个用户参与视频会议，这样，其中一个用户需要执行N-1次上述的7个步骤，从而与其他用户建立通信连接。然后，当该用户需要共享一个流媒体资源时，需要将该流媒体资源发送N-1次。由此可见，按照当前的WebRTC标准流程，用户与用户之间需要花费较长时间建立彼此的连接，这样会影响通信的时效性。此外，每次需要共享流媒体资源时，用户与用户之间重复发送的数据量过于庞大，导致网络带宽需求较高。
发明内容
本申请的目的在于提供一种流媒体资源的上传、下载方法、分发***及流媒体服务器，能够在降低网络带宽需求的同时，提高通信的时效性。
为实现上述目的，本申请一方面提供一种流媒体资源的上传方法，所述方法包括：接收推流客户端发来的指向目标流媒体资源的上传请求，所述上传请求中包括所述推流客户端支持的候选流媒体信息；基于所述候选流媒体信息，生成应答流媒体信息，并生成用于访问所述目标流媒体资源的访问地址；向所述推流客户端反馈所述应答流媒体信息以及所述访问地址，以使得所述推流客户端根据所述应答流媒体信息对所述目标流媒体资源进行处理，并使得所述推流客户端按照所述访问地址上传经过处理的目标流媒体资源；接收所述推流客户端上传的所述经过处理的目标流媒体资源，并将所述经过处理的目标流媒体资源和所述应答流媒体信息关联存储。
为实现上述目的，本申请另一方面还提供一种流媒体服务器，所述流媒体服务器包括存储器和处理器，所述存储器用于存储计算机程序，所述计算机程序被所述处理器执行时，实现上述的方法。
为实现上述目的，本申请另一方面还提供一种流媒体资源的下载方法，所述方法包括：接收拉流客户端发来的指向目标流媒体资源的获取请求；判断本地是否存在所述目标流媒体资源，若存在，生成用于访问所述目标流媒体资源的访问地址；向所述拉流客户端反馈所述访问地址以及所述目标流媒体资源关联的目标流媒体信息，以使得所述拉流客户端基于所述访问地址和所述目标流媒体信息获取所述目标流媒体资源。
为实现上述目的，本申请另一方面还提供一种流媒体服务器，所述流媒体服务器包括存储器和处理器，所述存储器用于存储计算机程序，所述计算机程序被所述处理器执行时，实现上述的方法。
为实现上述目的，本申请另一方面还提供一种流媒体资源的分发***，所述***包括推流客户端和流媒体服务器，其中：所述推流客户端，用于确定自身支持的候选流媒体信息，并向所述流媒体服务器发送指向目标流媒体资源的上传请求，所述上传请求中包括所述候选流媒体信息；接收所述流媒体服务器返回的响应报文，所述响应报文中包括所述流媒体服务器生成的应答流媒体信息和访问地址；根据所述应答流媒体信息对所述目标流媒体资源进行处理，并按照所述访问地址上传经过处理的目标流媒体资源；所述流媒体服务器，用于基于所述候选流媒体信息，生成应答流媒体信息，并生成用于访问所述目标流媒体资源的访问地址；向所述推流客户端反馈包含所述应答流媒体信息以及所述访问地址的响应报文；接收所述推流客户端上传的所述经过处理的目标流媒体资源，并将所述经过处理的目标流媒体资源和所述应答流媒体信息关联存储。
由上可见，本申请提供的技术方案中，可以将整个流程拆分为上传和下载两个部分，并且在这两个部分中将HTTP协议和WebRTC协议进行融合，从而简化通信连接的建立过程。此外，通过流媒体服务器进行流媒体资源的中转，用户无需将同一份流媒体资源在网络中重复发送多次，仅需要将流媒体资源上传至流媒体服务器，并从流媒体服务器中下载流媒体资源即可，能够极大地降低网络带宽的需求。具体地，在上传部分，推流客户端可以向流媒体服务器发送HTTP上传请求，流媒体服务器中的HTTP模块通过对HTTP上传请求进行分析，从而可以生成应答流媒体信息以及访问地址，并可以通过HTTP响应报文将应答流媒体信息以及访问地址提供给推流客户端。这样，推流客户端便可以与流媒体服务器建立WebRTC的通信连接，后续便可以根据访问地址上传流媒体资源，上传后的流媒体资源可以由流媒体服务器中的WebRTC模型进行处理。在下载部分，拉流客户端可以向流媒体服务器发送HTTP获取请求，流媒体服务器中的HTTP模块可以生成访问地址，并将该访问地址以及该HTTP获取请求指向的流媒体资源关联的流媒体信息包含于HTTP响应报文中反馈给拉流客户端，这样，拉流客户端便可以与流媒体服务器建立WebRTC的通信连接。后续，拉流客户端根据流媒体服务器提供的访问地址，从流媒体服务器中的WebRTC模块处下载流媒体资源。由此可见，本申请提供的技术方案，简化了WebRTC通信连接的建立过程，从而提高了通信的时效性。此外，通过流媒体服务器进行流媒体资源的中转，能够极大地降低网络带宽的需求。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是现有技术中标准WebRTC流程的交互示意图；
图2是本发明实施例中流媒体资源的上传方法流程图；
图3是本发明实施例中流媒体资源的上传方法交互示意图；
图4是本发明实施例中流媒体资源的下载方法流程图；
图5是本发明实施例中流媒体资源的下载方法交互示意图；
图6是本发明实施例中流媒体资源的分发***示意图；
图7是本发明实施例中计算机终端的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
实施例一
本实施方式提供一种流媒体资源的上传方法，所述方法可以应用于推流客户端和流媒体服务器之间。请参阅图2和图3，所述方法可以包括以下步骤。
S11：接收推流客户端发来的指向目标流媒体资源的上传请求，所述上传请求中包括所述推流客户端支持的候选流媒体信息。
在本实施方式中，可以通过流媒体服务器进行数据的保存和转发，相比于标准的WebRTC流程中，可以省去P2P服务器和信令服务器，从而简化了***架构。请参阅图6，所述流媒体服务器中可以包括一个用于处理HTTP请求的HTTP模块，以及一个用于进行流媒体资源传输的WebRTC模块。
在本实施方式中，对于每一路流媒体资源，均可以对其赋予一个全局的唯一标识，这样，通过该唯一标识，便可以表征对应的流媒体资源。在实际应用中，所述唯一标识可以是统一资源定位符(Uniform Resource Locator，URL)，在本实施方式中的统一资源定位符的命名规则可以与RTMP(Real Time Messaging Protocol，实时消息传输协议)、HTTP(HyperText Transfer Protocol，超文本传输协议)中流媒体资源的URL的命名规则一致。例如，某个流媒体资源的URL可以是http://www.a.com/live/test。
在本实施方式中，当推流客户端需要将目标流媒体资源上传至流媒体服务器时，首先可以基于自身的硬件采集到的流媒体信息，生成Offer SDP。在所述Offer SDP中，可以包括推流客户端支持的视频编码方式、音频编码方式、传输协议、安全协议等信息。例如，所述Offer SDP的一个简单示例可以如下：
Offer SDP{
现在要发送一路媒体流资源；
视频编码可以使用H264、VP8、VP9；
音频编码可以使用AAC、MP3、OPUS；
可以启用加密；
}
由此可见，在Offer SDP中可以例举出推流客户端所支持的多种视频编码方式以及多种音频编码方式。这样，生成的Offer SDP便可以是上述的候选流媒体信息。
在本实施方式中，推流客户端可以向该流媒体服务器发送指向所述目标流媒体资源的上传请求。该上传请求例如可以是HTTP POST请求。该请求的请求消息体便可以是上述的Offer SDP，这样，所述上传请求中便可以包含所述推流客户端支持的候选流媒体信息。此外，该上传请求的请求URL可以是所述目标流媒体资源的URL。这样，所述上传请求中可以包括用于表征所述目标流媒体资源的唯一标识。
S13：基于所述候选流媒体信息，生成应答流媒体信息，并生成用于访问所述目标流媒体资源的访问地址。
在本实施方式中，流媒体服务器接收到所述上传请求后，可以从中提取出包含的候选流媒体信息。然后，流媒体服务器可以根据自身的硬件条件，在所述候选流媒体信息中确定自身支持的目标视频编码方式和目标音频编码方式，并基于所述目标视频编码方式和目标音频编码方式构建应答流媒体信息。例如，流媒体服务器可以确定当前能够接收推流客户端准备上传的目标流媒体资源，并指定视频编码方式为H264，音频编码方式为OPUS，并且可以对目标流媒体资源进行加密。那么，流媒体服务器生成的应答流媒体信息AnswerSDP的一个示例可以如下所示：
Answer SDP{
可以接收你发送的媒体流；
视频编码请使用H264；
音频编码请使用OPUS；
请启用加密；
}
这样，流媒体服务器便可以生成针对所述目标流媒体资源的应答流媒体信息，该应答流媒体信息中可以指定音视频编码方式。
在本实施方式中，为了建立WebRTc，除了SDP信息之外，还需要ICEcandidate信息，所述ICE candidate信息可以基于公网IP地址来构建。通常而言，WebRTC通信连接的两端只要有一端具备固定的公网IP地址，便可以实现互相连通。而流媒体服务器一般都会具备一个固定的公网IP地址，因此，与流媒体服务器试图建立WebRTC通信连接的客户端，可以省去从P2P服务器中获取自身公网地址的步骤，生成ICE candidate的过程可以由流媒体服务器来完成。具体地，流媒体服务器可以获取自身的公网IP地址和端口地址，该公网IP地址可以存储于流媒体服务器内，无需从其它服务器中读取。然后，流媒体服务器可以将所述公网IP地址和所述端口地址的组合作为用于访问所述目标流媒体资源的访问地址。例如，所述公网IP地址可以为10.8.114.195，用于接收流媒体资源的端口地址可以为54225，那么最终生成的访问地址便可以为10.8.114.195：54225。该访问地址便可以作为上述的ICEcandidate。
这样，流媒体服务器便可以得到建立WebRTC通信连接所需的应答流媒体信息(Answer SDP)和访问地址(ICE candidate)。
S15：向所述推流客户端反馈所述应答流媒体信息以及所述访问地址，以使得所述推流客户端根据所述应答流媒体信息对所述目标流媒体资源进行处理，并使得所述推流客户端按照所述访问地址上传经过处理的目标流媒体资源。
在本实施方式中，流媒体服务器可以响应于接收到的上传请求，向所述推流客户端反馈响应报文。该响应报文可以是状态码为200的HTTP响应报文。在该响应报文的响应消息体中，可以包括所述应答流媒体信息以及所述访问地址。上述的接收上传请求、生成应答流媒体信息和访问地址以及返回响应报文的过程，均可以通过流媒体服务器中的HTTP模块完成。
这样，推流客户端在接收到Answer SDP和ICE candidate之后，便可以与流媒体服务器建立WebRTC通信连接。然后，推流客户端可以根据所述Answer SDP中限定的信息，对所述目标流媒体资源进行编码、加密等处理。完成处理之后，可以将经过处理的目标流媒体资源按照所述访问地址上传至流媒体服务器中。
S17：接收所述推流客户端上传的所述经过处理的目标流媒体资源，并将所述经过处理的目标流媒体资源和所述应答流媒体信息关联存储。
在本实施方式中，流媒体服务器接收到所述推流客户端上传的经过处理的目标流媒体资源之后，可以将所述经过处理的目标流媒体资源存储于指定路径下。然后，可以建立所述目标流媒体资源的唯一标识与所述应答流媒体信息的关联关系。这样，后续如果有拉流客户端请求获取该目标流媒体资源时，可以根据该目标流媒体资源的唯一标识，查询到关联的应答流媒体信息，该应答流媒体信息可以作为建立WebRTC通信连接的一个必要条件反馈给拉流客户端。
在本实施方式中，上述与推流客户端之间进行的目标流媒体资源的传输过程，可以在流媒体服务器的WebRTC模块中完成。
实施例二
本申请还提供一种流媒体资源的下载方法，所述方法可以应用于流媒体服务器与拉流客户端之间，请参阅图4和图5，所述方法可以包括以下步骤。
S21：接收拉流客户端发来的指向目标流媒体资源的获取请求。
在本实施方式中，当拉流客户端需要在本地播放其他用户共享的流媒体资源时，可以从流媒体服务器中获取该流媒体资源。具体地，拉流客户端可以向流媒体服务器发起指向目标流媒体资源的获取请求。该获取请求例如可以是HTTP GET请求。该请求的URL可以是所述目标流媒体资源的唯一标识，这样，所述获取请求中可以包括用于表征所述目标流媒体资源的唯一标识。
S23：判断本地是否存在所述目标流媒体资源，若存在，生成用于访问所述目标流媒体资源的访问地址。
在本实施方式中，流媒体服务器接收到所述获取请求后，可以根据其携带的唯一标识，判断本地是否存在拉流客户端想要下载的目标流媒体资源。具体地，流媒体服务器可以在本地查询是否存在具备所述唯一标识的流媒体资源，若存在，则可以判定本地存在所述目标流媒体资源；若不存在，则可以判定本地不存在所述目标流媒体资源。
在本实施方式中，若在流媒体服务器中不存在所述目标流媒体资源，那么流媒体服务器可以向所述拉流客户端反馈错误提示信息。若在流媒体服务器中存在所述目标流媒体资源，那么拉流客户端可以与流媒体服务器建立WebRTC通信连接，从而可以从流媒体服务器中下载该目标流媒体资源。
在本实施方式中，流媒体服务器具备固定的公网IP地址，因此可以获取自身的公网IP地址和端口地址，该公网IP地址可以存储于流媒体服务器内，无需从其它服务器中读取。然后，流媒体服务器可以将所述公网IP地址和所述端口地址的组合作为用于访问所述目标流媒体资源的访问地址。例如，所述公网IP地址可以为10.8.114.195，用于传输流媒体资源的端口地址可以为54225，那么最终生成的访问地址便可以为10.8.114.195：54225。该访问地址便可以作为建立WebRTC通信连接时所需的ICE candidate。
S25：向所述拉流客户端反馈所述访问地址以及所述目标流媒体资源关联的目标流媒体信息，以使得所述拉流客户端基于所述访问地址和所述目标流媒体信息获取所述目标流媒体资源
在本实施方式中，流媒体服务器中存储的流媒体资源可以是其它的推流客户端上传的，根据实施例一中的描述，推流客户端在上传流媒体资源之后，流媒体服务器可以将该流媒体资源以及对应的应答流媒体信息进行关联存储。这样，流媒体服务器可以根据目标流媒体资源的唯一标识，查询到与其关联的应答流媒体信息，并将该应答流媒体信息作为所述目标流媒体资源关联的目标流媒体信息。这样，流媒体服务器可以将所述目标流媒体信息作为Offer SDP提供给拉流客户端，并且流媒体服务器可以将步骤S23中生成的访问地址作为ICE candidate也一并提供给拉流客户端。具体地，流媒体服务器可以向所述拉流客户端返回响应报文，该响应报文例如可以是状态码为200的HTTP响应报文。所述响应报文的响应消息体中可以包括上述的访问地址(ICE candidate)以及所述目标流媒体资源关联的目标流媒体信息(Offer SDP)。拉流客户端在获取到流媒体服务器提供的Offer SDP和ICEcandidate之后，便可以与流媒体服务器建立WebRTC通信连接。
在本实施方式中，拉流客户端与流媒体服务器建立WebRTC通信连接之后，便可以基于所述访问地址和所述目标流媒体信息，从所述流媒体服务器中获取所述目标流媒体资源，后续还可以根据目标流媒体信息中限定的音视频编码方式以及加密方式，对目标流媒体信息进行解码和解密，从而可以在本地播放解码和加密后的目标流媒体资源。
在本实施方式中，上述的接收获取请求以及向拉流客户端返回响应报文的过程，均可以在流媒体服务器的HTTP模块中进行，上述与拉流客户端之间进行的目标流媒体资源的传输过程，可以在流媒体服务器的WebRTC模块中完成。
实施例三
本申请还提供一种流媒体服务器，所述流媒体服务器包括存储器和处理器，所述存储器中存储计算机程序，所述计算机程序被所述处理器执行时，可以实现上述实施例一中描述的各个方法步骤。
此外，本申请还提供一种流媒体服务器，所述流媒体服务器包括存储器和处理器，所述存储器中存储计算机程序，所述计算机程序被所述处理器执行时，可以实现上述实施例二中描述的各个方法步骤。
在本申请中，所述存储器可以包括用于存储信息的物理装置，通常是将信息数字化后再以利用电、磁或者光学等方法的媒体加以存储。本实施方式所述的存储器又可以包括：利用电能方式存储信息的装置，如RAM、ROM等；利用磁能方式存储信息的装置，如硬盘、软盘、磁带、磁芯存储器、磁泡存储器、U盘；利用光学方式存储信息的装置，如CD或DVD。当然，还有其他方式的计算机存储介质，例如量子存储器、石墨烯存储器等等。
在本申请中，所述处理器可以按任何适当的方式实现。例如，所述处理器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application SpecificIntegrated Circuit，ASIC)、可编程逻辑控制器和嵌入微控制器的形式等等。
本说明书实施方式提供的流媒体服务器，其本身所实现的具体功能，可以与本说明书中的前述方法实施方式相对照解释，并能够达到前述方法实施方式的技术效果，这里便不再赘述。
实施例四
请参阅图6，本申请还提供一种流媒体资源的分发***，所述***包括推流客户端和流媒体服务器，其中：
所述推流客户端，用于确定自身支持的候选流媒体信息，并向所述流媒体服务器发送指向目标流媒体资源的上传请求，所述上传请求中包括所述候选流媒体信息；接收所述流媒体服务器返回的响应报文，所述响应报文中包括所述流媒体服务器生成的应答流媒体信息和访问地址；根据所述应答流媒体信息对所述目标流媒体资源进行处理，并按照所述访问地址上传经过处理的目标流媒体资源；
所述流媒体服务器，用于基于所述候选流媒体信息，生成应答流媒体信息，并生成用于访问所述目标流媒体资源的访问地址；向所述推流客户端反馈包含所述应答流媒体信息以及所述访问地址的响应报文；接收所述推流客户端上传的所述经过处理的目标流媒体资源，并将所述经过处理的目标流媒体资源和所述应答流媒体信息关联存储。
在一个实施方式中，所述***还包括拉流客户端，所述拉流客户端用于向所述流媒体服务器发送指向所述目标流媒体资源的获取请求；接收所述流媒体服务器返回的响应报文，所述响应报文中包括所述目标流媒体资源关联的目标流媒体信息以及所述流媒体服务器生成的访问地址；基于所述访问地址和所述目标流媒体信息从所述流媒体服务器中获取所述目标流媒体资源；
相应地，所述流媒体服务器，还用于响应所述获取请求，生成用于访问所述目标流媒体资源的访问地址；向所述拉流客户端反馈所述访问地址以及所述目标流媒体资源关联的目标流媒体信息。
在一个实施方式中，所述流媒体服务器在生成用于访问所述目标流媒体资源的访问地址时，获取自身的公网IP地址和端口地址，并将所述公网IP地址和所述端口地址的组合作为用于访问所述目标流媒体资源的访问地址。
请参阅图7，在本申请中，上述实施例中的技术方案可以应用于如图7所示的计算机终端10上。计算机终端10可以包括一个或多个(图中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器104、以及用于通信功能的传输模块106。本领域普通技术人员可以理解，图7所示的结构仅为示意，其并不对上述电子装置的结构造成限定。例如，计算机终端10还可包括比图7中所示更多或者更少的组件，或者具有与图7所示不同的配置。
存储器104可用于存储应用软件的软件程序以及模块，处理器102通过运行存储在存储器104内的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至计算机终端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括计算机终端10的通信供应商提供的无线网络。在一个实例中，传输装置106包括一个网络适配器(Network Interface Controller，NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输装置106可以为射频(Radio Frequency，RF)模块，其用于通过无线方式与互联网进行通讯。
由上可见，本申请提供的技术方案中，可以将整个流程拆分为上传和下载两个部分，并且在这两个部分中将HTTP协议和WebRTC协议进行融合，从而简化通信连接的建立过程。此外，通过流媒体服务器进行流媒体资源的中转，用户无需将同一份流媒体资源在网络中重复发送多次，仅需要将流媒体资源上传至流媒体服务器，并从流媒体服务器中下载流媒体资源即可，能够极大地降低网络带宽的需求。具体地，在上传部分，推流客户端可以向流媒体服务器发送HTTP上传请求，流媒体服务器中的HTTP模块通过对HTTP上传请求进行分析，从而可以生成应答流媒体信息以及访问地址，并可以通过HTTP响应报文将应答流媒体信息以及访问地址提供给推流客户端。这样，推流客户端便可以与流媒体服务器建立WebRTC的通信连接，后续便可以根据访问地址上传流媒体资源，上传后的流媒体资源可以由流媒体服务器中的WebRTC模型进行处理。在下载部分，拉流客户端可以向流媒体服务器发送HTTP获取请求，流媒体服务器中的HTTP模块可以生成访问地址，并将该访问地址以及该HTTP获取请求指向的流媒体资源关联的流媒体信息包含于HTTP响应报文中反馈给拉流客户端，这样，拉流客户端便可以与流媒体服务器建立WebRTC的通信连接。后续，拉流客户端根据流媒体服务器提供的访问地址，从流媒体服务器中的WebRTC模块处下载流媒体资源。由此可见，本申请提供的技术方案，简化了WebRTC通信连接的建立过程，从而提高了通信的时效性。此外，通过流媒体服务器进行流媒体资源的中转，能够极大地降低网络带宽的需求。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (14)

1.一种流媒体资源的上传方法，其特征在于，所述方法包括：
接收推流客户端发来的指向目标流媒体资源的上传请求，所述上传请求中包括所述推流客户端支持的候选流媒体信息；
基于所述候选流媒体信息，生成应答流媒体信息，并生成用于访问所述目标流媒体资源的访问地址；
向所述推流客户端反馈所述应答流媒体信息以及所述访问地址，以使得所述推流客户端根据所述应答流媒体信息对所述目标流媒体资源进行处理，并使得所述推流客户端按照所述访问地址上传经过处理的目标流媒体资源；
接收所述推流客户端上传的所述经过处理的目标流媒体资源，并将所述经过处理的目标流媒体资源和所述应答流媒体信息关联存储。
2.根据权利要求1所述的方法，其特征在于，生成用于访问所述目标流媒体资源的访问地址包括：
获取自身的公网IP地址和端口地址，并将所述公网IP地址和所述端口地址的组合作为用于访问所述目标流媒体资源的访问地址。
3.根据权利要求1所述的方法，其特征在于，向所述推流客户端反馈所述应答流媒体信息以及所述访问地址包括：
向所述推流客户端返回响应报文，所述响应报文的响应消息体中包括所述应答流媒体信息以及所述访问地址。
4.根据权利要求1所述的方法，其特征在于，所述上传请求中包括用于表征所述目标流媒体资源的唯一标识；相应地，将所述经过处理的目标流媒体资源和所述应答流媒体信息关联存储包括：
将所述经过处理的目标流媒体资源存储于指定路径下，并建立所述目标流媒体资源的唯一标识与所述应答流媒体信息的关联关系。
5.一种流媒体服务器，所述流媒体服务器包括存储器和处理器，所述存储器用于存储计算机程序，其特征在于，所述计算机程序被所述处理器执行时，实现如权利要求1至4中任一所述的方法。
6.一种流媒体资源的下载方法，其特征在于，所述方法包括：
接收拉流客户端发来的指向目标流媒体资源的获取请求；
判断本地是否存在所述目标流媒体资源，若存在，生成用于访问所述目标流媒体资源的访问地址；
向所述拉流客户端反馈所述访问地址以及所述目标流媒体资源关联的目标流媒体信息，以使得所述拉流客户端基于所述访问地址和所述目标流媒体信息获取所述目标流媒体资源。
7.根据权利要求6所述的方法，其特征在于，所述获取请求中包括用于表征所述目标流媒体资源的唯一标识；
相应地，判断本地是否存在所述目标流媒体资源包括：
在本地查询是否存在具备所述唯一标识的流媒体资源，若存在，判定本地存在所述目标流媒体资源；若不存在，判定本地不存在所述目标流媒体资源。
8.根据权利要求6或7所述的方法，其特征在于，所述方法还包括：
若本地不存在所述目标流媒体资源，向所述拉流客户端反馈错误提示信息。
9.根据权利要求6或7所述的方法，其特征在于，生成用于访问所述目标流媒体资源的访问地址包括：
获取自身的公网IP地址和端口地址，并将所述公网IP地址和所述端口地址的组合作为用于访问所述目标流媒体资源的访问地址。
10.根据权利要求6所述的方法，其特征在于，向所述拉流客户端反馈所述访问地址以及所述目标流媒体资源关联的目标流媒体信息包括：
向所述拉流客户端返回响应报文，所述响应报文的响应消息体中包括所述访问地址以及所述目标流媒体资源关联的目标流媒体信息。
11.一种流媒体服务器，所述流媒体服务器包括存储器和处理器，所述存储器用于存储计算机程序，其特征在于，所述计算机程序被所述处理器执行时，实现如权利要求6至10中任一所述的方法。
12.一种流媒体资源的分发***，其特征在于，所述***包括推流客户端和流媒体服务器，其中：
所述推流客户端，用于确定自身支持的候选流媒体信息，并向所述流媒体服务器发送指向目标流媒体资源的上传请求，所述上传请求中包括所述候选流媒体信息；接收所述流媒体服务器返回的响应报文，所述响应报文中包括所述流媒体服务器生成的应答流媒体信息和访问地址；根据所述应答流媒体信息对所述目标流媒体资源进行处理，并按照所述访问地址上传经过处理的目标流媒体资源；
所述流媒体服务器，用于基于所述候选流媒体信息，生成应答流媒体信息，并生成用于访问所述目标流媒体资源的访问地址；向所述推流客户端反馈包含所述应答流媒体信息以及所述访问地址的响应报文；接收所述推流客户端上传的所述经过处理的目标流媒体资源，并将所述经过处理的目标流媒体资源和所述应答流媒体信息关联存储。
13.根据权利要求12所述的***，其特征在于，所述***还包括拉流客户端，所述拉流客户端用于向所述流媒体服务器发送指向所述目标流媒体资源的获取请求；接收所述流媒体服务器返回的响应报文，所述响应报文中包括所述目标流媒体资源关联的目标流媒体信息以及所述流媒体服务器生成的访问地址；基于所述访问地址和所述目标流媒体信息从所述流媒体服务器中获取所述目标流媒体资源；
相应地，所述流媒体服务器，还用于响应所述获取请求，生成用于访问所述目标流媒体资源的访问地址；向所述拉流客户端反馈所述访问地址以及所述目标流媒体资源关联的目标流媒体信息。
14.根据权利要求12或13所述的***，其特征在于，所述流媒体服务器在生成用于访问所述目标流媒体资源的访问地址时，获取自身的公网IP地址和端口地址，并将所述公网IP地址和所述端口地址的组合作为用于访问所述目标流媒体资源的访问地址。
CN201810349757.XA 2018-04-18 2018-04-18 流媒体资源的上传、下载方法、分发***及流媒体服务器 Expired - Fee Related CN110392071B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201810349757.XA CN110392071B (zh) 2018-04-18 2018-04-18 流媒体资源的上传、下载方法、分发***及流媒体服务器
PCT/CN2018/086181 WO2019200631A1 (zh) 2018-04-18 2018-05-09 流媒体资源的上传、下载方法、分发***及流媒体服务器
US16/098,574 US11316910B2 (en) 2018-04-18 2018-05-09 Method for uploading and downloading streaming media resources, distribution system and streaming media server
EP18821981.0A EP3598716A4 (en) 2018-04-18 2018-05-09 UPSTREAM DOWNLOAD AND DOWNLOAD PROCESSES OF CONTINUOUS MULTIMEDIA RESOURCE, DISTRIBUTION SYSTEM AND CONTINUOUS MULTIMEDIA SERVER

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810349757.XA CN110392071B (zh) 2018-04-18 2018-04-18 流媒体资源的上传、下载方法、分发***及流媒体服务器

Publications (2)

Publication Number Publication Date
CN110392071A true CN110392071A (zh) 2019-10-29
CN110392071B CN110392071B (zh) 2021-06-22

Family

ID=68240538

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810349757.XA Expired - Fee Related CN110392071B (zh) 2018-04-18 2018-04-18 流媒体资源的上传、下载方法、分发***及流媒体服务器

Country Status (4)

Country Link
US (1) US11316910B2 (zh)
EP (1) EP3598716A4 (zh)
CN (1) CN110392071B (zh)
WO (1) WO2019200631A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110933470A (zh) * 2019-11-29 2020-03-27 杭州当虹科技股份有限公司 一种视频数据的共享方法
CN111787372A (zh) * 2020-07-01 2020-10-16 苏州万店掌网络科技有限公司 基于多种条件调度的流媒体分发方法
CN112202833A (zh) * 2020-08-26 2021-01-08 网宿科技股份有限公司 Cdn***、请求处理方法以及调度服务器
CN112260961A (zh) * 2020-09-23 2021-01-22 北京金山云网络技术有限公司 一种网络流量调度方法、装置、电子设备及存储介质
CN112351299A (zh) * 2020-11-05 2021-02-09 山东亚华电子股份有限公司 一种宣教广播方法及设备
CN113014859A (zh) * 2019-12-20 2021-06-22 阿里巴巴集团控股有限公司 用于获得视频数据的***、方法、装置及电子设备
CN115002081A (zh) * 2022-05-30 2022-09-02 重庆紫光华山智安科技有限公司 媒体流传输方法及相关装置

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116708530A (zh) * 2022-02-25 2023-09-05 腾讯科技（深圳）有限公司 信息交互方法、装置及计算机设备、存储介质、程序产品
CN114844870B (zh) * 2022-03-25 2024-03-26 阿里巴巴（中国）有限公司 一种媒体流获取方法、装置、电子设备及存储介质
CN114884750B (zh) * 2022-07-07 2022-10-21 杭州筋斗腾云科技有限公司 访问的处理方法、访问处理***及计算机***
CN116016995B (zh) * 2022-12-02 2023-08-22 长扬科技(北京)股份有限公司 一种视频获取设备和方法

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030172116A1 (en) * 2002-03-10 2003-09-11 Curry Michael J. Email messaging program with built-in video and/or audio media recording and/or playback capabilities
CN101729602A (zh) * 2009-12-11 2010-06-09 北京工业大学 一种获取p2p视频***节目信息的方法
US20100146055A1 (en) * 2008-12-04 2010-06-10 Nokia Corporation Multiplexed Data Sharing
CN102006368A (zh) * 2010-12-03 2011-04-06 重庆新媒农信科技有限公司 基于移动终端记忆卡缓存技术的流媒体音频文件播放方法
CN103227788A (zh) * 2013-04-17 2013-07-31 广州市和声信息技术有限公司 实现网页应用程序与sip设备进行通信的方法和***
CN103546442A (zh) * 2012-07-17 2014-01-29 中兴通讯股份有限公司 浏览器的通讯监听方法及装置
CN103702062A (zh) * 2013-12-27 2014-04-02 Tcl集团股份有限公司 一种音视频通讯方法、装置及***
CN105141660A (zh) * 2015-07-24 2015-12-09 网宿科技股份有限公司 一种流媒体管理方法及***
CN105830047A (zh) * 2013-12-04 2016-08-03 脸谱公司 上传和转码媒体文件
CN105847264A (zh) * 2016-03-31 2016-08-10 乐视控股（北京）有限公司 一种提供流媒体服务的方法和***
CN107682657A (zh) * 2017-09-13 2018-02-09 中山市华南理工大学现代产业技术研究院 一种基于WebRTC的多人语音视频通话方法及***
CN107809683A (zh) * 2017-11-22 2018-03-16 广东电网有限责任公司教育培训评价中心 一种基于浏览器无插件的直播***及方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7733808B2 (en) * 2006-11-10 2010-06-08 Microsoft Corporation Peer-to-peer aided live video sharing system
US8789168B2 (en) * 2008-05-12 2014-07-22 Microsoft Corporation Media streams from containers processed by hosted code
WO2011006513A2 (en) * 2009-07-13 2011-01-20 Eyad Aii Mohammad Al Qalqili Method and system for advertising on the mobile main screen by cbs technology
US9183560B2 (en) * 2010-05-28 2015-11-10 Daniel H. Abelow Reality alternate
US20140195675A1 (en) * 2013-01-09 2014-07-10 Giga Entertainment Media Inc. Simultaneous Content Data Streaming And Interaction System
CN103179214B (zh) * 2013-04-10 2016-01-13 网宿科技股份有限公司 基于http协议的直播流推流方法和***
CN104427354B (zh) * 2013-08-28 2019-07-12 中兴通讯股份有限公司 一种直播媒体共享的方法、流媒体服务器及节点子***
CN103648014A (zh) * 2013-11-15 2014-03-19 乐视致新电子科技（天津）有限公司 智能电视向移动通信终端推送资源的方法和装置
CN104702565B (zh) 2013-12-05 2019-09-17 南京中兴新软件有限责任公司 媒体资源共享的方法、共享服务器及共享***
CN106330997B (zh) * 2015-06-19 2019-08-09 网宿科技股份有限公司 一种用于移动终端应用的内容分发的方法和***
US10523755B1 (en) * 2016-02-17 2019-12-31 Amazon Technologies, Inc. Peer-based cloud storage for media broadcasts
CN106453328A (zh) * 2016-10-18 2017-02-22 乐视控股（北京）有限公司 直播视频文件的推流方法、客户端及边缘流媒体服务器
US10477286B2 (en) * 2017-06-19 2019-11-12 Wangsu Science & Technology Co., Ltd. Streaming media file processing method and live streaming system
US10638192B2 (en) * 2017-06-19 2020-04-28 Wangsu Science & Technology Co., Ltd. Live streaming quick start method and system

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030172116A1 (en) * 2002-03-10 2003-09-11 Curry Michael J. Email messaging program with built-in video and/or audio media recording and/or playback capabilities
US20100146055A1 (en) * 2008-12-04 2010-06-10 Nokia Corporation Multiplexed Data Sharing
CN101729602A (zh) * 2009-12-11 2010-06-09 北京工业大学 一种获取p2p视频***节目信息的方法
CN102006368A (zh) * 2010-12-03 2011-04-06 重庆新媒农信科技有限公司 基于移动终端记忆卡缓存技术的流媒体音频文件播放方法
CN103546442A (zh) * 2012-07-17 2014-01-29 中兴通讯股份有限公司 浏览器的通讯监听方法及装置
CN103227788A (zh) * 2013-04-17 2013-07-31 广州市和声信息技术有限公司 实现网页应用程序与sip设备进行通信的方法和***
CN105830047A (zh) * 2013-12-04 2016-08-03 脸谱公司 上传和转码媒体文件
CN103702062A (zh) * 2013-12-27 2014-04-02 Tcl集团股份有限公司 一种音视频通讯方法、装置及***
CN105141660A (zh) * 2015-07-24 2015-12-09 网宿科技股份有限公司 一种流媒体管理方法及***
CN105847264A (zh) * 2016-03-31 2016-08-10 乐视控股（北京）有限公司 一种提供流媒体服务的方法和***
CN107682657A (zh) * 2017-09-13 2018-02-09 中山市华南理工大学现代产业技术研究院 一种基于WebRTC的多人语音视频通话方法及***
CN107809683A (zh) * 2017-11-22 2018-03-16 广东电网有限责任公司教育培训评价中心 一种基于浏览器无插件的直播***及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
崔斌: "基于SIP和WebRTC的音视频通信客户端的设计与实现", 《信息科技辑》 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110933470A (zh) * 2019-11-29 2020-03-27 杭州当虹科技股份有限公司 一种视频数据的共享方法
CN113014859A (zh) * 2019-12-20 2021-06-22 阿里巴巴集团控股有限公司 用于获得视频数据的***、方法、装置及电子设备
CN113014859B (zh) * 2019-12-20 2023-08-25 阿里巴巴集团控股有限公司 用于获得视频数据的***、方法、装置及电子设备
CN111787372A (zh) * 2020-07-01 2020-10-16 苏州万店掌网络科技有限公司 基于多种条件调度的流媒体分发方法
CN112202833A (zh) * 2020-08-26 2021-01-08 网宿科技股份有限公司 Cdn***、请求处理方法以及调度服务器
CN112202833B (zh) * 2020-08-26 2023-05-23 网宿科技股份有限公司 Cdn***、请求处理方法以及调度服务器
CN112260961A (zh) * 2020-09-23 2021-01-22 北京金山云网络技术有限公司 一种网络流量调度方法、装置、电子设备及存储介质
CN112351299A (zh) * 2020-11-05 2021-02-09 山东亚华电子股份有限公司 一种宣教广播方法及设备
CN115002081A (zh) * 2022-05-30 2022-09-02 重庆紫光华山智安科技有限公司 媒体流传输方法及相关装置
CN115002081B (zh) * 2022-05-30 2023-12-26 重庆紫光华山智安科技有限公司 媒体流传输方法及相关装置

Also Published As

Publication number Publication date
EP3598716A1 (en) 2020-01-22
CN110392071B (zh) 2021-06-22
WO2019200631A1 (zh) 2019-10-24
US11316910B2 (en) 2022-04-26
EP3598716A4 (en) 2020-07-29
US20210243238A1 (en) 2021-08-05

Similar Documents

Publication Publication Date Title
CN110392071A (zh) 流媒体资源的上传、下载方法、分发***及流媒体服务器
CN110392020B (zh) 一种流媒体资源的传输方法及***
CN104093064B (zh) 在终端设备之间进行视频互动的方法、***及装置
CN101917488B (zh) 一种bt下载方法、装置及***
CN113132376B (zh) 媒体数据处理方法及装置、***、电子设备和存储介质
US20050004968A1 (en) System, apparatus, and method for a mobile information server
CN103945277B (zh) 实现移动终端视频分享的方法、***和装置
KR101378309B1 (ko) 채팅 중 ｈｔｔｐ를 이용한 파일 전송을 위한 장치 및 기록매체
Prayogo et al. The use and performance of MQTT and CoAP as internet of things application protocol using NodeMCU ESP8266
CN109547824B (zh) 一种视频业务服务方法及***、存储介质及vpn服务器
US20140250197A1 (en) Content server, terminal, and method using http
CN107113223A (zh) 用于消息会话中继协议会话的消息块大小的协商
US9503485B1 (en) Connecting communicating devices in a multi-server communication system
KR20100090089A (ko) 통신 시스템에서 세션 히스토리 송수신 방법
CN105960791B (zh) 无状态消息传输路由
CN110198326A (zh) 一种视联网会议预约消息推送方法、装置及***
CN110392016A (zh) 防止流量被劫持的方法、装置和***
KR20220116201A (ko) 재생기에 오디오 및/또는 비디오 콘텐츠를 전달하기 위한 방법
WO2019012528A1 (en) SYSTEM AND METHOD FOR ESTABLISHING A SESSION
Ekler et al. Extending mobile BitTorrent environment with network coding
CN116647707B (zh) 组播调度方法、装置和***
Barth et al. Blaubot–Hassle-Free Multi-device Applications
KR20160090521A (ko) 단말 협력 통신을 통한 스트리밍 제공 방법, 서버 및 시스템
Che et al. Mobile cloud based system architecture for remote-resident multimedia discovery and access
Váradi Scalable, Multi-Regional Real-Time Communication Services Over QUIC

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210622

CF01 Termination of patent right due to non-payment of annual fee