CN111182319A - 基于5g通讯的无线三维虚拟偶像直播装置及方法 - Google Patents

基于5g通讯的无线三维虚拟偶像直播装置及方法 Download PDF

Info

Publication number
CN111182319A
CN111182319A CN201911365343.7A CN201911365343A CN111182319A CN 111182319 A CN111182319 A CN 111182319A CN 201911365343 A CN201911365343 A CN 201911365343A CN 111182319 A CN111182319 A CN 111182319A
Authority
CN
China
Prior art keywords
motion capture
animation
communication
capture device
wireless
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911365343.7A
Other languages
English (en)
Inventor
贺子彬
杜庆焜
张李京
胡文彬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Xishan Yichuang Culture Co ltd
Original Assignee
Wuhan Xishan Yichuang Culture Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Xishan Yichuang Culture Co ltd filed Critical Wuhan Xishan Yichuang Culture Co ltd
Priority to CN201911365343.7A priority Critical patent/CN111182319A/zh
Publication of CN111182319A publication Critical patent/CN111182319A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Social Psychology (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Alarm Systems (AREA)

Abstract

本发明提供了一种基于5G通讯的无线三维虚拟偶像直播装置及方法，包括：对佩戴有身体动作捕捉装置、表情捕捉装置、惯性动作捕捉装置及手部动作捕捉装置的用户进行表情、惯性移动、手部动作及身体动作的进行捕捉；将捕捉的身体动作通过5G通讯发送至服务器；通过服务器对捕捉的动作进行合成并进行实时演算，生成直播动画，并推送数据流至观看用户的客户端。本发明的有益效果为：解决了现有技术的局限性，能够随时随地进行直播。

Description

基于5G通讯的无线三维虚拟偶像直播装置及方法
技术领域
本发明属于三维动画领域，具体涉及了一种基于5G通讯的无线三维虚拟偶像直播装置及方法。
背景技术
近几年虚拟偶像这个新兴的事物，漂洋过海经日本传入了我们，而因为直播行业的火爆，催生了一大批虚拟动作捕捉的主播和团队，传统的虚拟直播中一般会用到实时3D引擎技术和动作捕捉技术，但是其局限是只能在固定的动作捕捉房间中使用，我们的基于5G通讯技术的无线虚拟动作捕捉***将密闭这个空白。
发明内容
本发明的目的在于至少解决现有技术中存在的技术问题之一，提供了基于5G通讯的无线三维虚拟偶像直播装置及方法，解决了现有技术的局限性，能够随时随地进行直播。
本发明的技术方案包括一种基于5G通讯的无线三维虚拟偶像直播装置，该装置包括：身体动作捕捉装置、表情捕捉装置、动作捕捉摄像装置、惯性动作捕捉装置及服务器，所述身体动作捕捉装置、表情捕捉装置、动作捕捉摄像装置、惯性动作捕捉装置与所述服务器通过5G通讯与所述服务器进行连接，所述惯性动作捕捉装置设置于身体动作捕捉装置。
根据所述的基于5G通讯的无线三维虚拟偶像直播装置，所述身体动作捕捉装置为佩戴式身体动作捕捉装置。
根据所述的基于5G通讯的无线三维虚拟偶像直播装置，所述表情捕捉装置用于对用户面部头部动作表情进行捕捉。
根据所述的基于5G通讯的无线三维虚拟偶像直播装置，所述装置还包括手部动作捕捉装置，用于对用户手部动作进行实时捕捉。
根据所述的基于5G通讯的无线三维虚拟偶像直播装置，所述惯性动作捕捉装置设置为基于陀螺仪惯性动作捕捉装置。
根据所述的基于5G通讯的无线三维虚拟偶像直播装置，所述服务器设置有5G接发装置、动画处理装置及直播装置，所述5G接发装置用于对所述身体动作捕捉装置、所述表情捕捉装置、所述动作捕捉摄像装置、所述惯性动作捕捉装置的捕捉动画和摄像动画的数据通过5G通讯进行接受，所述动画处理装置用于对捕捉动画及摄像动画进行合成，以及添加场景、特效、音效并生成直播动画，所述用于将直播动画的数据流通过5G推送至观看客户端。
根据所述的基于5G通讯的无线三维虚拟偶像直播装置，所述动画处理装置设置为三维即时演算引擎，用于对捕捉动画和摄像动画进行实时合成和演算。
根据所述的基于5G通讯的无线三维虚拟偶像直播装置，所述动作捕捉摄像装置设置为高清红外摄像头，所述高清红外摄像头设置于对应的支撑架。
本发明的技术方案还包括一种基于5G通讯的无线三维虚拟偶像直播，该方法用于上述任一所述装置，其特征在于：S100，对佩戴有所述身体动作捕捉装置、所述表情捕捉装置、所述动作捕捉摄像装置、惯性动作捕捉装置及手部动作捕捉装置的用户进行表情、惯性移动、手部动作及身体动作的进行捕捉；S200，将捕捉的身体动作通过5G通讯发送至服务器；S300，通过服务器对捕捉的动作进行合成并进行实时演算，生成直播动画，并推送数据流至观看用户的客户端。
本发明的有益效果为：解决了现有技术的局限性，能够随时随地进行直播。
附图说明
下面结合附图和实施例对本发明进一步地说明；
图1所示为根据本发明实施方式的装置示意图。
图2所示为根据本发明实施方式的总体流程图。
具体实施方式
本部分将详细描述本发明的具体实施例，本发明之较佳实施例在附图中示出，附图的作用在于用图形补充说明书文字部分的描述，使人能够直观地、形象地理解本发明的每个技术特征和整体技术方案，但其不能理解为对本发明保护范围的限制。
在本发明的描述中，若干的含义是一个或者多个，多个的含义是两个以上，大于、小于、超过等理解为不包括本数，以上、以下、以内等理解为包括本数。如果有描述到第一、第二只是用于区分技术特征为目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量或者隐含指明所指示的技术特征的先后关系。
本发明的描述中，除非另有明确的限定，设置等词语应做广义理解，所属技术领域技术人员可以结合技术方案的具体内容合理确定上述词语在本发明中的具体含义。
图1所示为根据本发明实施方式的装置示意图。该装置包括：身体动作捕捉装置、表情捕捉装置、动作捕捉摄像装置、惯性动作捕捉装置及服务器，身体动作捕捉装置、表情捕捉装置、动作捕捉摄像装置、惯性动作捕捉装置与服务器通过5G通讯与服务器进行连接，惯性动作捕捉装置设置于身体动作捕捉装置。身体动作捕捉装置为佩戴式身体动作捕捉装置。表情捕捉装置用于对用户面部头部动作表情进行捕捉。该装置还包括手部动作捕捉装置，用于对用户手部动作进行实时捕捉。惯性动作捕捉装置设置为基于陀螺仪惯性动作捕捉装置。服务器设置有5G接发装置、动画处理装置及直播装置，5G接发装置用于对身体动作捕捉装置、表情捕捉装置、动作捕捉摄像装置、惯性动作捕捉装置的捕捉动画和摄像动画的数据通过5G通讯进行接受，动画处理装置用于对捕捉动画及摄像动画进行合成，以及添加场景、特效、音效并生成直播动画，用于将直播动画的数据流通过5G推送至观看客户端。动画处理装置设置为三维即时演算引擎，用于对捕捉动画和摄像动画进行实时合成和演算。动作捕捉摄像装置设置为高清红外摄像头，高清红外摄像头设置于对应的支撑架。
图2所示为根据本发明实施方式的总体流程图。该流程包括：S100，对佩戴有身体动作捕捉装置、表情捕捉装置、惯性动作捕捉装置及手部动作捕捉装置的用户进行表情、惯性移动、手部动作及身体动作的进行捕捉；S200，将捕捉的身体动作通过5G通讯发送至服务器；S300，通过服务器对捕捉的动作进行合成并进行实时演算，生成直播动画，并推送数据流至观看用户的客户端。
上面结合附图对本发明实施例作了详细说明，但是本发明不限于上述实施例，在技术领域普通技术人员所具备的知识范围内，还可以在不脱离本发明宗旨的前提下做出各种变化。

Claims (9)

1.一种基于5G通讯的无线三维虚拟偶像直播装置，该装置包括：
身体动作捕捉装置、表情捕捉装置、动作捕捉摄像装置、惯性动作捕捉装置及服务器，所述身体动作捕捉装置、表情捕捉装置、动作捕捉摄像装置、惯性动作捕捉装置与所述服务器通过5G通讯与所述服务器进行连接，所述惯性动作捕捉装置设置于身体动作捕捉装置。
2.根据权利要求1所述的基于5G通讯的无线三维虚拟偶像直播装置，所述身体动作捕捉装置为佩戴式身体动作捕捉装置。
3.根据权利要求1所述的基于5G通讯的无线三维虚拟偶像直播装置，所述表情捕捉装置用于对用户面部头部动作表情进行捕捉。
4.根据权利要求1所述的基于5G通讯的无线三维虚拟偶像直播装置，该装置还包括手部动作捕捉装置，用于对用户手部动作进行实时捕捉。
5.根据权利要求1所述的基于5G通讯的无线三维虚拟偶像直播装置，所述惯性动作捕捉装置设置为基于陀螺仪惯性动作捕捉装置。
6.根据权利要求1所述的基于5G通讯的无线三维虚拟偶像直播装置，所述服务器设置有5G接发装置、动画处理装置及直播装置，所述5G接发装置用于对所述身体动作捕捉装置、所述表情捕捉装置、所述动作捕捉摄像装置、所述惯性动作捕捉装置的捕捉动画和摄像动画的数据通过5G通讯进行接受，所述动画处理装置用于对捕捉动画及摄像动画进行合成，以及添加场景、特效、音效并生成直播动画，所述用于将直播动画的数据流通过5G推送至观看客户端。
7.根据权利要求1所述的基于5G通讯的无线三维虚拟偶像直播装置，所述动画处理装置设置为三维即时演算引擎，用于对捕捉动画和摄像动画进行实时合成和演算。
8.根据权利要求1所述的基于5G通讯的无线三维虚拟偶像直播装置，所述动作捕捉摄像装置设置为高清红外摄像头，所述高清红外摄像头设置于对应的支撑架。
9.一种基于5G通讯的无线三维虚拟偶像直播，该方法用于权利要求1-8任一所述装置，其特征在于：
S100，对佩戴有所述身体动作捕捉装置、所述表情捕捉装置、惯性动作捕捉装置及手部动作捕捉装置的用户进行表情、惯性移动、手部动作及身体动作的进行捕捉；
S200，将捕捉的身体动作通过5G通讯发送至服务器；
S300，通过服务器对捕捉的动作进行合成并进行实时演算，生成直播动画，并推送数据流至观看用户的客户端。
CN201911365343.7A 2019-12-26 2019-12-26 基于5g通讯的无线三维虚拟偶像直播装置及方法 Pending CN111182319A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911365343.7A CN111182319A (zh) 2019-12-26 2019-12-26 基于5g通讯的无线三维虚拟偶像直播装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911365343.7A CN111182319A (zh) 2019-12-26 2019-12-26 基于5g通讯的无线三维虚拟偶像直播装置及方法

Publications (1)

Publication Number Publication Date
CN111182319A true CN111182319A (zh) 2020-05-19

Family

ID=70657460

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911365343.7A Pending CN111182319A (zh) 2019-12-26 2019-12-26 基于5g通讯的无线三维虚拟偶像直播装置及方法

Country Status (1)

Country Link
CN (1) CN111182319A (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107274466A (zh) * 2017-05-31 2017-10-20 珠海金山网络游戏科技有限公司 一种实时全身动作捕捉的方法、装置和***
CN108848286A (zh) * 2018-06-21 2018-11-20 珠海金山网络游戏科技有限公司 基于威亚辅助设备的三维虚拟偶像直播方法、装置及***
CN110427110A (zh) * 2019-08-01 2019-11-08 广州华多网络科技有限公司 一种直播方法、装置以及直播服务器

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107274466A (zh) * 2017-05-31 2017-10-20 珠海金山网络游戏科技有限公司 一种实时全身动作捕捉的方法、装置和***
CN108848286A (zh) * 2018-06-21 2018-11-20 珠海金山网络游戏科技有限公司 基于威亚辅助设备的三维虚拟偶像直播方法、装置及***
CN110427110A (zh) * 2019-08-01 2019-11-08 广州华多网络科技有限公司 一种直播方法、装置以及直播服务器

Similar Documents

Publication Publication Date Title
US9843840B1 (en) Apparatus and method for panoramic video hosting
JP2019028368A (ja) レンダリング装置、ヘッドマウントディスプレイ、画像伝送方法、および画像補正方法
CN110463195A (zh) 用于在虚拟现实视频中渲染定时文本和图形的方法和设备
CN105980962A (zh) 信息处理设备、信息处理方法和程序
CN105898342A (zh) 一种视频的多点同屏播放方法及***
JP2016500954A5 (zh)
WO2004109385A3 (en) Digital 3d/360 degree camera system
CN102340690A (zh) 一种互动电视节目***及实现方法
CN111862348B (zh) 视频显示方法、视频生成方法、装置、设备及存储介质
CN103607568A (zh) 立体街景视频投影方法及***
CN205510277U (zh) 一种无人机全景图像传输设备
CN111147873A (zh) 基于5g通信的虚拟形象直播方法及***
CN106060523B (zh) 全景立体图像采集、显示方法及相应的装置
CN111295880B (zh) 用于发送沉浸式媒体的方法和设备
US20150244984A1 (en) Information processing method and device
WO2023098279A1 (zh) 视频数据处理方法、装置、计算机设备、计算机可读存储介质及计算机程序产品
CN108769648A (zh) 一种基于720度全景vr的3d场景呈现方法
EP4258232A3 (en) A system and method for executing an interactive live game
CN106980369A (zh) 虚拟现实项目的第三视角视频的合成和输出***及方法
CN108769755A (zh) 高分辨率全景视频直播拍照***与方法
CN109005285A (zh) 增强现实处理方法、终端设备及存储介质
WO2022127747A1 (zh) 利用虚拟场景进行真实社交的方法及***
CN103959805B (zh) 一种显示图像的方法和装置
CN104935866B (zh) 实现视频会议的方法、合成设备和***
JP2018033107A (ja) 動画の配信装置及び配信方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200519