CN106657733A - 一种基于无人机的全景直播方法及终端 - Google Patents

一种基于无人机的全景直播方法及终端 Download PDF

Info

Publication number
CN106657733A
CN106657733A CN201611060338.1A CN201611060338A CN106657733A CN 106657733 A CN106657733 A CN 106657733A CN 201611060338 A CN201611060338 A CN 201611060338A CN 106657733 A CN106657733 A CN 106657733A
Authority
CN
China
Prior art keywords
picture
panorama
live
shooting
display mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611060338.1A
Other languages
English (en)
Inventor
刘均
宋朝忠
欧阳张鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Launch Technology Co Ltd
Original Assignee
Shenzhen Launch Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Launch Technology Co Ltd filed Critical Shenzhen Launch Technology Co Ltd
Priority to CN201611060338.1A priority Critical patent/CN106657733A/zh
Priority to PCT/CN2017/071411 priority patent/WO2018094866A1/zh
Publication of CN106657733A publication Critical patent/CN106657733A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4135—Peripherals receiving signals from specially adapted client devices external recorder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)

Abstract

本发明实施例提供了一种基于无人机的全景直播方法及终端，其中，所述无人机包括M个摄像头，所述摄像头被安装在支持方位和/或俯仰角调节的云台上，所述方法包括：接收所述无人机中的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面；对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面；将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面。采用本发明实施例，可实现多方位多角度的全景直播。

Description

一种基于无人机的全景直播方法及终端
技术领域
本发明涉及终端技术领域，尤其涉及一种基于无人机的全景直播方法及终端。
背景技术
随着网络技术的不断发展，网络技术的应用现已普及到社会生活的方方面面，曾经只能通过电视观看直播节目，现在已经能够通过网络观看直播，方便了人们的生活。
目前的直播节目，通常是通过个人肩抗摄像机进行拍摄所获取的，或是在大形场景下，如足球场等，由多个固定的摄像头进行拍摄，然后根据需要，选择不同的摄像头拍摄画面进行直播；上述直播效果过于单一，并且直播画面的角度都是固定可不变的，用户不能根据自己想要观看的视角来操作直播画面，直播效果不佳、用户体验差。
发明内容
本发明实施例所要解决的技术问题在于，提供一种基于无人机的全景直播方法及终端，可实现多方位多角度的全景直播，提升直播画面的灵活性。
一方面，本发明实施例公开提供了一种基于无人机的全景直播方法，所述无人机包括M个摄像头，且所述M个摄像头部分被安装在支持方位和/或俯仰角调节的云台上，所述方法包括：
接收所述无人机中的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面；
对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面；
将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面。
其中可选地，所述对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面，包括：
按照设定的并列显示方式或主从显示方式，对所述不同视角的拍摄画面进行无缝拼接，得到合成后的全景直播画面；还包括：
采用动态码率自适应技术对所述合成后的全景直播画面进行采集，并对所述采集的全景直播画面进行设定格式的编码处理，以得到编码后的全景直播画面。
其中可选地，所述并列显示方式包括按照水平方向并列排布的显示方式、或按照竖直方向并列排布的显示方式；所述主从显示方式包括画中画方式。
其中可选地，所述对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面，包括：
按照设定频率对所述不同视角的拍摄画面进行三维重构，以生成对应的所述拍摄物体在三维空间中的全景直播画面；还包括：
对所述拍摄物体在三维空间中的全景直播画面进行设定格式的编码和优化，得到编码后的全景直播画面。
其中可选地，所述方法还包括：
当接收不到所述M个摄像头中的任意一个或多个摄像头发送的拍摄画面时，生成对应的提示信息，以提示对应摄像头出现故障。
另一方面，本发明实施例还公开提供了一种终端，所述终端包括：
接收模块，用于接收无人机上M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面；其中，所述无人机包括M个摄像头，且所述M个摄像头部分被安装在支持方位和/或俯仰角调节的云台上；
生成模块，用于对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面；
推送模块，用于将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面。
其中可选地，
所述生成模块，具体用于按照设定的并列显示方式或主从显示方式，对所述不同视角的拍摄画面进行无缝拼接，得到合成后的全景直播画面；
所述生成模块，还具体用于用动态码率自适应技术对所述合成后的全景直播画面进行采集，并对所述采集的全景直播画面进行设定格式的编码处理，以得到编码后的全景直播画面。
其中可选地，所述并列显示方式包括按照水平方向并列排布的显示方式、或按照竖直方向并列排布的显示方式；所述主从显示方式包括画中画方式。
其中可选地，
所述生成模块，具体用于按照设定频率对所述不同视角的拍摄画面进行三维重构，以生成对应的所述拍摄物体在三维空间中的全景直播画面；
所述生成模块，还具体用于对所述拍摄物体在三维空间中的全景直播画面进行设定格式的编码和优化，得到编码后的全景直播画面。
其中可选地，
所述生成模块，还用于当接收不到所述M个摄像头中的任意一个或多个摄像头发送的拍摄画面时，生成对应的提示信息，以提示对应摄像头出现故障。
本发明实施例可通过接收被安装在无人机上的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面，其中，所述M个摄像头部分安装在支持方位和/或俯仰角调节的所述无人机的云台上，接着对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面，最后将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面；这样可实现多方位甚至多角度的全景直播，提升直播画面的灵活性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例的一种基于无人机的全景直播方法的流程示意图；
图2是本发明实施例的另一种基于无人机的全景直播方法的流程示意图；
图3是本发明实施例的一种终端的结构示意图；
图4是本发明实施例的另一种终端的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”和“第三”(如果存在)等是用于区别不同对象，而非用于描述特定顺序。此外，术语“包括”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、***、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
请参见图1，是本发明实施例的一种基于无人机的全景直播方法的流程示意图，本发明实施例的所述方法可以应用在诸如智能手机、平板电脑、智能可穿戴设备等带通信网络功能的终端中，具体可由这些终端的处理器来实现。本发明实施例的所述方法还包括如下步骤。
S101、接收无人机安装的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面，所述M个摄像头部分被安装在支持方位和/或俯仰角调节的所述无人机的云台上。
本发明实施例中，用户可以在无人机上安装一些固定方位、固定角度(即拍摄角度不可调)的固定摄像头，还可以通过云台(云台控制器)在所述无人机上安装一些方位和/或拍摄角度(即俯仰角度)可以调整变化的移动摄像头，上述固定摄像头和移动摄像头的数量可以是一个或多个，当所述固定摄像头和移动摄像头的数量超过两个时，所述固定摄像头和移动摄像头可以是指相同的摄像头或者不同的摄像头，本发明实施例不作限定。
用户可以对所述无人机进行操作，使其随着拍摄物体移动，对所述拍摄物体进行跟拍，也即是利用安装在所述无人机上的多个摄像头，这里设定为M个，M为正整数，M为大于等于1的整数，当M为1时，那么可以将这一个摄像头选择为移动摄像头通过云台或云台控制器将其安装到所述无人机上，当M为大于1的正整数时，可以任意选择安装一些固定摄像头和一些移动摄像头在所述无人机上，本发明实施例不作限定。
所述M个摄像头可以随着无人机的飞行动态跟拍需要拍摄的拍摄物体(如人等)，可选地所述M个摄像头还可以通过有线/无线通讯的方式(如数据线、WIFI、蓝牙等)将所述M个摄像头跟拍所述拍摄物所采集的不同视角(即不同方位和/或不同俯仰角度)的拍摄画面发送给对应的终端。所述终端接收所述无人机上M个摄像头跟拍所述拍摄物体所采集的不同视角的拍摄画面。
所述终端可以包括智能手机(如Android手机、IOS手机等)、个人电脑、平板电脑、掌上电脑、移动互联网设备(MID，Mobile Internet Devices)或穿戴式智能设备等互联网设备，本发明实施例不作限定。
S102、对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面。
本发明实施例中，终端可以对上述获取的不同视角的拍摄画面进行分析，并进而无缝拼接/合成以生成对应的全景直播画面。
其中可选地，所述对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面，包括：
按照设定的并列显示方式或主从显示方式，对所述不同视角的直播画面进行无缝拼接，得到合成后的全景直播画面；还包括：
采用动态码率自适应技术对所述合成后的全景直播画面进行采集，并对所述采集的全景直播画面进行设定格式的编码处理，以得到编码后的全景直播画面。
作为本发明实施例的一种可能的实现方式，所述终端可以按照设定的并列排序显示方式或主从排序显示方式来对所述不同视角的拍摄画面进行重排、以及进行无缝拼接或合成以得到合成后的全景直播画面；进一步地所述终端还可以采用动态码率自适应技术对所述合成后的全景直播画面进行采样采集，进而对采集的全景直播画面进行设定格式的编码/压缩处理，以得到编码后的全景直播画面。应理解的是，为保证传输的安全不失帧，通常将一些视频流进行编码再传输，减少带宽资源的占用，还能保证传输数据的安全性。
其中可选地，所述并列显示方式包括按照水平方向并列排布的显示方式、或按照竖直方向并列排布的显示方式；所述主从显示方式包括画中画方式。
应理解的是，本发明实施例张的并列排序显示方式可以是指按照水平方向进行左右画面的排布显示方式、又可是指按照竖直方向进行上下画面的排布显示方式，可选地，还可以是指以设定方向(任意方向)进行的任意结构或图案的画面拼接排序显示方式。所述主从排序显示方式可以是指按照画中画显示、或图层覆盖/掩盖的排序显示方式，或者其他的排序显示方式，本发明实施例不作限定。
其中可选地，所述对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面，包括：
按照设定频率对所述不同视角的拍摄画面进行三维重构，以生成对应的所述拍摄物体在三维空间中的全景直播画面；还包括：
对所述拍摄物体在三维空间中的全景直播画面进行设定格式的编码和优化，得到编码后的全景直播画面。
作为本发明实施例的另一种可能的实现方式，所述终端可以按照设定的运行频率(即设定频率)对获取的所述不同视角的拍摄画面进行三维重构，以生成三维立体(即三维空间)的全景直播画面，使得用户观赏更有真实感、有趣味性；进而所述终端可以将构成的三维立体的全景直播画面进行设定格式的编码以及优化(如去除边角、或分辨率较低的画面/码流等)得到编码后的全景直播画面。
S103、将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面。
本发明实施例中，所述终端得到编码后的全景直播画面后，或得到上述无缝拼接得到全景直播画面后，所述终端可以将编码后的全景直播画面或直接将全景直播画面通过网络发送给对应的直播客户端或观众客户端，以便在客户端接收到编码后的全景直播画面时，先对其进行解码以还原出对应的全景直播画面，进而在客户端侧来播放该全景直播画面；或者客户端接收没编码的全景直播画面，那么可以直接播放该全景直播画面。
其中可选地，所述方法还包括：
当接收不到所述M个摄像头中的任意一个或多个摄像头发送的拍摄画面时，生成对应的提示信息，以提示对应摄像头出现故障。
所述终端在检测到本终端接收不了M个摄像头中的一个或多个摄像头拍摄和发送的拍摄画面时，所述终端可以生成对应的提示信息，以提示用户查看对应的摄像头是不是出现故障或损坏了。
本发明实施例可通过接收被安装在无人机上的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面，其中，所述M个摄像头部分安装在支持方位和/或俯仰角调节的所述无人机的云台上，接着对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面，最后将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面；这样可实现多方位甚至多角度的全景直播，提升直播画面的灵活性。
请参见图2，是本发明实施例的另一种基于无人机的全景直播方法的流程示意图，本发明实施例的所述方法可以应用在诸如智能手机、平板电脑、智能可穿戴设备等带通信网络功能的终端中，具体可由这些终端的处理器来实现。本发明实施例的所述方法还包括如下步骤。
S201、接收无人机中的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面。
S202、按照设定的并列显示方式或主从显示方式，对所述不同视角的拍摄画面进行无缝拼接，得到合成后的全景直播画面；其中，所述并列显示方式包括按照水平方向并列排布的显示方式、或按照竖直方向并列排布的显示方式；所述主从显示方式包括画中画方式。
S203、采用动态码率自适应技术对所述合成后的全景直播画面进行采集，并对所述采集的全景直播画面进行设定格式的编码处理，以得到编码后的全景直播画面。
S204、按照设定频率对所述不同视角的拍摄画面进行三维重构，以生成对应的所述拍摄物体在三维空间中的全景直播画面。
S205、对所述拍摄物体在三维空间中的全景直播画面进行设定格式的编码和优化，得到编码后的全景直播画面。
需要说明的是，上述步骤S202-S203与上述步骤S204-S205是并列的方案，终端可以任意选取其中一套方案步骤进行执行，本发明实施例步骤限定。
S206、将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面。
S207、当接收不到所述M个摄像头中的任意一个或多个摄像头发送的拍摄画面时，生成对应的提示信息，以提示对应摄像头出现故障。
本发明实施例可通过接收被安装在无人机上的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面，其中，所述M个摄像头部分安装在支持方位和/或俯仰角调节的所述无人机的云台上，接着对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面，最后将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面；这样可实现多方位甚至多角度的全景直播，提升直播画面的灵活性。
请参见图3，是本发明实施例的一种终端的结构示意图，本发明实施例的所述终端3包括：
接收模块30，用于接收无人机上的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面；其中，所述无人机包括M个摄像头，且所述M个摄像头部分被安装在支持方位和/或俯仰角调节的云台上；
生成模块31，用于对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面；
推送模块32，用于将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面。
其中可选地，
所述生成模块31，具体用于按照设定的并列显示方式或主从显示方式，对所述不同视角的拍摄画面进行无缝拼接，得到合成后的全景直播画面；
所述生成模块31，还具体用于用动态码率自适应技术对所述合成后的全景直播画面进行采集，并对所述采集的全景直播画面进行设定格式的编码处理，以得到编码后的全景直播画面。
其中可选地，所述并列显示方式包括按照水平方向并列排布的显示方式、或按照竖直方向并列排布的显示方式；所述主从显示方式包括画中画方式。
其中可选地，
所述生成模块31，具体用于按照设定频率对所述不同视角的拍摄画面进行三维重构，以生成对应的所述拍摄物体在三维空间中的全景直播画面；
所述生成模块31，还具体用于对所述拍摄物体在三维空间中的全景直播画面进行设定格式的编码和优化，得到编码后的全景直播画面。
其中可选地，
所述生成模块31，还用于当接收不到所述M个摄像头中的任意一个或多个摄像头发送的拍摄画面时，生成对应的提示信息，以提示对应摄像头出现故障。
本发明实施例中涉及的各个模块的具体实现可参考图1至图2对应实施例中相关功能模块或者实施步骤的描述，在此不赘述。
本发明实施例可通过接收被安装在无人机上的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面，其中，所述M个摄像头部分安装在支持方位和/或俯仰角调节的所述无人机的云台上，接着对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面，最后将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面；这样可实现多方位甚至多角度的全景直播，提升直播画面的灵活性。
再请参见图4，是本发明实施例的一种终端的结构示意图。所述终端可以为智能手机、平板电脑、智能可穿戴设备等带通信网络功能的设备，如图4所示，本发明实施例的所述终端可以包括显示屏、按键、扬声器、拾音器等模块，并且还包括：至少一个总线501、与总线501相连的至少一个处理器502以及与总线501相连的至少一个存储器503，实现通信功能的通信装置505，为终端各耗电模块供电的电源装置504。
所述处理器502可通过总线501，调用存储器503中存储的代码以执行相关的功能，其中，存储器503包括操作***、数据传输应用程序。
所述处理器502，用于：
接收无人机中的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面；
对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面；
将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面；
其中，所述无人机包括M个摄像头，且所述M个摄像头部分被安装在支持方位和/或俯仰角调节的云台上。
进一步可选地，所述处理器502具体用于：
按照设定的并列显示方式或主从显示方式，对所述不同视角的拍摄画面进行无缝拼接，得到合成后的全景直播画面；
采用动态码率自适应技术对所述合成后的全景直播画面进行采集，并对所述采集的全景直播画面进行设定格式的编码处理，以得到编码后的全景直播画面。
进一步可选地，所述并列显示方式包括按照水平方向并列排布的显示方式、或按照竖直方向并列排布的显示方式；所述主从显示方式包括画中画方式。
进一步可选地，所述处理器502具体用于：
按照设定频率对所述不同视角的拍摄画面进行三维重构，以生成对应的所述拍摄物体在三维空间中的全景直播画面；
对所述拍摄物体在三维空间中的全景直播画面进行设定格式的编码和优化，得到编码后的全景直播画面。
进一步可选地，所述处理器502还用于：
当接收不到所述M个摄像头中的任意一个或多个摄像头发送的拍摄画面时，生成对应的提示信息，以提示对应摄像头出现故障。
本发明实施例可通过接收被安装在无人机上的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面，其中，所述M个摄像头部分安装在支持方位和/或俯仰角调节的所述无人机的云台上，接着对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面，最后将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面；这样可实现多方位甚至多角度的全景直播，提升直播画面的灵活性。
本发明实施例还提供一种计算机存储介质，其中，该计算机存储介质可存储有程序，该程序执行时包括上述方法实施例中记载的基于无人机的全景直播方法的部分或全部步骤。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的装置，可通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明的各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种基于无人机的全景直播方法，其特征在于，所述无人机包括M个摄像头，且所述M个摄像头部分被安装在支持方位和/或俯仰角调节的云台上，所述方法包括：
接收所述无人机中的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面；
对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面；
将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面。
2.如权利要求1所述的方法，其特征在于，所述对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面，包括：
按照设定的并列显示方式或主从显示方式，对所述不同视角的拍摄画面进行无缝拼接，得到合成后的全景直播画面；还包括：
采用动态码率自适应技术对所述合成后的全景直播画面进行采集，并对所述采集的全景直播画面进行设定格式的编码处理，以得到编码后的全景直播画面。
3.如权利要求2所述的方法，其特征在于，所述并列显示方式包括按照水平方向并列排布的显示方式、或按照竖直方向并列排布的显示方式；所述主从显示方式包括画中画方式。
4.如权利要求1所述的方法，其特征在于，所述对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面，包括：
按照设定频率对所述不同视角的拍摄画面进行三维重构，以生成对应的所述拍摄物体在三维空间中的全景直播画面；还包括：
对所述拍摄物体在三维空间中的全景直播画面进行设定格式的编码和优化，得到编码后的全景直播画面。
5.如权利要求1-4中任意一项所述的方法，其特征在于，所述方法还包括：
当接收不到所述M个摄像头中的任意一个或多个摄像头发送的拍摄画面时，生成对应的提示信息，以提示对应摄像头出现故障。
6.一种终端，其特征在于，所述终端包括：
接收模块，用于接收无人机上的M个摄像头跟随拍摄物体所采集的不同视角的拍摄画面，所述不同视角的拍摄画面包括不同方位和/或俯仰角的拍摄画面；其中，所述无人机包括M个摄像头，且所述M个摄像头部分被安装在支持方位和/或俯仰角调节的云台上；
生成模块，用于对所述不同视角的拍摄画面进行无缝拼接以生成对应的全景直播画面；
推送模块，用于将所述全景直播画面推送给对应的直播客户端，以播放所述全景直播画面。
7.如权利要求6所述的终端，其特征在于，
所述生成模块，具体用于按照设定的并列显示方式或主从显示方式，对所述不同视角的拍摄画面进行无缝拼接，得到合成后的全景直播画面；
所述生成模块，还具体用于用动态码率自适应技术对所述合成后的全景直播画面进行采集，并对所述采集的全景直播画面进行设定格式的编码处理，以得到编码后的全景直播画面。
8.如权利要求7所述的终端，其特征在于，所述并列显示方式包括按照水平方向并列排布的显示方式、或按照竖直方向并列排布的显示方式；所述主从显示方式包括画中画方式。
9.如权利要求6所述的终端，其特征在于，
所述生成模块，具体用于按照设定频率对所述不同视角的拍摄画面进行三维重构，以生成对应的所述拍摄物体在三维空间中的全景直播画面；
所述生成模块，还具体用于对所述拍摄物体在三维空间中的全景直播画面进行设定格式的编码和优化，得到编码后的全景直播画面。
10.如权利要求6-9中任意一项所述的终端，其特征在于，
所述生成模块，还用于当接收不到所述M个摄像头中的任意一个或多个摄像头发送的拍摄画面时，生成对应的提示信息，以提示对应摄像头出现故障。
CN201611060338.1A 2016-11-25 2016-11-25 一种基于无人机的全景直播方法及终端 Pending CN106657733A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201611060338.1A CN106657733A (zh) 2016-11-25 2016-11-25 一种基于无人机的全景直播方法及终端
PCT/CN2017/071411 WO2018094866A1 (zh) 2016-11-25 2017-01-17 一种基于无人机的全景直播方法及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611060338.1A CN106657733A (zh) 2016-11-25 2016-11-25 一种基于无人机的全景直播方法及终端

Publications (1)

Publication Number Publication Date
CN106657733A true CN106657733A (zh) 2017-05-10

Family

ID=58812165

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611060338.1A Pending CN106657733A (zh) 2016-11-25 2016-11-25 一种基于无人机的全景直播方法及终端

Country Status (2)

Country Link
CN (1) CN106657733A (zh)
WO (1) WO2018094866A1 (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107861436A (zh) * 2017-12-01 2018-03-30 上海市环境科学研究院 一种多旋翼无人机高空环境侦测***
CN109076161A (zh) * 2017-12-29 2018-12-21 深圳市大疆创新科技有限公司 一种图像处理方法、移动平台、控制设备及***
CN109076193A (zh) * 2017-11-07 2018-12-21 深圳市大疆创新科技有限公司 全景图像显示方法和***、全景图像处理方法和地面站
CN109660720A (zh) * 2018-12-12 2019-04-19 河北汉光重工有限责任公司 一种应用于陆防监控双红外低空探测***的扇扫拼接方法
CN109688374A (zh) * 2018-12-12 2019-04-26 深圳慧源创新科技有限公司 无人机双路图传分屏显示技术
WO2019084959A1 (zh) * 2017-11-06 2019-05-09 深圳市大疆创新科技有限公司 无人机的移动终端和云端平台的交互方法及装置
WO2019095382A1 (zh) * 2017-11-20 2019-05-23 深圳市大疆创新科技有限公司 无人机的图像传输方法和装置
CN110062153A (zh) * 2019-03-18 2019-07-26 北京当红齐天国际文化发展集团有限公司 一种全景拍照无人机***及全景拍照方法
CN110881093A (zh) * 2018-09-05 2020-03-13 华为技术有限公司 分布式摄像机
CN111247811A (zh) * 2018-12-24 2020-06-05 深圳市大疆创新科技有限公司 一种数据处理方法、无人机、眼镜设备及存储介质
CN114205527A (zh) * 2021-12-13 2022-03-18 广州穿越千机创新科技有限公司 一种基于无人机的全景拍摄方法、装置及***
WO2022166263A1 (zh) * 2021-02-04 2022-08-11 华为技术有限公司 一种车载直播方法及装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109302632B (zh) * 2018-10-18 2021-09-28 广州酷狗计算机科技有限公司 获取直播视频画面的方法、装置、终端及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103634555A (zh) * 2012-08-27 2014-03-12 腾讯科技（深圳）有限公司 一种全景视频通信的方法及***
CN105404441A (zh) * 2014-09-10 2016-03-16 虚拟现实软件 可视化相同环境的表面数据和全景图像数据的方法
CN205265789U (zh) * 2015-12-03 2016-05-25 广州极飞电子科技有限公司 用于无人机的全景拍摄装置及无人机
CN105704501A (zh) * 2016-02-06 2016-06-22 普宙飞行器科技（深圳）有限公司 一种基于无人机全景视频的虚拟现实直播***
CN105744231A (zh) * 2016-03-18 2016-07-06 普宙飞行器科技（深圳）有限公司 无人机移动直播方法及无人机移动直播***

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8713215B2 (en) * 2009-05-29 2014-04-29 Z Microsystems, Inc. Systems and methods for image stream processing
CN104890875A (zh) * 2015-05-28 2015-09-09 天津大学 全景拍摄用多旋翼无人机
CN105775151A (zh) * 2016-01-29 2016-07-20 上海云舞网络科技有限公司 360°全景航拍摄影摄像无人机及机架框
CN106157304A (zh) * 2016-07-01 2016-11-23 成都通甲优博科技有限责任公司 一种基于多个相机的全景图拼接方法及***

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103634555A (zh) * 2012-08-27 2014-03-12 腾讯科技（深圳）有限公司 一种全景视频通信的方法及***
CN105404441A (zh) * 2014-09-10 2016-03-16 虚拟现实软件 可视化相同环境的表面数据和全景图像数据的方法
CN205265789U (zh) * 2015-12-03 2016-05-25 广州极飞电子科技有限公司 用于无人机的全景拍摄装置及无人机
CN105704501A (zh) * 2016-02-06 2016-06-22 普宙飞行器科技（深圳）有限公司 一种基于无人机全景视频的虚拟现实直播***
CN105744231A (zh) * 2016-03-18 2016-07-06 普宙飞行器科技（深圳）有限公司 无人机移动直播方法及无人机移动直播***

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019084959A1 (zh) * 2017-11-06 2019-05-09 深圳市大疆创新科技有限公司 无人机的移动终端和云端平台的交互方法及装置
CN109076193A (zh) * 2017-11-07 2018-12-21 深圳市大疆创新科技有限公司 全景图像显示方法和***、全景图像处理方法和地面站
WO2019090473A1 (zh) * 2017-11-07 2019-05-16 深圳市大疆创新科技有限公司 全景图像显示方法和***、全景图像处理方法和地面站
WO2019095382A1 (zh) * 2017-11-20 2019-05-23 深圳市大疆创新科技有限公司 无人机的图像传输方法和装置
CN107861436A (zh) * 2017-12-01 2018-03-30 上海市环境科学研究院 一种多旋翼无人机高空环境侦测***
CN109076161A (zh) * 2017-12-29 2018-12-21 深圳市大疆创新科技有限公司 一种图像处理方法、移动平台、控制设备及***
CN113890996A (zh) * 2017-12-29 2022-01-04 深圳市大疆创新科技有限公司 一种图像处理方法、移动平台、控制设备及***
CN110881093A (zh) * 2018-09-05 2020-03-13 华为技术有限公司 分布式摄像机
CN109688374A (zh) * 2018-12-12 2019-04-26 深圳慧源创新科技有限公司 无人机双路图传分屏显示技术
CN109660720B (zh) * 2018-12-12 2020-10-30 河北汉光重工有限责任公司 一种应用于陆防监控双红外低空探测***的扇扫拼接方法
CN109660720A (zh) * 2018-12-12 2019-04-19 河北汉光重工有限责任公司 一种应用于陆防监控双红外低空探测***的扇扫拼接方法
CN111247811A (zh) * 2018-12-24 2020-06-05 深圳市大疆创新科技有限公司 一种数据处理方法、无人机、眼镜设备及存储介质
CN110062153A (zh) * 2019-03-18 2019-07-26 北京当红齐天国际文化发展集团有限公司 一种全景拍照无人机***及全景拍照方法
WO2022166263A1 (zh) * 2021-02-04 2022-08-11 华为技术有限公司 一种车载直播方法及装置
CN114205527A (zh) * 2021-12-13 2022-03-18 广州穿越千机创新科技有限公司 一种基于无人机的全景拍摄方法、装置及***

Also Published As

Publication number Publication date
WO2018094866A1 (zh) 2018-05-31

Similar Documents

Publication Publication Date Title
CN106657733A (zh) 一种基于无人机的全景直播方法及终端
US11924394B2 (en) Methods and apparatus for receiving and/or using reduced resolution images
US11153615B2 (en) Method and apparatus for streaming panoramic video
CN104902263A (zh) 一种图像信息展现***和方法
CN105657438A (zh) 一种全景直播视频资源的处理方法及装置
US9327199B2 (en) Multi-tenancy for cloud gaming servers
CN109511004A (zh) 一种视频处理方法及装置
CN106791580A (zh) 一种会议处理方法及装置
CN107945101A (zh) 图像处理方法和装置
CN107071279A (zh) 一种全景图像画面稳定的方法及***
CN114827647B (zh) 直播数据生成方法、装置、设备、介质及程序产品
CN205408064U (zh) 虚拟现实全景多媒体处理***及客户端设备
CN106445121A (zh) 虚拟现实设备与终端的交互方法和装置
CN104918037B (zh) 3d图像显示装置和方法以及移动终端
CN105828130A (zh) 多终端节目同步预览方法和装置
CN206117889U (zh) 一种双目720度全景采集***
US9232179B2 (en) Portable video-telecommunication device, data transmission method, in particular audio/video data, and other application
CN202957918U (zh) 终端设备用视频采集器
CN115278364B (zh) 一种视频流合成方法及装置
CN112261438B (zh) 视频增强方法、装置、设备以及存储介质
CN107682709A (zh) 发射器、视频信号的发射或接收方法及装置
Takacs PanoMOBI: panoramic mobile entertainment system
CN106060611A (zh) 一种数据处理方法、装置及***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170510

RJ01 Rejection of invention patent application after publication