CN106961622B - 一种显示处理方法及装置 - Google Patents
一种显示处理方法及装置 Download PDFInfo
- Publication number
- CN106961622B CN106961622B CN201710200445.8A CN201710200445A CN106961622B CN 106961622 B CN106961622 B CN 106961622B CN 201710200445 A CN201710200445 A CN 201710200445A CN 106961622 B CN106961622 B CN 106961622B
- Authority
- CN
- China
- Prior art keywords
- image stream
- view
- field
- image
- sub
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 238000000034 method Methods 0.000 claims abstract description 22
- 230000000007 visual effect Effects 0.000 claims abstract description 21
- 238000004891 communication Methods 0.000 claims description 14
- 230000008569 process Effects 0.000 abstract description 14
- 230000005540 biological transmission Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000013144 data compression Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/426—Internal components of the client ; Characteristics thereof
- H04N21/42607—Internal components of the client ; Characteristics thereof for processing the incoming bitstream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明公开了一种显示处理方法及装置,该方法包括:获得第一图像流,所述第一图像流对应第一视野;获得第二图像流,所述第二图像流至少对应所述第一视野之外的视野,所述第二图像流中的单位数据的数据量小于所述第一图像流中的单位数据数据量;显示所述第一图像流。用户可以通过终端等电子设备以显示的图像中的一观察点进行大于视野的观看相应地点图像(如实时影像),并在观看过程中保证了影像的清晰度,用户体验好。
Description
技术领域
本发明涉及图像处理领域,特别涉及一种显示处理方法及装置。
背景技术
目前针对不同的应用目的可以对获取的影像进行多种形式的显示处理,特别是在对全景影像的应用和显示处理上更使得该全景影像能够方便的服务于用户,全景影像可以在观察点以一定的视野范围观看相应的实时影像(直播影像),通常情况下该全景影像具有较高的清晰度,但是当在该观察点以其他的视野(如转动了一定角度)观看相应的实时影像时也要求图像具有较高的清晰度,但是如果满足这些要求影像文件会很大,处理清晰度较高的大文件要求硬件的配置也较高,还有的是,由于在具体使用时用户往往不会同时观看整个全景影像,而是会分视角分时间逐步观看,这样便会造成硬件和网络带宽的巨大浪费。
发明内容
本发明实施例的目的在于提供一种显示处理方法及装置。该方法满足用户观看全景影像等图像时能够看到清晰度高的图像,同时对相应的硬件的配置要求降低了。
为了解决上述技术问题,本发明的实施例采用了如下技术方案:一种显示处理方法,包括:
获得第一图像流,所述第一图像流对应第一视野;
获得第二图像流,所述第二图像流至少对应所述第一视野之外的视野,所述第二图像流中的单位数据的数据量小于所述第一图像流中的单位数据数据量;
显示所述第一图像流。
作为优选,该方法还包括:
获得视野调整参数,所述视野调整参数是表明从从第一视野调整为第二视野的参数;
依据所述调整参数,至少依据第二图像流,确定对应所述第二视野的第三图像流;
显示对应所述第二视野的所述第三图像流。
作为优选,该方法还包括:
获得所述第三图像流对应的第四图像流,其中,所述第三图像流的单位数据数据量小于所述第四图像流的单位数据数据量,所述第三图像流的单位数据数据量等于第二图像流的单位数据数据量,所述第四图像流的单位数据数据量等于第一图像流的单位数据数据量;
显示对应所述第二视野的所述第四图像流。
作为优选,所述第二图像流对应的视野包括所述第一视野,或者所述第二图像流对应的视野与所述第一视野相邻;
或者
所述第二图像流对应的视野与所述第一视野组成全视野,或者所述第二图像流对应的视野是全视野,或者所述第二图像流对应的视野与所述第一视野组成的视野小于全视野。
作为优选,,依据所述调整参数,至少依据第二图像流,确定对应所述第二视野的第三图像流包括:如果所述第二视野包括第一视野的部分区域,
降低该第一视野的部分区域对应的第一图像流的单位数据数据量,获得对应所述部分区域的第一子图像流;从所述第二图像流中获得所述第二视野内除所述部分区域以外区域的第二子图像流;依据所述第一子图像流和所述第二子图像流以生成所述第三图像流;
或者
从第一图像流中获得对应所述部分区域的第一子图像流,从所述第二图像流中获得所述第二视野内除所述部分区域以外区域的第二子图像流;依据所述第一子图像流和所述第二子图像流以生成所述第三图像流,其中,所述第一子图像流的单位数据的数据量大于所述第二子图像流的单位数据数据量。
作为优选,,依据所述调整参数,至少依据第二图像流,确定对应所述第二视野的第三图像流包括:
如果所述第二视野不包括所述第一视野的部分区域,从所述第二图像流中获得所述第二视野对应的所述第三图像流。
本发明实施例还提供了一种显示处理装置,包括:
通信装置,用于获得第一图像流和第二图像流,所述第一图像流对应第一视野,所述第二图像流至少对应所述第一视野之外的视野,所述第二图像流中的单位数据的数据量小于所述第一图像流中的单位数据数据量;
显示装置,用于显示所述第一图像流。
作为优选,该装置还包括:
采集装置,用于获得视野调整参数,所述视野调整参数是表明从从第一视野调整为第二视野的参数;
处理装置,用于依据所述调整参数,至少依据第二图像流,确定对应所述第二视野的第三图像流;
其中,所述显示装置能显示对应所述第二视野的所述第三图像流。
作为优选,所述通信装置能获得所述第三图像流对应的第四图像流,其中,所述第三图像流的单位数据数据量小于所述第四图像流的单位数据数据量,所述第三图像流的单位数据数据量等于第二图像流的单位数据数据量,所述第四图像流的单位数据数据量等于第一图像流的单位数据数据量;
所述显示装置能显示对应所述第二视野的所述第四图像流。
作为优选,所述处理装置能依据所述调整参数,至少依据第二图像流,确定对应所述第二视野的第三图像流执行:如果所述第二视野包括第一视野的部分区域,
降低该第一视野的部分区域对应的第一图像流的单位数据数据量,获得对应所述部分区域的第一子图像流;从所述第二图像流中获得所述第二视野内除所述部分区域以外区域的第二子图像流;依据所述第一子图像流和所述第二子图像流以生成所述第三图像流;
或者
能从第一图像流中获得对应所述部分区域的第一子图像流,从所述第二图像流中获得所述第二视野内除所述部分区域以外区域的第二子图像流;依据所述第一子图像流和所述第二子图像流以生成所述第三图像流,其中,所述第一子图像流的单位数据的数据量大于所述第二子图像流的单位数据数据量。
本发明实施例的有益效果在于:用户可以通过终端等电子设备以显示的图像中的一观察点进行大于视野的观看相应地点图像(如实时影像),并在观看过程中保证了影像的清晰度,用户体验好。
附图说明
图1为本发明实施例的显示处理方法的流程图;
图2为本发明实施例的显示处理方法的显示第三图像流的流程图;
图3为本发明实施例的显示处理装置的连接结构框图;
图4为本发明实施例的第一视野和第二视野关系的第一种示意图;
图5为本发明实施例的第一视野和第二视野关系的第二种示意图;
图6为本发明实施例的第一视野和第二视野关系的第三种示意图;
图7为本发明实施例的第一视野和第二视野关系的第四种示意图;
图8为本发明实施例的第一视野和第二视野关系的第五种示意图。
附图标记说明
1-显示处理装置 2-通信装置 3-显示装置
4-采集装置 5-处理装置 6-服务器
7-第一视野 8-第二视野 9-观察点
具体实施方式
此处参考附图描述本发明的各种方案以及特征。
应理解的是,可以对此处公开的实施例做出各种修改。因此,上述说明书不应该视为限制,而仅是作为实施例的范例。本领域的技术人员将想到在本发明的范围和精神内的其他修改。
包含在说明书中并构成说明书的一部分的附图示出了本发明的实施例,并且与上面给出的对本发明的大致描述以及下面给出的对实施例的详细描述一起用于解释本发明的原理。
通过下面参照附图对给定为非限制性实例的实施例的优选形式的描述,本发明的这些和其它特性将会变得显而易见。
还应当理解,尽管已经参照一些具体实例对本发明进行了描述,但本领域技术人员能够确定地实现本发明的很多其它等效形式,它们具有如权利要求所述的特征并因此都位于借此所限定的保护范围内。
当结合附图时,鉴于以下详细说明,本发明的上述和其他方面、特征和优势将变得更为显而易见。
此后参照附图描述本发明的具体实施例;然而,应当理解,所公开的实施例仅仅是本发明的实例,其可采用多种方式实施。熟知和/或重复的功能和结构并未详细描述以避免不必要或多余的细节使得本发明模糊不清。因此,本文所公开的具体的结构性和功能性细节并非意在限定,而是仅仅作为权利要求的基础和代表性基础用于教导本领域技术人员以实质上任意合适的详细结构多样地使用本发明。
本说明书可使用词组“在一种实施例中”、“在另一个实施例中”、“在又一实施例中”或“在其他实施例中”,其均可指代根据本发明的相同或不同实施例中的一个或多个。
本发明实施例的一种显示处理方法,能够应用在对全景图像处理的过程中,图1为显示处理方法的流程图,该显示处理方法包括:
获得第一图像流,第一图像流对应第一视野7(例如可以从服务器6获得)。在一个实施例中,终端等电子设备在第一视野7能够显示第一图像流对应的影像,并且该影像为清晰度高的图像,该第一图像流可以通过图像获取设备(例如摄像头)以多个视野拍摄的图像拼接而成,而终端等电子设备可以通过有线或无线的方式获得该第一图像流,用户可以使用终端等电子设备清楚的观看到第一视野7的第一图像流对应的图像;
获得第二图像流,第二图像流至少对应第一视野7之外的视野,第二图像流中的单位数据的数据量小于第一图像流中的单位数据数据量。具体来说,第二图像流对应的图像至少对应了从第一视野7之外的视野显示的图像,在第一视野7之外的视野能够显示第二图像流对应的图像。在一个实施例中,第二图像流不对应第一视野7;在另一个实施例中,第二图像流对应了一部分第一视野7和一部分第一视野7之外的视野;在又一个实施例中,第二图像流对应了全部的第一视野7和一部分第一视野7之外的视野。第二图像流对应的图像相对第一图像流对应的图像为清晰度低的图像,即第二图像流中的单位数据的数据量小于第一图像流中的单位数据数据量。在一个实施例中,终端等电子设备可以从服务器6获得第二图像流,而服务器6可以对第一图像流处理生成第二图像流,并将第二图像流发送至终端等电子设备,,例如服务器6可以对第一图像流对应的图像进行降低分辨率或数据压缩处理以生成第二图像流,以使终端等电子设备获得该第二图像流;在另一个实施例中,终端等电子设备可以从服务器6获得第二图像流,而服务器6可以在实际采集图像时便直接获得的低分辨率的易调用的图像数据,并形成该第二图像流;
显示第一图像流,例如可以通过终端等电子设备在第一视野7内显示第一图像流对应的图像,终端等电子设备可以从第一视野7转化为其他视野(如用户可以根据需要使终端等电子设备的显示从第一视野7转换为第二视野8),第一视野7内显示第一图像流单位数据数据量高(如高于第二图像流),对应的画质好使得用户体验好,但如果转换为第二视野8等其他视野,则能够使相应的硬件快速传输或处理数据总量较低的其他图像流(如第二图像流),例如如果用户需要从第一视野7转换为第二视野8时,服务器6可以快速处理,终端设备和网络设备等也能够快速响应。进一步来说,当从第一视野7转而从其他视野显示全景图像时,由于第一图像流和第二图像流的单位数据数据量不同,因此在转换视野时显示的图像(例如用户看到的图像)为单位数据数据量高的图像,而没有显示的图像(例如用户没有看到的图像)设为单位数据数据量低的图像,方便硬件设备进行处理,这样既能保证用户的正常使用,又能降低对相应硬件设备的配置要求(低配置的硬件设备也能够满足用户正常观看高清晰度的图像)。
如图2所示,该显示处理方法还包括:获得视野调整参数,视野调整参数是表明从第一视野7调整为第二视野8的参数,例如视野调整参数可以包括从第一视野7调整为第二视野8时的坐标,位置,转动方向,转动角度或转动时间等数据,例如终端等电子设备可以通过这些参数准确的从第一视野7切换为第二视野8;
依据调整参数,至少依据第二图像流,确定对应第二视野8的第三图像流。结合图4和图5,确定第二视野8可以有多种情况,终端等电子设备显示的图像以一观察点9转动,但转动角度较小,第二视野8中包含的图像包括了部分的第一视野7中的图像,或者转动角度较大,第二视野8中包含的图像没有包括第一视野7中的图像,而第三图像流的单位数据数据量可以等于第二图像流的单位数据数据量,也就是第三图像流对应的图像的分辨率较低,容易被硬件设备处理,但在确定第二视野8对应的第三图像流时需要至少依据第二图像流,如可以部分依据第二图像流部分依据第一图像流获得第三图像流;
显示对应第二视野8的第三图像流。在一个实施例中,显示该第三图像流对应的图像是分辨率较低的图像,这时由于转到第二视野8如果立即显示高分辨率的图像时会对硬件配置要求极高并会消耗大量的***资源,而该第三图像流对应的图像由于分辨率低,整体文件量少,能够非常容易被配置低的硬件调用,对于用户来说在使用低配置的硬件查看全景图像时也能够在一视野立刻看到该视野对应的图像,即使图像的分辨率较低,也是符合用户的使用心里,甚至满足部分用户查看图像大略的需求。
在一个实施例中,该显示处理方法需要获得第三图像流对应的第四图像流,显示对应第二视野8的第四图像流,其中,第三图像流的单位数据数据量小于第四图像流的单位数据数据量,第三图像流的单位数据数据量等于第二图像流的单位数据数据量,第四图像流的单位数据数据量等于第一图像流的单位数据数据量。具体来说,该第四图像流和第一图像流均对应了分辨率高的图像,第四图像流对应的图像的画质可以等于第一图像流对应的图像的画质,这样可以将第一图像流直接快速转化为第四图像流;该第三图像流和第二图像流均对应了分辨率低的图像,第三图像流对应的图像的画质可以等于第二图像流对应的图像的画质,这样可以将第二图像流直接快速转化为第三图像流从而快速获得第三图像流,进而获得第四图像流。终端等电子设备在显示图像时,由显示第三图像流对应的分辨率低的图像转而显示第四图像流对应的分辨率高的图像,使得用户使用低配置的硬件还能最终在第二视野8看到高分辨率的图像,在一个实施例中,当终端等电子设备准备显示第四图像流对应的图像时,首先会向服务器6发送获取请求,服务器6响应该获取请求后,可以根据该获取请求调用第四图像流(第四图像流的单位数据数据量,对应的图像画质好)并将其发送至终端等电子设备,终端等电子设备获得第四图像流后将显示响应的图像(高画质)。
在另一个实施例中,该显示处理方法需要获得第三图像流对应的第四图像流,显示对应第二视野8的第四图像流,其中,第三图像流的单位数据数据量小于第四图像流的单位数据数据量。这样保证第三图像流对应的图像相对第四图像流对应的图像分辨率低,容易被硬件调用,并且最终能够在第二视野8显示第四图像流对应的分辨率高的图像。
下面结合图5至图8对第一视野7进行说明,第二图像流对应的视野包括第一视野7,或者第二图像流对应的视野与第一视野7相邻。例如第一视野7为正前方60度,当终端等电子设备为了获得一全景图像,以图像中的一观察点9向左或向右扩大了视野范围如扩大的视野为正前方120度,同时获得第二图像流(该第二图像流的单位数据数据量低,使得服务器相应的处理量较小,网络传输设备的传输量小,终端等电子设备的响应时间短),则该第二图像流对应的视野包括第一视野7,即该正前方120度的视野包括了正前方60度的第一视野7,或者当终端等电子设备显示的图像以一观察点9向左或向右旋转了一定的角度,旋转后得到的新视野不在第一视野7内而是与其相邻,即第二图像流对应的视野与第一视野7相邻,例如第一视野7为正前方60度,当终端等电子设备显示的图像以一观察点9向左转过60度得到的视野与第一视野7相邻;或者,
第二图像流对应的视野与第一视野7组成全视野(如图7所示),或者第二图像流对应的视野是全视野,或者第二图像流对应的视野与第一视野7组成的视野小于全视野,因此该组成的视野或全视野对应的图像流中至少包括了相应的第二图像流,所以这将使得服务器相应的处理量较小,网络传输设备的传输量小,终端等电子设备的响应时间短。例如第一视野7为正前方60度,第二图像流对应的视野为360度中除去正前方60度的视野,或者第二图像流对应的视野是360度的全视野,或者第一视野7为正前方60度,第二图像流对应的视野为120度,此时的第二图像流对应的视野与第一视野7组成的视野小于360度全视野。
依据调整参数,至少依据第二图像流,确定对应第二视野8的第三图像流包括:如果第二视野8包括第一视野7的部分区域,如图4所示,例如终端等电子设备显示的图像以一观察点9向左或向右旋转了较小的角度,形成第二视野8,该第二视野8包括了第一视野7的部分区域,
降低该第一视野7的部分区域对应的第一图像流的单位数据数据量(例如第一视野7为正前方60度,部分区域为左侧的20度,可以降低左侧20度的第一图像流的单位数据数据量),获得对应部分区域的第一子图像流;从第二图像流中获得第二视野8内除部分区域以外区域的第二子图像流;依据第一子图像流和第二子图像流以生成第三图像流。在一个实施例中,降低第一视野7的部分区域对应的图像的画质,从而获得对应部分区域的第一子图像流,该第一子图像流的单位数据数据量低于第一图像流的单位数据数据量,优选等于第二图像流的单位数据数据量,而获得的第二子图像流的单位数据数据量等于第二图像流的单位数据数据量,第一子图像流和第二子图像流的单位数据数据量相同(两个图像流对应的图像分辨率相同),依据第一子图像流和第二子图像流以生成第三图像流;或者
从第一图像流中获得对应部分区域的第一子图像流,从第二图像流中获得第二视野8内除部分区域以外区域的第二子图像流;依据第一子图像流和第二子图像流以生成第三图像流,其中,第一子图像流的单位数据的数据量大于第二子图像流的单位数据数据量。该步骤不会首先将第一子图像流对应图像的分辨率降低,而是先保持第一子图像流对应图像的分辨率,最后统一对第一子图像流和第二子图像流进行处理生成第三图像流。
在本发明的一个实施例中,依据调整参数,至少依据第二图像流,确定对应第二视野8的第三图像流包括:如果第二视野8不包括第一视野7的部分区域,如图5至图7所示,从第二图像流中获得第二视野8对应的第三图像流。例如第一视野7为正前方60度,第二视野8为侧后方60度,即终端等电子设备以图像中的观察点9为基准转过了较大的角度,从第二图像流(单位数据数据量低)中获得第二视野8对应的第三图像流,该第三图像流的单位数据数据量与第二图像流的单位数据数据量相同。
本发明实施例的一种显示处理装置1,能够应用在对全景图像处理的过程中,图3为显示处理装置的连接结构框图(可以与服务器连接),包括通信装置2和显示装置3:
通信装置2用于获得第一图像流和第二图像流(例如可以从服务器6获得),第一图像流对应第一视野7,第二图像流至少对应第一视野7之外的视野,第二图像流中的单位数据的数据量小于第一图像流中的单位数据数据量;显示装置3用于显示第一图像流。在一个实施例中,显示装置3在第一视野7能够显示的第一图像流对应的影像,并且该影像为清晰度高的图像,该第一图像流可以通过图像获取设备(例如摄像头)以多个视野拍摄的图像拼接而成,而终端等电子设备的通信装置2可以通过有线或无线的方式从服务器6等设备获得该第一图像流,用户可以使用终端等电子设备的显示装置3清楚的观看到第一视野7的第一图像流对应的图像。
第二图像流对应的图像至少对应了从第一视野7之外的视野显示的图像,在第一视野7之外的视野能够显示第二图像流对应的图像。在一个实施例中,第二图像流不对应第一视野7;在另一个实施例中,第二图像流对应了一部分第一视野7和一部分第一视野7之外的视野;在又一个实施例中,第二图像流对应了全部的第一视野7和一部分第一视野7之外的视野。第二图像流对应的图像相对第一图像流对应的图像为清晰度低的图像,即第二图像流中的单位数据的数据量小于第一图像流中的单位数据数据量。在一个实施例中,通信装置2可以从服务器6获得第二图像流,而服务器6可以对第一图像流处理生成第二图像流,并将第二图像流发送至通信装置2,例如可以对第一图像流对应的图像进行降低分辨率或数据压缩处理以生成第二图像流,以使终端等电子设备获得该第二图像流;在另一个实施例中,通信装置2可以从服务器6获得第二图像流,而服务器6可以在实际采集图像时便直接获得的低分辨率的易调用的图像数据,并形成该第二图像流;
对于显示装置3显示第一图像流,例如可以通过终端等电子设备的显示装置3在第一视野7内显示第一图像流对应的图像,显示装置3可以从第一视野7转化为其他视野(如用户可以根据需要使显示装置3的显示从第一视野7转换为第二视野8),第一视野7内显示第一图像流单位数据数据量高(如高于第二图像流),对应的画质好使得用户体验好,但如果转换为第二视野8等其他视野,则能够使相应的硬件快速传输或处理数据总量较低的其他图像流(如第二图像流),例如如果用户需要从第一视野7转换为第二视野8时,服务器6可以快速处理,终端设备和网络设备等也能够快速响应。进一步来说,当从显示装置3显示的第一视野7转而从其他视野显示全景图像时,由于第一图像流和第二图像流的单位数据数据量不同,因此在转换视野时显示装置3显示的图像(例如用户看到的图像)为单位数据数据量高的图像,而显示装置3没有显示的图像(例如用户没有看到的图像)设为单位数据数据量低的图像,方便硬件设备进行处理,这样既能保证用户的正常使用,又能降低对相应硬件设备的配置要求(低配置的硬件设备也能够满足用户正常观看高清晰度的图像)。
继续结合图3,显示处理装置1还包括采集装置4和处理装置5:采集装置4用于获得视野调整参数,视野调整参数是表明从第一视野7调整为第二视野8的参数,例如视野调整参数可以包括从第一视野7调整为第二视野8时的坐标,位置,转动方向,转动角度或转动时间等数据,例如终端等电子设备的采集装置4可以通过这些参数准确的从第一视野7切换为第二视野8;
处理装置5用于依据调整参数,至少依据第二图像流,确定对应第二视野8的第三图像流;处理装置5确定第二视野8可以有多种情况,结合图4和图5,例如终端等电子设备显示的图像以一观察点9转动,但转动角度较小,第二视野8中包含的图像包括了部分的第一视野7中的图像,或者转动角度较大,第二视野8中包含的图像没有包括第一视野7中的图像,而第三图像流的单位数据数据量可以等于第二图像流的单位数据数据量,也就是第三图像流对应的图像的分辨率较低,容易被硬件设备处理,但在确定第二视野8对应的第三图像流时需要至少依据第二图像流,如可以部分依据第二图像流部分依据第一图像流获得第三图像流;
显示装置3能显示对应第二视野8的所述第三图像流。在一个实施例中,显示该第三图像流对应的图像是分辨率较低的图像,这时由于转到第二视野8如果立即显示高分辨率的图像时会对硬件配置要求极高并会消耗大量的***资源,而该第三图像流对应的图像由于分辨率低,整体文件量少,能够非常容易被配置低的硬件调用,对于用户来说在使用低配置的硬件查看全景图像时也能够在一视野立刻看到该视野对应的图像,即使图像的分辨率较低,也是符合用户的使用心里,甚至满足部分用户查看图像大略的需求。
在一个实施例中,通信装置2能获得第三图像流对应的第四图像流,显示对应第二视野8的第四图像流,其中,第三图像流的单位数据数据量小于第四图像流的单位数据数据量,第三图像流的单位数据数据量等于第二图像流的单位数据数据量,第四图像流的单位数据数据量等于第一图像流的单位数据数据量。具体来说,该第四图像流和第一图像流均对应了分辨率高的图像,第四图像流对应的图像的画质可以等于第一图像流对应的图像的画质,这样可以将第一图像流直接快速转化为第四图像流;该第三图像流和第二图像流均对应了分辨率低的图像,第三图像流对应的图像的画质可以等于第二图像流对应的图像的画质,这样可以将第二图像流直接快速转化为第三图像流从而使通信装置2快速获得第三图像流,进而获得第四图像流。显示装置3能显示对应第二视野8的第四图像流时,由显示第三图像流对应的分辨率低的图像转而显示第四图像流对应的分辨率高的图像,使得用户使用低配置的硬件还能最终在第二视野8看到高分辨率的图像,在一个实施例中,当显示装置3显示第四图像流对应的图像时,通信装置2首先会向服务器6发送获取请求,服务器6响应该获取请求后,可以根据该获取请求调用第四图像流(第四图像流的单位数据数据量,对应的图像画质好)并将其发送至通信装置2,显示装置3获得第四图像流后将显示响应的图像(高画质)。
在另一个实施例中,通信装置2能够获得第三图像流对应的第四图像流,显示对应第二视野8的第四图像流,其中,第三图像流的单位数据数据量小于第四图像流的单位数据数据量。这样保证第三图像流对应的图像相对第四图像流对应的图像分辨率低,容易被硬件调用,并且最终能够在第二视野8显示第四图像流对应的分辨率高的图像。
处理装置5能依据调整参数,至少依据第二图像流,确定对应第二视野8的第三图像流执行:如图4所示,如果第二视野8包括第一视野7的部分区域,例如终端等电子设备的显示装置3显示的图像以一观察点9向左或向右旋转了较小的角度,形成第二视野8,该第二视野8包括了第一视野7的部分区域,
降低该第一视野7的部分区域对应的第一图像流的单位数据数据量(例如第一视野7为正前方60度,部分区域为左侧的20度,可以降低左侧20度的第一图像流的单位数据数据量),获得对应部分区域的第一子图像流;从第二图像流中获得第二视野8内除部分区域以外区域的第二子图像流;依据第一子图像流和第二子图像流以生成第三图像流。在一个实施例中,降低第一视野7的部分区域对应的图像的画质,从而获得对应部分区域的第一子图像流,该第一子图像流的单位数据数据量低于第一图像流的单位数据数据量,优选等于第二图像流的单位数据数据量,而获得的第二子图像流的单位数据数据量等于第二图像流的单位数据数据量,第一子图像流和第二子图像流的单位数据数据量相同(两个图像流对应的图像分辨率相同),依据第一子图像流和第二子图像流以生成第三图像流;或者
处理装置5能从第一图像流中获得对应部分区域的第一子图像流,从第二图像流中获得第二视野8内除部分区域以外区域的第二子图像流;依据第一子图像流和第二子图像流以生成第三图像流,其中,第一子图像流的单位数据的数据量大于第二子图像流的单位数据数据量。该过程不会首先将第一子图像流对应图像的分辨率降低,而是先保持第一子图像流对应图像的分辨率,最后处理装置5统一对第一子图像流和第二子图像流进行处理生成第三图像流。
此外,处理装置5能依据调整参数,至少依据第二图像流,确定对应第二视野8的第三图像流执行:如果第二视野8不包括第一视野7的部分区域,从第二图像流中获得第二视野8对应的第三图像流。
以上实施例仅为本发明的示例性实施例,不用于限制本发明,本发明的保护范围由权利要求书限定。本领域技术人员可以在本发明的实质和保护范围内,对本发明做出各种修改或等同替换,这种修改或等同替换也应视为落在本发明的保护范围内。
Claims (6)
1.一种显示处理方法,包括:
获得第一图像流,所述第一图像流对应第一视野;
获得第二图像流,所述第二图像流至少对应所述第一视野之外的视野,所述第二图像流中的单位数据的数据量小于所述第一图像流中的单位数据数据量;
显示所述第一图像流;其中,
所述方法还包括:获得视野调整参数,所述视野调整参数是表明从第一视野调整为第二视野的参数;依据所述调整参数,至少依据第二图像流,确定对应所述第二视野的第三图像流;显示对应所述第二视野的所述第三图像流;其中,
获得所述第三图像流对应的第四图像流,其中,所述第三图像流的单位数据数据量小于所述第四图像流的单位数据数据量,所述第三图像流的单位数据数据量等于第二图像流的单位数据数据量,所述第四图像流的单位数据数据量等于第一图像流的单位数据数据量;显示对应所述第二视野的所述第四图像流。
2.根据权利要求1所述的方法,其中,所述第二图像流对应的视野包括所述第一视野,或者所述第二图像流对应的视野与所述第一视野相邻;
或者
所述第二图像流对应的视野与所述第一视野组成全视野,或者所述第二图像流对应的视野是全视野,或者所述第二图像流对应的视野与所述第一视野组成的视野小于全视野。
3.根据权利要求1所述的方法,依据所述调整参数,至少依据第二图像流,确定对应所述第二视野的第三图像流包括:如果所述第二视野包括第一视野的部分区域,
降低该第一视野的部分区域对应的第一图像流的单位数据数据量,获得对应所述部分区域的第一子图像流;从所述第二图像流中获得所述第二视野内除所述部分区域以外区域的第二子图像流;依据所述第一子图像流和所述第二子图像流以生成所述第三图像流;
或者
从第一图像流中获得对应所述部分区域的第一子图像流,从所述第二图像流中获得所述第二视野内除所述部分区域以外区域的第二子图像流;依据所述第一子图像流和所述第二子图像流以生成所述第三图像流,其中,所述第一子图像流的单位数据的数据量大于所述第二子图像流的单位数据数据量。
4.根据权利要求1所述的方法,依据所述调整参数,至少依据第二图像流,确定对应所述第二视野的第三图像流包括:
如果所述第二视野不包括所述第一视野的部分区域,从所述第二图像流中获得所述第二视野对应的所述第三图像流。
5.一种显示处理装置,包括:
通信装置,用于获得第一图像流和第二图像流,所述第一图像流对应第一视野,所述第二图像流至少对应所述第一视野之外的视野,所述第二图像流中的单位数据的数据量小于所述第一图像流中的单位数据数据量;
显示装置,用于显示所述第一图像流;其中,
所述装置还包括:
采集装置,用于获得视野调整参数,所述视野调整参数是表明从第一视野调整为第二视野的参数;
处理装置,用于依据所述调整参数,至少依据第二图像流,确定对应所述第二视野的第三图像流;
其中,所述显示装置能显示对应所述第二视野的所述第三图像流;其中,
所述通信装置能获得所述第三图像流对应的第四图像流,其中,所述第三图像流的单位数据数据量小于所述第四图像流的单位数据数据量,所述第三图像流的单位数据数据量等于第二图像流的单位数据数据量,所述第四图像流的单位数据数据量等于第一图像流的单位数据数据量;所述显示装置能显示对应所述第二视野的所述第四图像流。
6.根据权利要求5所述的装置,其中,
所述处理装置能依据所述调整参数,至少依据第二图像流,确定对应所述第二视野的第三图像流执行:如果所述第二视野包括第一视野的部分区域,
降低该第一视野的部分区域对应的第一图像流的单位数据数据量,获得对应所述部分区域的第一子图像流;从所述第二图像流中获得所述第二视野内除所述部分区域以外区域的第二子图像流;依据所述第一子图像流和所述第二子图像流以生成所述第三图像流;
或者
能从第一图像流中获得对应所述部分区域的第一子图像流,从所述第二图像流中获得所述第二视野内除所述部分区域以外区域的第二子图像流;依据所述第一子图像流和所述第二子图像流以生成所述第三图像流,其中,所述第一子图像流的单位数据的数据量大于所述第二子图像流的单位数据数据量。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710200445.8A CN106961622B (zh) | 2017-03-30 | 2017-03-30 | 一种显示处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710200445.8A CN106961622B (zh) | 2017-03-30 | 2017-03-30 | 一种显示处理方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106961622A CN106961622A (zh) | 2017-07-18 |
CN106961622B true CN106961622B (zh) | 2020-09-25 |
Family
ID=59471064
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710200445.8A Active CN106961622B (zh) | 2017-03-30 | 2017-03-30 | 一种显示处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106961622B (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104182999A (zh) * | 2013-05-21 | 2014-12-03 | 百度在线网络技术(北京)有限公司 | 一种全景内动画跳转方法及*** |
US9007432B2 (en) * | 2010-12-16 | 2015-04-14 | The Massachusetts Institute Of Technology | Imaging systems and methods for immersive surveillance |
CN105022818A (zh) * | 2015-07-08 | 2015-11-04 | 纪兴瑞 | 瓦片图存储及加载方法 |
CN105677275A (zh) * | 2015-12-31 | 2016-06-15 | 北京小鸟看看科技有限公司 | 一种界面布局方法和环绕式界面*** |
CN106453913A (zh) * | 2016-10-31 | 2017-02-22 | 北京疯景科技有限公司 | 预览全景内容的方法及装置 |
US9588215B1 (en) * | 2012-02-14 | 2017-03-07 | C360 Technologies, Inc. | Object tracking and data aggregation in panoramic video |
CN106537894A (zh) * | 2014-07-14 | 2017-03-22 | 索尼互动娱乐股份有限公司 | 用于回放全景视频内容的***和方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8953079B2 (en) * | 2012-12-31 | 2015-02-10 | Texas Instruments Incorporated | System and method for generating 360 degree video recording using MVC |
CN106060513B (zh) * | 2016-06-29 | 2017-11-21 | 深圳市优象计算技术有限公司 | 一种用于柱面立体全景视频网络播放的码流缓存方法 |
CN106210692A (zh) * | 2016-06-30 | 2016-12-07 | 深圳市虚拟现实科技有限公司 | 基于瞳孔检测的远程全景图像实时传输和显示方法 |
CN106101847A (zh) * | 2016-07-12 | 2016-11-09 | 三星电子(中国)研发中心 | 全景视频交互传输的方法和*** |
CN106254940B (zh) * | 2016-09-23 | 2019-11-01 | 北京疯景科技有限公司 | 播放全景内容的方法及装置 |
CN106454321A (zh) * | 2016-10-26 | 2017-02-22 | 深圳市道通智能航空技术有限公司 | 全景视频的处理方法、装置及*** |
-
2017
- 2017-03-30 CN CN201710200445.8A patent/CN106961622B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9007432B2 (en) * | 2010-12-16 | 2015-04-14 | The Massachusetts Institute Of Technology | Imaging systems and methods for immersive surveillance |
US9588215B1 (en) * | 2012-02-14 | 2017-03-07 | C360 Technologies, Inc. | Object tracking and data aggregation in panoramic video |
CN104182999A (zh) * | 2013-05-21 | 2014-12-03 | 百度在线网络技术(北京)有限公司 | 一种全景内动画跳转方法及*** |
CN106537894A (zh) * | 2014-07-14 | 2017-03-22 | 索尼互动娱乐股份有限公司 | 用于回放全景视频内容的***和方法 |
CN105022818A (zh) * | 2015-07-08 | 2015-11-04 | 纪兴瑞 | 瓦片图存储及加载方法 |
CN105677275A (zh) * | 2015-12-31 | 2016-06-15 | 北京小鸟看看科技有限公司 | 一种界面布局方法和环绕式界面*** |
CN106453913A (zh) * | 2016-10-31 | 2017-02-22 | 北京疯景科技有限公司 | 预览全景内容的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN106961622A (zh) | 2017-07-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2016065913A1 (zh) | 视频图像的处理方法、设备及*** | |
US9165535B2 (en) | System and method for determining a zoom factor of content displayed on a display device | |
CN108933920B (zh) | 一种视频画面的输出、查看方法及装置 | |
CN105407280B (zh) | 全景图像合成方法和*** | |
US9723190B2 (en) | Video surveillance method, device, and system | |
US20150304360A1 (en) | Videoconferencing Information Presentation Method, Apparatus, and System | |
JP5317630B2 (ja) | 画像配信装置、方法及びプログラム | |
CN112770050B (zh) | 视频展示方法及装置、计算机可读介质和电子设备 | |
WO2009138015A1 (zh) | 一种图像呈现方法及装置 | |
CN106375682B (zh) | 影像处理方法、装置与可移动设备、无人机遥控器及*** | |
US20180338093A1 (en) | Eye-tracking-based image transmission method, device and system | |
WO2014030405A1 (ja) | 表示装置、表示方法、テレビジョン受信機及び表示制御装置 | |
CN106412617B (zh) | 远程调试控制方法及装置 | |
CN103747210A (zh) | 视频监控***的数据处理方法及其装置 | |
CN111147883A (zh) | 直播方法、装置、头戴显示设备和可读存储介质 | |
CN103997616B (zh) | 一种处理视频会议画面的方法、装置及会议终端 | |
CN106792084B (zh) | 电视信号显示参数的调整方法及装置、电视信号显示方法 | |
CN111083368A (zh) | 一种基于云端的模拟物理云台全景视频展示*** | |
US9699402B2 (en) | Method and apparatus for transmitting video signal | |
CN106961622B (zh) | 一种显示处理方法及装置 | |
CN103873939A (zh) | 一种视频处理方法以及一种电子设备 | |
JP2019149785A (ja) | 映像変換装置及びプログラム | |
CN104811802A (zh) | 图像播放方法及装置 | |
CN107454326B (zh) | 利用鱼眼镜头进行全景摄像的方法、摄像机以及全景摄像*** | |
CN110602410A (zh) | 一种图像处理方法、装置、航拍相机及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |