CN102160395A - 服务器装置、通信***、通信方法及程序 - Google Patents

服务器装置、通信***、通信方法及程序 Download PDF

Info

Publication number
CN102160395A
CN102160395A CN2009801367890A CN200980136789A CN102160395A CN 102160395 A CN102160395 A CN 102160395A CN 2009801367890 A CN2009801367890 A CN 2009801367890A CN 200980136789 A CN200980136789 A CN 200980136789A CN 102160395 A CN102160395 A CN 102160395A
Authority
CN
China
Prior art keywords
mentioned
terminal
picture signal
conversion
resolution
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2009801367890A
Other languages
English (en)
Inventor
小泽一范
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of CN102160395A publication Critical patent/CN102160395A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N1/333—Mode signalling or mode changing; Handshaking therefor
    • H04N1/33307—Mode signalling or mode changing; Handshaking therefor prior to start of transmission, input or output of the picture signal only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • H04N21/234372—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution for performing aspect ratio conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00347—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with another still picture apparatus, e.g. hybrid still picture apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0034—Details of the connection, e.g. connector, interface
    • H04N2201/0048—Type of connection
    • H04N2201/0055—By radio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/32—Circuits or arrangements for control or supervision between transmitter and receiver or between image input and image output device, e.g. between a still-image camera and its memory or between a still-image camera and a printer device
    • H04N2201/333—Mode signalling or mode changing; Handshaking therefor
    • H04N2201/33307—Mode signalling or mode changing; Handshaking therefor of a particular mode
    • H04N2201/33314—Mode signalling or mode changing; Handshaking therefor of a particular mode of reading or reproducing mode
    • H04N2201/33328—Resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供一种服务器装置、方法、程序，其可以在对从终端接收到的图像进行画质转换的基础上进行发送。服务器装置(150)从第一终端(120)接收包含动态图像或静态图像信号的流或数据包，对上述接收到的动态图像或静态图像信号，实施扩展解析度以及画质的转换，将转换后的信号向不同于第一终端的终端输出。

Description

服务器装置、通信***、通信方法及程序
技术领域
(相关申请)本申请要求现有日本专利申请2008-248150号(2008年9月26日申请)的优先权，上述现有申请的全部内容通过引用而记载在本说明书中。
本发明涉及一种服务器装置、通信***、方法和程序。
背景技术
伴随着移动网络的带宽的提高及高速化，预料今后利用图像进行的通信、发送的服务将日趋增加。
其中，特别是暂时将用移动终端(mobile terminal)等拍摄到的静态图像或动态图像信号向服务器上传的情况下，对于动态图像信号，为了以低比特率高效地传送，需要在移动终端侧进行压缩编码。作为这种方式，已知存在ITU-T(国际电联电信标准化部门)建议H.263、以及由ISO/IEC(国际标准化组织/国际电工委员会)进行国际标准化的MPEG-4(运动图象专家组4)。另外，根据由ITU-T和ISO/IEC进行国际标准化的H.264/MPEG-4AVC(高级视频编码)，能够与上述动态图像压缩编码方式相比更高效地进行压缩。
专利文献1中公开了如下结构：基于发送对象终端信息，根据与发送对象终端的显示设备相应的图像校正参数信息，对来自发送源终端的图像进行适合各个机种的图像校正处理，生成发送用图像并向发送对象终端发送。在图像校正处理中，进行适合发送对象终端的显示设备的伽马特性的色阶校正、基于RGB矩阵运算而对色调、色度进行的校正、锐度的调整、色温的校正。
另外，专利文献2中公开了如下结构：能够通过利用JPEG(联合图象专家组)2000生成补充像素，从而利用DSC(分布式信源编码)***(对信息源进行分割并单独编码、在解码时集中进行解码的***)提供高画质的动态图像。根据以下说明可知，本发明与上述专利文献所述的发明完全不同。
专利文献1：日本特开2004-120381号公报
专利文献2：日本特开2007-74306号公报
发明内容
上述专利文献1以及2的所有公开内容通过引用而记载在本发明书中。
下面，对本发明进行分析。
由于内置在移动终端中的CPU(中央处理单元)的性能、内存容量、功能存在限制，并且移动网络的上行方向的频带存在限制，因而从移动终端输出到服务器中的动态图像或静态图像信号的解析度、画质并不足够。
此外，即使由服务器将静态图像或动态图像信号向其他移动电话或属于群的成员的移动电话等输出，其解析度、画质也不足够。因此，很难普及这种服务。
此外，无论今后移动网络的下行方向的带宽是否扩大，都无法有效地灵活应用该带宽。
本发明的目的在于，提供一种服务器装置、方法、程序，其可以在对从终端接收到的图像进行画质转换的基础上进行输出。
本申请所公开的发明为了解决上述课题，大概形成以下结构。
从本发明的一个侧面来看，提供一种服务器装置，其具有：
转换部，其针对从第一终端接收到的包含动态图像及静态图像的图像信号，实施提高解析度以及画质的转换；以及
输出部，其将上述转换后的图像信号向不同于上述第一终端的至少其他一个终端输出。
从本发明的另一个侧面来看，提供一种方法，在该方法中，
服务器从第一终端接收包含动态图像或静态图像的图像信号，
上述服务器针对上述接收到的图像信号，实施提高解析度以及画质的转换，
上述服务器将上述转换后的图像信号向不同于第一终端的至少一个终端输出。
从本发明的其他侧面来看，提供一种程序，其使构成服务器装置的计算机执行如下处理：
转换处理，在该处理中，对从第一终端接收到的包含动态图像或静态图像的图像信号，实施提高解析度以及画质的转换；以及
输出处理，在该处理中，将上述转换后的图像信号向不同于上述第一终端的至少一个终端输出。
从本发明的其他侧面来看，提供一种通信***，其至少具有第一、第二终端和与上述第一、第二终端网络连接的服务器装置，
上述服务器装置从上述第一终端接收包含动态图像及静态图像的图像信号，对上述接收到的图像信号，实施提高解析度以及画质的转换，将上述转换后的图像信号向上述第二终端输出。
发明的效果
根据本发明的服务器装置、方法、程序、***，能够在对从终端接收到的图像进行画质转换的技术上进行发送。
附图说明
图1是表示本发明的***结构的图。
图2是表示本发明的服务器装置的第一实施例的结构的图。
图3是表示本发明的服务器装置的第二实施例的结构的图。
图4是表示本发明的服务器装置的第三实施例的结构的图。
图5是表示本发明的服务器装置的第四实施例的结构的图。
图6是表示本发明的服务器装置的第一实施例的步骤的图。
图7是表示本发明的服务器装置的实施例的变形例的图。
标号的说明
120、121、122、123移动终端
130移动网络
150服务器装置
151、251、351、451呼叫控制部
155数据包接收部
159、175数据包输出部
160转换部
161解码部
162帧存储器
163超解析度转换部
164编码部
173、273数据包复制部
259组播数据包输出部
275广播数据包输出部
具体实施方式
对本发明的实施方式进行说明。根据本发明的一个实施方式，提供一种服务器装置，其具有：转换部，其从第一终端接收包含动态图像或静态图像信号的流或数据包，针对上述接收到的动态图像或静态图像信号，实施提高解析度以及画质的转换；以及输出部，其将上述转换后的信号向第二终端(除第一终端以外的终端)输出。例如在服务器装置中，针对从作为第一终端的包含移动电话的移动终端接收到的动态图像或静态图像，实施提高解析度以及画质的转换之后，将上述转换后的动态图像或静态图像信号向其他终端输出。
根据本发明的其他实施方式，提供一种服务器装置，其由两台以上的终端参加而生成群，该服务器装置具有：转换部，其从第一终端接收包含动态图像或静态图像信号的流或数据包，对上述接收到的动态图像或静态图像信号实施提高解析度以及画质的转换；以及输出部，其对上述转换后的信号的一部分或全部进行复制，在上述群内向除第一终端以外的成员输出。
根据本发明的另一种实施方式，提供一种服务器装置，其由两台以上的终端参加而登录组播群，该服务器装置具有：转换部，其从第一终端接收包含动态图像或静态图像信号的流或数据包，对上述接收到的动态图像或静态图像信号实施提高解析度以及画质的转换；以及输出部，其将上述转换后的信号的一部分或全部向上述组播群的成员组播输出。
根据本发明的另一种实施方式，提供一种服务器装置，其特征在于，具有：转换部，其从第一终端接收包含动态图像或静态图像信号的流或数据包，对上述接收到的动态图像或静态图像信号实施提高解析度以及画质的转换；以及输出部，其对上述转换后的信号的一部分或全部进行复制，并进行广播输出。基于以下的实施例进行说明。虽然没有特殊限制，但在以下的实施例中，对使用视频(动态图像)信号的情况下的结构进行说明。
实施例
本发明可以应用于作为移动网络的数据包网络和电路交换网络这两者，但在以下的具体例中，将举例应用于数据包网络的情况进行说明。在数据包网络的情况下，与上行相比，下行的带宽为2倍以上，形成不对称结构，在利用视频信号的服务中，上行通过减少比特率等进行使用，而下行能够以更高的比特率进行使用。
图1表示本发明的服务器装置和移动终端经由移动网络连接的连接方式的例子。从移动终端120～123中任一终端(例如120)向服务器装置150发送由终端拍摄到的或由终端取得的视频信号。
图2是表示图1的服务器装置150的重要部分结构的一例的图。参照图2，服务器装置150包括呼叫控制部151、数据包接收部155、转换部160、数据包输出部159。以下，对各部件进行说明。
呼叫控制部151接收由移动终端(例如120)的SIP(会话初始协议)产生的对话控制信号(被呼叫控制部151接收的、以虚线表示的信号)。并且，呼叫控制部151接收由SDP(会话描述协议)产生的移动终端的能力信息(被呼叫控制部151接收的、以虚线表示的信号)。在服务器装置150中，除了经由SDP接收到的对话名、URI(统一资源标识符)信息之外，还接收作为媒体描述的媒体名等。此外，SIP的详细内容以及SDP的详细内容能够分别参照IETF(互联网工程任务组)RFC(请求注解)3261以及IETF RFC 2327。
如果呼叫控制部151接收由SIP产生的对话开始指示，则对数据包接收部155发出指示，使其接收来自移动终端(例如120)的RTP(实时传输协议)数据包，并通知移动终端120的发送源IP地址。
数据包接收部155接收从该发送源IP地址输出的RTP数据包，提取存储在RTP数据包的净负载部分中的压缩编码流，并向转换部160输出。
转换部160包括解码部161、帧存储器162、超解析度转换部163、编码部164。
解码部161针对从数据包接收部155输入的压缩编码流，采用与移动终端中编码所使用的编码器相同的方式(例如MPEG-4)的解码器，对流进行解码，并将解码信号存储到帧存储器162中。
在这里，从移动终端接收到的视频流根据搭载在移动终端(120)中的MPEG-4 SP@L0(0级简单类)标准，形成比特率为64kbps(千字节/秒)、帧速率为15fps(帧/秒)、解析度为QCIF(四分之一通用中间格式：176×144像素)。
超解析度转换部163读出存储在帧存储器162中的信号(解码信号)，进行一边扩展解析度一边改善画质的处理。例如将QCIF的解析度扩展至CIF(通用中间格式：352×288像素)或其以上的解析度。
为了扩展解析度，使用下述方法：
·针对转换对象的图像帧，使用多枚图像帧作为参照图像，一边增加像素数量一边扩展解析度的方法，
·利用转换对象的图像帧内的不同位置的像素，增加像素数量的方法。超解析度转换部163也可以构成为，针对所述方法，根据能够向超解析度转换部163的处理分配的运算量和内存量的限制，选择最佳方法。
在超解析度转换部163中，在针对转换对象帧使用过去(时间上的过去)的参照帧的情况下，通过输入由解码部161解码后的宏块的每一个移动矢量，针对包含在该宏块中的像素，基于上述移动矢量，重新执行移动矢量搜索处理(在参照帧的搜索范围内的宏块之中，求出与转换对象帧的相应宏块的差异最小的位置)，求出详细的移动矢量(例如半像素单位)。并且，可以构成为，将通过重新搜索求出的详细的移动矢量应用于过去的参照帧的像素，利用以上述详细的移动矢量移动后的帧，增加转换对象帧的像素。或者也可以构成为：不使用来自解码部161的宏块的移动矢量，根据转换对象帧(当前帧)和参照帧搜索移动矢量。
另外，在超解析度转换部163中，在只使用解析度扩展对象的帧的情况下，通过检测出边缘部分，并使用边缘附近的像素而增加像素、或对边缘附近的像素加以校正，检测出边缘并进行强调的处理，而实现提高解析度、改善画质的处理。该处理针对动态图像和/或静态图像进行。
在超解析度转换部163中，通过推断移动方向，插补时间方向的帧图像(在前后帧之间***1帧)，而对帧速率进行插补，由此进行例如将帧速率从15fps扩展至30fps的处理。
编码部164输入由超解析度转换部163转换后的图像信号，利用与解码部161相同的压缩编码方式或不同的压缩编码方式进行编码。
在编码部164中，在例如采用与解码部161相同的压缩编码方式的情况下，解码部161为MPEG-4 SP@L0 64kbps，但由于扩展了解析度及画质，因而在编码部164中，可以使用例如MPEG-4 SP@L3(3级简单类)CIF 512kbps 15fps等。
另一方面，在编码部164中，在采用与解码部161不同的压缩编码方式的情况下，能够采用H.264 [email protected](Baseline Profile Level 1.2)CIF 512kbps 15fps等。
另外，在编码部164中，为了简化移动矢量搜索的运算量，可以采用如下结构：从解码部161输入移动矢量信息，基于所输入的移动矢量信息(对移动矢量实施与解析度扩展对应的转换)，针对被超解析度转换部163转换后的图像信号，搜索该移动矢量的附近，求出新的移动矢量。
数据包输出部159从编码部164输入压缩编码流，包含在RTP净负载中而构成RTP数据包，将RTP数据包向发送对象的移动终端输出。
此外，对于压缩编码流，也可以不用RTP数据包，而是构成为，以预先规定的文件格式(例如利用3GPP(第三代合作伙伴项目)标准化的3GP文件格式)存储，并作为文件进行输出。此外，3GP文件格式标准可以参照3GPP TS26.244。
下面，参照图6对本实施例的服务器装置的处理步骤进行说明。在服务器装置中，如果从移动终端接收对话开始指示，则呼叫控制部151向数据包接收部155通知移动终端120的发送源IP地址。呼叫控制部151接收由SDP(会话描述协议)产生的移动终端的能力信息。
步骤S1：数据包接收部155从RTP数据包中提取压缩编码流，向转换部160输出，其中，所述RTP数据包是从发送源的移动终端接收到的。
步骤S2：在转换部160中，解码部161对压缩编码流进行解码，并将解码后的图像信号存储到帧存储器162中。
步骤S3：超解析度转换部163读出存储在帧存储器162中的图像信号，一边扩展解析度一边改善画质。
步骤S4：编码部164输入被超解析度转换部163转换后的图像信号，采用与解码部161相同的压缩编码方式或不同的压缩编码方式进行编码。
步骤5：数据包输出部159从编码部164输入压缩编码流，并包含在RTP净负载中，作为RTP数据包进行输出。
在上述实施例中，与视频的压缩编码方式无关，可以对应H.263、MPEG-4、H.264等任何一种压缩编码方式。
此外，上述服务器装置中的步骤S1至S5，当然也可以利用在构成服务器装置的计算机上执行的程序实现其功能、处理。以下的其他实施例也相同。如图7所示，在这种情况下，构成服务器装置的计算机(CPU)通过从存储装置将程序读取到内存(Memory)中并执行，从而实现上述转换部的处理、数据包接收部、数据包输出部、呼叫控制部的处理。此外，存储程序的存储装置当然也可以形成与服务器装置网络连接的结构。
对第一实施例的作用效果进行说明。
根据第一实施例，能够在对从包含移动电话的移动终端接收到的动态图像或静态图像信号，实施利用服务器装置提高解析度或提高画质的转换的基础上，输出上述转换后的动态图像或静态图像信号。由此，能够享受高画质的图像。
接着，对本发明的第二实施例进行说明。图3是表示本发明的第二实施例的结构的图。图3中，对与图2相同的要素标注相同的参照标号。相同要素的说明，为了避免重复而适当省略。
呼叫控制部251接收由来自移动终端(例如120)的SIP信号产生的对话控制信号。另外，接收由SDP(会话描述协议)产生的移动终端的能力信息。另外，接收属于相同群的移动终端的IP地址，并在与移动终端(例如120)交换SIP以及SDP之后，为了使媒体进行传导而向数据包接收部155、转换部160、数据包复制部173、数据包输出部175发出指示。由于数据包接收部155以及转换部160进行与图2相同的动作，所以省略说明。
在服务器装置150中，呼叫控制部251通过将移动终端和群相关联并进行存储管理，从而可以判别其他哪些移动终端属于移动终端(120)作为成员而所从属的同一群中。
数据包复制部173从呼叫控制部251接受指示，从而对从数据包接收部155输入的视频数据包的一部分进行复制，或者全部复制。
数据包复制部173从呼叫控制部251取得属于相同群的移动终端的数量(N个)，并针对从转换部160输入的各RTP数据包，生成N-1个复制数据包，并将N-1个复制数据包输出到数据包输出部175。
数据包输出部175从呼叫控制部251接收与属于相同群的移动终端的接收IP地址相关的指示，对于从数据包复制部173输入的N-1个RTP数据包，将数据包向IP地址目标输出。
对第二实施例的作用效果进行说明。
根据第二实施例，能够对包含解析度转换后的图像信号在内的数据包的一部分或全部进行复制，向群内的除移动终端(120)以外的成员输出。即，能够在预先登录的群内，对某一移动终端取得的动态图像或静态图像信号，在利用服务器实施提高解析度或提高画质的转换之后，将上述转换后的动态图像或静态图像信号向群内的移动终端输出。由此，能够在群内享受高画质的图像。
图4是表示本发明的第三实施例的结构的图。图4中，对与图2、图3相同的要素，标注相同的参照标号。相同要素的说明，为了避免重复而适当省略。本实施例替换图2的数据包输出部而具有组播数据包输出部259。
组播数据包输出部259在从呼叫控制部351接受到与发送目标的组播地址相关的指示之后，从转换部160输入转换后的数据包，向组播地址目标输出。
对第三实施例的作用效果进行说明。
根据第三实施例，能够将对来自移动终端的图像进行解析度转换后的数据包，向组播群的成员进行组播输出。即，能够在实施提高解析度或提高画质的转换之后，将上述转换后的动态图像或静态图像信号向预先登录的组播群目标进行组播输出，由此，即使在需要接收的移动终端数量增加的情况下，也能够不增加网络的负荷，就使组播群成员享受高画质的图像。
图5是表示本发明的第四实施例的结构的图。图5中，对与图3相同的要素标注相同的参照标号。相同要输的说明，为了避免重复而适当省略。本实施例具有广播数据包输出部275作为数据包输出部。
呼叫控制部451向数据包复制部273指示数据包复制数量M，以用于进行广播输出。
数据包复制部273从呼叫控制部451接受指示，将转换部160的输出数据包复制M个，向广播数据包输出部275输出。
然后，呼叫控制部451向广播数据包输出部275发出指示，以将复制后的数据包利用广播进行输出。
广播数据包输出部275从呼叫控制部451得到指示，从数据包复制部273输入复制后的数据包，利用广播进行输出。
对第四实施例的作用效果进行说明。
根据第四实施例，能够将对来自移动终端的图像进行解析度转换而得到的数据包，利用广播进行输出。通过广播输出，能够使非特定多数的移动电话用户享受解析度提高或画质提高后的高画质图像。
在如上说明的所有实施例中，将作为C-Plane(控制面)处理的呼叫控制部和作为U-Plane(用户面)处理的数据包接收部、转换部、数据包复制部、数据包输出部等全部配置在服务器装置中，但也可以形成将C-Plane处理和U-Plane处理分别分离在单独的装置中的结构。
根据该结构，能够使C-Plane和U-Plane独立地具有扩展性。另外，在上述实施方式中，将视频(动态图像)信号作为对象，但对于静态图像信号，也可以采用与上述相同的结构。
总结上述实施例，都包括如下结构。
(1)本实施例的服务器装置具有：
转换部，其针对从第一终端接收到的包含动态图像或静态图像在内的图像信号，实施扩展解析度以及画质的转换；以及
输出部，其将上述转换后的图像信号，向不同于上述第一终端的至少一个终端输出。
(2)本实施例的服务器装置，对于上述(1)，
上述转换部具有：解码部，其针对上述图像信号，与上述第一终端中的编码方式对应而进行解码；
解析度转换部，其对上述解码后的信号的解析度进行转换，改善画质；以及
编码部，其输入由上述解析度转换部转换后的图像信号，对其进行编码。
(3)本实施例的服务器装置，对于上述(2)，也可以构成为：
上述解析度转换部基于由上述解码部解码后的移动矢量，针对参照图像进行移动矢量的重新搜索，利用将重新搜索后的移动矢量应用于上述参照图像后的图像，进行上述图像信号的解析度的转换。
(4)本实施例的服务器装置，对于上述(1)至(3)中任意一项，
多个终端参加而生成群，
从一个群的上述第一终端接收包含动态图像或静态图像信号在内的图像信号，
上述输出部对由上述转换部转换后的图像信号的一部分或全部进行复制，在上述群内向除上述第一终端以外的成员终端输出。
(5)本实施例的服务器装置，对于上述(1)至(3)中任意一项，
两台以上的终端参加而登录组播群，
上述输出部将由上述转换部转换后的图像信号的一部分或全部，向上述组播群的成员终端进行组播输出。
(6)本实施例的服务器装置，对于上述(1)至(3)中任意一项，上述输出部对由上述转换部进行上述转换后的图像信号的一部分或全部进行复制，进行广播输出。
(7)本实施例的服务器装置，对于上述(4)，
上述输出部具有复制部，其对由上述转换部转换后的图像信号的一部分或全部进行复制。
(8)本实施例的服务器装置，对于上述(1)至(7)中任意一项，
具有接收部，其从上述第一终端接收含有包括动态图像或静态图像在内的图像信号的数据包或流，上述输出部将含有包括动态图像或静态图像在内的图像信号的数据包或流向不同于上述第一终端的终端输出。
(9)本实施例的方法，
服务器从第一终端接收包含动态图像或静态图像的图像信号，
上述服务器针对上述接收到的图像信号，进行扩展解析度以及画质的转换，
上述服务器将上述转换后的图像信号向不同于第一终端的至少一个终端输出。
(10)本实施例的方法，对于上述(9)，
上述服务器针对上述接收到的图像信号，与上述第一终端中的编码方式对应而进行解码，
对上述解码后的图像信号的解析度进行转换，从而实施改善画质的转换，
对上述解析度被转换后的图像信号进行编码。
(11)本实施例的方法，对于上述(9)或(10)，
多个终端参加而生成群，
上述服务器从一个群的上述第一终端接收包含动态图像或静态图像在内的图像信号，
上述服务器对上述转换后的图像信号的一部分或全部进行复制，在上述群内向除上述第一终端以外的成员终端输出。
(12)本实施例的方法，对于上述(9)或(10)，
两台以上的终端参加而登录组播群，
上述服务器将上述转换后的图像信号的一部分或全部，向上述组播群的成员终端进行组播输出。
(13)本实施例的方法，对于上述(9)或(10)，
上述服务器对上述转换后的图像信号的一部分或全部进行复制，进行广播输出。
(14)本实施例的程序，其含有使构成服务器装置的计算机执行如下处理的程序：
转换处理，在该处理中，针对从第一终端接收到的包含动态图像或静态图像的图像信号，实施扩展解析度以及画质的转换；以及
输出处理，在该处理中，将上述转换后的图像信号向不同于上述第一终端的至少一个终端输出。
(15)本实施例的程序，对于上述(14)，上述转换处理包括：
解码处理，在该处理中，针对由上述接收部接收到的图像信号，与上述终端中的编码方式对应而进行解码；
解析度转换处理，在该处理中，对上述解码信号的解析度进行转换，改善画质；以及
编码处理，在该处理中，输入上述转换后的图像信号，进行编码。
(16)本实施例的程序，对于上述(14)或(15)，
从一个群的上述第一终端接收上述包含动态图像或静态图像的图像信号，
在上述输出处理中，对上述转换后的图像信号的一部分或全部进行复制，在上述群内向除第一终端以外的成员终端输出。
(17)本实施例的程序，对于上述(14)或(15)，
上述输出处理将上述转换后的图像信号的一部分或全部，向上述组播群的成员进行组播输出。
(18)本实施例的程序，对于上述(14)或(15)，
在上述输出处理中，对上述转换后的图像信号的一部分或全部进行复制，进行广播输出。
(19)本实施例的***，其至少具有第一、第二终端和与上述第一、第二终端网络连接的服务器装置，
上述服务器装置从上述第一终端接收包含动态图像或静态图像的图像信号，
对上述接收到的图像信号，实施扩展解析度以及画质的转换，
将上述转换后的图像信号向上述第二终端输出。
(20)本实施例的***，对于上述(19)的***，
上述服务器装置针对上述接收到的图像信号，与上述终端中的编码方式对应而进行解码，将上述解码信号的解析度进行转换，改善画质，输入上述解析度被转换后的图像信号，进行编码。
(21)本实施例的***，对于上述(19)或(20)的***，
至少上述第一、第二终端参加而生成群，
上述服务器装置从一个群的上述第一终端接收包含动态图像或静态图像的图像信号，
对上述转换后的图像信号的一部分或全部进行复制，
在上述群内向作为除上述第一终端以外的终端的至少上述第二终端输出。
(22)本实施例的***，对于上述(19)或(20)的***，
至少上述第一、第二终端参加而登录组播群，
上述服务器装置将上述转换后的图像信号的一部分或全部，向上述组播群的成员进行组播输出。
(22)本实施例的***，对于上述(19)或(20)的***，
上述服务器装置对由上述转换部进行了上述转换后的图像信号的一部分或全部进行复制，进行广播输出。
此外，上述的专利文献的各公开内容通过引用而记载在本说明书中。在本发明的全部公开(包括权利要求书的范围)的范围内，可以基于其基本技术思想而对实施方式及实施例进行变更、调整。另外，可以在本发明的权利要求书的范围内对各种公开要素进行各种组合及选择。即，本发明当然包括本领域的技术人员能够根据包含权利要求书的范围在内的所有启示、技术上的思想而得到的各种变形、修正。

Claims (23)

1.一种服务器装置，其特征在于，具有：
转换部，其针对从第一终端接收到的包含动态图像或静态图像在内的图像信号，实施扩展解析度以及画质的转换；以及
输出部，其将上述转换后的图像信号，向不同于上述第一终端的至少一个终端输出。
2.根据权利要求1所述的服务器装置，其特征在于，
上述转换部具有：解码部，其针对上述图像信号，与上述第一终端中的编码方式对应而进行解码；
解析度转换部，其对上述解码后的图像信号的解析度进行转换，改善画质；以及
编码部，其输入由上述解析度转换部转换后的图像信号，进行编码。
3.根据权利要求2所述的服务器装置，其特征在于，
上述解析度转换部基于由上述解码部解码后的移动矢量，针对过去的参照图像进行移动矢量的重新搜索，利用将重新搜索后的移动矢量应用于上述参照图像后的图像，进行上述图像信号的解析度的转换。
4.根据权利要求1至3中任意一项所述的服务器装置，其特征在于，
多个终端参加而生成群，
从一个群的上述第一终端接收包含动态图像或静态图像在内的图像信号，
上述输出部对由上述转换部转换后的图像信号的一部分或全部进行复制，在上述群内向除上述第一终端以外的成员终端输出。
5.根据权利要求1至3中任意一项所述的服务器装置，其特征在于，
两台以上的终端参加而登录组播群，
上述输出部将由上述转换部转换后的图像信号的一部分或全部，向上述组播群的成员终端进行组播输出。
6.根据权利要求1至3中任意一项所述的服务器装置，其特征在于，
上述输出部对由上述转换部进行上述转换后的图像信号的一部分或全部进行复制，进行广播输出。
7.根据权利要求1至4中任意一项所述的服务器装置，其特征在于，
上述输出部具有复制部，其对由上述转换部转换后的图像信号的一部分或全部进行复制。
8.根据权利要求1至7中任意一项所述的服务器装置，其特征在于，
具有接收部，其从上述第一终端接收含有包括动态图像或静态图像在内的图像信号的数据包或流，
上述输出部将含有包括动态图像或静态图像在内的图像信号的数据包或流，向不同于上述第一终端的终端输出。
9.一种通信方法，其特征在于，
服务器从第一终端接收包含动态图像或静态图像的图像信号，
上述服务器针对上述接收到的图像信号，进行扩展解析度以及画质的转换，
上述服务器将上述转换后的图像信号向不同于第一终端的至少一个终端输出。
10.根据权利要求9所述的通信方法，其特征在于，
上述服务器针对上述接收到的图像信号，与上述第一终端中的编码方式对应而进行解码，
对上述解码后的图像信号的解析度进行转换，从而实施改善画质的转换，
对上述解析度被转换后的图像信号进行编码。
11.根据权利要求9或10所述的通信方法，其特征在于，
多个终端参加而生成群，
上述服务器从一个群的上述第一终端接收包含动态图像或静态图像在内的图像信号，
上述服务器对上述转换后的图像信号的一部分或全部进行复制，在上述群内向除上述第一终端以外的成员终端输出。
12.根据权利要求9或10所述的通信方法，其特征在于，
两台以上的终端参加而登录组播群，
上述服务器将上述转换后的图像信号的一部分或全部，向上述组播群的成员终端进行组播输出。
13.根据权利要求9或10所述的通信方法，其特征在于，
上述服务器对上述转换后的图像信号的一部分或全部进行复制，进行广播输出。
14.一种程序，其使构成服务器装置的计算机执行下述处理：
转换处理，在该处理中，针对从第一终端接收到的包含动态图像或静态图像的图像信号，实施扩展解析度以及画质的转换；以及
输出处理，在该处理中，将上述转换后的图像信号向不同于上述第一终端的至少一个终端输出。
15.根据权利要求14所述的程序，
上述转换处理包括：
解码处理，在该处理中，针对上述接收到的图像信号，与上述终端中的编码方式对应而进行解码；
解析度转换处理，在该处理中，对上述解码后的图像信号的解析度进行转换，改善画质；以及
编码处理，在该处理中，输入由上述解析度转换部转换后的图像信号，进行编码。
16.根据权利要求14或15所述的程序，其特征在于，
从一个群的上述第一终端接收上述包含动态图像或静态图像的图像信号，
在上述输出处理中，对上述转换后的图像信号的一部分或全部进行复制，在上述群内向除第一终端以外的成员终端输出。
17.根据权利要求14或15所述的程序，其特征在于，
上述输出处理将上述转换后的图像信号的一部分或全部，向上述组播群的成员进行组播输出。
18.根据权利要求14或15所述的程序，其特征在于，
上述输出处理对上述转换后的图像信号的一部分或全部进行复制，进行广播输出。
19.一种通信***，其特征在于，
至少具有第一、第二终端和与上述第一、第二终端网络连接的服务器装置，
上述服务器装置从上述第一终端接收包含动态图像或静态图像的图像信号，
对上述接收到的图像信号，实施扩展解析度以及画质的转换，
将上述转换后的图像信号向上述第二终端输出。
20.根据权利要求19所述的通信***，其特征在于，
上述服务器装置针对上述接收到的图像信号，与上述第一终端中的编码方式对应而进行解码，
将上述解码后的图像信号的解析度进行转换，实施改善画质的转换，
对上述解析度被转换后的图像信号进行编码。
21.根据权利要求19或20所述的通信***，其特征在于，
至少上述第一、第二终端参加而生成群，
上述服务器装置从一个群的上述第一终端接收包含动态图像或静态图像的图像信号，
对上述转换后的图像信号的一部分或全部进行复制，
在上述群内向作为除上述第一终端以外的终端的至少上述第二终端输出。
22.根据权利要求19或20所述的通信***，其特征在于，
至少上述第一、第二终端参加而登录组播群，
上述服务器装置将上述转换后的图像信号的一部分或全部，向上述组播群的成员进行组播输出。
23.根据权利要求19或20所述的通信***，其特征在于，
上述服务器装置对由上述转换部进行了上述转换后的图像信号的一部分或全部进行复制，进行广播输出。
CN2009801367890A 2008-09-26 2009-09-25 服务器装置、通信***、通信方法及程序 Pending CN102160395A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2008248150 2008-09-26
JP2008-248150 2008-09-26
PCT/JP2009/066629 WO2010035776A1 (ja) 2008-09-26 2009-09-25 サーバ装置及び通信システムと通信方法とプログラム

Publications (1)

Publication Number Publication Date
CN102160395A true CN102160395A (zh) 2011-08-17

Family

ID=42059774

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009801367890A Pending CN102160395A (zh) 2008-09-26 2009-09-25 服务器装置、通信***、通信方法及程序

Country Status (4)

Country Link
US (1) US20110158322A1 (zh)
JP (1) JPWO2010035776A1 (zh)
CN (1) CN102160395A (zh)
WO (1) WO2010035776A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9208537B1 (en) * 2014-07-10 2015-12-08 Shenzhen China Star Optoelectronics Technology Co., Ltd Super-resolution reconstructing method for enhancing smoothness and sharpness of video image

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100446235B1 (ko) * 2001-05-07 2004-08-30 엘지전자 주식회사 다중 후보를 이용한 움직임 벡터 병합 탐색 방법
US8472792B2 (en) * 2003-12-08 2013-06-25 Divx, Llc Multimedia distribution system
KR100994773B1 (ko) * 2004-03-29 2010-11-16 삼성전자주식회사 계층적 움직임 추정에 있어서 움직임 벡터 생성 방법 및장치
JP2006054760A (ja) * 2004-08-13 2006-02-23 Sony Corp 画像処理装置及び画像処理方法
JP2006174415A (ja) * 2004-11-19 2006-06-29 Ntt Docomo Inc 画像復号装置、画像復号プログラム、画像復号方法、画像符号化装置、画像符号化プログラム及び画像符号化方法
JP2006165935A (ja) * 2004-12-07 2006-06-22 Nec Corp 制御情報の変換装置及び制御情報の変換方法
JP2006279715A (ja) * 2005-03-30 2006-10-12 Nec Corp 同報通信システム、サーバ、同報通信方法、及びそのプログラム
JP4594201B2 (ja) * 2005-09-28 2010-12-08 パナソニック株式会社 画像符号化方法、画像符号化装置、プログラムおよび集積回路
JP2008067316A (ja) * 2006-09-11 2008-03-21 Olympus Corp 画像配信システム、サーバ及びクライアント端末
FR2906433B1 (fr) * 2006-09-22 2009-02-27 Canon Kk Procedes et dispositifs de codage et de decodage d'images, programme d'ordinateur les mettant en oeuvre et support d'informaton permettant de les mettre en oeuvre
KR100844142B1 (ko) * 2006-09-26 2008-07-04 삼성전자주식회사 화질개선장치 및 그 방법
KR100809354B1 (ko) * 2007-02-02 2008-03-05 삼성전자주식회사 복원된 프레임의 프레임율을 업컨버팅하는 장치 및 방법
JP4139430B1 (ja) * 2007-04-27 2008-08-27 シャープ株式会社 画像処理装置及び方法、画像表示装置及び方法
TWI339531B (en) * 2007-05-07 2011-03-21 Vivotek Inc A module and system for generating different resolution video streams immediately
JP4877090B2 (ja) * 2007-06-18 2012-02-15 ソニー株式会社 画像処理装置、画像処理方法、及びプログラム
US8331451B2 (en) * 2007-07-18 2012-12-11 Samsung Electronics Co., Ltd. Method and apparatus for enhancing resolution of video image

Also Published As

Publication number Publication date
WO2010035776A1 (ja) 2010-04-01
US20110158322A1 (en) 2011-06-30
JPWO2010035776A1 (ja) 2012-02-23

Similar Documents

Publication Publication Date Title
US20230283863A1 (en) Retrieving and accessing segment chunks for media streaming
RU2510908C2 (ru) Описание характеристик агрегированных блоков медиаданных с обратной совместимостью
CN100544439C (zh) 一种支持多种编码格式的媒体数据的方法及***
CN101322415B (zh) 用于可变数据速率编码的时间分片方法、***
CN100568966C (zh) 一种音/视频数据的网络传输方法
TWI401918B (zh) 傳送指示接收器緩衝架構之緩衝參數信號的通訊方法
WO2011004886A1 (ja) 配信システムと方法とゲートウェイ装置とプログラム
US7996540B2 (en) Method and system for replacing media stream in a communication process of a terminal
CN101321280A (zh) 一种实时视频转码流媒体服务器
CN101123730A (zh) 使用蓝牙传输运动图像流的装置和方法
US20090207918A1 (en) Method and apparatus for video transcoding
TW201021576A (en) System and method for dynamic video encoding in multimedia streaming
CN103493481A (zh) 基于场景的适应性比特率控制
CN101640784A (zh) 一种在视频会议***中控制多画面复合的控制装置及方法
CN109618188B (zh) 视频数据的编码、转发方法、装置、设备及存储介质
CN105635636A (zh) 一种视频会议***及其实现视频图像传输控制的方法
CN101924944A (zh) 可伸缩视频编码操作点选择方法、信息提供方法及设备
CN101489091A (zh) 一种语音信号传输处理方法及装置
CN102014284A (zh) 转码业务中获取视频码流的参数集值的方法、***及装置
JPWO2011030811A1 (ja) 配信システム、ゲートウェイ、配信方法及びプログラム
US20120017249A1 (en) Delivery system, delivery method, conversion apparatus, and program
WO2021057697A1 (zh) 视频编解码方法和装置、存储介质及电子装置
CN108632679B (zh) 一种多媒体数据传输的方法和一种视联网终端
CN102160393A (zh) 网关装置、方法、***以及程序
CN102165786A (zh) 发布服务器以及发布***和方法以及程序

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110817