KR20070049074A - 기록/재생 장치 및 기록/재생 방법과, 기록 장치 및 기록방법과, 재생 장치 및 재생 방법과, 프로그램 - Google Patents

기록/재생 장치 및 기록/재생 방법과, 기록 장치 및 기록방법과, 재생 장치 및 재생 방법과, 프로그램 Download PDF

Info

Publication number
KR20070049074A
KR20070049074A KR20060108798A KR20060108798A KR20070049074A KR 20070049074 A KR20070049074 A KR 20070049074A KR 20060108798 A KR20060108798 A KR 20060108798A KR 20060108798 A KR20060108798 A KR 20060108798A KR 20070049074 A KR20070049074 A KR 20070049074A
Authority
KR
South Korea
Prior art keywords
image
motion parameter
recording
recording medium
motion
Prior art date
Application number
KR20060108798A
Other languages
English (en)
Inventor
준 히라이
Original Assignee
소니 가부시끼 가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 가부시끼 가이샤 filed Critical 소니 가부시끼 가이샤
Publication of KR20070049074A publication Critical patent/KR20070049074A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • H04N19/29—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding involving scalability at the object level, e.g. video object layer [VOL]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/144—Movement detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/78—Television signal recording using magnetic recording
    • H04N5/781—Television signal recording using magnetic recording on disks or drums

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Systems (AREA)
  • Studio Devices (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

기록/재생 장치는, 제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 제1 취득 수단과, 상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 변환 수단과, 상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 기록 제어 수단과, 상기 기록 매체로부터 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하는 판독 제어 수단과, 상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 화상 처리 수단을 포함한다.
움직임 파라미터, 움직임 벡터, HD 화상, 데시메이션, 노이즈 감소, 다중화

Description

기록/재생 장치 및 기록/재생 방법과, 기록 장치 및 기록 방법과, 재생 장치 및 재생 방법과, 프로그램{RECORDING AND PLAYBACK APPARATUS AND RECORDING AND PLAYBACK METHOD, RECORDING APPARATUS AND RECORDING METHOD, PLAYBACK APPARATUS AND PLAYBACK METHOD, AND PROGRAM}
도 1은 본 발명을 적용한 기록/재생 시스템의 일실시예의 구성예를 나타낸 블록도.
도 2는 도 1의 기록 제어부(13)의 구성예를 나타낸 블록도
도 3은 도 2의 기록 제어부(13)에서의 처리를 나타낸 플로차트.
도 4는 도 1의 재생 제어부(15)의 구성예를 나타낸 블록도.
도 5는 도 4의 재생 제어부(15)에서의 처리를 나타낸 플로차트.
도 6은 도 1의 기록 제어부(13)의 다른 구성예를 나타낸 블록도.
도 7은 도 6의 MPd 차분 정보 취득부(54)에서의 처리의 일례에 대하여 설명하는 첫 번째 도면.
도 8은 도 6의 MPd 차분 정보 취득부(54)에서의 처리의 일례에 대하여 설명하는 두 번째 도면.
도 9는 도 6의 MPd 차분 정보 취득부(54)에서의 처리의 일례에 대하여 설명하는 세 번째 도면.
도 10은 도 6의 기록 제어부(13)에서의 처리를 나타낸 플로차트.
도 11은 도 1의 재생 제어부(15)의 다른 구성예를 나타낸 블록도.
도 12는 도 11의 재생 제어부(15)에서의 처리를 나타낸 플로차트.
도 13은 도 1의 기록 제어부(13)의 또 다른 구성예를 나타낸 블록도.
도 14는 도 13의 MPd 차분 정보 취득부(104)에서의 처리의 일례를 설명하는 도면.
도 15는 도 13의 기록 제어부(13)에서의 처리를 나타낸 플로차트.
도 16은 도 1의 재생 제어부(15)의 또 다른 구성예를 나타낸 블록도.
도 17은 도 16의 재생 제어부(15)에서의 처리를 나타낸 플로차트.
도 18은 본 발명을 적용한 기록/재생 시스템의 다른 일실시예의 구성예를 나타낸 블록도.
도 19는 본 발명을 적용한 컴퓨터의 구성예를 나타낸 도면.
<도면의 주요 부분에 대한 부호의 설명>
11 : 기록/재생 장치
12 : HDTV 카메라
13 : 기록 제어부
14 : HDD
15 : 재생 제어부
16 : 모니터
21 : 입출력 인터페이스
22 : MP1 취득부
23 : 데시메이터
24 : 멀티플렉스부
41 : 입출력 인터페이스
42 : 디멀티플렉스부
43 : 화상 처리부
44 : 노이즈 감소부
45 : 보간부
52 : 프레임 데시메이터
53 : MP2 취득부
54 : MPd 차분 정보 취득부
55 : 압축부
83 : 압축해제부
본 발명은 기록/재생 장치 및 기록/재생 방법과, 기록 장치 및 기록 방법과, 재생 장치 및 재생 방법과, 프로그램에 관한 것으로, 특히 미리 고정밀도의 움직임 파라미터를 취득하여 다양한 화상 처리에 사용할 수 있도록 한 기록/재생 장치 및 기록/재생 방법과, 기록 장치 및 기록 방법과, 재생 장치 및 재생 방법과, 프로그 램에 관한 것이다.
예를 들면, 화상을 기록하고 기록한 화상을 재생하는 하드 디스크 레코더 등의 기록/재생 장치에서는 기록될 화상에 대해서 하드 디스크의 기록 용량을 절약하기 위한 처리가 행해진다.
보다 구체적으로, 예를 들면, 기록하는 화상의 프레임을 데시메이션 처리하거나 화상의 각각의 프레임의 화소를 데시메이션 처리함으로써 화상의 데이터량을 감소시킨다. 그리고, 그 화상을 재생할 때에는, 데이터량이 적은 화상으로부터 움직임 벡터 등의 화상의 움직임에 관한 움직임 파라미터가 취득되어 노이즈 감소 등의 화상 처리에 사용된다.
그리고, 화상의 움직임 파라미터의 하나인 움직임 벡터를 취득하는 방법에 대해서는 예를 들면 일본국 특개 평8-149480호 공보에 개시되어 있다.
그런데, 데이터량이 상대적으로 적은 화상으로부터 움직임 파라미터를 취득하면, 데이터량이 상대적으로 많은 화상으로부터 움직임 파라미터를 취득하는 경우에 비해 움직임 파라미터의 정밀도가 저하되어, 그 후의 화상 처리에서 적절한 처리가 행해지지 않는 일이 발생한다.
본 발명은 이와 같은 상황을 감안하여 이루어진 것이며, 고정밀도의 움직임 파라미터를 화상 처리에 이용할 수 있도록 하는 것이다.
본 발명의 제1 실시예에 의하면, 화상을 기록 매체에 기록하고, 상기 기록 매체로부터 상기 화상을 재생하는 기록/재생 장치가 제공된다. 상기 기록/재생 장 치는, 제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 제1 취득 수단과, 상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 변환 수단과, 상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 기록 제어 수단과, 상기 기록 매체로부터 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하는 판독 제어 수단과, 상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 화상 처리 수단을 구비한다.
상기 제1 취득 수단에 의해 취득되는 움직임 파라미터에는, 움직임 벡터, 휘도 또는 색 신호의 변화 정도를 나타내는 레벨 변화, 확대 또는 축소 정도를 나타내는 줌 배율, 회전의 정도를 나타내는 회전율, 주파수 대역의 변화 정도를 나타내는 주파수 대역 변화, 또는 포커스의 변화 정도를 나타내는 포커스 변화 중 하나 이상의 파라미터가 포함될 수 있다.
상기 변환 수단은 상기 제1 화상의 프레임을 데시메이션 처리하거나 또는 상기 제1 화상의 각각의 프레임의 화소를 데시메이션 처리하여, 상기 제1 화상을 데이터량이 적은 제2 화상으로 변환할 수 있다.
상기 화상 처리 수단은, 상기 화상 처리로서, 프레임 보간, 업-컨버젼, Y/C분리, 노이즈 감소, 오브젝트 추출, 또는 I/P(Interlace/Progressive) 변환 중 하나 이상을 행할 수 있다.
제1 실시예에 따른 기록/재생 장치는, 상기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 제2 취득 수단과, 상기 제1 화상의 움직임 파라미터와 상기 제2 화상의 움직임 파라미터 간의 하나 이상의 차분에 관한 차분 정보를 취득하는 차분 정보 취득 수단과, 상기 제1 화상의 움직임 파라미터를 복원하는 복원 수단을 더 포함할 수 있다. 이 경우, 상기 기록 제어 수단은 상기 차분 정보를 상기 움직임 파라미터 정보로서 상기 기록 매체에 기록시킬 수 있으며, 상기 복원 수단은 상기 기록 매체로부터 상기 움직임 파라미터 정보로서 판독되는 상기 차분 정보와, 상기 기록 매체로부터 판독되는 상기 제2 화상으로부터 얻어지는 상기 제2 화상의 움직임 파라미터로부터, 상기 제1 화상의 움직임 파라미터를 복원할 수 있다.
화상을 재생하는 재생 장치에서 화상 처리를 행하는 화상 처리 수단이 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 경우에, 상기 차분 정보 취득 수단은, 상기 제1 화상의 움직임 파라미터 중 상기 화상 처리 수단의 화상 처리에 이용되는 하나 이상의 움직임 파라미터에 대해서만, 상기 차분 정보를 취득할 수 있다.
제1 실시예에 따른 기록/재생 장치는, 상기 제2 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단과, 상기 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단을 더 포함할 수 있다. 이 경우, 상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보를 상기 기록 매체에 기록할 수 있으며, 상기 판독 제어 수단은 상기 기록 매체로부터 상기 압축 데이터와 상기 차분 정보를 판독하는 것이 가능하 다.
또, 제1 실시예에 따른 기록/재생 장치는, 상기 제1 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단과, 상기 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단과, 상기 압축해제 수단에 의해 압축해제된 상기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 제3 취득 수단을 더 포함할 수 있다. 이 경우, 상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보를 상기 기록 매체에 기록하며, 상기 판독 제어 수단은 상기 기록 매체로부터 상기 압축 데이터와 상기 차분 정보를 판독하며, 상기 복원 수단은, 상기 차분 정보와, 상기 제3 취득 수단에 의해 취득된 상기 제2 화상의 움직임 파라미터를 이용하여, 상기 제1 화상의 움직임 파라미터를 복원한다.
본 발명의 제1 실시예에 의하면, 화상을 기록 매체에 기록하고, 상기 기록 매체로부터 상기 화상을 재생하는 기록/재생 장치의 기록/재생 방법, 또는 화상을 기록 매체에 기록하고 상기 기록 매체로부터 상기 화상을 재생하는 기록/재생 처리를 컴퓨터로 하여금 실행할 수 있도록 하는 프로그램이 제공된다. 상기 기록/재생 방법 또는 프로그램은, 제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 단계와, 상기 제1 화상을, 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 단계와, 상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 단계와, 상기 기록 매체로부터 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하는 단계와, 상기 기 록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 단계를 포함한다.
이상과 같은 제1 실시예의 기록/재생 장치, 기록/재생 방법, 또는 프로그램에 있어서는, 상기 제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하고, 상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하고, 상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록한다. 그리고, 상기 기록 매체로부터 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하고, 상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행한다.
본 발명의 제2 실시예에 따르면, 화상을 기록 매체에 기록하는 기록 장치가 제공된다. 상기 기록 장치는, 제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 제1 취득 수단과, 상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 변환 수단과, 상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 기록 제어 수단을 구비한다.
제2 실시예의 기록 장치는, 상기 기록 매체에 기록된 상기 움직임 파라미터 정보와 상기 제2 화상을, 화상을 재생하는 다른 장치에 송신하는 송신 제어 수단을 더 포함하는 것이 가능하다.
상기 제1 취득 수단에 의해 취득되는 움직임 파라미터에는, 움직임 벡터, 휘도 또는 색 신호의 변화 정도를 나타내는 레벨 변화, 확대 또는 축소 정도를 나타내는 줌 배율, 회전의 정도를 나타내는 회전율, 주파수 대역의 변화 정도를 나타내는 주파수 대역 변화, 및 포커스의 변화 정도를 나타내는 포커스 변화 중 하나 이상의 파라미터가 포함될 수 있다.
상기 변환 수단은 상기 제1 화상의 프레임을 데시메이션 처리하거나 또는 상기 제1 화상의 각각의 프레임의 화소를 데시메이션 처리하여, 상기 제1 화상을 데이터량이 적은 제2 화상으로 변환할 수 있다.
제2 실시예의 기록 장치는, 상기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 제2 취득 수단과, 상기 제1 화상의 움직임 파라미터와 상기 제2 화상의 움직임 파라미터 간의 하나 이상의 차분에 관한 차분 정보를 취득하는 차분 정보 취득 수단을 더 포함할 수 있다. 이 경우, 상기 기록 제어 수단은 상기 차분 정보를 상기 움직임 파라미터 정보로서 상기 기록 매체에 기록시킬 수 있다.
화상을 재생하는 재생 장치에서 화상 처리를 행하는 화상 처리 수단이 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 경우에, 상기 차분 정보 취득 수단은, 상기 제1 화상의 움직임 파라미터 중 상기 화상 처리 수단의 화상 처리에 이용되는 하나 이상의 움직임 파라미터에 대해서만, 상기 차분 정보를 취득할 수 있다.
제2 실시예의 기록 장치는, 상기 제2 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단을 더 포함할 수 있다. 이 경우, 상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보를 상기 기록 매체에 기록시킬 수 있다.
또, 제2 실시예의 기록 장치는, 상기 제1 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단을 더 포함할 수 있다. 이 경우, 상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보를 상기 기록 매체에 기록시킬 수 있다.
본 발명의 제2 실시예에 의하면, 화상을 기록 매체에 기록하는 기록 장치의 기록 방법, 또는 화상을 기록 매체에 기록하는 기록 처리를 컴퓨터로 하여금 실행할 수 있도록 하는 프로그램이 제공되며, 상기 기록 방법 또는 프로그램은, 제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 단계, 상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 단계, 상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 단계를 포함한다.
이상과 같은 제2 실시예의 기록 장치, 기록 방법, 또는 프로그램에 있어서는, 상기 제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하고, 상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환한다. 그리고, 상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록한다.
본 발명의 제3 실시예에 의하면, 화상을 재생하는 재생 장치가 제공된다. 상기 재생 장치는, 제1 화상의 움직임 파라미터에 관한 하나 이상의 움직임 파라미 터 정보와, 상기 제1 화상의 데이터량을 줄여서 얻어진 제2 화상이, 기록되어 있는 기록 매체로부터, 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하는 판독 제어 수단과; 상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 화상 처리 수단을 구비한다.
제3 실시예의 재생 장치는, 다른 장치로부터 송신되는 상기 움직임 파라미터 정보 및 상기 제2 화상을 수신하는 수신 제어 수단을 더 포함할 수 있다. 이 경우, 상기 기록 매체에는 상기 수신 제어 수단에 의해 수신된 상기 움직임 파라미터 정보와 상기 제2 화상을 기록시킬 수 있다.
상기 화상 처리 수단은, 상기 화상 처리로서, 프레임 보간, 업-컨버젼, Y/C분리, 노이즈 감소, 오브젝트 추출, 또는 I/P(Interlace/Progressive) 변환 중 하나 이상을 행할 수 있다.
제3 실시예의 재생 장치는 제1 화상의 움직임 파라미터를 복원하는 복원 수단을 더 포함할 수 있다. 이 경우, 상기 기록 매체에, 상기 제1 화상의 움직임 파라미터와 상기 제2 화상의 하나 이상의 움직임 파라미터 간의 하나 이상의 차분에 관한 차분 정보가, 상기 움직임 파라미터 정보로서 기록되어 있는 경우, 상기 복원 수단은, 상기 기록 매체로부터 상기 움직임 파라미터 정보로서 판독되는 상기 차분 정보와, 상기 기록 매체로부터 판독되는 상기 제2 화상으로부터 얻어지는 상기 제2 화상의 움직임 파라미터로부터, 상기 제1 화상의 움직임 파라미터를 복원할 수 있다.
제3 실시예의 재생 장치는, 상기 제2 화상의 움직임 파라미터를 이용하여 상기 제2 화상을 압축함으로써 얻어져 상기 기록 매체에 기록되어 있는 상기 제2 화상의 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단을 더 포함할 수 있다.
제3 실시예의 재생 장치는, 상기 제1 화상의 움직임 파라미터를 이용하여 상기 제2 화상을 압축함으로써 얻어져 상기 기록 매체에 기록되어 있는 상기 제2 화상의 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단과, 상기 압축해제 수단에 의해 압축해제된 상기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 취득 수단을 더 포함한다. 이 경우, 상기 복원 수단은, 상기 차분 정보와, 상기 취득 수단에 의해 취득된 상기 제2 화상의 움직임 파라미터를 이용하여, 상기 제1 화상의 움직임 파라미터를 복원한다.
또한, 본 발명의 제3 실시예에 의하면, 화상을 재생하는 재생 장치의 재생 방법, 또는 화상을 재생하는 재생 처리를 컴퓨터로 하여금 실행할 수 있도록 하는 프로그램이 제공된다. 상기 재생 방법 또는 프로그램은, 제1 화상의 하나 이상의 움직임 파라미터에 관한 움직임 파라미터 정보와, 상기 제1 화상의 데이터량을 줄여서 얻어진 제2 화상이 기록되어 있는 기록 매체로부터, 상기 제2 화상 및 상기 움직임 파라미터 정보를 판독하는 단계와; 상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 단계를 포함한다.
이상과 같은 제3 실시예의 재생 장치, 재생 방법, 또는 프로그램에 있어서는, 상기 제1 화상의 하나 이상의 움직임 파라미터에 관한 움직임 파라미터 정보와, 상기 제1 화상의 데이터량을 줄여서 얻어진 제2 화상이 기록되어 있는 기록 매체로부터, 상기 제2 화상과 상기 움직임 파라미터 정보를 판독한다. 그리고, 상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행한다.
이하에서는 본 발명의 실시예를 도면을 참조하여 설명한다. 본 발명의 특징과 명세서 또는 도면에 기재된 실시예와의 대응 관계는 다음과 같다. 이 기재는 본 발명을 구현하는 실시예가 명세서 또는 도면에 기재되어 있다는 것을 확인하기 위한 것이다. 따라서, 명세서 또는 도면 중에는 기재되어 있지만, 본 발명의 특징에 대응하는 실시예로서 개시되지 않은 실시예가 있다고 해도, 그 실시예가 본 발명의 특징에 대응하지 않는 것을 의미하는 것은 아니다. 역으로, 실시예가 본 발명의 특징에 대응하는 것으로서 여기에 기재되어 있다고 해도, 그것은 그 실시예가 그 구성 요건 이외의 구성 요건에는 대응하지 않는다는 것을 의미하는 것도 아니다.
본 발명의 제1 실시예의 기록/재생 장치(예를 들면, 도 1의 기록/재생 장치(11))는 화상을 기록 매체(예를 들면, 도 1의 HDD(14))에 기록하고 상기 기록 매체로부터 상기 화상을 재생하는 기록/재생 장치이다. 이 기록/재생 장치는, 제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 제1 취득 수단(예를 들면, 도 2의 MP1 취득부(22))과, 상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 변환 수단(예를 들면, 도 2의 데시메이터(23))과, 상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 기록 제어 수단(예를 들면, 도 2의 입출력 인터페이스(21))과, 상기 기록 매체로부터 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하는 판독 제어 수단(예를 들면, 도 4의 입출력 인터페이스(41))과, 상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 화상 처리 수단(예를 들면, 도 4의 화상 처리부(43))을 구비한다.
본 발명의 제1 실시예의 기록/재생 장치는, 상기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 제2 취득 수단(예를 들면, 도 13의 MP2 취득부(103))과, 상기 제1 화상의 움직임 파라미터와 상기 제2 화상의 움직임 파라미터 간의 하나 이상의 차분에 관한 차분 정보를 취득하는 차분 정보 취득 수단(예를 들면, 도 13의 MPd 차분 정보 취득부(104))과, 상기 제1 화상의 움직임 파라미터를 복원하는 복원 수단(예를 들면 도 16의 MP1 복원부(125))을 더 포함할 수 있다. 이 경우, 상기 기록 제어 수단은 상기 차분 정보를 상기 움직임 파라미터 정보로서 상기 기록 매체에 기록하며, 상기 복원 수단은, 상기 기록 매체로부터 상기 움직임 파라미터 정보로서 판독되는 상기 차분 정보와, 상기 기록 매체로부터 판독되는 상 기 제2 화상으로부터 얻어지는 상기 제2 화상의 움직임 파라미터로부터, 상기 제1 화상의 움직임 파라미터를 복원할 수 있다.
본 발명의 제1 실시예의 기록/재생 장치는, 상기 제2 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단(예를 들면, 도 6의 압축부(55))과, 상기 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단(예를 들면, 도 11의 압축해제부(83))을 더 포함할 수 있다. 이 경우, 상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보를 상기 기록 매체에 기록할 수 있으며, 상기 판독 제어 수단은 상기 기록 매체로부터 상기 압축 데이터 및 상기 차분 정보를 판독할 수 있다.
또, 본 발명의 제1 실시예의 기록/재생 장치는, 상기 제1 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단(예를 들면, 도 13의 압축부(105))과, 상기 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단(예를 들면, 도 16의 압축해제부(123))과, 상기 압축해제 수단에 의해 압축해제된 상기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 제3 취득 수단(예를 들면, 도 16의 MP2 취득부(124))을 더 포함한다. 이 경우, 상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보를 상기 기록 매체에 기록하며, 상기 판독 제어 수단은 상기 기록 매체로부터 상기 압축 데이터와 상기 차분 정보를 판독하며, 상기 복원 수단은, 상기 차분 정보와, 상기 제3 취득 수단에 의해 취득된 상기 제2 화상의 움직임 파라미터를 이용하여, 상기 제1 화상의 움직임 파라미터를 복원할 수 있다.
본 발명의 제1 실시예의 기록/재생 방법 또는 프로그램은, 화상을 기록 매체에 기록하고, 상기 기록 매체로부터 상기 화상을 재생하는 기록/재생 장치의 기록/재생 방법, 또는 화상을 기록 매체에 기록하고, 상기 기록 매체로부터 상기 화상을 재생하는 기록/재생 처리를 컴퓨터로 하여금 실행할 수 있도록 하는 프로그램이다. 기록/재생 또는 프로그램은, 제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 단계(예를 들면, 도 3의 단계 S11), 상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 단계(예를 들면, 도 3의 단계 S12), 상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 단계(예를 들면, 도 3의 단계 S14), 상기 기록 매체로부터 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하는 단계(예를 들면, 도 5의 단계 S21), 상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 단계(예를 들면, 도 5의 단계 S23)를 포함한다.
본 발명의 제2 실시예의 기록 장치(예를 들면, 도 18의 기록 장치(141))는 화상을 기록 매체(예를 들면, 도 18의 HDD(144))에 기록하는 기록 장치이다. 이 기록 장치는, 제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 제1 취득 수단(예를 들면, 도 2의 MP1 취득부(22))과, 상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 변환 수단(예를 들면, 도 2의 데시메이터(23))과, 상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 기록 제어 수단(예를 들면, 도 2의 입출력 인터페이스(21))을 구비한다.
본 발명의 제2 실시예의 기록 장치는, 상기 기록 매체에 기록된 상기 움직임 파라미터 정보와 상기 제2 화상을, 화상을 재생하는 다른 장치(예를 들면, 도 18의 재생 장치(151))에 송신하는 송신 제어 수단(예를 들면, 도 18의 송신 제어부(145))을 추가로 포함하는 것이 가능하다.
본 발명의 제2 실시예의 기록 장치는, 상기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 제2 취득 수단(예를 들면, 도 13의 MP2 취득부(103))과, 상기 제1 화상의 움직임 파라미터와 상기 제2 화상의 움직임 파라미터 간의 하나 이상의 차분에 관한 차분 정보를 취득하는 차분 정보 취득 수단(예를 들면, 도 13의 MPd 차분 정보 취득부(104))을 더 포함한다. 이 경우, 상기 기록 제어 수단은 상기 차분 정보를 상기 움직임 파라미터 정보로서 상기 기록 매체에 기록할 수 있다.
본 발명의 제2 실시예의 기록 장치는, 상기 제2 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단(예를 들면, 도 6의 압축부(55))을 더 포함하며, 상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보를 상기 기록 매체에 기록할 수 있다.
또, 본 발명의 제2 실시예의 기록 장치는, 상기 제1 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단(예를 들면, 도 13의 압축부(105))을 더 포함하며, 상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보를 상기 기록 매체에 기록할 수 있다.
본 발명의 제2 실시예의 기록 방법 또는 프로그램은, 화상을 기록 매체에 기록하는 기록 장치의 기록 방법, 또는 화상을 기록 매체에 기록하는 기록 처리를 컴퓨터로 하여금 실행할 수 있도록 하는 프로그램이다. 이 기록 방법 또는 프로그램은, 제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 단계(예를 들면, 도 3의 단계 S11)와, 상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 단계(예를 들면, 도 3의 단계 S12)와, 상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 단계(예를 들면, 도 3의 단계 S14)를 포함한다.
본 발명의 제3 실시예의 재생 장치(예를 들면, 도 18의 재생 장치(151))는 화상을 재생하는 재생 장치이며, 이 재생 장치는, 제1 화상의 하나 이상의 움직임 파라미터에 관한 움직임 파라미터 정보와, 상기 제1 화상의 데이터량을 줄여서 얻어진 제2 화상이 기록되어 있는 기록 매체(예를 들면, 도 18의 HDD(153))로부터, 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하는 판독 제어 수단(예를 들면, 도 4의 입출력 인터페이스(41))과; 상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 화상 처리 수단(예를 들면, 도 4의 화상 처리부(43))을 구비한다.
본 발명의 제3 실시예의 재생 장치는, 다른 장치(예를 들면, 도 18의 기록 장치(141))로부터 송신되는 상기 움직임 파라미터 정보와 상기 제2 화상을 수신하는 수신 제어 수단(예를 들면, 도 18의 수신 제어부(152))을 더 포함한다. 이 경우, 상기 기록 매체에는, 상기 수신 제어 수단에 의해 수신된 상기 움직임 파라미터 정보 및 상기 제2 화상을 기록할 수 있다.
본 발명의 제3 실시예의 재생 장치는 상기 제1 화상의 움직임 파라미터를 복원하는 복원 수단(예를 들면, 도 11의 MP1 복원부(84))을 추가로 포함한다. 이 경우, 상기 기록 매체에, 상기 제1 화상의 움직임 파라미터와 상기 제2 화상의 움직임 파라미터 간의 하나 이상의 차분에 관한 차분 정보가, 상기 움직임 파라미터 정보로서 기록되어 있을 때, 상기 복원 수단은, 상기 기록 매체로부터 상기 움직임 파라미터 정보로서 판독되는 상기 차분 정보와, 상기 기록 매체로부터 판독되는 상기 제2 화상으로부터 얻어지는 상기 제2 화상의 움직임 파라미터로부터, 상기 제1 화상의 움직임 파라미터를 복원한다.
본 발명의 제3 실시예의 재생 장치는, 상기 제2 화상의 움직임 파라미터를 이용하여 상기 제2 화상을 압축함으로써 얻어져 상기 기록 매체에 기록되어 있는 상기 제2 화상의 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단(예를 들면, 도 11의 압축해제부(83))을 추가로 포함하는 것이 가능하다.
본 발명의 제3 실시예의 재생 장치는, 상기 제1 화상의 움직임 파라미터를 이용하여 상기 제2 화상을 압축함으로써 얻어져 상기 기록 매체에 기록되어 있는 상기 제2 화상의 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단(예를 들면, 도 16의 압축해제부(123))과, 상기 압축해제 수단에 의해 압축해제된 상 기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 취득 수단(예를 들면, 도 16의 MP2 취득부(124))을 더 포함한다. 이 경우, 상기 복원 수단은, 상기 차분 정보와, 상기 취득 수단에 의해 취득된 상기 제2 화상의 움직임 파라미터를 이용하여, 상기 제1 화상의 움직임 파라미터를 복원할 수 있다.
본 발명의 제3 실시예의 재생 방법 또는 프로그램은, 화상을 재생하는 재생 장치의 재생 방법, 또는 화상을 재생하는 재생 처리를 컴퓨터로 하여금 실행할 수 있도록 하는 프로그램이다. 이 재생 방법 또는 프로그램은, 제1 화상의 하나 이상의 움직임 파라미터에 관한 움직임 파라미터 정보와, 상기 제1 화상의 데이터량을 줄여서 얻어진 제2 화상이 기록되어 있는 기록 매체로부터, 상기 제2 화상과 상기 움직임 파라미터 정보를 판독하는 단계(예를 들면, 도 5의 단계 S21)와, 상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 단계(예를 들면, 도 5의 단계 S23)를 포함한다.
다음에, 도면을 참조하여 본 발명의 실시예에 대하여 설명한다.
도 1은 본 발명을 적용한 기록/재생 시스템의 일실시예의 구성예를 나타낸 블록도이다.
기록/재생 시스템은 기록/재생 장치(11), HDTV(High Definition Television) 카메라(12) 및 모니터(16)를 포함하며, 기록/재생 장치(11)는 기록 제어부(13), HDD(Hard Disk Drive)(14) 및 재생 제어부(15)를 포함한다. 그리고, 기록/재생 장치(11)는 하드 디스크 레코더, 또는 소위 홈 네트워크에 접속되는 파일 서버 등에 적용할 수 있다.
HDTV 카메라(12)는 HDTV 신호로 이루어지는 HD(고해상도) 화상을 촬상하고, HD 화상을 기록 제어부(13)에 공급한다.
기록 제어부(13)는 HDTV 카메라(12)로부터 공급되는 HD 화상을 HDD(14)에 공급하여 기록되도록 한다. 또, 기록 제어부(13)는 HDD(14)에 기록된 HD 화상을 판독하여, HD 화상의 움직임에 관한 움직임 파라미터를 취득하는 처리를 행하고, HD 화상을 HD 화상보다 데이터량이 적은 화상으로 변환한다. 그리고, 기록 제어부(13)는 데이터량이 적은 화상과 움직임 파라미터에 관한 움직임 파라미터 정보를 HDD(14)에 공급하여 기록되도록 한다.
여기서, 움직임 파라미터로서는, 예를 들면, 움직임 벡터, 휘도 또는 색 신호의 변화 정도를 나타내는 레벨 변화, 확대 또는 축소 정도를 나타내는 줌 배율, 회전의 정도를 나타내는 회전율, 주파수 대역의 변화 정도를 나타내는 주파수 대역 변화, 및 포커스의 변화 정도를 나타내는 포커스 변화 중 하나 이상의 파라미터를 채용할 수 있다.
이와 달리, 기록 제어부(13)는 HDTV 카메라(12)로부터 공급되는 HD 화상을 일시적으로 HDD(14)에 기록하지 않고 HDTV 카메라(12)로부터 공급되는 HD 화상으로부터 직접 움직임 파라미터 정보를 취득하는 처리를 하고, 그 후 HDTV 카메라(12)로부터의 HD 화상을 그 HD 화상보다 데이터량이 적은 화상으로 변환하며, 데이터량이 적은 화상과 움직임 파라미터 정보를 HDD(14)에 기록해도 된다.
HDD(14)는 기록 제어부(13)로부터 공급되는 데이터량이 적은 화상과 움직임 파라미터 정보를 내장 하드 디스크에 기록한다. 그리고, 데이터량이 적은 화상과 움직임 파라미터 정보를 기록하는 기록매체로서는, 하드 디스크 이외의 디스크형 기록 매체 또는 반도체 메모리 등을 채용할 수 있다.
재생 제어부(15)는 HDD(14)로부터 데이터량이 적은 화상과 움직임 파라미터 정보를 판독하고, 움직임 파라미터 정보로부터 얻어지는 움직임 파라미터를 이용하여, 데이터량이 적은 화상에 화상 처리를 행한다. 또한, 재생 제어부(15)는 화상 처리를 행함으로써 얻어진 화상을 모니터(16)에 공급한다.
여기서, 움직임 파라미터 정보로부터 얻어지는 하나 이상의 움직임 파라미터는 한 종류의 화상 처리에만 이용할 수도 있고, 복수 종류의 화상 처리에 공용할 수도 있다. 예를 들면, 움직임 파라미터 정보로부터 얻어지는 움직임 파라미터인 움직임 벡터나 휘도의 변화 정도를 나타내는 휘도 변화 등은, 노이즈 감소나 업-컨버젼 등의 화상 처리에 공용할 수 있다.
또, 움직임 파라미터를 이용하여 행하는 화상 처리에는 예를 들면 프레임 보간, 업-컨버젼, Y/C 분리, 노이즈 감소, 오브젝트 추출, I/P 변환 등이 있다.
모니터(16)는 재생 제어부(15)로부터 공급되는 화상을 표시한다.
도 2는 도 1의 기록 제어부(13)의 구성예를 나타낸 블록도이다.
입출력 인터페이스(21)는 HDTV 카메라(12)로부터 공급되는 HD 화상을 수신하여, MP1(움직임 파라미터 1) 취득부(22) 또는 HDD(14)에 공급한다. 또한, 입출력 인터페이스(21)는 HDD(14)로부터 HD 화상을 판독하여 MP1 취득부(22)에 공급한다. 또, 입출력 인터페이스(21)는 멀티플렉스부(24)로부터 공급되는 화상 및 움직임 파 라미터 정보를 수신하고, 이 화상 및 움직임 파라미터를 HDD(14)에 공급하여 기록되도록 한다.
MP1 취득부(22)는, 고정밀의 움직임 파라미터를 취득하기 위해서, 입출력 인터페이스(21)를 통하여 HDD(14)로부터 공급되는 고프레임 레이트와 고해상도의 HD 화상으로부터 움직임 벡터 등의 움직임 파라미터 MP1를 검출(산출)하여 취득하고, 움직임 파라미터 MP1을 멀티플렉스부(24)에 공급한다. 여기서, MP1 취득부(22)는, HDD(14)에 이미 기록되어 있는 HD 화상을 이용하여 움직임 파라미터 MP1의 검출을 행하므로, 예를 들면 많은 프레임을 이용하여 고정밀도의 움직임 파라미터 MP1를 취득할 수 있다.
구체적으로, 예를 들면, 움직임 파라미터 MP1 중 움직임 벡터에 관하여서는, MPEG(Moving Picture Expert Group) 표준에 기초한 화상 처리의 경우에, 2프레임 또는 3프레임을 이용하여 처리를 행함으로써 움직임 벡터가 검출된다. 한편, MP1 취득부(22)는 HDD(14)에 이미 기록된 HD 화상으로부터 움직임 벡터를 검출하므로, 실시간으로 움직임 벡터를 검출하는 경우와 비교하여, 시간적으로 충분한 여유가 있다. 그러므로, 4개 이상의 프레임을 이용하여 움직임 벡터의 검출을 행할 수 있고, 이로써 움직임의 경향을 보다 정밀하게 예측하여, 고정밀도의 움직임 벡터를 취득할 수 있다.
MP1 취득부(22)는 전술한 바와 같이 입출력 인터페이스(21)를 통하여 HDD(14)로부터 공급되는 HD 화상으로부터 움직임 파라미터 MP1를 취득하는 것 이외에 그 HD 화상을 데시메이터(23)에 공급한다.
데시메이터(23)는 MP1 취득부(22)로부터 공급된 HD 화상의 프레임을 데시메이션 처리하거나, 또는 각각의 프레임의 화소를 데시메이션 처리하여, HD 화상을 데이터량이 적은 데시메이션 처리된 화상으로 변환하고, 그 데시메이션 처리된 화상을 멀티플렉스부(24)에 공급한다.
구체적으로, 데시메이터(23)는, 예를 들면, HD 화상이 연속하는 2프레임 이상의 N 프레임마다 N-1 프레임을 데시메이션 처리하고, HD 화상을 그 HD 화상보다도 저프레임 레이트의 데시메이션 처리된 화상으로 변환한다. 이와 달리, 데시메이터(23)는, 예를 들면, HD 화상의 연속 프레임 중에서 각각의 프레임의 인접하는 2화소 이상의 M화소를 1화소로 데시메이션 처리하는 것으며, HD 화상을 그 HD 화상보다도 저해상도의 데시메이션 처리된 화상으로 변환한다.
그리고, 데시메이터(23)는 HD 화상의 프레임을 데시메이션 처리하고, 또한 각각의 프레임의 화소를 데시메이션 처리하여, HD 화상을 데이터량이 적은 데시메이션 처리된 화상으로 변환할 수 있다.
멀티플렉스부(24)는, MP1 취득부(22)로부터 공급된 움직임 파라미터 정보로서의 움직임 파라미터 MP1와, 데시메이터(23)로부터 공급된 데시메이션 처리된 화상을 다중화하고, 그 결과 얻어지는 다중화 데이터를 입출력 인터페이스(21)에 공급한다.
여기서, 입출력 인터페이스(21)는 전술한 바와 같이 하여 멀티플렉스부(24)에서 움직임 파라미터 정보와 데시메이션 처리된 화상을 다중화함으로써 얻어지는 다중화 데이터를 HDD(14)에 공급하여 기록되도록 한다.
그리고, MP1 취득부(22)는 HDTV 카메라(12)로부터 입출력 인터페이스(21)를 통하여 공급되는 HD 화상으로부터 직접(HDD(14)에 기록된 HD 화상으로부터가 아닌) 움직임 파라미터 MP1를 취득하는 처리를 행해도 된다.
또, 멀티플렉스부(24)는 MP1 취득부(22)로부터 공급된 움직임 파라미터 정보로서의 움직임 파라미터 MP1과 데시메이터(23)로부터 공급된 데시메이션 처리된 화상을 그대로 입출력 인터페이스(21)에 공급하여도 된다.
이 경우, 입출력 인터페이스(21)는 멀티플렉스부(24)로부터 공급된 다중화되어 있지 않은 움직임 파라미터 정보와 데시메이션 처리된 화상을, 예를 들면, 별개의 파일로서 HDD(14)에 기록한다.
다음에, 도 3의 플로차트를 참조하여 도 2의 기록 제어부(13)에서의 처리에 대하여 설명한다.
HD 화상이 기록 제어부(13)에 공급되면, 기록 제어부(13)는 그 HD 화상을 수신하고, 그 HD 화상을 HDD(14)에 공급하여 기록되도록 한다. 그리고, 기록 제어부(13)는, 예를 들면 사용자가 도시하지 않은 조작부를 조작한 경우에 또는 특히 행할 처리가(대부분) 없는 경우에, 도 3의 플로차트에 따른 처리를 행한다.
즉, 입출력 인터페이스(21)는 HDD(14)로부터 HD 화상을 판독하고, HD 화상을 MP1 취득부(22)에 공급한다. 단계 S11에서, MP1 취득부(22)는 입출력 인터페이스(21)로부터 공급된 HD 화상으로부터 움직임 파라미터 MP1를 취득하고, 움직임 파라미터 MP1을 멀티플렉스부(24)에 공급한다. 또, MP1 취득부(22)는 입출력 인터페이스(21)로부터 공급된 HD 화상을 데시메이터(23)에 공급하고, 단계 S12로 진행한 다.
단계 S12에서, 데시메이터(23)는, MP1 취득부(22)로부터 공급된 HD 화상의 프레임을 데시메이션 처리하거나 또는 HD 화상의 각각의 프레임의 화소를 데시메이션 처리함으로써, HD 화상을 데이터량이 적은 데시메이션 처리된 화상으로 변환하고, 이 데시메이션 처리된 화상을 멀티플렉스부(24)에 공급하며, 단계 S13으로 진행한다.
단계 S13에서, 멀티플렉스부(24)는 MP1 취득부(22)로부터 공급된 움직임 파라미터 정보로서의 움직임 파라미터 MP1와, 데시메이터(23)로부터 공급된 데시메이션 처리된 화상을 다중화하고, 그 결과 얻어지는 다중화 데이터를 입출력 인터페이스(21)에 공급한 후, 단계 S14로 진행한다.
단계 S14에서, 입출력 인터페이스(21)는 멀티플렉스부(24)로부터 공급된 다중화 데이터를 HDD(14)에 공급하고, 처리를 종료한다.
도 4는 도 1의 재생 제어부(15)의 구성예를 나타낸 블록도이다.
입출력 인터페이스(41)는 예를 들면 사용자가 도시하지 않은 조작부를 조작함으로써 발행되는 재생 지시에 응답하여 HDD(14)로부터 다중화 데이터를 판독하고, 다중화 데이터를 디멀티플렉스부(42)에 공급한다.
디멀티플렉스부(42)는 입출력 인터페이스(41)로부터의 다중화 데이터를 데시메이션 처리된 화상과 움직임 파라미터 정보로 역다중화(분리)하여, 화상 처리부(43)에 공급한다.
화상 처리부(43)는, 디멀티플렉스부(42)로부터 공급된 움직임 파라미터 정보 인 HD 화상의 움직임 파라미터 MP1를 이용하여, 디멀티플렉스부(42)로부터 공급된 데시메이션 처리된 화상에 화상 처리를 행하고, 그 화상 처리에 의해 얻어진 화상을 모니터(16)에 공급한다. 화상 처리부(43)는, 고품질(고프레임 레이트와 고해상도)의 HD 화상으로부터 얻어진 고정밀의 움직임 파라미터 MP1를 화상 처리에 사용함으로써, 데시메이션 처리된 화상에 대해서 적절한 화상 처리를 행하는 것이 가능하다.
구체적으로, 예를 들면, 화상 처리부(43)는 노이즈 감소부(44)와 보간부(45)를 포함하고 있다. 노이즈 감소부(44)는, 고정밀의 움직임 파라미터 MP1를 이용하여, 데시메이션 처리된 화상의 각각의 프레임에 대하여, 그 프레임 화상이 어느 정도 이상의 움직임이 있는 움직임 화상인지 또는 움직임이(대부분) 없는 정지 화상인지를 판단한다. 또, 노이즈 감소부(44)는, 프레임의 화상이 움직임 화상으로 판단된 때에는, 그 프레임 내의 화상만을 이용하여 노이즈 저감 처리를 행한다. 한편, 노이즈 감소부(44)는, 프레임의 화상이 정지 화상으로 판단된 때에는, 그 프레임을 포함하는 전후의 복수의 프레임의 화상을 이용하여 노이즈 저감 처리를 행한다. 또한, 노이즈 감소부(44)는 노이즈 저감 처리를 수행한 데시메이션 처리된 화상을 보간부(45)에 공급한다. 그리고, 노이즈 감소부(44)는 움직임 파라미터 MP1 중 예를 들면 움직임 벡터 또는 휘도값의 변화를 나타내는 휘도 변화를 이용하여 각각의 프레임 화상이 움직임 화상인지 아니면 정지 화상인지를 판단한다.
보간부(45)는, 노이즈 감소부(44)로부터 공급된 데시메이션 처리된 화상에 대해서, 디멀티플렉스부(42)로부터 공급된 고정밀의 움직임 파라미터 MP1 중 예를 들면 움직임 벡터 등을 이용하여, 프레임 보간 또는 각각의 프레임의 화소의 보간을 행함으로써, 데시메이션 처리된 화상을 고품질의 HD 화상으로 변환하고, 그 HD 화상을 모니터(16)에 공급한다.
다음에, 도 5의 플로차트를 참조하여 도 4의 재생 제어부(15)에서의 처리에 대하여 설명한다.
예를 들면, 사용자가 도시하지 않은 조작부를 조작할 때에 발행되는 화상 재생 지시가 입출력 인터페이스(41)에 지시되면, 단계 S21에서, 입출력 인터페이스(41)는 HDD(14)로부터 다중화 데이터를 판독하여 디멀티플렉스부(42)에 공급하며, 단계 S22로 진행한다.
단계 S22에서, 디멀티플렉스부(42)는 입출력 인터페이스(41)로부터의 다중화 데이터를 데시메이션 처리된 화상과 움직임 파라미터 MP1로 역다중화하여 화상 처리부(43)에 공급하며, 단계 S23으로 진행한다.
단계 S23에서, 화상 처리부(43)는, 디멀티플렉스부(42)로부터 제공된 움직임 파라미터인 고정밀도의 MP1를 이용하여, 디멀티플렉스부(42)로부터 제공된 데시메이션 처리된 화상에 화상 처리를 행하고, 그 결과의 화상을 모니터(16)에 공급하며, 처리를 종료한다.
구체적으로, 화상 처리부(43)에 있어서, 노이즈 감소부(44)는, 움직임 파라미터 MP1를 이용하여, 데시메이션 처리된 화상에 대해, 노이즈 저감 처리를 행하고, 그 결과 얻어지는 데시메이션 처리된 화상을 보간부(45)에 공급한다. 보간부(45)는, 움직임 파라미터 MP1를 이용하여, 노이즈 감소부(44)로부터의 데시메이 션 처리된 화상에 대해서 보간 처리를 행하고, 데시메이션 처리된 화상을 HD 화상으로 변환하며, 그 HD 화상을 모니터(16)에 공급한다. 모니터(16)에는 보간부(45)(화상 처리부(43))로부터 제공된 HD 화상이 표시된다.
도 6은 도 1의 기록 제어부(13)의 다른 구성예를 나타낸 블록도이다.
그리고, 도 6에서, 도 2에 도시된 부분에 대응하는 부분에 대하여는 동일한 부호를 부여하며, 그에 대한 설명은 적당히 생략한다.
도 6의 기록 제어부(13)는 데시메이터(23) 대신에 프레임 데시메이터(52)를 포함하며, MP2 취득부(53), MPd 차분 정보 취득부(54) 및 압축부(55)를 새로이 포함하고 있다. 도 6에 도시된 기록 제어부(13)는 새로운 구성요소를 제외하고는 도 2에 도시된 것과 동일하다.
프레임 데시메이터(52)에는 MP1 취득부(22)로부터 HD 화상이 공급된다. 프레임 데시메이터(52)는 MP1 취득부(22)로부터 제공된 HD 화상의 프레임을 데시메이션 처리하여 HD 화상을 데이터량이 적은 데시메이션 처리된 화상으로 변환하고, 데시메이션 처리된 화상을 MP2 취득부(53)에 공급한다.
MP2 취득부(53)는 프레임 데시메이터(52)로부터 공급된 데시메이션 처리된 화상으로부터, 데시메이션 처리된 화상의 움직임 벡터 등의 데시메이션 처리된 화상의 움직임에 관한 움직임 파라미터 MP2를 검출(산출)함으로써 취득하고, 그 움직임 파라미터 MP2를 MPd 차분 정보 취득부(54)에 공급한다. 또한, MP2 취득부(53)는 데시메이션 처리된 화상과 움직임 파라미터 MP2를 압축부(55)에 공급한다.
MPd 차분 정보 취득부(54)는 MP1 취득부(22)로부터 움직임 파라미터 MP1를 수신하며, 또한 MP2 취득부(53)로부터 움직임 파라미터 MP2를 수신한다. MPd 차분 정보 취득부(54)는 MP1 취득부(22)로부터 공급된 움직임 파라미터 MP1와 MP2 취득부(53)로부터 공급된 움직임 파라미터 MP2 간의 하나 이상의 차분에 관한 차분 정보 MPd를 검출(산출)하여 취득하고, 그 차분 정보 MPd를 멀티플렉스부(24)에 공급한다.
그리고, 움직임 파라미터 MP1와 움직임 파라미터 MP2에 동일 종류의 파라미터가 포함될 때, 그 파라미터 간의 차분 값을 계산할 수 있으면, 그 파라미터 간의 차분이 움직임 파라미터 정보에 관한 차분 정보 MPd로서 이용될 수 있다. 또, 움직임 파라미터 MP1에는 존재하지만, 움직임 파라미터 MP2에는 존재하지 않는 파라미터에 대해서는, 움직임 파라미터 MP1에 존재하는 파라미터 그 자체를 움직임 파라미터 정보에 관한 차분 정보 MPd로서 직접 이용할 수 있다. 즉, 움직임 파라미터 정보에 관한 차분 정보 MPd는, 그 움직임 파라미터 정보에 관한 차분 정보 MPd와 움직임 파라미터 MP2를 이용하여 움직임 파라미터 MP1를 복원할 수 있으면, 어떠한 정보도 가능하다.
전술한 바와 같이, 움직임 파라미터 정보로서의 차분 정보 MPd로서는, 움직임 파라미터 MP1와 움직임 파라미터 MP2에서의 파라미터 간의 차분을 이용할 수도 있고, 움직임 파라미터 MP1 그 자체를 이용할 수도 있다. 일반적으로, 움직임 파라미터 MP1와 움직임 파라미터 MP2 간의 차분은 움직임 파라미터 MP1 자체보다 더 적은 데이터량을 갖는다. 그러므로, 움직임 파라미터 MP1와 움직임 파라미터 MP2 간의 차분이 움직임 파라미터 정보로서 HDD(14)에 기록되는 경우에는, 움직임 파라 미터 자체를 움직임 파라미터 정보로서 HDD(14)에 기록하는 경우에 비해, HDD(14)의 기억 용량이 절약되며, 또한 움직임 파라미터 정보를 전송할 때에, 그 전송에 필요한 시간이 단축될 수 있다.
또한, 움직임 파라미터 MP2로부터의 차분이 움직임 파라미터 MP1 중 도 11의 화상 처리부(43)에 사용되는 하나 이상의 움직임 파라미터 MP1에 대해서만 움직임 파라미터 정보로서 이용되는 경우에는, 움직임 파라미터 정보의 전송에 필요한 시간을 더욱 단축시킬 수 있으며, 또한 HDD(14)의 기억 용량을 추가로 절약할 수 있다.
압축부(55)는, MP2 취득부(53)로부터 공급된 데시메이션 처리된 화상을, 동일하게 MP2 취득부(53)로부터 공급된 움직임 파라미터 MP2를 이용하여, 예를 들면, MPEG 방식에 따라 압축하며, 그 결과의 압축 데이터를 멀티플렉스부(24)에 공급한다.
그리고, 도 6에서, 멀티플렉스부(24)는 MPd 차분 정보 취득부(54)로부터 공급된 차분 정보 MPd를 움직임 파라미터 정보로서 간주하고, 그 움직임 파라미터 정보로서의 차분 정보 MPd와 압축부(55)로부터 공급된 데시메이션 처리된 화상의 압축 데이터를 다중화하며, 그 결과 얻어지는 다중화 데이터를 입출력 인터페이스(21)에 공급한다.
다음에, 도 7을 참조하여 도 6의 MPd 차분 정보 취득부(54)에서의 처리에 대하여 설명한다.
예를 들면, 프레임 데시메이터(52)에서는, HD 화상의 2개의 연속 프레임을 1 프레임으로 감소시키는 1/2 데시메이션 처리에 의해 HD 화상이 데시메이션 처리된 화상으로 변환되며, 그 움직임 파라미터가 MP1 및 MP2로서 이용되는 것으로 한다.
또, HD 화상의 선두로부터 n 프레임째의 프레임을 제n 프레임이라고 하고, 또한 제n 프레임에서 제n'(n'＞ n) 프레임으로의 움직임 벡터를 움직임 벡터 mv(n, n')로 나타내는 것으로 한다.
지금, 도 7에 나타낸 바와 같이, HD 화상의 3개의 연속 프레임, 즉 제n 프레임, 제n+1 프레임, 제n+2 프레임에 관하여, HD 화상이 데시메이션 처리된 화상으로 변환되는 때에 데시메이션 처리되는 프레임이 제n+1 프레임인 것으로 하면, HD 화상에 대해서는 움직임 벡터 mv(n, n+1) 및 mv(n+1, n+2)가 검출되고, 데시메이션 처리된 화상에 대해서는 움직임 벡터 mv(n, n+2)가 검출된다.
MPd 차분 정보 취득부(54)는, 데시메이션 처리된 화상의 움직임 벡터 mv(n, n+2)에 기초하여, 예를 들면 그 1/2의 벡터 1/2×mv(n, n+2)를, HD 화상의 움직임 벡터 mv(n, n+1)의 예측치 mv'(n, n+1)로서 구하는 동시에, 움직임 벡터 mv(n+1, n+2)의 예측치 mv'(n+1, n+2)로서 산출한다. 또한, MPd 차분 정보 취득부(54)는 움직임 벡터 mv(n, n+1)와 그 예측치 mv'(n, n+1) 간의 차분 mv(n, n+1)-mv'(n, n+1)을 구하고, 그 차분 mv(n, n+1)-mv'(n, n+1)을 움직임 벡터 mv(n, n+1)의 차분 정보 MPd(n, n+1)로서 설정한다. 또한, MPd 차분 정보 취득부(54)는는 움직임 벡터 mv(n+1, n+2)와 그 예측치 mv'(n+1, n+2) 간의 차분 mv(n+1, n+2)-mv'(n+1, n+2)을 산출하고, 그 차분 mv(n+1, n+2)-mv'(n+1, n+2)을 움직임 벡터 mv(n+1, n+2)의 차분 정보 MPd(n+1, n+2)로서 설정한다.
그리고, HD 화상의 움직임 벡터 mv(n, n+1)의 예측치 mv'(n, n+1)는 데시메이션 처리된 화상의 움직임 벡터 mv(n, n+2)로부터 구할 수 있고, HD 화상의 움직임 벡터 mv(n, n+1)는 그 예측치 mv'(n, n+1)와, 차분 정보 MPd(n, n+1)로서의 차분 mv(n, n+1)-mv'(n, n+1)로부터 구할 수 있다. 즉, HD 화상의 움직임 벡터 mv(n, n+1)는 데시메이션 처리된 화상의 움직임 벡터 mv(n, n+2)와, 차분 정보 MPd(n, n+1)로서의 차분 mv(n, n+1)-mv'(n, n+1)를 가산함으로써 복원(산출)될 수 있다.
마찬가지로, HD 화상의 움직임 벡터 mv(n+1, n+2)도, 데시메이션 처리된 화상의 움직임 벡터 mv(n, n+2)와, 차분 정보 MPd(n+1, n+2)로서의 차분 mv(n+1, n+2)-mv'(n+1, n+2)를 이용하여 복원될 수 있다.
후술하는 도 11의 MP1 복원부(84)에서는 이상과 같이 하여 HD 화상의 움직임 벡터 mv(n, n+1) 및 mv(n+1, n+2)를 복원한다.
도 7에서, 이상적으로는, 식 mv(n, n+1) + mv(n+1, n+2) = mv(n, n+2)가 성립된다. 이 경우, 데시메이션 처리된 화상의 움직임 벡터 mv(n, n+2) 외에, HD 화상의 2개의 움직임 벡터 mv(n, n+1) 또는 mv(n+1, n+2) 중 어느 하나가 이용 가능하다면, 다른 하나의 움직임 벡터를 구할 수 있다.
따라서, 차분 정보 MPd(n, n+1)와 차분 정보 MPd(n+1, n+2)가 양자 모두를 이용할 수 있지는 못하더라도, 어느 한쪽의 차분 정보가 있으면, 그 차분 정보와, 데시메이션 처리된 화상의 움직임 벡터 mv(n, n+2)를 이용하여, 그 한쪽의 차분 정보에 관련된 HD 화상의 움직임 벡터를 복원하고, 또한 그 한쪽의 차분 정보에 관련 된 HD 화상의 움직임 벡터와 데시메이션 처리된 화상의 움직임 벡터 mv(n, n+2)를 이용하여, 다른 쪽의 차분 정보에 관련된 HD 화상의 움직임 벡터를 복원할 수 있다.
이상으로부터, MPd 차분 정보 취득부(54)에서는, 반드시, 움직임 벡터 mv(n, n+1)의 차분 정보 MPd(n, n+1)와 움직임 벡터 mv(n+1, n+2)의 차분 정보 MPd(n+1, n+2)의 양쪽을 움직임 파라미터 정보로 할 필요는 없고, 어느 한쪽의 차분 정보만을 움직임 파라미터 정보로 하면 된다.
이 경우, 차분 정보 MPd(n, n+1)와 차분 정보 MPd(n+1, n+2)와의 양쪽을 움직임 파라미터 정보로 하는 경우에 비해, 움직임 파라미터 정보의 데이터량이 감소된다. 따라서, 움직임 파라미터 정보를 전송하는데 필요한 시간을 더욱 단축할 수 있고, 또한 HDD(14)의 기억 용량을 추가로 절약할 수 있다.
다음에, 도 8 및 도 9를 참조하여, 도 6의 MPd 차분 정보 취득부(54)에서의 처리에 대하여 추가로 설명 한다.
그리고, 도 8 및 도 9에 있어서도, 도 7과 마찬가지로, 움직임 파라미터 MP1와 움직임 파라미터 MP2가 유일한 움직임 벡터로 고려될 것이다. 또한, HD 화상은 11프레임으로 구성되어 있는 것으로 하고, 프레임 데시메이터(52)는 HD 화상의 짝수 번째의 프레임(이하, 짝수 프레임이라고 함)을 데시메이션 처리함으로써 HD 화상을 데시메이션 처리된 화상으로 변환하는 것으로 한다. 또한, 움직임 벡터는 HD 화상의 제1 프레임에서부터 제6 프레임에 걸쳐 1프레임 당 1화소만큼 상방향으로 등속 이동하고, 제6 프레임에서부터 제11 프레임에 걸쳐 1프레임 당 2화소만큼 하 방향으로 등속 이동하는 이동 물체에 관하여 검출되는 것으로 한다.
도 8은, HD 화상의 제1 프레임에서의 이동 물체의 위치를 기준으로 하는 각각의 프레임에서의 이동 물체의 위치(이하, HD 화상 위치라고 함)와, HD 화상의 홀수 번째의 프레임(이하, 홀수 프레임이라고 함)에서 그 다음의 홀수 프레임으로의 움직임 벡터에 기초하여 예측된, 그 2개의 홀수 프레임 사이의 각각의 짝수 프레임에서의 이동 물체의 위치를 예측한 위치(이하, 데시메이션 처리된 화상의 예측 내삽 위치라고 함)와, HD 화상 위치와 데시메이션 처리된 화상 예측 내삽 위치 간의 오차를 나타내는 내삽 오차를 나타내고 있다.
즉, 도 8에 있어서, HD 화상 위치는 ● 표시로, 데시메이션 처리된 화상의 예측 내삽 위치는 ■ 표시로, 내삽 오차는 ▲ 표시로 각각 나타내어져 있다. 그리고, 데시메이션 처리된 화상의 예측 내삽 위치가 짝수 프레임에 대하여서만 존재하지만, 도 8에서는 편의상 홀수 프레임에 대하여도 데시메이션 처리된 화상의 예측 내삽 위치를 나타내고 있다.
또, 짝수 프레임에 대한 데시메이션 처리된 화상 예측 내삽 위치로서는, 그 짝수 프레임의 전후의 홀수 프레임에서의 이동 물체의 위치의 평균값이 이용되고 있고, 홀수 프레임에 대한 데시메이션 처리된 화상의 예측 내삽 위치로서는, 그 홀수 프레임의 HD 화상 위치가 그대로 이용되고 있다.
도 9는, HD 화상에서의 각각의 프레임의 순서를 나타내는 프레임 번호, HD 화상 위치, HD 화상의 각각의 프레임에서의 이동 물체의 움직임을 나타내는 움직임 벡터, HD 화상의 각각의 프레임의 움직임 벡터에 의해 예측되는 다음 프레임에서의 이동 물체의 위치를 나타내는 예측 위치, 데시메이션 처리된 화상의 각각의 프레임에서의 이동 물체의 움직임을 나타내는 움직임 벡터, 데시메이션 처리된 화상의 각각의 프레임의 움직임 벡터로부터 예측되는 다음 프레임에서의 이동 물체의 위치를 나타내는 데시메이션 처리된 화상 예측 위치, 데시메이션 처리된 화상의 예측 내삽 위치, 및 내삽 오차를 나타내고 있다.
즉, 도 9에서, 좌측으로부터 첫 번째 필드(첫 번째 열)는 HD 화상의 프레임의 프레임 번호를 나타내고, 좌측으로부터 2번째 필드는 HD 화상의 각각의 프레임에서의 이동 물체의 위치를 나타내고 있다. 또, 좌측으로부터 3번째 필드는 HD 화상의 각각의 프레임에 대해서 검출되는 이동 물체의 움직임 벡터를 나타내고, 좌측으로부터 4번째 필드는 HD 화상의 각각의 프레임에서의 이동 물체의 움직임 벡터로부터 예측되는 HD 화상의 다음 프레임에서의 이동 물체의 예측 위치를 나타내고 있다.
또한, 좌측으로부터 5번째 필드는 데시메이션 처리된 화상의 각각의 프레임에 대해서 검출되는 이동 물체의 움직임 벡터를 나타내고, 좌측으로부터 6번째 필드는 데시메이션 처리된 화상의 각각의 프레임에서의 이동 물체의 움직임 벡터로부터 예측되는, 데시메이션 처리된 화상의 다음 프레임에서의 이동 물체의 데시메이션 처리된 화상의 예측 위치를 나타내고 있다. 또, 좌측으로부터 7번째 필드는 데시메이션 처리된 화상의 예측 내삽 위치를 나타내고, 좌측으로부터 8번째 필드(우측으로부터 첫 번째 필드)는 내삽 오차를 나타내고 있다.
도 8 및 도 9에서, 짝수 프레임에 대한 데시메이션 처리된 화상의 예측 내삽 위치는, 전술한 바와 같이, 그 짝수 프레임의 전후의 홀수 프레임에서의 이동 물체의 위치의 평균값이므로, 이동 물체의 속도가 변화하면, 그 변화에 기인하여 0이 아닌 내삽 오차가 발생한다.
즉, 도 8 및 도 9에서는, HD 화상의 제6 프레임(프레임 번호가 6인 프레임)에서 이동 물체의 속도가 변화하고 있고, 그 변화에 기인하여 -1.5의 내삽 오차가 발생한다.
MPd 차분 정보 취득부(54)에 의해 구해지는 차분 정보 MPd는 이 내삽 오차에 상당하며, 이 내삽 오차에 상당하는 차분 정보 MPd와 데시메이션 처리된 화상으로부터 얻어지는 움직임 벡터(로부터 예측되는 데시메이션 처리된 화상의 예측 내삽 위치)를 사용함으로써, HD 화상의 정확한 움직임 벡터를 복원하는(구하는) 것이 가능하다.
다음에, 도 10의 플로차트를 참조하여 도 6의 기록 제어부(13)에서의 처리에 대하여 설명한다.
기록 제어부(13)는, HDTV 카메라(12)로부터 HD 화상이 공급되면, 그 HD 화상을 수신하고, HDD(14)에 공급하여 기록되도록 한다. 그리고, 기록 제어부(13)는, 예를 들면, 사용자가 도시하지 않은 조작부를 조작한 경우에 또는 특별히 행할 처리가(대부분) 없는 경우에, 도 10의 플로차트에 따른 처리를 행한다.
즉, 입출력 인터페이스(21)는 HDD(14)로부터 HD 화상을 판독하여 MP1 취득부(22)에 공급한다. 단계 S31에서, MP1 취득부(22)는 입출력 인터페이스(21)로부터 공급되는 HD 화상으로부터 움직임 파라미터 MP1를 취득하고, 움직임 파라미터 MP1를 MPd 차분 정보 취득부(54)에 공급한다. 또, MP1 취득부(22)는 HD 화상을 프레임 데시메이터(52)에 공급하고, 단계 S32로 진행한다.
단계 S32에서, 프레임 데시메이터(52)는 MP1 취득부(22)로부터 공급되는 HD 화상의 짝수 프레임(또는 홀수 프레임)을 데시메이션 처리하고, 그 결과 얻어진 데시메이션 처리된 화상을 MP2 취득부(53)에 공급하고, 단계 S33으로 진행한다.
단계 S33에서, MP2 취득부(53)는 프레임 데시메이터(52)로부터 공급되는 데시메이션 처리된 화상으로부터 움직임 파라미터 MP2를 취득하고, 움직임 파라미터 MP2를 MPd 차분 정보 취득부(54)에 공급한다. 또, MP2 취득부(53)는 데시메이션 처리된 화상과 움직임 파라미터 MP2를 압축부(55)에 공급하고, 단계 S34로 진행한다.
단계 S34에서, MPd 차분 정보 취득부(54)는 MP1 취득부(22)로부터 공급되는 움직임 파라미터 MP1와, MP2 취득부(53)로부터 공급되는 움직임 파라미터 MP2 간의 하나 이상의 차분에 관한 차분 정보 MPd를 구하여 취득하고, 그 차분 정보 MPd를 멀티플렉스부(24)에 공급하며, 단계 S35로 진행한다.
단계 S35에서, 압축부(55)는, MP2 취득부(53)로부터 공급되는 움직임 파라미터 MP2를 이용하여, MP2 취득부(53)로부터 공급되는 데시메이션 처리된 화상을 MPEG 방식 등에 따라 압축하고, 그 결과 얻어진 데시메이션 처리된 화상의 압축 데이터를 멀티플렉스부(24)에 공급하며, 단계 S36으로 진행한다.
단계 S36에서, 멀티플렉스부(24)는 MPd 차분 정보 취득부(54)로부터 공급되는 차분 정보 MPd와 압축부(55)로부터 공급되는 데시메이션 처리된 화상의 압축 데 이터를 다중화하고, 그 결과 얻어진 다중화 데이터를 입출력 인터페이스(21)에 공급하며, 단계 S37로 진행한다.
단계 S37에서, 입출력 인터페이스(21)는 멀티플렉스부(24)로부터 공급되는 다중화 데이터를 HDD(14)에 공급하여 이 다중화 데이터가 기록되도록 하며, 그 후 처리가 종료된다.
도 11은 기록 제어부(13)가 도 6에 나타낸 바와 같이 구성되는 경우의 도 1의 재생 제어부(15)의 구성예를 나타낸 블록도이다.
도 11에서, 도 4의 도시된 부분에 대응하는 부분에 대하여는 동일한 부호를 부여하고 있고, 그 설명은 적당히 생략한다.
도 11의 재생 제어부(15)는 도 4의 보간부(45) 대신에 프레임 보간부(85)를 포함하며, 또한 압축해제부(83) 및 MP1 복원부(84)를 새로이 포함하고 있다. 도 11에 도시된 재생 제어부(15)는 새로이 포함된 구성요소를 제외하고는 도 4에 도시된 것과 동일하다.
압축해제부(83)는, 도 6의 압축부(55)에 의한 압축 방식에 대응한 압축해제 방식에 따라, 디멀티플렉스부(42)로부터 공급되는 데시메이션 처리된 화상의 압축 데이터를 압축해제하고, 그 결과 얻어지는 데시메이션 처리된 화상을 화상 처리부(43)에 공급한다.
즉, 도 11을 참조하면, 도 6의 압축부(55)에 의해 얻어진 데시메이션 처리된 화상의 압축 데이터와, MPd 차분 정보 취득부(54)에 의해 얻어진 움직임 파라미터 정보로서의 차분 정보 MPd를 다중화함으로써 얻어지는 다중화 데이터가 HDD(14)에 기록된다. 그리고, 디멀티플렉스부(42)는 그 다중화 데이터를 압축 데이터와 차분 정보 MPd로 역다중화하여, 압축 데이터를 압축해제부(83)에 공급하는 동시에 차분 정보 MPd를 MP1 복원부(84)에 공급한다. 압축해제부(83)는 이상과 같이 디멀티플렉스부(42)로부터 공급되는 압축 데이터를 데시메이션 처리된 화상으로 압축해제하여, 화상 처리부(43)에 공급한다.
도 6의 압축부(55)는, 전술한 바와 같이, 데시메이션 처리된 화상으로부터 취득된 움직임 파라미터 MP2를 이용하여, 데시메이션 처리된 화상을 MPEG 방식 등에 따라 압축한다. 따라서, 데시메이션 처리된 화상의 압축 데이터에는 그 압축에 이용된 움직임 파라미터 MP2가 포함된다. 압축해제부(83)는 그 움직임 파라미터 MP2를 이용하여 압축 데이터를 압축해제한다. 그리고, 압축해제부(83)는 압축 데이터의 압축해제에 사용한 움직임 파라미터 MP2를 MP1 복원부(84)에 공급한다.
MP1 복원부(84)는 디멀티플렉스부(42)로부터 공급되는 차분 정보 MPd와 압축해제부(83)로부터 공급되는 움직임 파라미터 MP2로부터 고정밀의 움직임 파라미터 MP1를 복원하여 화상 처리부(43)에 공급한다.
프레임 보간부(85)는 압축해제부(83)로부터(노이즈 감소부(44)를 통하여) 공급된 데시메이션 처리된 화상에 대해서, MP1 복원부(84)로부터 공급된 고정밀의 움직임 파라미터 MP1 중 예를 들면 움직임 벡터 등을 이용하여, 프레임을 보간하는 보간 처리를 행함으로써, 데시메이션 처리된 화상을 고품질의 HD 화상으로 변환하며, 이 HD 화상을 모니터(16)에 공급한다.
다음에, 도 12의 플로차트를 참조하여 도 11의 재생 제어부(15)에서의 처리 에 대하여 설명한다.
예를 들면, 사용자가 도시하지 않은 조작부를 조작함으로써 화상 재생 지시가 입출력 인터페이스(41)에 발행되면, 단계 S41에서, 입출력 인터페이스(41)는 HDD(14)로부터 다중화 데이터를 판독하여 디멀티플렉스부(42)에 공급하며, 단계 S42로 진행한다.
단계 S42에서, 디멀티플렉스부(42)는 입출력 인터페이스(41)로부터의 다중화 데이터를, 데시메이션 처리된 화상의 압축 데이터와 차분 정보 MPd로 역다중화한다. 또, 디멀티플렉스부(42)는 데시메이션 처리된 화상을 압축해제부(83)에 공급하고, 차분 정보 MPd를 MP1 복원부(84)에 공급하며, 단계 S43으로 진행한다.
단계 S43에서, 압축해제부(83)는, 디멀티플렉스부(42)로부터의 데시메이션 처리된 화상의 압축 데이터를, 도 6의 압축부(55)에 의한 압축 방식에 대응한 압축해제 방식을 이용하여 압축해제하고, 그 결과 얻어진 데시메이션 처리된 화상을 화상 처리부(43)에 공급한다. 또, 압축해제부(83)는, 데시메이션 처리된 화상의 압축 데이터를 압축해제하는데 사용한 움직임 파라미터 MP2를 MP1 복원부(84)에 공급하고, 단계 S44로 진행한다.
단계 S44에서, MP1 복원부(84)는, 예를 들면 도 7에서 설명한 바와 같이, 디멀티플렉스부(42)로부터의 차분 정보 MPd와 압축해제부(83)로부터의 움직임 파라미터 MP2를 이용하여, 고정밀도의 움직임 파라미터 MP1를 복원하고(획득하고), 그 움직임 파라미터 MP1를 화상 처리부(43)에 공급하며, 단계 S45로 진행한다.
단계 S45에서, 화상 처리부(43)는, MP1 복원부(84)로부터의 움직임 파라미터 MP1을 이용하여, 압축해제부(83)로부터의 데시메이션 처리된 화상에 화상 처리를 행하고, 그 결과 얻어진 화상을 모니터(16)에 공급한 후에, 처리가 종료된다.
도 13은 도 1의 기록 제어부(13)의 또 다른 구성예를 나타낸 블록도이다.
도 13에서 도 2 또는 도 6에 도시된 부분에 대응하는 부분에 대하여는 동일한 부호를 부여하며, 그 설명을 적당히 생략한다.
즉, 도 13의 기록 제어부(13)는 도 6의 프레임 데시메이터(52), MP2 취득부(53), MPd 차분 정보 취득부(54) 및 압축부(55) 대신에 각각 다운-컨버젼부(102), MP2 취득부(103), MPd 차분 정보 취득부(104) 및 압축부(105)를 포함하며, 그 외에는 도 6의 경우와 마찬가지로 구성되어 있다.
다운-컨버젼부(102)에는 MP1 취득부(22)로부터 HD 화상이 공급되도록 되어 있다. 다운-컨버젼부(102)는 MP1 취득부(22)로부터의 HD 화상의 각각의 프레임의 화소를 데시메이션 처리하고, 이에 의해 HD 화상을 데이터량이 적은 데시메이션 처리된 화상인 SD(표준 해상도) 화상으로 변환하고, 이 SD 화상을 MP2 취득부(103)와 압축부(105)에 공급한다.
MP2 취득부(103)는 다운-컨버젼부(102)로부터 공급되는 SD 화상으로부터 움직임 파라미터 MP2를 검출(산출)함으로써 취득하고, MPd 차분 정보 취득부(104)에 공급한다.
MPd 차분 정보 취득부(104)는 MP2 취득부(103)로부터 움직임 파라미터 MP2를 수신하고, MP1 취득부(22)로부터 움직임 파라미터 MP1를 수신한다. 또한, MPd 차분 정보 취득부(104)는, 도 16의 화상 처리부(43)에서 사용되는 각각의 움직임 파 라미터 MP1만에 대하여, 도 6의 MPd 차분 정보 취득부(54)와 마찬가지로, 움직임 파라미터 MP1와 움직임 파라미터 MP2 간의 차분에 관한 차분 정보 MPd를 구하고, 그 차분 정보 MPd를 움직임 파라미터 정보로서 멀티플렉스부(24)에 공급한다.
압축부(105)는 다운-컨버젼부(102)로부터 SD 화상을 수신하고, MP1 취득부(22)로부터 움직임 파라미터 MP1을 수신한다. 압축부(105)는 다운-컨버젼부(102)로부터 공급되는 SD 화상을 MP1 취득부(22)로부터 공급되는 움직임 파라미터 MP1을 이용하여 SD 화상 압축 데이터로 압축하고, SD 화상 압축 데이터를 멀티플렉스부(24)에 공급한다.
도 14는 도 13의 MPd 차분 정보 취득부(104)에서의 차분 정보 MPd의 취득 처리의 일례를 설명하는 도면이다.
예를 들면, HD 화상의 각각의 프레임의 2×2 화소의 4개의 화소를 1개의 화소로 감소시키는 1/4 데시메이션에 의해, HD 화상이 데시메이션 처리된 화상인 SD 화상으로 변환되고, 움직임 벡터가 움직임 파라미터 MP1 및 움직임 파라미터 MP2로서 사용되는 것으로 한다. 또한, 움직임 벡터는 예를 들면 8×8 화소의 블록을 대상으로 검출되는 것으로 한다.
SD 화상의 크기(화소수)가 HD 화상의 크기의 1/4 이므로, 도 14에 나타낸 바와 같이, SD 화상의 8×8 화소로 이루어진 하나의 블록은, HD 화상의 8×8 화소로 이루어진 4개의 블록을 포함하는 16×16 화소의 대블록(macro block)과 대응하게 된다.
또, SD 화상의 8×8 화소의 하나의 블록에서의 움직임 벡터를 움직임 벡터 mv(Xn)로 나타내고, 그에 대응하는 HD 화상의 대블록의 좌측 위, 우측 위, 좌측 아래 및 우측 아래의 8×8 화소의 4개의 블록에서의 움직임 벡터를, 각각 움직임 벡터 mv(An), mv(Bn), mv(Cn), mv(Dn)으로 나타내는 것으로 한다.
MPd 차분 정보 취득부(104)는 HD 화상의 움직임 벡터 mv(An)와 그에 대응하는 SD 화상의 움직임 벡터 mv(Xn) 간의 차분 mv(An)-mv(Xn)를 구하고, 그 차분 mv(An)-mv(Xn)를 움직임 벡터 mv(An)에 대한 차분 정보 MPd(An)로 한다. MPd 차분 정보 취득부(104)는 마찬가지로 하여 HD 화상의 다른 움직임 벡터 mv(Bn), mv(Cn), 및 mv(Dn)의 각각과 SD 화상의 움직임 벡터 mv(Xn) 간의 차분 mv(Bn)-mv(Xn), mv(Cn)-mv(Xn) 및 mv(Dn)-mv(Xn)를, 각각 움직임 벡터 mv(Bn)에 대한 차분 정보 MPd(Bn), 움직임 벡터 mv(Cn)에 대한 차분 정보 MPd(Cn), 및 움직임 벡터 mv(Dn)에 대한 차분 정보 MPd(Dn)으로서 구한다.
그리고, HD 화상의 대블록의 좌측 위의 8×8 화소의 블록의 움직임 벡터 mv(An)는 그에 대응하는 SD 화상의 8×8 화소의 블록의 움직임 벡터 mv(Xn)와 차분 정보 MPd(An)로서의 차분 mv(An)-mv(Xn)를 가산함으로써 복원하는(구하는) 것이 가능하다.
마찬가지로, HD 화상의 움직임 벡터 mv(Bn), mv(Cn) 및 mv(Dn)는 SD 화상의 움직임 벡터 mv(Xn)와 차분 정보 MPd로서의 차분 mv(Bn)-mv(Xn), mv(Cn)-mv(Xn) 및 mv(Dn)－mv(Xn) 각각을 이용하여 복원될 수 있다.
후술하는 도 16의 MP1 복원부(125)는, 이상과 같이 HD 화상의 움직임 벡터 mv(An)에 관련된 SD 화상의 움직임 벡터 mv(Xn)와 차분 정보 MPd(An)를 이용하여, HD 화상의 움직임 벡터 mv(An)를 복원한다. 또, MP1 복원부(125)는, 마찬가지로, SD 화상의 움직임 벡터 mv(Xn)와, 차분 정보 MPd(Bn), MPd(Cn) 및 MPd(Dn) 각각을 이용하여, HD 화상의 움직임 벡터 mv(Bn), mv(Cn) 및 mv(Dn)를 복원한다.
다음에, 도 15의 플로차트를 참조하여, 도 13의 기록 제어부(13)에서의 처리에 대하여 설명한다.
기록 제어부(13)는, HDTV 카메라(12)로부터 HD 화상이 공급되면, 그 HD 화상을 수신하고, HD 화상을 HDD(14)에 공급하여 기록되도록 한다. 그리고, 기록 제어부(13)는, 예를 들면 사용자가 도시하지 않은 조작부를 조작한 경우에 또는 특별히 행할 처리가 없는(실질적으로 없는) 경우에, 도 15의 플로차트에 따른 처리를 행한다.
즉, 입출력 인터페이스(21)는 HDD(14)로부터 HD 화상을 판독하여, MP1 취득부(22)에 공급한다. 단계 S51에서, MP1 취득부(22)는 입출력 인터페이스(21)로부터 공급된 HD 화상으로부터 움직임 파라미터 MP1를 취득하고, 취득된 움직임 파라미터 MP1를 MPd 차분 정보 취득부(104)와 압축부(105)에 공급한다. 또, MP1 취득 부(22)는 입출력 인터페이스(21)로부터 공급된 HD 화상을 다운-컨버젼부(102)에 공급하고, 단계 S52로 진행한다.
단계 S52에서, 다운-컨버젼부(102)는 MP1 취득부(22)로부터 공급된 HD 화상의 각각의 프레임의 화소를 데시메이션 처리하는 것으로, HD 화상을 데이터량이 적은 데시메이션 처리된 화상인 SD 화상으로 변환하고, 이 SD 화상을 MP2 취득부(103)와 압축부(105)에 공급하며, 단계 S53으로 진행한다.
단계 S53에서, MP2 취득부(103)는 다운-컨버젼부(102)로부터 공급되는 SD 화상으로부터 움직임 파라미터 MP2를 취득하여 MPd 차분 정보 취득부(104)에 공급하고, 단계 S54로 진행한다.
단계 S54에서, MPd 차분 정보 취득부(104)는 MP1 취득부(22)로부터의 움직임 파라미터 MP1와 MP2 취득부(103)로부터의 움직임 파라미터 MP2 간의 하나 이상의 차분에 관한 차분 정보 MPd를 취득하여 멀티플렉스부(24)에 공급하고, 단계 S55로 진행한다.
단계 S55에어서, 압축부(105)는 MP1 취득부(22)로부터의 움직임 파라미터 MP1를 이용하여 다운-컨버젼부(102)로부터의 SD 화상을 압축하고, 그 결과 얻어진 SD 화상 압축 데이터를 멀티플렉스부(24)에 공급하며, 단계 S56으로 진행한다.
예를 들면, 도 14에서 설명한 바와 같이, SD 화상이 HD 화상의 화소를 다운-컨버젼부(102)에서 1/4로 데시메이션 처리한 화상이며, 움직임 파라미터 MP2로서의 1개의 움직임 벡터가 움직임 파라미터 MP1로서의 4개의 움직임 벡터에 대응하는 경우에, 압축부(105)가 HD 화상의 움직임 벡터를 이용하여 MPEG 방식 등에 의한 압축 을 행할 때에는, 움직임 파라미터 MP2로서의 1개의 움직임 벡터에 대응하는 움직임 벡터 MP1로서의 4개의 움직임 벡터의 평균값 등이 HD 화상의 움직임 벡터로서 사용된다.
단계 S56에서, 멀티플렉스부(24)는 MPd 차분 정보 취득부(104)로부터의 움직임 파라미터 정보로서의 차분 정보 MPd와 압축부(105)로부터 공급된 SD 화상 압축 데이터를 다중화하고, 그 결과 얻어지는 다중화 데이터를 입출력 인터페이스(21)에 공급하며, 단계 S57로 진행한다.
단계 S57에서, 입출력 인터페이스(21)는 멀티플렉스부(24)로부터의 다중화 데이터를 HDD(14)에 공급하여 기록되도록 한다. 그 후, 처리가 종료된다.
도 16은, 기록 제어부(13)가 도 13에 나타낸 바와 같이 구성되는 경우의 도 1의 재생 제어부(15)의 구성예를 나타낸 블록도이다.
도 16에서, 도 11에 도시된 부분에 대응하는 부분에 대하여는 동일한 부호를 부여하고 있고, 그 설명을 적당히 생략한다.
즉, 도 16의 재생 제어부(15)에는, 도 11의 압축해제부(83), MP1 복원부(84) 및 프레임 보간부(85) 대신에 각각 압축해제부(123), MP1 복원부(125) 및 업-컨버젼부(126)를 포함하며, 새로이 MP2 취득부(124)를 포함한다. 도 16의 재생 제어부(15)는 이러한 점을 제외하고는 도 11의 경우와 동일하게 구성되어 있다.
압축해제부(123)는 디멀티플렉스부(42)로부터 SD 화상 압축 데이터를 수신한다. 압축해제부(123)는, 도 13의 압축부(105)에 의한 압축 방식에 대응한 압축해제 방식에 따라, 디멀티플렉스부(42)로부터 공급되는 SD 화상 압축 데이터를 압축 해제하고, 그 결과 얻어지는 SD 화상을 화상 처리부(43)와 MP2 취득부(124)에 공급한다.
MP2 취득부(124)는 압축해제부(83)로부터 공급되는 SD 화상으로부터 움직임 파라미터 MP2를 검출(산출)하여 취득하고, MP1 복원부(125)에 공급한다.
MP1 복원부(125)는 디멀티플렉스부(42)로부터 공급되는 차분 정보 MPd와 MP2 취득부(124)로부터 공급되는 움직임 파라미터 MP2를 이용하여 고정밀의 움직임 파라미터 MP1을 산출하여 취득하고, 화상 처리부(43)에 공급한다.
업-컨버젼부(126)는 MP1 복원부(125)로부터 움직임 파라미터 MP1를 수신하고, 압축해제부(123)로부터 SD 화상을 수신한다(노이즈 감소부(44)를 통하여). 업-컨버젼부(126)는, MP1 복원부(125)로부터 공급되는 움직임 파라미터 MP1를 이용하여, 압축해제부(123)로부터 공급되는 SD 화상에 화소수를 증가시키는 화상 처리, 즉, 화소의 보간 처리를 수행한다.
다음에, 도 17의 플로차트를 참조하여 도 16의 재생 제어부(15)에서의 처리에 대하여 설명한다.
예를 들면, 사용자가 도시하지 않은 조작부를 조작함으로써, 화상의 재생이 입출력 인터페이스(41)에 지시될 때, 단계 S61에서, 입출력 인터페이스(41)는 HDD(14)로부터 다중화 데이터를 판독하고, 디멀티플렉스부(42)에 공급하며, 단계 S62로 진행한다.
단계 S62에서, 디멀티플렉스부(42)는 입출력 인터페이스(41)로부터의 다중화 데이터를 SD 화상 압축 데이터와 차분 정보 MPd로 역다중화한다. 또, 디멀티플렉 스부(42)는 SD 화상의 압축 데이터를 압축해제부(123)에 공급하고, 차분 정보 MPd를 MP1 복원부(125)에 공급하며, 단계 S63으로 진행한다.
단계 S63에서, 압축해제부(123)는 디멀티플렉스부(42)로부터의 SD 화상 압축 데이터를 도 13의 압축부(105)에 의한 압축 방식에 대응한 압축해제 방식에 따라 압축해제하고, 그 결과 얻어진 SD 화상을 화상 처리부(43)와 MP2 취득부(124)에 공급하며, 단계 S64로 진행한다.
단계 S64에서, MP2 취득부(124)는 압축해제부(123)로부터 공급되는 SD 화상으로부터 움직임 파라미터 MP2를 검출(산출)하여 취득하고, 움직임 파라미터 MP2를 MP1 복원부(125)에 공급하며, 단계 S65로 진행한다.
단계 S65에서, MP1 복원부(125)는 디멀티플렉스부(42)로부터의 차분 정보 MPd와 MP2 취득부(124)로부터의 움직임 파라미터 MP2를 이용하여 고정밀도의 움직임 파라미터 MP1를 복원하고(구하고), 움직임 파라미터 MP1를 화상 처리부(43)에 공급하며, 단계 S66으로 진행한다.
단계 S66에서, 화상 처리부(43)는 MP1 복원부(125)로부터의 움직임 파라미터 MP1를 이용하여 압축해제부(123)로부터의 SD 화상에 화상 처리를 행하고, 그 결과 얻어진 화상을 모니터(16)에 공급하며, 그 후 처리가 종료된다.
도 18은 본 발명을 적용한 기록/재생 시스템의 다른 일실시예의 구성예를 나타낸 블록도이다.
기록/재생 시스템은 기록 장치(141), HDTV 카메라(142), 재생 장치(151) 및 모니터(155)를 포함하며, 기록 장치(141)는 기록 제어부(143), HDD(144) 및 송신 제어부(145)를 포함한다. 또, 재생 장치(151)는 수신 제어부(152), HDD(153) 및 재생 제어부(154)를 포함한다.
HDTV 카메라(142)는 도 1의 HDTV 카메라(12)와 동일하게 구성되어 있다. 또, 기록 제어부(143)는 도 1의 기록 제어부(13)와 동일하게 구성되어 있다.
HDD(144)는 도 1의 HDD(14)와 마찬가지로 기록 제어부(143)로부터 공급되는 다중화 데이터를 기록한다.
송신 제어부(145)는 HDD(144)로부터 판독한 다중화 데이터를, 예를 들면 인터넷이나 LAN(Local Area Network), IEEE(Institute of Electrical and Electronic Engineers) 1394 또는 USB(Universal Serial Bus)의 규격에 따른 네트워크 등을 통하여 재생 장치(151)에 송신하는 것을 제어한다.
수신 제어부(152)는 예를 들면 기록 장치(141)로부터 송신되는 다중화 데이터를 수신하는 것을 제어하고, 그 다중화 데이터를 HDD(153)에 공급하여 기록되도록 한다.
HDD(153)는 도 1의 HDD(14)와 마찬가지로 수신 제어부(152)로부터 공급되는 다중화 데이터를 기록한다.
재생 제어부(154)는 HDD(153)에 기록되어 있는 다중화 데이터를 HDD(153)로부터 판독하고, 도 1의 재생 제어부(15)와 유사하게 처리를 하여, 그 결과 얻어지는 화상을 모니터(155)에 공급한다. 모니터(155)는 도 1의 모니터(16)와 동일하게 구성된다.
이상과 같이 구성되는 도 18의 기록/재생 시스템에서는, 예를 들면 기록 장 치(141)의 기록 제어부(143)에 HDTV 카메라(142)로부터 HD 화상이 공급된다. 기록 제어부(143)는 HDTV 카메라(142)로부터의 HD 화상에 대하여 도 1의 기록 제어부(13)와 동일하게 처리를 행하고, 그 결과 얻어진 다중화 데이터를 HDD(144)에 공급하여 기록되도록 한다. 송신 제어부(145)는 HDD(144)에 기록되어 있는 다중화 데이터를 판독하고, 네트워크 등을 통하여 재생 장치(151)의 수신 제어부(152)에 송신한다.
재생 장치(151)의 수신 제어부(152)는 기록 장치(141)로부터의 다중화 데이터를 수신하고, HDD(153)에 공급하여 기록되도록 한다. 재생 제어부(154)는, 필요에 따라, HDD(153)에 기록되어 있는 다중화 데이터를 판독하고, 도 1의 재생 제어부(15)와 유사하게 처리를 행하고, 그 결과 얻어지는 화상을 모니터(155)에 출력한다.
도 19는 전술한 일련의 처리를 프로그램에 의해 실행하는 컴퓨터의 구성의 예를 나타낸 블록도이다.
CPU(201)는 ROM(Read Only Memory)(202) 또는 기억부(208)에 기억되어 있는 프로그램에 따라 각종 처리를 실행한다. RAM(Random Access Memory)(203)에는 CPU(201)가 실행하는 프로그램이나 데이터 등이 필요에 따라 기억된다. 이들 CPU(201), ROM(202) 및 RAM(203)은 버스(204)에 의해 서로 접속되어 있다.
그리고, CPU(201)로서는 Nikkei Electronics, Nikkei Business Publications, Inc.의 2005년 2월 28일자 89-117 페이지의 "Cell 탄생"에 기재되어 있는 "Cell"을 채용할 수 있다.
CPU(201)에는 또 버스(204)를 통하여 입출력 인터페이스(205)가 접속되어 있다. 입출력 인터페이스(205)는 키보드, 마우스, 마이크로폰 등을 포함하는 입력부(206)와, 디스플레이, 스피커 등을 포함하는 출력부(207)가 접속되어 있다. CPU(201)는 입력부(206)로부터 입력되는 지시에 대응하여 각종 처리를 실행한다. 그리고, CPU(201)는 처리의 결과를 출력부(207)에 출력한다.
입출력 인터페이스(205)에 접속되어 있는 기억부(208)는, 예를 들면 하드 디스크로 이루어지고, CPU(201)가 실행하는 프로그램이나 각종 데이터를 기억한다. 통신부(209)는 인터넷이나 근거리 통신망 등의 네트워크를 통하여 외부의 장치와 통신한다.
또, 통신부(209)를 통하여 프로그램을 취득하고, 기억부(208)에 기억해도 된다.
입출력 인터페이스(205)에 접속되어 있는 드라이브(210)는, 자기 디스크, 광디스크, 광자기 디스크, 또는 반도체 메모리 등의 이동 가능 매체(211)가 장착되었을 때, 이동 가능 매체를 구동하여, 이동 가능 매체에 기록되어 있는 프로그램이나 데이터 등을 취득한다. 취득된 프로그램이나 데이터는 필요에 따라 기억부(208)에 전송되어 기억된다.
전술한 일련의 처리는 하드웨어에 의해 실행시킬 수도 있고, 소프트웨어에 의해 실행시킬 수도 있다. 일련의 처리를 소프트웨어에 의해 실행시키는 경우에, 그 소프트웨어를 구성하는 프로그램은, 전용의 하드웨어에 내장되어 있는 컴퓨터, 또는 각종 프로그램을 인스톨함으로써 각종 기능을 실행하는 것이 가능한 예를 들 면 범용의 퍼스널 컴퓨터 등에, 프로그램 기록 매체로부터 인스톨된다.
컴퓨터에 인스톨되어 컴퓨터에 의해 실행 가능한 상태로 되는 프로그램을 저장하는 프로그램 기록 매체로는, 도 19에 나타낸 바와 같이, 자기 디스크(플렉서블 디스크를 포함), 광디스크(CD­ROM, DVD 또는 광자기 디스크), 또는 반도체 메모리 등으로 이루어지는 패키지 미디어인 이동 가능 매체(211), 또는 프로그램이 일시적으로 또는 영구적으로 저장되는 ROM(202)이나, 기억부(208)의 하드 디스크 등이 있다. 프로그램 기록 매체에의 프로그램의 저장은 필요에 따라 라우터, 모뎀 등의 인터페이스인 통신부(209)를 통하여 행해지거나, 또는 근거리 통신망, 인터넷, 디지털 위성방송 등의 유선 또는 무선 통신 매체를 이용하여 행해진다.
그리고, 본 명세서에 있어서, 프로그램 기록 매체에 저장되는 프로그램을 기술하는 단계는, 기재된 순서에 따라 시계열적으로 행해지는 처리는 물론 반드시 시계열적으로 처리되지 않아도 병렬적 또는 개별적으로 실행되는 처리도 포함하는 것이다.
또, 본 명세서에 있어서, 시스템이라 함은 복수개의 장치에 의해 구성되는 장치 전체를 나타내는 것이다.
그리고, 본 발명의 실시예는 전술한 실시예로 한정되지 않고, 본 발명의 요지를 벗어나지 않는 범위에 있어서 각종 변경이 가능하다.
본 발명에 의하면, 정밀도가 높은 움직임 파라미터를 화상 처리에 사용할 수 있다.

Claims (31)

  1. 화상을 기록 매체에 기록하고, 상기 기록 매체로부터 상기 화상을 재생하는 기록/재생 장치에 있어서,
    제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 제1 취득 수단;
    상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 변환 수단;
    상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 기록 제어 수단;
    상기 기록 매체로부터 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하는 판독 제어 수단; 및
    상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 화상 처리 수단
    을 포함하는 기록/재생 장치.
  2. 제1항에 있어서,
    상기 제1 취득 수단에 의해 취득되는 움직임 파라미터는, 움직임 벡터, 휘도 또는 색 신호의 변화 정도를 나타내는 레벨 변화, 확대 또는 축소 정도를 나타내는 줌 배율, 회전의 정도를 나타내는 회전율, 주파수 대역의 변화 정도를 나타내는 주파수 대역 변화, 및 포커스의 변화 정도를 나타내는 포커스 변화 중 하나 이상의 파라미터를 포함하는, 기록/재생 장치.
  3. 제1항에 있어서,
    상기 변환 수단은, 상기 제1 화상의 프레임을 데시메이션(decimation) 처리하거나 또는 상기 제1 화상의 각각의 프레임의 화소를 데시메이션 처리하여, 상기 제1 화상을 데이터량이 적은 제2 화상으로 변환하는, 기록/재생 장치.
  4. 제1항에 있어서,
    상기 화상 처리 수단은, 상기 화상 처리로서, 프레임 보간, 업-컨버젼, Y/C 분리, 노이즈 감소, 오브젝트 추출, 또는 I/P(Interlace/Progressive) 변환 중 하나 이상을 행하는, 기록/재생 장치.
  5. 제1항에 있어서,
    상기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 제2 취득 수단;
    상기 제1 화상의 움직임 파라미터와 상기 제2 화상의 움직임 파라미터 간의 하나 이상의 차분에 관한 차분 정보를 취득하는 차분 정보 취득 수단; 및
    상기 제1 화상의 움직임 파라미터를 복원하는 복원 수단
    을 더 포함하며,
    상기 기록 제어 수단은 상기 차분 정보를 상기 움직임 파라미터 정보로서 상기 기록 매체에 기록하며,
    상기 복원 수단은, 상기 기록 매체로부터 상기 움직임 파라미터 정보로서 판독되는 상기 차분 정보와, 상기 기록 매체로부터 판독된 상기 제2 화상으로부터 얻어지는 상기 제2 화상의 움직임 파라미터로부터, 상기 제1 화상의 움직임 파라미터를 복원하는,
    기록/재생 장치.
  6. 제5항에 있어서,
    상기 차분 정보 취득 수단은, 상기 제1 화상의 움직임 파라미터 중, 상기 화상 처리 수단의 화상 처리에 사용되는 하나 이상의 움직임 파라미터에 대해서만, 상기 차분 정보를 취득하는, 기록/재생 장치.
  7. 제5항에 있어서,
    상기 제2 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단; 및
    상기 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단
    을 더 포함하며,
    상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보 를 상기 기록 매체에 기록하며,
    상기 판독 제어 수단은 상기 기록 매체로부터 상기 압축 데이터와 상기 차분 정보를 판독하는,
    기록/재생 장치.
  8. 제5항에 있어서,
    상기 제1 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단;
    상기 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단; 및
    상기 압축해제 수단에 의해 압축해제된 상기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 제3 취득 수단
    을 더 포함하며,
    상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보를 상기 기록 매체에 기록하며,
    상기 판독 제어 수단은 상기 기록 매체로부터 상기 압축 데이터와 상기 차분 정보를 판독하며,
    상기 복원 수단은, 상기 차분 정보와, 상기 제3 취득 수단에 의해 취득되는 상기 제2 화상의 움직임 파라미터를 이용하여, 상기 제1 화상의 움직임 파라미터를 복원하는,
    기록/재생 장치.
  9. 화상을 기록 매체에 기록하고, 상기 기록 매체로부터 상기 화상을 재생하는 기록/재생 장치의 기록/재생 방법에 있어서,
    제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 단계;
    상기 제1 화상을, 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 단계;
    상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와, 상기 제2 화상을 상기 기록 매체에 기록하는 단계;
    상기 기록 매체로부터 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하는 단계; 및
    상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 단계
    를 포함하는 기록/재생 방법.
  10. 화상을 기록 매체에 기록하고, 상기 기록 매체로부터 상기 화상을 재생하는 기록/재생 처리를 컴퓨터로 하여금 실행할 수 있도록 하는 프로그램에 있어서,
    상기 기록/재생 처리는,
    제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 단계;
    상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 단계;
    상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와, 상기 제2 화상을 상기 기록 매체에 기록하는 단계;
    상기 기록 매체로부터 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하는 단계; 및
    상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 단계
    를 포함하는, 프로그램.
  11. 화상을 기록 매체에 기록하는 기록 장치에 있어서,
    제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 제1 취득 수단;
    상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 변환 수단; 및
    상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 기록 제어 수단
    을 포함하는 기록 장치.
  12. 제11항에 있어서,
    상기 기록 매체에 기록된 상기 움직임 파라미터 정보 및 상기 제2 화상을, 화상을 재생하는 다른 장치에 송신하는 송신 제어 수단을 더 포함하는, 기록 장치.
  13. 제11항에 있어서,
    상기 제1 취득 수단에 의해 취득되는 움직임 파라미터는, 움직임 벡터, 휘도 또는 색 신호의 변화 정도를 나타내는 레벨 변화, 확대 또는 축소의 정도를 나타내는 줌 배율, 회전의 정도를 나타내는 회전율, 주파수 대역의 변화 정도를 나타내는 주파수 대역 변화, 및 포커스의 변화 정도를 나타내는 포커스 변화 중 하나 이상의 파라미터를 포함하는, 기록 장치.
  14. 제11항에 있어서,
    상기 변환 수단은, 상기 제1 화상의 프레임을 데시메이션 처리하거나 또는 상기 제1 화상의 각각의 프레임의 화소를 데시메이션 처리하여, 상기 제1 화상을 데이터량이 적은 제2 화상으로 변환하는, 기록 장치.
  15. 제11항에 있어서,
    상기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 제2 취득 수단; 및
    상기 제1 화상의 움직임 파라미터와 상기 제2 화상의 움직임 파라미터 간의 하나 이상의 차분에 관한 차분 정보를 취득하는 차분 정보 취득 수단
    을 더 포함하며,
    상기 기록 제어 수단은 상기 차분 정보를 상기 움직임 파라미터 정보로서 상기 기록 매체에 기록하는,
    기록 장치.
  16. 제15항에 있어서,
    화상을 재생하는 재생 장치에서 화상 처리를 행하는 화상 처리 수단이 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 경우에, 상기 차분 정보 취득 수단은, 상기 제1 화상의 움직임 파라미터 중, 상기 화상 처리 수단에 의해 수행되는 화상 처리에 이용되는 하나 이상의 움직임 파라미터에 대해서만, 상기 차분 정보를 취득하는, 기록 장치.
  17. 제15항에 있어서,
    상기 제2 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단을 더 포함하며,
    상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보를 상기 기록 매체에 기록하는,
    기록 장치.
  18. 제15항에 있어서,
    상기 제1 취득 수단에 의해 취득한 움직임 파라미터를 이용하여 상기 제2 화상을 압축 데이터로 압축하는 압축 수단을 더 포함하며,
    상기 기록 제어 수단은 상기 제2 화상의 상기 압축 데이터와 상기 차분 정보를 상기 기록 매체에 기록하는,
    기록 장치.
  19. 화상을 기록 매체에 기록하는 기록 장치의 기록 방법에 있어서,
    제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 단계;
    상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 단계; 및
    상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 단계
    를 포함하는 기록 방법.
  20. 화상을 기록 매체에 기록하는 기록 처리를 컴퓨터로 하여금 실행할 수 있도록 하는 프로그램에 있어서,
    상기 기록 처리는,
    제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하는 단계;
    상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하는 단계; 및
    상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하는 단계
    를 포함하는, 프로그램.
  21. 화상을 재생하는 재생 장치에 있어서,
    제1 화상의 하나 이상의 움직임 파라미터에 관한 움직임 파라미터 정보와, 상기 제1 화상의 데이터량을 감소시켜 획득한 제2 화상이, 기록되어 있는 기록 매체로부터, 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하는 판독 제어 수단; 및
    상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 획득되는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 화상 처리 수단
    을 포함하는 재생 장치.
  22. 제21항에 있어서,
    다른 장치로부터 송신되는 상기 움직임 파라미터 정보와 상기 제2 화상을 수 신하는 수신 제어 수단을 더 포함하며,
    상기 수신 제어 수단에 의해 수신된 상기 움직임 파라미터 정보와 상기 제2 화상이 상기 기록 매체에 기록되는,
    재생 장치.
  23. 제21항에 있어서,
    상기 화상 처리 수단은, 상기 화상 처리로서, 프레임 보간, 업-컨버젼, Y/C분리, 노이즈 감소, 오브젝트 추출, 또는 I/P(Interlace/Progressive) 변환 중 하나 이상을 행하는, 재생 장치.
  24. 제21항에 있어서,
    상기 제1 화상의 움직임 파라미터를 복원하는 복원 수단을 더 포함하며,
    상기 기록 매체에는, 상기 제1 화상의 움직임 파라미터와 상기 제2 화상의 하나 이상의 움직임 파라미터 간의 하나 이상의 차분에 관한 차분 정보가, 상기 움직임 파라미터 정보로서 기록되어 있으며,
    상기 복원 수단은, 상기 기록 매체로부터 상기 움직임 파라미터 정보로서 판독되는 상기 차분 정보와, 상기 기록 매체로부터 판독되는 상기 제2 화상으로부터 얻어지는 상기 제2 화상의 움직임 파라미터로부터, 상기 제1 화상의 움직임 파라미터를 복원하는,
    재생 장치.
  25. 제24항에 있어서,
    상기 제2 화상의 움직임 파라미터를 이용하여 상기 제2 화상을 압축함으로써 얻어져 상기 기록 매체에 기록되어 있는 상기 제2 화상의 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단을 더 포함하는, 재생 장치.
  26. 제24항에 있어서,
    상기 제1 화상의 움직임 파라미터를 이용하여 상기 제2 화상을 압축함으로써 얻어져 상기 기록 매체에 기록되어 있는 상기 제2 화상의 압축 데이터를 상기 제2 화상으로 압축해제하는 압축해제 수단; 및
    상기 압축해제 수단에 의해 압축해제된 상기 제2 화상으로부터 하나 이상의 움직임 파라미터를 취득하는 취득 수단
    을 더 포함하며,
    상기 복원 수단은, 상기 차분 정보와, 상기 취득 수단에 의해 취득된 상기 제2 화상의 움직임 파라미터를 이용하여, 상기 제1 화상의 움직임 파라미터를 복원하는,
    재생 장치.
  27. 화상을 재생하는 재생 장치의 재생 방법에 있어서,
    제1 화상의 하나 이상의 움직임 파라미터에 관한 움직임 파라미터 정보와, 상기 제1 화상의 데이터량을 줄여서 얻어진 제2 화상이, 기록되어 있는 기록 매체로부터, 상기 제2 화상과 상기 움직임 파라미터 정보를 판독하는 단계; 및
    상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 단계
    를 포함하는 재생 방법.
  28. 화상을 재생하는 재생 처리를 컴퓨터로 하여금 실행할 수 있도록 하는 프로그램에 있어서,
    상기 재생 처리는,
    제1 화상의 하나 이상의 움직임 파라미터에 관한 움직임 파라미터 정보와, 상기 제1 화상의 데이터량을 줄여서 얻어진 제2 화상이, 기록되어 있는 기록 매체로부터, 상기 제2 화상과 상기 움직임 파라미터 정보를 판독하는 단계; 및
    상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 단계
    를 포함하는, 프로그램.
  29. 화상을 기록 매체에 기록하고, 상기 기록 매체로부터 상기 화상을 재생하는 기록/재생 장치에 있어서,
    제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하도록 구성된 제1 취득부;
    상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하도록 구성된 변환부;
    상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하도록 구성된 기록 제어부;
    상기 기록 매체로부터 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하도록 구성된 판독 제어부; 및
    상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 얻어지는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하도록 구성된 화상 처리부
    를 포함하는 기록/재생 장치.
  30. 화상을 기록 매체에 기록하는 기록 장치에 있어서,
    제1 화상으로부터 움직임에 관한 하나 이상의 움직임 파라미터를 취득하도록 구성된 제1 취득부;
    상기 제1 화상을 상기 제1 화상보다 데이터량이 적은 제2 화상으로 변환하도록 구성된 변환부; 및
    상기 제1 화상의 움직임 파라미터에 관한 움직임 파라미터 정보와 상기 제2 화상을 상기 기록 매체에 기록하도록 구성된 기록 제어부
    를 포함하는 기록 장치.
  31. 화상을 재생하는 재생 장치에 있어서,
    제1 화상의 하나 이상의 움직임 파라미터에 관한 움직임 파라미터 정보와, 상기 제1 화상의 데이터량을 감소시켜 획득한 제2 화상이, 기록되어 있는 기록 매체로부터, 상기 움직임 파라미터 정보와 상기 제2 화상을 판독하도록 구성된 판독 제어부; 및
    상기 기록 매체로부터 판독된 상기 움직임 파라미터 정보로부터 획득되는 상기 제1 화상의 움직임 파라미터를 이용하여, 상기 기록 매체로부터 판독된 상기 제2 화상에 화상 처리를 행하는 화상 처리부
    를 포함하는 재생 장치.
KR20060108798A 2005-11-07 2006-11-06 기록/재생 장치 및 기록/재생 방법과, 기록 장치 및 기록방법과, 재생 장치 및 재생 방법과, 프로그램 KR20070049074A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2005-00322405 2005-11-07
JP2005322405A JP4529874B2 (ja) 2005-11-07 2005-11-07 記録再生装置および記録再生方法、記録装置および記録方法、再生装置および再生方法、並びにプログラム

Publications (1)

Publication Number Publication Date
KR20070049074A true KR20070049074A (ko) 2007-05-10

Family

ID=37594487

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20060108798A KR20070049074A (ko) 2005-11-07 2006-11-06 기록/재생 장치 및 기록/재생 방법과, 기록 장치 및 기록방법과, 재생 장치 및 재생 방법과, 프로그램

Country Status (6)

Country Link
US (1) US7983530B2 (ko)
JP (1) JP4529874B2 (ko)
KR (1) KR20070049074A (ko)
CN (1) CN100592778C (ko)
DE (1) DE102006051469A1 (ko)
GB (1) GB2432473B (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8526500B2 (en) * 2009-08-11 2013-09-03 Seiko Epson Corporation System and method for global inter-frame motion detection in video sequences
KR101893075B1 (ko) * 2012-02-28 2018-08-30 삼성디스플레이 주식회사 유기전계발광 표시장치 및 그의 구동방법
CN105657541A (zh) * 2015-12-29 2016-06-08 华为技术有限公司 一种帧处理方法及装置

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4963995A (en) * 1988-12-27 1990-10-16 Explore Technology, Inc. Audio/video transceiver apparatus including compression means
GB2248361B (en) 1990-09-28 1994-06-01 Sony Broadcast & Communication Motion dependent video signal processing
US5647049A (en) * 1991-05-31 1997-07-08 Kabushiki Kaisha Toshiba Video recording/reproducing apparatus which uses a differential motion vector determined using two other motion vectors
EP0520765B1 (en) 1991-06-25 1999-05-12 Canon Kabushiki Kaisha Movement vector detecting method/apparatus and encoding method/apparatus using such method/apparatus
GB2264415B (en) 1992-02-13 1995-09-20 Sony Broadcast & Communication Motion compensation for colour video signals
US6236682B1 (en) * 1993-03-08 2001-05-22 Sony Corporation Video motion vector detection including rotation and/or zoom vector generation
JP3499254B2 (ja) * 1993-06-04 2004-02-23 富士写真フイルム株式会社 画像データ圧縮処理方法
JPH08149480A (ja) 1994-11-25 1996-06-07 Matsushita Electric Ind Co Ltd 画像符号化装置
WO1998025407A1 (en) * 1996-12-06 1998-06-11 Matsushita Electric Industrial Co., Ltd. Method and apparatus for transmitting, encoding and decoding video signal and recording/reproducing method of optical disc
US5844613A (en) * 1997-03-17 1998-12-01 Microsoft Corporation Global motion estimator for motion video signal encoding
US5929911A (en) * 1997-10-27 1999-07-27 International Business Machines Corporation Multiformat reduced memory MPEG-2 compliant decoder
EP0940774A3 (en) 1998-03-05 2000-07-05 Matsushita Electric Industrial Co., Ltd. Motion vector coding and decoding apparatus and method
KR20000059799A (ko) * 1999-03-09 2000-10-05 구자홍 웨이브릿 부호화를 이용한 움직임 보상 부호화 장치 및 방법
JP3709092B2 (ja) * 1999-03-09 2005-10-19 ペンタックス株式会社 画像圧縮装置および画像伸張装置
JP4224748B2 (ja) 1999-09-13 2009-02-18 ソニー株式会社 画像符号化装置および画像符号化方法、画像復号装置および画像復号方法、記録媒体、並びに画像処理装置
JP3797208B2 (ja) * 2001-11-30 2006-07-12 日本ビクター株式会社 カラー動画像符号化装置、復号化装置、符号化方法、復号化方法及びカラー動画像符号列伝送方法
GB0228281D0 (en) * 2002-12-04 2003-01-08 Imec Inter Uni Micro Electr Coding of motion vectors produced by wavelet-domain motion estimation
JP2004221757A (ja) * 2003-01-10 2004-08-05 Renesas Technology Corp 動き検出装置及び探索領域形状可変動き検出器
US7869516B2 (en) * 2003-03-31 2011-01-11 Hewlett-Packard Development Company, L.P. Motion estimation using bit-wise block comparisons for video compresssion
US7317839B2 (en) * 2003-09-07 2008-01-08 Microsoft Corporation Chroma motion vector derivation for interlaced forward-predicted fields
US7567617B2 (en) * 2003-09-07 2009-07-28 Microsoft Corporation Predicting motion vectors for fields of forward-predicted interlaced video frames
US7474767B2 (en) 2003-09-24 2009-01-06 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Motion detection using multi-resolution image processing
EP1574995A1 (en) * 2004-03-12 2005-09-14 Thomson Licensing S.A. Method for encoding interlaced digital video data
KR100631777B1 (ko) * 2004-03-31 2006-10-12 삼성전자주식회사 다 계층의 모션 벡터를 효율적으로 압축하는 방법 및 장치
EP1631089A1 (en) * 2004-08-30 2006-03-01 Matsushita Electric Industrial Co., Ltd. Video coding apparatus and decoding apparatus
US20060062303A1 (en) * 2004-09-17 2006-03-23 Sony Corporation Hybrid global motion estimator for video encoding
WO2006080662A1 (en) * 2004-10-21 2006-08-03 Samsung Electronics Co., Ltd. Method and apparatus for effectively compressing motion vectors in video coder based on multi-layer
EP1932363B1 (en) * 2005-10-05 2016-05-18 LG Electronics Inc. Method and apparatus for reconstructing image blocks

Also Published As

Publication number Publication date
US20070122131A1 (en) 2007-05-31
GB2432473B (en) 2010-06-02
DE102006051469A1 (de) 2007-05-10
US7983530B2 (en) 2011-07-19
GB2432473A (en) 2007-05-23
JP4529874B2 (ja) 2010-08-25
GB0622183D0 (en) 2006-12-20
CN1964460A (zh) 2007-05-16
JP2007129647A (ja) 2007-05-24
CN100592778C (zh) 2010-02-24

Similar Documents

Publication Publication Date Title
JP3901287B2 (ja) 映像信号変換装置、映像信号変換方法及び映像提供システム
US6766061B2 (en) Method and apparatus for digital image coding and decoding, and data recording media
KR20100021574A (ko) 화상처리장치, 화상처리방법 및 프로그램
EP2094018A1 (en) Encoding apparatus for high frame rate videos, method and program
EP2161929B1 (en) Image processing device, image processing method, and program
JP2009177531A (ja) 画像記録装置、画像再生装置、記録媒体、画像記録方法及びプログラム
US20100277613A1 (en) Image recording device and image reproduction device
JP4993403B2 (ja) 画像処理装置、画像符号化装置、画像復号化装置、画像処理システム及びプログラム
JP5130245B2 (ja) 撮影解像度予測型動画像符号化装置および復号装置
JP5113479B2 (ja) 画像信号処理装置及び画像信号処理方法
JP3532709B2 (ja) 動画像符号化方法および装置
JP3893344B2 (ja) 画像符号化方法および画像符号化装置
KR20070049074A (ko) 기록/재생 장치 및 기록/재생 방법과, 기록 장치 및 기록방법과, 재생 장치 및 재생 방법과, 프로그램
JP4559811B2 (ja) 情報処理装置及び情報処理方法
JP4422629B2 (ja) 動画像符号化装置、復号化装置、動画像記録装置および動画像再生装置
EP0944264A2 (en) Apparatus and method of encoding/decoding moving picture and storage medium storing encoded moving picture
JP4164903B2 (ja) 動画像符号列変換装置及びその方法
JP3774988B2 (ja) 静止画撮像装置、カラー複写装置及び表示装置
JP4526529B2 (ja) 階層画像を用いる映像信号変換装置
JP2009278473A (ja) 画像処理装置、それを搭載した撮像装置、および画像再生装置
GB2443581A (en) Recording and playback using motion parameters and reduced data image version
JP3552045B2 (ja) 画像信号記録媒体の記録方法、画像信号記録装置、および、画像信号再生装置
JP6316640B2 (ja) 映像記録装置、映像再生装置及び映像記録プログラム
KR20090064274A (ko) 기록 장치, 재생 장치, 기록 방법, 재생 방법 및 이를수행하는 컴퓨터 프로그램을 기록한 저장매체
JP2004147352A (ja) 画像信号生成装置および方法、並びに、画像信号再生装置および方法

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid