KR20020015123A - 개인 멀티미디어 라이브러리 시스템과 이러한 시스템을이용한 개인 멀티미디어 라이브러리 저장 및 브라우징 방법 - Google Patents

개인 멀티미디어 라이브러리 시스템과 이러한 시스템을이용한 개인 멀티미디어 라이브러리 저장 및 브라우징 방법 Download PDF

Info

Publication number
KR20020015123A
KR20020015123A KR1020000048276A KR20000048276A KR20020015123A KR 20020015123 A KR20020015123 A KR 20020015123A KR 1020000048276 A KR1020000048276 A KR 1020000048276A KR 20000048276 A KR20000048276 A KR 20000048276A KR 20020015123 A KR20020015123 A KR 20020015123A
Authority
KR
South Korea
Prior art keywords
data
information
personal
section
acquiring
Prior art date
Application number
KR1020000048276A
Other languages
English (en)
Other versions
KR100705900B1 (ko
Inventor
이진수
김현준
정찬의
이지은
Original Assignee
구자홍
엘지전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 구자홍, 엘지전자주식회사 filed Critical 구자홍
Priority to KR1020000048276A priority Critical patent/KR100705900B1/ko
Publication of KR20020015123A publication Critical patent/KR20020015123A/ko
Application granted granted Critical
Publication of KR100705900B1 publication Critical patent/KR100705900B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4135—Peripherals receiving signals from specially adapted client devices external recorder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 무비 카메라 등의 이동 가능한 디바이스, 또는 TV와 같이 고정된 디바이스로부터 다양한 형태의 디지털 데이터를 입력 받아 이를 인덱싱 및 저장함으로써 개인 라이브러리를 구축하고, 이를 다시 검색 및 디스플레이할 수 있는 개인 멀티미디어 라이브러리 시스템에 관한 것이다.
본 발명은 바로 이러한 개인 멀티미디어 라이브러리 시스템에 관한 것으로써, 라이브러리가 구축될 저장소를 중심으로 다양한 디바이스로부터 동영상 데이터를 전송 받을 수 있는 환경과, 자동, 또는 반자동으로 데이터를 인덱싱하기 위한 디바이스 환경을 제시한다.
또한, 개인 라이브러리를 효과적으로 구성하기 위한 데이터 관리 방법과, 인덱싱을 도와주는 디바이스를 제시하며, 이러한 환경을 적용한 구체적인 실시예를 제시하고자 하는 것이다.

Description

개인 멀티미디어 라이브러리 시스템과 이러한 시스템을 이용한 개인 멀티미디어 라이브러리 저장 및 브라우징 방법{Multimedia library system for individual}
본 발명은 무비 카메라 등의 이동 가능한 디바이스, 또는 TV와 같이 고정된 디바이스로부터 다양한 형태의 디지털 데이터를 입력 받아 이를 인덱싱 및 저장함으로써 개인 라이브러리를 구축하고, 이를 다시 검색 및 디스플레이할 수 있는 개인 멀티미디어 라이브러리 시스템에 관한 것이다.
종래에는 동영상 미디어 데이터를 인덱싱하여 사용자가 원하는 부분만을 검색하거나 디스플레이하기 위한 방법들이 많이 소개되었다.
예를 들어 임의의 동영상 데이터를 샷 단위로 세그멘테이션한 후 이를 다시 내용 중심으로 그룹핑함으로써, 사용자로 하여금 씬 중심의 동영상 검색 및 디스플레이를 가능하게 할 수 있다.
또한, 뉴스 동영상을 주제별로 인덱싱하여 사용자가 원하는 부분의 사건 구간만을 디스플레이할 수도 있다.
이와 같은 기존 기술들의 대부분 사용자 인터페이스는 각 구간을 대표하는 키 프레임들을 나열함으로써 사용자가 손쉽게 원하는 구간을 찾을 수 있는 방법을 제공하고 있다.
이와 같은 종래의 동영상 인덱싱 기술을 TV 방송 데이터나 무비 카메라 등 이동 가능한 디바이스로부터 전송가능한 데이터들에 적용함으로써 개인 멀티미디어데이터 라이브러리를 관리, 사용할 수 있다.
본 발명은 바로 이러한 개인 멀티미디어 라이브러리 시스템에 관한 것으로써, 라이브러리가 구축될 저장소를 중심으로 다양한 디바이스로부터 동영상 데이터를 전송 받을 수 있는 환경과, 자동, 또는 반자동으로 데이터를 인덱싱하기 위한 디바이스 환경을 제시한다.
또한 개인 라이브러리를 효과적으로 구성하기 위한 데이터 관리 방법과, 인덱싱을 도와주는 디바이스를 제시하며, 이러한 환경을 적용한 구체적인 실시예를 제시하고자 한다.
도 1은 본 발명 개인 멀티미디어 라이브러리 시스템의 개략적인 구성을 보인 블록도.
도 2는 본 발명 개인 멀티미디어 라이브러리 저장 및 브라우징 방법의 일실시예로서, TV의 음악방송 프로그램을 이용한 개인 뮤직 앨범을 저장 및 브라우징하는 과정을 보인 플로우챠트.
도 3은 본 발명 개인 멀티미디어 라이브러리 저장 및 브라우징 방법의 다른 실시예로서, 교육방송 프로그램을 개인라이브러리에 저장하는 과정을 나타낸 플로우챠트.
도 4는 본 발명 개인 멀티미디어 라이브러리 저장 및 브라우징 방법의 또 다른 실시예를 나타낸 것으로, TV에 출연하는 연예인들의 인물 중심으로 앨범을 제작할 수 있는 연예인 앨범의 제작 과정을 나타낸 플로우챠트.
도 5는 본 발명 개인 멀티미디어 라이브러리 저장 및 브라우징 방법의 또 다른 실시예를 나타낸 것으로, 홈비디오와 같이 무비 카메라를 단말장치로 사용하여 취득한 동영상을 개인 라이브러리화하기 위한 인덱싱 정보를 자동으로 취득할 수있는 과정을 나타낸 플로우챠트.
본 발명은 개인 멀티미디어 라이브러리 시스템을 구축, 유지 및 사용하기 위한 시스템에 관한 것이며, 그러한 시스템 상에서 응용되는 구체적인 응용에 관한 것이다.
본 발명은 멀티미디어 데이터를 취득하여 지정된 주소로 송신할 수 있는 단말 장치와,
단말 장치로부터 송신된 멀티미디어 데이터를 수신하여 대용량 저장수단에 저장하기 위한 수신 수단과,
수신된 데이터를 저장하기 위한 대용량 저장수단과,
멀티미디어 데이터를 인덱싱하기 위한 인덱서와,
인덱싱된 멀티미디어 데이터를 검색 및 브라우징하기 위한 브라우저로 구성된 개인멀티미디어 라이브러리 시스템을 특징으로 한다.
상기 전송 수단은 무선 통신, 또는 유선 통신을 모두 포함하는 것을 특징으로 한다.
상기 멀티미디어 데이터를 취득하여 송신할 수 있는 단말 장치는 TV, 디지털 무비카메라, 디지털 스틸카메라, 카메라 기능이 결합된 핸드폰 중 하나임을 특징으로 한다.
상기 멀티미디어 데이터를 취득하여 송신할 수 있는 단말 장치는 취득한 데이터를 임시로 저장할 수 있는 임시 저장수단을 더 포함하는 것을 특징으로 한다.
상기 임시저장소를 더 포함하는 단말장치는 임시 저장수단에 취득한 데이터를 저장한 후 사용자의 요구가 있거나, 저장된 데이터 양이 임시 저장소의 용량과 관련된 임계치를 넘을 경우 지정된 주소로 데이터를 전송하는 것을 특징으로 한다.
상기 단말 장치는 데이터 취득과 동시에 데이터 인덱싱 정보나 인덱싱에 도움을 주는 정보를 취득할 수 있는 수단을 더 포함하는 것을 특징으로 한다.
그리고, 데이터 취득과 동시에 취득할 수 있는 인덱싱 관련 정보는,
디지털 무비카메라에서 촬영시 On/Off 신호를 사용하여 자동으로 저장될 수 있는 샷 정보와, 디지털 카메라와 같이 이동 가능한 디바이스에서 제공하는 데이터 취득 당시의 시간 정보와, 디지털 카메라와 같이 이동 가능한 디바이스에서 촬영 당시 필요한 정보를 음성 신호로 입력하여 다시 음성 인식을 통해 텍스트로 변환 후 데이터와 같이 저장될 수 있는 정보 들 중 하나이거나 이들의 조합인 것을 특징으로 한다.
상기 멀티미디어 데이터를 인덱싱하기 위한 인덱서는,
동영상의 샷정보를 취득하는 수단과, 샷들을 의미적, 또는 물리적 정보를 이용하여 그룹화하는 수단과, 각 샷이나 그룹화된 샷 그룹에 대해 의미 정보를 부여하는 수단을 포함하는 것을 특징으로 한다.
상기 인덱싱된 멀티미디어 데이터를 검색 및 브라우징하기 위한 브라우저는 인덱서에 의해 인덱스되어 저장된 데이터를 의미적, 물리적 정보를 사용하여 특정 데이터, 또는 데이터의 부분을 검색할 수 있는 검색 수단과, 그러한 의미적 정보를 저장된 데이터와 연관하여 브라우징하는 수단을 포함하는 것을 특징으로 한다.,
또한, 상기 단말장치가 TV인 경우, TV에서 방영되는 뮤직프로그램을 사용한 개인 라이브러리 시스템에 있어서,
뮤직 프로그램을 인식하는 단계와,
인식된 하나의 프로그램에서 하나의 음악이 방송되는 구간을 취득하는 단위구간 취득단계와,
하나의 음악 방송 구간에 부가되는 추가정보를 취득하는 추가정보 취득 단계와,
각 음악 방송 구간별로 인덱싱하여 저장하는 저장 단계와,
인덱싱되어 저장된 음악 방송 구간들 중 사용자가 원하는 구간을 선택하는 선택 단계와,
선택된 특정 음악 방송 구간이 디스플레이되는 디스플레이 단계로 구성된 개인 뮤직 앨범 저장 및 검색 방법을 특징으로 한다.
상기 추가정보 취득 단계에 있어서, 하나의 음악 방송 구간에 부가되는 추가정보는 해당 가수 정보, 노래 제목 등의 노래 의미 정보, 해당 구간을 대표하는 키 프레임들 중 하나이거나 이들간의 조합으로 구성됨을 특징으로 한다.
상기 추가정보 취득단계에 있어, 해당구간을 대표하는 키프레임은 가수의 얼굴이 클로즈업되어 잡힌 장면을 사용하는 것을 특징으로 한다.
상기 사용자가 원하는 구간을 선택하는 선택 단계에 있어서, 추가 정보를 사용한 검색으로 이루어지거나, 각 구간별 키프레임을 나열한 후 사용자가 선택하게 함으로써 이루어지는 것을 특징으로 한다.
상기 단위 구간 취득 단계에서 단위 구간의 취득은 EPG나 caption등의 방송 전송 데이터를 사용하거나, 샷 세그멘테이션, 오디오, 얼굴 영역 추출 및 인식 기술의 조합으로 이루어지는 것을 특징으로 한다.
또한, 상기 단말장치가 TV일 때, TV에서 방영되는 교육방송 데이터를 사용한 개인 멀티미디어 라이브러리 시스템에 있어서
교육 프로그램을 인식하는 단계와,
인식된 하나의 프로그램에서 각 단원별로 구간을 세그멘테이션 하는 단계와
하나의 단원으로 세그멘테이션된 구간을 대표하는 대표 프레임의 취득 단계와,
하나의 단원으로 세그멘테이션된 구간에서 다루어진 교육의 주제 정보를 추가하는 주제 정보 취득 단계와,
인덱싱된 데이터를 저장하는 단계와,
인덱싱되어 저장된 구간들 중 사용자가 원하는 구간을 선택하는 선택 단계와,
선택된 특정 교육 방송 구간이 디스플레이되는 디스플레이 단계로 이루어지는 개인 교육 방송 저장 및 검색방법을 특징으로 한다.
상기 대표 프레임 취득단계에 있어서, 대표 프레임은 주제가 텍스트로 표시되는 프레임을 선택하는 것을 특징으로 한다.
상기 주제 정보 취득 단계는 Caption, EPG등 방송 전송 정보를 사용하거나 문자 영역 추출 및 문자 인식 기술을 적용하여 취득하는 것을 특징으로 한다.
또한, 상기 단말장치가 TV일 때, TV에서 방영되는 방송 프로그램을 사용한 개인 멀티미디어 라이브러리 시스템에 있어서,
사용자가 라이브러리로 구성할 화면을 지정하는 단계와,
지정된 화면을 임시 저장소에 이미지로 저장하는 단계와,
지정된 이미지에 의미 정보를 부가하는 단계와,
취득된 장면 이미지와 의미 정보를 대용량 저장수단으로 전송하는 단계와,
전송된 장면 이미지와 의미정보를 인덱싱 구조에 맞추어 저장하는 단계로 이루어지는 연예인 앨범 저장 방법을 특징으로 한다.
또한, 상기 단말장치가 TV일 때, TV에서 방영되는 방송 프로그램을 사용한 개인 라이브러리 시스템에 있어서,
사람이 등장하는 장면을 인식하는 단계와,
등장 인물이 특정 조건을 만족하여 나타나는 장면을 취득하는 단계와,
취득된 장면에 출연한 등장 인물을 확인하는(identify) 단계와,
등장 인물의 id 등의 인물 정보를 취득하는 단계와,
취득된 장면 이미지와 등장 인물 정보를 사용하여 연예인 앨범을 구성하는 단계로 이루어지는 연예인 자동 앨범 저장 방법을 특징으로 한다.
등장 인물이 특정 조건을 만족하여 나타나는 장면을 취득하는 단계에서 특정 조건은, 임의의 임계치 이상의 비율로 화면에 클로즈업되어 출연하는 것으로 설정하는 것을 특징으로 한다.
상기 디지털 카메라를 이용한 개인 멀티미디어 라이브러리 시스템에 있어서,
디지털 카메라를 이용한 동영상 데이터 취득 단계와,
On/Off 시그널을 이용한 샷 인덱스 정보 취득 단계와,
촬영 날짜 정보를 이용한 시간 정보 취득 단계와,
이를 이용한 취득 데이터 인덱싱 단계와,
인덱싱된 데이터를 인덱싱 정보를 사용하여 검색하거나 브라우징하는 단계로 이루어진 개인 라이브러리 저장 및 브라우징 방법을 특징으로 한다.
그리고, 사용자의 음성을 인식시켜 주요 키워드를 입력시키는 단계를 더 포함하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법을 특징으로 한다.
이와 같은 특징을 갖는 본 발명을 첨부된 도면에 도시된 그 실시예를 참조하여 설명하면 다음과 같다.
도 1은 개인 라이브러리를 구축하기 위한 전체 시스템 구성 블록을 나타낸 도면이다.
먼저, TV(10)나 무비 카메라(20)와 같이 동영상을 취득할 수 있는 디바이스는 방송국(50)이나 촬영을 통해 취득한 동영상 데이터를 각 디바이스에서 포함하고 있는 임시 저장수단(Temporal storage)에 저장한다.
이때, 경우에 따라서 인덱싱 정보나 인덱싱에 도움을 줄 수 있는 정보가 같이 저장되는데 예를 들어 다음과 같은 것이 있다.
TV(10)의 경우 EPG나 Caption정보가 전송되고 이를 수신할 경우 이러한 정보는 인덱싱 시에 주요한 정보로 사용된다.
무비카메라(20)의 경우도 촬영 시 On/Off 시그널을 샷 인덱스로 바로 사용할 수 있다.
또한, 무비 카메라(20)에서 제공되는 시간 정보도 주요한 정보로 사용되며, 음성 인식 수단을 포함함으로써, 사용자가 간단한 키워드나 주석을 음성으로 추가시킬 수도 있다.
이러한 정보와 함께 취득된 데이터는 사용자의 명령에 의하거나, 임시 저장수단(2)에 저장된 데이터에 의해 여유분이 없을 경우 자동으로 대용량 저장수단(home storage)(41)로 전송된다.
이와 같이 데이터를 취득할 수 있는 단말 장치(10,20,30)에는 저장수단(2)의 데이터를 제어하여 전송시킬 수 있는 전송수단(Transmitter)(1)과 제어장치(Transmit Controller)(3), 그리고 임시 저장수단(Temporal Storage)(2)을 포함하고 있다.
이때, 데이터의 전송은 TV(10)와 같은 단말기의 경우 유선으로 전송되며, 무비 카메라(20) 등 이동 가능한 단말기의 경우 인터넷 등을 이용하여 무선으로 전송될 수 있다.
이와 같이 전송된 데이터는 가정에 설치된 시스템 장치(40)의 대용량 저장수단(41)에 저장되는데, 이때 이미 취득한 인덱스 정보와 추가로 추출된 인덱스 정보를 사용하여 전송된 데이터를 인덱싱하여 저장하게 된다.
그러기 위해 가정에는 대용량 저장수단(41)뿐 아니라 전송된 데이터를 수신하기 위한 수신부(receiver)(42), 그리고 전송된 데이터를 인덱싱하기 위한 인덱서(43)가 필요하다.
이렇게 인덱싱되어 저장된 데이터들은 사용자가 특정 데이터를 보고자 할 때 사용된다.
사용자가 원하는 시점에 특정 데이터를 선택하기 위해 시스템장치(40)는 검색기(searcher)(44)와 브라우저(browser)(45)가 포함되어 구성되어, 사용자에게 검색이나 브라우징 사용자 인터페이스를 제공하는데, 사용자는 데이터를 선택하기 위해 사람이름 등의 의미 정보를 사용하여 데이터를 검색할 수 있고, 또는 구간별로 대표 프레임을 나열하여 원하는 구간을 보고 선택할 수 있는 방법을 제공할 수 있다.
상기에서 설명한 바와 같이, 취득된 데이터가 인덱싱됨에 있어서 인덱스 정보의 취득은 단말 장치(10,20,30)에서 부분적으로 이루어질 수도 있고, 전송된 이후 별도의 인덱서(43)에 의해 이루어질 수도 있다.
한편, 도 2는 본 발명의 일실시예로서, TV(10)의 음악방송 프로그램을 이용한 개인 뮤직 앨범을 저장 및 브라우징하는 방법의 그 실행과정을 나타낸 플로우챠트이다.
먼저, TV에서 수신된 프로그램이 뮤직프로그램인지 아닌지 구분하는 과정을 갖는다.
이때, 만일 사용자가 특정 뮤직 프로그램을 선정하였다면 뮤직 프로그램 중에서도 해당 프로그램만을 구분할 수 있다.
이 과정에서 프로그램 구분은 EPG등을 사용할 수 있다.
수신된 방송이 해당 프로그램임이 확인되면 다음 인덱싱 과정을 갖는다.
먼저 해당 프로그램을 음악단위로 세그멘테이션하는 과정이 필요하다.
이 과정은 예를 들면 가요 프로그램의 경우 한 가요가 방송되는 구간을 단위로 데이터를 인덱싱하는 것으로써, EPG나 Caption 정보등으로부터 해당 정보를 취득할 수 있을 경우 이를 이용하여 보다 쉽게 인덱싱을 행할 수 있으나, 그러한 정보의 취득이 어려울 경우 보다 복잡한 방법을 사용하여 본 과정을 행한다.
예를 들어 먼저 샷 단위의 세그멘테이션을 행한 후 오디오 정보를 이용하여 연속된 오디오 정보 단위로 샷들을 그룹화 함으로써 인덱싱이 가능하다.
이와 같이 인덱싱된 데이터는 대용량 저장수단(41)에 보관되고, 사용자의 질의가 주어지면 질의 조건에 맞는 데이터를 인덱싱 정보를 사용하여 검색한 후 그 결과를 디스플레이할 수 있도록 한다.
사용자의 질의는 예를 들어 어떤 가수가 어떤 노래를 부른 구간의 검색과 같이 그 의미정보에 기반하여 이루어질 수 있고, 또는 각 구간의 대표 프레임들의 나열 안에서 사용자 선택에 의해 해당 구간이 선택될 수도 있다.
한편, 도 3은 본 발명의 또 다른 실시예로서, 교육방송 프로그램을 개인라이브러리에 저장하는 과정을 나타낸 플로우챠트이다.
본 실시예는 교육 방송 프로그램을 단원별, 주제별로 인덱싱하여 모든 날짜별로 저장했다가 후에 다시 필요한 구간만을 재 시청함으로써, 교육의 효과를 높이기 위한 교육방송 라이브러리 시스템 구성 과정을 나타낸다.
먼저, 방송 프로그램이 수신되면 교육 방송 프로그램인지를 결정하고, 맞을 경우 각 단원별로 세그멘테이션한 후 각 구간별로 대표프레임을 추출한다.
이때, 단원별 세그멘테이션은 교육 방송 특성상 문자영역 추출과 문자 인식 기술을 적용할 수 있으며, 대표 프레임은 사용자가 어떠한 단원인지를 가장 쉽게 알아낼 수 있는 주제 문자가 디스플레이된 장면으로 정한다.
인식된 문자의 내용은 바로 각 단원의 키워드나 텍스트 정보로 사용될 수 있으며, 이러한 정보와 함께 데이터는 대용량 저장수단(41)에 저장된다.
사용자는 이후 원하는 구간을 검색하기 위해 단원 명이나 필요한 주제 (예를 들어 수학의 경우 함수 종류)를 질의 내용으로 사용할 수 있으며, 또는 단원별 주제가 잘 드러난 대표 프레임을 나열하여, 이를 선택하게 함으로써, 해당 구간을 선택하여 디스플레이할 수 있도록 한다.
그리고, 도 4는 본 발명의 또 다른 실시예를 나타낸 것으로, TV(10)에 출연하는 연예인들의 인물 중심으로 앨범을 제작할 수 있는 연예인 앨범의 제작 과정을 나타낸 플로우챠트이다.
먼저, TV(10)의 수신 프로그램이 대상 프로그램인지를 확인한다.
만일 맞으면 사람이 등장한 구간만을 추출한 후 해당 구간에 출연한 사람이 사용자가 원하는 출연자인지를 확인하기 위해 등장인물 확인(identification)을 실행한다.
사람이 등장하는 구간을 추출하는 부분은 얼굴 영역 추출 알고리즘등을 사용할 수 있으며, 출연자를 확인(identification)하는 방법은 얼굴 인식 기술 및 경험적 방법에 의해 이루어 질 수 있다.
이러한 과정을 거쳐 해당 구간이 원하는 출연자가 출연한 구간이라면 앨범으로 구성할 장면 프레임을 이미지로 저장하는 과정을 갖는다.
이때, 앨범으로 구성할 장면 프레임의 선택은 해당 구간에서 임의로 추출할 수도 있으나, 얼굴 영역의 크기를 기준으로 출연자 얼굴이 클로즈업된 프레임만을 잡을 수도 있다.
이와 같은 과정으로 저장된 등장인물 이미지는 앞서 추출된 등장인물 확인(identification)정보와 함께 저장되어 사용자에 의해 브라우징 및 검색될 수 있다.
이와 같이 도 4에서는 자동으로 연예인 앨범을 구축하는 시스템에 대해 제시하였다.
이러한 방법 이외에 사용자가 수동으로 원하는 프레임을 앨범에서 사용할 이미지로 저장시킬 수 있는 인터페이스를 제공함으로써 같은 기능을 수행할 수 있는데, 이때에는 사용자가 검색에 사용될 수 있는 의미 정보를 추가로 부가할 수 있는인터페이스를 포함한다.
그리고, 본 발명의 또 다른 실시예로서, 도 5는 홈비디오와 같이 무비 카메라(20)를 단말장치로 사용하여 취득한 동영상을 개인 라이브러리화하기 위한 인덱싱 정보를 자동으로 취득할 수 있는 과정을 나타낸 플로우챠트이다.
이러한 기능을 포함한 영상 취득 디바이스는 무비카메라에 제한되지 않는다. 먼저 도면에서 소개된 무비카메라의 예를 살펴보면, 먼저 기존 디지털 무비 카메라와 같이 영상 취득 수단(21)과 이를 저장할 영상 데이터 버퍼(22)를 포함한다.
이외에 인덱싱 정보를 더 추가하기 위한 인덱싱 버퍼(24)를 추가로 포함하며, 인덱싱 정보로서 On/Off 시그널을 샷 정보로서 저장하기 위해 On/Off 제어 장치(25)와 인덱싱 버퍼(24)는 연결버스가 있으며, On/Off 제어 장치(25)는 On/Off 시그널이 있을 때 마다 이 정보를 샷 정보로서 인덱싱 버퍼(24)에 전송한다.
인덱싱 버퍼(24)에 저장되는 또 다른 정보는 촬영 날짜 정보이며, 이 외에 음성 취득 수단(22)과 음성 인식 수단(23)을 사용하여 주제어와 같은 텍스트 정보를 포함시킬 수 있다.
데이터 버퍼(26)와 인덱싱 버퍼(24)에 일정 이상의 데이터가 저장되면 자동으로 전송 수단(29)에 의해 주어진 주소로 해당 데이터가 전송되며, 전송된 데이터는 인덱싱 버퍼(24)에서 비워진다.
이와 같은 동작을 제어하기 위해 콘트롤 유닛(CU)(27)이 포함되며, 전송할 주소가 저장될 주소 저장 공간(28)이 포함된다.
상기 설명된 인덱싱 버퍼(24)와 데이터 버퍼(26), 주소 저장 공간(28)은 같은 메모리를 사용하거나 다른 메모리를 사용할 수 있다.
이상에서 설명한 바와 같이, 본 발명은 TV 방송이나 무비카메라와 같은 이동 가능한 영상 취득 디바이스로부터 다양한 데이터를 대용량 저장소에 인덱싱하여 저장함으로써, 사용자가 원할 때 원하는 데이터를 검색하여 살펴볼 수 있으며 개인환경에 맞는 멀티미디어 라이브러리를 손쉽게 구성할 수 있는 시스템을 제공하게 된다.
특히, 뮤직 앨범이나 연예인 앨범과 같이 특정 세대의 선호에 민감한 데이터를 제작, 정리할 수 있고, 교육 방송과 같이 선택적 반복 시청이 필요한 부분에 대해 얼마든지 원하는 서비스를 사용자의 요구에 맞게 제공할 수 있다.
이와 같이 멀티미디어 콘텐트 관련 분야가 매우 중요하게 대두되고 있는 인터넷 시대에, 일반 가전 시스템을 사용하여 개인 콘텐트를 제작 및 관리할 수 있는 방법을 제공한다는 점에서 그 의미가 크다고 할 수 있으며, 또한 홈 비디오가 더 이상 단순한 녹화가 아닌 자신의 콘텐트 제작이라는 의미로 확장되고, 지역 저장소에서 대용량 저장소로 전송하여 관리하는 개념을 사용함으로써, 메모리 제한이라는 하드웨어의 제약을 해결하는 효과를 가져온다.

Claims (21)

  1. 단말 장치로부터 송신된 멀티미디어 데이터를 수신하여 대용량 저장수단에 저장하기 위한 수신 수단과,
    수신된 데이터를 저장하기 위한 대용량 저장수단과,
    멀티미디어 데이터를 인덱싱하기 위한 인덱서와
    인덱싱된 멀티미디어 데이터를 검색 및 브라우징하기 위한 브라우저를 포함하는 것을 특징으로 하는 개인 멀티미디어 라이브러리 시스템.
  2. 제 1항에 있어서, 상기 멀티미디어 데이터를 취득하여 송신할 수 있는 단말 장치는 TV, 디지털 무비카메라, 디지털 스틸카메라, 카메라 기능이 결합된 핸드폰 중 하나임을 특징으로 하는 개인 멀티미디어 라이브러리 시스템.
  3. 제 1항 또는 제 2항에 있어서, 상기 멀티미디어 데이터를 취득하여 송신할 수 있는 단말 장치는 취득한 데이터를 임시로 저장할 수 있는 임시 저장수단을 더 포함하는 것을 특징으로 하는 개인 멀티미디어 라이브러리 시스템.
  4. 제 3항에 있어서, 상기 임시저장수단을 더 포함하는 단말장치는 임시 저장수단에 취득한 데이터를 저장한 후 사용자의 요구가 있거나, 저장된 데이터 양이 임시 저장수단의 용량과 관련된 임계치를 넘을 경우 지정된 주소로 데이터를 전송하는 것을 특징으로 하는 개인 멀티미디어 라이브러리 시스템.
  5. 제 1항 또는 제 2항에 있어서, 상기 단말 장치는 데이터 취득과 동시에 데이터 인덱싱 정보나 인덱싱에 도움을 주는 정보를 취득할 수 있는 수단을 더 포함하는 것을 특징으로 하는 개인 멀티미디어 라이브러리 시스템.
  6. 제 5항에 있어서, 데이터 취득과 동시에 취득할 수 있는 인덱싱 관련 정보는,
    디지털 무비카메라에서 촬영시 On/Off 신호를 사용하여 자동으로 저장될 수 있는 샷 정보와, 디지털 카메라와 같이 이동 가능한 디바이스에서 제공하는 데이터 취득 당시의 시간 정보와, 디지털 카메라와 같이 이동 가능한 디바이스에서 촬영 당시 필요한 정보를 음성 신호로 입력하여 다시 음성 인식을 통해 텍스트로 변환 후 데이터와 같이 저장될 수 있는 정보 들 중 하나이거나 이들의 조합인 것을 특징으로 하는 개인 멀티미디어 라이브러리 시스템.
  7. 제 1항에 있어서, 상기 멀티미디어 데이터를 인덱싱하기 위한 인덱서는,
    동영상의 샷정보를 취득하는 수단과, 샷들을 의미적, 또는 물리적 정보를 이용하여 그룹화하는 수단과, 각 샷이나 그룹화된 샷 그룹에 대해 의미 정보를 부여하는 수단을 포함하는 것을 특징으로 하는 개인 멀티미디어 라이브러리 시스템.
  8. 제 1항 또는 제 7항에 있어서, 상기 인덱싱된 멀티미디어 데이터를 검색 및 브라우징하기 위한 브라우저는 인덱서에 의해 인덱스되어 저장된 데이터를 의미적, 물리적 정보를 사용하여 특정 데이터, 또는 데이터의 부분을 검색할 수 있는 검색 수단과, 그러한 의미적 정보를 저장된 데이터와 연관하여 브라우징하는 수단을 포함하는 것을 특징으로 하는 개인 멀티미디어 라이브러리 시스템.
  9. TV에서 방영되는 뮤직프로그램을 사용한 개인 멀티미디어 라이브러리 시스템에 있어서,
    뮤직 프로그램을 인식하는 단계와,
    인식된 하나의 프로그램에서 하나의 음악이 방송되는 구간을 취득하는 단위구간 취득단계와,
    하나의 음악 방송 구간에 부가되는 추가정보를 취득하는 추가정보 취득 단계와,
    각 음악 방송 구간별로 인덱싱하여 저장하는 저장 단계와,
    인덱싱되어 저장된 음악 방송 구간들 중 사용자가 원하는 구간을 선택하는 선택 단계와,
    선택된 특정 음악 방송 구간이 디스플레이되는 디스플레이 단계로 이루어지는 개인 뮤직 앨범 저장 및 검색 과정을 특징으로 하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
  10. 제 9항에 있어서, 상기 추가정보 취득 단계에 있어서, 하나의 음악 방송 구간에 부가되는 추가정보는 해당 가수 정보, 노래 제목 등의 노래 의미 정보, 해당 구간을 대표하는 키 프레임들 중 하나이거나 이들간의 조합으로 구성됨을 특징으로 하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
  11. 제 10항에 있어서, 상기 추가정보 취득단계에 있어, 해당구간을 대표하는 키프레임은 가수의 얼굴이 클로즈업되어 잡힌 장면을 사용하는 것을 특징으로 하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
  12. 제 9항에 있어서, 상기 사용자가 원하는 구간을 선택하는 선택 단계에 있어서, 추가 정보를 사용한 검색으로 이루어지거나, 각 구간별 키프레임을 나열한 후 사용자가 선택하게 함으로써 이루어지는 것을 특징으로 하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
  13. 제 9항에 있어서, 상기 단위 구간 취득 단계에서 단위 구간의 취득은 EPG나 caption등의 방송 전송 데이터를 사용하거나, 샷 세그멘테이션, 오디오, 얼굴 영역 추출 및 인식 기술의 조합으로 이루어지는 것을 특징으로 하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
  14. TV에서 방영되는 교육방송 데이터를 사용한 개인 라이브러리 시스템에 있어서,
    교육 프로그램을 인식하는 단계와,
    인식된 하나의 프로그램에서 각 단원별로 구간을 세그멘테이션 하는 단계와
    하나의 단원으로 세그멘테이션된 구간을 대표하는 대표 프레임의 취득 단계와,
    하나의 단원으로 세그멘테이션된 구간에서 다루어진 교육의 주제 정보를 추가하는 주제 정보 취득 단계와,
    인덱싱된 데이터를 저장하는 단계와,
    인덱싱되어 저장된 구간들 중 사용자가 원하는 구간을 선택하는 선택 단계와,
    선택된 특정 교육 방송 구간이 디스플레이되는 디스플레이 단계로 이루어지는 개인 교육 방송 저장 및 검색 과정을 특징으로 하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
  15. 제 14항에 있어서, 상기 대표 프레임 취득단계에 있어서, 대표 프레임은 주제가 텍스트로 표시되는 프레임을 선택하는 것을 특징으로 하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
  16. 제 14항에 있어서, 상기 주제 정보 취득 단계는 Caption, EPG등 방송 전송 정보를 사용하거나 문자 영역 추출 및 문자 인식 기술을 적용하여 취득하는 것을특징으로 하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
  17. TV에서 방영되는 방송 프로그램을 사용한 개인 멀티미디어 라이브러리 시스템에 있어서,
    사용자가 라이브러리로 구성할 화면을 지정하는 단계와,
    지정된 화면을 임시 저장소에 이미지로 저장하는 단계와,
    지정된 이미지에 의미 정보를 부가하는 단계와,
    취득된 장면 이미지와 의미 정보를 대용량 저장수단으로 전송하는 단계와,
    전송된 장면 이미지와 의미정보를 인덱싱 구조에 맞추어 저장하는 단계로 이루어지는 연예인 앨범 저장 방법을 특징으로 하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
  18. TV에서 방영되는 방송 프로그램을 사용한 개인 멀티미디어 라이브러리 시스템에 있어서,
    사람이 등장하는 장면을 인식하는 단계와,
    등장 인물이 특정 조건을 만족하여 나타나는 장면을 취득하는 단계와,
    취득된 장면에 출연한 등장 인물을 확인하는 단계와,
    등장 인물의 id 등의 인물 정보를 취득하는 단계와,
    취득된 장면 이미지와 등장 인물 정보를 사용하여 연예인 앨범을 구성하는 단계로 이루어지는 연예인 자동 앨범 저장 과정을 특징으로 하는 개인 멀티미디어라이브러리 저장 및 브라우징 방법.
  19. 제 18항에 있어서, 등장 인물이 특정 조건을 만족하여 나타나는 장면을 취득하는 단계에서 특정 조건은, 임의의 임계치 이상의 비율로 화면에 클로즈업되어 출연하는 것으로 설정하는 것을 특징으로 하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
  20. 디지털 카메라를 이용한 개인 멀티미디어 라이브러리 시스템에 있어서,
    디지털 카메라를 이용한 동영상 데이터 취득 단계와,
    On/Off 시그널을 이용한 샷 인덱스 정보 취득 단계와,
    촬영 날짜 정보를 이용한 시간 정보 취득 단계와,
    취득 데이터 인덱싱 단계와,
    인덱싱된 데이터를 인덱싱 정보를 사용하여 검색하거나 브라우징하는 단계로 이루어진 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
  21. 제 20항에 있어서, 사용자의 음성을 인식시켜 주요 키워드를 입력시키는 단계를 더 포함하는 개인 멀티미디어 라이브러리 저장 및 브라우징 방법.
KR1020000048276A 2000-08-21 2000-08-21 개인 멀티미디어 라이브러리 시스템과 이러한 시스템을이용한 개인 멀티미디어 라이브러리 저장 및 브라우징 방법 KR100705900B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020000048276A KR100705900B1 (ko) 2000-08-21 2000-08-21 개인 멀티미디어 라이브러리 시스템과 이러한 시스템을이용한 개인 멀티미디어 라이브러리 저장 및 브라우징 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020000048276A KR100705900B1 (ko) 2000-08-21 2000-08-21 개인 멀티미디어 라이브러리 시스템과 이러한 시스템을이용한 개인 멀티미디어 라이브러리 저장 및 브라우징 방법

Publications (2)

Publication Number Publication Date
KR20020015123A true KR20020015123A (ko) 2002-02-27
KR100705900B1 KR100705900B1 (ko) 2007-04-10

Family

ID=19684160

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020000048276A KR100705900B1 (ko) 2000-08-21 2000-08-21 개인 멀티미디어 라이브러리 시스템과 이러한 시스템을이용한 개인 멀티미디어 라이브러리 저장 및 브라우징 방법

Country Status (1)

Country Link
KR (1) KR100705900B1 (ko)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030006734A (ko) * 2001-07-14 2003-01-23 엠텍비젼 주식회사 통신망을 이용한 영상 데이터 관리 방법 및 시스템
KR20040031168A (ko) * 2002-10-04 2004-04-13 삼성전자주식회사 카메라 폰을 이용한 뉴스 제작 및 제공 시스템
KR100692636B1 (ko) * 2005-04-11 2007-03-13 정수구 Ｄｔｖ와 가정내 멀티미디어 기기간 데이터베이스관리 방법
KR100703522B1 (ko) * 2005-06-16 2007-04-03 삼성전자주식회사 디지털 멀티미디어 방송 수신 단말의 디지털 멀티미디어방송 오디오 데이터 저장 방법 및 장치
KR100737856B1 (ko) * 2005-11-22 2007-07-12 삼성전자주식회사 Ｒｆｉｄ 시스템을 이용한 사용자별 방송환경 설정방법 및이를 적용한 방송재생장치
KR100794957B1 (ko) * 2006-04-28 2008-01-15 (주)아이디스 텍스트 검색 기반의 디지털 영상 저장장치
KR100937416B1 (ko) * 2003-06-12 2010-01-18 엘지전자 주식회사 Ｐｖｒ 장치 및 방법
US9171544B2 (en) 2011-10-13 2015-10-27 Hyundai Motor Company System for providing a sound source information management service

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1996017313A1 (en) * 1994-11-18 1996-06-06 Oracle Corporation Method and apparatus for indexing multimedia information streams
JPH09306147A (ja) * 1996-05-10 1997-11-28 Hitachi Ltd ディジタル・ストリーム情報編集・検索処理装置
JPH11185453A (ja) * 1997-12-24 1999-07-09 Matsushita Electric Ind Co Ltd 画像データ記録再生装置
JP3208116B2 (ja) * 1998-02-03 2001-09-10 株式会社次世代情報放送システム研究所 映像インデックス情報を記録した記録媒体、映像インデックス情報を用いた映像情報管理方法、音声インデックス情報を記録した記録媒体および音声インデックス情報を用いた音声情報管理方法
KR100518861B1 (ko) * 1999-06-02 2005-09-30 엘지전자 주식회사 사건 중심의 비디오 브라우징 시스템
KR20000054561A (ko) * 2000-06-12 2000-09-05 박성환 비디오 인덱싱 방식을 이용한 네트워크 기반의 비디오검색 시스템 및 그 운영방법

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030006734A (ko) * 2001-07-14 2003-01-23 엠텍비젼 주식회사 통신망을 이용한 영상 데이터 관리 방법 및 시스템
KR20040031168A (ko) * 2002-10-04 2004-04-13 삼성전자주식회사 카메라 폰을 이용한 뉴스 제작 및 제공 시스템
KR100937416B1 (ko) * 2003-06-12 2010-01-18 엘지전자 주식회사 Ｐｖｒ 장치 및 방법
KR100692636B1 (ko) * 2005-04-11 2007-03-13 정수구 Ｄｔｖ와 가정내 멀티미디어 기기간 데이터베이스관리 방법
KR100703522B1 (ko) * 2005-06-16 2007-04-03 삼성전자주식회사 디지털 멀티미디어 방송 수신 단말의 디지털 멀티미디어방송 오디오 데이터 저장 방법 및 장치
KR100737856B1 (ko) * 2005-11-22 2007-07-12 삼성전자주식회사 Ｒｆｉｄ 시스템을 이용한 사용자별 방송환경 설정방법 및이를 적용한 방송재생장치
KR100794957B1 (ko) * 2006-04-28 2008-01-15 (주)아이디스 텍스트 검색 기반의 디지털 영상 저장장치
US9171544B2 (en) 2011-10-13 2015-10-27 Hyundai Motor Company System for providing a sound source information management service

Also Published As

Publication number Publication date
KR100705900B1 (ko) 2007-04-10

Similar Documents

Publication Publication Date Title
KR100387965B1 (ko) 사용자 적응적 멀티미디어 서비스 시스템
KR101644789B1 (ko) 방송 프로그램 연관 정보 제공 장치 및 방법
US7584492B2 (en) Program-selection device, program selection method, and program information providing system
US8799945B2 (en) Information processing apparatus, information processing method, and computer program
EP1762947B1 (en) Apparatus, method, and computer program for television program selection
US20010020981A1 (en) Method of generating synthetic key frame and video browsing system using the same
KR101502343B1 (ko) 검색어와 관련된 컨텐츠를 제공하기 위한 멀티미디어제공방법 및 이를 적용한 멀티미디어 기기
KR101201422B1 (ko) 정보 처리 장치 및 방법과 기록 매체
EP1091584A2 (en) Multimedia search and browsing method using multimedia user profile
US20010024565A1 (en) Television receiver
US20100302443A1 (en) Method of constructing information on associate meanings between segments of multimedia stream and method of browsing video using the same
CN102075797A (zh) 一种语音浏览频道或节目的方法及数字电视接收终端
JP4973906B2 (ja) 情報処理装置および方法、並びにプログラム
JP2000253377A (ja) オーディオビジュアルシステムの使用方法
JP2000217058A (ja) 映像検索システム及びデ―タ構造、そしてそれによる検索方法
CN103686452A (zh) 一种视频关联信息的添加处理方法
JP4305080B2 (ja) 映像再生方法およびシステム
JP2006345376A (ja) 表示方法
KR100370247B1 (ko) 등장인물 관계 기반 동영상 검색 방법
JP2005295375A (ja) 情報取得支援システム
KR20030007727A (ko) 자동 비디오 리트리버 제니
US20060085416A1 (en) Information reading method and information reading device
KR101396362B1 (ko) 녹화 기기의 상세 정보 제공 방법 및 장치
KR100705900B1 (ko) 개인 멀티미디어 라이브러리 시스템과 이러한 시스템을이용한 개인 멀티미디어 라이브러리 저장 및 브라우징 방법
JP2003522346A (ja) ビデオ及びグラフィック用サーチエンジン

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20110328

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee