KR102263146B1 - 영상 표시 장치 및 그 동작 방법 - Google Patents

Abstract

디스플레이부를 포함하는 영상 표시 장치의 동작 방법이 개시된다. 메인 컨텐트 및 메인 컨텐트를 보조하는 메타데이터를 포함하는 방송신호를 컨텐트 제공자로부터 수신하는 단계; 로그인 정보를 수신하여 사용자를 식별하는 단계;상기 식별된 사용자에 대응되는 개인화 서비스를 위한 데이터를 검색하는 단계;상기 검색 결과에 기초하여 상기 메타데이터의 출력 형태를 변환하는 단계; 및 상기 변환된 메타데이터를 출력하는 단계가 개시된다.

Description

영상 표시 장치 및 그 동작 방법{VIDEO DISPLAY APPARATUS AND OPERATING METHOD THEREOF}

본 발명은 영상 표시 장치 및 그 동작 방법에 관한 것이다.

디지털 방송 서비스가 제공되고 디지털 기술의 발달과 함께, 보다 높은 품질의 방송 서비스를 공급하기위한 기술이 주목 받고 있다.

더하여, 기존의 방송 서비스와 함께 적극적으로 사용자의 요구를 반영한 컨텐츠 및 방송 서비스를 원하는 사용자의 요구가 증가하고 있다.

그러나, 현재의 방송 시스템의 사용자 정보를 수집하고 수집된 사용자 정보를 처리하기위한 시스템을 구축하지 않았고, 따라서, 사용자 각각에 적합한 방송 서비스를 제공하기 어려운점이 있었다.

본 발명은 비압축 시청각 컨텐츠 형태를 인식하고, 인식된 컨텐츠와 관련된 부가 서비스를 사용자에게 제공하는 영상 표시 장치와 그 동작 방법을 제공하기 위한 것이다.

또한, 본 발명은 인식된 컨텐츠와 관련된 부가 서비스를 사용자로부터 획득한 정보에 기초하여 변환해 제공하는 영상 표시 장치와 그 동작 방법을 제공하기 위한 것이다.

특히, 인식된 컨텐츠와 관련된 부가 서비스 중, 자막 서비스를 영상표시장치에서 사용자 특성에 따라 변환하여 제공하기 위한 것이다.

본 발명의 일 실시 예에 따른 영상표시장치의 제어 방법은 메인 컨텐트 및 메인 컨텐트를 보조하는 메타데이터를 포함하는 방송신호를 컨텐트 제공자로부터 수신하는 단계; 로그인 정보를 수신하여 사용자를 식별하는 단계; 상기 식별된 사용자에 대응되는 개인화 서비스를 위한 데이터를 검색하는 단계; 상기 검색 결과에 기초하여 상기 메타데이터의 출력 형태를 변환하는 단계; 및 상기 변환된 메타데이터를 출력하는 단계를 포함한다.

본 발명의 실시예는 설문지를 통해 사용자 특성을 파악하여, 사용자 특성에 맞는 부가 서비스를 가능하게 한다.

또한, 사용자 특성에 맞는 부가 서비스를 컨텐트 제공자가 모두 보낼 필요 없이, 하나의 메타데이터만을 송출하면 영상표시장치에서 사용자 특성에 따라 변환하여 송출할 데이터량을 줄일 수 있다.

또한, 본 발명의 실시 예에 따르면, 컨텐트와 관련된 서비스를 제공하는 메뉴를 디스플레이 장치의 화면이 아닌 2nd 스크린을 통해 제공하여 사용자가 느끼는 시청간의 불편함을 최소화 할 수 있다.

도 1은 본 발명의 일 실시예에 따른 네트워크 토폴로지를 보여주는 블록도이다.
도 2는 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 3은 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 4는 본 발명의 일 실시예에 따른 워터마크 기반의 컨텐츠 인식 타이밍을 보여준다.
도 5는 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 6은 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 7은 본 발명의 일 실시예에 따른 질의 결과를 담는 ACR-Resulttype의 XML 스키마 다이어그램(schema diagram)을 보여준다.
도 8은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 9은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 10은 본 발명의 실시예에 따른 영상 표시 장치의 블록도이다.
도 11은 본 발명의 실시 예에 따른 디지털 방송 시스템을 나타내는 도면이다.
도 12은 PDI 인터페이스의 구성을 나타내는 블록도이다.
도 13은 본 발명의 일 실시 예에 따른 개인화 서비스의 구성을 나타내는 블록도이다.
도 14는 영상표시장치(100)가 사용자로부터 PDI 데이터를 획득하는 과정을 나타내는 흐름도이다.
도 15는 PDI 설문지의 XML 스키마 테이블을 나타내는 도면이다.
도 16는 본 발명의 일 실시 예에 따른 사용자별 컨텐트 제공 서비스의 구성을 나타내는 블록도이다.
도 17은 본 발명의 일 실시 예에 따른 사용자별 PDI 데이터에 기초한 개인화 서비스 제공 과정을 나타내는 흐름도이다.
도 18은 본 발명의 또 다른 실시예에 따른 핑거프린트 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.
도 19는 본 발명의 또 다른 실시예에 따른 워트마크 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.

이하, 본 발명과 관련된 이동 단말기에 대하여 도면을 참조하여 보다 상세하게 설명한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "엔진", "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.

다음은 도 1 내지 도 9를 참고하여 본 발명의 일 실시예에 따른 네트워크 토폴로지를 설명한다.

도 1은 본 발명의 일 실시예에 따른 네트워크 토폴로지를 보여주는 블록도이다.

도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 컨텐츠 제공 서버(10), 컨텐츠 인식 서비스 제공 서버(20), 멀티채널 비디오 분배 서버(30), 부가 서비스 정보 제공 서버(40), 복수의 부가 서비스 제공 서버(50), 방송 수신 장치(60), 네트워크(70), 영상 표시 장치(100)를 포함한다.

컨텐츠 제공 서버(10)는 방송국 등에 해당할 수 있으며, 메인 시청각 컨텐츠(main audio-visual content)를 포함하는 방송 신호를 방송한다. 방송 신호는 부가 서비스를 더 포함할 수 있다. 부가 서비스는 메인 시청각 컨텐츠와 관련이 있을 수도 있고, 관련이 없을 수도 있다. 부가 서비스는 서비스 정보(service information), 메타데이터(metadata), 부가 데이터, 컴파일된 실행 파일, 웹 애플리케이션, HTML(Hypertext Markup Language) 문서, XML 문서, CSS(cascading style sheet) 문서, 오디오 파일, 비디오 파일, ATSC 2.0 컨텐츠, URL(Uniform Resource Locator)과 같은 주소 등의 형태를 가질 수 있다. 하나 이상의 컨텐츠 제공 서버가 존재할 수 있다.

컨텐츠 인식 서비스 제공 서버(20)는 영상 표시 장치(100)가 메인 시청각 컨텐츠에 기초하여 컨텐츠를 인식할 수 있게 하는 컨텐츠 인식 서비스를 제공한다. 컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐츠에 수정을 가할 수도 있고 수정을 가하지 않을 수도 있다. 하나 이상의 컨텐츠 인식 서비스 제공 서버가 존재할 수 있다.

컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐츠에 변형을 가하여 메인 시청각 컨텐츠에 로고와 같은 보이는 워터마크(visible watermark)를 삽입하는 워터마크 서버일 수 있다. 이 워터마크 서버는 메인 시청각 컨텐츠의 각 프레임의 왼쪽 상단 또는 오른쪽 상단에 컨텐츠 제공자의 로고를 워터마크할 수 있다.

또, 컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐츠에 변형을 가하여 메인 시청각 컨텐츠에 컨텐츠 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입하는 워터마크 서버일 수 있다.

또한, 컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐츠의 일부의 프레임 또는 일부의 오디오 샘플로부터 특징 정보를 추출하여 저장하는 핑거프린트 서버일 수 있다. 이 특징 정보는 시그너처라고도 불린다.

멀티채널 비디오 분배 서버(30)는 복수의 방송국으로부터 방송 신호를 수신하고 다중화하여 다중화된 신호를 방송 수신 장치(60)에 제공한다. 특히, 멀티채널 비디오 분배 서버(30)는 수신한 방송 신호에 대해 복조와 채널 복호화를 수행하여 메인 시청각 컨텐츠와 부가 서비스를 추출한 후, 추출된 메인 시청각 컨텐츠와 추출한 부가 서비스에 대해 채널 부호화를 수행하여 분배를 위한 다중화 신호를 생성할 수 있다. 이때, 멀티채널 비디오 분배 서버(30)는 추출한 부가 서비스를 제외할 수도 있고, 또 다른 부가 서비스를 추가할 수도 있기 때문에, 방송국은 방송국 주도의 서비스를 제공할 수 없다. 하나 이상의 멀티채널 비디오 분배 서버가 존재할 수 있다.

방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고, 튜팅한 채널의 신호를 수신하고, 수신한 신호에 대해 복조와 채널 복호를 수행하여 메인 시청각 컨텐츠를 추출한다. 그리고 방송 수신 장치(60)는 추출한 메인 시청각 컨텐츠를 H.264/MPEG-4 AVC(Moving Picture Experts Group-4 advanced video coding), Dolby AC-3, MPEG-2 AAC (Moving Picture Experts Group-2 Advanced Audio Coding) 알고리즘 등을 이용하여 복호하여 비압축 메인 시청각 컨텐츠(uncompressed main AV content)를 생성한다. 방송 수신 장치(60)는 생성한 비압축 메인 시청각 컨텐츠를 영상 표시 장치(100)의 외부 입력 포트 등을 통해 영상 표시 장치(100)에 제공한다.

부가 서비스 정보 제공 서버(40)는 영상 표시 장치의 요청에 응답하여 메인 시청각 컨텐츠와 관련된 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 제공한다. 하나 이상의 부가 서비스 주소 제공 서버가 존재할 수 있다. 부가 서비스 정보 제공 서버(40)는 복수의 이용가능한 부가 서비스 중에서 가장 우선순위가 높은 부가 서비스를 위한 부가 서비스 정보를 제공할 수도 있다.

부가 서비스 제공 서버(50)는 영상 표시 장치의 요청에 응답하여 메인 시청각 컨텐츠와 관련하여 이용할 수 있는 하나 이상의 부가 서비스를 제공한다. 하나 이상의 부가 서비스 제공 서버가 존재할 수 있다.

영상 표시 장치(100)는 텔레비전, 노트북, 핸드폰, 스마트폰 등과 같이 디스플레이부를 포함하는 장치일 수 있다. 영상 표시 장치(100)는 방송 수신 장치(60)로부터 비압축 메인 시청각 컨텐츠를 수신할 수도 있고, 컨텐츠 제공 서버(10) 또는 멀티채널 비디오 분배 서버(30)로부터 부호화된 메인 시청각 컨텐츠를 포함하는 방송 신호를 수신할 수 도 있다. 영상 표시 장치(100)는 네트워크(70)를 통해 컨텐츠 인식 서비스 제공 서버(20)로부터 컨텐츠 인식 서비스를 제공받을 수 있고, 네트워크(70)를 통해 부가 서비스 정보 제공 서버(40)로부터 메인 시청각 컨텐츠와 관련하여 이용할 수 있는 하나 이상의 부가 서비스의 주소를 받을 수 있으며, 부가 서비스 제공 서버(50)로부터 메인 시청각 컨텐츠와 관련하여 이용할 수 있는 하나 이상의 부가 서비스를 제공받을 수 있다.

컨텐츠 제공 서버(10), 컨텐츠 인식 서비스 제공 서버(20), 멀티채널 비디오 분배 서버(30), 부가 서비스 정보 제공 서버(40), 복수의 부가 서비스 제공 서버(50) 중 2 이상은 하나의 서버의 형태로 결합될 수도 있고, 한 사업자에 의해 운영될 수도 있다.

도 2는 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지를 보여주는 블록도이다.

도 2에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 워터마크 서버(21)를 더 포함한다.

도 2에 도시된 바와 같은 워터마크 서버(21)는 메인 시청각 컨텐츠에 변형을 가하여 메인 시청각 컨텐츠에 컨텐츠 정보를 삽입한다. 멀티채널 비디오 분배 서버(30)는 변형된 메인 시청각 컨텐츠를 포함하는 방송 신호를 수신하여 분배한다. 특히, 워터마크 서버는 이하에서 설명하는 바와 같은 디지털 워터마킹 기술을 이용할 수 있다.

디지털 워터마크는 삭제하기 어려운 방법으로 디지털 신호에 정보를 삽입하는 프로세스이다. 예를 들면, 디지털 신호는 오디오, 사진, 또는 비디오일 수 있다. 이 디지털 신호가 복사되면, 삽입된 정보 또한 복사본에 담아진다. 한 디지털 신호가 동시에 다른 여러 개의 워터마크를 운반할 수 있다.

보이는 워터마킹(visible watermarking)에서, 삽입되는 정보는 사진 또는 비디오에서 눈으로 식별가능하다. 전형적으로, 삽입된 정보는 미디어의 소유자를 식별하는 텍스트 또는 로고이다. 텔레비전 방송국이 자신의 로고를 전송되는 비디오의 코너에 추가하면, 이것이 눈으로 식별가능한 워터마크이다.

눈으로 식별 불가능한 워터마킹(invisible watermarking)에서, 정보는 디지털 데이터로서 오디오, 사진, 또는 비디오에 추가되지만, 일정 량의 정보가 숨겨져 있다는 사실은 감지할 수 있다하더라도 그러한 정보는 인지할 수는 없다. 이러한 눈으로 식별불가능한 워터마킹을 통해 비밀 메시지가 전달될 수도 있다.

워터마킹의 한 응용은 디지털 미디어의 불법 복제를 막기 위한 저작권 보호 시스템에 있다. 예컨데, 복제 장치는 디지털 미디어의 복제 전에 디지털 미디어로부터 워터마크를 얻고, 워터마크의 내용에 기초하여 복제를 할지 말지를 결정할 수 있다.

워터마킹의 또 다른 응용은 디지털 미디어의 출처 추적에 있다. 배포 경로 상의 각 지점에서 워터마크가 디지털 미디어에 임베딩된다. 나중에 이와 같은 디지털 미디어가 발견된다면, 이 디지털 미디어로부터 워터마크가 추출될 수 있고, 워터마크의 내용으로부터 배포의 출처를 파악할 수 있다.

디지털 미디어에 대한 설명이 눈으로 식별불가능한 워터마킹의 또 다른 응용이다.

디지털 미디어를 위한 파일 포멧이 메타데이터라고 불리는 추가적인 정보를 포함할 수 있는데, 디지털 워터마크는 디지털 미디어의 시청각 신호 자체로 전달된다는 점에서 메타데이터와는 구별된다.

워터마킹 방법으로 스프레드 스펙트럼, 양자화, 앰플리튜드 변조가 있다.

마킹되는 신호가 추가적인 수정에 의해 얻어진다면, 워터마킹 방법은 스프레드 스펙트럼에 해당한다. 스프레드 스펙트럼 워터마크는 꽤 강인하다고 알려져 있지만, 워터마크가 임베딩되는 호스트 신호에 간섭을 주기 때문에 많은 정보가 실리지는 않는다.

마킹되는 신호가 양자화에 의해 얻어진다면, 워터마킹 방법은 양자화 타입에 해당한다. 양자화 워터마크는 강인성은 낮지만, 꽤 많은 정보를 실을 수 있다.

마킹되는 신호가 공간 도메인에서 스프레드 스펙트럼과 유사한 추가 수정 방법으로 얻어진다면, 워터마킹 방법은 앰플리튜드 변조에 해당한다.

도 3은 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.

먼저, 컨텐츠 제공 서버(10)는 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 전송한다(S101).

워터마크 서버(21)는 컨텐츠 제공 서버(10)가 제공하는 방송 신호를 수신하고, 메인 시청각 컨텐츠에 변형을 가하여 메인 시청각 컨텐츠에 로고와 같은 보이는 워터마크(visible watermark)를 삽입하거나, 메인 시청각 컨텐츠에 워터마크 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입하고, 워터마킹된 메인 시청각 컨텐츠와 부가 서비스를 MVPD(30)에 제공한다(S103).

보이지 않는 워터마크를 통해 삽입되는 워터마크 정보는 워터마크 용도, 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다. 워터마크 용도는 무단 복제 방지, 시청률 조사, 부가 서비스 획득 중 하나를 나타낼 수 있다.

컨텐츠 정보는 메인 시청각 컨텐츠를 제공하는 컨텐츠 제공자의 식별 정보, 메인 시청각 컨텐츠 식별 정보, 메인 시청각 컨텐츠 등급 정보, 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 시간 정보, 메인 시청각 컨텐츠가 방송되는 채널의 이름, 메인 시청각 컨텐츠가 방송되는 채널의 로고, 메인 시청각 컨텐츠가 방송되는 채널의 설명, 이용 정보 보고 주소, 이용 정보 보고 주기, 이용 정보 획득을 위한 최소 이용 시간, 메인 시청각 컨텐츠와 관련하여 이용가능한 부가 서비스 정보 중 하나 이상을 포함할 수 있다.

영상 표시 장치(100)가 컨텐츠 정보의 획득을 위하여 워터마크를 이용하였다면, 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 시간 정보는 이용된 워터마크가 내삽(embedding)된 컨텐츠 구간의 시간 정보일 수 있다. 영상 표시 장치(100)가 컨텐츠 정보의 획득을 위하여 핑거프린트를 이용하였다면, 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 시간 정보는 특징 정보가 추출된 컨텐츠 구간의 시간 정보일 수 있다. 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 시간 정보는 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 시작 시간, 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 지속 시간(duration), 컨텐츠 정보 획득에 사용된 컨텐츠 구간의 종료 시간 중 하나 이상을 포함할 수 있다.

이용 정보 보고 주소는 메인 시청각 컨텐츠 시청 정보 보고 주소, 부가 서비스 이용 정보 보고 주소 중 하나 이상을 포함할 수 있다. 이용 정보 보고 주기는 메인 시청각 컨텐츠 시청 정보 보고 주기, 부가 서비스 이용 정보 보고 주기 중 하나 이상을 포함할 수 있다. 이용 정보 획득을 위한 최소 이용 시간은 메인 시청각 컨텐츠 시청 정보 획득을 위한 최소 시청 시간, 부가 서비스 이용 정보 추출을 위한 최소 사용 시간 중 하나 이상을 포함할 수 있다.

메인 시청각 컨텐츠가 최소 시청 시간 이상 시청된 경우에 기초하여 영상 표시 장치(100)는 메인 시청각 컨텐츠의 시청 정보를 획득하고, 메인 시청각 컨텐츠 시청 정보 보고 주기에서 메인 시청각 컨텐츠 시청 정보 보고 주소로 추출한 시청 정보를 보고할 수 있다.

부가 서비스가 최소 사용 시간 이상 사용된 경우에 기초하여 영상 표시 장치(100)는 부가 서비스 이용 정보를 획득하고, 부가 서비스 이용 정보 보고 주기에서 부가 서비스 이용 정보 보고 주소로 추출한 이용 정보를 보고할 수 있다.

부가 서비스 정보는 부가 서비스가 존재하는지에 대한 정보, 부가 서비스 주소 제공 서버 주소, 각각의 이용가능한 부가 서비스의 획득 경로, 각각의 이용가능한 부가 서비스를 위한 주소, 각각의 이용가능한 부가 서비스의 시작 시간, 각각의 이용가능한 부가 서비스의 종료 시간, 각각의 이용가능한 부가 서비스의 수명 주기(lifetime), 각각의 이용가능한 부가 서비스의 획득 모드, 각각의 이용가능한 부가 서비스 위한 요청 주기, 각각의 이용가능한 부가 서비스의 우선 순위 정보, 각각의 이용가능한 부가 서비스의 설명, 각각의 이용가능한 부가 서비스의 항목(category), 이용 정보 보고 주소, 이용 정보 보고 주기, 이용 정보 획득을 위한 최소 이용 시간 중 하나 이상을 포함할 수 있다.

이용가능한 부가 서비스의 획득 경로는 IP 또는 ATSC M/H(Advanced Television Systems Committee - Mobile/Handheld)를 나타낼 수 있다. 이용가능한 부가 서비스의 획득 경로가 ATSC M/H인 경우에, 부가 서비스 정보는 주파수 정보, 채널 정보를 더 포함할 수 있다. 각각의 이용가능한 부가 서비스의 획득 모드는 Push 또는 Pull을 나타낼 수 있다.

한편, 워터마크 서버(21)는 메인 시청각 컨텐츠의 로고에 워터마크 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입할 수 있다.

예컨데, 워터마크 서버(21)는 로고의 일정 위치에 바코드를 삽입할 수 있다. 이때 로고의 일정 위치는 로고가 디스플레이되는 구역의 하단 1 라인에 해당할 수 있다. 영상 표시 장치(100)는 이와 같이 바코드가 삽입된 로고를 포함하는 메인 시청각 컨텐츠를 수신하는 경우에, 바코드를 디스플레이하지 않을 수 있다.

또한, 워터마크 서버(21)는 로고의 메타데이터 형태로 워터마크 정보를 삽입할 수 있다. 이때 로고의 형상은 유지될 수 있다.

또한, 워터마크 서버(21)는 M개의 프레임의 로고의 각각에 N 비트의 워터마크 정보를 삽입할 수 있다. 즉, 워터마크 서버(21)는 M개의 프레임을 통해 M*N개의 워터마크 정보를 삽입할 수 있다.

MVPD(30)는 워터마킹된 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 수신하고, 다중화 신호를 생성하여 방송 수신 장치(60)에 제공한다(S105). 이때 다중화 신호는 수신한 부가 서비스를 배제하거나 새로운 부가 서비스를 포함할 수 있다.

방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고 튜닝한 채널의 신호를 수신하고, 수신된 방송 신호를 복조하고 채널 복호화(channel decoding)하고 시청각 복호(AV decoding)를 수행하여 비압축 메인 시청각 컨텐츠를 생성한 후, 생성된 비압축 메인 시청각 컨텐츠를 영상 표시 장치(100)에 제공한다(S106).

한편, 컨텐츠 제공 서버(10) 또한 메인 시청각 컨텐츠를 포함하는 방송 신호를 무선 채널 등을 통해 방송한다(S107).

또한, MVPD(30)는 방송 수신 장치(60)를 통하지 않고 직접 영상 표시 장치(100)에 메인 시청각 컨텐츠를 포함하는 방송 신호를 전송할 수도 있다(S108).

영상 표시 장치(100)는 셋톱 박스(60)를 통해 비압축 메인 시청각 컨텐츠를 수신할 수 있다. 또는, 영상 표시 장치(100)는 무선 채널을 통해 방송 신호를 수신하고 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 얻을 수 있다. 또는, 영상 표시 장치(100)는 MVPD(30)로부터 방송 신호를 수신하고, 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 수신할 수도 있다. 영상 표시 장치(100)는 획득한 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 워터마크 정보를 추출한다. 워터마크 정보가 로고에 해당하면, 영상 표시 장치(100)는 복수의 로고와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 로고에 해당하는 워터마크 서버 주소를 확인한다. 워터마크 정보가 로고에 해당하는 경우에, 영상 표시 장치(100)는 로고만을 가지고서는 메인 시청각 컨텐츠를 식별할 수 없다. 또한, 워터마크 정보가 컨텐츠 정보를 포함하고 있지 않은 경우에도 영상 표시 장치(100)는 메인 시청각 컨텐츠를 식별할 수 없으나, 워터마크 정보가 컨텐츠 제공자 식별 정보나 워터마크 서버 주소를 포함할 수 있다. 워터마크 정보가 컨텐츠 제공자 식별 정보를 포함하는 경우에, 영상 표시 장치(100)는 복수의 컨텐츠 제공자 식별 정보와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 컨텐츠 제공자 식별 정보에 해당하는 워터마크 서버 주소를 확인할 수 있다. 이와 같이, 영상 표시 장치(100)는 워터마크 정보만으로 메인 시청각 컨텐츠를 식별할 수 없는 경우에, 획득한 워터마크 서버 주소에 해당하는 워터마크 서버(21)에 접속하여 제1 질의를 전송한다(S109).

워터마크 서버(21)는 제1 질의에 대한 제1 응답을 제공한다(S111). 이 제1 응답은 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다.

워터마크 정보와 제1 응답이 부가 서비스 주소를 포함하고 있지 않다면, 영상 표시 장치(100)는 부가 서비스을 획득할 수 없다. 그러나 워터마크 정보와 제1 응답이 부가 서비스 주소 제공 서버 주소를 포함할 수 있다. 이와 같이, 영상 표시 장치(100)는 워터마크 정보와 제1 응답을 통해 부가 서비스 주소나 부가 서비스를 획득하지 못하였고 부가 서비스 주소 제공 서버 주소를 획득하였다면, 영상 표시 장치(100)는 획득한 부가 서비스 주소 제공 서버 주소에 해당하는 부가 서비스 정보 제공 서버(40)에 접속하여 컨텐츠 정보를 포함하는 제2 질의를 전송한다(S119).

부가 서비스 정보 제공 서버(40)는 제2 질의의 컨텐츠 정보와 관련된 하나 이상의 이용가능한 부가 서비스를 검색한다. 이후, 부가 서비스 정보 제공 서버(40)는 제2 질의에 대한 제2 응답으로 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 영상 표시 장치(100)에 제공한다(S121).

영상 표시 장치(100)는 워터마크 정보, 제1 응답 또는 제2 응답을 통해 하나 이상의 이용가능한 부가 서비스 주소를 획득하였다면, 이 하나 이상의 이용가능한 부가 서비스 주소에 접속하여 부가 서비스를 요청하고(S123), 부가 서비스를 획득한다(S125).

도 4는 본 발명의 일 실시예에 따른 워터마크 기반의 컨텐츠 인식 타이밍을 보여준다.

도 4에 도시된 바와 같이, 방송 수신 장치(60)가 턴온되고 채널을 튜닝하고, 영상 표시 장치(100)가 외부 입력 포트(111)를 통해 방송 수신 장치(60)로부터 튜팅된 채널의 메인 시청각 컨텐츠를 수신하면, 영상 표시 장치(100)는 메인 시청각 컨텐츠의 워터마크로부터 컨텐츠 제공자 식별자(또는 방송국 식별자)를 감지할 수 있다. 이후, 영상 표시 장치(100)는 감지한 컨텐츠 제공자 식별자에 기초하여 메인 시청각 컨텐츠의 워터마크로부터 컨텐츠 정보를 감지할 수 있다.

이때, 도 4에 도시된 바와 같이, 컨텐츠 제공자 식별자의 감지가능 주기와 컨텐츠 정보의 감지가능 주기는 다를 수 있다. 특히, 컨텐츠 제공자 식별자의 감지가능 주기는 컨텐츠 정보의 감지가능 주기보다 짧을 수 있다. 이를 통해, 영상 표시 장치(100)는 필요한 정보만을 감지하기 위한 효율적인 구성을 가질 수 있다.

도 5는 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.

도 5에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 핑거프린트 서버(22)를 더 포함한다.

도 5에 도시된 바와 같은 핑거프린트 서버(22)는 메인 시청각 컨텐츠에 변형을 가하지는 않으며 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하여 저장한다. 이후에 핑거프린트 서버(22)는 영상 표시 장치(100)로부터의 특징 정보를 수신하면, 수신한 특징 정보에 해당하는 시청각 컨텐츠의 식별자와 시간 정보를 제공한다.

도 6은 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.

먼저, 컨텐츠 제공 서버(10)는 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 전송한다(S201).

핑거프린트 서버(22)는 컨텐츠 제공 서버(10)가 제공하는 방송 신호를 수신하고, 메인 시청각 컨텐츠의 복수의 프레임 구간 또는 복수의 오디오 구간으로부터 복수의 특징 정보를 추출하며, 복수의 특징 정보에 각각 대응하는 복수의 질의 결과를 위한 데이터베이스를 구축한다(S203). 질의 결과는 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다.

MVPD(30)는 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 수신하고, 다중화 신호를 생성하여 방송 수신 장치(60)에 제공한다(S205). 이때 다중화 신호는 수신한 부가 서비스를 배제하거나 새로운 부가 서비스를 포함할 수 있다.

방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고 튜닝한 채널의 신호를 수신하고, 수신된 방송 신호를 복조하고 채널 복호화(channel decoding)하고 시청각 복호(AV decoding)를 수행하여 비압축 메인 시청각 컨텐츠를 생성한 후, 생성된 비압축 메인 시청각 컨텐츠를 영상 표시 장치(100)에 제공한다(S206).

한편, 컨텐츠 제공 서버(10) 또한 메인 시청각 컨텐츠를 포함하는 방송 신호를 무선 채널 등을 통해 방송한다(S207).

또한, MVPD(30)는 방송 수신 장치(60)를 통하지 않고 직접 영상 표시 장치(100)에 메인 시청각 컨텐츠를 포함하는 신호를 전송할 수도 있다(S208).

영상 표시 장치(100)는 셋톱 박스(60)를 통해 비압축 메인 시청각 컨텐츠를 수신할 수 있다. 또는, 영상 표시 장치(100)는 무선 채널을 통해 방송 신호를 수신하고 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 얻을 수 있다. 또는, 영상 표시 장치(100)는 MVPD(30)로부터 방송 신호를 수신하고, 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 수신할 수도 있다. 영상 표시 장치(100)는 획득한 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출한다(S213).

영상 표시 장치(100)는 미리 설정된 핑거프린트 서버 주소에 해당하는 핑거프린트 서버(22)에 접속하여 추출한 특징 정보를 포함하는 제1 질의를 전송한다(S215).

핑거프린트 서버(22)는 제1 질의에 대한 제1 응답으로서 질의 결과를 제공한다(S217). 만약 제1 응답이 실패에 해당한다면, 영상 표시 장치(100)는 또 다른 핑거프린트 서버 주소에 해당하는 핑거프린트 서버(22)에 접속하여 추출한 특징 정보를 포함하는 제1 질의를 전송할 수 있다.

핑거프린트 서버(22)는 질의 결과로서 XML (Extensible Markup Language) 문서를 제공할 수 있다. 질의 결과를 담는 XML 문서의 예를 도 7과 표 1을 참고하여 설명한다.

도 7은 본 발명의 일 실시예에 따른 질의 결과를 담는 ACR-Resulttype의 XML 스키마 다이어그램(schema diagram)을 보여준다.

도 7에 도시된 바와 같이, 질의 결과를 담는 ACR-Resulttype은 ResultCode 속성과 ContentID, NTPTimestamp, SignalingChannelInformation, ServiceInformation 엘리먼트를 갖는다.

예컨데, ResultCode 속성이 200의 값을 가지면, 이는 질의 결과가 성공임을 의미할 수 있다. ResultCode 속성이 404의 값을 가지면, 이는 질의 결과가 실패임을 의미할 수 있다.

SignalingChannelInformation 엘리먼트는 SignalingChannelURL 엘리먼트를 갖고, SignalingChannelURL 엘리먼트는 UpdateMode, PollingCycle 속성을 갖는다. UpdateMode 속성은 Pull 값 또는 Push 값을 가질 수 있다.

ServiceInformation 엘리먼트는 ServiceName, ServiceLogo, ServiceDescription 엘리먼트를 갖는다.

표 1은 이와 같은 질의 결과를 담는 ACR-ResultType의 XML Schema를 보여준다.

(표 1)

ContentID 엘리먼트로서, 아래의 표 2에서 보여주는 바와 같은 ATSC 컨텐츠 식별자(ATSC content identifier)가 이용될 수 있다.

(표 2)

표 2에서 보여지는 바와 같이, ATSC content identifier는 TSID와 하우스 번호로 구성된 구조를 가진다.

16 비트 부호없는 정수 TSID는 트랜스포트 스트림 식별자(transport stream identifier)를 담는다(carry).

5 비트 부호 없는 정수 end_of_day는 방송이 끝나서 content_id 값이 재사용될 수 있는 날의 시(hour)로 셋팅된다.

9 비트 부호 없는 정수 unique_for는 content_id 값이 재사용될 수 없는 날의 수(the number of day)로 설정된다.

content_id는 컨텐츠 식별자를 나타낸다. 영상 표시 장치(100)는 매일 end_of_day에 해당하는 시간에서 unique_for를 1씩 감소시키고, unique_for가 0이 되지 않았다면 content_id가 유일한 것이라고 간주할 수 있다.

한편, ContentID 엘리먼트로서, 아래에서 설명하는 바와 같은 ATSC-M/H service를 위한 글로벌 서비스 식별자(Global Service Identifier)가 이용될 수 있다.

글로벌 서비스 식별자는 다음과 같은 폼을 갖는다.

- urn:oma:bcast:iauth:atsc:service:<region>:<xsid>:<serviceid>

여기에서 <region>는 ISO 639-2에 의해 규정되는 바와 같은 2개의 문자로 된 국제 국가 코드이다. 로컬 서비스(local service)를 위한 <xsid> 는 <region>에서 정의하는 바와 같은 TSID의 십진수이고, 지역 서비스(regional service) (major > 69)를 위한 <xsid> 는 "0"이다. <serviceid> 는 <major>나 <minor>로 정의된다. <major> 는 메이저 채널 번호(Major Channel number)를 나타내고, <minor> 마이너 채널 번호(Minor Channel Number)를 나타낸다.

글로벌 서비스 식별자의 예는 아래와 같다.

- urn:oma:bcast:iauth:atsc:service:us:1234:5.1

- urn:oma:bcast:iauth:atsc:service:us:0:100.200

한편, ContentID 엘리먼트로서, 아래에서 설명하는 바와 같은 ATSC 컨텐츠 식별자가 이용될 수 있다.

ATSC 컨텐츠 식별자는 다음과 같은 폼을 갖는다.

urn:oma:bcast:iauth:atsc:content:<region>:<xsidz>:<contentid>:<unique_for>:<end_of_day>

여기에서 <region>는 ISO 639-2에 의해 규정되는 바와 같은 2개의 문자로 된 국제 국가 코드이다. 로컬 서비스(local service)를 위한 <xsid> 는 <region>에서 정의하는 바와 같은 TSID의 십진수이고, "."<serviceid>가 뒤따를 수 있다. 지역 서비스(regional service) (major > 69)를 위한 <xsid> 는 <serviceid>이다. <content_id> 는 표 2에 정의되어 있는 content_id field의 base64 부호이고, <unique_for> 는 표 2에 정의되어 있는 unique_for field의 십진수 부호이며, <end_of_day> 는 표 2에 정의되어 있는 end_of_day field의 십진수 부호이다.

이하에서는 다시 도 6을 설명한다.

질의 결과가 부가 서비스 주소나 부가 서비스를 포함하고 있지 않고 부가 서비스 주소 제공 서버 주소를 포함한다면, 영상 표시 장치(100)는 획득한 부가 서비스 주소 제공 서버 주소에 해당하는 부가 서비스 정보 제공 서버(40)에 접속하여 컨텐츠 정보를 포함하는 제2 질의를 전송한다(S219).

부가 서비스 정보 제공 서버(40)는 제2 질의의 컨텐츠 정보와 관련된 하나 이상의 이용가능한 부가 서비스를 검색한다. 이후, 부가 서비스 정보 제공 서버(40)는 제2 질의에 대한 제2 응답으로 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 영상 표시 장치(100)에 제공한다(S221).

영상 표시 장치(100)는 제1 응답 또는 제2 응답을 통해 하나 이상의 이용가능한 부가 서비스 주소를 획득하였다면, 이 하나 이상의 이용가능한 부가 서비스 주소에 접속하여 부가 서비스를 요청하고(S223), 부가 서비스를 획득한다(S225).

UpdateMode 속성이 Pull 값을 가지는 경우, 영상 표시 장치(100)는 SignalingChannelURL을 통해 HTTP request를 부가서비스 제공 서버(50)에 전송하여 이에 대한 응답으로 PSIP 바이너리 스트림을 포함하는 HTTP response를 부가서비스 제공 서버(50)로부터 수신한다. 이 경우 영상 표시 장치(100)는 PollingCycle 속성으로 지정되는 Polling 주기에 따라 HTTP request를 전송할 수 있다. 또한, SignalingChannelURL 엘리먼트는 업데이트 시간 속성을 가질 수도 있다. 이 경우, 영상 표시 장치(100)는 업데이트 시간 속성으로 지정되는 업데이트 시간에서 HTTP request를 전송할 수 있다.

UpdateMode 속성이 Push 값을 가지는 경우, 영상 표시 장치(100)는 XMLHTTPRequest API 를 활용하여 비동기적으로 서버로부터 업데이트를 수신할 수 있다. 영상 표시 장치(100)가 서버로 XMLHTTPRequest object를 통해 비동기적인 request를 한 후에 서버가 시그널링 정보에 변경이 있을 경우에 이 채널을 통해 response로 시그널링 정보를 제공하는 방안이다. 세션의 대기 시간에 제한이 있을 경우에는 session timeout respond를 발생시키고, 바로 수신기는 이를 인지하여 재요청하여서 수신기와 서버간의 시그널링 채널을 항시 유지할 수 있다.

도 8은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.

도 8에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 워터마크 서버(21)와 핑거프린트 서버(22)를 더 포함한다.

도 8에 도시된 바와 같은 워터마크 서버(21)는 메인 시청각 컨텐츠에 컨텐츠 제공자 식별 정보를 삽입한다. 워터마크 서버(21)는 로고와 같이 보이는 워터마크로서 컨텐츠 제공자 식별 정보를 메인 시청각 컨텐츠에 삽입할 수도 있고, 보이지 않는 워터마크로서 컨텐츠 제공자 식별 정보를 메인 시청각 컨텐츠에 삽입할 수도 있다.

핑거프린트 서버(22)는 메인 시청각 컨텐츠에 변형을 가하지는 않으며 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하여 저장한다. 이후에 핑거프린트 서버(22)는 영상 표시 장치(100)로부터의 특징 정보를 수신하면, 수신한 특징 정보에 해당하는 시청각 컨텐츠의 식별자와 시간 정보를 제공한다.

도 9은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.

먼저, 컨텐츠 제공 서버(10)는 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 전송한다(S301).

워터마크 서버(21)는 컨텐츠 제공 서버(10)가 제공하는 방송 신호를 수신하고, 메인 시청각 컨텐츠에 변형을 가하여 메인 시청각 컨텐츠에 로고와 같은 보이는 워터마크(visible watermark)를 삽입하거나, 메인 시청각 컨텐츠에 워터마크 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입하고, 워터마킹된 메인 시청각 컨텐츠와 부가 서비스를 MVPD(30)에 제공한다(S303). 보이지 않는 워터마크를 통해 삽입되는 워터마크 정보는 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다. 컨텐츠 정보와 부가 서비스 정보는 앞서 설명한 바와 같다.

MVPD(30)는 워터마킹된 메인 시청각 컨텐츠와 부가 서비스를 포함하는 방송 신호를 수신하고, 다중화 신호를 생성하여 방송 수신 장치(60)에 제공한다(S305). 이때 다중화 신호는 수신한 부가 서비스를 배제하거나 새로운 부가 서비스를 포함할 수 있다.

방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고 튜닝한 채널의 신호를 수신하고, 수신된 방송 신호를 복조하고 채널 복호화(channel decoding)하고 시청각 복호(AV decoding)를 수행하여 비압축 메인 시청각 컨텐츠를 생성한 후, 생성된 비압축 메인 시청각 컨텐츠를 영상 표시 장치(100)에 제공한다(S306).

한편, 컨텐츠 제공 서버(10) 또한 메인 시청각 컨텐츠를 포함하는 방송 신호를 무선 채널 등을 통해 방송한다(S307).

또한, MVPD(30)는 방송 수신 장치(60)를 통하지 않고 직접 영상 표시 장치(100)에 메인 시청각 컨텐츠를 포함하는 신호를 전송할 수도 있다(S308).

영상 표시 장치(100)는 셋톱 박스(60)를 통해 비압축 메인 시청각 컨텐츠를 수신할 수 있다. 또는, 영상 표시 장치(100)는 무선 채널을 통해 방송 신호를 수신하고 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 얻을 수 있다. 또는, 영상 표시 장치(100)는 MVPD(30)로부터 방송 신호를 수신하고, 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐츠를 수신할 수도 있다. 영상 표시 장치(100)는 획득한 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 워터마크 정보를 추출한다. 워터마크 정보가 로고에 해당하면, 영상 표시 장치(100)는 복수의 로고와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 로고에 해당하는 워터마크 서버 주소를 확인한다. 워터마크 정보가 로고에 해당하는 경우에, 영상 표시 장치(100)는 로고만을 가지고서는 메인 시청각 컨텐츠를 식별할 수 없다. 또한, 워터마크 정보가 컨텐츠 정보를 포함하고 있지 않은 경우에도 영상 표시 장치(100)는 메인 시청각 컨텐츠를 식별할 수 없으나, 워터마크 정보가 컨텐츠 제공자 식별 정보나 워터마크 서버 주소를 포함할 수 있다. 워터마크 정보가 컨텐츠 제공자 식별 정보를 포함하는 경우에, 영상 표시 장치(100)는 복수의 컨텐츠 제공자 식별 정보와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 컨텐츠 제공자 식별 정보에 해당하는 워터마크 서버 주소를 확인할 수 있다. 이와 같이, 영상 표시 장치(100)는 워터마크 정보만으로 메인 시청각 컨텐츠를 식별할 수 없는 경우에, 획득한 워터마크 서버 주소에 해당하는 워터마크 서버(21)에 접속하여 제1 질의를 전송한다(S309).

워터마크 서버(21)는 제1 질의에 대한 제1 응답을 제공한다(S311). 이 제1 응답은 핑거프린트 서버 주소, 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다. 컨텐츠 정보와 부가 서비스 정보는 앞서 설명한 바와 같다.

워터마크 정보와 제1 응답이 핑거프린트 서버 주소를 포함하고 있다면, 영상 표시 장치(100)는 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출한다(S313).

영상 표시 장치(100)는 제1 응답 내의 핑거프린트 서버 주소에 해당하는 핑거프린트 서버(22)에 접속하여 추출한 특징 정보를 포함하는 제2 질의를 전송한다(S315).

핑거프린트 서버(22)는 제2 질의에 대한 제2 응답으로서 질의 결과를 제공한다(S317).

질의 결과가 부가 서비스 주소나 부가 서비스를 포함하고 있지 않고 부가 서비스 주소 제공 서버 주소를 포함한다면, 영상 표시 장치(100)는 획득한 부가 서비스 주소 제공 서버 주소에 해당하는 부가 서비스 정보 제공 서버(40)에 접속하여 컨텐츠 정보를 포함하는 제3 질의를 전송한다(S319).

부가 서비스 정보 제공 서버(40)는 제3 질의의 컨텐츠 정보와 관련된 하나 이상의 이용가능한 부가 서비스를 검색한다. 이후, 부가 서비스 정보 제공 서버(40)는 제3 질의에 대한 제3 응답으로 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 영상 표시 장치(100)에 제공한다(S321).

영상 표시 장치(100)는 제1 응답, 제2 응답, 또는 제3 응답을 통해 하나 이상의 이용가능한 부가 서비스 주소를 획득하였다면, 이 하나 이상의 이용가능한 부가 서비스 주소에 접속하여 부가 서비스를 요청하고(S323), 부가 서비스를 획득한다(S325).

다음은 도 10을 참고하여, 본 발명의 실시예에 따른 영상 표시 장치(100)를 설명한다.

도 10은 본 발명의 실시예에 따른 영상 표시 장치의 블록도이다.

도 10에 도시된 바와 같이, 본 발명의 실시예에 따른 영상 표시 장치(100)는 방송 신호 수신부(101), 복조부(103), 채널 복호부(105), 역다중화부(107), 시청각 복호부(109), 외부 입력 포트(111), 재생 제어부(113), 재생 장치(120), 부가 서비스 관리부(130), 데이터 송수신부(141), 메모리(150)를 포함한다.

방송 신호 수신부(101)는 컨텐츠 제공 서버(10) 또는 MVPD(30)로부터 방송 신호를 수신한다.

복조부(103)는 수신한 방송 신호를 복조하여 복조된 신호를 생성한다.

채널 복호부(105)는 복조된 신호를 채널 복호하여 채널 복호된 데이터를 생성한다.

역다중화부(107)는 채널 복호된 데이터로부터 메인 시청각 컨텐츠와 부가 서비스를 분리한다. 분리된 부가 서비스는 부가 서비스 저장부(152)에 저장된다.

시청각 복호부(109)는 분리된 메인 시청각 컨텐츠를 시청각 복호(AV decoding)하여 비압축 메인 시청각 컨텐츠를 생성한다.

한편, 외부 입력 포트(111)는 방송 수신 장치(60), 디브이디(digital versatile disk, DVD) 플레이어, 블루레이 디스크 (Blu-ray disc) 플레이어 등으로부터 비압축 메인 시청각 컨텐츠를 수신한다. 외부 입력 포트(111)는 DSUB 포트, HDMI (High Definition Multimedia Interface) 포트, DVI (Digital Visual Interface) 포트, 컴포지트(composite) 포트, 컴포넌트(component) 포트, S-Video 포트 중 하나 이상을 포함할 수 있다.

재생 제어부(113)는 시청각 복호부(109)가 생성하는 비압축 메인 시청각 컨텐츠 또는 외부 입력 포트(111)로부터 수신한 비압축 메인 시청각 컨텐츠 중 적어도 하나를 사용자 선택에 의해 재생 장치(120)에 재생한다.

재생 장치(120)는 디스플레이부(121)와 스피커(123)를 포함한다. 디스플레이부(121)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.

부가 서비스 관리부(130)는 메인 시청각 컨텐츠의 컨텐츠 정보를 획득하고, 획득된 컨텐츠 정보에 기초하여 이용가능한 부가 서비스를 획득한다. 특히, 앞서 설명한 바와 같이 부가 서비스 관리부(130)는 비압축 메인 시청각 컨텐츠의 일부 프레임 또는 일부 구간의 오디오 샘플에 기초하여 메인 시청각 컨텐츠의 식별 정보를 획득할 수 있는데, 본 명세서에서는 이를 자동 컨텐츠 인식(automatic contents recognition, ACR)이라 칭하기도 한다.

데이터 송수신부(141)는 ATSC-M/H (Advanced Television Systems Committee - Mobile/Handheld) 채널 송수신부(141a)와 IP 송수신부(141b)를 포함할 수 있다.

메모리(150)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상 표시 장치(100)는 인터넷(internet)상에서 상기 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.

메모리(150)는 컨텐츠 정보 저장부(151), 부가 서비스 저장부(152), 로고 저장부(153), 설정 정보 저장부(154), 북마크 저장부(155), 사용자 정보 저장부(214)(156), 이용 정보 저장부(157)를 포함할 수 있다.

컨텐츠 정보 저장부(151)는 복수의 특징 정보에 대응하는 복수의 컨텐츠 정보를 저장한다.

부가 서비스 저장부(152)는 복수의 특징 정보에 대응하는 복수의 부가 서비스를 저장할 수도 있고, 복수의 컨텐츠 정보에 대응하는 복수의 부가 서비스를 저장할 수도 있다.

로고 저장부(153)는 복수의 로고를 저장한다. 또, 로고 저장부는 이 복수의 로고에 대응하는 컨텐츠 제공자 식별자 또는 복수의 로고에 대응하는 워터마크 서버 주소를 더 저장할 수도 있다.

설정 정보 저장부(154)는 ACR을 위한 설정 정보를 저장한다.

북마크 저장부(155)는 북마크를 저장한다.

사용자 정보 저장부(214)(156)는 사용자 정보를 저장한다. 사용자 정보는 하나 이상의 서비스를 위한 하나 이상의 계정 정보, 지역 정보, 가족 구성원 정보, 선호 장르 정보, 영상 표시 장치 정보, 이용 정보 제공 범위 중 하나 이상을 포함할 수 있다. 하나 이상의 계정 정보는 이용 정보 측정 서버를 위한 계정 정보, 트위터(twitter), 페이스북(facebook)과 같은 소셜 네트워크 서비스(social network service)의 계정 정보를 포함할 수 있다. 지역 정보는 주소 정보, 우편 번호를 포함할 수 있다. 가족 구성원 정보는 가족 구성원의 수, 각 구성원의 나이, 각 구성원의 성별, 각 구성원의 종교, 각 구성원의 직업 등을 포함할 수 있다. 선호 장르 정보는 스포츠, 영화, 드라마, 교육, 뉴스, 오락, 기타 장르 중에서 하나 이상으로 설정될 수 있다. 영상 표시 장치 정보는 영상 표시 장치의 종류, 제조사, 펌웨어 버전, 해상도, 모델명, OS, 브라우저, 저장 장치 유무, 저장 장치의 용량, 네트워크 속도에 대한 정보를 포함할 수 있다. 이용 정보 제공 범위가 설정되면, 영상 표시 장치(100)는 설정된 범위 내에서 메인 시청각 컨텐츠 시청 정보와 부가 서비스 이용 정보를 수집하고 보고할 수 있다. 이용 정보 제공 범위는 가상 채널 각각에 대해 설정될 수 있다. 또한, 이용 정보 측정 허용 범위는 물리 채널 전체에 대해 설정될 수도 있다.

이용 정보 저장부(157)는 영상 표시 장치(100)에 의해 수집되는 메인 시청각 컨텐츠 시청 정보와 부가 서비스 사용 정보를 저장한다. 또한, 영상 표시 장치(100)는 수집한 메인 시청각 컨텐츠 시청 정보와 수집한 부가 서비스 사용 정보에 기초하여 서비스 이용 패턴을 분석하고, 분석된 서비스 이용 패턴을 이용 정보 저장부(157)에 저장할 수 있다.

부가 서비스 관리부(130)는 핑거프린트 서버(22) 또는 컨텐츠 정보 저장부(151)로부터 메인 시청각 컨텐츠의 컨텐츠 정보를 획득할 수 있다. 컨텐츠 정보 저장부(151)에 추출한 특징 정보에 해당하는 컨텐츠 정보가 없거나 충분한 컨텐츠 정보가 없는 경우, 부가 서비스 관리부(130)는 데이터 송수신부(141)를 통해 추가 컨텐츠 정보를 수신할 수 있다. 또한, 부가 서비스 관리부(130)는 지속적으로 컨텐츠 정보를 업데이트할 수 있다.

부가 서비스 관리부(130)는 부가 서비스 제공 서버(50) 또는 부가 서비스 저장부(153)로부터 이용가능한 부가 서비스를 획득할 수 있다. 부가 서비스 저장부(153)에 부가 서비스가 없거나 충분한 부가 서비스가 없는 경우, 부가 서비스 관리부(130)는 데이터 송수신부(141)를 통해 부가 서비스를 업데이트할 수 있다. 또한, 부가 서비스 관리부(130)는 지속적으로 부가 서비스를 업데이트할 수 있다.

부가 서비스 관리부(130)는 메인 시청각 컨텐츠로부터 로고를 추출하고, 로고 저장부(155)에 질의하여 추출한 로고에 대응하는 컨텐츠 제공자 식별자 또는 워터마크 서버 주소를 획득할 수 있다. 로고 저장부(155)에 추출한 로고와 일치하는 로고가 없거나 충분한 로고가 없는 경우, 부가 서비스 관리부(130)는 데이터 송수신부(141)를 통해 추가 로고를 수신할 수 있다. 또한, 부가 서비스 관리부(130)는 지속적으로 로고를 업데이트할 수 있다.

부가 서비스 관리부(130)는 메인 시청각 컨텐츠로부터 추출한 로고와 로고 저장부(155) 내의 복수의 로고와의 비교를 수행하는데 연산의 부담을 줄이기 위한 다양한 방법을 수행할 수 있다.

예컨데, 부가 서비스 관리부(130)는 색깔 특성에 기초하여 비교를 수행할 수 있다. 즉, 부가 서비스 관리부(130)는 추출한 로고의 색깔 특성과 로고 저장부(155) 내의 로고의 색깔 특성을 비교하여 일치 여부를 판단할 수 있다.

또, 부가 서비스 관리부(130)는 문자 인식에 기초하여 비교를 수행할 수 있다. 즉, 부가 서비스 관리부(130)는 추출한 로고로부터 인식되는 문자와 로고 저장부(155) 내의 로고로부터 인식되는 문자를 비교하여 일치 여부를 판단할 수 있다.

뿐만 아니라, 부가 서비스 관리부(130)는 로고의 윤곽에 대한 형상에 기초하여 비교를 수행할 수 있다. 즉, 부가 서비스 관리부(130)는 추출한 로고의 윤곽 형상과 로고 저장부(155) 내의 로고의 윤곽 형상을 비교하여 일치 여부를 판단할 수 있다.

도 11은 본 발명의 실시 예에 따른 디지털 방송 시스템을 나타내는 도면이다.

구체적으로, 개인화 서비스를 위한 디지털 방송 수신기를 포함하는 개인화 방송 시스템을 도시한다. 본 발명의 실시 예에 따르면, 사용자 정보는 예를 들어, 사용자 프로필(user profile), 통계자료(demographics) 및 흥미(interests) 정보를 포함한다. 이하, 개인화 방송 시스템의 각 구성을 설명한다.

사용자 프로필, 통계 자료 및 흥미는 설문지의 응답을 통해 표현된다. 특정 사용자에 의해 제공된 설문지와 응답이 요약된 데이터 구조를 PDI Questionnaire 또는 PDI 테이블이라고 한다. PDI 테이블에서 질문에 해당하는 부분은 PDI Question 또는 PDI-Q라고 하며, 응답에 해당하는 부분은 PDI-A라고 한다. 필터 기준의 세트는 PDI-FC라고 한다.

ATSC 2.0/ATSC 3.0에서 이용가능한 수신기는 설문지의 질문에 대응하는 응답(PDI-A instance)을 생성하는 기능을 포함한다. PDI-A 생성 기능은 PDI-Q 인스턴스에 대한 입력으로 사용된다. 수신기는 또한 PDI-FC에 PDI-A를 비교하여 다운로드 및 사용에 적합한 컨텐트를 결정하는 필터 기능을 제공한다.

도 11에 도시된 바와 같이, 개인화 방송 시스템은 컨텐트 제공자(300)) 및 수신기(200)를 포함한다. 본 발명의 일 실시 예에 따르면, 수신기(200)는 PDI 엔진(203), 필터링 엔진(201), PDI 저장부(208), 컨텐트 저장부(207), 컨텐트 모듈(206) 및 사용자 인터페이스(User interface) 모듈(209)을 포함할 수 있다.

본 발명의 일 실시 예에 따른 컨텐트 제공자(300)는 컨텐트, PDI 설문지(301) 및 필터링 기준(202)을 수신기(200)에 전송할 수 있다. 설문지 및 특정 사용자에 의한 응답이 요약된 데이터 구조를 PDI 설문지(PDI Questionnaire)(301)라고 할 수 있다. 본 발명의 일 실시 예에 따르면 PDI 설문지(301)는 사용자의 프로필, 통계자료 및 흥미에 관한 정보를 포함할 수 있다.

수신기(200)는 컨텐트 제공자(300)로부터 수신한 컨텐트, PDI 설문지(301) 및 필터 기준(202)을 처리할 수 있다. 이하, 디지털 방송 시스템을 수신기(200)에 포함된 모듈들의 동작을 중심으로 설명한다.

본 발명의 일 실시 예에 따르면 PDI 엔진(203)은 컨텐트 제공자(300)로부터 PDI 설문지(301)를 수신할 수 있다. PDI 엔진(203)은 수신된 PDI 설문지(301)를 포함하는 PDI 질문을 UI 모듈(209)로 전송할 수 있다. PDI 질문에 대응하는 사용자 입력이 있을 때, PDI엔진(203)은 사용자 응답 및 다른 정보를 수신할 수 있다. 그리고, PDI 엔진(203)은 PDI 질문 및 PDI 응답을 PDI 데이터(204) 생성을 통해 개인화 서비스를 지원하기 위해 처리할 수 있다. PDI 데이터(204)는 상술한 PDI 질문 및 PDI 응답을 포함할 수 있다. 그러므로 PDI 설문지(301)에 대한 PDI 응답은 사용자 프로필, 통계자료 및 흥미를 나타낼 수 있다.

추가적으로, PDI 엔진(203)은 PDI 응답을 수신한 PDI 데이터(204)로 업데이트 될 수도 있다. 구체적으로, PDI 엔진(203)은 PDI 데이터(204)를 PDI 응답의 ID를 사용하여 삭제, 추가 및 수정을 할 수 있다. 또한, 다른 모듈이 PDI 엔진(203)에게 PDI 데이터(204)를 전송하는 것을 요구할 때, PDI 엔진(203)은 PDI 데이터(204)를 해당 모듈에 전송할 수 있다.

본 발명의 일 실시 예에 따른 필터링 엔진(201)은 PDI 데이터(204) 및 필터링 기준(202)에 따라 컨텐트를 필터링할 수 있다. 필터링 기준(202)은 PDI 데이터(204)를 통해 사용자에게 적절한 컨텐트만을 필터링 하기위한 하나의 필터링 기준 세트를 말한다. 구체적으로 필터링 엔진(201)은 PDI 엔진(203)으로부터 PDI 데이터(204)를 수신하고, 컨텐트 제공자(300)로부터 컨텐트 및 필터 기준(202)을 수신할 수 있다.

또한, 컨텐트 제공자(300)는 선언적인 컨텐트(Declarative content, 이하 컨텐트)와 관련된 파라미터를 전송할 때, 컨텐트와 관련된 필터링 기준(202)을 함께 전송할 수 있다. 그리고, 필터링 엔진(201)은 필터링 기준(202)과 PDI 데이터(204)를 비교하고, 비교 결과에 기초하여 컨텐트를 필터링 하고 다운로드 한다. 다운로드된 컨텐트는 컨텐트 저장부(207)에 저장될 수 있다.

UI 모듈(209)은 PDI 엔진(203)으로부터 수신한 PDI 설문지 및 사용자로부터 PDI 질문에 대응하여 수신한 PDI 응답을 표시한다. 사용자는 원격조정장치를 통해 수신기(200)에 표시된 PDI 질문에 대한 응답을 전송할 수 있다. UI 모듈(209)은 PDI 엔진(203)으로 PDI 응답을 전송할 수 있다.

컨텐트 모듈(206)은 PDI 엔진(203)에 PDI 데이터(204)를 얻기위해 접근할 수 있다. 도 11에 도시된 바와 같이, 컨텐트 모듈(206)은 컨텐트 제공자(300)로부터 제공받은 컨텐트를 수신할 수 있다. 컨텐트는 수신기(200)에 의해 실행되는 어플리케이션에 연관된 컨텐트일 수 있으며, 선언적인 오브젝트(Declarative object), 예를 들면 TDO(Triggered Declarative Object)를 포함할 수 있다.

도 11에는 도시되지 않았지만, 컨텐트 모듈(206)은 PDI 저장부(208)에 PDI 질문 및 PDI 응답을 획득하기 위해 접근할 수 있다. 이 경우, 컨텐트 모듈(206)은 API(Application Programming Interface)를 이용할 수 있다. 구체적으로 컨텐트 모듈(206)은 적어도 하나의 PDI 질문을 획득하기 위해 API를 통해 PDI 저장부(208)를 검색할 수 있다. 그리고 PDI 저장부(208)로 PDI 응답을 UI 모듈(209)을 통해 전송할 수 있다.

PDI 저장부(208)는 PDI 질문 및 PDI 응답를 포함하는 PDI 데이터를 저장한다.

컨텐트 저장부(207)는 PDI 설문지를 기초로 만들어진 필터 기준에 따라 필터링된 컨텐트를 저장한다.

도 12은 PDI 인터페이스의 구성을 나타내는 블록도이다.

일 실시 예에서 수신기(200)는 도 12의 왼쪽에 도시된 구성일 수 있다. 수신기(200)는 설문지의 질문에 대한 응답을 만드는 기능을 포함할 수 있다. PDI-generation 기능은 PDI-Q을 입력으로 PDI-A을 출력으로 생산할 수 있다. PDI-Q 및 PDI-A 는 수신기(200)의 PDI 저장부(208)에 저장될 수 있다. 수신기(200)는 또한 PDI-A와 PDI-FC를 비교하여 사용 및 다운로드 할 컨텐트를 결정하는 필터링 기능을 제공할 수 있다.

컨텐트 제공자 또는 방송국(300)은 도 12의 오른쪽에 도시된 바와 같이, PDI 테이블을 분배하고 보유하는 기능을 포함할 수 있다. 컨텐트와 함께 컨텐트 메타데이터도 생산될 수 있다. 메타데이터는 PDI 테이블내의 PDI 질문에 기초하는 PDI-FC를 포함할 수 있다.

도 13은 본 발명의 일 실시 예에 따른 개인화 서비스의 구성을 나타내는 블록도이다.

도 13에 도시된 바와 같이 본 발명의 일 실시 예에 따른 개인화 서비스는 컨텐트 제공자(또는 방송사)(300), 수신기(200), 제2 디바이스(400), PDI 저장 클라우드(500)을 포함할 수 있다.

컨텐트 제공자(300)는 앞서 설명한 바와 같이 컨텐트를 수신기(200)로 전송할 수 있으며, 개인화 서비스를 위한 PDI 설문지(301)를 제공할 수 있다. 또한 컨텐트 제공자(300)는 메인 컨텐트와 함께 메타데이터를 수신기(200)로 전송할 수 있다. 메타데이터는 메인 컨텐트에 연관된 부가 서비스, 자막, 컨텐트 타이틀, 컨텐트 썸네일 등을 포함할 수 있다.

수신기(200)는 컨텐트 제공자(300)로부터 방송신호를 수신하여 시청각 컨텐트를 출력할 수 있다. 일 실시 예에서 수신기(200)는 셋톱박스로부터 수신한 비압축 시청각 컨텐트를 출력할 수도 있다.

수신기(200)는 필터링 엔진(201), PDI 엔진(203), 컨텐트 저장부(207), PDI 저장부(208), 외부 디바이스 모듈(210)을 포함할 수 있다. 필터링 엔진(201), PDI 엔진(203), 컨텐트 저장부(207), PDI 저장부(208)의 경우 앞서 기 설명한바 여기에서 자세한 설명은 생략한다.

외부 디바이스 모듈(210)은 수신기(200)와 제2 디바이스(400)을 연결하는 역할을 한다. 구체적으로 수신기(200)가 컨텐트 제공자(300)로부터 수신한 PDI 데이터를 제2 디바이스(400)에 전달하고, 다시, 제2 디바이스(400)로부터 이에 대응하는 PDI 데이터를 수신하여 수신기(200)내 PDI 엔진(203) 등에 전달한다. 외부 디바이스 모듈(210)은 제2 디바이스(400)과 유선 또는 무선으로 연결될 수 있다.

제2 디바이스(400)는 디스플레이 기능을 포함하는 전자 디바이스일 수 있다. 제2 디바이스(400)는 적어도 하나 이상의 전자 디바이스를 포함할 수 있다. 도 13에 도시된 바와 같이 제1 외부 디바이스(401), 제2 외부 디바이스(402), 제3 외부 디바이스(403)을 포함할 수도 있다. 제1 외부 디바이스(401), 제2 외부 디바이스(402), 제3 외부 디바이스(403)은 각각 별도의 디바이스일 수 있으며, 각각 수신기(200)와 별도로 연결될 수 있다. 또한 제1 외부 디바이스(401), 제2 외부 디바이스(402), 제3 외부 디바이스(403)은 각각 다른 종류의 전자 디바이스일 수 있다. 예를 들면, 제1 외부 디바이스(401)이 스마트폰이고, 제2, 제3 외부 디바이스(402, 403)은 태플릿 PC일 수 있다.

제2 디바이스(400)는 수신기(200)로부터 PDI 설문지를 수신하여 출력할 수 있다. PDI 설문지를 수신기(200)에 출력할 수도 있으나, 수신기(200)에 PDI 설문지를 출력하면 시청자가 메인 컨텐트의 시청에 방해를 받을 수 있는바, 제2 디바이스(400)가 수신기(200)를 대신하여 PDI 설문지를 출력해 메인 컨텐트의 시청 방해를 최소화 할 수 있다.

또한, 기존의 수신기(200)와 함께 사용하는 원격조정장치는 구체적인 화면 제어에는 한계가 있는바, 상대적으로 조작이 쉬운 제2 디바이스(400)를 통해 PDI 설문지에 대한 응답을 사용자가 할 수 있다. 예를 들면, 스마트폰에 PDI 설문지를 표시하면, 사용자는 PDI 설문지의 질문 항목에 대한 답을 스마트폰의 터치 또는 문자 입력을 통해 입력할 수 있다. 스마트폰의 경우 다양한 어플리케이션을 실행하기 위해 영상표시장치에 비해 상대적으로 조작하기 용이한 인터페이스를 가지고 있는바, 이러한 장점을 PDI 데이터 수집에 활용할 수 있다.

PDI 데이터 저장 클라우드(500)는 PDI 데이터를 저장할 수 있다. 구체적으로 수신기(200)내 PDI 저장부(208)가 아닌 공유 저장장치일 수 있다. 수신기(200)는 PDI 데이터 저장 클라우드(500)를 통해 PDI 데이터를 네트워크를 통해 수신할 수도 있다. 따라서, 수신기(200)에 기 저장된 PDI 데이터외 다른 수신기로부터 수집한 PDI 데이터도 PDI 데이터 저장 클라우드(500)를 통해 접근 가능하다.

도 14는 영상표시장치(100)가 사용자로부터 PDI 데이터를 획득하는 과정을 나타내는 흐름도이다.

방송국 또는 컨텐트 제공자(300)는 방송 신호와 함께 PDI 설문지(Questionnaire)를 수신기(200)에 전달한다(S401). PDI 설문지는 XML 스키마 형태로 전송될 수 있다. 자세한 PDI 설문지의 테이블을 도 15를 참고하여 설명한다.

도 15는 PDI 설문지의 XML 스키마 테이블을 나타내는 도면이다. 본 발명의 일 실시 예에 따르면, PDI 설문지는 XML 스키마의 PDI 테이블을 실행함으로써 얻을 수 있는 문서를 말한다. PDI 테이블에 질문 부분은 비공식적으로 "PDI 질문" 또는 "PDI-Q"라고 할 수 있다. 주어진 PDI 질문에 대한 대답은 비공식적으로"PDI-A"라고 할 수 있다.

PDI-Q 및 PDI-A는 XML 스키마의 PDI-Q 및 PDI-A를 포함하는 PDI 테이블을 실행하으로써 획득할 수 있다. PDI-Q 및 PDI-A는 타입 QIA(정수응답형질문), QBA(불리언(Boolean)응답형질문), QSA(선택형질문), QTA(텍스트응답형질문) 및 QAA(임의응답형질문)을 포함할 수 있다.

도 15에 도시된 바와 같이 특성 및 엘리먼트를 구별하기 위하여, 본 실시 예에 따른 PDI 테이블에서 "@"이 엘리먼트 이름의 앞에 표시될 수 있다.

도 15에 도시된 바와 같이 PDI 사용자 데이터 테이블(이하 PDI 테이블)은 질문유형 엘리먼트와 독립적으로 protocolVersion 엘리먼트, userDataId 엘리먼트, userDataVersion 엘리먼트, time 엘리먼트 및 user_id를 포함할 수 있다. 또한 PDI 테이블은 하나 이상의 질문 엘리먼트를 포함할 수 있다. 질문 엘리먼트 각각은 QIA, QBA, QSA, QTA 및 QAA 중 어느 하나 일 수 있다. <choice> 의 1..N은 질문 엘리먼트 각각이 임의의 순서로 나타날 수 있음을 의미한다.

PDI 테이블의 protocolVersion 엘리먼트는 16진수로 구성될 수 있다. 상위 4비트는 프로토콜의 주(major) 버전을 나타내며, 하위 4비트는 프로토콜의 부(minor) 버전을 나타낸다. 해당 PDI 테이블의 주 버전이 1로 셋팅되면, 수신기는 해당 수신기가 지원하지 않는 주 버전이 특정하는 PDI를 폐기할 것으로 판단할 수 있다. 해당 PDI 테이블의 부 버전이 0으로 셋팅되면, 수신기는 해당 수신기가 지원하지 않는 부 버전이 특정하는 PDI를 폐기하지 않을 것으로 판단할 수 있다. 이 경우, 수신기는 해당 수신기가 지원하지 않는 각각의 엘리먼트를 무시할 수 있다고 판단할 수 있다.

PDI 테이블의 userDataId는 PDI 사용자 데이터의 전역적인 고유 식별자일 수 있다.

PDI 테이블의 userDataVersion은 PDI 사용자 데이터의 버전일 수 있다. 해당 값은 0 부터 255의 값을 가질 수 있다. userDataVersion이 1증가하면서 각각 다른 사용자를 의미할 수 있다.

PDI 테이블의 time 엘리먼트는 PDI 테이블에서 질문의 최신 변경 시각을 나타낸다.

PDI 테이블의 user_id 엘리먼트는 해당 테이블의 사용자의 식별자일 수 있다. 수신기(200)는 user_id를 통해 다수의 사용자로부터 획득한 PDI 데이터를 식별할 수 있다.

QIA 엘리먼트는 질문에 대한 정수형태의 응답을 나타낸다. QIA 엘리먼트는 응답의 최소 및 최대 허용값을 선택적으로 제한하는 내용을 포함할 수 있다.

QBA 엘리먼트는 질문에 대한 Boolean 응답을 나타낸다.

QSA 엘리먼트는 질문에 대한 선택적 응답을 나타낸다. QSA 엘리먼트는 QSA.minchoice 엘리먼트를 포함할 수 있으며, QSA.minchoice 엘리먼트는 사용자가 선택할 수 있는 최소의 수를 지정할 수 있다. 또한 QSA 엘리먼트는 QSA.maxchoice 엘리먼트를 포함할 수 있으며, QSA.maxchoice 엘리먼트는 사용자가 선택할 수 있는 최대의 수를 지정할 수 있다.

QTA 엘리먼트는 질문에 대한 텍스트 응답을 나타낸다.

QAA 엘리먼트는 질문에 대한 임의의(자유형식) 응답을 나타낸다.

다시 도 14로 돌아온다.

수신기(200)는 컨텐트 제공자(300)로부터 수신한 PDI 설문지(301)를 저장한다(S403). 수신기(200)는 PDI 설문지(301)를 PDI 저장부(208)에 저장할 수 있다.

수신기(200)는 컨텐트 제공자(300)로부터 수신한 PDI 설문지(301)를 제2 디바이스(400)에 전달한다(S405). 구체적으로 사용자의 신상 정보(특히 핸디캡 정보)를 수집하기 위하여 수신기(200)는 제2 디바이스(400)에 PDI 설문지(301)를 제공한다. 상술하였듯이 수신기(200)에 표시하는 경우 사용자의 메인 컨텐츠의 시청 방해를 최소화 할 수 있으며, 상대적으로 조작이 용이한 스마트폰 등을 통해 설문지에 응답할 수 있다.

제2 디바이스(400)는 수신기(200)로부터 수신한 PDI 설문지(301)를 디스플레이부등을 통해 표시한다(S407). 상술하였듯이 제2 디바이스(400)는 디스플레이 기능을 포함하는 전자 디바이스일 수 있으며, 다양한 입력 수단을 포함할 수 있다.

제2 디바이스(400)는 사용자로부터 표시한 PDI 설문지(301)에 대한 응답을 수신한다(S409). 구체적으로 제2 디바이스(400)는 사용자의 핸디캡 정보를 PDI 설문지(301)를 통하여 수집할 수 있다.

수신기(200)는 제2 디바이스(400)가 수집한 PDI 설문지(301)에 대한 응답을 포함하는 PDI 데이터를 수신한다(S411). 구체적으로 수신기(200)내 외부 디바이스 모듈(210)을 통해 제2 디바이스(400)로부터 PDI 데이터를 수신할 수 있다.

수신기(200)는 수신한 PDI 데이터를 PDI 저장부(208)에서 검색한다(S413). 영상표시장치는 PDI 데이터에 포함된 사용자 ID(user_id)를 이용하여 PDI 저장부(208)에 같은 사용자 ID 가 포함되어 있는지 여부를 검색할 수 있다. 구체적으로 수신기(200)내 PDI 엔진(203)을 통해 PDI 데이터를 검색할 수 있다.

수신기(200)는 검색된 결과에 기초하여 PDI 데이터를 저장하거나, 새로이 갱신한다(S415). 일 실시 예에서, PDI 엔진이 PDI 저장부를 검색한 결과 동일한 사용자 ID 가 존재하지 않는 경우, 해당 사용자 ID를 갖는 PDI 데이터를 새롭게 PDI 저장부(208)에 저장한다. 따라서, 영상표시장치는 새로운 사용자의 핸디캡 정보를 수집하여, 이에 기초하여 개인화 서비스를 제공할 수 있다.

또 다른 일 실시 예에서, PDI 엔진(203)이 PDI 저장부를 검색한 결과 동일한 사용자 ID가 존재하는 경우, 해당 사용자 ID를 갖는 PDI 데이터의 사용자 버전(userDataVersion)을 판단한다. 판단된 결과, 새롭게 수신한 PDI 데이터가 더 최신의 데이터인 경우, PDI 엔진(203)은 새롭게 수신한 PDI 데이터로 해당 사용자의 정보를 갱신한다.

따라서 수신기(200)의 PDI 저장부(208)는 다수의 사용자에 대한 PDI 데이터를 저장할 수 있으며, 사용자별 저장된 PDI 데이터를 이용하여 개인화 서비스를 제공할 수 있다.

도 16는 본 발명의 일 실시 예에 따른 사용자별 컨텐트 제공 서비스의 구성을 나타내는 블록도이다.

도 16에 도시된 바와 같이 본 발명의 일 실시 예에 따른 수신기(200)는 사용자별 컨텐트 서비스 제공을 위해 변환 선택기(211), 메타 데이터 파서(212), 변환 엔진(213), 사용자 정보 저장부(214) 및 사용자 관리 엔진(215)를 포함할 수 있다. 한편, 도 16의 영상표시장치는 도시된 구성과 함께 도 13에 도시되었던 구성도 모두 포함한다.

변환 선택기(211)는 PDI 엔진(203)으로부터 수신한 PDI 데이터에 기초하여 변환할 형태를 선택한다. 구체적으로 PDI 설문지(301)에 기초하여 획득한 PDI 데이터가 PDI 저장부(208)에 저장되고, 변환 선택기(211)는 PDI 데이터로부터 사용자의 핸디캡 정보를 파악한다. 그리고, 변환 선택기(211)는 파악된 사용자의 핸디캡 정보에 기초하여 변환 형태를 결정한다.

예를 들면, PDI 데이터로부터 현재 사용자가 청각 장애인임을 파악한 경우, 변환 선택기(211)는 메인 컨텐트와 함께 출력할 오디오 데이터를 수화의 형태로 변환할 것을 선택할 수 있다. 또 다른 예를 들면 PDI 데이터로부터 현재 사용자가 수화를 인식할 수 없는 청각 장애인인 경우, 오디오 데이터를 자막으로 변환할 것을 선택할 수 있다.

메타 데이터 파서(212)는 방송국 또는 컨텐트 제공자(300)으로부터 수신한 방송 신호를 파싱한다. 구체적으로 컨텐트 제공자(300)로부터 수신한 방송 신호를 파싱하여 메인 컨텐트 및 텍스트 컴포넌트를 추출할 수 있다. 메인 컨텐트는 영상 데이터 및 오디오 데이터를 포함할 수 있으며, 텍스트 컴포넌트는 메인 컨텐트를 설명하는 데이터를 포함할 수 있다.

종래에는 컨텐트 제공자(300)가 방송 신호에 메인 컨텐트를 보조하는 컴포넌트를 종류별로 모두 전송하고, 수신기(200)에서 출력할 컴포넌트를 선택하는 방식으로 방송 서비스를 제공하였다. 그러나, 종래의 방법에 따르면 컨텐트 제공자(300)가 다양한 경우의 컴포넌트를 모두 준비해야하는 부담이 있었으며, 다양한 종류의 컴포넌트를 전송하기 위해 많은 비용을 지불해야 했다.

그러나, 본 발명에서는 컨텐트 제공자(300)가 하나의 텍스트 컴포넌트만을 전송하고, 이를 수신기(200)가 사용자에 맞게 변환하여 출력한다. 따라서, 컨텐트 제공자(300)는 하나의 텍스트 컴포넌트만을 전송하여, 비용을 절감할 수 있으며, 사용자는 자신의 특정에 맞는 컴포넌트를 제공 받을 수 있다는 장점이 있다.

변환 엔진(213)은 메타 데이터 파서(212)가 파싱한 텍스트 컴포넌트를 변환 선택기(211)가 선택한 형태에 따라 변환한다. 변환 형태는 점자, 수화, 음성 및 자막을 포함할 수 있으며, 그 외 다른 출력 형태를 포함할 수도 있다.

사용자 정보 저장부(214)는 수신기(200)를 사용하는 사용자의 로그인 정보를 저장한다. 로그인 정보란 사용자를 식별하기 위한 정보로서 패스워드, 얼굴 정보, 목소리 정보, 지문 등을 포함할 수 있다.

사용자 관리 엔진(215)는 수신기(200)를 사용하는 사용자를 식별한다. 구체적으로 사용자로부터 수신한 로그인 정보를 사용자 정보 저장부(214)의 데이터와 매칭하여 사용자를 식별한다. 또한, 매칭 결과 사용자 정보 저장부(214)에 존재하지 않는 사용자의 경우, 새로운 사용자 등록을 수행할 수도 있다.

도 17은 본 발명의 일 실시 예에 따른 사용자별 PDI 데이터에 기초한 개인화 서비스 제공 과정을 나타내는 흐름도이다.

수신기(200)가 현재 컨텐트를 시청중인 사용자의 로그인 입력을 수신한다(S501). 수신기(200)가 사용자별 PDI 데이터에 기초하여 개인화 서비스를 제공하기 위해서는 현재 수신기(200)를 통해 컨텐트를 시청하고 있는 사용자가 누구인지 판단할 수 있어야 한다. 따라서, 영상표시장치는 사용자의 식별을 위해 디스플레이장치(121)을 통해 로그인을 위한 사용자 인터페이스(user interface)를 출력한다.

일 실시 예에서 수신기(200)는 로그인을 위한 사용자 인터페이스를 수신기(200)의 전원이 켜진 후 표시할 수 있다. 수신기(200)의 전원이 켜진 경우 사용자가 컨텐트를 시청하고자하는 의지를 가진 것으로 판단할 수 있는바, 수신기(200)는 사용자 식별을 위한 사용자 인터페이스를 출력할 수 있다.

또 다른 실시 예에서 수신기(200)는 로그인을 위한 사용자 인터페이스를 새로운 PDI 데이터를 수신한 후 표시할 수 있다. 수신기(200)가 PDI 설문지를 통해 새로운 PDI 데이터를 수신한 경우, 수신한 PDI 데이터의 대상이 되는 사용자가 현재 수신기(200)를 통해 컨텐트를 시청하려는 의도를 가지고 있다고 판단할 수 있다. 따라서, 수신기(200)는 사용자 식별을 위한 사용자 인터페이스를 출력할 수 있다.

수신기(200)가 로그인을 위한 입력을 수신하면, 영상표시장치(100) 기 저장되어 있는 사용자 ID(user_id)를 검색하여, 검색결과 매칭되는 ID가 있으면 해당 사용자가 로그인 한것으로 판단한다. 사용자 ID는 수신기(200)내 사용자 정보 저장부(214)에 저장될 수 있으며, 사용자 ID 매칭 여부는 사용자 관리 엔진(215)을 통해 이루어질 수 있다.

한편, 수신기(200)가 로그인을 위한 입력을 수신하고, 사용자 정보 저장부(214)를 검색하였으나, 매칭되는 사용자 ID가 존재하지 않을 수 있다. 이 경우, 수신기(200)는 새로운 사용자 ID 생성을 위한 사용자 인터페이스를 출력할 수 있다. 수신기(200)는 새로운 사용자 ID 생성을 위한 사용자 인터페이스를 통해 사용자 정보를 입력 받고, 입력 받은 정보에 기초하여 사용자 ID를 생성할 수 있다.

수신기(200)는 상술한 사용자 식별을 위한 사용자 인터페이스 및 사용자 ID 생성을 위한 사용자 인터페이스를 제2 디바이스(400)에 출력할 수도 있다. 이 경우, 수신기(200)내 사용자 관리 엔진(215)은 상술한 사용자 인터페이스들을 외부 디바이스 모듈(210)을 통해 제2 디바이스에 전송한다. 제2 디바이스는 수신한 사용자 인터페이스들을 출력하여 사용자 식별 또는 새로운 ID 생성을 위한 입력을 수신한다. 그리고 사용자 관리 엔진(215)은 외부 디바이스 모듈(210)을 통해 수집한 사용자 식별 정보 또는 새로운 ID 정보를 수신한다. 제2 디바이스(400)를 통해 사용자 식별을 위한 정보를 수신하는 경우, 수신기(200)의 원격조정장치에 비해 상대적으로 조작이 용이하므로 사용자가 쉽게 식별 정보를 입력할 수 있는 장점이 있다.

또한 본 발명의 일 실시 예에서 수신기(200) 또는 제2 디바이스(400)에 사용자 정보를 입력하여 사용자를 식별하는 방법 외, 사용자 관리 엔진(215)이 자동으로 사용자를 식별할 수도 있다. 제1 예를 들면, 얼굴 인식을 통한 사용자 식별 방법이 사용될 수 있다. 제2 예를 들면, 목소리 인식을 통한 사용자 식별 방법이 사용될 수 있다. 제3 예를 들면, 지문 인식을 통한 사용자 식별 방법이 사용될 수 있다. 제4 예를 들면, 수신기(200)에 연결된 제2 디바이스(400)의 정보를 통해 사용자를 식별하는 방법이 사용될 수도 있다.

구체적으로 사용자 각각의 얼굴 정보를 사용자 정보 저장부(214)에 저장하고, 사용자 관리 엔진(215)이 수신기(200)에 부착된 카메라 등을 통해 수집한 얼굴 정보에 기초하여 사용자를 식별할 수 있다. 사용자 관리 엔진(215)은 외부 디바이스 모듈(210)을 통해 제2 디바이스(400)에 부착된 카메라를 통해서도 얼굴 정보를 수집할 수 있다. 같은 방식으로 사용자 각각의 목소리 정보를 사용자 식별을 위해 사용할 수도 있다.

제3 예를 좀 더 자세히 설명하면, 사용자 지문 정보를 사용자 정보 저장부(214)에 저장한다. 사용자 관리 엔진(215)은 제2 디바이스(400)를 통해 사용자의 지문 정보를 수집하고, 수집한 지문 정보에 기초하여 사용자를 식별할 수 있다.

제4 예를 좀 더 자세히 설명하면, 제2 디바이스(400)의 경우 사용자들이 각각 자신만의 디바이스를 보유하고 있는 경우가 대부분이다. 수신기(200)는 제2 디바이스(400)와 연결되는 과정에서 제2 디바이스(400)의 고유 정보를 수신할 수 있다. 사용자 관리 엔진(215)은 제2 디바이스(400)로부터 수신한 고유 정보에 기초하여 해당 디바이스를 사용한 이력을 사용자 정보 저장부(214)에서 검색할 수 있다. 사용자 관리 엔진(215)은 검색된 결과에 기초하여 사용자를 식별할 수 있다.

상술한 과정에 따라 사용자 로그인이 완료되면, PDI 엔진(203)은 로그인된 사용자의 PDI 데이터를 검색한다(S503). PDI 엔진(203)은 로그인 정보에 기초하여 해당 사용자의 PDI 데이터를 PDI 저장부(208)에서 검색한다.

PDI 엔진(203)은 검색결과에 기초하여 해당 사용자의 PDI 데이터가 존재하는지 여부를 판단한다(S505). PDI 데이터의 존재 판단은 PDI 데이터의 user_id를 기준으로 판단할 수 있다.

일 실시 예에서, PDI 엔진(203)이 PDI 저장부(208)에 로그인된 사용자의 PDI 데이터가 있다고 판단한 경우, 해당 PDI 데이터를 PDI 저장부(208)로부터 불러온다(S509).

또 다른 실시 예에서, PDI 엔진(203)이 PDI 저장부(208)에 로그인된 사용자의 PDI 데이터가 없다고 판단한 경우, 로그인한 사용자의 PDI 데이터를 수집한다(S507). PDI 데이터를 수집하는 과정은 도 14에서 기 설명 하였는바, 여기에서는 설명을 생략한다.

수신기(200)는 획득한 PDI 데이터에 기초하여 메타 데이터를 변환한다(S511). 구체적으로, 검색된 PDI 데이터 또는 새롭게 수집한 PDI 데이터를 변환 선택기(211)가 획득한다. 변환 선택기(211)는 획득한 PDI 데이터에 기초하여 메인 컨텐트를 보조하는 메타 데이터를 변환할 형태를 선택한다. 예를 들면, PDI 데이터가 현재 로그인된 사용자가 청각 장애인임을 나타내고 있는 경우, 변환 선택기(211)는 메타 데이터를 변환할 형태로 점자, 자막 또는 수화를 선택할 수 있다. 변환 선택기(211)가 선택한 결과는 변환 엔진(213)으로 전달된다. 변환 엔진(213)은 메타 데이터 파서(212)로부터 수신한 메인 컨텐트를 설명하는 컴포넌트는 변환 선택기(211)로부터 전달받은 선택 결과에 따라 변환한다.

일 실시 예에서, 변환 선택기(211)는 하나 이상의 변환 형태를 선택할 수 있다. 예를 들면, PDI 데이터가 현재 로그인된 사용자가 시각 장애인임을 나타내고 있는 경우, 변환 선택기(211)는 메타 데이터를 변환할 형태로 음성과 점자를 모두 선택할 수도 있다.

또 다른 일 실시 예에서, 변환 선택기(211)는 수신기(200)내 ACR 기능을 통해 변환 형태를 선택할 수도 있다. 좀 더 자세히 설명하면, 수신기(200)는 ACR 기능을 통해 현재 방송중인 컨텐트를 인식할 수 있다. 일 예로 PDI 데이터를 기초로 파악한 사용자의 핸디캡 정보가 청각 장애인인 경우, 변환 선택기(211)는 변환 형태로 수화 및 자막을 선택할 수 있다. 만약, ACR 기능을 통해 인식한 컨텐트가 뉴스인 경우, 장면 전환이 적고 화자가 정해져 있는 특성상 변환 선택기(211)는 변환 형태로 수화를 선택할 수 있다. 그러나, ACR 기능을 통해 인식한 컨텐트가 드라마인 경우, 장면 전환이 많고 화자가 다수 존재할 수 있는바 수화만으로는 모든 경우를 커버할 수 없을 수 있다. 따라서 이 경우, 변환 선택기(211)는 수화에 비해 현재 재생중인 컨텐트를 안정적으로 보조할 수 있는 변환 형태로 자막을 선택할 수 있다.

수신기(200)는 변환 엔진(213)에서 변환된 메타데이터를 제2 디바이스로(400)로 전송한다(S513). 변환된 메타데이터의 전송은 외부 디바이스 모듈(210)을 통해 이루어질 수 있다. 일 실시 예에서 영상표시장치는 동시에 다수의 제2 디바이스(400)에 변환된 메타데이터를 전송할 수도 있다. 또 다른 실시 예에서 영상표시장치는 연결된 제2 디바이스가 없거나, 제2 디바이스로 메타데이터를 전송할 수 없는 상황인 경우, 변환된 메타데이터를 디스플레이장치(121)을 통해 출력할 수도 있다.

상술한 영상표시장치의 구성 중 필터링 엔진(201), PDI 엔진(203), 변환 선택기(211), 변환 엔진(213) 및 메타데이터 파서(212)는 모두 하나의 제어부에 포함되는 것으로 구성할 수도 있다. 또한, 컨텐트 저장부(207), PDI 저장부(208), 사용자 정보 저장부(214)는 모두 하나의 저장부에 포함되는 것으로 구성할 수도 있다.

도 18은 본 발명의 또 다른 실시예에 따른 핑거프린트 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.

도 18에서, Tuner(501)는 air 채널을 통해 전송되는 8-VSB RF 신호로부터 Symbol을 추출한다.

8-VSB Demodulator(503)는 Tuner(501)가 추출한 8-VSB Symbol을 복조하여 의미 있는 디지털 데이터를 복원한다.

VSB Decoder(505)는 8-VSB Demodulator(503)가 복원한 디지털 데이터를 복호하여 ATSC 메인 서비스와 ATSC M/H 서비스를 복원한다.

MPEG-2 TP Demux(507)는 8-VSB 신호를 통하여 전송되는 MPEG-2 Transport Packet 또는 PVR Storage에 저장된 MPEG-2 Transport Packet 중에서 영상 표시 장치(100)가 처리하고자 하는 Transport Packet을 필터링하여 적절한 처리 모듈로 중계한다.

PES 디코더(539)는 MPEG-2 Transport Stream을 통하여 전송된 Packetized Elementary Stream을 Buffering하고 복원한다.

PSI/PSIP 디코더(541)는 MPEG-2 Transport Stream을 통하여 전송되는 PSI/PSIP Section Data를 Buffering하고 분석한다. 분석된 PSI/PSIP 데이터는 Service Manager(미도시)에 의하여 수집되어, Service Map 및 Guide data 형태로 DB에 저장된다.

DSMCC Section Buffer/Handler (511)은 MPEG-2 TP를 통하여 전송되는 파일 전송 및 IP Datagram encapsulation 등을 위한 DSMCC Section Data를 버퍼링(Buffering)하고 처리한다.

IP/UDP Datagram Buffer/Header Parser(513)는 DSMCC Addressable section을 통해 encapsulate되어 MPEG-2 TP를 통하여 전송되는 IP Datagram을 버퍼링하고 복원하여 각 Datagram의 Header를 분석한다. 또한, IP/UDP Datagram Buffer/Header Parser(513)는 IP Datagram을 통하여 전송되는 UDP Datagram을 Buffering 및 복원하고, 복원된 UDP Header를 분석 및 처리한다.

Stream component handler(557)는 ES Buffer/Handler, PCR Handler, STC 모듈, Descrambler, CA Stream Buffer/Handler, Service Signaling Section Buffer/Handler를 포함할 수 있다.

ES Buffer/Handler는 PES 형태로 전송된 Video, Audio 데이터 등의 Elementary Stream을 Buffering 및 복원하여 적절한 A/V Decoder로 전달한다.

PCR Handler는 Audio 및 Video Stream의 Time synchronization 등을 위하여 사용되는 PCR (Program Clock Reference) Data를 처리한다.

STC 모듈은 PCR Handler를 통하여 전달받은 Reference Clock 값을 이용하여, A/V Decoder 들의 Clock 값을 보정하여 Time Synchronization를 수행한다.

수신된 IP Datagram의 Payload에 Scrambling이 적용된 경우, Descrambler는 CA Stream Handler로부터 전달 받은 Encryption key 등을 이용, Payload의 데이터를 복원한다.

CA Stream Buffer/Handler는 MPEG-2 TS또는 IP Stream을 통하여 전송되는 Conditional Access 기능을 위하여 전송되는 EMM, ECM 등의 Descrambling을 위한 Key 값 등의 Data를 Buffering 및 처리한다. CA Stream Buffer/Handler의 Output은 Descrambler로 전달되어, descrambler는 A/V Data 및 File Data등을 전송하는 MPEG-2 TP 또는 IP Datagram의 암호화 해제작업을 수행한다.

Service Signaling Section Buffer/Handler는 IP Datagram의 형태로 전송되는 NRT Service Signaling Channel Section Data를 Buffering 하고 복원하며 분석한다. Service Manager(미도시)는 분석된 NRT Service Signaling Channel Section 데이터를 수집하여, Service Map 및 Guide data 형태로 DB에 저장한다.

A/V Decoder(561)는 ES Handler를 통하여 전달받은 Audio/Video 데이터의 압축을 복호화하여, 사용자에게 Presentation한다.

MPEG-2 Service Demux(미도시)는 MPEG-2 TP Buffer/Parser, Descrambler, PVR Storage 모듈을 포함할 수 있다.

MPEG-2 TP Buffer/Parser (미도시)는 8-VSB 신호를 통하여 전송되는 MPEG-2 Transport Packet을 Buffering 및 복원하고, Transport Packet Header를 검출 및 처리한다.

Descrambler는 MPEG-2 TP 중, Scramble이 적용된 Packet payload에 대하여, CA Stream Handler로부터 전달 받은 Encryption key 등을 이용, Payload의 데이터를 복원한다.

PVR Storage 모듈은 사용자의 요구 등에 따라 8-VSB 신호를 이용하여 수신된 MPEG-2 TP를 저장하고, 또한 사용자의 요구에 의해 MPEG-2 TP를 출력한다. PVR Storage 모듈은 PVR Manager(미도시)에 의해 제어될 수 있다.

File Handler(551)는 ALC/LCT Buffer/Parser, FDT Handler, XML Parser, File Reconstruction Buffer, Decompressor, File Decoder, File Storage를 포함할 수 있다.

ALC/LCT Buffer/Parser는 UDP/IP Stream으로 전송되는 ALC/LCT 데이터를 Buffering 및 복원하고, ALC/LCT의 Header 및 Header extension을 분석한다. ALC/LCT Buffer/Parser는 NRT Service Manager(미도시)에 의해 제어될 수 있다.

FDT Handler는 ALC/LCT session을 통하여 전송되는 FLUTE protocol의 File Description Table을 분석 및 처리한다. FDT Handler는 NRT Service Manager(미도시)에 의해 제어될 수 있다.

XML Parser는 ALC/LCT session을 통하여 전송되는 XML Document를 분석하여, FDT Handler, SG Handler 등 적절한 모듈로 분석된 데이터를 전달한다.

File Reconstruction Buffer는 ALC/LCT, FLUTE session으로 전송되는 파일을 복원한다.

Decompressor는 ALC/LCT, FLUTE session으로 전송되는 파일이 압축되어 있는 경우, 그 압축을 해제하는 프로세스를 수행한다.

File Decoder는 File Reconstruction Buffer에서 복원된 File 또는 Decompressor에서 압축해제된 파일, 또는 File Storage에서 추출된 File을 Decoding한다.

File Storage는 복원된 파일을 필요에 의하여 저장하거나 추출한다.

M/W Engine(미도시)은 DSMCC Section, IP Datagram 등을 통하여 전송되는 A/V Stream이 아닌 파일 등의 Data를 처리한다. , M/W Engine은 처리된 데이터를 Presentation Manager 모듈로 전달한다.

SG Handler(미도시)는 XML Document 형태로 전송되는 Service Guide 데이터를 수집하고 분석하여 EPG Manager에게 전달하는 프로세스를 수행한다.

Service Manager(미도시)는 MPEG-2 Transport Stream을 통하여 전송되는 PSI/PSIP Data, IP Stream으로 전송되는 Service Signaling Section Data를 수집하고 분석하여 Service Map을 제작한다. Service Manager(미도시)는 제작한 service map을 Service Map & Guide Database에 저장하며, 사용자가 원하는 Service에 대한 access를 제어한다. Operation Controller(미도시)에 의하여 제어되며, Tuner(501), MPEG-2 TP Demux(507), IP Datagram Buffer/Handler (513) 등에 대한 제어를 수행한다.

NRT Service Manager(미도시)는 IP layer 상에서 FLUTE session을 통하여 object/file 형태로 전송되는 NRT 서비스에 대한 전반적인 관리를 수행한다. NRT Service Manager(미도시)는 FDT Handler, File Storage등을 제어할 수 있다.

Application Manager(미도시)는 Object, file 등의 형태로 전송되는 Application 데이터의 처리에 관한 전반적인 관리를 수행한다.

UI Manager(미도시)는 User Interface를 통하여 사용자의 Input을 Operation Controller에 전달하고, 사용자가 요구하는 서비스를 위한 Process의 동작을 시작한다.

Operation Controller(미도시)는 UI Manager를 통하여 전달받은 사용자의 Command를 처리하고, 필요한 모듈의 Manager가 해당 Action을 수행하게 한다.

Fingerprint Extractor(565)는 Audio/Video 스트림으로 부터 fingerprint 특징 정보를 추출한다.

Fingerprint Comparator(567)는 Fingerprint Extractor가 추출한 특징 정보와 Reference fingerprint를 비교하여 일치하는 컨텐츠를 찾는다. Fingerprint Comparator(567)는 Local에 저장된 Reference fingerprint DB를 이용할 수도 있고, 인터넷 상의 Fingerprint 질의 서버에 질의하여 결과를 수신할 수도 있다. 비교 결과로 매칭된 결과 데이터는 Application에 전달되어 이용될 수 있다.

Application(569)은 ACR 기능을 관장하는 모듈 혹은 ACR에 기반하여 Enhanced 서비스를 제공하는 애플리케이션 모듈로서, 시청중인 방송 컨텐츠를 식별하여 이와 연계된 확장된 서비스를 제공한다.

도 19는 본 발명의 또 다른 실시예에 따른 워트마크 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.

도 19에 도시된 워트마크 기반의 영상 표시 장치는 도 18에 도시된 핑거프린트 기반의 영상 표시 장치와 유사하나, 핑거프린트 기반의 영상 표시 장치의 Fingerprint Extractor(565)와 Fingerprint Comparator(567)를 포함하지 않으며, 대신 Watermark Extractor(566)를 더 포함한다.

Watermark Extractor(566)는 Audio/Video 스트림으로부터 watermark형태로 삽입된 데이터를 추출한다. 이렇게 추출된 데이터는 Application에 전달되어 이용될 수 있다.

본 발명의 일 실시예에 의하면, 전술한 방법은, 프로그램이 기록된 매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 매체의 예로는, ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.

상기와 같이 설명된 영상 표시 장치는 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.

Claims (16)

1. 메인 컨텐트 및 메인 컨텐트를 보조하는 메타데이터를 포함하는 방송신호를 컨텐트 제공자로부터 수신하는 단계;
   로그인 정보를 수신하여 사용자를 식별하는 단계;
   상기 식별된 사용자에 대응되는 개인화 서비스를 위한 데이터를 검색하는 단계;
   상기 검색 결과에 기초하여 상기 메타데이터의 출력 형태를 변환하는 단계; 및
   상기 변환된 메타데이터를 출력하는 단계를 포함하고,
   상기 메타데이터의 출력 형태를 변환하는 단계는
   상기 개인화 서비스를 위한 데이터로부터 사용자의 핸디캡 정보를 판단하는 단계 및
   상기 판단된 핸디캡 정보 및 자동 컨텐트 인식 기법을 이용하여 인식된 상기 메인 컨텐트의 장르에 기초하여 상기 메타데이터 변환 형태를 선택하는 단계를 포함하는
   영상표시장치 동작 방법.
2. 제1항에 있어서,
   상기 컨텐트 제공자로부터 수신한 메타데이터는 하나의 형태만을 가지는
   영상표시장치 동작 방법.
3. 삭제
4. 제1항에 있어서,
   상기 개인화 서비스를 위한 데이터를 검색하는 단계는
   상기 식별된 사용자 정보와 매칭되는 데이터가 저장부에 존재하지 않는 경우, 상기 개인화 서비스를 위한 데이터를 수집하는 단계를 포함하는
   영상표시장치 동작 방법.
5. 제4항에 있어서,
   상기 개인화 서비스를 위한 데이터를 수집하는 단계는
   컨텐트 제공자로부터 수신한 설문지를 디스플레이 기능을 포함하는 외부 디바이스로 전송하는 단계 및 상기 외부 디바이스로부터 설문지에 대한 응답을 포함하는 개인화 서비스를 위한 데이터를 수신하는 단계를 포함하는
   영상표시장치 동작 방법.
6. 제5항에 있어서,
   상기 컨텐트 제공자로부터 수신한 설문지는 protocolVersion 엘리먼트, userDataId 엘리먼트, userDataVersion 엘리먼트, time 엘리먼트, user_id 엘리먼트 및 질문유형 엘리먼트를 포함하고,
   상기 질문유형 엘리먼트는 정수응답형질문, 불리언(Boolean)응답형질문, 선택응답형질문, 텍스트응답형질문, 임의응답형질문을 포함하는
   영상표시장치 동작 방법.
7. 제5항에 있어서,
   상기 외부 디바이스로부터 수신한 상기 개인화 서비스를 위한 데이터에 포함된 사용자 ID와 동일한 ID를 저장부에서 검색하는 단계,
   검색결과 존재하지 않는 경우 상기 수신한 개인화 서비스를 위한 데이터를 저장하고,
   검색결과 존재하는 경우, 상기 수신한 개인화 서비스로 기 저장된 데이터를 갱신하는 단계를 더 포함하는
   영상표시장치 동작 방법.
8. 제1항에 있어서,
   상기 로그인 정보는 텍스트 형태의 사용자 ID, 사용자 얼굴정보, 사용자 목소리 정보, 사용자 지문 정보 및 상기 영상표시장치에 연결된 외부 디바이스의 식별 정보를 포함하는
   영상표시장치 동작 방법.
9. 제1항에 있어서,
   상기 변환된 메타데이터를 외부 디바이스로 전송하는 단계를 더 포함하는
   영상표시장치 동작 방법.
10. 메인 컨텐트 및 메인 컨텐트를 보조하는 메타데이터를 포함하는 방송신호를 컨텐트 제공자로부터 수신하고, 로그인 정보를 수신하여 기 저장된 사용자 정보와 매칭하여 사용자를 식별하고, 상기 식별된 사용자에 대응되는 개인화 서비스를 위한 데이터를 검색하고, 검색 결과에 기초하여 상기 메타데이터의 출력 형태를 변환하는 제어부; 및
    상기 개인화 서비스를 위한 데이터, 상기 메인 컨텐트 및 메타데이터 및 상기 사용자 식별을 위한 사용자 정보를 저장하는 저장부를 포함하고,
    상기 제어부는
    상기 개인화 서비스를 위한 데이터로부터 사용자의 핸디캡 정보를 판단하고, 상기 판단된 핸디캡 정보 및 자동 컨텐트 인식 기법을 이용하여 인식된 상기 메인 컨텐트의 장르에 기초하여 상기 메타데이터 변환 형태를 선택하는
    영상표시장치.
11. 제10항에 있어서,
    상기 컨텐트 제공자로부터 수신한 메타데이터는 하나의 형태만을 포함하는
    영상표시장치.
12. 삭제
13. 제10항에 있어서,
    상기 제어부는,
    상기 컨텐트 제공자로부터 수신한 설문지를 디스플레이기능을 포함하는 외부 디바이스로 전송하고, 상기 전송한 설문지에 대한 응답을 포함하는 개인화 서비스를 위한 데이터를 수집하는
    영상표시장치.
14. 제13항에 있어서,
    상기 제어부는,
    상기 수집한 개인화 서비스를 위한 데이터에 포함된 사용자 ID와 동일한 ID를 상기 저장부에서 검색하고, 검색 결과에 기초하여 상기 개인화 서비스를 위한 데이터를 저장하거나 갱신하는
    영상표시장치.
15. 제10항에 있어서,
    상기 제어부는, 상기 변환된 메타데이터를 외부 디바이스로 전송하는
    영상표시장치.
16. 제15항에 있어서,
    상기 제어부는, 하나 이상의 외부 디바이스에 상기 변환된 메타데이터를 전송하는
    영상표시장치.

Images