KR101914661B1 - 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템 - Google Patents

영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템 Download PDF

Info

Publication number
KR101914661B1
KR101914661B1 KR1020170127155A KR20170127155A KR101914661B1 KR 101914661 B1 KR101914661 B1 KR 101914661B1 KR 1020170127155 A KR1020170127155 A KR 1020170127155A KR 20170127155 A KR20170127155 A KR 20170127155A KR 101914661 B1 KR101914661 B1 KR 101914661B1
Authority
KR
South Korea
Prior art keywords
information
additional information
unit
output
real
Prior art date
Application number
KR1020170127155A
Other languages
English (en)
Inventor
김선영
Original Assignee
주식회사 포렉스랩
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 포렉스랩 filed Critical 주식회사 포렉스랩
Priority to KR1020170127155A priority Critical patent/KR101914661B1/ko
Application granted granted Critical
Publication of KR101914661B1 publication Critical patent/KR101914661B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H04N21/25891—Management of end-user data being end-user preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Graphics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 촬영수단으로부터 획득되는 영상물로부터 정보를 획득하는 정보분류부에 의해 구분된 정보를 제공받아, 실시간 방송 환경에서 유의미하게 사용할 수 있는 정보로서의 식별 및 부가정보 출력을 위해 구분된 정보의 종류 및 환경에 따라 정보 적합성을 판단하는 정보적합성판단부; 구분된 정보에 연결되는 다수의 부가정보에 대한 데이터베이스를 저장하는 데이터베이스부; 및 정보적합성판단부에 의해 적합성을 가지는 것으로 판단되는 구분된 정보와 현재 표시되고 있는 부가정보에 대한 관련 정보를 전달받아, 시청자의 인지범위와 방송에 표시 가능한 부가정보의 타입을 결정하고, 결정된 부가정보의 타입 중에서 현재 영상물에 실시간 표현이 적합성을 가지는 부가정보의 타입을 데이터베이스부에 저장된 데이터베이스에서 선택하여, 선택된 부가정보와 함께 이의 출력 조건에 대한 정보를 부가정보출력부에 제공함으로써, 부가정보출력부가 선택된 부가정보를 출력 조건을 만족시키면서 실시간 방송의 영상물에 합성하도록 하는 출력정보선택부;를 포함하도록 한 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템에 관한 것이다. 본 발명에 따르면, 영상물 제작 및 실시간 방송에 있어 별도의 추가 장비나 전문 인력 없이도 자막, 효과, 사운드 등의 부가 정보를 출력하여 송출 또는 저장할 수 있고, 이를 통해 영상물 제작 및 실시간 방송 제작을 위한 비용을 절감할 수 있다.

Description

영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템{Additional information display system for real-time broadcasting service through automatic recognition of object of video object}
본 발명은 실시간 방송 서비스용 부가정보 표시 시스템에 관한 것으로서, 보다 상세하게는 방송 컨텐츠의 내용을 시스템에서 파악하여 자동으로 적절한 부가정보를 화면으로 또는 오디오로 출력하도록 하는 기능을 제공하는 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템에 관한 것이다.
오늘날 전자 정보 산업이 급속하게 성장하면서, 각종 멀티미디어 기술의 발달, 정보의 상업화 등에 힘입어 인터넷 이용자의 수도 크게 증가하고 있으며, 기존의 공중파나 케이블을 통한 방송 뿐만 아니라, 인터넷을 통한 방송 등과 같이, 다양한 방송 서비스가 제공되고 있다.
이러한 다양한 방송 서비스가 제공되는 환경에서 방송 서비스에 대한 경쟁력을 확보하도록 함과 아울러, 방송의 의미 또는 정보 전달력을 높이기 위하여, 실시간 방송 서비스에 자막, 효과, 사운드 등의 부가정보를 표시하게 되는데, 이를 위해선 컴퓨터 그래픽 기기, 속기용 키보드 등의 장치와 이를 사용하는 숙련된 입력 담당자를 필요로 하며, 이들이 수동으로 영상과 함께 송출할 정보를 입력하고, 이의 반영을 확인하여 송출하는 다소 번거로운 과정이 필요하다.
이와 관련된 종래 기술로는 한국공개특허 제10-2007-0009891호의 "실시간 방송 자막 입력 및 송출 시스템"이 제시된 바 있는데, 이는 방송 자막을 실시간으로 입력하기 위해, 입력자가 속기용 키보드 장치와 그 밖의 입력장치, 미디어 파일, 수정의 과정을 거쳐서 실시간 방송 서비스에 자막을 입력 송출할 수 있도록 한 시스템이다.
그러나, 이러한 종래 기술은 방송에 등장하는 피사체와 내용을 파악하기 위해, 적어도 숙련된 2인 이상의 전문 인력이 필요하고, 키보드 등의 장치를 통해 수동으로 입력해야 하며, 지정된 형태의 문자 자막 정보만 추가할 수 있는 불편함을 가지고 있었다.
또한 종래의 다른 기술로서, 한국등록특허 제10-0828166호의 "동영상의 음성 인식과 자막 인식을 통한 메타데이터 추출방법, 메타데이터를 이용한 동영상 탐색 방법 및 이를 기록한 기록매체"는 기록된 영상물에서 음성을 인식하여 자막 텍스트로 변형 저장하고, 문자를 인식하여 자막 내용을 저장하여, 그 내용과 노출시간 정보를 메타데이터로 기록하고, 영상물의 내용 검색 및 관리 편의를 증진하는 시스템이고, 음성인식 및 문자인식 기술을 사용하여 영상물의 정보를 모두 문자로 변형, 기록하여 관리의 편의성을 향상시켰다.
그러나, 이러한 종래의 다른 기술은 데이터의 수집/변형/저장을 위한 시스템 작업에 많은 시간이 소요되고, 이미 기록이 완료된 영상물에만 적용할 수 있다는 문제점을 가지고 있었다.
또한 종래의 또 다른 기술로서, 한국등록특허 제10-0886489호의 "영상 통화 시 얼굴의 표정에 따라 꾸미기 효과를 합성하는 방법 및 시스템"이 제시된 바 있는데, 이는 모델의 얼굴 표정마다 템플릿과 꾸미기 효과 이미지가 대응되도록 저장되어 있는 표정장시 템플릿 DB를 참조하여, 디지털 기기의 사용자 표정에 따라 사용자의 얼굴과 꾸미기 효과 이미지를 자동으로 합성하여 제공하는 것이다.
그러나, 이러한 종래의 또 다른 기술은 사용 범위가 영상 통화로 국한되어 적용의 확장을 어렵게 하는 문제점을 가지고 있었다.
상기한 바와 같은 종래 기술의 문제점을 해결하기 위하여, 본 발명은 방송 컨텐츠의 내용을 시스템에서 자동으로 파악하여 적절한 자막이나 효과음 등과 같은 부가정보를 화면에 또는 오디오로 출력하도록 하는 기능을 제공함으로써, 전문 인력이나 별도의 장비를 준비하지 않고서도 간단하게 부가정보를 제공하도록 할 수 있음은 물론, 문자나 효과음 이외에도 다양한 이미지와 피사체 트래킹 기술을 활용한 인터렉션 컨텐츠를 실시간 방송에 자동으로 입력하여 송출하도록 하고, 실시간으로 촬영되는 방송 및 영상물에 즉각 부가정보를 기록할 수 있도록 할 뿐만 아니라, 문자 데이터를 기반으로 모든 정보를 처리할 수 있으며, 문자, 음성, 이미지, 오디오 등의 정보를 촬영과 동시에 분석하고, 카테고리에 맞게 실시간으로 분류하여 더욱 다양한 분야의 정보를 기록 및 활용할 수 있도록 하고, 사용자의 안면 지점 인식 트래킹을 통한 표정 정보를 인식하여 템플릿의 꾸미기 효과를 실시간으로 합성하는 기술에서 한발 나아가 표시된 효과와 사용자 간의 실시간 인터렉션 작용과 인터렉션을 통한 효과의 변형 및 이를 활용한 게임 등의 컨텐츠 제공이 가능하도록 하는데 목적이 있다.
본 발명의 다른 목적들은 이하의 실시례에 대한 설명을 통해 쉽게 이해될 수 있을 것이다.
상기한 바와 같은 목적을 달성하기 위해, 본 발명의 일측면에 따르면, 촬영수단으로부터 획득되는 영상물로부터 정보를 획득하는 정보분류부에 의해 구분된 정보를 제공받아, 실시간 방송 환경에서 유의미하게 사용할 수 있는 정보로서의 식별 및 부가정보 출력을 위해 상기 구분된 정보의 종류 및 환경에 따라 정보 적합성을 판단하는 정보적합성판단부; 상기 구분된 정보에 연결되는 다수의 부가정보에 대한 데이터베이스를 저장하는 데이터베이스부; 및 상기 정보적합성판단부에 의해 적합성을 가지는 것으로 판단되는 구분된 정보와 현재 표시되고 있는 부가정보에 대한 관련 정보를 전달받아, 시청자의 인지범위와 방송에 표시 가능한 부가정보의 타입을 결정하고, 결정된 부가정보의 타입 중에서 현재 영상물에 실시간 표현이 적합성을 가지는 부가정보의 타입을 상기 데이터베이스부에 저장된 데이터베이스에서 선택하여, 선택된 부가정보와 함께 이의 출력 조건에 대한 정보를 부가정보출력부에 제공함으로써, 상기 부가정보출력부가 상기 선택된 부가정보를 상기 출력 조건을 만족시키면서 실시간 방송의 영상물에 합성하도록 하는 출력정보선택부;를 포함하는, 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템이 제공된다.
상기 촬영수단으로부터 촬영된 영상물로부터 안면추출부에 의해 안면을 추출하고, 오디오추출부에 의해 음성을 추출하며, 동작추출부에 의해 동작을 추출하고, 상표추출부에 의해 상표를 추출하며, 문자/이미지추출부에 의해 문자나 이미지를 추출함으로써, 상기 영상물에 대하여, 안면, 음성, 동작, 상표 및 문자나 이미지를 상기 구분된 정보로서 상기 정보적합성판단부에 제공하는 정보분류부를 더 포함할 수 있다.
상기 정보적합성판단부는, 실시간 방송 환경에서 유의미하게 사용할 수 있는 정보로서의 식별 및 부가정보 출력을 위해서, 인지시간고려표시부에 의해 부가정보를 정해진 시간 동안 화면에 표시하거나 오디오를 출력하도록 고려하고, 개연성고려표시부에 의해 대사, 제스처 또는 상표를 노출한 후 정해진 시간 이내에 부가정보를 표시하도록 고려하며, 정보량고려표시부에 의해 부가정보의 위치 및 크기를 고려하여 영상물의 피사체와 겹치거나 상호 간섭되지 않게 표시하도록 고려함과 아울러 영상물의 배경음과 부가정보의 효과음이 상호 겹쳐지 않도록 고려하고, 인식가능고려표시부에 의해 영상물에서 피사체 이미지 및 음향을 분석하는 단위로 분리하여 표시하도록 고려하며, 처리시간고려표시부에 의해 시청자의 인지 범위 안에서 처리 가능한 데이터의 효율을 고려하며, 상기 구분된 정보의 종류 및 환경에 따라 정보 적합성을 판단하기 위해서, 부가정보의 종류, 처리속도, 크기, 유지 시간 및 카테고리에 대한 가중치를 각각 부여하여, 가중치를 바탕으로 화면에 표시할 부가정보의 우선순위를 결정하고, 현재 출력되고 있는 정보들의 남은 유지 시간 및 우선순위 정보를 실시간으로 판단하여 타임라인을 구성하며, 사용자의 부가정보 사용 내역을 기록하여, 자주 사용하는 부가정보 리스트 값을 사용자별로 저장함으로써, 이를 통한 선호 정보를 반영하도록 할 수 있다.
상기 데이터베이스부는, 상기 부가정보인 출력물에 대한 유니크 아이디, 출력 위치, 출력 지속시간, 정보량, 출력 타입 및 세트 여부를 저장하는 출력물 데이터베이스부; 부가정보 중에서 고객이 구매하는 유료에 해당하는 부가정보의 상품 및 이의 세트 정보를 저장하는 스토어 데이터베이스부; 및 상기 고객의 정보, 구매 이력, 소지 상품 및 사용기한을 저장하는 고객 데이터베이스부;를 포함하고, 상기 정보적합성판단부는, 상기 고객이 제공하는 식별정보 또는 상기 고객이 운영하는 클라이언트시스템이 제공하는 식별정보로부터 상기 고객 데이터베이스부에서 상기 고객이 유료로 구매하여 사용 가능한 부가정보에 대한 상품을 검색하고, 상기 정보 적합성 판단시 무료 부가정보 뿐만 아니라 검색된 유료 부가정보도 함께 판단할 수 있다.
상기 영상물의 피사체에 적용되는 상기 출력정보선택부로부터 제공되는 부가정보가 물리값을 적용받아 상기 피사체의 움직임 또는 다른 피사체의 동작 영향으로 출력되는 방향이나 효과를 실시간으로 변형시키도록 하고, 상기 피사체의 특정부분을 인식하여 실시간으로 데이터화하여 부가 효과를 사용하도록 하는 부가정보출력부를 더 포함할 수 있다.
고객의 부가정보 사용 이력을 기록하여, 부가정보별 사용빈도를 기반으로 한 선호도 측정, 고객의 유료 기능 사용 빈도 기록, 광고 이벤트를 위한 사용 빈도를 산출하는 통계산출부를 더 포함할 수 있다.
본 발명에 따른 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템에 의하면, 영상물 제작 및 실시간 방송에 있어 별도의 추가 장비나 전문 인력 없이도 자막, 효과, 사운드 등의 부가 정보를 출력하여 송출 또는 저장할 수 있고, 이를 통해 영상물 제작 및 실시간 방송 제작을 위한 비용을 절감할 수 있으며, 전문 방송인이 제작하지 않은 인터넷 방송물의 경우에도 품질과 의미 전달력을 향상시키는 효과를 기대할 수 있다.
도 1은 본 발명의 일 실시례에 따른 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템을 도시한 구성도이다.
도 2는 본 발명의 일 실시례에 따른 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템의 인터렉션을 설명하기 위한 도면이다.
도 3은 본 발명의 일 실시례에 따른 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템의 데이터베이스부를 나타낸 구성도이다.
도 4 내지 도 8은 본 발명의 일 실시례에 따른 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템에 의해 부가정보가 표시된 영상물의 이미지를 예시적으로 나타낸다.
본 발명은 다양한 변경을 가할 수 있고, 여러 가지 실시례를 가질 수 있는 바, 특정 실시례들을 도면에 예시하고, 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니고, 본 발명의 기술 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 식으로 이해되어야 하고, 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 하기 실시례에 한정되는 것은 아니다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 실시례를 상세히 설명하며, 도면 부호에 관계없이 동일하거나 대응하는 구성요소에 대해서는 동일한 참조 번호를 부여하고, 이에 대해 중복되는 설명을 생략하기로 한다.
도 1은 본 발명의 일 실시례에 따른 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템을 도시한 구성도이다.
도 1을 참조하면, 본 발명의 일 실시례에 따른 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템(100)은 정보적합성판단부(120), 데이터베이스부(130) 및 출력정보선택부(140)를 포함할 수 있다.
정보적합성판단부(120)는 촬영수단(170)으로부터 획득되는 영상물로부터 정보를 획득하는 정보분류부(110)에 의해 구분된 정보를 제공받아, 실시간 방송 환경에서 유의미하게 사용할 수 있는 정보로서의 식별 및 부가정보 출력을 위해 구분된 정보의 종류 및 환경에 따라 정보 적합성을 판단한다.
정보적합성판단부(120)는 실시간 방송 환경에서 유의미하게 사용할 수 있는 정보로서의 식별 및 부가정보 출력 내지 표현을 위해서, 크게 시청자의 인지 범위와 기술적으로 처리 가능한 범위 등의 2가지 기준이 적용되는데, 이를 위해 시청자의 인지 가능 시간 내에 처리를 고려하고, 시청자의 인지 가능한 기준 데이터의 양 안에서 표시를 고려하며, 시청자의 인지 가능한 속도 및 효과의 범위 안에서 표시를 고려하고, 시청자의 인지 가능한 크기 및 화면에서의 비율을 고려함으로써, 정보분류부(110)에 의해 구분된 정보를 이에 연결되는 부가정보의 유의미한 사용 가능성을 통해서 적합성을 판별할 수도 있다. 정보적합성판단부(120)는 보다 구체적으로 인지시간고려표시부(121)에 의해 부가정보를 정해진 시간 동안, 예컨대 최소 1초 이상 화면에 표시하거나 오디오를 출력하도록 고려할 수 있고, 개연성고려표시부(122)에 의해 대사, 제스처 또는 상표를 노출한 후 정해진 시간, 예컨대 최대 3초 이내에 부가정보를 표시하도록 고려할 수 있으며, 정보량고려표시부(123)에 의해 부가정보의 위치 및 크기를 고려하여 영상물의 피사체와 겹치거나 상호 간섭되지 않게 표시하도록 고려함과 아울러, 영상물의 배경음과 부가정보의 효과음이 상호 겹쳐지지 않도록 고려할 수 있고, 인식가능고려표시부(124)에 의해 영상물에서 피사체의 이미지 및 음향을 분석하는 단위로 분리하여 표시하도록 고려할 수 있으며, 처리시간고려표시부(125)에 의해 시청자의 인지 범위 안에서 처리 가능한 데이터의 효율을 고려할 수 있다.
정보적합성판단부(120)는 구분된 정보의 종류 및 환경에 따라 정보 적합성을 판단하기 위해서, 부가정보의 종류, 처리속도, 크기, 유지 시간 및 카테고리에 대한 가중치를 각각 부여하여, 가중치를 바탕으로 화면에 표시할 부가정보의 우선순위를 결정하고, 현재 출력되고 있는 정보들의 남은 유지 시간 및 우선순위 정보를 실시간으로 판단하여 타임라인(메타데이터)을 구성하며, 사용자의 부가정보 사용 내역을 기록하여, 자주 사용하는 부가정보 리스트 값을 데이터베이스부(130)에 사용자별로 저장함으로써, 이를 통한 선호 정보를 반영하여 정보 처리의 효율을 높이도록 할 수 있다. 정보적합성판단부(120)에 의한 적합성 판단 및 정보 표시 순서는 영상물에서 표시되고 있는 정보와 새롭게 표시되고 있는 정보를 전달하고, 표시되고 있는 정보에 사용 가능한 부가정보를 선정하며, 선정한 부가정보들의 가중치를 판단하여 우선순위를 결정하고, 현재 영상물에 표시되고 있는 정보를 고려하여 시청자의 인지가 가능한 정보 리스트를 클라이언트 시스템으로 전달하도록 함으로써, 영상물에 부가정보를 출력할 수 있도록 한다. 또한 영상물에 대한 여러 정보 각각에 연결되는 부가정보간에 우선순위는 가중치에 의해 정해질 수 있는데, 예컨대, 유료 부가정보가 무료 부가정보에 우선하고, 한국어 자막이 외국어 자막에 우선하며, 사이즈가 허용되는 범위 내에서 큰 것이 작은 것에 비하여 우선하고, 영상물의 구분된 정보와 부가정보 간에 일치 내지 유사한 정도를 수치나 백분율로 나타낸 경우, 유사도가 높은 것이 우선하도록 구성될 수 있다. 또는 정보적합성판단부(120)는 이미지나 영상 등의 부가정보가 화면에서 차지하는 부분이 일정 범위, 예컨대 70%를 넘지 않도록 제한할 수 있으며, 음악에 해당하는 부가정보의 경우 정해진 시간, 예컨대 3~10초, 일례로 5초 정도에 재생되도록 제한할 수 있다.
도 3을 참조하면, 데이터베이스부(130)는 구분된 정보에 연결되는 다수의 부가정보에 대한 데이터베이스를 저장하도록 한다. 데이터베이스부(130)는 부가정보인 출력물에 대한 유니크 아이디, 출력 위치, 출력 지속시간, 정보량, 출력 타입 및 세트 여부를 저장하는 출력물 데이터베이스부(131)와, 부가정보 중에서 고객이 구매하는 유료에 해당하는 부가정보의 상품 및 이의 세트 정보를 저장하는 스토어 데이터베이스부(132)와, 고객의 정보, 구매 이력, 소지 상품 및 사용기한을 저장하는 고객 데이터베이스부(133)를 포함할 수 있다. 이와 같이, 데이터베이스부(130)는 출력물, 스토어 및 고객 데이터를 다중 구조로 설계하여 효율과 신뢰성을 향상시킬 수 있다.
정보적합성판단부(120)는 고객이 제공하는 식별정보 또는 고객이 운영하는 클라이언트 시스템이 제공하는 식별정보로부터 고객 데이터베이스부(133)에서 고객이 유료로 구매하여 사용 가능한 부가정보에 대한 상품을 검색하고, 정보 적합성 판단시 무료 부가정보 뿐만 아니라 검색된 유료 부가정보도 함께 판단할 수 있도록 한다. 유니크 아이디는 각 부가정보가 가지는 고유의 식별 아이디로서, 구분과 추적을 위해 사용된다. 정보의 타입은 안면, 음성, 동작, 문자, 이미지, 상표 중 어떤 정보에 대응할지를 기록한 것이다. 출력 타입은 화면에 출력할 정보의 종류, 자막, 효과, 사운드, 영상, 광고 등의 대분류는 물론 안면 감지(Face detection) 등의 기능 사용에 대한 내용도 포함하고 있다. 출력 위치 및 출력 지속시간은 출력물의 지속(가능) 시간, 위치 정보 가능 값과 속성을 기록한 것이다. 세트여부는 다수의 부가정보가 연관성 내지 동일 컨셉트를 가지도록 묶여서 함께 구매 내지 사용될 수 있는지를 나타낸다. 스토어 데이터베이스부(132)는 부가정보를 구매할 수 있는 아이템인 상품 취급 스토어 정보, 상품들의 정보, 세트로 구성한 경우 세트 아이템에 포함된 출력물의 유니크 아이디, 사용기한 등을 정보로서 저장하고 있다. 고객 데이터베이스부(133)는 고객 정보의 데이터베이스, 고객의 유니크 아이디, 구매이력, 소지 내지 사용 가능 상품, 상품의 남은 사용기한 등 뿐만 아니라, 고객별 설정 정보, 사용 빈도를 기록하여 고객 대응 효율을 향상시키도록 할 수 있다.
여기서, 클라이언트 시스템은 본 시스템에 해당하는 정보적합성판단부(120)의 정보 적합성 판단 과정을 통과하여 출력정보선택부(140)로부터 선택된 부가정보를 화면의 적정위치와 시간에 맞게 촬영수단(170)에 의해 획득되는 영상물에 실시간으로 부가하여 노출되도록 하는 실시간 방송 또는 실시간 영상 제공을 위한 시스템으로서, 피사체에 대한 영상물을 획득하기 위한 촬영수단(170)과, 촬영수단(170)에 의해 촬영된 영상물에 대하여, 안면, 음성, 동작, 상표 및 문자나 이미지를 구분된 정보로서 정보적합성판단부(120)에 제공하는 정보분류부(110)와, 출력정보선택부(140)로부터 제공되는 부가정보의 효과적 사용을 가능하도록 하는 부가정보출력부(150)를 포함할 수 있고, 촬영수단(170)으로부터 촬영된 영상물을 실시간 방송으로 제공하기 위해 제어함과 아울러, 촬영수단(170)에 의해 촬영된 영상물에 부가정보출력부(150)에 의해 제공되는 부가정보를 합성하여 실시간 방송으로 제공하도록 하는 출력제어부(181)와, 출력제어부(181) 등에 대한 동작 제어에 필요한 명령 입력과 요구되는 정보 입력을 위한 입력부(184)와, 출력제어부(181)에 의해 실시간 방송으로 출력되는 영상물의 디스플레이를 위한 디스플레이부(182)를 더 포함할 수 있다. 또한, 본 발명에 따른 시스템(100)은 일례로 본 실시례에서처럼 클라이언트 시스템과 통신부(183)에 의한 통신에 의해 정보를 주고받도록 연결되도록 구성되거나, 다른 예로서 단일의 본체에 의해 클라이언트 시스템과 일체를 이루도록 구성되거나, 또 다른 예로서 클라이언트 시스템과는 별개로 구성되나, 케이블을 통해서 정보를 주고받도록 연결되도록 구성될 수 있다.
본 실시례에서처럼 클라이언트 시스템이 본 발명에 따른 시스템(100)과의 통신을 위하여 추가로 마련되는 통신부(183)는 3G, LTE, Wi-Fi를 비롯하여 각종 통신 방식이 적용될 수 있다. 한편, 후술하게 될 정보분류부(110) 및 부가정보출력부(150)는 본 발명에 따른 시스템(100)에 위치하도록 구성될 수 있으나, 이들의 효율을 고려하여, 본 실시례에서처럼 클라이언트 시스템 내에 마련됨으로써, 클라이언트 시스템에 설치된 어플리케이션이나 프로그램에 의해 동작하는 구성장치들로 이루어질 수 있으며, 이로 인해 정보분류부(110) 및 부가정보출력부(150)가 통신부(183)에 의해 클라이언트 시스템의 외부에 위치하는 정보적합성판단부(120) 및 출력정보선택부(140)와의 정보나 신호의 송수신을 가능하도록 할 뿐만 아니라, 출력제어부(181)에 의한 영상물을 실시간 방송으로 전송하도록 하는 역할도 수행하게 된다. 여기서, 촬영수단(170)은 비디오의 획득을 위한 카메라(171)와, 오디오의 입력을 위한 마이크(172)와, 주변 환경을 센싱하기 위한 센서(173)를 포함한다. 센서(173)로는 일례로 뎁스센서가 사용될 수 있는데, 뎁스센서는 일례로 CMOS 센서와 적외선 레이저 빔 프로젝터로 구성되고, 적외선 레이저 빔이 조사되면, 반사된 레이저 빔 포인트를 CMOS 센서가 받아서 각 픽셀 당 거리가 측정되고 이들 데이터의 처리에 의해 피사체를 인식할 수 있도록 한다. 또한 클라이언트 시스템에는 오디오의 출력을 위하여 스피커(미도시)가 마련될 수도 있는데, 이는 별도로 마련되거나, 디스플레이부(182)에 일체를 이루도록 마련될 수 있다.
도 2를 참조하면, 클라이언트 시스템에서 부가정보출력부(150) 및 출력제어부(181)는 디스플레이부(182)나 실시간 방송에 의해, 화면에 노출된 부가정보에 의한 효과와 피사체의 인터렉션을 가능하도록 하는데, 기존의 부가정보를 특정 위치에 출력하기만 하던 것과는 달리, 실시간 랜더링, 물리 적용, 월드 좌표 사용 등을 통해 부가정보에 의한 효과(효과 A 및 B)가 피사체(피사체 A 및 B)에 적용시 특정한 중력 등의 물리 값을 적용받아, 피사체의 움직임 또는 다른 피사체 동작의 영향으로 출력되는 방향, 효과, 기타 값을 실시간으로 다양하게 변형할 수 있으며, 부가정보에 의한 효과(효과 C)를 단일로도 사용할 수도 있고, 피사체의 얼굴 등 화면의 특정 값을 인식하고, 이를 실시간으로 데이터화하여 부가정보로서 사용할 수도 있다.
도 1을 참조하면, 출력정보선택부(140)는 정보적합성판단부(120)에 의해 적합성을 가지는 것으로 판단되는 구분된 정보와 현재 표시되고 있는 부가정보에 대한 관련 정보를 전달받아, 시청자의 인지범위와 방송에 표시 가능한 부가정보의 타입을 결정하고, 결정된 부가정보의 타입 중에서 현재 영상물에 실시간 표현이 적합성을 가지는 부가정보의 타입을 데이터베이스부(130)에 저장된 데이터베이스에서 선택하여, 선택된 부가정보와 함께 이의 출력 조건에 대한 정보를 부가정보출력부(150)에 제공함으로써, 부가정보출력부(150)가 선택된 부가정보를 출력 조건을 만족시키면서 실시간 방송의 영상물에서 적절한 위치와 시간 동안 노출되도록 합성할 수 있다. 여기서 현재 표시되고 있는 부가정보에 대한 관련 정보로는 현재 표시되고 있는 부가정보의 리스트, 잔여 노출시간, 화면에서의 비중 및 처리 버퍼 등을 의미할 수 있다. 또한 적합성을 가지는 부가정보의 타입은 이미지, 오디오, 화면 비중 및 파일 사이즈, 처리속도 등을 의미할 수 있다. 또한 출력 조건에 대한 정보는 출력 시간, 화면 비중, 크기 등을 의미할 수 있다.
본 발명의 일 실시례에 따른 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템(100)은 촬영수단(170)으로부터 촬영된 영상물로부터 안면추출부(111)에 의해 안면을 추출하고, 오디오추출부(112)에 의해 음성을 추출하며, 동작추출부(113)에 의해 동작을 추출하고, 상표추출부(114)에 의해 상표를 추출하며, 문자/이미지추출부(115)에 의해 문자나 이미지를 추출함으로써, 영상물에 대하여, 안면, 음성, 동작, 상표 및 문자나 이미지를 구분된 정보로서 정보적합성판단부(120)에 제공하는 정보분류부(110)를 더 포함할 수 있다. 정보분류부(110)는 영상물에 등장하는 개별 또는 다수의 사람, 사물, 이미지 및 오디오, 배경 등의 피사체를 인식하고, 해당 피사체의 정보를 단계로 나누어 구분하는데, 장비 및 네트워크 효율성을 위하여 모든 정보를 그대로 정보적합성판단부(120)로 전송하지 않고, 클라이언트 시스템에서 먼저 정보를 분류하여 본 발명의 시스템(100) 측의 정보적합성판단부(120)에 전송하도록 하고, 입력된 영상 이미지와 오디오 정보를 분석하여 정보의 종류에 따라 구분한다.
정보의 종류에서 안면은 영상으로부터 특정 이미지 추출을 가능하도록 하는 이미지 프로세스 기술을 적용한 안면추출부(111)에 의해 피사체가 인물인 경우, 얼굴의 위치를 파악하고, 이목구비를 구분하기 위한 안면 주요 지점의 위치 정보 및 변화하는 경로를 트래킹함으로써 획득할 수 있다. 음성은 영상물에서 나오는 오디오 신호를 수집하여 음성을 텍스트로 변환하는 프로세스 기술을 적용한 오디오추출부(112)에 의해 음악, 특정 언어, 단어, 문장 여부를 판단함으로써 획득할 수 있다. 동작은 동작 피사체의 움직임을 인식하도록 하는 이미지 프로세스 기술을 적용한 동작추출부(113)에 의해 데이터베이스에 포함된 특정 형태 또는 제스처 여부와 그 내용을 판단함으로써 획득할 수 있다. 이미지로부터 데이터베이스부(130)에 저장된 특정 상표, 브랜드 및 제품을 추출하기 위한 이미지 프로세스 기술을 적용한 상표추출부(114)에 의해 상표와 함께 브랜드 및 제품을 판단함으로써 획득할 수 있다. 문자나 이미지는 이미지 프로세스 기술과 이미지로부터 텍스트를 추출 및 변환하는 프로세스 기술을 적용한 문자/이미지추출부(115)에 의해 문자, 이미지 영상물을 분석하여 문자 또는 QR 코드, 이미지 여부를 판단함으로써 획득할 수 있다.
또한 본 발명의 일 실시례에 따른 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템(100)은 영상물의 피사체에 적용되는 출력정보선택부(140)로부터 제공되는 부가정보가 물리값을 적용받아 피사체의 움직임 또는 다른 피사체의 동작 영향으로 출력되는 방향이나 효과를 실시간으로 변형시키도록 하고, 피사체의 특정부분을 인식하여 실시간으로 데이터화하여 부가 효과를 사용하도록 하는 부가정보출력부(150)를 더 포함할 수 있다.
또한 본 발명의 일 실시례에 따른 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템(100)은 고객의 부가정보 사용 이력을 기록하여, 부가정보별 사용빈도를 기반으로 한 선호도 측정, 고객의 유료 기능 사용 빈도 기록, 광고 이벤트를 위한 사용 빈도를 산출하는 통계산출부(160)를 더 포함할 수 있다. 통계산출부(160)는 고객의 부가정보 사용 이력을 기록하여, 부가정보 별 사용 빈도를 기반으로 한 선호도 측정, 유료 기능 사용 빈도 기록, 광고 등 이벤트를 위한 사용 빈도 집계 및 결과 리포트 제작을 위한 자료로 사용할 수 있는 통계 서버와 데이터베이스 실시간으로 반영된 자막 및 효과 등 부가정보의 사용 이력을 수집 및 데이터화하고, 이를 머신 러닝하여 사용자의 선호를 반영한 맞춤 서비스 및 기능을 제안할 수 있도록 하며, 특정 상표 등의 노출 건수, 화면에서의 비중 등 가중치를 계산하여 사용자별, 효과별 데이터를 수집하고, 정량화된 데이터를 간접 광고의 근거자료로 사용할 수 있다.
이와 같은 본 발명에 따른 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템에 따라, 실시간 방송에 부가정보를 합성한 예를 설명하면 다음과 같다.
도 4에서와 같이, 정보분류부(110)의 오디오추출부(112)에 의해 피사체의 음성을 인식하여 자막으로 표시할 수 있는데, 예컨대 "감사합니다"라는 사용자 대사를 오디오추출부(112)가 추출에 의해 인식하여 화면에 자막으로 표시하게 된다. 이때, 부가정보는 정보적합성판단부(120)에 의해 적합성 판단을 마치고서, 출력정보선택부(140)에 의해 선택된 바에 따라, 다수의 구분된 정보 중에서 선택된 부가정보에 대해서 효율적으로 정해진 위치, 크기 및 표시 시간 등을 따르도록 한다.
도 5에서와 같이, 정보분류부(110)의 오디오추출부(112)에 의해 피사체의 음성을 인식한 경우, 이에 해당하는 자막으로 표시하되, 정보분류부(110), 정보적합성판단부(120), 출력정보선택부(140) 및 부가정보출력부(150)에 의한 다국어 서비스에 의해서, 외국어를 인식하고, 인식된 언어에 해당하는 자막을 표시하도록 할 수 있다. 한편, 중국어 인사를 음성으로 인식시, 입력부(184)에 의한 입력에 의해, 음성에 해당하는 언어의 자막을 표시하거나, 이를 한국어로 번역된 자막으로 표시하도록 표현 언어에 대한 종류나 방식을 선택할 수 있다.
도 6에서와 같이, 정보분류부(110)의 상표추출부(114)에 의해 화면상의 제품 등에 표현된 특정상표를 인식시, 이러한 특정상표와 관련된 광고를 수행하도록 정보적합성판단부(120) 및 출력정보선택부(140)에 의해 적합성을 가지는 상표를 정해진 위치와 크기로 정해진 시간 동안 표시되도록 할 수 있다. 이때, 정보적합성판단부(120) 및 출력정보선택부(140)는 화면에 출력되는 배경, 자막 및 음향 등이 광고에 맞도록 미리 지정된 것을 따르도록 할 수 있다.
도 7에서와 같이, 정보분류부(110)에 의해 문자/이미지추출부(115)를 추출하면서 화면에서 지정된 색상을 인식시, 정보적합성판단부(120) 및 부가정보출력부(150)에 의해서 미리 정해진 크로마키 기법에 의해 지정된 색상으로 이미지 또는 영상을 변환할 수 있다.
도 8에서와 같이, 정보분류부(110)의 안면추출부(111)에 의해 피사체의 이목구비를 인식하여 안면을 추출하고, 얼굴에 맞는 가면을 부가정보로서 합성하거나, 이와 다른 예로서 땀 등을 부가정보로서 합성할 수 있고, 입벌리기 등의 표정 변화를 감지시, 이와 관련된 하품 등을 나타내거나, 정해진 음료나 음식을 섭취하도록 하는 의미의 부가정보가 합성되도록 할 수 있는데, 이러한 부가정보는 효과를 동적으로 표시할 수 있다.
이와 같은 본 발명에 따르면, 영상물 제작 및 실시간 방송에 있어 별도의 추가 장비나 전문 인력 없이도 자막, 효과, 사운드 등의 부가 정보를 출력하여 송출 또는 저장할 수 있고, 이를 통해 영상물 제작 및 실시간 방송 제작을 위한 비용을 절감할 수 있다.
또한 본 발명에 따르면, 전문 방송인이 제작하지 않은 인터넷 방송물의 경우에도 품질을 향상하는 효과를 기대할 수 있다.
이와 같이 본 발명에 대해서 첨부된 도면을 참조하여 설명하였으나, 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 수정 및 변형이 이루어질 수 있음은 물론이다. 그러므로, 본 발명의 범위는 설명된 실시례에 한정되어서는 아니되며, 후술하는 특허청구범위뿐만 아니라 이러한 특허청구범위와 균등한 것들에 의해 정해져야 한다.
110 : 정보분류부 111 : 안면추출부
112 : 오디오추출부 113 : 동작추출부
114 : 상표추출부 115 : 문자/이미지추출부
120 : 정보적합성판단부 121 : 인지시간고려표시부
122 : 개연성고려표시부 123 : 정보량고려표시부
124 : 인식가능고려표시부 125 : 처리시간고려표시부
130 : 데이터베이스부 131 : 출력물 데이터베이스부
132 : 스토어 데이터베이스부 133 : 고객 데이터베이스부
140 : 출력정보선택부 150 : 부가정보출력부
160 : 통계산출부 170 : 촬영수단
171 : 카메라 172 : 마이크
173 : 센서 181 : 출력제어부
182 : 디스플레이부 183 : 통신부
184 : 입력부

Claims (6)

  1. 촬영수단으로부터 획득되는 영상물로부터 정보를 획득하는 정보분류부에 의해 구분된 정보를 제공받아, 실시간 방송 환경에서 유의미하게 사용할 수 있는 정보로서의 식별 및 부가정보 출력을 위해 상기 구분된 정보의 종류 및 환경에 따라 정보 적합성을 판단하는 정보적합성판단부;
    상기 구분된 정보에 연결되는 다수의 부가정보에 대한 데이터베이스를 저장하는 데이터베이스부;
    상기 정보적합성판단부에 의해 적합성을 가지는 것으로 판단되는 구분된 정보와 현재 표시되고 있는 부가정보에 대한 관련 정보를 전달받아, 시청자의 인지범위와 방송에 표시 가능한 부가정보의 타입을 결정하고, 결정된 부가정보의 타입 중에서 현재 영상물에 실시간 표현이 적합성을 가지는 부가정보의 타입을 상기 데이터베이스부에 저장된 데이터베이스에서 선택하여, 선택된 부가정보와 함께 이의 출력 조건에 대한 정보를 부가정보출력부에 제공함으로써, 상기 부가정보출력부가 상기 선택된 부가정보를 상기 출력 조건을 만족시키면서 실시간 방송의 영상물에 합성하도록 하는 출력정보선택부;
    상기 촬영수단으로부터 촬영된 영상물로부터 안면추출부에 의해 안면을 추출하고, 오디오추출부에 의해 음성을 추출하며, 동작추출부에 의해 동작을 추출하고, 상표추출부에 의해 상표를 추출하며, 문자/이미지추출부에 의해 문자나 이미지를 추출함으로써, 상기 영상물에 대하여, 안면, 음성, 동작, 상표 및 문자나 이미지를 상기 구분된 정보로서 상기 정보적합성판단부에 제공하는 정보분류부;
    를 포함하는, 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템.
  2. 삭제
  3. 청구항 1에 있어서,
    상기 정보적합성판단부는,
    실시간 방송 환경에서 유의미하게 사용할 수 있는 정보로서의 식별 및 부가정보 출력을 위해서, 인지시간고려표시부에 의해 부가정보를 정해진 시간 동안 화면에 표시하거나 오디오를 출력하도록 고려하고, 개연성고려표시부에 의해 대사, 제스처 또는 상표를 노출한 후 정해진 시간 이내에 부가정보를 표시하도록 고려하며, 정보량고려표시부에 의해 부가정보의 위치 및 크기를 고려하여 영상물의 피사체와 겹치거나 상호 간섭되지 않게 표시하도록 고려함과 아울러 영상물의 배경음과 부가정보의 효과음이 상호 겹쳐지 않도록 고려하고, 인식가능고려표시부에 의해 영상물에서 피사체 이미지 및 음향을 분석하는 단위로 분리하여 표시하도록 고려하며, 처리시간고려표시부에 의해 시청자의 인지 범위 안에서 처리 가능한 데이터의 효율을 고려하며, 상기 구분된 정보의 종류 및 환경에 따라 정보 적합성을 판단하기 위해서, 부가정보의 종류, 처리속도, 크기, 유지 시간 및 카테고리에 대한 가중치를 각각 부여하여, 가중치를 바탕으로 화면에 표시할 부가정보의 우선순위를 결정하고, 현재 출력되고 있는 정보들의 남은 유지 시간 및 우선순위 정보를 실시간으로 판단하여 타임라인을 구성하며, 사용자의 부가정보 사용 내역을 기록하여, 자주 사용하는 부가정보 리스트 값을 사용자별로 저장함으로써, 이를 통한 선호 정보를 반영하도록 하는, 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템.
  4. 청구항 1에 있어서,
    상기 데이터베이스부는,
    상기 부가정보인 출력물에 대한 유니크 아이디, 출력 위치, 출력 지속시간, 정보량, 출력 타입 및 세트 여부를 저장하는 출력물 데이터베이스부;
    부가정보 중에서 고객이 구매하는 유료에 해당하는 부가정보의 상품 및 이의 세트 정보를 저장하는 스토어 데이터베이스부; 및
    상기 고객의 정보, 구매 이력, 소지 상품 및 사용기한을 저장하는 고객 데이터베이스부;를 포함하고,
    상기 정보적합성판단부는,
    상기 고객이 제공하는 식별정보 또는 상기 고객이 운영하는 클라이언트시스템이 제공하는 식별정보로부터 상기 고객 데이터베이스부에서 상기 고객이 유료로 구매하여 사용 가능한 부가정보에 대한 상품을 검색하고, 상기 정보 적합성 판단시 무료 부가정보 뿐만 아니라 검색된 유료 부가정보도 함께 판단하는, 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템.
  5. 청구항 1에 있어서,
    상기 영상물의 피사체에 적용되는 상기 출력정보선택부로부터 제공되는 부가정보가 물리값을 적용받아 상기 피사체의 움직임 또는 다른 피사체의 동작 영향으로 출력되는 방향이나 효과를 실시간으로 변형시키도록 하고, 상기 피사체의 특정부분을 인식하여 실시간으로 데이터화하여 부가 효과를 사용하도록 하는 부가정보출력부를 더 포함하는, 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템.
  6. 청구항 1에 있어서,
    고객의 부가정보 사용 이력을 기록하여, 부가정보별 사용빈도를 기반으로 한 선호도 측정, 고객의 유료 기능 사용 빈도 기록, 광고 이벤트를 위한 사용 빈도를 산출하는 통계산출부를 더 포함하는, 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템.
KR1020170127155A 2017-09-29 2017-09-29 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템 KR101914661B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170127155A KR101914661B1 (ko) 2017-09-29 2017-09-29 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170127155A KR101914661B1 (ko) 2017-09-29 2017-09-29 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템

Publications (1)

Publication Number Publication Date
KR101914661B1 true KR101914661B1 (ko) 2018-11-06

Family

ID=64329753

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170127155A KR101914661B1 (ko) 2017-09-29 2017-09-29 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템

Country Status (1)

Country Link
KR (1) KR101914661B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210048061A (ko) * 2019-10-23 2021-05-03 장운석 영상 스트리밍 서비스에서 사용자와 방송진행자와의 소통을 통한 광고를 게시하는 방법과 이에 웹과 모바일 ui에 응답하는 기술에 관한 방법
WO2022149687A1 (ko) * 2021-01-07 2022-07-14 삼성전자주식회사 전자 장치 및 이의 제어 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004094715A (ja) 2002-09-02 2004-03-25 Oki Electric Ind Co Ltd 情報付与装置及び情報付与システム
JP2005303749A (ja) * 2004-04-14 2005-10-27 Matsushita Electric Ind Co Ltd 表示付加情報処理装置および表示付加情報処理方法
JP2012142739A (ja) * 2010-12-28 2012-07-26 Olympus Corp 画像処理装置、画像処理方法、および撮像装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004094715A (ja) 2002-09-02 2004-03-25 Oki Electric Ind Co Ltd 情報付与装置及び情報付与システム
JP2005303749A (ja) * 2004-04-14 2005-10-27 Matsushita Electric Ind Co Ltd 表示付加情報処理装置および表示付加情報処理方法
JP2012142739A (ja) * 2010-12-28 2012-07-26 Olympus Corp 画像処理装置、画像処理方法、および撮像装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210048061A (ko) * 2019-10-23 2021-05-03 장운석 영상 스트리밍 서비스에서 사용자와 방송진행자와의 소통을 통한 광고를 게시하는 방법과 이에 웹과 모바일 ui에 응답하는 기술에 관한 방법
KR102383811B1 (ko) * 2019-10-23 2022-04-18 장운석 영상 스트리밍 서비스에서 사용자와 방송진행자와의 소통을 통한 광고를 게시하는 방법과 이에 웹과 모바일 ui에 응답하는 기술에 관한 방법
WO2022149687A1 (ko) * 2021-01-07 2022-07-14 삼성전자주식회사 전자 장치 및 이의 제어 방법

Similar Documents

Publication Publication Date Title
US9560411B2 (en) Method and apparatus for generating meta data of content
KR102166423B1 (ko) 디스플레이 장치, 서버 장치 및 디스플레이 장치의 이벤트 정보 제공 방법
JP4538756B2 (ja) 情報処理装置、情報処理端末、情報処理方法、およびプログラム
US7735105B2 (en) Broadcast receiving method
JP3678422B2 (ja) 配信システム、配信装置及び広告効果集計方法
CN108337532A (zh) 演出片段的标注方法、视频播放方法、装置及***
JP4469905B2 (ja) テロップ収集装置およびテロップ収集方法
US20080143481A1 (en) Automatically embedding information concerning items appearing in interactive video by using rfid tags
JP6265572B2 (ja) ウェアラブルメディアデバイスで提示されたメディアとの関与を検出するための方法及び装置
CN103838808A (zh) 信息处理装置、信息处理方法和程序
JP2006236218A (ja) 電子アルバム表示システム、電子アルバム表示方法、及び電子アルバム表示プログラム
JP2012238232A (ja) 興味区間検出装置、視聴者興味情報提示装置、および興味区間検出プログラム
KR101914661B1 (ko) 영상물의 피사체 자동 인식기능을 통한 실시간 방송 서비스용 부가정보 표시 시스템
KR20090121016A (ko) 시청자 반응 측정 방법 및 시스템
JP2021509201A (ja) 映像前処理方法、装置及びコンピュータプログラム
KR101867950B1 (ko) 생방송 및 영상서비스용 실시간 부가정보 표시 시스템
KR101181732B1 (ko) 동영상 핑거프린트 정보에 기반한 동영상 마크업 데이터 생성 방법 및 이를 이용한 정보 제공 방법 및 시스템
KR101502984B1 (ko) 콘텐츠 내 객체 정보 및 객체 기반의 응용 콘텐츠를 제공하는 방법 및 장치
CN106713973A (zh) 搜索节目的方法及装置
JP4534791B2 (ja) Ｃｍ検索方法、ｃｍ検索結果受給方法、ｃｍ検索装置、ｃｍ検索結果受給装置及びｃｍ録画予約システム
JP2006237878A (ja) Ｃｍ付加情報供給方法、ｃｍ付加情報供給装置、ｃｍ付加情報受給装置及びｃｍ付加情報供給システム
KR101914665B1 (ko) 피사체 자동 인식기능을 통한 부가정보 표시 영상 제공장치
JP2014060642A (ja) 表示装置及び表示システム
KR101930488B1 (ko) 연동형 서비스 제공을 위한 메타데이터 생성 방법 및 그를 위한 장치
JP4522966B2 (ja) 背景映像の選択頻度統計機能付きカラオケシステム

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
R401 Registration of restoration