KR20140126936A - 실시간 영상에 프라이버시 마스킹 툴을 제공하는 장치 및 방법 - Google Patents

실시간 영상에 프라이버시 마스킹 툴을 제공하는 장치 및 방법 Download PDF

Info

Publication number
KR20140126936A
KR20140126936A KR1020130045222A KR20130045222A KR20140126936A KR 20140126936 A KR20140126936 A KR 20140126936A KR 1020130045222 A KR1020130045222 A KR 1020130045222A KR 20130045222 A KR20130045222 A KR 20130045222A KR 20140126936 A KR20140126936 A KR 20140126936A
Authority
KR
South Korea
Prior art keywords
masking
image
privacy
tool
detected
Prior art date
Application number
KR1020130045222A
Other languages
English (en)
Other versions
KR101484844B1 (ko
Inventor
정영규
Original Assignee
정영규
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 정영규 filed Critical 정영규
Priority to KR20130045222A priority Critical patent/KR101484844B1/ko
Publication of KR20140126936A publication Critical patent/KR20140126936A/ko
Application granted granted Critical
Publication of KR101484844B1 publication Critical patent/KR101484844B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/23Clustering techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Computation (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 실시간 영상에 프라이버시 마스킹 툴을 제공하는 장치 및 방법에 관한 것으로, 반자동 프라이버시 마스킹 툴을 이용하여 실시간으로 객체를 추적하는 마스킹 방법에 관한 것이다. 프라이버시 마스킹 툴을 제공하는 장치는 재생되고 있는 영상에서 검출된 부분에 마스킹을 수행하고 검출된 객체를 실시간으로 추적하여 마스킹 되는 객체 영역을 마스킹 타임라인에 프레임 단위로 제공하는 파노라마 영상을 표시하고 검색한다. 최종으로 마스킹된 프라이버시 마스킹 영상이 동영상으로 저장된다. 또한 프라이버시 마스킹 툴을 제공하는 장치는 사용자의 조작에 의해 마스킹 중 정지 및 재마스킹을 할 수 있도록 인터렉션 인터페이스를 제공한다.

Description

실시간 영상에 프라이버시 마스킹 툴을 제공하는 장치 및 방법{APPARATUS AND METHOD FOR PRIVACY MASKING TOOL THAT PROVIDES REAL-TIME VIDEO}
본 발명은 영상에 프라이버시 마스킹 툴을 제공하는 장치 및 방법에 관한 것으로, 프라이버시 마스킹 툴을 이용하여 객체를 추적하고 마스킹하는 방법에 관한 것이다.
시민들의 안전을 위해 설치된 감시용 카메라가 악용되는 사례가 늘면서 감시용 카메라에 촬영된 영상에서 실시간으로 사람 얼굴을 추적하고 모자이크 처리하여 사생활을 보호하는 기술이 개발되고 있다. 하지만 감시용 카메라 영상에서 통계기반의 객체 검출 및 추적 시스템의 성능개선에 가장 큰 어려움 중 하나는 검출하려는 객체에 대해서 확률적인 의미를 갖는 템플릿데이터를 수집하기가 매우 어렵다는 것이다.
감시용 카메라에서의 프라이버시 마스킹 설정 방법에 관련하여 한국공개특허 제2006-0022725호는, 사용자가 정보를 설정한 화면상 특정 위치에 가상 마스킹 블록을 감시용 비디오 영상에 중첩 표시한다. 감시용 카메라에 구비되어 있는 입력수단을 통한 사용자의 프라이버시 마스킹 블록 수정시, 수정된 마스킹 블록에 대한 정보를 저장한다. 상기 저장된 정보를 갖는 프라이버시 마스킹 블록을 감시용 비디오 영상에 중첩 표시하는 프라이버시 마스킹 설정방법을 제안하고 있다.
하지만 종래의 프라이버시 마스킹 툴은 초당 30프레임으로 재생되고, 영상에서 어느 부분에서 마스킹이 이루어지지 않았는지 알기가 매우 어렵다. 따라서 프라이버시 마스킹 툴의 객체 검출 및 추적 알고리즘의 성능을 개선하여 객체를 검출하고 검출된 객체를 추적하여 마스킹하는 기술이 필요하다.
본 발명은 프라이버시 마스킹 툴을 이용해서 한 프레임도 빠짐없이 객체영역을 마스킹하는 장치 및 방법을 제공한다.
본 발명은 실시간으로 마스킹 위치를 모니터링하여 프라이버시 재마스킹을 제공하는 장치 및 방법을 제공한다.
본 발명의 일실시예에 따른 프라이버시 마스킹 툴을 제공하는 장치에 있어서 객체를 검출하고 검출된 부분에 마스킹을 수행하는 동영상 플레이 출력부; 상기 검출된 객체를 실시간으로 추적하여 추적된 객체 영역을 표시하는 실시간 객체추적 표시부; 및 상기 마스킹되는 객체 영역을 마스킹 타임라인에 따라 프레임 단위로 제공하는 파노라마 영상을 표시하고, 사용자의 선택에 따라 객체 추적 오류가 발견되는 영상을 검색하는 파노라마 영상표시 및 검색부를 포함하고, 상기 동영상 플레이 출력부는 상기 객체 추적 오류가 발견되어 선택된 영상을 출력하고, 상기 사용자의 명령에 따라 상기 출력된 영상에 대한 재마스킹을 수행하는 것을 특징으로 하는 프라이버시 마스킹 툴을 제공하는 장치를 제공한다.
일측에 따르면, 상기 재마스킹은 상기 마스킹되는 객체 영역을 수정하고, 수정된 객체 영역이 마스킹되어 저장됨으로써 수행되는 것을 특징으로 하는 프라이버시 마스킹 툴을 제공하는 장치를 제공한다.
또 다른 일측에 따르면, 상기 동영상 플레이 출력부, 상기 실시간 객체추적 표시부 및 상기 파노라마 영상표시 및 검색부는 마스킹 중 정지 및 재마스킹 기능을 포함하는 인터렉션 마스킹 인터페이스를 통해 구현되는 것을 특징으로 하는 프라이버시 마스킹 툴을 제공하는 장치를 제공한다.
또 다른 일측에 따르면, 상기 인터렉션 마스킹 인터페이스는 상기 파노라마 영상표시 및 검색부를 통해 표시되는 상기 파노라마 영상에 기초하여 마스킹을 하는 중에 상기 객체 추적 오류가 발견될 경우 상기 사용자의 선택에 따라 상기 마스킹을 정지시키는 정지버튼을 포함하고, 상기 정지버튼이 선택된 후 상기 동영상 플레이 출력부를 통해 표시되는 상기 출력된 영상에 대해 상기 사용자의 명령에 따라 마스킹 상자를 이동시키며, 상기 인터렉션 마스킹 인터페이스를 통한 상기 마스킹 상자의 이동에 따라 상기 재마스킹이 수행되는 것을 특징으로 하는 프라이버시 마스킹 툴을 제공하는 장치를 제공한다.
또 다른 일측에 따르면, 상기 재마스킹이 수행되는 도중에도 또 다른 실시간 영상에 대해서 실시간 객체추적 및 마스킹이 동시에 수행되는 것을 특징으로 하는 프라이버시 마스킹 툴을 제공하는 장치를 제공한다.
또 다른 일측에 따르면, 상기 프라이버시 마스킹 툴은 대용량 영상을 분석하여 객체를 검출하고, 검출된 객체를 복수 개의 단위로 클러스터링하여 객체를 검출하고 추적하는 프라이버시 마스킹 툴을 제공하는 장치를 제공한다.
본 발명의 일실시예에 따른 프라이버시 마스킹 툴을 제공하는 방법에 있어서 객체를 검출하고 검출된 부분에 마스킹을 수행하는 단계; 상기 검출된 객체를 실시간으로 추적하여 추적된 객체 영역을 표시하는 단계; 상기 마스킹되는 객체 영역을 마스킹 타임라인에 따라 프레임 단위로 제공하는 파노라마 영상을 표시하고, 사용자의 선택에 따라 객체 추적 오류가 발견되는 영상을 검색하는 단계; 및 상기 객체 추적 오류가 발견되어 선택된 영상을 출력하고, 상기 사용자의 명령에 따라 상기 출력된 영상에 대한 재마스킹을 수행하는 단계를 포함하는 프라이버시 마스킹 툴을 제공하는 방법을 제공한다.
일측에 따르면, 프라이버시 마스킹 툴을 제공하는 방법은 마스킹을 수행하기 위해 객체를 마스킹 상자로 지정하는 단계; 상기 마스킹 상자로 지정한 상기 객체 영역이 마스킹을 수행하는 단계; 상기 마스킹되는 객체 영역을 마스킹 타임라인에 따라 프레임 단위로 제공하는 파노라마 영상을 표시하고, 상기 마스킹 타임라인에서 상기 마스킹이 수행된 객체 영역을 추적하여 오류를 확인하는 단계; 및 상기 마스킹이 수행된 영상들을 단일의 영상으로 제작 혹은 전체 영상을 최종 영상으로 제작되는 단계를 포함하는 프라이버시 마스킹 툴을 제공하는 방법을 제공한다.
또 다른 일측에 따르면, 상기 객체 추적 오류가 발견되어 선택된 영상을 출력하고, 상기 사용자의 명령에 따라 상기 출력된 영상에 대한 재마스킹을 수행하는 단계는 마스킹 타임라인에 있는 상기 객체 추적 오류가 있는 프레임을 선택하여 동영상이 플레이되는 출력부로 되돌아가는 단계; 상기 동영상이 플레이되는 출력부에서 사용자의 명령에 의해 마스킹 상자를 삭제하는 단계; 및 마스킹을 수행하기 위해 객체를 마스킹 상자로 재설정하여 상기 객체 영역이 마스킹되어 저장됨으로써 수행되는 단계를 포함하는 프라이버시 마스킹 툴을 제공하는 방법을 제공한다.
또 다른 일측에 따르면, 상기 객체 추적 오류가 발견되어 선택된 영상을 출력하고, 상기 사용자의 명령에 따라 상기 출력된 영상에 대한 재마스킹을 수행하는 단계는 상기 재마스킹이 수행되는 도중에도 또 다른 실시간 영상에 대해서 실시간 객체 추적 및 마스킹이 동시에 수행되는 단계를 포함하는 프라이버시 마스킹 툴을 제공하는 방법을 제공한다.
본 발명은 영상에서 객체를 추적하고, 추적한 객체를 마스킹하여 마스킹 타임라인에 파노라마 영상으로 표시함으로써 한 프레임도 빠짐없이 객체 영역을 마스킹 할 수 있다.
본 발명은 실시간으로 재생되고 있는 영상에서 마스킹을 수행하는 중에 객체추적 오류를 발견하면 마스킹 정지 및 프라이버시 재마스킹을 할 수 있다.
도 1은 본 발명의 일실시예에 따른 프라이버시 마스킹 툴의 화면 구성을 나타낸 블록도이다.
도 2는 본 발명의 일실시예에 따른 프라이버시 마스킹 툴을 제공하는 장치에 관한 블록도이다.
도 3은 본 발명의 일실시예에 따른 프라이버시 마스킹 툴을 제공하는 장치 및 방법을 설명하기 위한 실제화면이다.
도 4는 본 발명의 일실시예에 따른 프라이버시 마스킹 툴을 제공하는 장치의 기능을 나타낸 도면이다.
도 5는 본 발명의 일실시예에 따른 프라이버시 마스킹 처리 동작을 나타낸 흐름도이다.
도 6은 본 발명의 일실시예에 따른 영상 빅데이터 기반에서 객체 템플릿 자동 수집 및 추적 알고리즘을 나타낸 도면이다.
도 7은 본 발명의 일실시예에 따른 영상 빅데이터 기반에서 실시간 템플릿 생성을 나타낸 도면이다.
이하, 본 발명의 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 본 발명의 일실시예에 따른 프라이버시 마스킹 툴의 화면 구성을 나타낸 블록도이다.
프라이버시 마스킹 툴의 화면은 동영상 플레이 출력 인터페이스(110), 실시간 객체추적 표시 인터페이스(120), 파노라마 영상표시 및 검색 인터페이스(130)를 포함할 수 있다. 도 1에 도시된 바와 같이, 동영상 플레이 출력 인터페이스 (110)는 현재 플레이되고 있는 영상에서 객체를 검출하고 검출된 부분에 마스킹을 수행하기 위한 인터페이스일 수 있고, 실시간 객체추적 표시 인터페이스(120)는 동영상 플레이 출력 인터페이스(110)에서 출력되는 객체를 실시간으로 추적하여 추적된 객체 영역을 표시하기 위한 인터페이스일 수 있다. 파노라마 영상표시 및 검색 인터페이스(130)는 마스킹되는 객체 영역을 마스킹 타임라인에 프레임 단위로 제공하는 파노라마 영상을 표시하고, 사용자의 선택에 따라 객체 추적 오류가 발견되는 영상을 검색하기 위한 인터페이스일 수 있다.
파노라마 영상표시 및 검색 인터페이스(130)를 통해 표시되는 파노라마 영상에 기초하여 실시간으로 마스킹을 하는 중에 객체추적 오류가 발견될 경우 도 3에서 도시한 화면과 같이, 사용자가 마스킹을 정지시키는 정지버튼을 눌러 동영상 플레이 출력 인터페이스(110)로 이동시킬 수 있다. 사용자에 의해 정지버튼이 선택된 후 동영상 플레이 출력 인터페이스(110)를 통해 표시되는 출력된 영상에 대하여 사용자는 마스킹을 수행하려는 객체에 마스킹 상자를 이동시켜 마스킹을 재수행할 수 있다.
도 2는 본 발명의 일실시예에 따른 프라이버시 마스킹 툴을 제공하는 장치에 관한 블록도이다.
도 2는 도 1에서 설명한 마스킹 툴의 화면을 포함하고 있는 마스킹 툴을 제공하는 장치(200)에 관한 블록도를 나타낸 것으로, 프라이버시 툴을 제공하는 장치(200)는 동영상 플레이 출력부(210), 실시간 객체추적 표시부(220), 파노라마 영상표시 및 검색부(230)로 구성될 수 있다.
동영상 플레이 출력부(210)는 현재 플레이되고 있는 영상에서 객체를 검출하고 검출된 부분에 마스킹을 수행할 수 있다. 이때, 동영상 플레이 출력부(210)는 사용자에 의해 직접 마스킹이 수행될 수 있다. 도 4-a에서 도시한 바와 같이, 동영상 플레이 출력부(210)는 객체를 검출하고 검출된 부분에 마스킹이 수행되고 있다. 실시간 객체추적 표시부(220)는 동영상 플레이 출력부(210)에서 검출된 객체를 실시간으로 추적하여 추적된 객체 영역을 표시할 수 있다. 도 4-b를 참고하면, 실시간 객체추적 표시부(220)는 동영상 플레이 출력부(210)에서 검출된 객체가 세 개의 객체이므로, 실시간 객체추적 표시부(220)에 세 개의 검출된 객체를 표시할 수 있다.
도 4-c에서 도시한 바와 같이, 파노라마 영상표시 및 검색부(230)는 마스킹되는 객체 영역을 마스킹 타임라인에 따라 프레임 단위로 제공하는 파노라마 영상을 표시하고, 사용자의 선택에 따라 객체 추적 오류가 발견되는 영상을 검색할 수 있다.
또한 동영상 플레이 출력부(210)는 객체 추적 오류가 발견될 경우, 파노라마 영상표시 및 검색부(230)에서 객체 추적 오류가 발견된 영상을 선택하고, 선택한 객체 추적 오류가 발견된 영상이 출력될 수 있다. 사용자의 명령에 따라 출력된 영상에 대한 재마스킹을 수행한다. 객체 오류 발견되어 재마스킹이 수행되는 마스킹 처리 방법은 도 5에서 상세히 설명한다.
마스킹 툴을 제공하는 장치에서 동영상 플레이 출력부(210), 실시간 객체추적 표시부(220), 파노라마 영상표시 및 검색부(230)는 마스킹 중 정지 및 재마스킹을 포함하는 인터렉션 마스킹 인터페이스를 통해 구현된다. 도 3에 도시된 바와 같이, 파노라마 영상표시 및 검색 인터페이스를 통해 표시되는 파노라마 영상에 기초하여 마스킹을 하는 중에 객체 추적 오류가 발견될 경우 사용자의 선택에 따라 마스킹을 정지시키는 정지버튼을 포함한다. 정지버튼이 선택된 후 동영상 플레이 출력 인터페이스를 통해 표시되는 출력된 영상에 대해 사용자의 명령에 따라 마스킹 상자를 이동시키며, 인터렉션 마스킹 인터페이스를 통한 마스킹 상자의 이동에 의해 재마스킹이 수행될 수 있다. 따라서 실시간으로 재생되고 있는 영상에서 마스킹을 수행하는 중에 객체추적 오류를 발견하여 재마스킹을 수행할 수 있다.
프라이버시 툴을 제공하는 장치(200)는 도 6에 도시한 바와 같이, 대용량 영상에서도 동영상 플레이 출력부(210), 실시간 객체추적 표시부(220), 파노라마 영상표시 및 검색부(230)를 포함할 수 있으며, 프라이버시 마스킹 처리는 프라이버시 마스킹을 제공하는 인터페이스에 의해 수행될 수 있다.
도 3은 본 발명의 일실시예에 따른 프라이버시 마스킹 툴을 제공하는 장치 및 방법을 설명하기 위한 실제화면이다.
도 3에서 프라이버시 마스킹 툴의 화면은 동영상 플레이 출력 인터페이스(310), 실시간 객체추적 표시 인터페이스(320), 파노라마 영상표시 및 검색 인터페이스(330)를 포함할 수 있다. 동영상 플레이 출력 인터페이스(310), 실시간 객체추적 표시 인터페이스(320) 및 파노라마 영상표시 및 검색 인터페이스(330)는 마스킹 중 정지 및 재마스킹 기능을 포함하는 인터렉션 마스킹 인터페이스를 통해 구현될 수 있다.
마스킹 툴을 제공하는 장치 및 방법을 설명하기 위한 실제화면에 있어서, 사용자의 조작을 통해 마스킹 동작이 수행될 수 있도록, 정지, 재생, 빨리감기, 되감기 등의 조작버튼(340)을 포함할 수 있다. 마스킹 타임라인(350)에서는 프레임 단위의 파노라마 영상을 표시하는데, 프레임을 사용자의 필요에 따른 시간단위로 파노라마 영상을 표시할 수 있다. 예를 들어, 사용자가 5초 단위로 프레임을 저장하고 싶다면 5초를 지정하고, 마스킹되는 객체 영역을 마스킹 타임라인(350)에 따라 5초 단위의 프레임을 제공하는 파노라마 영상을 표시할 수 있다.
또한, 인터렉션 마스킹 인터페이스는 파노라마 영상표시 및 검색 인터페이스(330)를 통해 표시되는 파노라마 영상에 기초하여 마스킹이 수행되는 중에 객체영역 오류를 발견하면, 사용자는 정지버튼을 눌러 재생되고 있는 영상을 정지시킬 수 있고, 정지버튼이 선택된 후 동영상 플레이 출력 인터페이스(310)를 통해 표시되는 출력된 영상에 대하여 사용자는 마스킹 하려는 객체에 마스킹 상자를 이동시킨 후, 일정시간 동안 자동 마스킹을 함으로써 재마스킹이 수행될 수 있다.
조작버튼(340) 중 빨리감기 기능은 마스킹이 수행되고 있는 영상이 오류 없이 수행되고 있다면 속도를 높여 영상을 재생할 수 있고, 되감기 기능은 이미 수행된 영상을 확인하고 싶을 때 사용자가 원하는 영상의 위치로 되돌릴 수 있다.
마스킹 툴을 제공하는 방법은 동영상 플레이 출력부에서 객체를 검출하고 검출된 부분에 마스킹을 수행하는 단계, 검출된 객체를 실시간으로 추적하여 추적된 객체 영역을 표시하는 단계, 마스킹되는 객체 영역을 마스킹 타임라인에 따라 프레임 단위로 제공하는 파노라마 영상을 표시하고, 사용자의 선택에 따라 객체 추적 오류가 발견되는 영상을 검색하는 단계 및 객체 추적 오류가 발견되어 선택된 영상을 출력하고, 사용자의 명령에 따라 출력된 영상에 대한 재마스킹을 수행하는 단계를 포함한다. 프라이버시 마스킹 처리 동작은 도 5에서 흐름도를 통해 상세하게 설명하도록 한다.
도 4는 본 발명의 일실시예에 따른 프라이버시 마스킹 툴을 제공하는 장치의 기능을 나타낸 도면이다.
도 4-a는 본 발명의 일실시예에 따른 프라이버시 마스킹 툴을 제공하는 동영상 플레이 출력부를 나타낸 것으로, 도 3에서 도시한 바와 같이, 동영상 플레이 출력부는 마스킹 하려는 객체(410,420,430)를 검출하고 검출된 객체(410,420,430)부분에 마스킹 상자로 지정하여 마스킹을 수행할 수 있다.
도면 4-b는 본 발명의 일실시예에 따른 프라이버시 마스킹 툴을 제공하는 실시간 객체추적 표시부를 나타낸 것으로, 실시간 객체추적 표시부는 동영상 플레이 출력부에서 검출된 객체(410,420,430) 영역을 표시할 수 있다. 만약 검출된 객체가 한 명이면, 하나의 객체, 검출된 사람이 두 명이면, 두 개의 객체를 실시간 객체추적 표시부에 나타낼 수 있다. 따라서 도면 4-a의 동영상 플레이 출력부에서 객체(410,420,430)를 검출하고 마스킹을 수행한 부분이 세 개의 영역이므로, 도면 4-b의 실시간 객체 추적 표시부에서는 세 개의 검출된 객체(410,420,430)를 표시하게 된다.
도면 4-c는 본 발명의 일실시예에 따른 프라이버시 마스킹 툴을 제공하는 파노라마 영상표시 및 검색부를 나타낸 것으로, 현재 동영상 플레이 출력부에서 마스킹이 수행되고 있는 객체 영역을 마스킹 타임라인에 프레임 단위로 파노라마 영상을 표시할 수 있다. 파노라마 영상표시 및 검색부는 파노라마 영상을 클릭할 경우, 실제 영상인 동영상 플레이 출력부로 이동하는 기능을 포함할 수 있다.
인터렉션 인터페이스를 통한 마스킹 툴을 제공하는 장치에 관해서는 도 3에서 설명한 바, 생략하기로 한다. 또한 도 5에서 프라이버시 마스킹 툴을 제공하는 장치에서 프라이버시 마스킹을 처리하는 동작을 상세히 설명한다.
도 5는 본 발명의 일실시예에 따른 프라이버시 마스킹 처리 동작을 나타낸 흐름도이다.
프라이버시 마스킹 툴을 제공하는 장치가 반자동 마스킹을 수행하는 과정에 있어서, 마스킹 상자와 마스킹 타임라인과의 관계를 전체 수행과정으로 나타낸 흐름도이며, 프라이버시 마스킹 툴을 제공하는 방법은 프라이버시 마스킹 툴을 제공하는 장치에 의해 수행될 수 있다. 프라이버시 마스킹 툴을 제공하는 장치는 도 2에서 설명한 바와 같이 동일하게 적용될 수 있는바, 이와 중복된 내용에 대한 설명은 생략한다.
단계(510)에서 마스킹 툴을 제공하는 장치는 현재 플레이되고 있는 영상에서 객체를 검출하고 마스킹을 수행하기 위한 객체를 마스킹 상자로 지정하여 일정시간 동안 마스킹을 수행한다. 이때, 사용자는 동영상 플레이 출력부에서 마스킹을 수행하기 위한 객체를 마스킹 상자로 지정하여 마스킹을 수행할 수 있도록 한다.
단계(520)에서 마스킹 툴을 제공하는 장치는 객체를 실시간으로 추적하여 추적된 객체 영역을 표시하고, 마스킹되는 객체 영역을 마스킹 타임라인에 프레임 단위의 파노라마 영상을 나타낸다. 만약, 객체를 실시간으로 추적하여 추적된 객체가 한 명이면, 하나의 객체, 검출된 객체가 두 명이면, 두 개의 객체를 실시간 객체추적 표시부에 표시한다. 단계(520)을 통해 마스킹 툴을 제공하는 장치는 실시간으로 재생되고 있는 영상에서 마스킹을 수행할 수 있다.
단계(530)에서 마스킹 툴을 제공하는 장치는 마스킹 타임라인에 프레임 단위의 파노라마 영상을 사용자의 조작에 의해 객체추적 오류가 있는지 검색한다. 만약, 객체 추적 오류가 없다면 단계(560)의 마스킹 툴을 제공하는 장치에서 마스킹 된 영상들을 모아서 단일의 영상으로 제작하거나 전체 영상을 최종 영상으로 제작하고, 객체 추적 오류가 있다면 단계(540)로 넘어가 마스킹 타임라인에서 객체 추적 오류가 있는 프레임을 선택한다.
단계(540)에서 마스킹 툴을 제공하는 장치는 객체추적 오류가 발견되었으면, 사용자는 마스킹 타임라인에 있는 객체추적 오류가 있는 프레임을 선택하고, 선택된 프레임은 동영상이 플레이되는 출력부로 되돌아간다. 단계(540)을 통해 실시간으로 재생되고 있는 영상에서 마스킹을 수행하는 중에 객체추적 오류를 발견하면 마스킹 정지 및 프라이버시 재마스킹을 수행할 수 있다.
단계(550)에서 마스킹 툴을 제공하는 장치는 동영상이 플레이되는 출력부에서 객체추적 오류가 있는 영상의 마스킹 상자를 삭제한다. 객체추적 오류가 있는 영상의 마스킹 상자를 삭제하여 재마스킹을 수행하기 위한 것으로, 객체추적 오류가 있는 영상의 마스킹을 삭제한 후, 단계(510)로 돌아가 마스킹을 수행하기 위한 객체를 마스킹 상자로 재지정하여 마스킹을 수행한다. 이때, 현재 프레임 이후의 모든 프레임에 마스킹 상자가 사라진다.
단계(560)에서 마스킹 툴을 제공하는 장치는 마스킹된 영상들을 단일의 영상으로 제작하거나 혹은 전체 영상을 최종 영상으로 제작한다. 마스킹 툴을 제공하는 장치가 마스킹 타임라인에 프레임 단위의 파노라마 영상에서 객체추적 오류가 발견되지 않았다면, 중간 중간 마스킹된 영상들을 모아서 하나의 영상으로 만들거나 전체적으로 마스킹된 영상을 최종 영상으로 만든다.
이와 같이, 본 발명의 실시예들에 따르면, 객체를 추적하고, 추적한 객체를 마스킹하여 마스킹 타임라인에 파노라마 영상으로 표시함으로써 프라이버시 툴을 이용해서 한 프레임도 빠짐없이 객체 영역을 마스킹을 수행할 수 있다. 더욱이, 본 발명의 실시예들에 따르면, 실시간으로 재생되고 있는 영상에서 마스킹을 수행하는 중에 객체추적 오류를 발견하여 마스킹 정지 및 프라이버시 재마스킹을 함으로써 인터렉션 인터페이스를 통해 구현될 수 있다.
도 6은 본 발명의 일실시예에 따른 영상 빅데이터 기반에서 객체 템플릿 자동 수집 및 추적 알고리즘을 나타낸 도면이다.
영상 빅데이터 기반에서 객체 템플릿 자동 수집 및 추적 알고리즘은 마스킹 툴을 제공하는 장치에 의해 수행될 수 있고, 도 2내지 도 3에서 이미 설명한 것이 동일하게 적용될 수 있는바, 이와 중복된 내용에 대한 설명은 생략한다.
프라이버시 마스킹 툴을 제공하는 장치는 영상 빅데이터에서 객체를 검출(610)한다. 프라이버시 마스킹 툴의 객체 검출 및 추적 알고리즘의 성능을 개선시키기 위하여 오프라인에서 대용량 영상을 분석한다. 프라이버시 마스킹 툴을 제공하는 장치는 빅데이터에서 검출한 객체를 복수개의 단위로 클러스터링(620)한다. 객체의 특징이 동일한 객체는 동일한 특징분포를 형성하여 템플릿을 자동으로 수집하고, 클러스터링하는 방법을 통해서 객체검출 및 추적 알고리즘의 성능을 개선시킬 수 있다. 도 7에서 실시간 템플릿 생성에 대해 자세히 설명한다.
프라이버시 마스킹 툴을 제공하는 장치는 검출된 객체를 복수개의 단위로 클러스터링한 후, 자동 객체 추적엔진(630)을 통하여 일정시간 동안 자동 객체 추적을 실시한다. 본 발명은 자동 객체 추적을 통하여 영상 기반에서 한 프레임도 빠짐없이 대상객체의 얼굴을 가릴 수 있고, 실시간으로 재생되고 있는 영상에서 마스킹을 수행하는 중에도 객체추적 오류를 발견할 수 있다.
프라이버시 마스킹 툴을 제공하는 장치는 프라이버시 마스킹 UI(640)를 이용하여 프라이버시 마스킹을 수행할 수 있고, 사용자에 의해 조작을 할 수 있다. 사용자의 조작을 통해 마스킹 동작이 수행될 수 있도록, 정지, 재생, 빨리감기, 되감기 등의 조작버튼을 포함할 수 있고, 마스킹 타임라인에서는 프레임을 사용자의 필요에 따른 시간 단위로 파노라마 영상을 표시할 수 있다.
프라이버시 마스킹 툴을 제공하는 장치는 사용자의 조작에 의한 프라이버시 마스킹 UI(640)를 통해 수행된 최종 영상을 비디오 이미지(650)로 출력할 수 있고, 마스킹 하려는 객체가 잘못 지정되었다면, 사용자는 마스킹 UI(640)로 돌아가 정지버튼을 눌러 재생되고 있는 영상을 정지시킬 수 있고, 정지버튼이 선택된 후 동영상 플레이 출력부를 통해 표시되는 출력된 영상에 대하여 사용자는 마스킹 하려는 객체에 마스킹 상자를 이동시킨 후, 일정시간 동안 마스킹 하려는 객체의 마스킹 상자를 재지정하여 마스킹을 수행할 수 있다.
따라서 본 발명의 일실시예에 따른 프라이버시 마스킹 툴의 객체검출 및 추적 알고리즘의 성능개선을 위해서 오프라인에서 대용량 영상을 분석하여 객체를 검출하고 검출된 객체를 몇 개의 단위로 클러스터링하는 방법을 통해서 실제 비디오 이미지가 입력되었을 때보다 효과적으로 객체를 검출하고 추적할 수 있다.
도 7은 본 발명의 일실시예에 따른 영상 빅데이터 기반에서 실시간 템플릿 생성을 나타낸 도면이다.
도 7은 영상 빅데이터 기반에서 객체 템플릿 자동 수집 및 추적 알고리즘을 기반으로, 영상 빅데이터 기반에서 클러스터링을 통해 객체 템플릿 생성을 설명한다.
본 발명의 일실시예에 따른 프라이버시 마스킹 툴의 객체검출 및 추적 알고리즘의 성능개선을 위해서 오프라인에서 대용량 영상을 분석하여 객체를 검출하고 검출된 객체를 몇 개의 단위로 클러스터링하는 방법을 통해서 실제 비디오 이미지가 입력되었을 때보다 효과적으로 객체를 검출하고 추적할 수 있다. 실시간 템플릿 생성은 도 7에 도시된 도면과 같이 동일한 특징의 객체는 동일한 분포를 형성하며, 이러한 특성을 이용하여 대용량 템플릿을 자동으로 수집할 수 있다. 예를 들어, 빅데이터 영상에서 정면으로 서있는 객체들, 옆으로 서있는 사람들의 객체들을, 손을 들고 서있는 객체들을 객체별로 각각 수집하여 템플릿을 생성할 수 있다. 생성한 템플릿은 동일한 특징을 가지고 있기 때문에, 동일한 특징 분포를 형성할 수 있고, 이러한 특성을 이용하여 대용량 템플릿을 자동으로 수집할 수 있다. 따라서 대용량 영상에서 객체에 대하여 확률적인 의미를 갖는 템플릿 데이터를 수집하여 성능을 개선시킬 수 있다.
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다.  예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다.  처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다.  또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다.  이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다.  예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다.  또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다.  소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다.  소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다.  상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.  상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.  컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다.  프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.  상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다.  예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다. 그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.
210: 동영상 플레이 출력부
220: 실시간 객체추적 표시부
230: 파노라마 영상표시 및 검색부

Claims (10)

  1. 프라이버시 마스킹 툴을 제공하는 장치에 있어서,
    객체를 검출하고 검출된 부분에 마스킹을 수행하는 동영상 플레이 출력부;
    상기 검출된 객체를 실시간으로 추적하여 추적된 객체 영역을 표시하는 실시간 객체추적 표시부; 및
    상기 마스킹되는 객체 영역을 마스킹 타임라인에 따라 프레임 단위로 제공하는 파노라마 영상을 표시하고, 사용자의 선택에 따라 객체 추적 오류가 발견되는 영상을 검색하는 파노라마 영상표시 및 검색부
    를 포함하고,
    상기 동영상 플레이 출력부는 상기 객체 추적 오류가 발견되어 선택된 영상을 출력하고, 상기 사용자의 명령에 따라 상기 출력된 영상에 대한 재마스킹을 수행하는 것
    을 특징으로 하는 프라이버시 마스킹 툴을 제공하는 장치.
  2. 제1항에 있어서,
    상기 재마스킹은 상기 마스킹되는 객체 영역을 수정하고, 수정된 객체 영역이 마스킹되어 저장됨으로써 수행되는 것
    을 특징으로 하는 프라이버시 마스킹 툴을 제공하는 장치.
  3. 제1항 또는 제2항에 있어서,
    상기 동영상 플레이 출력부, 상기 실시간 객체추적 표시부 및 상기 파노라마 영상표시 및 검색부는 마스킹 중 정지 및 재마스킹 기능을 포함하는 인터렉션 마스킹 인터페이스를 통해 구현되는 것
    을 특징으로 하는 프라이버시 마스킹 툴을 제공하는 장치.
  4. 제3항에 있어서,
    상기 인터렉션 마스킹 인터페이스는,
    상기 파노라마 영상표시 및 검색부를 통해 표시되는 상기 파노라마 영상에 기초하여 마스킹을 하는 중에 상기 객체 추적 오류가 발견될 경우 상기 사용자의 선택에 따라 상기 마스킹을 정지시키는 정지버튼을 포함하고,
    상기 정지버튼이 선택된 후 상기 동영상 플레이 출력부를 통해 표시되는 상기 출력된 영상에 대해 상기 사용자의 명령에 따라 마스킹 상자를 이동시키며,
    상기 인터렉션 마스킹 인터페이스를 통한 상기 마스킹 상자의 이동에 따라 상기 재마스킹이 수행되는 것
    을 특징으로 하는 프라이버시 마스킹 툴을 제공하는 장치.
  5. 제1항 또는 제2항에 있어서,
    상기 재마스킹이 수행되는 도중에도 또 다른 실시간 영상에 대해서 실시간 객체 추적 및 마스킹이 동시에 수행되는 것
    을 특징으로 하는 프라이버시 마스킹 툴을 제공하는 장치.
  6. 제1항에 있어서,
    상기 프라이버시 마스킹 툴은,
    대용량 영상을 분석하여 객체를 검출하고, 검출된 객체를 복수 개의 단위로 클러스터링하여 객체를 검출하고 추적하는,
    프라이버시 마스킹 툴을 제공하는 장치.
  7. 프라이버시 마스킹 툴을 제공하는 방법에 있어서,
    객체를 검출하고 검출된 부분에 마스킹을 수행하는 단계;
    상기 검출된 객체를 실시간으로 추적하여 추적된 객체 영역을 표시하는 단계;
    상기 마스킹되는 객체 영역을 마스킹 타임라인에 따라 프레임 단위로 제공하는 파노라마 영상을 표시하고, 사용자의 선택에 따라 객체 추적 오류가 발견되는 영상을 검색하는 단계; 및
    상기 객체 추적 오류가 발견되어 선택된 영상을 출력하고, 상기 사용자의 명령에 따라 상기 출력된 영상에 대한 재마스킹을 수행하는 단계
    를 포함하는 프라이버시 마스킹 툴을 제공하는 방법.
  8. 제7항에 있어서,
    상기 객체를 검출하고 검출된 부분에 마스킹을 수행하는 단계는,
    마스킹을 수행하기 위해 객체를 마스킹 상자로 지정하는 단계; 및
    상기 마스킹 상자로 지정한 상기 객체 영역이 마스킹을 수행하는 단계
    를 포함하고,
    상기 객체 추적 오류가 발견되는 영상을 검색하는 단계는,
    상기 마스킹 타임라인에서 상기 마스킹이 수행된 객체 영역을 추적하여 오류를 확인하는 단계를 포함하고,
    상기 마스킹이 수행된 영상들을 단일의 영상으로 제작 혹은 전체 영상을 최종 영상으로 제작하는 단계
    를 더 포함하는 프라이버시 마스킹 툴을 제공하는 방법.
  9. 제7항에 있어서,
    상기 객체 추적 오류가 발견되어 선택된 영상을 출력하고, 상기 사용자의 명령에 따라 상기 출력된 영상에 대한 재마스킹을 수행하는 단계는,
    상기 마스킹 타임라인에 있는 상기 객체 추적 오류가 있는 프레임을 선택하여 동영상이 플레이되는 출력부로 되돌아가는 단계;
    상기 동영상이 플레이되는 출력부에서 사용자의 명령에 의해 마스킹 상자를 삭제하는 단계; 및
    마스킹을 수행하기 위해 객체를 마스킹 상자로 재설정하여 상기 객체 영역이 마스킹되어 저장됨으로써 수행되는 단계
    를 포함하는 프라이버시 마스킹 툴을 제공하는 방법.
  10. 제7항에 있어서,
    상기 객체 추적 오류가 발견되어 선택된 영상을 출력하고, 상기 사용자의 명령에 따라 상기 출력된 영상에 대한 재마스킹을 수행하는 단계는,
    상기 재마스킹이 수행되는 도중에도 또 다른 실시간 영상에 대해서 실시간 객체 추적 및 마스킹이 동시에 수행되는 단계
    를 포함하는 프라이버시 마스킹 툴을 제공하는 방법.
KR20130045222A 2013-04-24 2013-04-24 실시간 영상에 프라이버시 마스킹 툴을 제공하는 장치 및 방법 KR101484844B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR20130045222A KR101484844B1 (ko) 2013-04-24 2013-04-24 실시간 영상에 프라이버시 마스킹 툴을 제공하는 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR20130045222A KR101484844B1 (ko) 2013-04-24 2013-04-24 실시간 영상에 프라이버시 마스킹 툴을 제공하는 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20140126936A true KR20140126936A (ko) 2014-11-03
KR101484844B1 KR101484844B1 (ko) 2015-01-21

Family

ID=52451433

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20130045222A KR101484844B1 (ko) 2013-04-24 2013-04-24 실시간 영상에 프라이버시 마스킹 툴을 제공하는 장치 및 방법

Country Status (1)

Country Link
KR (1) KR101484844B1 (ko)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101496287B1 (ko) * 2014-11-11 2015-02-26 (주) 강동미디어 비디오 시놉시스 시스템 및 이를 이용한 비디오 시놉시스 방법
CN108024113A (zh) * 2017-12-15 2018-05-11 东华大学 一种目标占比自适应的压缩域小目标跟踪方法
CN108805810A (zh) * 2018-05-30 2018-11-13 链家网(北京)科技有限公司 一种房屋全景图隐私处理方法及装置
KR101995193B1 (ko) * 2018-01-26 2019-07-02 주식회사 아이디스 보호 영역 처리 장치
KR20190096116A (ko) * 2018-02-08 2019-08-19 한화테크윈 주식회사 생체정보 보안방법
KR20200034468A (ko) * 2018-09-21 2020-03-31 김승진 가상현실 영상을 이용한 기록 대상 공간 정보 통합 관리 플랫폼을 운영하는 관리 서버 및 이의 플랫폼 운영 방법
KR102183689B1 (ko) * 2020-03-30 2020-11-30 에스큐아이소프트 주식회사 실시간 영상의 객체 마스킹 처리 시스템 및 이를 이용한 마스킹 처리 방법
KR102259457B1 (ko) * 2020-08-21 2021-06-02 (주)와토시스 개인정보 비식별화 처리 방법, 검증 방법 및 시스템
KR102436602B1 (ko) * 2021-12-30 2022-08-29 (주)와토시스 영상 데이터의 개인정보 비식별화 방법 및 장치

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100877747B1 (ko) * 2006-10-18 2009-01-12 포스데이타 주식회사 디지털 비디오 레코더 및 그의 입력 영상 보호 장치 및방법
US8610787B2 (en) 2007-06-22 2013-12-17 Panasonic Corporation Camera device including privacy protection method
JP5143172B2 (ja) 2010-03-19 2013-02-13 三洋電機株式会社 撮像装置及び画像再生装置

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101496287B1 (ko) * 2014-11-11 2015-02-26 (주) 강동미디어 비디오 시놉시스 시스템 및 이를 이용한 비디오 시놉시스 방법
CN108024113A (zh) * 2017-12-15 2018-05-11 东华大学 一种目标占比自适应的压缩域小目标跟踪方法
CN108024113B (zh) * 2017-12-15 2021-05-11 东华大学 一种目标占比自适应的压缩域小目标跟踪方法
KR101995193B1 (ko) * 2018-01-26 2019-07-02 주식회사 아이디스 보호 영역 처리 장치
KR20190096116A (ko) * 2018-02-08 2019-08-19 한화테크윈 주식회사 생체정보 보안방법
CN108805810A (zh) * 2018-05-30 2018-11-13 链家网(北京)科技有限公司 一种房屋全景图隐私处理方法及装置
CN108805810B (zh) * 2018-05-30 2020-01-10 贝壳找房(北京)科技有限公司 一种房屋全景图隐私处理方法及装置
KR20200034468A (ko) * 2018-09-21 2020-03-31 김승진 가상현실 영상을 이용한 기록 대상 공간 정보 통합 관리 플랫폼을 운영하는 관리 서버 및 이의 플랫폼 운영 방법
KR102183689B1 (ko) * 2020-03-30 2020-11-30 에스큐아이소프트 주식회사 실시간 영상의 객체 마스킹 처리 시스템 및 이를 이용한 마스킹 처리 방법
KR102259457B1 (ko) * 2020-08-21 2021-06-02 (주)와토시스 개인정보 비식별화 처리 방법, 검증 방법 및 시스템
WO2022039319A1 (ko) * 2020-08-21 2022-02-24 (주)와토시스 개인정보 비식별화 처리 방법, 검증 방법 및 시스템
KR102436602B1 (ko) * 2021-12-30 2022-08-29 (주)와토시스 영상 데이터의 개인정보 비식별화 방법 및 장치

Also Published As

Publication number Publication date
KR101484844B1 (ko) 2015-01-21

Similar Documents

Publication Publication Date Title
KR101484844B1 (ko) 실시간 영상에 프라이버시 마스킹 툴을 제공하는 장치 및 방법
US10902676B2 (en) System and method of controlling a virtual camera
EP3369038B1 (en) Tracking object of interest in an omnidirectional video
US11676389B2 (en) Forensic video exploitation and analysis tools
US9324374B2 (en) Method and system for automatic generation of clips from a plurality of images based on an inter-objects relationship score
EP3532797A1 (en) Curated photogrammetry
US20160381339A1 (en) Image information processing method, apparatus, and program utilizing a position sequence
WO2014045843A1 (ja) 画像処理システム、画像処理方法及びプログラム
JP2009075802A (ja) 人物行動検索装置
US10146870B2 (en) Video playback method and surveillance system using the same
WO2022002151A1 (zh) 一种移动目标行为分析的实现方法、装置及电子设备
KR20150026178A (ko) 관심영역 기반의 영상요약 장치와 그를 위한 컴퓨터로 읽을 수 있는 기록 매체
JPWO2014045670A1 (ja) 画像処理システム、画像処理方法及びプログラム
JP3372096B2 (ja) 画像情報アクセス装置
JP2007072789A (ja) 映像構造化方法及び装置及びプログラム
CN108369640A (zh) 用于控制场景的捕获图像的图像处理以调适捕获图像的方法、装置或计算机程序
JP2011155477A (ja) 映像処理装置、映像処理方法及びプログラム
JP6853528B2 (ja) 映像処理プログラム、映像処理方法、及び映像処理装置
KR20190078800A (ko) 3차 투영법을 이용한 인터랙티브 360 비디오 어노테이션 방법
Fassold et al. Towards automatic cinematography and annotation for 360° video
JP5850188B2 (ja) 画像表示システム
KR101362630B1 (ko) 디지털 비디오 레코더에서의 피사체 이동 경로 추적 방법
KR20150102301A (ko) 사람형태기반 자동 다중객체 검출기를 이용한 영상 개인정보 보호 방법 및 장치
JP5554214B2 (ja) 会議録システム及びプログラム
JP2006352879A (ja) 映像フレーム内の事象を識別及び可視化する方法、及び、映像ストリーム内の事象のタイムラインを生成するためのシステム

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20171103

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20181205

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20191210

Year of fee payment: 6