KR101843135B1

KR101843135B1 - 영상 처리 방법, 장치 및 컴퓨터 프로그램

Info

Publication number: KR101843135B1
Application number: KR1020180012213A
Authority: KR
Inventors: 김규혁
Original assignee: 김규혁
Priority date: 2018-01-31
Filing date: 2018-01-31
Publication date: 2018-03-28

Abstract

본 발명은 영상 처리 방법, 장치 및 컴퓨터 프로그램에 관한 것이다. 본 발명은 기 설정된 분할 설정 정보에 따라 상기 화면을 복수 개의 영역으로 분할하고, 상기 분할된 복수 개의 영역 중 일 영역을 판서 영역으로, 다른 일 영역을 인물 영역으로 설정하는 단계, 상기 판서 영역에서 판서 내용으로 판단되는 텍스트 또는 사진이 차지하는 비중이 기 설정된 값 이상이면 상기 화면을 캡처하는 단계, 상기 캡처된 화면 이미지에서 하나 이상의 텍스트를 인식하는 단계, 상기 텍스트에 포함된 하나 이상의 키워드를 이용하여 상기 키워드에 대응되는 주제 정보를 도출하는 단계, 상기 인물 영역에서 기 설정된 녹화 동작에 대응하는 수신호 객체가 식별되면, 상기 화면의 녹화를 시작하고, 상기 인물 영역에서 기 설정된 종료 동작에 대응하는 수신호 객체가 식별되면, 상기 화면의 녹화를 중단하여 판서 영상을 생성하는 단계, 상기 판서 영상에 상기 주제 정보를 태깅하는 단계를 포함것을 일 특징으로 한다. 본 발명에 의하면, 강의 영상을 촬영, 수신 및 재생하는 것만으로 용이하게 판서 영상을 생성할 수 있다.

Description

영상 처리 방법, 장치 및 컴퓨터 프로그램 {VIDEO PROCESSING METHOD, APPARATUS AND COMPUTER PROGRAM}

본 발명은 영상 처리 방법, 장치 및 컴퓨터 프로그램에 관한 것으로, 보다 자세하게는 판서 영상을 용이하게 생성하고 주제 별 녹화 및 재생의 편리성을 개선한 영상 처리 방법, 장치 및 컴퓨터 프로그램에 관한 것이다.

인터넷(Internet) 기술의 발달로 인해, 다양한 목적에 따라 수강되는 강의는 오프라인(off-line) 방식뿐만 아니라 온라인(on-line) 방식으로도 널리 행해지고 있다.

온라인 방식의 강의는 강의실에 직접 가지 않고 지역에 관계없이 수강이 가능하다는 장점이 있다.

이러한 온라인 강의를 위해서는 강의 내용이 동영상으로 미리 제작되어야 하는데, 휴대용 스마트 장치의 발전으로 스마트 폰(smart phone)과 같은 휴대용 스마트 장치를 이용하여 개인들도 쉽고 간편하게 동영상 컨텐츠(motion image contents)를 제작할 수 있는 환경이 마련되어 있다.

하지만, 온라인 강의를 위한 동영상은 고화질의 동영상을 필요로 하므로, 전문적인 촬영 장비와 스튜디오를 이용하여 동영상을 위한 동영상 컨텐츠를 제작해야 하고 이러한 동영상 컨텐츠는 모든 프레임(frame)에 대한 모든 영상 데이터를 저장해야 하므로 제작된 동영상 컨텐츠의 용량이 역시 증가하게 된다.

이처럼 동영상 컨텐츠 용량이 너무 커지는 문제를 해결하기 위하여, 판서 내용만을 추출하여 저장하는 기술이 한국등록특허공보 제10-1775626호(발명의 명칭: 판서 영상 생성 장치 및 그 제어 방법, 공고일: 2017.09.17.)를 통해 개시된 바 있다.

또한 한국공개특허공보 제10-2011-0015831호(발명의 명칭: 판서 내용 녹화 방법, 공개일: 2011.02.17.)는 모니터 상의 배경화면이 변경되는 경우에 해당하는 이벤트 발생 시 마다 하나의 배경화면 객체 파일로 피씨에 저장하고, 판서 내용을 판서 내용 객체 파일로 저장하는 내용을 개시하고 있다.

그러나 이러한 종래 기술에 의하면, 각 동영상 및 판서 내용 객체 파일이 어떤 내용을 포함하고 있는지를 알 수 없어 실질적으로 원하는 내용을 검색하기가 용이하지 않다는 문제가 있었다. 영상의 썸네일만으로는 해당 파일이 어떤 주제에 대한 강의인지, 어떤 주제를 담고 있는지 구별이 되지 않기 때문이다.

본 발명은 전술한 문제점을 해결하기 위한 것으로서, 강의 영상을 촬영, 수신 및 재생하는 것만으로 용이하게 판서 영상의 생성을 가능하게 하는 것을 일 목적으로 한다.

또한, 본 발명은 판서 영상 파일을 생성함에 있어서, 각 파일이 어떤 내용을 포함하고 있는지를 자동으로 분류함으로써, 향후 판서 내용에 대한 주제별 검색을 용이하게 할 수 있는 영상 처리 방법을 제공하는 것을 다른 목적으로 한다.

이러한 목적을 달성하기 위한 본 발명은 기 설정된 분할 설정 정보에 따라 상기 화면을 복수 개의 영역으로 분할하고, 상기 분할된 복수 개의 영역 중 일 영역을 판서 영역으로, 다른 일 영역을 인물 영역으로 설정하는 단계, 상기 판서 영역에서 판서 내용으로 판단되는 텍스트 또는 사진이 차지하는 비중이 기 설정된 값 이상이면 상기 화면을 캡처하는 단계, 상기 캡처된 화면 이미지에서 하나 이상의 텍스트를 인식하는 단계, 상기 텍스트에 포함된 하나 이상의 키워드를 이용하여 상기 키워드에 대응되는 주제 정보를 도출하는 단계, 상기 인물 영역에서 기 설정된 녹화 동작에 대응하는 수신호 객체가 식별되면, 상기 화면의 녹화를 시작하고, 상기 인물 영역에서 기 설정된 종료 동작에 대응하는 수신호 객체가 식별되면, 상기 화면의 녹화를 중단하여 판서 영상을 생성하는 단계, 상기 판서 영상에 상기 주제 정보를 태깅하는 단계를 포함하는 것을 일 특징으로 한다.

전술한 바와 같은 본 발명에 의하면, 강의 영상을 촬영, 수신 및 재생하는 것만으로 용이하게 판서 영상을 용이하게 생성할 수 있다.

또한, 본 발명에 의하면 판서 영상 파일을 생성함에 있어서, 각 파일이 어떤 내용을 포함하고 있는지가 자동으로 분류되어, 향후 판서 내용에 대한 주제별 검색이 용이해진다.

도 1은 본 발명의 일 실시 예에 따른 영상 처리 장치의 운용 환경을 설명하기 위한 도면,
도 2는 본 발명의 일 실시 예에 따른 영상 처리 장치의 구성을 설명하기 위한 블록도,
도 3은 본 발명의 일 실시 예에 따른 영상 처리 방법을 설명하기 위한 도면,
도 4는 본 발명의 일 실시 예에 따른 영상 처리 방법을 설명하기 위한 순서도이다.

전술한 목적, 특징 및 장점은 첨부된 도면을 참조하여 상세하게 후술되며, 이에 따라 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 상세한 설명을 생략한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하기로 한다. 도면에서 동일한 참조부호는 동일 또는 유사한 구성요소를 가리키는 것으로 사용되며, 명세서 및 특허청구의 범위에 기재된 모든 조합은 임의의 방식으로 조합될 수 있다. 그리고 다른 식으로 규정하지 않는 한, 단수에 대한 언급은 하나 이상을 포함할 수 있고, 단수 표현에 대한 언급은 또한 복수 표현을 포함할 수 있음이 이해되어야 한다.

먼저, 도 1을 이용하여 본 발명의 일 실시 예에 따른 영상 처리 장치의 운영 환경을 설명한다.

본 발명의 일 실시 예에 따른 영상 처리 장치(100)는(이하, 설명의 편의를 위해 ‘영상 처리 장치(100)’라 함) 카메라(10)로부터 직접 촬영되는 강의 영상을 수신할 수도 있고, 강의 영상이 저장된 서버(20)로부터 강의 영상을 수신할 수 있다.

강의 영상에는 판서 대상이 되는 칠판(50)과 강사(30)가 포함될 수 있으며, 칠판(50)은 일반 칠판과 전자 칠판을 모두 포함한다.

영상 처리 장치(100)는 카메라(10)로부터 강의 영상을 바로 수신하는 경우, 수신과 동시에 영상을 처리 및 저장할 수 있다. 또 다른 실시 예로 영상 처리 장치(100)는 서버(20)로부터 기 녹화된 강의 영상을 수신하는 경우, 강의 영상에서 판서 영상만을 추출하여 선택적으로 생성 및 저장할 수 있으며, 본 발명의 일 실시 예에 따라 강의 영상을 이용하여 판서 영상 파일을 생성할 수 있다.

이하에서는 도 2 내지 도 3을 이용하여 본 발명의 일 실시 예에 의한 영상 처리 장치를 보다 자세하게 살펴본다.

본 발명의 일 실시 예에 따른 영상 처리 장치(100)는 수신부(110), 제어부(130), 표시부(150)를 포함할 수 있다.

수신부(110)는 강의 영상을 카메라(10) 또는 서버(20)로부터 수신하는 모듈로, 유무선 네트워크를 통해 강의 영상을 수신할 수 있다. 수신부(110)는 강의 영상을 수신하기 위한 통신 모듈을 포함할 수 있으며, 수신부(110)에 포함되는 통신 모듈은 LTE, HSDPA와 같은 이동통신모듈, WLAN, WiFi 등의 무선 인터넷 모듈, 블루투스 적외선 통신 지그비 등의 근거리 통신 모듈 등 통신 방식이나 기술 표준과는 무관하게 영상 데이터 수신을 지원하는 통신 모듈이라면 어떤 것이든 사용될 수 있다.

영상 처리 장치(100)가 카메라(10)에 포함되는 경우에는, 수신부(110)는 카메라(10)의 하우징 내에 구비되어 렌즈 및 촬상 모듈에 의해 생성되는 영상을 수신하여 사용할 수 있다.

제어부(130)는 강의 영상을 이용하여 판서 영상을 생성하는 모듈로, 영상 처리 장치(100)의 전반적인 동작을 제어한다.

제어부(130)는 보다 구체적으로, 영역 분할부(131), 영역 설정부(133), 영상 생성부(135), 주제정보 분석부(136), 태그부(137), 파일 생성부(139)를 포함할 수 있다.

영역 분할부(131)는 기 설정된 분할 설정 정보에 따라 화면을 복수 개의 영역으로 분할할 수 있다. 예를 들어, 분할 설정 정보는 분할 영역의 개수, 프레임을 분할하기 위한 가로축 및 세로축 정보, 또는 각 영역의 크기 정보 중 적어도 하나를 포함할 수 있으며, 이러한 분할 설정 정보는 사용자로부터 입력받은 것이거나, 영상 제작자에 의해 설정된 것일 수 있다.

예를 들어, 사용자는 도 3에 도시된 바와 같이 분할 영역을 3개로 설정할 수 있으며, 화면을 분할하기 위한 가로축의 y 값(A), 세로축의 x값(B)을 설정할 수 있다. 이는 판서 영역 또는 인물 영역을 설정하기 위한 것으로, 영역 설정부(133)는 분할된 복수 개의 영역 중 일 영역을 판서 영역으로 설정할 수 있다.

분할되는 영역은 서로 중첩될 수도 있다. 즉, 판서 영역과 인물 영역은 각각 설정될 수 있으며, 화면의 분할 후에 각 영역의 크기를 조절함으로써, 각 영역이 서로 중첩되도록 설정할 수도 있다.

이러한 설정 값은 영상 처리 장치(100)를 사용하는 사용자가 설정할 수도 있으나, 서버(20)로부터 설정 값을 수신할 수도 있다. 분할 설정 정보는 강사(30)별로 강의 스타일이 다르기 때문에 서로 다르게 설정되는 것으로, 칠판(50) 전체에 판서하는 강사도 있지만, 칠판(50)의 상위 영역에만 판서를 진행하는 강사도 존재하기 때문이다.

한편, 각 강의 별로 강사의 판서 스타일이 다르게 설정되어 있으므로, 사용자 또는 강사는 판서 영역을 설정하기 위한 가로축 및 세로축 정보를 강사의 판서 스타일에 맞게 설정할 수 있다. 판서 영역은 강사가 판서하는 실제 영역보다는 여유있게 설정하는 것이 바람직하다. 나아가 판서 영역은 화면을 분할하는 가로축 및 세로축 정보에 따라 설정될 수도 있으나, 영역의 크기 설정 값에 의해 설정될 수도 있다.

도 3의 예시와 같이 판서 영역으로 설정되는 일 영역은 제1 영역(500a)일 수도 있고, 제2 영역(500b)일 수도 있으며, 제3 영역(500c)일 수도 있다. 다만 본 명세서에서는 설명의 편의를 위해 판서 영역은 제1 영역(500a), 인물 영역은 제3 영역(500c)인 경우의 예를 중심으로 설명하기로 한다.

영역 설정부(133)는 분할된 복수 개의 영역 중 일 영역을 인물 영역으로 설정할 수도 있는데, 전술한 바와 같이 도 3에서는 제3 영역(500c)이 인물 영역으로 설정된 경우를 가정한다. 인물 영역(500c)은 판서 영상의 생성 및 종료 시점을 결정하기 위한 수신호 객체를 식별하기 위하여 설정되는 영역으로, 영상 처리 장치(100)는 화면 전체에 재생되는 강의 영상이 아니고 인물 영역(500c)에 대응되는 이미지 프레임만을 추출하여, 수신호 객체가 포함되는지 여부를 판단한다.

영상 생성부(135)는 판서 영역에서 판서 내용으로 판단되는 텍스트 또는 사진이 차지하는 비중이 기 설정된 값 이상이면 화면을 캡처할 수 있다. 영상 생성부(135)는 화면 캡처 기준 정보에 따라 화면을 캡처할 수 있는데, 화면 캡처 기준 정보는 화면을 캡처하는 시점을 결정하는 판서 영역에서의 판서 내용의 비중 정보이다.

예를 들어, 화면 캡처 기준 정보가 80%로 설정된 경우, 판서 영역(500a)에서 판서 내용으로 판단되는 텍스트 또는 사진이 차지하는 비중이 판서 영역(500a)의 80%를 초과하는 것으로 판단되면, 영상 생성부(135)는 화면(500) 전체를 캡처할 수 있다. 이렇게 캡처된 화면 이미지는 판서 노트의 생성에 사용될 수 있다.

판서 내용이 판서 영역(500a)의 80%를 초과하는지 여부에 대한 판단은 판서 글자 하나하나를 포함하는 사각형의 넓이의 합을 기준으로 이루어질 수 있다. 즉, 예를 들어 각 글자를 에워싸는 사각형의 넓이를 글자 수 만큼 곱한 값이 판서 내용의 넓이가 되며, 이를 설정된 판서 영역의 넓이로 나누면, 판서 영역에서 판서 내용으로 판단되는 텍스트 또는 사진이 차지하는 비중이 도출될 수 있다.

한편, 영상 생성부(135)는 인물 영역에서 기 설정된 녹화 동작에 대응하는 수신호 객체가 식별되면, 화면의 녹화를 시작하고, 인물 영역에서 기 설정된 종료 동작에 대응하는 수신호 객체가 식별되면, 상기 화면의 녹화를 중단할 수 있다.

녹화 동작 또는 종료 동작에 대응하는 수신호 객체는 미리 설정될 수 있는데 도 3의 예시에서 손을 펼치는 동작은 녹화를 시작하는 동작으로, 주먹을 쥐는 동작은 녹화를 중단하는 동작으로 설정된 경우, 인물 영역(500c)으로 설정된 영역에서 손을 펼치는 수신호 객체(700a)가 식별되면 영상 생성부(135)는 화면의 녹화를 시작할 수 있으며, 녹화 중에 인물 영역(500c)으로 설정된 영역에서 주먹을 쥐는 수신호 객체(700a)가 식별되면 영상 생성부(135)는 화면의 녹화를 종료할 수 있다.

즉, 강사(30)가 판서를 시작하기 전과 판서를 종료하는 시점에 기 설정된 수신호를 보내면 전체 강의 중 판서 영상만이 별도로 녹화 및 저장되는 바, 사용자는 이후에 판서 영상을 선택적으로 재생할 수 있다.

주제 정보 분석부(136)는 판서 영역에서 판서 내용으로 판단되는 텍스트 또는 사진이 차지하는 비중이 기 설정된 값 이상이면 화면을 캡처하고, 캡처된 화면 이미지에서 하나 이상의 텍스트를 인식하며, 텍스트에 포함된 하나 이상의 키워드를 이용하여 키워드에 대응되는 주제 정보를 도출할 수 있다. 주제 정보는 목차 정보를 포함하며, 목차 보다 하위 개념의 강의 주제에 대한 키워드일 수 있다.

예를 들어, 한국사 강의에서 고대 국가의 발전에 대한 강의 영상이 수신 또는 재생되는 경우를 가정하자. 판서 내용에는 구석기, 신석기, 철기 문명과 관련된 키워드, 예를 들어 ‘빗살무늬 토기’, ‘신석기 혁명’등의 키워드가 포함될 수 있다. 태그부(137)는 화면 이미지에서 하나 이상의 키워드를 추출하고, 이를 이용하여 추출된 키워드 집합과 관련성이 높은 주제 정보를 도출한다. 즉, ‘빗살무늬 토기’, ‘신석기 혁명’과 같은 키워드로부터 신석기 시대라는 하위 개념의 주제 정보를 도출할 수 있으며, 상위 개념의 주제 정보로 ‘Ⅰ. 우리나라 역사의 시작’ ‘1. 선사 시대의 생활’과 같은 목차 정보를 도출할 수 있다. 따라서 빗살무늬 토기’, ‘신석기 혁명’등의 키워드가 포함된 판서 내용이 담긴 화면 이미지로부터는 ‘Ⅰ. 우리나라 역사의 시작’ ‘1. 선사 시대의 생활’, ‘신석기 시대’와 같은 주제 정보가 도출될 수 있다. 주제 정보는 데이터베이스에 저장된 것일 수 있으며, 데이터베이스에는 각 주제 별로 하나 이상의 키워드가 맵핑되어 저장될 수 있다.

즉, 화면을 재생하고 판서 영상을 녹화하는 동안 판서 내용이 일정 비중 이상 판서 영역을 채운 것으로 판단되면, 화면 이미지가 캡처될 수 있으며, 영상 처리 장치(100)는 캡처된 화면 이미지에서 텍스트를 추출하여 위와 같이 주제 정보를 도출할 수 있다.

이 경우 캡처된 화면 이미지에서 텍스트를 인식함에 있어서 오류가 발생될 수 있는데, 주제 정보 분석부(136)는 인식된 텍스트를 데이터베이스(170)에 기 저장된 키워드와 비교하고, 비교 결과 동일한 키워드가 없으면 가장 높은 유사도를 갖는 키워드를 주제 정보 도출에 사용함으로써 오류를 제거한다.

예를 들어, 강사의 판서 글씨가 인식이 어려워 ‘빗살무늬 토기’가 ‘빈날무늬 토기’로 인식되었다고 가정하자. 이러한 경우 태그부(137)는 주제 정보 도출을 위한 분석 과정에서 ‘빈날무늬 토기’가 없음이 확인되면, 데이터베이스(170)에서 자음과 모음의 조합에 따라 가장 유사도가 높은 키워드를 탐색함으로써 ‘빈날무늬 토기’를 ‘빗살무늬 토기’로 대체하고, 대체된 키워드를 이용하여 주제 정보를 도출한다.

태그부(137)는 녹화되는 판서 영상에 포함되는 하나 이상의 캡처된 화면 이미지로부터 도출된 주제 정보를 이용하여 상기 판서 영상에 하나 이상의 주제 정보를 태깅할 수 있다. 즉, 녹화 중에 판서 이미지가 캡처되는데, 녹화된 판서 영상은 다수의 프레임으로 구성되는 것인 바 캡처된 화면 이미지를 하나 이상 포함한다. 따라서 태그부(137)는 캡처된 화면 이미지 각각에서 도출한 주제 정보를 모두 태깅할 수 있고, 주제 정보의 계층을 이용하여 상위 개념의 주제 정보만을 태깅할 수도 있다.

이렇게 생성된 판서 영상은 데이터베이스(170)에 저장될 수 있으며, 영상 처리 장치(100)는 주제 정보를 이용한 검색 입력이 수신되면 검색 입력에 대응되는 판서 영상을 탐색하여, 표시부(150)에 출력할 수 있다.

표시부(150)는 판서 영상을 표시하는 디스플레이 모듈로 터치 센서와 상호 레이어 구조를 이루거나 일체형으로 형성됨으로써, 터치 스크린으로 구현될 수도 있다. 표시부(150)는 판서 파일 및/또는 녹화 영상 뿐 아니라 영상 처리 장치(100)에서 구동되는 응용프로그램의 실행화면 정보, 또는 이러한 실행화면 정보에 따른 UI(User Interface), GUI(Graphic User Interface) 정보를 표시할 수 있다.

다음은 도 4를 참조하여, 본 발명의 일 실시 예에 따른 영상 처리 방법을 살펴본다.

도 4를 참조하면, 본 발명의 일 실시 예에 의한 컴퓨팅 장치는 강의 영상을 카메라 또는 서버로부터 수신할 수 있다(S100). 다만 단계 100과 같이 강의 영상을 수신하지 않고, 장치에 기 저장된 강의 영상을 로딩하여 판서 영상을 생성하는 것도 가능하다.

다음으로, 장치는 기 설정된 분할 설정 정보에 따라 화면을 복수 개의 영역으로 분할하고(S200), 분할된 복수 개의 영역 중 일 영역을 판서 영역으로, 다른 일 영역을 인물 영역으로 설정할 수 있다(S300).

장치는 판서 영역에서 판서 내용으로 판단되는 텍스트 또는 사진이 차지하는 비중이 기 설정된 값 이상인 것으로 판단되면(S400) 화면을 캡처하며(S500), 캡처된 화면 이미지에서 하나 이상의 텍스트를 인식할 수 있다(S600). 단계 600에서 인식된 텍스트에 포함된 하나 이상의 키워드를 이용하여 장치는 키워드에 대응되는 주제 정보를 도출할 수 있다(S700).

한편 장치는 인물 영역에서 기 설정된 녹화 동작에 대응하는 수신호 객체를 식별하고(S450), 수신호 객체가 식별되면, 화면의 녹화를 시작하고(S750), 인물 영역에서 기 설정된 종료 동작에 대응하는 수신호 객체가 식별되면(S650), 화면의 녹화를 중단(S850)하여 판서 영상을 생성하며(S800), 판서 영상에 주제 정보를 태깅함으로써(S900) 판서 영상의 생성을 완료할 수 있다.

생성된 판서 영상은 데이터베이스에 저장될 수 있으며(S1000), 이후에 주제 정보를 이용한 검색 입력이 수신되면, 장치는 검색 입력에 대응되는 판서 영상을 탐색하여 화면에 출력할 수 있다.

도면에 별도로 도시하지는 않았으나, 본 발명의 일 실시 예에 의한 컴퓨팅 장치는 주제 별로 생성된 판서 파일 및/또는 녹화된 영상은 데이터베이스에 저장될 수 있으며, 주제 정보를 이용한 검색 입력이 수신되면 검색 입력에 대응되는 판서 파일 또는 녹화된 영상을 탐색하여 화면에 출력할 수 있다.

본 명세서에서 생략된 일부 실시 예는 그 실시 주체가 동일한 경우 동일하게 적용 가능하다. 또한, 전술한 본 발명은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시 예 및 첨부된 도면에 의해 한정되는 것이 아니다.

10: 카메라
20: 서버
30: 강사
50: 칠판
100: 영상 처리 장치

Claims

화면에 재생되는 강의 영상을 이용하여 영상을 처리하는 방법에 있어서,
기 설정된 분할 설정 정보에 따라 상기 화면을 복수 개의 영역으로 분할하고, 상기 분할된 복수 개의 영역 중 일 영역을 판서 영역으로, 다른 일 영역을 인물 영역으로 설정하는 단계;
상기 판서 영역에서 판서 내용으로 판단되는 텍스트 또는 사진이 차지하는 비중이 기 설정된 값 이상이면 상기 화면을 캡처하는 단계;
상기 캡처된 화면 이미지에서 하나 이상의 텍스트를 인식하는 단계;
상기 텍스트에 포함된 하나 이상의 키워드를 이용하여 상기 키워드에 대응되는 주제 정보를 도출하는 단계;
상기 인물 영역에서 기 설정된 녹화 동작에 대응하는 수신호 객체가 식별되면, 상기 화면의 녹화를 시작하고, 상기 인물 영역에서 기 설정된 종료 동작에 대응하는 수신호 객체가 식별되면, 상기 화면의 녹화를 중단하여 판서 영상을 생성하는 단계;
상기 판서 영상에 상기 주제 정보를 태깅하는 단계를 포함하고,
상기 주제 정보를 도출하는 단계는
주제 정보 별로 키워드가 맵핑되어 저장된 데이터베이스에서 상기 텍스트에 포함된 제1 키워드를 검색하는 단계;
상기 제1 키워드가 상기 데이터베이스에 없으면, 상기 데이터베이스에서 자음과 모음의 조합이 가장 유사한 제2 키워드를 탐색하는 단계;
상기 탐색된 제2 키워드를 이용하여 상기 주제 정보를 도출하는 단계를 포함하는 영상 처리 방법
영상 처리 장치에 있어서,
강의 영상을 수신하는 수신부;
상기 강의 영상을 표시하는 표시부;
상기 영상을 이용하여 판서 영상을 생성하는 제어부를 포함하고,
상기 제어부는
기 설정된 분할 설정 정보에 따라 화면을 복수 개의 영역으로 분할하는 영역 분할부;
상기 분할된 복수 개의 영역 중 일 영역을 판서 영역으로, 다른 일 영역을 인물 영역으로 설정하는 영역 설정부;
상기 판서 영역에서 판서 내용으로 판단되는 텍스트 또는 사진이 차지하는 비중이 기 설정된 값 이상이면 상기 화면을 캡처하고, 상기 캡처된 화면 이미지에서 하나 이상의 텍스트를 인식하며, 상기 텍스트에 포함된 하나 이상의 키워드를 이용하여 상기 키워드에 대응되는 주제 정보를 도출하는 주제 정보 분석부;
상기 인물 영역에서 기 설정된 녹화 동작에 대응하는 수신호 객체가 식별되면, 상기 화면의 녹화를 시작하고, 상기 인물 영역에서 기 설정된 종료 동작에 대응하는 수신호 객체가 식별되면, 상기 화면의 녹화를 중단하여 판서 영상을 생성하는 영상 생성부;
상기 판서 영상에 상기 주제 정보를 태깅하는 태그부를 포함하며,
상기 주제 정보 분석부는 주제 정보 별로 키워드가 맵핑되어 저장된 데이터베이스에서 상기 텍스트에 포함된 제1 키워드를 검색하고, 상기 제1 키워드가 상기 데이터베이스에 없으면, 상기 데이터베이스에서 자음과 모음의 조합이 가장 유사한 제2 키워드를 탐색하고, 상기 탐색된 제2 키워드를 이용하여 상기 주제 정보를 도출하는 영상 처리 장치.
제1항의 방법을 실행시키기 위하여 컴퓨터 판독 가능 매체에 저장된 영상 처리 프로그램.