KR102250873B1 - 보안 환경에서의 외부 영상 정보 전송 시스템 및 그 방법 - Google Patents

Abstract

본 발명은 보안 환경에서 외부 영상 정보를 전송하는 시스템 및 그 방법에 관한 것이다.
본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 시스템은 외부 영상 정보를 획득하는 영상정보 수집부와, 외부 영상 정보에서 전달 대상 부분영상을 추출하는 정보 전달 영역 결정 및 부분영상 수집부를 포함하는 것을 특징으로 한다.

Description

보안 환경에서의 외부 영상 정보 전송 시스템 및 그 방법{SYSTEM AND METHOD FOR TRANSMITTING EXTERNAL IMAGE IN SECURITY ENVIRONMENT}

본 발명은 보안 환경에서 외부 영상 정보를 전송하는 시스템 및 그 방법에 관한 것이다.

종래 기술에 따르면, CCTV 모니터링 현장과 같이 엄격한 보안 유지가 필요한 환경에서의 잠재적인 해킹 위험성, 바이러스 코드 이식 등의 우려로 인해, 영상이 표시되는 화면을 재촬영하는 방식으로 필요한 정보를 전달받는다.

그런데, 이러한 방식에 따르면 전달받은 영상의 화질이 심각하게 열화되는 문제점이 있다.

본 발명은 전술한 문제점을 해결하기 위하여 제안된 것으로, 엄격한 보안이 요구되는 환경에서, 외부로부터 취득된 영상 정보에 관한 보안 문제를 최소화하며 메인 시스템으로 전달하는 것이 가능한 외부 영상 정보 전송 시스템 및 방법을 제공하는데 그 목적이 있다.

본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 시스템은 외부 영상 정보를 획득하는 영상정보 수집부와, 외부 영상 정보에서 전달 대상 부분영상을 추출하는 정보 전달 영역 결정 및 부분영상 수집부를 포함하는 것을 특징으로 한다.

정보 전달 영역 결정 및 부분영상 수집부는 외부 데이터 전달 장치의 화면 표시 영역 내의 정보 전달 영역을 결정하고, 정보 전달 영역에 해당하는 복수 개의 부분영상을 수집한다.

본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 시스템은 복수 개의 부분영상을 이용하여 통합 영상을 합성하고, 영상 복원을 위한 변환행렬을 계산하는 통합 영상 합성 및 변환행렬 계산부와, 변환행렬을 이용하여 영상의 복원본을 생성하고, 화질 개선을 수행하는 영상 변환 및 화질 개선부를 더 포함할 수 있다.

본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 시스템은 부분영상의 정보 전달 영역을 정의하는 좌표 정보 및 최종영상의 모양에 대한 좌표 정보를 이용하여 계산한 변환행렬을 통해, 부분영상에 대한 보정을 수행하는 부분영상 보정 및 처리부를 더 포함할 수 있다.

본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 방법은 (a) 외부 데이터 전달 장치를 촬영하여 외부 영상 정보를 획득하는 단계 및 (b) 외부 영상 정보를 이용하여 정보 전달 영역을 결정하고, 정보 전달 영역에 해당하는 부분영상을 수집하는 단계를 포함하는 것을 특징으로 한다.

(b) 단계는 외부 데이터 전달 장치에서의 확대 및 표출 영역 이동에 따라, 기설정된 개수의 좌표들로 표현되는 정보 전달 영역을 결정한다.

본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 방법은 (c-1) 복수 개의 부분영상을 이용하여 통합 영상을 합성하고, 변환행렬에 따라 영상의 복원본을 생성하여 전송하는 단계를 더 포함할 수 있다.

본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 방법은 (c-2) 부분영상의 정보 전달 영역을 정의하는 좌표 정보 및 최종영상의 모양에 대한 좌표 정보를 이용하여 변환행렬을 계산하고, 변환행렬을 이용하여 부분영상에 대해 보정하는 단계를 더 포함할 수 있다.

본 발명의 실시예에 따르면, 공공의 이익을 위해 운용되는 CCTV 모니터링 현장, 다양한 Video Management System (VMS), 기타 엄격한 보안이 요구되는 환경에서 적용되어, 보안을 유지하며 외부 영상 정보를 메인 시스템으로 전달하는 것이 가능한 효과가 있다.

본 발명의 효과는 이상에서 언급한 것들에 한정되지 않으며, 언급되지 아니한 다른 효과들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.

도 1은 종래 기술에 따른 보안 시스템 운용 방식을 도시한다.
도 2는 본 발명의 실시예에 따른 보안 환경에서의 외부 영상 정보 전송 시스템을 도시한다.
도 3은 본 발명의 실시예에 따른 영상 정보 전송 절차를 도시한다.
도 4는 본 발명의 실시예에 따른 보안 환경에서의 외부 영상 정보 전송 시스템을 도시한다.
도 5는 본 발명의 실시예에 따라 보안을 유지한 상태로 외부 데이터를 보조 시스템으로 전달하는 것을 도시한다.
도 6은 본 발명의 실시예에 따라 보안을 유지한 상태로 외부 데이터를 핵심 보안 시스템으로 전달하는 것을 도시한다.
도 7은 본 발명의 실시예에 따라 외부에서 촬영된 영상을 수집하는 것을 도시한다.
도 8은 전달 대상이 되는 원본 사진의 예를 도시한다.
도 9는 전달 대상이 되는 원본 사진을 단말 장치의 화면 표시부를 통해 표출한 예를 도시한다.
도 10은 외부 영상 정보 표출 화면에서의 영상 크기 조절 또는 위치 조절을 도시한다.
도 11은 촬영된 영상에서의 정보 전달 영역에 대한 가상 표시를 도시한다.
도 12는 수집된 영상들에서 추출된 정보 전달 영역을 함께 도시한 것이다.
도 13은 정보 전달 영역에 대해서 추출된 영상을 붙이기 처리한 결과를 도시한다.
도 14는 도 13에서 붙이기 처리한 영상을 직사각형 형태로 변환한 결과를 도시한다.
도 15는 본 발명의 실시예에 따른, 보조 시스템 화면 표시부에 표시된 영상을 핵심 보안 시스템으로 전달하는 과정을 도시한다.
도 16은 본 발명의 실시예에 따른, 외부 데이터 전달 방식을 도시한다.
도 17은 본 발명의 실시예에 따른 정보 전달 영역 결정 및 부분영상 수집 과정을 도시한다.
도 18은 본 발명의 실시예에 따른 정보 전달 영역 자동 결정 과정을 도시한다.
도 19는 본 발명의 실시예에 따른 영상정보 수집부를 통한 촬영 시, 보여지는 영상의 형태 및 이를 2차원 좌표계로 표현한 예시이다.

본 발명의 전술한 목적 및 그 이외의 목적과 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다.

그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 이하의 실시예들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 목적, 구성 및 효과를 용이하게 알려주기 위해 제공되는 것일 뿐으로서, 본 발명의 권리범위는 청구항의 기재에 의해 정의된다.

한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성소자, 단계, 동작 및/또는 소자가 하나 이상의 다른 구성소자, 단계, 동작 및/또는 소자의 존재 또는 추가됨을 배제하지 않는다.

이하에서는, 당업자의 이해를 돕기 위하여 본 발명이 제안된 배경에 대하여 먼저 서술하고, 본 발명의 실시예에 대하여 서술하기로 한다.

공공의 이익을 위해 운용되는 CCTV 모니터링 현장에서는 사건이 발생함에 따라, 다양한 사건 영상이 제공된다.

예컨대 독거노인이나 어린이가 귀가하지 않는 경우, 경찰서나 소방서 등에 신고가 접수되고, 이때 담당자는 찾고자 하는 사람의 사진을 CCTV 모니터링 현장에 제공함으로써, 특정 인물이나 객체에 대한 검색/모니터링이 수행된다.

그런데 통상적으로 CCTV 모니터링 현장에서는 신고 접수된 스마트폰과 같은 모바일 단말에 저장된 사진을 화면을 통해 표출하여 CCTV 모니터링 현장의 담당자에게 보여주면, 이를 보안 환경에 설치된 카메라나 기타 단말장치로 재촬영하여 보안 시스템에 등록하고 이를 관제사들에게 전달하는 방식을 따르며, 전달된 각종 정보를 이용하여 관제사들은 검색 및 모니터링을 수행한다.

보다 편리하고 처리 속도가 빠른 다양한 다른 데이터 전송방법이 존재하는데도 불구하고, 이렇게 번거로운 방식을 적용하고 있는 이유는 CCTV 모니터링 현장의 엄격한 보안 유지 필요성 때문이다.

시스템이 인터넷과 같은 외부 네트워크 혹은 셀룰러 망이나 각종 원/근거리 무선통신망들과 연결이 되는 경우, 잠재적인 해킹의 위험성이 높아진다.

또한, USB나 스마트폰 등을 시스템에 유선으로 연결하는 경우, 바이러스 코드나 해킹 코드와 같은 악성 프로그램들이 이식될 수 있는 위험이 있다.

따라서, 영상이 표시되는 화면을 다시 촬영하는 방식으로 필요한 정보를 전달받는 것이 보안 측면에서 안전하다고 인식되어 왔다.

그러나, 이러한 방식에 따르면 보안성은 유지될 수 있지만, 전달받은 영상의 화질이 심각하게 열화되는 문제점이 있다.

예컨대 영상을 표출하는 화면표시장치의 화소배열 상태와 카메라의 해상도의 영향으로 인해, 촬영된 사진이나 동영상에 무아레 패턴(Moire Pattern)이 나타나기도 하며, 주변 광원에 의한 반사 현상이 더해져서 획득된 영상의 화질이 더욱 열화된다.

이보다 더 현장에서 중요하게 여기는 이슈는 제한된 화면 크기에 표시된 영상을 재촬영하는 방식에 따르는 것이어서, 전달 영상의 해상도가 매우 낮아질 수 있다는 문제점이다.

전술한 바와 같이, 외부 네트워크 연결이나 유무선 통신 방식을 사용한 데이터 전송 방법을 사용하면 잠재적 위험성을 완전히 배제할 수 없기 때문에, 종래 기술에 따르면 도 1에 도시한 바와 같이 시스템을 분리하는 방식을 사용한다.

도 1에서 핵심 보안 시스템(11)은 외부의 공격을 엄격히 차단해야 하는 시스템으로 가정한다.

핵심 보안 시스템(11)은 핵심 보안 시스템 화면 표시부(12)와 연동되어 정보를 표시할 수 있다.

보조 시스템(21)은 핵심 보안 시스템(11)과는 분리되어 있다.

보조 시스템(21)은 보조 시스템 화면 표시부(22)를 통해 참고할 만한 정보들을 표시한다.

도 1에서 시스템을 사용하는 사용자들은 핵심 보안 시스템(11)을 사용하는 보안 시스템 운용자와, 보조 시스템(21)을 사용하는 외부 데이터 전달자이다.

보안 시스템 운용자들은 외부 데이터 전달자가 제공한 사진이나 동영상을 보조 시스템 화면 표시부(22)를 통해서만 확인할 수 있게 되는데, 이는 본질적으로 외부 데이터가 핵심 보안 시스템(11)과 바로 연동되지 않기 때문이다.

이러한 경우, 보안 시스템 운용자들은 보조 시스템 화면 표시부(22)에 표시된 정보만을 시각적으로 보고 판단하여야 한다는 제약이 있어, 영상의 크기를 조절하여 확인하거나, 원하는 부분을 상세히 검토하기 어려운 문제점이 있다.

종래 기술에 따르면, 보조 시스템(21)은 외부 데이터가 복사되면 악성 프로그램 검사 및 각종 보안 검사 등을 수행한 후, 문제가 없는 것으로 확인되면 외부 데이터를 핵심 보안 시스템(11)으로 옮길 수 있다.

그런데, 보조 시스템(21)으로부터 핵심 보안 시스템(11)으로 정보를 옮기는 과정에서도, 보안 USB를 사용 하는 등의 보안 강화 대책이 필요하며, 어떠한 방식이든 장치 간의 유무선의 연결 관계가 형성됨에 따라, 보안 취약성은 발생하게 된다.

본 발명은 전술한 문제점에 착안하여 제안된 것으로, 보안 환경에서 외부 영상 정보를 전달하고 처리하는 시스템 및 방법을 제안한다.

본 발명에 따르면, 공공의 이익을 위해 운용되는 CCTV 모니터링 현장, 즉 보안상 인터넷과 같은 외부 네트워크, 셀룰러 무선통신망들과도 확실한 분리가 필요하고, 바이러스 프로그램이나 해킹 프로그램 등에 의한 잠재적인 외부의 공격에 대비하기 위해 외장메모리나 스마트폰과 같은 외부 장치들을 통한 유무선 연동조차도 엄격히 통제되는 보안 환경에도 적용이 가능하다.

본 발명에 따르면, 비단 CCTV 모니터링 현장뿐 아니라, 보안이 엄격히 요구되는 시스템에서 외부로부터 영상 정보를 전달받을 필요성이 있는 다양한 환경에서 활용될 수 있다.

본 발명의 실시예에 따르면, 외부 데이터를 제공하는 장치/단말은 화면표시장치를 포함한다.

본 발명의 실시예에 따르면, 외부 데이터를 제공하는 장치/단말에는 추가적으로 프로그램을 설치할 필요가 없으나, 사진과 같은 미디어를 화면에 표시하는 기능을 제공하여야 한다.

외부 데이터를 제공하는 장치/단말은 영상의 크기를 조절하거나, 영상의 표출 영역을 조절하는 기능을 제공함이 바람직하지만, 그러한 기능이 없는 경우 표시되는 정보만으로 영상을 표출한다.

도 2는 본 발명의 실시예에 따른 보안 환경에서의 외부 영상 정보 전송 시스템을 도시한다.

본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 시스템은 외부 영상 정보를 획득하는 영상정보 수집부(110)와, 외부 영상 정보에서 전달 대상 부분영상을 추출하는 정보 전달 영역 결정 및 부분영상 수집부(120)를 포함하는 것을 특징으로 한다.

영상정보 수집부(110)는 카메라와 같은 영상 수집 장치를 사용하여, 외부 영상 정보 표출 화면을 촬영하고, 이를 정보 전달 영역 결정 및 부분영상 수집부(120)로 전달한다.

이 때, 영상정보 수집부(110)의 해상도는 수집 대상 영상의 품질을 고려하여 기준 해상도 이상의 해상도를 가지는 것이 바람직하다.

제어부(미도시)는 영상정보 수집부(110)가 주변 조명에 의한 영향으로부터 강건할 수 있도록 그 포지션을 제어한다.

지지부(미도시)는 영상정보 수집부(110)가 촬영을 수행하는 과정에서 움직임이나 흔들림이 없도록 지지하는 역할을 한다.

정보 전달 영역 결정 및 부분영상 수집부(120)는 외부 데이터 전달 장치의 화면 표시 영역 내의 정보 전달 영역을 결정하고, 정보 전달 영역에 해당하는 복수 개의 부분영상을 수집한다.

본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 시스템은 복수 개의 부분영상을 이용하여 통합 영상을 합성하고, 영상 복원을 위한 변환행렬을 계산하는 통합 영상 합성 및 변환행렬 계산부(130)와, 변환행렬을 이용하여 영상의 복원본을 생성하고, 화질 개선을 수행하는 영상 변환 및 화질 개선부(140)를 더 포함할 수 있다.

도 4를 참조하면, 본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 시스템은 부분영상의 정보 전달 영역을 정의하는 좌표 정보 및 최종영상의 모양에 대한 좌표 정보를 이용하여 계산한 변환행렬을 통해, 부분영상에 대한 보정을 수행하는 부분영상 보정 및 처리부(150)를 더 포함할 수 있다.

도 3은 본 발명의 실시예에 따른 보안 환경에서의 외부 영상 정보 전송 절차를 도시한다.

본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 방법은 (a) 외부 데이터 전달 장치를 촬영하여 외부 영상 정보를 획득하는 단계 및 (b) 외부 영상 정보를 이용하여 정보 전달 영역을 결정하고, 정보 전달 영역에 해당하는 부분영상을 수집하는 단계를 포함하는 것을 특징으로 한다.

(b) 단계는 외부 데이터 전달 장치에서의 확대 및 표출 영역 이동에 따라, 기설정된 개수의 좌표들로 표현되는 정보 전달 영역을 결정한다.

본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 방법은 (c-1) 복수 개의 부분영상을 이용하여 통합 영상을 합성하고, 변환행렬에 따라 영상의 복원본을 생성하여 전송하는 단계를 더 포함할 수 있다.

본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 방법은 (c-2) 부분영상의 정보 전달 영역을 정의하는 좌표 정보 및 최종영상의 모양에 대한 좌표 정보를 이용하여 변환행렬을 계산하고, 변환행렬을 이용하여 부분영상에 대해 보정하는 단계를 더 포함할 수 있다.

영상정보 수집부(110)는 외부 영상 정보 표출 화면을 촬영하여, 외부 영상 정보를 취득한다.

정보 전달 영역 결정 및 부분영상 수집부(120)는 카메라 영상으로부터 전달하려는 부분영상을 추출하고, 복수 개의 부분영상을 수집한다.

통합 영상 합성 및 변환행렬 계산부(130)는 복수 개의 부분영상을 이용하여 통합 영상을 합성하고, 영상 복원을 위한 변환행렬을 계산한다.

영상 변환 및 화질 개선부(140)는 변환행렬을 이용하여 전달하려던 영상의 복원본을 생성하되, 무아레 패턴이나 역광에 의한 플레어 현상을 처리하기 위해 화질 개선을 수행한다.

본 발명의 실시예에 따른 통합 영상 합성 및 변환행렬 계산부(130)는 정보 전달 영역 결정 및 부분영상 수집부(120)를 통해 수집된 복수의 영상들 간의 상관성을 검사하고, 영상들 간의 상대적인 위치와 크기 변환 관계를 찾으며, 위치에 따라 영상들을 정렬함으로써, 단일 영상을 만든다.

본 발명의 실시예에 따르면, 부분영상들에서 특징점(feature point)을 검출하고, 부분영상들 상호간 특징점들이 물리적으로 동일한 지점을 의미하는지를 검사하는 매칭 과정을 수행하고, 수행된 매칭을 통해 호모그래피 변환 행렬과 같은 변환 파라미터를 찾고, 변환 파라미터를 이용하여 회전, 위치이동, 크기 변화 등을 수행한다.

본 발명의 실시예에 따른 영상 변환 및 화질 개선부(140)는 통합 영상 합성 및 변환행렬 계산부(130)를 통해 만들어진 단일 영상을 직사각형 영역으로 바꾸는 작업을 수행하고, 이에 대한 최종적인 화질 개선 처리를 수행한다.

화질 개선 처리를 수행하는 이유는 화면에 표시된 정보를 카메라와 같은 영상정보 수집장치(110)를 이용하여 다시 획득하는 과정에 따라 무아레 패턴이나 역광 등이 존재할 수 있기 때문이다.

본 발명의 실시예에 따른 정보 전달 영역 결정 및 부분영상 수집부(120)에서 추출된 영상은 모양이 왜곡되어 있으므로 이를 보정할 필요가 있다.

따라서, 도4를 참조하면, 부분영상 보정 및 처리부(150)는 왜곡된 영상들을 보정하기 위해 기획득된 정보 전달 영역을 기술하는 {A, B, C, D} 정보를 이용하여 보정 및 처리를 수행한다.

{A, B, C, D} 좌표 정보와 변형하려는 최종영상의 모양에 대한 4개의 좌표를 이용하여 변환행렬을 계산하고, 변환행렬을 이용하여 왜곡되지 않은 직사각형 형태의 부분영상을 획득한다.

변형하려는 최종영상의 모양에 대한 4개의 좌표가 정해지지 않은 경우에도, 스마트폰과 같은 단말의 가로, 세로 길이의 비를 추정하여 기본값으로 사용하는 것이 가능하다.

이러한 경우 보정된 영상의 가로, 세로 길이의 비가 원래의 비와 상이해질 수 있는데, 이에 대하여는 영상처리 도구를 사용하여 처리하는 것이 가능하다.

부분영상 보정 및 처리부(150)는 무아레 패턴이나 역광에 의한 플레어 현상 등이 포함될 수 있기 때문에 이런 정보를 제거하고 화질을 개선하는 처리를 수행한다.

도 5는 본 발명의 실시예에 따라 보안을 유지한 상태로 외부 데이터를 보조 시스템으로 전달하는 것을 도시하고, 도 6은 본 발명의 실시예에 따라 보안을 유지한 상태로 외부 데이터를 핵심 보안 시스템으로 전달하는 것을 도시한다.

본 발명의 실시예에 따른 외부 영상 정보 전송 시스템(100)은 도 5에 도시한 바와 같이, 외부 데이터를 보안이 유지된 상태로 보조 시스템(21)으로 전달하고, 도 6에 도시한 바와 같이, 외부 데이터를 보안이 유지된 상태로 핵심 보안 시스템(11)으로 전달하는 것이 가능하다.

도 7은 본 발명의 실시예에 따라 외부에서 촬영된 영상을 수집하는 것을 도시한다.

도 7은 외부 데이터 전달자에 의해, 외부에서 촬영된 영상을 외부 영상 정보 전송 시스템에 전달하는 과정을 도시한다.

탁자와 같은 평평한 표면에 스마트폰과 같은 단말장치(D)를 켜고, 전달하고자 하는 사진을 화면에 표시하고 이를 조작하면, 외부 영상 정보 전송 시스템의 영상정보 수집부(110)가 이에 대한 영상정보를 획득한다.

도 7에 도시한 영상정보 수집부(110) 및 외부 데이터 전달 장치(D)는 영상을 전달하는 과정에서 가급적 움직이지 않는 것이 바람직하며, 움직임이 허용되는 범위도 평평한 표면에서 병진운동(translation movement)이나 회전운동(rotational movement)으로 한정된다.

도 8은 전달 대상이 되는 원본 사진의 예를 도시한다.

도 8은 외부 데이터 전달자가 스마트폰과 같은 단말장치에 담긴 사진을 보조 시스템(21) 또는 핵심 보안 시스템(11)으로 전달하고자 하는 경우, 전달하려는 원본 사진을 도시한다.

도 9는 전달 대상이 되는 원본 사진을 단말 장치(D)의 화면 표시부를 통해 표출한 예를 도시한다.

전술한 바와 같이, 보안 환경에서 외부 데이터 전달자는 도 9에 도시한 바와 같이, 사진을 스마트폰(외부 데이터 전달 장치, D)에 표시하여 보안 시스템 운용자에게 보여주거나, 이를 재촬영함으로써 보조 시스템(21) 또는 핵심 보안 시스템(11)으로 전달하며, 이때 강조하고 싶은 영역을 찾아 크기를 조절하여 보여준다.

도 10은 외부 영상 정보 표출 화면에서의 영상 크기 조절 또는 위치 조절을 도시하는데, 이를 통해 단순 촬영에 비해 더 좋은 화질의 영상을 전달하는 것이 가능하다.

도 10은 9장의 영상을 다중 촬영한 것을 예를 들어 도시한 것인데, 다중 촬영이 대상이 되는 영상의 개수는 이에 한정되지 않는다.

도 10에 도시한 바와 같이 일정 영역의 화면을 확대하여 디스플레이시키는 경우, 원본 영상의 일부만이 화면에 나타나게 되는데, 본 발명의 실시예에 따르면 확대된 다수 개의 일부 영역을 취득하여 고해상도의 최종 영상을 생성함으로써, 크기가 작은 영상을 촬영하는 종래 기술에 대비하여 볼 때 더 상세한 정보를 전달하는 것이 가능한 효과가 있다.

본 발명의 실시예에 따르면, 화면 확대에 의해 그 일부가 표출되는 영상을 부분영상으로 정의한다.

도 11은 촬영된 영상에서의 정보 전달 영역에 대한 가상 표시를 도시한다.

도 11은 도 10의 영상들을 취득하는 과정에서, 실제 정보가 전달되는 영역을 가상으로 표시한 것이다.

도 11에 도시한 바와 같이, 정보 전달 영역은 {A, B, C, D} 4개 지점들로 표현되는 사각형으로 표시된다.

4개 지점이 필요한 이유는 통상적인 화면 표시 장치가 직사각형 형태를 갖기 때문이다.

화면 표시 장치(D)에 대해 영상정보 수집부(110)로 촬영하게 되면, 정보 전달 영역은 피사체와 카메라의 상대적 배치 상태에 따라서 임의의 사각형 형태가 된다.

즉, 영상정보 수집부(110)에 의해 획득된 영상은 2차원 영상 좌표계에 표현되는 정보로 표현할 수 있으며, {A, B, C, D} 지점들은 2차원 영상 좌표계에서 각각의 x, y 좌표점으로 표현된다.

정보 전달 영역은 통상적으로 정보를 전달하려는 단말이 가지고 있는 화면 표시 영역 안쪽이 되는 것이 바람직한데, 이는 전달하려는 원본 사진은 화면 표시 영역에만 표출되기 때문이다.

그러나 화면 표시 영역의 일부만 활용하여 영상을 표시하는 것이 가능하므로, 화면 표시 영역 전체가 반드시 정보 전달 영역이 되는 것은 아니다.

본 발명의 실시예에 따르면, 정보 전달 영역의 결정을 위해 사용자 인터페이스를 제공하거나, 자동으로 정보 전달 영역을 결정한다.

도 12은 도 10에서 도시한 과정에 따라 수집된 영상들에서 추출된 정보 전달 영역을 함께 도시한 것이다.

본 발명의 실시예에 따라 정보 전달 영역이 결정되면, 그 영역 내에서의 영상이 추출되며, 복수 개의 영상을 함께 표시하면 도 12에 도시한 바와 같다.

복수 개의 영상은 크기와 방향이 약간씩 상이하므로, 전체적으로는 불연속적인 모습을 보이고, 주변 광원이 바뀌거나 영상정보 수집부(110)의 수집 파라미터가 바뀌는 경우, 복수 개의 영상들 간에는 색상도 약간씩 다르게 된다.

도 13은 정보 전달 영역에 대해서 추출된 영상을 붙이기 처리한 결과를 도시한다.

도 13은 도 12에 도시한 바와 같은 수집된 영상에서 결정된 정보 전달 영역에 해당하는 부분 영상을 추출하고, 추출 결과를 하나로 붙이는 과정을 통해 획득된 이상적인 영상의 결과물을 도시한다.

도 14는 도 13에서 붙이기 처리한 영상을 직사각형 형태로 변환한 결과를 도시하며, 도 13에서 붙이기 처리된 영상을 기설정된 방법으로 계산된 호모그래피 행렬과 같은 변환 매개변수를 사용하여 직사각형 형태로 변환한 결과를 도시한다.

전술한 과정을 통해, 외부 데이터 전달자가 제공한 외부 데이터에 대한 영상 정보가 보안 시스템 또는 핵심 보안 시스템으로 전송된다.

본 발명의 다른 실시예에 따르면, 도 15에 도시한 바와 같이, 보조 시스템 화면 표시부에 표시된 영상을 보안이 유지된 상태로 핵심 보안 시스템으로 전달한다.

도 15는 본 발명의 다른 실시예에 따른 외부 데이터 전달 방식을 도시한다.

도 16에 도시한 바와 같이, 외부 데이터에 대한 영상을 취득하여 핵심 보안 시스템(11)으로 전달하기 위해, 영상정보 수집부(110)는 보조 시스템 화면 표시부(22)를 통해 표시되는 외부 데이터에 대한 영상을 취득한다.

도 17은 본 발명의 실시예에 따른 정보 전달 영역 결정 및 부분영상 수집 과정을 도시한다.

본 발명의 실시예에 따르면, 자동으로 정보 전달 영역을 결정할 것인지 여부를 확인한다(S1701).

S1701 단계에서 자동으로 정보 전달 영역을 결정하는 것으로 확인되면, 정보 전달 영역에 대한 자동 결정이 수행되고(S1702), S1701 단계에서 자동으로 정보 전달 영역을 결정하지 않는 것으로 확인되면, 사용자 인터페이스를 제공하여 입력되는 명령에 따라 정보 전달 영역을 결정한다(S1703).

S1703 단계는 촬영된 영상을 모니터 등에 표출하고, 정보 전달 영역을 정의하는 {A, B, C, D} 위치 좌표에 대해 화면 터치 인터페이스 또는 마우스 인터페이스 등을 통해 결정하는 기능을 제공한다.

이어서, S1704 단계에서는 자동으로 부분영상을 수집할 것인지 여부에 대해 확인한다.

S1704 단계에서 자동으로 부분영상을 수집하는 것으로 확인되면, S1705 단계는 정보 전달 영역이 결정된 부분영상을 자동으로 수집한다.

S1704 단계에서 자동으로 부분영상을 수집하지 않는 것으로 확인되면, S1706 단계는 정보 전달 영역이 결정된 부분영상의 수집과 관련하여, 사용자 인터페이스를 제공하여 입력되는 명령에 따라 부분영상을 수집한다. 이 때, '촬영 시작' 과 같은 버튼이나 특정 키보드 명령어와 같은 기설정된 방식에 따라 정보 전달 영역의 부분영상을 수집한다.

본 발명의 실시예에 따르면, 정보 전달 영역에 대한 자동 결정 및 부분영상 자동 수집의 경우, 모니터나 키보드와 같은 사용자 인터페이스 장치를 필수적으로 제공하지 않고도 정보 전달 영역 결정 및 부분영상 수집이 가능하므로, 절차가 간소화되고 사용 편의성이 증진된다.

도 18은 본 발명의 실시예에 따른 정보 전달 영역에 대한 자동 결정 과정을 도시하고, 도 19는 본 발명의 실시예에 따른 영상정보 수집부를 통한 촬영 시, 보여지는 영상의 형태 및 이를 2차원 좌표계로 표현한 예시이다.

점선 영역은 가상의 전달하려는 영상을 의미하고 굵은 실선 영역은 스마트폰 단말과 같은 외부 정보 전달 장치에서 영상 정보가 실제로 표출되는 영역을 의미한다.

가상의 전달하려는 영상은 편의상 {1, 2, 3, 4}라는 4개의 영역으로 표시하며, 실제로는 그 영역의 개수에 대한 조정이 가능하고, 그 형태로 격자 형태로 한정되지 않는다.

도 18의 (a)에 도시한 바와 같이, 외부 정보 전달 장치에서 영상을 별도로 확대하지 않으면, {1,2,3,4}로 표기된 가상의 4개의 영역이 외부 정보 전달 장치의 화면에 모두 표현된다.

외부 정보 전달 장치를 통해 영상을 확대하고 디스플레이 영역을 이동시키면 도 18의 (b), (c), (d), (e)와 같이 해당 화면에 상이한 영역들이 표시된다.

도 19는 도 18에 도시한 영상을 영상정보 수집부(110)를 통해 촬영함에 따른 영상의 모습을 도시한다.

점선 영역은 가상의 전달하려는 영상을 의미하고, 굵은 실선 영역은 외부 정보 전달 장치에서 영상 정보가 실제로 전달되는 영역을 의미한다.

영상이 표출되는 화면을 포함하는 외부 정보 전달 장치의 포지션 및 영상정보 수집부의 포지션에 따라, 실제로는 직사각형으로 표출되는 영상이 영상정보 수집부를 통해 왜곡된 모양으로 획득되는 것이다.

본 발명의 실시예에 따르면, 도 19에 도시한 굵은 실선으로 표기되며 {A, B, C, D} 라는 4개의 좌표점들을 연결하는 내부 영역인 정보 전달 영역에 대한 자동 추정이 수행된다.

{A, B, C, D} 점들을 추정하는 방식으로는 영상이 표출되는 화면에서 사용자가 영상들을 확대하거나 이동시키는 조작을 수행한 경우에 한하여, 이를 영상정보 수집부(110)가 연속적으로 영상을 촬영하고, 촬영된 영상들에서 배경과 전경을 분리하고, 전경 부분에서 4각형 폴리곤 객체를 영상처리 기법을 사용해서 추출함으로써, {A, B, C, D} 점들의 좌표값을 추정한다.

외부 정보 전달 장치를 통해 영상이 표출되는 화면 및 영상정보 수집부(110)의 상대적인 배치가 바뀌지 않는다면, 도 19에 도시한 (a), (b), (c), (d), (e)에 표기된 각각의 {A, B, C, D} 점들의 위치는 촬영이 지속되더라도 바뀌지 않게 될 것이고, 상대적인 배치가 바뀐다면 시간에 따라 이 점들의 위치도 바뀌게 된다.

{A, B, C, D} 점들의 위치는 촬영 과정 중 변경되지 않는 것이 바람직하나, 변경된 경우라고 하더라도 영상정보 수집부(110)가 고정된 상태이고, 외부 정보 전달 장치가 평평한 표면 위에서 병진운동(translation movement)이나 회전운동(rotational movement)만을 수행한다면 파라미터 추정 및 이를 이용한 영상 합성 및 변환이 용이하게 이루어진다.

부분영상을 수집하는 과정은 전술한 바와 같이 사용자 인터페이스를 제공하여 입력되는 명령에 따라 정보 전달 영역을 결정하거나, 영상정보 수집부(110)에 의해 연속적으로 영상이 수집되며 정보 전달 영역이 자동으로 결정된 결과에 따라, 정보 전달 영역 정보를 이용할 수 있을 때 해당 위치의 영상을 별도로 추출함으로써 부분영상에 대한 자동 수집이 가능하다.

본 발명의 실시예에 따르면, 기설정된 기준 이상의 품질을 가지는 영상만을 별도로 수집하기 위해, 정보 전달 영역 내부의 영상 움직임 정보를 계산하고, 그 움직임이 사전에 설정한 임계값 이하인 경우에만 부분영상을 수집하는 것이 바람직하다.

또한, 정보 전달 영역 내부의 영상 선명도 계수나 엔트로피를 계산하여 임계값 이상으로 선명한 경우에만 부분영상을 수집하는 것이 바람직하다.

이 때, Laplacian의 분산값을 계산하는 등의 다양한 방식이 적용된다.

한편, 본 발명의 실시예에 따른 보안 환경에서의 외부 영상 정보 전송 방법은 컴퓨터 시스템에서 구현되거나, 또는 기록매체에 기록될 수 있다. 컴퓨터 시스템은 적어도 하나 이상의 프로세서와, 메모리와, 사용자 입력 장치와, 데이터 통신 버스와, 사용자 출력 장치와, 저장소를 포함할 수 있다. 전술한 각각의 구성 요소는 데이터 통신 버스를 통해 데이터 통신을 한다.

컴퓨터 시스템은 네트워크에 커플링된 네트워크 인터페이스를 더 포함할 수 있다. 프로세서는 중앙처리 장치(central processing unit(CPU))이거나, 혹은 메모리 및/또는 저장소에 저장된 명령어를 처리하는 반도체 장치일 수 있다.

메모리 및 저장소는 다양한 형태의 휘발성 혹은 비휘발성 저장매체를 포함할 수 있다. 예컨대, 메모리는 ROM 및 RAM을 포함할 수 있다.

따라서, 본 발명의 실시예에 따른 보안 환경에서의 외부 영상 정보 전송 방법은 컴퓨터에서 실행 가능한 방법으로 구현될 수 있다. 본 발명의 실시예에 따른 보안 환경에서의 외부 영상 정보 전송 방법이 컴퓨터 장치에서 수행될 때, 컴퓨터로 판독 가능한 명령어들이 본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 방법을 수행할 수 있다.

한편, 상술한 본 발명에 따른 보안 환경에서의 외부 영상 정보 전송 방법은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현되는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체로는 컴퓨터 시스템에 의하여 해독될 수 있는 데이터가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(Read Only Memory), RAM(Random Access Memory), 자기 테이프, 자기 디스크, 플래시 메모리, 광 데이터 저장장치 등이 있을 수 있다. 또한, 컴퓨터로 판독 가능한 기록매체는 컴퓨터 통신망으로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 읽을 수 있는 코드로서 저장되고 실행될 수 있다.

이제까지 본 발명의 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (8)

1. 화면 표시 장치의 확대 화면에 의해, 그 일부가 표출되는 부분 영상을 포함하는 복수 개의 외부 영상 정보를 획득하는 영상정보 수집부;
   상기 외부 영상 정보에서 전달 대상 부분영상을 추출하는 정보 전달 영역 결정 및 부분영상 수집부;
   영상 복원을 위한 변환행렬을 계산하여 복수 개의 상기 전달 대상 부분영상을 이용한 통합 영상을 합성하는 통합 영상 합성 및 변환행렬 계산부; 및
   상기 변환행렬을 이용하여 영상의 복원본을 생성하고, 화질 개선을 수행하는 영상 변환 및 화질 개선부를 포함하고,
   상기 영상 합성 및 변환행렬 계산부는 상기 복수 개의 전달 대상 부분영상에서 특징점을 검출하고, 상기 복수 개의 전달 대상 부분영상에서 검출한 특징점의 물리적 동일 지점 여부에 대한 매칭을 수행하여 상관성을 검사하고, 매칭 결과에 따라 상대적인 회전, 위치 이동 및 크기 변환 관계를 획득하고, 상기 복수 개의 전달 대상 부분영상을 정렬하여 상기 통합 영상을 합성하는 것
   인 보안 환경에서의 외부 영상 정보 전송 시스템.
   
2. 삭제
3. 삭제
4. 제1항에 있어서,
   상기 부분영상의 정보 전달 영역을 정의하는 좌표 정보 및 최종영상의 모양에 대한 좌표 정보를 이용하여 변환행렬을 계산하고, 상기 변환행렬을 이용하여 상기 부분영상에 대한 보정을 수행하는 부분영상 보정 및 처리부
   를 더 포함하는 보안 환경에서의 외부 영상 정보 전송 시스템.
   
5. (a) 화면 표시 장치의 확대 화면에 의해, 그 일부가 표출되는 부분 영상을 포함하는 복수 개의 외부 영상 정보를 획득하는 단계;
   (b) 상기 외부 영상 정보에서 전달 대상 부분영상을 추출하는 단계; 및
   (c) 영상 복원을 위한 변환행렬을 계산하여 복수 개의 상기 전달 대상 부분영상을 이용한 통합 영상을 합성하는 단계를 포함하고,
   상기 (c) 단계는 상기 복수 개의 전달 대상 부분영상에서 특징점을 검출하고, 상기 복수 개의 전달 대상 부분영상에서 검출한 특징점의 물리적 동일 지점 여부에 대한 매칭을 수행하여 상관성을 검사하고, 매칭 결과에 따라 상대적인 회전, 위치 이동 및 크기 변환 관계를 획득하고, 상기 복수 개의 전달 대상 부분영상을 정렬하여 상기 통합 영상을 합성하는 것
   인 보안 환경에서의 외부 영상 정보 전송 방법.
6. 삭제
7. 삭제
8. 삭제

Images