KR102076773B1 - 영상 데이터 획득 방법 및 그 방법을 처리하는 전자 장치 - Google Patents

영상 데이터 획득 방법 및 그 방법을 처리하는 전자 장치 Download PDF

Info

Publication number
KR102076773B1
KR102076773B1 KR1020130001028A KR20130001028A KR102076773B1 KR 102076773 B1 KR102076773 B1 KR 102076773B1 KR 1020130001028 A KR1020130001028 A KR 1020130001028A KR 20130001028 A KR20130001028 A KR 20130001028A KR 102076773 B1 KR102076773 B1 KR 102076773B1
Authority
KR
South Korea
Prior art keywords
image data
electronic device
data
camera
audio data
Prior art date
Application number
KR1020130001028A
Other languages
English (en)
Other versions
KR20140089149A (ko
Inventor
박항규
임승경
김대성
김소라
김현경
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020130001028A priority Critical patent/KR102076773B1/ko
Priority to EP14150250.0A priority patent/EP2753061B1/en
Priority to CN201410005043.9A priority patent/CN103916595B/zh
Priority to US14/147,893 priority patent/US9723250B2/en
Publication of KR20140089149A publication Critical patent/KR20140089149A/ko
Application granted granted Critical
Publication of KR102076773B1 publication Critical patent/KR102076773B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명은 전자 장치에서 영상 데이터를 기록하기 위한 방법 및 장치에 관한 것으로, 특히, 다수의 카메라를 통해서 획득되는 서로 다른 방향의 영상 데이터를 동시에 저장하기 위한 방법 및 장치에 관한 것으로, 전자 장치의 영상 데이터 저장 방법은 제 1 영상 데이터 및 제 2 영상 데이터를 획득하는 과정, 상기 제 1 영상 데이터를 저장하면서 상기 제 2 영상 데이터의 피사체의 상태를 확인하는 과정, 상기 제 2 영상 데이터의 피사체 상태가 미리정한 조건을 만족하면, 상기 제 2 영상 데이터를 상기 제 1 영상 데이터와 함께 저장하는 과정을 포함한다.

Description

영상 데이터 획득 방법 및 그 방법을 처리하는 전자 장치{METHOD FOR OBTAINING VIDEO DATA AND AN ELECTRONIC DEVICE THEREOF}
본 발명은 전자 장치에서 영상 데이터를 기록하기 위한 방법 및 장치에 관한 것으로, 특히, 다수의 카메라를 통해서 획득되는 서로 다른 방향의 영상 데이터를 동시에 저장하기 위한 방법 및 장치에 관한 것이다.
최근 전자 장치의 급격한 발달에 따라 무선 음성 통화 및 정보 교환이 가능한 전자 장치가 생활 필수품이 되었다. 상기 전자 장치의 보급 초기에는 단순히 휴대할 수 있고, 무선 통화가 가능한 것으로 인식되었으나, 그 기술이 발달함과 무선 인터넷의 도입에 따라 상기 전자 장치는 단순한 전화 통화 또는 일정 관리 등의 목적뿐만 아니라 게임, 근거리 통신을 이용한 리모컨, 장착된 디지털 카메라에 의한 이미지 촬영과 같이 그 활용 범위가 갈수록 커지고 있어 사용자의 욕구를 충족시키고 있다.
상술한 바와 같이 상기 전자 장치에서 멀티미디어 서비스 제공에 따라 처리하는 정보량 및 표시해야 할 정보량이 증가하고 있다. 이에 따라, 공간 활용도를 개선하여 디스플레이부의 크기를 증가시킬 수 있는 터치스크린을 구비한 전자 장치에 대한 관심이 증가하고 있다.
상기 터치스크린은 정보의 입력과 표시를 하나의 스크린에서 수행하는 입력 및 표시 장치이다. 이에 따라, 상기 터치스크린을 사용하는 경우, 상기 전자 장치는 키패드와 같은 별도의 입력 장치를 제거하여 표시 면적을 증가시킬 수 있다. 예를 들어, 화면 전체가 터치스크린이 적용된 풀터치 방식을 사용하는 경우에는, 상기 전자 장치의 전면을 화면으로 활용하여 화면크기를 확대할 수 있다.
이러한 전자 장치는 카메라를 구비하여 확대된 디스플레이부에 영상 데이터를 디스플레이하는 기능을 제공한다. 즉, 상기 전자 장치는 피사체를 촬영하여 동영상(moving picture) 및 정지영상(still picture)으로 디스플레이하고 촬영된 데이터를 저장하거나 또는 멀티미디어 메시지 등으로 타인에게 전송할 수 있다.
일반적으로, 상기 전자 장치는 전면부 및 후면부에 카메라를 배치하고 있으며, 전면부에 배치된 카메라를 이용하여 사용자(사용자의 얼굴)를 촬영하고 후면부에 배치된 카메라를 이용하여 배경을 촬영할 수 있다.
더하여, 이러한 전자 장치는 카메라 스위칭 메뉴를 통해서 저장하고자 하는 영상 데이터를 선택할 수 있다. 즉, 상기 전자 장치는 전면부 또는 후면부에 배치된 카메라 가운데 하나의 카메라를 통해 획득되는 영상 데이터 또는 이미지 데이터를 저장할 수 있다.
이는 후면부에 배치된 카메라로 획득되는 영상 데이터와 전면부에 배치된 카메라로 획득되는 영상 데이터들을 동시에 하나의 영상 데이터로 저장할 수 없다는 것이며, 카메라 스위칭 메뉴로 선택적인 영상 데이터만 저장할 수 있다는 것이다.
하지만, 사용자는 배경에 대한 영상 데이터를 저장하면서 배경과 함께 자신이 촬영된 영상 데이터를 저장하고자 하나 상기와 같은 제한된 기능으로 자신과 배경에 대한 영상 데이터를 동시에 저장할 수 없다는 문제점이 발생한다.
일 예로, 사용자는 후면부에 배치된 카메라로 풍경에 대한 영상 데이터를 촬영하면서 저장할 수 있다. 만약, 현재 저장중인 영상 데이터에 대하여 사용자가 직접 설명할 경우에는 카메라 스위칭 메뉴로 전면부에 배치된 카메라가 동작되도록 처리한다.
이로 인하여, 상기 전자 장치는 이전에 후면부를 촬영하는 카메라의 동작을 중지하고 스위칭된 카메라를 이용하여 풍경에 대하여 설명하는 사용자를 촬영하여 저장할 수 있다. 이는 풍경과 사용자가 번갈아가면서 저장되는 것이다.
상기와 같은 문제점을 해결하기 위하여 상기 전자 장치에서 전면부 및 후면부에 배치된 카메라를 통해 동시에 획득되는 영상 데이터로 하나로 병합하여 저장하기 위한 장치 및 방법이 요구된다.
따라서, 본 발명의 목적은 전자 장치에서 영상 데이터 저장시 다양한 각도에서 촬영되는 영상 데이터를 동시에 저장하기 위한 방법 및 장치를 제공함에 있다.
본 발명의 다른 목적은 전자 장치에서 메인 영상 데이터를 저장하는 도중에 미리 정한 조건을 만족하는 시점에는 메인 영상 데이터와 서브 영상 데이터를 동시에 저장하기 위한 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 목적은 전자 장치에서 메인 영상 데이터와 서브 영상 데이터를 동시에 저장하는 경우, 메인 오디오 데이터와 서브 오디오 데이터에 가중치를 적용하기 위한 방법 및 장치를 제공함에 있다.
상술한 목적들을 달성하기 위한 본 발명의 제 1 견지에 따르면, 전자 장치의 영상 데이터 저장 방법은 제 1 영상 데이터 및 제 2 영상 데이터를 획득하는 과정, 상기 제 1 영상 데이터를 저장하면서 상기 제 2 영상 데이터의 피사체의 상태를 확인하는 과정, 상기 제 2 영상 데이터의 피사체 상태가 미리정한 조건을 만족하면, 상기 제 2 영상 데이터를 상기 제 1 영상 데이터와 함께 저장하는 과정을 포함한다.
바람직하게는 상기 제 2 영상 데이터를 상기 제 1 영상 데이터와 함께 저장하는 과정은 상기 제 2 영상 데이터를 상기 제 1 영상 데이터에 병합시키는 과정과 병합된 영상 데이터를 디스플레이하는 과정을 포함한다.
바람직하게는 상기 제 2 영상 데이터를 상기 제 1 영상 데이터에 병합시키는 과정은 상기 제 2 영상 데이터가 병합되는 영역의 크기, 위치, 형태 가운데 적어도 어느 한 가지를 변경하는 과정을 포함한다.
바람직하게는 상기 제 2 영상 데이터를 상기 제 1 영상 데이터와 함께 저장하는 과정은 상기 제 1 영상 데이터 및 제 2 영상 데이터에서 오디오 데이터를 추출하는 과정과 상기 추출된 오디오 데이터에 가중치를 적용한 후, 상기 가중치가 적용된 오디오 데이터를 영상 데이터에 합성하는 과정을 포함한다.
바람직하게는 상기 제 1 영상 데이터 및 제 2 영상 데이터를 획득하는 과정은 촬영 방향이 다른 다수의 카메라를 이용하여 상기 제 1 영상 데이터 및 상기 제 2 영상 데이터를 획득하는 과정을 포함한다.
바람직하게는 상기 제 1 영상 데이터 및 제 2 영상 데이터를 획득하는 과정은 하나의 카메라를 이용하여 제 1 영상 데이터 및 제 2 영상 데이터를 획득하는 과정을 포함한다.
상술한 목적들을 달성하기 위한 본 발명의 제 2 견지에 따르면, 영상 데이터를 저장하는 전자 장치는 적어도 하나의 프로세서, 메모리, 및 상기 메모리에 저장되며, 상기 적어도 하나의 프로세서에 의하여 실행 가능하도록 구성되는 적어도 하나의 상기 프로그램을 포함하며, 상기 프로그램은 제 1 영상 데이터 및 제 2 영상 데이터를 획득하고, 상기 제 1 영상 데이터를 저장하면서 상기 제 2 영상 데이터의 피사체의 상태를 확인하고, 상기 제 2 영상 데이터의 피사체 상태가 미리정한 조건을 만족하면, 상기 제 2 영상 데이터를 상기 제 1 영상 데이터와 함께 저장하도록 처리하는 명령어를 포함한다.
바람직하게는 상기 프로그램은 상기 제 2 영상 데이터를 상기 제 1 영상 데이터에 병합시키고, 병합된 영상 데이터를 디스플레이하도록 처리하는 명령어를 포함한다.
바람직하게는 상기 프로그램은 상기 제 2 영상 데이터가 병합되는 영역의 크기, 위치, 형태 가운데 적어도 어느 한 가지를 변경하도록 처리하는 명령어를 포함한다.
바람직하게는 상기 프로그램은 상기 제 1 영상 데이터 및 제 2 영상 데이터에서 오디오 데이터를 추출하고, 상기 추출된 오디오 데이터에 가중치를 적용한 후, 상기 가중치가 적용된 오디오 데이터를 영상 데이터에 합성하도록 처리하는 명령어를 포함한다.
바람직하게는 상기 프로그램은 촬영 방향이 다른 다수의 카메라를 이용하여 상기 제 1 영상 데이터 및 상기 제 2 영상 데이터를 획득하도록 처리하는 명령어를 포함한다.
바람직하게는 상기 프로그램은 하나의 카메라를 이용하여 제 1 영상 데이터 및 제 2 영상 데이터를 획득하도록 처리하는 명령어를 포함한다.
상술한 목적들을 달성하기 위한 본 발명의 제 3 견지에 따르면, 전자 장치에 의해 실행될 경우, 상기 장치로 하여금 제 1 영상 데이터 및 제 2 영상 데이터를 획득하는 과정, 상기 제 1 영상 데이터를 저장하면서 상기 제 2 영상 데이터의 피사체의 상태를 확인하는 과정, 상기 제 2 영상 데이터의 피사체 상태가 미리정한 조건을 만족하면, 상기 제 2 영상 데이터를 상기 제 1 영상 데이터와 함께 저장하는 과정을 수행하도록 하는 명령어들을 포함하는 하나 이상의 프로그램을 저장한 컴퓨터 판독 가능 저장 매체를 포함한다.
상술한 바와 같이 본 발명에 따른 전자 장치에서 영상 데이터 저장시 메인 영상 데이터와 서브 영상 데이터를 동시에 저장하여 사용자가 카메라를 스위칭하는 과정을 생략할 수 있다.
더하여, 메인 영상 데이터와 서브 영상 데이터가 동시에 저장되는 경우, 주변 잡음을 제거하여 사용자의 음성이 명확하게 저장될 수 있다.
도 1은 본 발명에 따른 영상 데이터 저장 기능을 제공하는 전자 장치의 구성을 도시한 블록도,
도 2는 본 발명에 따른 전자 장치에서 영상 데이터를 저장하는 과정을 도시한 흐름도,
도 3은 본 발명에 따라 영상 데이터를 저장하는 전자 장치의 화면을 도시한 도면,
도 4는 본 발명의 바람직한 일 실시 예에 따른 전자 장치에서 서브 영상 데이터를 편집하는 화면을 도시한 도면,
도 5는 본 발명의 바람직한 다른 실시 예에 따른 전자 장치에서 서브 영상 데이터를 편집하는 화면을 도시한 도면,
도 6은 본 발명의 바람직한 또 다른 실시 예에 따른 전자 장치에서 서브 영상 데이터를 편집하는 화면을 도시한 도면,
도 7은 본 발명의 다른 실시 예에 따른 전자 장치에서 영상 데이터를 저장하는 과정을 도시한 도면,
도 8은 본 발명의 또 다른 실시 예에 따른 전자 장치에서 영상 데이터를 저장하는 과정을 도시한 도면 및,
도 9는 본 발명에 따른 전자 장치에서 영상 데이터 저장시 오디오 데이터를 처리하는 과정을 도시한 흐름도.
이하 본 발명의 바람직한 실시 예를 첨부된 도면의 참조와 함께 상세히 설명한다. 그리고, 본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
이하 설명에서는 본 발명에 따른 전자 장치에서 영상 데이터 저장시 다양한 각도에서 촬영되는 영상 데이터를 동시에 저장하기 위하여 메인 영상 데이터를 저장하는 도중에 미리 정한 조건을 만족하는 시점에는 메인 영상 데이터와 서브 영상 데이터를 동시에 저장하기 위한 방법 및 장치에 대하여 설명할 것이다.
더하여, 상기 영상 데이터는 움직이는 동화상 데이터뿐만 아니라, 움직임이 없는 이미지 데이터도 포함할 수 있다.
또한, 본 명세서에서 제스처는 전자 장치의 터치 스크린에 터치 패턴을 이루는 것을 의미한다. 터치는 사용자의 손가락 또는 스타일러스 펜 등 외부에서의 입력수단에 의해 전자 장치의 터치 스크린상에서 이루어지며, 상기 제스처는 터치 스크린에 터치가 유지된 상태에서 일정한 패턴의 드래그(drag)가 이루어지는 것을 의미한다. 경우에 따라서는 제스처는 터치가 유지된 상태에서의 드래그 및 터치의 해지(release)까지 수행되는 것을 의미하기도 한다.
더하여, 상기 전자 장치는 휴대용 전자 장치(portable electronic device)일 수 있으며, 휴대용 단말기(portable terminal), 이동 전화(mobile phone), 미디어 플레이어(media player), 태블릿 컴퓨터(tablet computer), 핸드헬드 컴퓨터(handheld computer) 또는 PDA(Personal Digital Assistant)와 같은 장치일 수 있다. 또한, 이러한 장치들 중 두 가지 이상의 기능을 결합한 장치를 포함하는 임의의 휴대용 전자 장치일 수도 있다.
도 1은 본 발명에 따른 영상 데이터 저장 기능을 제공하는 전자 장치의 구성을 도시한 블록도이다.
상기 도 1에 도시된 바와 같이 전자 장치(100)는 메모리(110), 프로세서 유닛(processor unit)(120), 오디오 처리부(130), 통신 시스템(140), 입출력 제어부(150), 터치스크린(160) 및 입력 장치(170)를 포함한다. 여기서, 상기 메모리(110) 및 통신 시스템(140)은 다수 개 존재할 수도 있다.
각 구성요소에 대해 살펴보면 다음과 같다.
상기 메모리(110)는 전자 장치(100)의 동작을 제어하기 위한 프로그램을 저장하는 프로그램 저장부(111) 및 프로그램 수행 중에 발생되는 데이터를 저장하는 데이터 저장부(112)를 포함한다. 예를 들어, 상기 데이터 저장부(112)는 전화번호부, 발신메시지 및 수신메시지와 같은 갱신 가능한 각종 보관용 데이터를 저장하며, 본 발명에 따라 메인 영상 데이터와 서브 영상 데이터를 동시에 저장하는 시기를 판단하는데 사용되는 정보를 저장한다. 여기에서, 상기 메인 영상 데이터는 사용자가 저장하고자 하는 피사체를 제 1 카메라를 이용하여 촬영한 영상 데이터이며, 상기 메인 영상 데이터는 영상 데이터 저장을 종료하는 이벤트가 발생하기 전까지 디스플레이부에 디스플레이됨과 동시에 메모리에 저장된다.
상기 서브 영상 데이터는 상기 메인 영상 데이터와 다른 각도에 존재하는 피사체를 제 2 카메라를 이용하여 촬영한 영상 데이터이며, 상기 메인 영상 데이터와 다르게 미리 정한 조건을 만족하는 시기에 디스플레이부에 디스플레이되면서 메인 영상 데이터와 함께 저장된다.
또한, 상기 프로그램 저장부(111)는 운영체제 프로그램(113), 제스처 분석 프로그램(114), 영상처리 프로그램(115), 디스플레이 프로그램(116) 및 적어도 하나의 응용프로그램(117)을 포함한다. 여기서, 상기 프로그램 저장부(111)에 포함되는 프로그램은 명령어들의 집합으로 명령어 세트(instruction set)로 표현할 수도 있다.
상기 운영체제 프로그램(113)은 일반적인 시스템 작동(system operation)을 제어하는 여러 가지의 소프트웨어 구성요소를 포함한다. 이러한 일반적인 시스템 작동의 제어는, 예를 들면, 메모리 관리 및 제어, 저장 하드웨어(장치) 제어 및 관리, 전력 제어 및 관리 등을 의미한다. 이러한 운영체제 프로그램(113)은 여러 가지의 하드웨어(장치)와 프로그램 구성요소(모듈) 사이의 통신을 원활하게 하는 기능도 수행한다.
상기 제스처 분석 프로그램(114)은 상기 전자 장치의 제어를 위한 사용자의 제스처를 분석한다. 여기에서, 상기 사용자의 제스처를 분석한다는 것은 사용자의 제스처를 감지한다는 의미와 동일시될 수 있다.
일 예로, 상기 제스처 분석 프로그램(114)은 메인 영상 데이터를 촬영하는 카메라를 선택하는 사용자의 제스처를 감지한다.
더하여, 상기 제스처 분석 프로그램(114)은 사용자의 제스처 외에 영상 데이터를 분석할 수 있다. 즉, 상기 제스처 분석 프로그램(114)은 일시적으로 저장되는 서브 영상 데이터를 분석하여 메인 영상 데이터와 서브 영상 데이터가 동시에 저장되어야 하는 시기를 판단한다. 일 예로, 상기 제스처 분석 프로그램(114)은 상기 서브 영상 데이터에 포함된 피사체의 상태(사용자의 얼굴, 음성(오디오 데이터), 신체 움직임 등)를 확인할 수 있다.
더하여, 상기 제스처 분석 프로그램(114)은 서브 영상 데이터가 병합되는 영역의 위치를 변경하는 사용자의 제스처를 감지할 수 있다.
더하여, 상기 제스처 분석 프로그램(114)은 서브 영상 데이터가 병합되는 영역의 크기를 변경하는 사용자의 제스처를 감지할 수 있다.
더하여, 상기 제스처 분석 프로그램(114)은 영상 데이터 저장 중 서브 영상 데이터가 병합되는 영역의 형태를 변형시키는 사용자의 제스처를 감지한다.
상기 제스처 분석 프로그램(114)은 감지된 사용자의 제스처를 상기 영상처리 프로그램(115) 및 디스플레이 프로그램(116)으로 전달한다.
상기 영상처리 프로그램(115)은 상기 메인 영상 데이터와 서브 영상 데이터가 동시에 저장되어야 하는 시기로 판단되면, 상기 메인 영상 데이터와 서브 영상 데이터를 병합하도록 처리한다.
여기에서, 상기 메인 영상 데이터와 서브 영상 데이터를 병합하는 것은 상기 메인 영상 데이터와 서브 영상 데이터가 동시에 디스플레이되도록 영상 처리하는 것으로, 상기 메인 영상 데이터의 일부 영역에 상기 서브 영상 데이터를 포함시키는 것이 될 수 있다.
더하여, 상기 영상처리 프로그램(115)은 영상 데이터 저장 중 저장하고자 하는 영상 데이터를 편집하는 사용자의 제스처가 감지되면, 상기 메인 영상 데이터 또는 서브 영상 데이터에 편집 효과가 적용되도록 한다. 여기에서, 상기 영상 데이터에 편집 효고를 적용하는 것은 서브 영상 데이터가 병합될 메인 영상 데이터의 영역의 위치와 크기를 변경하는 것이 될 수 있다.
더하여, 상기 영상처리 프로그램(115)은 영상 데이터 저장 중 메인 영상 데이터의 영역의 형태를 변경하여 서브 영상 데이터를 병합할 수 있다.
더하여, 상기 영상처리 프로그램(115)은 영상 데이터 저장 중 메인 영상 데이터와 서브 영상 데이터를 동시에 저장하는 경우, 메인 영상 데이터와 서브 영상 데이터에서 오디오 데이터를 추출하여 각각의 오디오 데이터에 가중치를 적용하도록 처리한다. 이후, 상기 영상처리 프로그램(115)은 가중치가 적용된 오디오 데이터를 각각의 영상 데이터에 합성하도록 처리한다.
상기 디스플레이 프로그램(116)은 상기 터치 스크린(160) 상에 그래픽을 제공하고 표시하기 위한 여러 가지 소프트웨어 구성요소를 포함한다. 그래픽(graphics)이란 용어는 텍스트(text), 웹 페이지(web page), 아이콘(icon), 디지털 이미지(digital image), 비디오(video), 애니메이션(animation) 등을 포함하는 의미로 사용된다.
더하여, 상기 디스플레이 프로그램(116)은 사용자 인터페이스에 관련한 여러 가지 소프트웨어 구성요소를 포함한다.
즉, 상기 디스플레이 프로그램(116)은 영상 데이터 저장 중 메인 영상 데이터와 서브 영상 데이터를 동시에 저장하도록 하는 이벤트가 발생되는 경우, 상기 메인 영상 데이터와 서브 영상 데이터가 병합된 영상 데이터를 디스플레이한다.
일 예로, 상기 디스플레이 프로그램(116)은 제 1 카메라를 통해 획득되는 메인 영상 데이터를 디스플레이부에 디스플레이하고, 메인 영상 데이터와 서브 영상 데이터를 동시에 저장하도록 하는 이벤트가 발생되는 경우에 제 1 카메라를 통해 획득되는 메인 영상 데이터와 제 2 카메라를 통해 획득되는 서브 영상 데이터를 디스플레이부에 디스플레이한다.
상기 응용프로그램(116)은 전자 장치(100)에 설치된 적어도 하나의 응용 프로그램에 대한 소프트웨어 구성요소를 포함한다.
프로세서 유닛(120)은 적어도 하나의 프로세서(processor)(122) 및 인터페이스(124)를 포함한다. 여기서, 상기 프로세서(122) 및 인터페이스(124)는 적어도 하나의 집적화된 회로로 집적화되거나 별개의 구성요소로 구현될 수 있다.
상기 인터페이스(124)는 프로세서(122)와 메모리(110) 접근을 제어하는 메모리 인터페이스의 역할을 수행한다.
더하여, 상기 인터페이스(124)는 전자 장치(100)의 입출력 주변 장치와 프로세서(122)의 연결을 제어하는 주변 장치 인터페이스의 역할을 수행한다.
상기 프로세서(122)는 적어도 하나의 소프트웨어 프로그램을 사용하여 전자 장치(100)가 메인 영상 데이터와 서브 영상 데이터를 동시에 저장하는 기능을 수행하도록 제어한다. 이때, 상기 프로세서(122)는 메모리(110)에 저장되어 있는 적어도 하나의 프로그램을 실행하여 해당 프로그램에 대응하는 기능을 수행하도록 제어한다. 예를 들어, 상기 프로세서(122)는 영상 데이터에 포함되는 피사체의 상태(사용자의 얼굴 존재, 목소리 존재, 입술 움직임 등)에 따라 메인 영상 데이터와 서브 영상 데이터를 병합하는 그래픽 프로세서를 포함할 수 있다.
즉, 상기 전자 장치(100)의 영상 데이터 저장 기능은 상기 메모리(110)에 저장된 프로그램과 같은 소프트웨어 또는 상기 그래픽 프로세서와 같은 하드웨어를 이용하여 수행할 수 있다.
상기 오디오 처리부(130)는 스피커(131) 및 마이크로폰(132)을 통해 사용자와 전자 장치(100) 사이의 오디오 인터페이스를 제공한다.
상기 통신 시스템(140)은 상기 전자 장치(100)의 음성 통신 및 데이터 통신을 위한 통신 기능을 수행한다. 이때, 상기 통신 시스템(140)은 서로 다른 통신 네트워크를 지원하는 다수 개의 통신 서브 모듈들로 구분될 수도 있다. 예를 들어, 통신 네트워크는 이들에 한정하지는 않지만, GSM(Global System for Mobile Communication) 네트워크, EDGE(Enhanced Data GSM Environment) 네트워크, CDMA(Code Division Multiple Access) 네트워크, W-CDMA(W-Code Division Multiple Access) 네트워크, LTE(Long Term Evolution) 네트워크, OFDMA(Orthogonal Frequency Division Multiple Access) 네트워크, 무선랜, Bluetooth 네트워크 및 NFC(Near Field Communication) 등을 포함한다.
상기 입출력 제어부(150)는 터치 스크린(160) 및 입력 장치(170) 등의 입출력 장치와 인터페이스 사이에 인터페이스를 제공한다.
상기 터치스크린(160)은 정보의 출력 및 정보의 입력을 수행하는 입출력 장치로, 터치 입력부(161)와 디스플레이부(162)를 포함한다.
상기 터치 입력부(161)는 터치 패널을 통해 감지된 터치 정보를 입출력 제어부(150)를 통해 프로세서 유닛(120)으로 제공한다. 이때, 상기 터치 입력부(161)는 터치 정보를 터치 다운(touch_down), 터치 움직임(touch_move) 및 터치 업(touch_up)과 같은 명령어 구조로 변경하여 프로세서 유닛(120)으로 제공하는 것으로, 본 발명에 따라 영상 데이터의 저장을 제어하는 사용자의 제스처를 발생시킨다. 여기에서, 상기 영상 데이터의 저장을 제어하는 것은 메인 영상 데이터와 서브 영상 데이터를 동시에 저장하도록 하는 것으로, 서브 영상 데이터가 병합될 메인 영상 데이터 영역의 위치, 크기 형태를 변경하는 것이 될 수 있다.
상기 디스플레이부(162)는 전자 장치(100)의 상태 정보, 사용자가 입력하는 문자, 동화상(moving picture) 및 정화상(still picture) 등을 표시한다. 예를 들어, 상기 디스플레이부(162)는 저장하고자 하는 영상 데이터를 디스플레이한다. 즉, 상기 디스플레이부(162)는 제 1 카메라 및 제 2 카메라를 통해 획득된 영상 데이터를 디스플레이하고, 상기 메인 영상 데이터와 서브 영상 데이터를 동시에 저장하도록 하는 이벤트가 발생되는 경우, 상기 메인 영상 데이터와 서브 영상 데이터가 병합된 영상 데이터를 디스플레이한다.
상기 입력 장치(170)는 사용자의 선택에 의해 발생하는 입력 데이터를 입출력 제어부(150)를 통해 프로세서 유닛(120)으로 제공한다. 예를 들어, 입력 장치(170)는 상기 전자 장치(100)의 제어를 위한 제어 버튼만을 포함하여 구성된다. 다른 예를 들어, 상기 입력 장치(170)는 사용자로부터 입력 데이터를 제공받기 위한 키패드로 구성되어, 본 발명에 따라 영상 데이터의 저장을 제어하는 사용자의 입력 데이터를 발생시킨다.
또한, 영상 데이터 획득부(180)는 영상 데이터를 획득하는 모듈로 본 발명에 따라 적어도 두 개 이상의 카메라를 포함할 수 있다. 예를 들어, 메인 영상 데이터를 획득하는 제 1 카메라와 서브 영상 데이터를 획득하는 제 2 카메라를 포함할 수 있으며, 이러한 카메라는 서로 다른 방향에 배치되어 각 방향에 해당하는 영상 데이터를 촬영한다. 즉, 제 1 카메라는 상기 전자 장치의 전면부에 배치되어 사용자의 모습에 대한 영상 데이터를 획득하고, 제 2 카메라는 상기 전자 장치의 후면부에 배치되어 배경에 대한 영상 데이터를 획득할 수 있다.
미 도시되었지만, 상기 전자 장치(100)는 방송 수신을 위한 방송 수신 모듈, MP3 모듈과 같은 디지털 음원 재생 모듈, 근거리 무선 통신을 위한 근거리 무선 통신 모듈 및 근접 센싱을 위한 근접 센서 모듈 등 부가 기능을 제공하기 위한 구성요소들과 이들의 동작을 위한 소프트웨어를 더 포함할 수 있다.
도 2는 본 발명에 따른 전자 장치에서 영상 데이터를 저장하는 과정을 도시한 흐름도이다.
상기 도 2를 참조하면, 상기 전자 장치는 서로 다른 촬영 방향을 가지는 카메라를 이용하여 영상 데이터를 획득할 수 있는 것으로, 본 발명의 일 실시 예에 따라 상기 전자 장치는 전면부와 후면부 각각에 배치되어 있는 카메라를 이용하여 상기 전자 장치의 전면부에 대한 영상 데이터와 후면부에 대한 영상 데이터를 획득하여 저장할 수 있다.
먼저, 상기 전자 장치는 201단계에서 제 1 카메라를 이용하여 메인 영상 데이터를 획득한 후, 203단계로 진행하여 제 2 카메라를 이용하여 서브 영상 데이터를 획득한다.
여기에서, 상기 메인 영상 데이터는 사용자가 저장하고자 하는 피사체를 제 1 카메라를 이용하여 촬영한 영상 데이터이며, 영상 데이터 저장을 종료하는 이벤트가 발생하기 전까지 디스플레이부에 디스플레이됨과 동시에 메모리에 저장된다.
상기 서브 영상 데이터는 상기 메인 영상 데이터와 다른 각도에 존재하는 피사체를 제 2 카메라를 이용하여 촬영한 영상 데이터이며, 상기 메인 영상 데이터와 다르게 미리 정한 조건을 만족하는 시기에 디스플레이부에 디스플레이되면서 메인 영상 데이터와 함께 저장된다. 이때, 상기 서브 영상 데이터는 메인 영상 데이터에 병합되어 저장될 수 있다.
일 예로, 상기 제 1 카메라는 상기 전자 장치의 전면부에 배치되어 있는 카메라가 되고, 이러한 경우, 상기 제 2 카메라는 상기 전자 장치의 후면부에 배치되어 있는 카메라가 될 수 있다. 반대로, 상기 제 1 카메라가 상기 전자 장치의 후면부에 배치되어 있는 카메라가 될 수 있으며, 이러한 경우, 상기 제 2 카메라는 상기 전자 장치의 전면부에 배치되어 있는 카메라가 될 수 있다.
이후, 상기 전자 장치는 205단계로 진행하여 서브 영상 데이터의 디스플레이 조건을 분석한 후, 207단계로 진행하여 분석 결과를 확인한다. 여기에서, 상기 전자 장치는 상기 제 2 카메라를 통해 획득되는 영상 데이터를 실제 메모리에 저장하는 시기를 판단하는 것이다.
더하여, 상기 전자 장치의 사용자는 풍경이나 여행지를 촬영하면서 촬영되는 영상 데이터에 대한 설명을 추가하기를 원할 수 있다. 이러한 경우, 상기 전자 장치는 제 1 카메라를 통해서 풍경이나 여행지에 대한 영상 데이터를 획득하고, 제 2 카메라를 통해서 사용자에 대한 영상 데이터를 획득하게 될 것이다. 여기에서, 풍경이나 여행지에 대한 영상 데이터가 메인 영상 데이터가 되고, 사용자에 대한 영상 데이터가 서브 영상 데이터가 될 수 있다.
이때, 상기 전자 장치는 본 발명에 따라 사용자가 메인 영상 데이터(풍경이나 여행지)에 대하여 설명을 추가하는 경우에만 서브 영상 데이터(사용자에 대한 영상 데이터)를 저장할 수 있으며, 이러한 동작을 수행하기 위하여 상기 전자 장치는 제 2 카메라로 획득되는 영상 데이터를 분석하여 영상 데이터에 사용자의 얼굴이 포함되어 있는 경우에 제 2 카메라로 획득되는 서브 영상 데이터를 저장하는 시기라고 판단할 수 있다.
더하여, 상기 전자 장치는 제 2 카메라로 획득되는 영상 데이터를 분석하여 영상 데이터에 사용자의 음성이 포함되어 있는 경우에 제 2 카메라로 획득되는 서브 영상 데이터를 저장하는 시기라고 판단할 수 있다.
더하여, 상기 전자 장치는 제 2 카메라로 획득되는 영상 데이터를 분석하여 영상 데이터에 사용자의 입술이 움직이는 경우에 제 2 카메라로 획득되는 서브 영상 데이터를 저장하는 시기라고 판단할 수 있다. 이때, 상기 전자 장치는 제 2 카메라로 획득되는 영상 데이터에 포함된 사용자의 입술이 움직임으로 사용자가 말하고 있다고 판단하여 서브 영상 데이터를 저장하는 시기라고 판단하는 것이다.
상기 언급한 서브 영상 데이터의 저장 시기를 판단하는 요소는 메인 영상 데이터에 대하여 설명하는 사용자를 존재 여부를 판단하기 위한 것으로, 상기 전자 장치는 상기 언급한 요소 가운데 적어도 어느 하나를 이용할 수 있다. 물론, 다수의 요소를 이용하여 영상 데이터의 저장 시기를 정확하게 판단할 수 있다.
더하여, 상기 언급한 요소는 상기 서브 영상 데이터의 저장 시기를 판단하기 위한 본 발명의 일 실시 예를 위한 요소로 상기 전자 장치는 상기 언급한 요소 외에 다른 요소를 이용하여 영상 데이터의 저장 시기를 판단할 수 있다.
일 예로, 상기 전자 장치는 제 2 카메라로 획득되는 서브 영상 데이터를 분석하여 미리 설정한 사용자와 동일한 사용자가 포함되어 있는 경우에 제 2 카메라로 획득되는 서브 영상 데이터를 저장하는 시기라고 판단할 수 있다. 이는 제 2 카메라로 획득되는 영상 데이터에 사용자 외에 다른 사람이 포함되어 있더라도 상기 서브 영상 데이터가 저장되는 것을 방지하기 위한 것이다.
만일, 상기 207단계에서 서브 영상 데이터의 디스플레이 조건을 만족(서브 영상 데이터의 저장 조건을 만족)함을 확인할 경우, 상기 전자 장치는 209단계로 진행하여 메인 영상 데이터 및 서브 영상 데이터를 디스플레이한 후, 211단계로 진행하여 디스플레이되는 영상 데이터를 저장한다. 여기에서, 상기 전자 장치는 디스플레이되는 메인 영상 데이터의 일부 영역에 서브 영상 데이터를 추가하여 디스플레이한 후, 서브 영상 데이터가 포함된 메인 영상 데이터를 저장하도록 처리할 수 있다.
한편, 상기 207단계에서 서브 영상 데이터의 디스플레이 조건을 만족하지 않음을 확인할 경우, 상기 전자 장치는 215단계로 진행하여 메인 영상 데이터를 디스플레이한 후, 211단계로 진행하여 디스플레이되는 메인 영상 데이터만 저장한다.
상기와 같이 영상 데이터를 저장한 전자 장치는 213단계로 진행하여 영상 데이터 저장을 종료하는지 확인한다.
만일, 상기 213단계에서 영상 데이터 저장을 종료하지 않을 경우, 상기 전자 장치는 상기 201단계로 진행하여 영상 데이터를 저장하는 과정을 수행한다.
한편, 상기 213단계에서 영상 데이터 저장을 종료하는 경우, 상기 전자 장치는 본 알고리즘을 종료한다.
상기 도 2에서는 다수의 카메라를 이용하여 서로 다른 방향에 대한 영상 데이터를 획득하였으나, 본 발명에 따른 전자 장치는 화각이 넓은 하나의 카메라를 이용하여 다수의 피사체를 획득할 수도 있다.
즉, 상기 전자 장치는 넓은 화각으로 촬영된 하나의 영상 데이터에서 메인 피사체와 서브 피사체를 분류하고, 메인 피사체만을 저장하다가 서브 피사체의 저장 조건을 만족하는 경우, 상기 메인 피사체와 서브 피사체를 동시에 저장하도록 처리할 수 있다.
도 3은 본 발명에 따라 영상 데이터를 저장하는 전자 장치의 화면을 도시한 도면이다.
상기 도 3을 참조하면, 상기 전자 장치는 영상 데이터를 저장하도록 하는 기능을 제공한다.
이러한 전자 장치는 서로 다른 촬영 방향을 가지는 카메라를 이용하여 피사체를 촬영할 수 있는 것으로, 본 발명의 일 실시 예에 따라 상기 전자 장치에는 제 1 카메라와 제 2 카메라를 구비하여 상기 전자 장치를 기준으로 전면부에 대한 영상 데이터와 후면부에 대한 영상 데이터를 획득할 수 있다. 이때, 상기 제 1 카메라는 전면부에 배치된 카메라가 될 수 있고, 상기 제 2 카메라는 후면부에 배치된 카메라가 될 수 있다.
이러한 전자 장치는 피사체를 촬영하도록 하는 사용자의 제스처가 감지되면, 제 1 카메라와 제 2 카메라를 동시에 동작시켜 각각의 카메라의 촬영 방향에 존재하는 피사체에 대한 영상 데이터를 획득한다.
이때, 상기 전자 장치는 사용자에 의해 선택된 카메라에 의해 획득되는 영상 데이터만 프리뷰 화면에 디스플레이하고, 선택되지 않은 카메라에 의해 획득되는 영상 데이터는 일시적으로 저장한다. 여기에서, 상기 프리뷰 화면에 디스플레이되는 영상 데이터는 메인 영상 데이터라고 정의하고, 일시적으로 저장되는 영상 데이터를 서브 영상 데이터로 정의한다. 이때, 상기 전자 장치는 일시적으로 저장되는 서브 영상 데이터를 분석하여 서브 영상 데이터가 디스플레이되는 시점을 판단한다.
즉, 상기 전자 장치는 두 개의 카메라를 이용하여 피사체에 대한 영상 데이터를 획득하나, 메인 영상 데이터를 프리뷰 화면에 항상 디스플레이하면서 저장하고, 서브 영상 데이터는 미리정한 조건을 만족하는 시점에만 메인 영상 데이터와 함께 디스플레이되면서 저장된다.
상기 서브 영상 데이터가 프리뷰 화면에 디스플레이되는 조건은 영상 데이터를 획득하는 상황에 따라 구분될 수 있다.
상기 영상 데이터를 획득하는 상황의 예는 사용자가 메인 영상 데이터를 설명하는 상황이 될 수 있으며, 이러한 상황에서 서브 영상 데이터는 사용자가 될 수 있다.
이러한 경우, 상기 전자 장치는 사용자의 얼굴, 음성, 입술 모양 가운데 적어도 어느 한 요소를 서브 영상 데이터를 디스플레이하는 조건으로 사용할 수 있다.
일 예로, 사용자가 제 2 카메라(예; 후면부의 카메라)를 이용하여 주위 배경을 촬영하면서, 배경을 설명하는 자신의 얼굴을 제 1 카메라(전면부의 카메라)로 촬영하는 상황을 가정할 수 있다. 이러한 상황은 상기 전자 장치에 제공되는 기능으로 실행될 수 있다.
이러한 경우, 사용자는 주의 배경을 촬영하는 제 2 카메라를 메인 카메라로 설정할 것이며, 이로 인하여 제 2 카메라를 통해 촬영되는 사용자 주위 배경이 메인 영상 데이터가 된다. 또한, 사용자의 얼굴을 촬영하는 제 1 카메라는 서브 카메라로 설정되며, 제 1 카메라를 통해 촬영되는 사용자의 얼굴은 서브 영상 데이터가 된다.
이러한 상황에서 피사체를 촬영하도록 하는 사용자의 제스처를 감지하는 경우, 상기 전자 장치는 제 1 카메라와 제 2 카메라를 동시에 동작시켜 메인 영상 데이터와 서브 영상 데이터를 획득한다.
이때, 상기 전자 장치는 메인 카메라의 동작이 종료될 때까지 상기 메인 영상 데이터를 디스플레이부에 디스플레이함과 동시에 메모리에 저장하며, 서브 영상 데이터는 일시적으로 저장하도록 처리한다. 이때, 상기 서브 영상 데이터는 디스플레이부에 디스플레이되지 않는다.
이후, 상기 전자 장치는 일시적으로 저장된 서브 영상 데이터를 분석하여, 사용자 얼굴의 존재 여부, 음성 존재 여부, 입술 모양의 변화 여부 등을 확인한다.
즉, 상기 전자 장치는 서브 영상 데이터를 분석하여 서브 영상 데이터에 사용자의 얼굴, 음성이 존재하거나 사용자의 입술 모양이 변화되는 경우에 서브 영상 데이터의 디스플레이 조건을 만족하였다고 판단할 수 있다.
상기와 같이 서브 영상 데이터를 분석하여 서브 영상 데이터를 디스플레이하는 조건이 만족된다고 판단하면, 상기 전자 장치는 메인 영상 데이터에 서브 영상 데이터를 병합하여 디스플레이한 후, 서브 영상 데이터가 병합된 메인 영상 데이터를 메모리에 저장하도록 처리한다.
다른 예로, 메인 영상 데이터를 배경으로 사용자를 촬영하는 상황이 될 수 있으며, 이러한 상황에서는 미리정한 음성 명령어를 서브 영상 데이터를 디스플레이하는 조건으로 사용할 수 있다.
일 예로, 사용자가 제 2 카메라(예; 후면부의 카메라)를 이용하여 주위 배경을 촬영하면서, 배경과 함께 자신의 얼굴을 제 1 카메라(전면부의 카메라)로 촬영하는 상황을 가정할 수 있다.
이러한 경우, 사용자는 주의 배경을 촬영하는 제 2 카메라를 메인 카메라로 설정할 것이며, 이로 인하여 제 2 카메라를 통해 촬영되는 사용자 주위 배경이 메인 영상 데이터가 된다. 또한, 사용자의 얼굴을 촬영하는 제 1 카메라는 서브 카메라로 설정되며, 제 1 카메라를 통해 촬영되는 사용자의 얼굴은 서브 영상 데이터가 된다.
이러한 상황에서 피사체를 촬영하도록 하는 사용자의 제스처를 감지하는 경우, 상기 전자 장치는 제 1 카메라와 제 2 카메라를 동시에 동작시켜 메인 영상 데이터와 서브 영상 데이터를 획득한다.
이때, 상기 전자 장치는 메인 카메라의 동작이 종료될 때까지 상기 메인 영상 데이터를 디스플레이부에 디스플레이함과 동시에 메모리에 저장하며, 서브 영상 데이터는 일시적으로 저장하도록 처리한다. 이때, 상기 서브 영상 데이터는 디스플레이부에 디스플레이되지 않는다.
이후, 상기 전자 장치는 사용자에 의해 미리정한 음성 명령어(예; start, 촬영 등의 명령어)가 입력되는지 확인한다.
만약, 미리정한 음성 상기와 같이 입력되면, 상기 전자 장치는 메인 영상 데이터에 서브 영상 데이터를 병합하여 디스플레이한 후, 상기 서브 영상 데이터가 병합된 메인 영상 데이터를 메모리에 저장하도록 처리한다.
정리하면, 본 발명에 따른 전자 장치는 두 개의 카메라를 이용하여 서로 다른 방향에 존재하는 피사체에 대한 영상 데이터를 획득하나, 메인 영상 데이터만 프리뷰 화면에 항상 디스플레이하면서 메모리에 저장하고, 서브 영상 데이터를 디스플레이하는 조건이 만족되는 시점에는 상기 메인 영상 데이터에 서브 영상 데이터를 병합시켜 상기 서브 영상 데이터가 병합된 메인 영상 데이터를 프리뷰 화면에 디스플레이하면서 메모리에 저장할 수 있다.
도 3(a)는 카메라를 통해 획득되는 데이터를 디스플레이하는 프리뷰 화면을 디스플레이한 전자 장치를 도시한 도면으로, 상기 전자 장치는 프리뷰 화면(301)에 촬영 방식을 선택하는 메뉴를 포함시킬 수 있다. 여기에서, 상기 촬영 방식은 이미지 데이터(303)를 저장하는 방식과 영상 데이터(305)를 저장하는 방식이 될 수 있다.
이러한 전자 장치는 도 3(b)에 도시된 바와 같이 촬영 방식을 선택하는 사용자의 제스처(307)를 감지하면, 도 3(c)에 도시된 바와 같이 사용자에 의해 선택된 촬영 방식에 따라 획득된 데이터를 프리뷰 화면에 디스플레이함과 동시에 메모리에 저장(309)한다.
도시된 도면에서는 메인 영상 데이터만 디스플레이되면서 저장되는 상황을 도시하였으나, 서브 영상 데이터의 디스플레이 조건이 만족되면, 상기 전자 장치는 도 3(d)에 도시된 바와 같이 메인 영상 데이터에 서브 영상 데이터를 병합(311)하여 디스플레이함과 동시에 병합된 영상 데이터를 메모리에 저장할 수 있다.
상기 도 3에서는 전자 장치에서 전면부에 대한 피사체와 후면부에 대한 피사체에 대한 데이터를 병합하기 위하여 제 1 카메라와 제 2 카메라가 동시에 동작하는 실시 예에 대하여 설명하였으나, 본 발명에 따른 전자 장치는 하나의 카메라만 단독적으로 동작시킨 후, 영상 데이터 병합을 위한 조건이 만족되는 시점에서 나머지 카메라를 동작시켜 병합시킬 피사체에 대한 영상 데이터를 획득할 수 있다.
도 4는 본 발명의 바람직한 일 실시 예에 따른 전자 장치에서 서브 영상 데이터를 편집하는 화면을 도시한 도면이다.
상기 도 4를 참조하면, 상기 전자 장치는 다수의 피사체에 대한 영상 데이터를 병합하여 저장하는 기능을 제공한다.
이러한 전자 장치는 서로 다른 촬영 방향을 가지는 카메라를 이용하여 피사체를 촬영할 수 있는 것으로, 본 발명의 일 실시 예에 따라 상기 전자 장치에는 제 1 카메라와 제 2 카메라를 구비하여 상기 전자 장치를 기준으로 전면부에 대한 영상 데이터와 후면부에 대한 영상 데이터를 획득한 후, 이를 병합하여 저장할 수 있다. 이러한 영상 데이터는 사용자의 선택에 따라 메인 영상 데이터와 서브 영상 데이터로 구분된다.
여기에서, 상기 메인 영상 데이터는 사용자가 저장하고자 하는 피사체를 제 1 카메라를 이용하여 촬영한 영상 데이터이며, 영상 데이터 저장을 종료하는 이벤트가 발생하기 전까지 디스플레이부에 디스플레이됨과 동시에 메모리에 저장된다.
상기 서브 영상 데이터는 상기 메인 영상 데이터와 다른 각도에 존재하는 피사체를 제 2 카메라를 이용하여 촬영한 영상 데이터이며, 상기 메인 영상 데이터와 다르게 미리 정한 조건을 만족하는 시기에 디스플레이부에 디스플레이되면서 메인 영상 데이터와 함께 저장된다.
이때, 상기 전자 장치는 메인 영상 데이터에 서브 영상 데이터를 병합시킬 수 있는 영역을 미리 정의하고, 정의된 영역에 상기 서브 영역 데이터를 병합시킬 수 있다.
상기 전자 장치는 획득되는 서브 영상 데이터를 병합시킬 수 있는 영역의 위치와 크기를 프레임마다 계산하고, 계산된 위치와 크기에 맞게 서브 영상 데이터를 병합시킨다.
상기와 같이 프레임마다 서브 영상 데이터가 배치되는 위치와 크기를 계산하는 이유는 사용자의 제스처에 의해 서브 영상 데이터가 디스플레이되는 위치와 크기가 부드럽게 변경되도록 하기 위함이다.
이로 인하여, 상기 전자 장치는 도 4(a)에 도시된 바와 같이 서브 영상 데이터가 병합되는 위치(401)를 변경하는 사용자의 제스처(403)가 감지할 경우, 상기 전자 장치는 도 4(b)에 도시된 바와 같이 사용자의 의해 변경(405)된 위치(407)를 서브 영상 데이터가 병합되는 위치로 정의하고, 변경된 위치에 서브 영상 데이터를 병합시킬 수 있는 것이다.
도 5는 본 발명의 바람직한 다른 실시 예에 따른 전자 장치에서 서브 영상 데이터를 편집하는 화면을 도시한 도면이다.
상기 도 5를 참조하면, 상기 전자 장치는 다수의 피사체에 대한 영상 데이터를 병합하여 저장하는 기능을 제공한다.
이러한 전자 장치는 서로 다른 촬영 방향을 가지는 카메라를 이용하여 피사체를 촬영할 수 있는 것으로, 본 발명의 일 실시 예에 따라 상기 전자 장치에는 제 1 카메라와 제 2 카메라를 구비하여 상기 전자 장치를 기준으로 전면부에 대한 영상 데이터와 후면부에 대한 영상 데이터를 획득한 후, 이를 병합하여 저장할 수 있다.
여기에서, 상기 메인 영상 데이터는 사용자가 저장하고자 하는 피사체를 제 1 카메라를 이용하여 촬영한 영상 데이터이며, 영상 데이터 저장을 종료하는 이벤트가 발생하기 전까지 디스플레이부에 디스플레이됨과 동시에 메모리에 저장된다.
상기 서브 영상 데이터는 상기 메인 영상 데이터와 다른 각도에 존재하는 피사체를 제 2 카메라를 이용하여 촬영한 영상 데이터이며, 상기 메인 영상 데이터와 다르게 미리 정한 조건을 만족하는 시기에 디스플레이부에 디스플레이되면서 메인 영상 데이터와 함께 저장된다.
이때, 상기 전자 장치는 메인 영상 데이터에 서브 영상 데이터를 병합시킬 수 있는 영역을 미리 정의하고, 정의된 영역에 상기 서브 영상 데이터를 병합시킬 수 있다.
상기 전자 장치는 획득되는 서브 영상 데이터를 병합시킬 수 있는 영역의 위치와 크기를 프레임마다 계산하고, 계산된 위치와 크기에 맞게 서브 영상 데이터를 병합시킨다.
상기와 같이 프레임마다 서브 영상 데이터가 배치되는 위치와 크기를 계산하는 이유는 사용자의 제스처에 의해 서브 영상 데이터가 디스플레이되는 위치와 크기가 부드럽게 변경되도록 하기 위함이다.
이로 인하여, 상기 전자 장치는 도 5(a)에 도시된 바와 같이 서브 영상 데이터가 병합되는 영역(501)의 크기를 변경하는 사용자의 제스처(503)가 감지할 경우, 상기 전자 장치는 도 5(b)에 도시된 바와 같이 사용자의 의해 변경(505)된 크기(507)를 서브 영역 데이터가 병합되는 영역의 크기로 정의하고, 변경된 영역의 크기에 맞는 서브 영상 데이터를 병합시킬 수 있는 것이다.
도 6은 본 발명의 바람직한 또 다른 실시 예에 따른 전자 장치에서 서브 영상 데이터를 편집하는 화면을 도시한 도면이다.
상기 도 6을 참조하면, 상기 전자 장치는 다수의 피사체에 대한 영상 데이터를 병합하여 저장하는 기능을 제공한다.
이러한 전자 장치는 서로 다른 촬영 방향을 가지는 카메라를 이용하여 피사체를 촬영할 수 있는 것으로, 본 발명의 일 실시 예에 따라 상기 전자 장치에는 제 1 카메라와 제 2 카메라를 구비하여 상기 전자 장치를 기준으로 전면부에 대한 영상 데이터와 후면부에 대한 영상 데이터를 획득한 후, 이를 병합하여 저장할 수 있다.
여기에서, 상기 메인 영상 데이터는 사용자가 저장하고자 하는 피사체를 제 1 카메라를 이용하여 촬영한 영상 데이터이며, 영상 데이터 저장을 종료하는 이벤트가 발생하기 전까지 디스플레이부에 디스플레이됨과 동시에 메모리에 저장된다.
상기 서브 영상 데이터는 상기 메인 영상 데이터와 다른 각도에 존재하는 피사체를 제 2 카메라를 이용하여 촬영한 영상 데이터이며, 상기 메인 영상 데이터와 다르게 미리 정한 조건을 만족하는 시기에 디스플레이부에 디스플레이되면서 메인 영상 데이터와 함께 저장된다.
이때, 상기 전자 장치는 메인 영상 데이터에 서브 영상 데이터를 병합시킬 수 있는 영역을 미리 정의하고, 정의된 영역에 상기 서브 영상 데이터를 병합시킬 수 있다.
상기 전자 장치는 다양한 형태의 서브 영상 데이터가 병합되는 영역을 제공할 수 있다. 이는 서브 영상 데이터가 병합되는 영역의 모양을 사용자가 선택할 수 있다는 것이다.
즉, 도 6(a)에 도시된 바와 같이 서브 영상 데이터가 병합되는 영역(601)의 형태를 변경하는 사용자의 제스처(603)가 감지되면, 상기 전자 장치는 도 6(b)에 도시된 바와 같이 서브 영상 데이터가 병합되는 영역의 형태들을 디스플레이(605)한다. 도시된 도면에서는 사각형의 영역이 기 설정되어 있으며, 사용자에 의해 타원의 영역, 하트 영역, 액자 영역, 말풍선 영역 등으로 변경될 수 있음을 나타낸다.
도 6(c)와 같이 변경하고자 하는 서브 영역 데이터가 병합되는 영역의 형태가 선택(607)되면, 상기 전자 장치는 도 6(d)에 도시된 바와 같이 사용자에 의해 선택된 형태로 서브 영역 데이터가 병합되는 영역의 형태를 변(609)경한다.
즉, 도 6(c)는 사용자가 하트 영역을 선택한 상황을 도시하고 있으며, 도 6(d)는 기 설정된 사각형의 영역의 하트 영역으로 변경된 상황을 도시하고 있다.
도 7은 본 발명의 다른 실시 예에 따른 전자 장치에서 영상 데이터를 저장하는 과정을 도시한 도면이다.
상기 도 7을 참조하면, 상기 전자 장치는 하나의 카메라를 구비하여 피사체에 대한 데이터를 획득할 수 있다. 상기 전자 장치의 카메라는 넓은 면적을 촬영할 수 있고, 고화소의 영상 데이터를 획득할 수 있다.
이러한 카메라로 촬영된 영상 데이터에는 다수의 피사체가 존재할 수 있다. 여기에서, 상기 피사체는 사람, 배경, 동물 등이 될 수 있다.
즉, 상기 전자 장치는 상기 카메라를 통해 획득된 영상 데이터에 다수의 피사체가 존재함을 확인할 경우, 각각의 피사체를 메인 피사체와 서브 피사체로 정의하고, 메인 피사체와 서브 피사체를 편집한 영상 데이터를 생성할 수 있다.
여기에서, 상기 메인 피사체와 서브 피사체를 편집하는 것은 메인 피사체와 서브 피사체의 거리가 일정해지도록 편집하는 것이 될 수 있다.
더하여, 상기 메인 피사체와 서브 피사체를 편집하는 것은 메인 피사체가 포함된 영상 데이터에 서브 피사체가 포함되도록 편집하는 것이 될 수 있다.
일 예로, 상기 전자 장치는 도 7(a)에 도시된 바와 같이 풍경(701)과 사람(703)이 촬영된 영상 데이터를 획득할 수 있다. 상기 도 7(a)의 상황은 사용자가 먼 거리에 있는 산을 촬영하면서 촬영되는 산에 대하여 느낌을 영상으로 기록하는 상황을 가정한다.
일반적으로, 상기 전자 장치는 카메라의 렌즈를 이동시켜 먼 거리에 있는 피사체를 근접하게 촬영할 수 있으나 이러한 경우, 근거리에 있는 피사체는 동시에 촬영할 수 없게 된다.
이에 따라, 본 발명에 따른 전자 장치는 도 7(b)에 도시된 바와 같이 메인 피사체와 서브 피사체를 편집하도록 하는 메뉴를 디스플레이(705)한 후, 사용자의 선택에 따라 메인 피사체와 서브 피사체를 편집한다.
즉, 도 7(c)에 도시된 바와 같이 상기 카메라를 통해 획득된 영상 데이터에서 메인 피사체(707)와 서브 피사체(709)를 크롭한 후, 각 피사체의 원근감을 조절하여 서로 동일한 거리에 있도록 편집할 수 있다.
다른 예로, 도 7(d)에 도시된 바와 같이 상기 카메라를 통해 획득된 영상 데이터에서 메인 피사체와 서브 피사체를 크롭한 후, 메인 피사체에 대한 영상 데이터(711)에 서브 피사체에 대한 영상 데이터(713)를 포함시킬 수 있다.
도 8은 본 발명의 또 다른 실시 예에 따른 전자 장치에서 영상 데이터를 저장하는 과정을 도시한 도면이다.
상기 도 8을 참조하면, 상기 전자 장치는 영상 데이터를 저장하도록 하는 기능을 제공한다.
이러한 전자 장치는 서로 다른 촬영 방향을 가지는 카메라를 이용하여 피사체를 촬영할 수 있는 것으로, 본 발명의 일 실시 예에 따라 상기 전자 장치에는 전면부에 제 1 카메라와 제 2 카메라를 구비하여 상기 전자 장치를 기준으로 전면부에 대한 다수의 영상 데이터를 획득할 수 있다. 상기 제 1 카메라 및 제 2 카메라는 촬영 방향, 각도 등을 조절할 수 있는 카메라로 위치는 고정되어 있으나, 촬영 방향을 조절할 수 있는 구조로 되어 있다.
이러한 전자 장치는 피사체를 촬영하도록 하는 사용자의 제스처가 감지되면, 제 1 카메라와 제 2 카메라의 촬영 방향에 해당하는 영상 데이터를 획득한 후, 제 1 카메라를 통해 획득한 메인 영상 데이터와 제 2 카메라를 통해 획득한 서브 영상 데이터를 디스플레이부의 서로 다른 디스플레이 영역에 디스플레이하도록 한다. 이때, 상기 전자 장치는 사용자에 의해 설정된 촬영 각도 및 방향에 대한 영상 데이터를 획득하여 디스플레이하는 것이다.
이때, 상기 전자 장치는 메인 영상 데이터로 풍경과 같은 배경에 대한 영상 데이터를 획득할 수 있고, 서브 영상 데이터로 사용자의 얼굴에 대한 영상 데이터를 획득하여 디스플레이할 수 있다.
일 예로, 상기 전자 장치는 도 8(a)에 도시된 바와 같이 촬영 방향을 조절할 수 있는 두개의 카메라(801)를 이용하여 영상 데이터를 획득하고, 도 8(b)에 도시된 바와 같이 메인 영상 데이터(803)와 서브 영상 데이터(805)를 각각 다른 디스플레이 영역에 디스플레이하도록 처리한다.
다른 예로, 상기 전자 장치는 도 8(c)에 도시된 바와 같이 메인 영상 데이터(807)에 서브 영상 데이터(809)를 포함시킨 후, 이를 디스플레이할 수 있다.
도 9는 본 발명에 따른 전자 장치에서 영상 데이터 저장시 오디오 데이터를 처리하는 과정을 도시한 흐름도이다.
상기 도 9를 참조하면, 상기 전자 장치는 먼저 901단계에서 메인 영상 데이터와 서브 영상 데이터를 획득한다.
여기에서, 상기 메인 영상 데이터는 사용자가 저장하고자 하는 피사체를 제 1 카메라를 이용하여 촬영한 영상 데이터이며, 영상 데이터 저장을 종료하는 이벤트가 발생하기 전까지 디스플레이부에 디스플레이됨과 동시에 메모리에 저장된다.
상기 서브 영상 데이터는 상기 메인 영상 데이터와 다른 각도에 존재하는 피사체를 제 2 카메라를 이용하여 촬영한 영상 데이터이며, 상기 메인 영상 데이터와 다르게 미리 정한 조건을 만족하는 시기에 디스플레이부에 디스플레이되면서 메인 영상 데이터와 함께 저장된다.
이후, 상기 전자 장치는 획득된 영상 데이터에서 오디오 데이터를 분류한다. 여기에서, 상기 전자 장치는 메인 영상 데이터에 대한 오디오 데이터(메인 오디오 데이터)와 서브 영상 데이터에 대한 오디오 데이터(서브 오디오 데이터)를 구분하는 것으로, 상기 전자 장치는 마이크 어레이, 빔포밍 기술에 기반으로 메인 영상 데이터 또는 서브 영상 데이터에 대한 오디오 데이터를 추출할 수 있다.
이후, 상기 전자 장치는 905단계로 진행하여 메인 오디오 데이터와 서브 오디오 데이터에 가중치를 적용한다. 여기에서, 상기 오디오 데이터에 가중치를 적용하는 것은 메인 오디오 데이터 또는 서브 오디오 데이터의 크기를 조절하는 것이다. 일 예로, 상기 전자 장치는 사용자의 얼굴에 해당하는 영상 데이터와 배경에 해당하는 영상 데이터에서 오디오 데이터를 추출한 후, 사용자에 의한 오디오 데이터(사용자 음성)가 발생되는 경우에는 배경음을 줄여 사용자의 음성이 명확하게 녹음되도록 처리할 수 있다. 더하여, 상기 전자 장치는 사용자에 의한 오디오 데이터가 발생되지 않은 경우에는 배경음이 그대로 녹음되도록 처리할 수 있다.
상기와 같이 음성 데이터에 가중치를 적용한 전자 장치는 907단계로 진행하여 가중치가 적용된 오디오 데이터를 영상 데이터에 합성하도록 처리한 후, 909단계로 진행하여 오디오 데이터가 합성된 영상 데이터를 병합하도록 처리한 후, 본 알고리즘을 종료한다.
여기에서, 상기 전자 장치는 가중치가 적용된 메인 오디오 데이터를 메인 영상 데이터에 합성하고, 가중치가 적용된 서브 오디오 데이터를 서브 영상 데이터에 합성하는 것이다. 더하여, 상기 전자 장치는 오디오 데이터가 합성된 메인 영상 데이터와 서브 영상 데이터를 병합하여 저장하는 과정을 수행하는 것이다. 본 발명의 일 실시 예에 따라 가중치가 적용된 오디오 데이터가 합성된 영상 데이터는 메인 영상 데이터의 잡음이 제거되고 서브 영상 데이터의 음성이 명확해진 영상 데이터가 될 수 있다.
상술한 바와 같이 본 발명에 따른 전자 장치는 여행지 촬영하면서 사용자가 여행지에 대한 느낌을 기록하는 기능을 제공할 수 있다.
즉, 여행지에서 동영상 촬영시 상기 전자 장치는 후면의 배경과 배경을 설명하는 전면의 사용자 모습과 목소리를 함께 촬영하면서 저장할 수 있다.
이때, 상기 전자 장치는 사용자 얼굴, 입술 모양, 음성 등을 이용하여 사용자 모습의 저장 시점을 판단할 수 있는 것이다.
한편 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
110: 메모리 120: 프로세서 유닛

Claims (13)

  1. 전자 장치의 영상 데이터 저장 방법에 있어서,
    상기 전자 장치의 제 1 카메라 및 제 2 카메라를 동작시키는 과정,
    상기 제 1 카메라를 통해 제 1 영상 데이터를 획득하고, 및 상기 제 2 카메라를 통해 제 2 영상 데이터를 획득하는 과정,
    상기 제 1 영상 데이터 및 상기 제 2 영상 데이터 중 상기 제 1 영상 데이터를 디스플레이하고 저장하는 과정,
    상기 제 1 영상 데이터를 디스플레이하고 저장하면서 상기 제 2 영상 데이터를 분석함으로써 상기 제 2 영상 데이터의 피사체의 상태를 확인하는 과정,
    상기 제 2 영상 데이터의 피사체 상태가 상기 제 2 영상 데이터를 디스플레이하기 위한 미리 결정된 조건을 만족하는지를 판단하는 과정, 및
    상기 제 2 영상 데이터의 피사체 상태가 상기 미리 결정된 조건을 만족하면, 상기 제 2 영상 데이터를 상기 제 1 영상 데이터와 함께 디스플레이하면서 저장하는 과정을 포함하고,
    상기 제 2 영상 데이터를 상기 제 1 영상 데이터와 함께 디스플레이하면서 저장하는 과정은,
    상기 제 1 영상 데이터에서 제 1 오디오 데이터를 추출하고, 제 2 영상 데이터에서 제 2 오디오 데이터를 추출하는 과정과,
    상기 추출된 제 2 오디오 데이터에서 상기 피사체의 음성이 식별되면, 상기 제 2 오디오 데이터의 음성 크기가 상기 제1 오디오 데이터의 음성 크기보다 크도록, 상기 추출된 제 1 오디오 데이터 및 제 2 오디오 데이터에 가중치를 적용한 후, 상기 가중치가 적용된 제 1 오디오 데이터 및 제 2 오디오 데이터를 상기 제 1 영상 데이터 및 제 2 영상 데이터에 각각 합성하는 과정과,
    상기 추출된 제 2 오디오 데이터에서 상기 피사체의 음성이 식별되지 않으면, 상기 제 1 오디오 데이터의 음성 크기가 상기 제2 오디오 데이터의 음성 크기보다 크도록, 상기 추출된 제 1 오디오 데이터 및 제 2 오디오 데이터에 가중치를 적용한 후, 상기 가중치가 적용된 제 1 오디오 데이터 및 제 2 오디오 데이터를 상기 제 1 영상 데이터 및 제 2 영상 데이터에 각각 합성하는 과정을 포함하는 방법.
  2. 제 1항에 있어서,
    상기 제 2 영상 데이터를 상기 제 1 영상 데이터와 함께 디스플레이하면서 저장하는 과정은,
    상기 제 2 영상 데이터를 상기 제 1 영상 데이터에 병합시키는 과정과,
    병합된 영상 데이터를 디스플레이하는 과정을 포함하는 방법.
  3. 제 2항에 있어서,
    상기 제 2 영상 데이터를 상기 제 1 영상 데이터에 병합시키는 과정은,
    상기 제 2 영상 데이터가 병합되는 영역의 크기, 위치, 형태 가운데 적어도 어느 한 가지를 변경하는 과정을 포함하는 방법.
  4. 삭제
  5. 제 1항에 있어서,
    상기 제 1 영상 데이터 및 제 2 영상 데이터를 획득하는 과정은,
    촬영 방향이 다른 다수의 카메라를 이용하여 상기 제 1 영상 데이터 및 상기 제 2 영상 데이터를 획득하는 과정을 포함하는 방법.
  6. 제 1항에 있어서,
    상기 제 1 영상 데이터 및 제 2 영상 데이터를 획득하는 과정은,
    촬영 영역이 다른 다수의 카메라를 이용하여 제 1 영상 데이터 및 제 2 영상 데이터를 획득하는 과정을 포함하는 방법.
  7. 영상 데이터를 저장하는 전자 장치에 있어서,
    적어도 하나의 프로세서,
    메모리, 및
    상기 메모리에 저장되며, 상기 적어도 하나의 프로세서에 의하여 실행 가능하도록 구성되는 적어도 하나의 프로그램을 포함하며,
    상기 프로그램은,
    상기 전자 장치의 제 1 카메라 및 제 2 카메라를 동작시키고,
    상기 제 1 카메라를 통해 제 1 영상 데이터를 획득하고, 및 상기 제 2 카메라를 통해 제 2 영상 데이터를 획득하고,
    상기 제 1 영상 데이터 및 상기 제 2 영상 데이터 중 상기 제 1 영상 데이터를 디스플레이하고 저장하고,
    상기 제 1 영상 데이터를 디스플레이하고 저장하면서 상기 제 2 영상 데이터를 분석함으로써 상기 제 2 영상 데이터의 피사체의 상태를 확인하고,
    상기 제 2 영상 데이터의 피사체 상태가 상기 제 2 영상 데이터를 디스플레이하기 위한 미리 결정된 조건을 만족하는지를 판단하고,
    상기 제 2 영상 데이터의 피사체 상태가 상기 미리 결정된 조건을 만족하면, 상기 제 2 영상 데이터를 상기 제 1 영상 데이터와 함께 표시하면서 저장하도록 처리하는 명령어를 포함하고,
    상기 프로그램은,
    상기 제 1 영상 데이터에서 제 1 오디오 데이터를 추출하고, 제 2 영상 데이터에서 제 2 오디오 데이터를 추출하고,
    상기 추출된 제 2 오디오 데이터에서 상기 피사체의 음성이 식별되면, 상기 제 2 오디오 데이터의 음성 크기가 상기 제1 오디오 데이터의 음성 크기보다 크도록, 상기 추출된 제 1 오디오 데이터 및 제 2 오디오 데이터에 가중치를 적용한 후, 상기 가중치가 적용된 제 1 오디오 데이터 및 제 2 오디오 데이터를 상기 제 1 영상 데이터 및 제 2 영상 데이터에 각각 합성하고,
    상기 추출된 제 2 오디오 데이터에서 상기 피사체의 음성이 식별되지 않으면, 상기 제 1 오디오 데이터의 음성 크기가 상기 제2 오디오 데이터의 음성 크기보다 크도록, 상기 추출된 제 1 오디오 데이터 및 제 2 오디오 데이터에 가중치를 적용한 후, 상기 가중치가 적용된 제 1 오디오 데이터 및 제 2 오디오 데이터를 상기 제 1 영상 데이터 및 제 2 영상 데이터에 각각 합성하는 명령어를 포함하는 장치.
  8. 제 7항에 있어서,
    상기 프로그램은,
    상기 제 2 영상 데이터를 상기 제 1 영상 데이터에 병합시키고, 병합된 영상 데이터를 디스플레이하도록 처리하는 명령어를 포함하는 장치.
  9. 제 8항에 있어서,
    상기 프로그램은,
    상기 제 2 영상 데이터가 병합되는 영역의 크기, 위치, 형태 가운데 적어도 어느 한 가지를 변경하도록 처리하는 명령어를 포함하는 장치.
  10. 삭제
  11. 제 7항에 있어서,
    상기 프로그램은,
    촬영 방향이 다른 다수의 카메라를 이용하여 상기 제 1 영상 데이터 및 상기 제 2 영상 데이터를 획득하도록 처리하는 명령어를 포함하는 장치.
  12. 제 7항에 있어서,
    상기 프로그램은,
    촬영 영역이 다른 다수의 카메라를 이용하여 제 1 영상 데이터 및 제 2 영상 데이터를 획득하도록 처리하는 명령어를 포함하는 장치.
  13. 전자 장치에 의해 실행될 경우, 상기 장치로 하여금 제 1항의 방법을 수행하도록 하는 명령어들을 포함하는 하나 이상의 프로그램을 저장한 컴퓨터 판독 가능 저장 매체.
KR1020130001028A 2013-01-04 2013-01-04 영상 데이터 획득 방법 및 그 방법을 처리하는 전자 장치 KR102076773B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020130001028A KR102076773B1 (ko) 2013-01-04 2013-01-04 영상 데이터 획득 방법 및 그 방법을 처리하는 전자 장치
EP14150250.0A EP2753061B1 (en) 2013-01-04 2014-01-06 Method for obtaining image data and electronic device for processing method thereof
CN201410005043.9A CN103916595B (zh) 2013-01-04 2014-01-06 用于获得图像的方法和用于处理该方法的电子装置
US14/147,893 US9723250B2 (en) 2013-01-04 2014-01-06 Method for obtaining image data and electronic device for processing method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130001028A KR102076773B1 (ko) 2013-01-04 2013-01-04 영상 데이터 획득 방법 및 그 방법을 처리하는 전자 장치

Publications (2)

Publication Number Publication Date
KR20140089149A KR20140089149A (ko) 2014-07-14
KR102076773B1 true KR102076773B1 (ko) 2020-02-12

Family

ID=49999717

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130001028A KR102076773B1 (ko) 2013-01-04 2013-01-04 영상 데이터 획득 방법 및 그 방법을 처리하는 전자 장치

Country Status (4)

Country Link
US (1) US9723250B2 (ko)
EP (1) EP2753061B1 (ko)
KR (1) KR102076773B1 (ko)
CN (1) CN103916595B (ko)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140089146A (ko) * 2013-01-04 2014-07-14 삼성전자주식회사 영상 통화 방법 및 그 방법을 처리하는 전자 장치
USD776124S1 (en) * 2013-09-03 2017-01-10 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
USD749626S1 (en) * 2013-09-03 2016-02-16 Samsung Electronics Co., Ltd. Display screen or portion thereof with animated graphical user interface
USD750125S1 (en) 2013-12-30 2016-02-23 Beijing Qihoo Technology Co., Ltd. Display screen or portion thereof with animated icon for optimizing computer device resources
KR102102646B1 (ko) * 2014-01-17 2020-04-21 엘지전자 주식회사 이동단말기 및 그 제어방법
US20150381895A1 (en) * 2014-04-22 2015-12-31 Lo Mei-Ling Method of Generating Selfie for a Portable Device
USD763913S1 (en) * 2015-02-27 2016-08-16 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
USD782522S1 (en) * 2016-03-04 2017-03-28 Hotel Revup, Llc Display panel with graphical user interface
US10921952B2 (en) 2016-05-11 2021-02-16 Sap Se Dynamic button with visual indication of application action result
USD792893S1 (en) * 2016-05-16 2017-07-25 Google Inc. Display screen with graphical user interface
USD794658S1 (en) * 2016-05-16 2017-08-15 Google, Inc. Display screen with graphical user interface
USD835671S1 (en) * 2016-09-22 2018-12-11 Sap Se Display screen or portion thereof with a graphical user interface having a transitional icon
USD835670S1 (en) * 2016-09-22 2018-12-11 Sap Se Display screen or portion thereof with a graphical user interface having a transitional icon
USD835669S1 (en) * 2016-09-22 2018-12-11 Sap Se Display screen or portion thereof with a graphical user interface having a transitional icon
USD836134S1 (en) * 2016-09-22 2018-12-18 Sap Se Display screen or portion thereof with a graphical user interface having a transitional icon
USD877776S1 (en) * 2018-01-04 2020-03-10 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD851127S1 (en) * 2018-01-30 2019-06-11 Equifax Inc. Display screen or portion thereof with lock and alert locked graphical user interface
USD851126S1 (en) * 2018-01-30 2019-06-11 Equifax Inc. Display screen or portion thereof with lock and alert unlocked graphical user interface
USD869498S1 (en) * 2018-02-13 2019-12-10 Conocophillips Company Display screen or portion thereof with a graphical user interface
USD865000S1 (en) * 2018-03-08 2019-10-29 Capital One Services, Llc Display screen with animated graphical user interface
USD865001S1 (en) * 2018-03-08 2019-10-29 Capital One Services, Llc Display screen with animated graphical user interface
KR102108246B1 (ko) * 2018-05-11 2020-05-07 주식회사 유비펀스튜디오 휴대 단말에서의 영상 제공 방법 및 그 장치
USD898769S1 (en) * 2018-11-01 2020-10-13 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD914758S1 (en) * 2019-11-12 2021-03-30 Thales Avs France Sas Display screen or portion thereof with animated graphical user interface
USD938990S1 (en) * 2020-04-20 2021-12-21 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Display screen or portion thereof with graphical user interface
USD959490S1 (en) * 2020-10-07 2022-08-02 Applied Materials, Inc. Display screen or portion thereof with graphical user interface

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050036044A1 (en) 2003-08-14 2005-02-17 Fuji Photo Film Co., Ltd. Image pickup device and image synthesizing method
JP2008053856A (ja) * 2006-08-22 2008-03-06 Olympus Imaging Corp 撮像装置
US20080084482A1 (en) 2006-10-04 2008-04-10 Sony Ericsson Mobile Communications Ab Image-capturing system and method
JP2010003201A (ja) * 2008-06-23 2010-01-07 Olympus Imaging Corp 画像処理装置、画像処理方法、およびプログラム
US20110058058A1 (en) 2006-02-24 2011-03-10 Tessera Technologies Ireland Limited Digital image acquisition control and correction method and apparatus
JP2011217121A (ja) * 2010-03-31 2011-10-27 Ntt Docomo Inc 携帯端末
JP2011250340A (ja) * 2010-05-31 2011-12-08 Sanyo Electric Co Ltd 撮像装置およびその制御方法
JP2011530846A (ja) * 2008-08-08 2011-12-22 クランボ エスエー デジタルカメラ及び関連する方法
US20120268552A1 (en) 2011-04-19 2012-10-25 Samsung Electronics Co., Ltd. Apparatus and method for compositing image in a portable terminal

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8189100B2 (en) 2006-07-25 2012-05-29 Qualcomm Incorporated Mobile device with dual digital camera sensors and methods of using the same
US7817808B2 (en) * 2007-07-19 2010-10-19 Alon Konchitsky Dual adaptive structure for speech enhancement
KR101405948B1 (ko) * 2007-10-22 2014-06-12 엘지전자 주식회사 이동 단말기 및 이동 단말기의 화면 표시 방법
KR101454826B1 (ko) 2007-11-20 2014-10-28 삼성전자주식회사 휴대용 단말기에서 듀얼 카메라를 구동하는 장치 및 방법
JP4626668B2 (ja) * 2008-04-03 2011-02-09 ソニー株式会社 画像処理装置、表示制御方法、プログラム及び記録媒体
JP5564384B2 (ja) * 2010-09-28 2014-07-30 任天堂株式会社 画像生成プログラム、撮像装置、撮像システム、及び画像生成方法
JP5750253B2 (ja) * 2010-09-28 2015-07-15 任天堂株式会社 画像生成プログラム、撮像装置、撮像システム、及び画像生成方法
US8866943B2 (en) * 2012-03-09 2014-10-21 Apple Inc. Video camera providing a composite video sequence
CN107395975A (zh) * 2013-01-07 2017-11-24 华为技术有限公司 一种图像处理方法及装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050036044A1 (en) 2003-08-14 2005-02-17 Fuji Photo Film Co., Ltd. Image pickup device and image synthesizing method
JP2005094741A (ja) * 2003-08-14 2005-04-07 Fuji Photo Film Co Ltd 撮像装置及び画像合成方法
US20110058058A1 (en) 2006-02-24 2011-03-10 Tessera Technologies Ireland Limited Digital image acquisition control and correction method and apparatus
JP2008053856A (ja) * 2006-08-22 2008-03-06 Olympus Imaging Corp 撮像装置
US20080084482A1 (en) 2006-10-04 2008-04-10 Sony Ericsson Mobile Communications Ab Image-capturing system and method
JP2010003201A (ja) * 2008-06-23 2010-01-07 Olympus Imaging Corp 画像処理装置、画像処理方法、およびプログラム
JP2011530846A (ja) * 2008-08-08 2011-12-22 クランボ エスエー デジタルカメラ及び関連する方法
JP2011217121A (ja) * 2010-03-31 2011-10-27 Ntt Docomo Inc 携帯端末
JP2011250340A (ja) * 2010-05-31 2011-12-08 Sanyo Electric Co Ltd 撮像装置およびその制御方法
US20120268552A1 (en) 2011-04-19 2012-10-25 Samsung Electronics Co., Ltd. Apparatus and method for compositing image in a portable terminal

Also Published As

Publication number Publication date
US20140192232A1 (en) 2014-07-10
CN103916595A (zh) 2014-07-09
KR20140089149A (ko) 2014-07-14
EP2753061A3 (en) 2017-11-01
CN103916595B (zh) 2018-01-09
EP2753061B1 (en) 2021-12-29
EP2753061A2 (en) 2014-07-09
US9723250B2 (en) 2017-08-01

Similar Documents

Publication Publication Date Title
KR102076773B1 (ko) 영상 데이터 획득 방법 및 그 방법을 처리하는 전자 장치
KR102022444B1 (ko) 복수의 카메라를 구비한 휴대 단말에서 유효한 영상들을 합성하기 위한 방법 및 이를 위한 휴대 단말
KR101678861B1 (ko) 이동단말기 및 그 제어방법
KR101832966B1 (ko) 이동 단말기 및 이의 제어방법
KR101667736B1 (ko) 이동단말기 및 그 제어방법
KR102018887B1 (ko) 신체 부위 검출을 이용한 이미지 프리뷰
KR102048041B1 (ko) 화면 분할 이미지를 생성하는 전자 장치 및 방법
US9742995B2 (en) Receiver-controlled panoramic view video share
KR20180095331A (ko) 이동단말기 및 그 제어 방법
KR20190014638A (ko) 전자 기기 및 전자 기기의 제어 방법
KR20170112491A (ko) 이동 단말기 및 그 제어방법
KR20170006559A (ko) 이동단말기 및 그 제어방법
KR102064973B1 (ko) 듀얼 이미지를 편집하는 전자 장치 및 방법
KR20190013308A (ko) 이동 단말기 및 그 제어 방법
KR101633342B1 (ko) 이동단말기 및 그 제어방법
KR20150005270A (ko) 전자 장치에 의해 촬영된 이미지들을 프리뷰하는 방법 및 이를 위한 전자 장치
KR20180133743A (ko) 이동 단말기 및 그 제어 방법
KR20190008610A (ko) 이동 단말기 및 그 제어 방법
KR20170025177A (ko) 이동단말기 및 그 제어방법
CN113747085A (zh) 拍摄视频的方法和装置
KR20170010485A (ko) 단말 장치 및 단말 장치의 제어 방법
KR20140089146A (ko) 영상 통화 방법 및 그 방법을 처리하는 전자 장치
KR20140012757A (ko) 시각 장애 사용자들에 의한 이미지 캡처 및 이미지 검토의 촉진
KR20180131908A (ko) 이동 단말기 및 그것의 동작방법
KR20170073068A (ko) 이동단말기 및 그 제어방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant