KR101078057B1 - 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말 및 영상인식기법을 이용한 촬영 제어 시스템 - Google Patents

영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말 및 영상인식기법을 이용한 촬영 제어 시스템 Download PDF

Info

Publication number
KR101078057B1
KR101078057B1 KR1020090084494A KR20090084494A KR101078057B1 KR 101078057 B1 KR101078057 B1 KR 101078057B1 KR 1020090084494 A KR1020090084494 A KR 1020090084494A KR 20090084494 A KR20090084494 A KR 20090084494A KR 101078057 B1 KR101078057 B1 KR 101078057B1
Authority
KR
South Korea
Prior art keywords
camera
user
image
mobile terminal
recognition technique
Prior art date
Application number
KR1020090084494A
Other languages
English (en)
Other versions
KR20110026727A (ko
Inventor
전형백
Original Assignee
주식회사 팬택
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 팬택 filed Critical 주식회사 팬택
Priority to KR1020090084494A priority Critical patent/KR101078057B1/ko
Priority to US12/852,113 priority patent/US20110058051A1/en
Priority to EP10172479.7A priority patent/EP2306706B1/en
Priority to JP2010180609A priority patent/JP2011061770A/ja
Priority to TW099128099A priority patent/TW201138440A/zh
Priority to CN2010102774988A priority patent/CN102014198A/zh
Publication of KR20110026727A publication Critical patent/KR20110026727A/ko
Application granted granted Critical
Publication of KR101078057B1 publication Critical patent/KR101078057B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00347—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with another still picture apparatus, e.g. hybrid still picture apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227—Providing Remote input by a user located remotely from the client device, e.g. at work
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N2007/145—Handheld terminals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0013—Arrangements for the control of the connected apparatus by the still picture apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0074—Arrangements for the control of a still picture apparatus by the connected apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0074—Arrangements for the control of a still picture apparatus by the connected apparatus
    • H04N2201/0075—Arrangements for the control of a still picture apparatus by the connected apparatus by a user operated remote control device, e.g. receiving instructions from a user via a computer terminal or mobile telephone handset
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077—Types of the still picture apparatus
    • H04N2201/0084—Digital still camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Studio Devices (AREA)
  • User Interface Of Digital Computer (AREA)
  • Details Of Cameras Including Film Mechanisms (AREA)

Abstract

본 발명은 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말 및 영상인식기법을 이용한 촬영 제어 시스템에 관한 것으로, 하나의 카메라에 의해 촬영되는 사용자 영상으로부터 특정 행동을 검출하고, 특정 행동 검출시 다른 카메라의 동작 또는 다른 카메라에 의해 촬영되는 영상의 처리를 제어하도록 구현함으로써 사용자의 물리적인 조작 없이도 촬영 제어가 가능하도록 한 것이다.
카메라, 영상인식, 행동 검출, 동작 제어, 영상 처리 제어

Description

영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말 및 영상인식기법을 이용한 촬영 제어 시스템{Mobile terminal had a function of photographing control and photographing control system used image recognition technicque}
본 발명은 촬영 제어기술에 관련한 것으로, 특히 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말 및 영상인식기법을 이용한 촬영 제어 시스템에 관한 것이다.
종래의 경우, 전면부 카메라와 후면부 카메라를 동시에 구비한 이동단말에서 줌인 또는 줌아웃 등의 촬영 제어명령은 사용자의 키 버튼 또는 터치 스크린 조작 등의 물리적인 조작에 의해 이루어졌다. 한편, 종래의 화상통화가 가능한 이동단말의 경우 자신의 촬영 제어명령은 사용자의 키 버튼 또는 터치 스크린 조작 등의 물리적인 조작에 의해 이루어졌으며, 상대방의 카메라에 대한 제어는 불가능하였다.
카메라를 탑재한 이동단말을 이용해 촬영 도중 줌인 또는 줌아웃 등의 촬영 제어명령을 사용자의 키 버튼 또는 터치 스크린 조작 등의 물리적인 조작을 통해 입력하는 것은 매우 불편하고, 사용자의 키 버튼 또는 터치 스크린 조작 등의 물리적인 조작시 이동단말이 흔들려 촬영되는 영상이 흔들리거나 초점이 맞지 않게 된 다.
따라서, 본 발명자는 전면부 카메라와 후면부 카메라를 동시에 구비한 이동단말이나, 화상통화가 가능한 이동단말 등에서 사용자의 키 버튼 또는 터치 스크린 조작 등의 물리적인 조작 없이도 촬영 제어가 가능한 기술에 대한 연구를 하게 되었다.
본 발명은 상기한 취지하에 발명된 것으로, 하나의 카메라로부터 촬영되는 영상으로부터 특정 행동 검출시, 다른 카메라의 동작 또는 다른 카메라에 의해 촬영되는 영상의 처리를 제어함으로써 사용자의 물리적인 조작 없이도 촬영 제어가 가능한 영상인식기법을 이용한 촬영 제어 시스템을 제공함을 그 목적으로 한다.
상기한 목적을 달성하기 위한 본 발명의 일 양상에 따르면, 영상인식기법을 이용한 촬영 제어 시스템이 하나의 카메라에 의해 촬영되는 사용자 영상으로부터 특정 행동을 검출하고, 특정 행동 검출시 다른 카메라의 동작 또는 다른 카메라에 의해 촬영되는 영상의 처리를 제어하는 것을 특징으로 한다.
본 발명은 전면부 카메라와 후면부 카메라를 동시에 구비한 이동단말이나, 화상통화가 가능한 이동단말 등에서 하나의 카메라에 의해 촬영되는 영상의 분석을 통해 다른 카메라의 동작 또는 다른 카메라에 의해 촬영되는 영상의 처리를 제어함으로써 사용자의 물리적인 조작 없이도 촬영 제어가 가능하므로, 사용자 편의성을 향상시킬 수 있는 유용한 효과를 가진다.
이하, 첨부된 도면을 참조하여 기술되는 바람직한 실시예를 통하여 본 발명을 당업자가 용이하게 이해하고 재현할 수 있도록 상세히 기술하기로 한다.
본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명 실시예들의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.
본 발명 명세서 전반에 걸쳐 사용되는 용어들은 본 발명 실시예에서의 기능을 고려하여 정의된 용어들로서, 사용자 또는 운용자의 의도, 관례 등에 따라 충분히 변형될 수 있는 사항이므로, 이 용어들의 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1 은 본 발명에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말의 제1실시예에 따른 블럭도이다. 이 실시예에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말(100)은 행동 검출부(110)와, 제어명령 생성부(120)와, 제어명령 송신부(130)와, 제어명령 수신부(140)와, 촬영 제어부(150)를 포함하여 이루어진다.
상기 행동 검출부(110)는 자신의 제1카메라(200)에 의해 촬영되는 사용자 영상으로부터 특정 행동을 검출한다. 상기 행동 검출부(110)는 자신의 제1카메라(200)에 의해 촬영되는 사용자 영상으로부터 특정 행동을 검출한다. 상기 특정 행동은 영상인식 기법을 이용해 사용자 영상에 포함되는 특징점들의 변화를 분석함으로써 사용자의 움직임이나 표정 변화 등을 인식함에 의해 검출할 수 있다.
예컨대, 상기 행동 검출부(110)가 사용자 영상으로부터 해당 사용자의 카메라쪽으로의 접근 또는 멀어짐을 검출하거나, 해당 사용자의 좌측 또는 우측으로의 움직임을 검출하거나, 해당 사용자의 좌측 또는 우측 눈의 깜빡임을 검출하거나, 해당 사용자의 입 모양을 검출하거나, 해당 사용자 얼굴의 기울기를 검출하거나, 해당 사용자 얼굴의 좌측 또는 우측 회전을 검출하거나, 해당 사용자 얼굴의 찡그림을 검출하거나 하는 등의 사용자의 움직임이나 표정 변화 등을 인식함에 의해 특정 행동을 검출할 수 있다.
상기 제어명령 생성부(120)는 상기 행동 검출부(110)에 의해 특정 행동 검출시 상대방 이동단말의 제2카메라(300)의 동작 또는 상대방 이동단말의 제2카메라(300)에 의해 촬영되는 영상의 처리를 제어하는 제어명령을 생성한다.
상기 제어명령 송신부(130)는 상기 제어명령 생성부(120)에 의해 생성된 제어명령을 상대방 이동단말로 송신한다. 상기 제어명령 송신부(130)에 의해 송신된 상대방 이동단말의 제2카메라(300)의 동작 또는 제2카메라(300)에 의해 촬영되는 영상의 처리를 제어하는 제어명령은 이동통신망을 통해 상대방 이동단말로 수신된다.
그러면, 이를 수신한 상대방 이동단말은 자신의 제2카메라(300)의 동작 또는 자신의 제2카메라(300)에 의해 촬영되는 영상의 처리를 제어한다. 이에 대해서는 추후 도 2 를 참조하여 구체적으로 알아본다.
상기 제어명령 수신부(140)는 상대방 이동단말로부터 송신되는 자신의 제1카메라(200)의 동작 또는 자신의 제1카메라(200)에 의해 촬영되는 영상의 처리를 제어하는 제어명령을 수신한다.
상기 촬영 제어부(150)는 상기 제어명령 수신부(140)에 의해 수신된 제어명 령에 따라 자신의 제1카메라(200)의 동작 또는 자신의 제1카메라(200)에 의해 촬영되는 영상의 처리를 제어한다.
예컨대, 상기 촬영 제어부(150)가 자신의 제1카메라(200)의 줌인 또는 줌아웃 동작을 제어하거나, 촬영각을 제어하거나, 촬영 시작 또는 종료 동작을 제어함으로써 상대방 이동단말 사용자의 특정 행동에 따라 자신의 제1카메라(200)의 동작을 제어할 수 있다.
예컨대, 상기 촬영 제어부(150)가 자신의 제1카메라(200)에 의해 촬영되는 영상의 화면출력 또는 전송 또는 합성 또는 특수효과 처리 또는 위치 이동을 제어함으로써 상대방 이동단말 사용자의 특정 행동에 따라 자신의 제1카메라(200)에 의해 촬영되는 영상의 처리를 제어할 수 있다.
따라서, 이 실시예에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말은 하나의 카메라에 의해 촬영되는 사용자 영상을 영상인식 기법을 이용해 분석하여 사용자의 특정 행동을 검출하고, 특정 행동 검출시 다른 카메라의 동작 또는 다른 카메라에 의해 촬영되는 영상의 처리를 제어함으로써 사용자의 물리적인 조작 없이도 촬영 제어가 가능하므로, 사용자 편의성을 향상시킬 수 있다.
도 2 는 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템의 제1실시예에 따른 블럭도이다. 이 실시예에 따른 영상인식기법을 이용한 촬영 제어 시스템은 제1카메라(200)는 제1사용자의 이동단말(100a)에 설치되고, 제2카메라(300)는 제2사용자의 이동단말(100b)에 설치되어 제1카메라(200)에 촬영되는 사용자 영상으 로부터 특정 행동을 검출시 제1사용자의 이동단말(100a)로부터 송신되는 제어명령에 따라 제2사용자의 이동단말(100b)이 제2카메라(300)의 동작 또는 제2카메라(300)에 의해 촬영되는 영상의 처리를 제어하도록 구현한 것이다.
상기 제1사용자의 이동단말(100a)과 제2사용자의 이동단말(100b)은 도 1 에 도시한 이동단말과 동일한 구성을 가진다. 제1사용자의 이동단말(100a)의 행동 검출부(110)는 제1카메라(200)에 의해 촬영되는 사용자 영상으로부터 특정 행동을 검출한다.
제1사용자의 이동단말(100a)의 제어명령 생성부(120)는 상기 행동 검출부(110)에 의해 특정 행동 검출시 제2카메라(300)의 동작 또는 제2카메라(300)에 의해 촬영되는 영상의 처리를 제어하는 제어명령을 생성한다.
제1사용자의 이동단말(100a)의 제어명령 송신부(130)는 상기 제어명령 생성부(120)에 의해 생성된 제어명령을 송신한다. 상기 제어명령 송신부(130)에 의해 송신된 제2카메라(300)의 동작 또는 제2카메라(300)에 의해 촬영되는 영상의 처리를 제어하는 제어명령은 이동통신망을 통해 제2사용자의 이동단말(100b)로 전송된다.
상기 제2사용자의 이동단말(100b)의 제어명령 수신부(140)는 상기 제1사용자의 이동단말(100a)로부터 송신되는 제2카메라(300)의 동작 또는 제2카메라(300)에 의해 촬영되는 영상의 처리를 제어하는 제어명령을 수신한다.
제2사용자의 이동단말(100b)의 촬영 제어부(150)는 상기 제어명령 수신부(140)에 의해 수신된 제어명령에 따라 제2카메라(300)의 동작 또는 제2카메 라(300)에 의해 촬영되는 영상의 처리를 제어한다.
예컨대, 상기 촬영 제어부(150)가 제2카메라(300)의 줌인 또는 줌아웃 동작을 제어하거나, 촬영각을 제어하거나, 촬영 시작 또는 종료 동작을 제어함으로써 사용자의 특정 행동에 따라 제2카메라(300)의 동작을 제어할 수 있다.
예컨대, 상기 촬영 제어부(150)가 제2카메라(300)에 의해 촬영되는 영상의 화면출력 또는 전송 또는 합성 또는 특수효과 처리 또는 위치 이동을 제어함으로써 사용자의 특정 행동에 따라 제2카메라(300)에 의해 촬영되는 영상의 처리를 제어할 수 있다.
따라서, 이 실시예에 따른 영상인식기법을 이용한 촬영 제어 시스템은 하나의 카메라에 의해 촬영되는 사용자 영상을 영상인식 기법을 이용해 분석하여 사용자의 특정 행동을 검출하고, 특정 행동 검출시 다른 카메라의 동작 또는 다른 카메라에 의해 촬영되는 영상의 처리를 제어함으로써 사용자의 물리적인 조작 없이도 촬영 제어가 가능하므로, 사용자 편의성을 향상시킬 수 있다.
도 3 은 본 발명에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말의 제2실시예에 따른 블럭도이다. 이 실시예에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말(400)은 영상 송신부(410)와, 영상 수신부(420)와, 행동 검출부(430)와, 촬영 제어부(440)를 포함하여 이루어진다.
상기 영상 송신부(410)는 자신의 제1카메라(500)에 의해 촬영되는 사용자 영상을 상대방 이동단말로 송신한다. 영상 송신부(410)에 의해 송신된 사용자 영상은 이동통신망을 통해 상대방 이동단말로 전송된다.
그러면, 이를 수신한 상대방 이동단말은 사용자 영상으로부터 특정 행동을 검출하여 자신의 제2카메라(600)의 동작 또는 자신의 제2카메라(600)에 의해 촬영되는 영상의 처리를 제어한다. 이에 대해서는 추후 도 4 를 참조하여 구체적으로 알아본다.
상기 영상 수신부(420)는 상대방 이동단말로부터 송신되는 사용자 영상을 수신한다. 상대방 이동단말의 제2카메라(600)에 의해 촬영되는 사용자 영상이 상대방 이동단말로부터 송신되면, 상기 영상 수신부(420)가 이를 수신한다.
상기 행동 검출부(430)는 상기 영상 수신부(420)에 의해 수신된 사용자 영상으로부터 특정 행동을 검출한다. 상기 특정 행동은 영상인식 기법을 이용해 사용자 영상에 포함되는 특징점들의 변화를 분석함으로써 사용자의 움직임이나 표정 변화 등을 인식함에 의해 검출할 수 있다.
예컨대, 상기 행동 검출부(430)가 사용자 영상으로부터 해당 사용자의 카메라쪽으로의 접근 또는 멀어짐을 검출하거나, 해당 사용자의 좌측 또는 우측으로의 움직임을 검출하거나, 해당 사용자의 좌측 또는 우측 눈의 깜빡임을 검출하거나, 해당 사용자의 입 모양을 검출하거나, 해당 사용자 얼굴의 기울기를 검출하거나, 해당 사용자 얼굴의 좌측 또는 우측 회전을 검출하거나, 해당 사용자 얼굴의 찡그림을 검출하거나 하는 등의 사용자의 움직임이나 표정 변화 등을 인식함에 의해 특정 행동을 검출할 수 있다.
상기 촬영 제어부(440)는 상기 행동 검출부(430)에 의해 특정 행동 검출시 자신의 제1카메라(500)의 동작 또는 자신의 제1카메라(500)에 의해 촬영되는 영상의 처리를 제어한다.
예컨대, 상기 촬영 제어부(440)가 자신의 제1카메라(500)의 줌인 또는 줌아웃 동작을 제어하거나, 촬영각을 제어하거나, 촬영 시작 또는 종료 동작을 제어함으로써 사용자의 특정 행동에 따라 자신의 제1카메라(500)의 동작을 제어할 수 있다.
예컨대, 상기 촬영 제어부(440)가 자신의 제1카메라(500)에 의해 촬영되는 영상의 화면출력 또는 전송 또는 합성 또는 특수효과 처리 또는 위치 이동을 제어함으로써 사용자의 특정 행동에 따라 자신의 제1카메라(500)에 의해 촬영되는 영상의 처리를 제어할 수 있다.
따라서, 이 실시예에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말은 하나의 카메라에 의해 촬영되는 사용자 영상을 영상인식 기법을 이용해 분석하여 사용자의 특정 행동을 검출하고, 특정 행동 검출시 다른 카메라의 동작 또는 다른 카메라에 의해 촬영되는 영상의 처리를 제어함으로써 사용자의 물리적인 조작 없이도 촬영 제어가 가능하므로, 사용자 편의성을 향상시킬 수 있다.
도 4 는 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템의 제2실시예에 따른 블럭도이다. 이 실시예에 따른 영상인식기법을 이용한 촬영 제어 시스템은 제1카메라(500)는 제1사용자의 이동단말(400a)에 설치되고, 제2카메라(600)는 제2사용자의 이동단말(400b)에 설치되어 제1카메라(500)에 촬영되는 사용자 영상을 제1사용자의 이동단말(400a)이 송신하고, 이를 수신한 제2사용자의 이동단말(400b)이 사용자 영상으로부터 특정 행동을 검출시 제2카메라(600)의 동작 또는 제2카메라(600)에 의해 촬영되는 영상의 처리를 제어하도록 구현한 것이다.
상기 제1사용자의 이동단말(400a)과 제2사용자의 이동단말(400b)은 도 3 에 도시한 이동단말과 동일한 구성을 가진다. 상기 제1사용자의 이동단말(400a)의 영상 송신부(410)는 제1카메라(500)에 의해 촬영되는 사용자 영상을 송신한다. 영상 송신부(410)에 의해 송신된 사용자 영상은 이동통신망을 통해 제2사용자의 이동단말(400b)로 전송된다.
상기 제2사용자의 이동단말(400b)의 영상 수신부(420)는 상기 제1사용자의 이동단말(410)로부터 송신되는 사용자 영상을 수신한다. 제2사용자의 이동단말(400b)의 행동 검출부(430)는 상기 영상 수신부(420)에 의해 수신된 사용자 영상으로부터 특정 행동을 검출한다.
제2사용자의 이동단말(400b)의 촬영 제어부(440)는 상기 행동 검출부(430)에 의해 특정 행동 검출시 제2카메라(600)의 동작 또는 제2카메라(600)에 의해 촬영되는 영상의 처리를 제어한다.
예컨대, 상기 촬영 제어부(440)가 제2카메라(600)의 줌인 또는 줌아웃 동작을 제어하거나, 촬영각을 제어하거나, 촬영 시작 또는 종료 동작을 제어함으로써 사용자의 특정 행동에 따라 제2카메라(600)의 동작을 제어할 수 있다.
예컨대, 상기 촬영 제어부(440)가 제2카메라(600)에 의해 촬영되는 영상의 화면출력 또는 전송 또는 합성 또는 특수효과 처리 또는 위치 이동을 제어함으로써 사용자의 특정 행동에 따라 제2카메라(600)에 의해 촬영되는 영상의 처리를 제어할 수 있다.
따라서, 이 실시예에 따른 영상인식기법을 이용한 촬영 제어 시스템은 하나의 카메라에 의해 촬영되는 사용자 영상을 영상인식 기법을 이용해 분석하여 사용자의 특정 행동을 검출하고, 특정 행동 검출시 다른 카메라의 동작 또는 다른 카메라에 의해 촬영되는 영상의 처리를 제어함으로써 사용자의 물리적인 조작 없이도 촬영 제어가 가능하므로, 사용자 편의성을 향상시킬 수 있다.
도 5 는 본 발명에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말의 제3실시예에 따른 블럭도이다. 이 실시예에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말(700)은 제1카메라(800)와 제2카메라(900)를 자체에 구비하며, 제1카메라(800)에 의해 촬영되는 사용자 영상으로부터 특정 행동을 검출하고, 특정 행동 검출시 제2카메라(900)의 동작 또는 제2카메라(900)에 의해 촬영되는 영상의 처리를 제어하도록 구현한 것으로, 행동 검출부(710)와, 촬영 제어부(720)를 포함하여 이루어진다.
상기 행동 검출부(710)는 자신의 제1카메라(800)에 의해 촬영되는 사용자 영상으로부터 특정 행동을 검출한다. 상기 특정 행동은 영상인식 기법을 이용해 사용자 영상에 포함되는 특징점들의 변화를 분석함으로써 사용자의 움직임이나 표정 변화 등을 인식함에 의해 검출할 수 있다.
예컨대, 상기 행동 검출부(710)가 사용자 영상으로부터 해당 사용자의 카메 라쪽으로의 접근 또는 멀어짐을 검출하거나, 해당 사용자의 좌측 또는 우측으로의 움직임을 검출하거나, 해당 사용자의 좌측 또는 우측 눈의 깜빡임을 검출하거나, 해당 사용자의 입 모양을 검출하거나, 해당 사용자 얼굴의 기울기를 검출하거나, 해당 사용자 얼굴의 좌측 또는 우측 회전을 검출하거나, 해당 사용자 얼굴의 찡그림을 검출하거나 하는 등의 사용자의 움직임이나 표정 변화 등을 인식함에 의해 특정 행동을 검출할 수 있다.
상기 촬영 제어부(720)는 상기 행동 검출부(710)에 의해 특정 행동 검출시, 자신의 제2카메라(900)의 동작 또는 자신의 제2카메라(900)에 의해 촬영되는 영상의 처리를 제어한다.
예컨대, 상기 촬영 제어부(720)가 제2카메라(900)의 줌인 또는 줌아웃 동작을 제어하거나, 촬영각을 제어하거나, 촬영 시작 또는 종료 동작을 제어함으로써 사용자의 특정 행동에 따라 제2카메라(900)의 동작을 제어할 수 있다.
예컨대, 상기 촬영 제어부(720)가 제2카메라(900)에 의해 촬영되는 영상의 화면출력 또는 전송 또는 합성 또는 특수효과 처리 또는 위치 이동을 제어함으로써 사용자의 특정 행동에 따라 제2카메라에 의해 촬영되는 영상의 처리를 제어할 수 있다.
따라서, 이 실시예에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말은 하나의 카메라에 의해 촬영되는 사용자 영상을 영상인식 기법을 이용해 분석하여 사용자의 특정 행동을 검출하고, 특정 행동 검출시 다른 카메라의 동작 또는 다른 카메라에 의해 촬영되는 영상의 처리를 제어함으로써 사용자의 물리적인 조작 없이도 촬영 제어가 가능하므로, 사용자 편의성을 향상시킬 수 있다.
한편, 본 발명의 부가적인 양상에 따르면, 본 발명에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말이 행동 설정부(160)(450)(730)를 더 포함하도록 구현할 수 있다. 상기 행동 설정부(160)(450)(730)는 상기 행동검출부(110)(430)(710)에 의해 검출되는 특정 행동을 설정한다.
즉, 이 실시예는 행동 설정부(160)(450)(730)를 통해 특정 행동이 검출시 수행되는 제2카메라의 동작 또는 제2카메라에 의해 촬영되는 영상의 처리 동작을 사용자로부터 설정받아 행동설정정보로 저장하도록 한 것이다. 저장된 행동설정정보는 행동검출부(110)(430)(710)에 의해 특정 행동 검출시 참조된다.
한편, 본 발명의 부가적인 양상에 따르면, 본 발명에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말이 환경 설정부(170)(460)(740)를 더 포함하도록 구현할 수 있다. 상기 환경 설정부(170)(460)(740)는 상기 촬영 제어부(150)(440)(720) 동작의 온/오프를 설정한다.
즉, 이 실시예는 영상인식을 이용한 촬영 제어 동작을 원하지 않는 사용자를 위해 상기 환경 설정부(170)(460)(740)를 통해 촬영 제어부(150)(440)(720) 동작의 온/오프를 사용자로부터 설정받아 환경설정정보로 저장하도록 한 것이다. 저장된 환경설정정보에 따라 상기 촬영 제어부(150)(440)(720)의 동작이 온/오프된다.
도 6 을 참조하여 상기한 바와 같은 구성을 갖는 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템의 촬영 제어동작을 알아본다. 도 6 은 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템의 촬영 제어 절차를 도시한 흐름도이다.
제1카메라에 의해 사용자 영상이 촬영되면, 단계 S110에서 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템이 제1카메라에 의해 촬영되는 사용자 영상으로부터 특정 행동을 검출한다.
예컨대, 사용자 영상으로부터 해당 사용자의 제1카메라쪽으로의 접근 또는 멀어짐을 검출함으로써 특정 행동을 검출할 수 있다. 이 때, 사용자의 제1카메라쪽으로의 접근 또는 멀어짐 여부는 제1카메라에 의해 촬영되는 사용자 영상의 크기 변화를 인식함에 의해 검출할 수 있다.
예컨대, 사용자 영상으로부터 해당 사용자의 좌측 또는 우측으로의 움직임을 검출함으로써 특정 행동을 검출할 수 있다. 이 때, 사용자의 좌측 또는 우측으로의 움직임 여부는 제1카메라에 의해 촬영되는 사용자 영상에 포함되는 특징점들의 위치 이동 또는 회전 또는 기울임 등을 인식함에 의해 검출할 수 있다.
예컨대, 사용자 영상으로부터 해당 사용자의 좌측 또는 우측 눈의 깜빡임을 검출함으로써 특정 행동을 검출할 수 있다. 이 때, 사용자의 좌측 또는 우측 눈의 깜빡임 여부는 제1카메라에 의해 촬영되는 사용자 영상에 포함되는 좌측 또는 우측 눈과 관련한 특징점들의 변화를 인식함에 의해 검출할 수 있다.
예컨대, 사용자 영상으로부터 해당 사용자의 입 모양을 검출함으로써 특정 행동을 검출할 수 있다. 이 때, 사용자의 입 모양은 제1카메라에 의해 촬영되는 사용자 영상에 포함되는 입과 관련한 특징점들의 변화를 인식함에 의해 검출할 수 있다.
예컨대, 사용자 영상으로부터 해당 사용자 얼굴의 기울기를 검출함으로써 특정 행동을 검출할 수 있다. 이 때, 사용자 얼굴의 기울기는 제1카메라에 의해 촬영되는 사용자 영상에 포함되는 특징점들의 위치 이동 또는 회전 또는 기울임 등을 인식함에 의해 검출할 수 있다.
예컨대, 사용자 영상으로부터 해당 사용자 얼굴의 좌측 또는 우측 회전을 검출함으로써 특정 행동을 검출할 수 있다. 이 때, 사용자 얼굴의 좌측 또는 우측 회전 여부는 제1카메라에 의해 촬영되는 사용자 영상에 포함되는 특징점들의 위치 이동 또는 회전 또는 기울임 등을 인식함에 의해 검출할 수 있다.
예컨대, 사용자 영상으로부터 해당 사용자 얼굴의 찡그림을 검출함으로써 특정 행동을 검출할 수 있다. 이 때, 사용자 얼굴의 찡그림은 제1카메라에 의해 촬영되는 사용자 영상에 포함되는 눈, 코, 입과 관련한 특징점들의 변화를 인식함에 의해 검출할 수 있다.
만약, 상기 단계 S110에 의해 특정 행동이 검출되면, 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템이 단계 S120에서 제2카메라의 동작 또는 제2카메라에 의해 촬영되는 영상의 처리를 제어하고, 미리 설정된 촬영 제어 종료명령이 입력되기 전까지 촬영 제어 동작을 반복한다.
예컨대, 상기 단계 S120에서 제2카메라의 줌인 또는 줌아웃 동작을 제어하거 나, 촬영각을 제어하거나, 촬영 시작 또는 종료 동작을 제어함으로써 사용자의 특정 행동에 따라 제2카메라의 동작을 제어할 수 있다.
예컨대, 상기 단계 S120에서 제2카메라에 의해 촬영되는 영상의 화면출력 또는 전송 또는 합성 또는 특수효과 처리 또는 위치 이동을 제어함으로써 사용자의 특정 행동에 따라 제2카메라에 의해 촬영되는 영상의 처리를 제어할 수 있다.
따라서, 본 발명은 전면부 카메라와 후면부 카메라를 동시에 구비한 이동단말이나, 화상통화가 가능한 이동단말 등에서 하나의 카메라에 의해 촬영되는 영상의 분석을 통해 다른 카메라의 동작 또는 다른 카메라에 의해 촬영되는 영상의 처리를 제어함으로써 사용자의 물리적인 조작 없이도 촬영 제어가 가능하여 사용자 편의성을 향상시킬 수 있으므로, 상기에서 제시한 본 발명의 목적을 달성할 수 있게 된다.
다음은 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템을 이동단말에 적용한 예들을 설명한 것이다.
예를들면, 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템이 제1카메라에 의해 촬영되는 영상으로부터 사용자가 제1카메라쪽으로 접근한다 검출될 경우에는 제2카메라를 줌인시키고, 멀어진다 검출될 경우에는 제2카메라를 줌아웃시키도록 구현한다면, 사용자의 물리적인 조작 없이도 사용자의 제1카메라쪽으로의 접근 또는 멀어짐 동작에 의해 제2카메라의 줌인 또는 줌아웃 제어가 가능하다.
예를들면, 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템이 제1카 메라에 의해 촬영되는 영상으로부터 사용자가 좌측으로 움직인다 검출될 경우에는 제2카메라의 촬영각을 좌측으로 회전시키고, 우측으로 움직인다 검출될 경우에는 제2카메라의 촬영각을 우측으로 회전시키도록 구현한다면, 사용자의 물리적인 조작 없이도 사용자의 좌측 또는 우측으로의 움직임 동작에 의해 제2카메라의 촬영각 제어가 가능하다.
예를들면, 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템이 제1카메라에 의해 촬영되는 영상으로부터 사용자가 좌측 눈을 깜빡인다 검출될 경우에는 제2카메라를 통한 촬영을 시작하고, 우측 눈을 깜빡인다 검출될 경우에는 제2카메라를 통한 촬영을 종료하도록 구현한다면, 사용자의 물리적인 조작 없이도 사용자의 좌측 또는 우측 눈의 깜빡임 동작에 의해 제2카메라의 촬영 시작 또는 종료 동작 제어가 가능하다.
예를들면, 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템이 제1카메라에 의해 촬영되는 영상으로부터 사용자의 입 모양이 벌어졌다 검출될 경우에는 제2카메라에 촬영되는 영상을 화면출력하고, 입 모양이 앞으로 내밀어졌다 검출될 경우에는 제2카메라에 의해 촬영되는 영상의 화면출력을 종료하도록 구현한다면, 사용자의 물리적인 조작 없이도 사용자의 입 모양에 의해 제2카메라에 의해 촬영되는 영상의 화면출력 제어가 가능하다.
예를들면, 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템이 제1카메라에 의해 촬영되는 영상으로부터 사용자 얼굴의 기울기가 앞으로 기울어졌다 검출될 경우에는 제2카메라를 줌인시키고, 뒤로 기울어졌다 검출될 경우에는 제2카메 라를 줌아웃시키도록 구현한다면, 사용자의 물리적인 조작 없이도 사용자 얼굴의 기울임 동작에 의해 제2카메라의 줌인 또는 줌아웃 제어가 가능하다.
예를들면, 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템이 제1카메라에 의해 촬영되는 영상으로부터 사용자 얼굴이 좌측으로 회전되었다 검출될 경우에는 제2카메라에 의해 촬영되는 영상과 제1카메라에 의해 촬영되는 영상을 좌우 분할 합성하여 화면출력하고, 우측으로 회전되었다 검출될 경우에는 제1카메라에 의해 촬영되는 영상을 제2카메라에 의해 촬영되는 영상안에 PIP(Picture In Picture) 방식으로 합성하여 화면출력하도록 구현한다면, 사용자의 물리적인 조작 없이도 사용자 얼굴의 좌측 또는 우측 회전 동작에 의해 제2카메라에 의해 촬영되는 영상의 합성 제어가 가능하다.
예를들면, 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템이 제1카메라에 의해 촬영되는 영상으로부터 사용자 얼굴이 찡그러졌다 검출될 경우 제2카메라에 의해 촬영되는 영상을 다른 사용자의 이동단말로 전송하도록 구현한다면, 사용자의 물리적인 조작 없이도 사용자 얼굴의 찡그림 동작에 의해 제2카메라에 의해 촬영되는 영상의 전송 제어가 가능하다.
한편, 본 발명의 부가적인 양상에 따르면, 상기 촬영 제어부(150)(440)(720)가 사용자의 제1카메라쪽으로의 접근 또는 멀어짐 속도나 횟수, 사용자의 좌측 또는 우측으로의 움직임 속도나 횟수, 사용자의 좌측 또는 우측 눈의 깜빡임 속도나 횟수, 사용자의 입 모양의 벌어짐 정도, 사용자 얼굴의 기울기 정도, 사용자 얼굴 의 좌측 또는 우측 회전 속도나 횟수, 사용자 얼굴의 찡그림 정도를 반영하여 제2카메라의 동작 또는 제2카메라에 의해 촬영되는 영상의 처리 제어를 수행하도록 구현할 수도 있다.
예를들면, 사용자의 제1카메라쪽으로의 접근 또는 멀어짐 속도에 따라 상기 촬영 제어부(150)(440)(720)가 제2카메라의 줌인 또는 줌아웃 속도를 가변 제어하도록 구현할 수 있다.
예를들면, 사용자 얼굴이 앞으로 한번 기울어졌다 검출될 경우에는 촬영 제어부(150)(440)(720)가 제2카메라에 의해 촬영되는 영상을 그대로 타인의 이동단말로 전송하고, 두번 기울어졌다 검출될 경우에는 촬영 제어부(150)(440)(720)가 제2카메라에 의해 촬영되는 영상을 제1카메라에 의해 촬영되는 영상과 합성하여 타인의 이동단말로 전송하도록 구현할 수도 있다.
본 발명은 첨부된 도면에 의해 참조되는 바람직한 실시예를 중심으로 기술되었지만, 이러한 기재로부터 후술하는 특허청구범위에 의해 포괄되는 범위 내에서 본 발명의 범주를 벗어남이 없이 다양한 변형이 가능하다는 것은 명백하다.
본 발명은 촬영 제어기술 분야 및 이의 응용기술 분야에서 산업상으로 이용 가능하다.
도 1 은 본 발명에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말의 제1실시예에 따른 블럭도
도 2 는 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템의 제1실시예에 따른 블럭도
도 3 은 본 발명에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말의 제2실시예에 따른 블럭도
도 4 는 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템의 제2실시예에 따른 블럭도
도 5 는 본 발명에 따른 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말의 제3실시예에 따른 블럭도
도 6 은 본 발명에 따른 영상인식기법을 이용한 촬영 제어 시스템의 촬영 제어 절차를 도시한 흐름도
<도면의 주요 부분에 대한 부호의 설명>
100, 400, 700 : 이동단말 110, 430, 710 : 행동 검출부
120 : 제어명령 생성부 130 : 제어명령 송신부
140 : 제어명령 수신부 150, 440, 720 : 촬영 제어부
160, 450, 730 : 행동 설정부 170, 460, 740 : 환경 설정부
200, 500, 800 : 제1카메라 300, 600, 900 : 제2카메라
410 : 영상 송신부 420 : 영상 수신부

Claims (22)

  1. 자신의 제1카메라에 의해 촬영되는 사용자 영상으로부터 특정 행동을 검출하는 행동 검출부와;
    상기 행동 검출부에 의해 특정 행동 검출시 상대방 이동단말의 제2카메라의 동작 또는 상대방 이동단말의 제2카메라에 의해 촬영되는 영상의 처리를 제어하는 제어명령을 생성하는 제어명령 생성부와;
    상기 제어명령 생성부에 의해 생성된 제어명령을 상대방 이동단말로 송신하는 제어명령 송신부와;
    상대방 이동단말로부터 송신되는 자신의 제1카메라의 동작 또는 자신의 제1카메라에 의해 촬영되는 영상의 처리를 제어하는 제어명령을 수신하는 제어명령 수신부와;
    상기 제어명령 수신부에 의해 수신된 제어명령에 따라 자신의 제1카메라의 동작 또는 자신의 제1카메라에 의해 촬영되는 영상의 처리를 제어하는 촬영 제어부를;
    포함하여 이루어지는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  2. 자신의 제1카메라에 의해 촬영되는 사용자 영상을 상대방 이동단말로 송신하는 영상 송신부와;
    상대방 이동단말로부터 송신되는 사용자 영상을 수신하는 영상 수신부와;
    상기 영상 수신부에 의해 수신된 사용자 영상으로부터 특정 행동을 검출하는 행동 검출부와;
    상기 행동 검출부에 의해 특정 행동 검출시 자신의 제1카메라의 동작 또는 자신의 제1카메라에 의해 촬영되는 영상의 처리를 제어하는 촬영 제어부를;
    포함하여 이루어지는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  3. 제1카메라와 제2카메라를 동시에 구비하는 이동단말에 있어서,
    자신의 제1카메라에 의해 촬영되는 사용자 영상으로부터 특정 행동을 검출하는 행동 검출부와;
    상기 행동 검출부에 의해 특정 행동 검출시, 자신의 제2카메라의 동작 또는 자신의 제2카메라에 의해 촬영되는 영상의 처리를 제어하는 촬영 제어부를;
    포함하여 이루어지는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  4. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 행동검출부에 의해 검출되는 특정 행동을 설정하는 행동 설정부를;
    더 포함하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  5. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 촬영 제어부 동작의 온/오프를 설정하는 환경 설정부를;
    더 포함하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  6. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 촬영 제어부가:
    카메라의 줌인 또는 줌아웃 동작을 제어하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  7. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 촬영 제어부가:
    카메라의 촬영각을 제어하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  8. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 촬영 제어부가:
    카메라의 촬영 시작 또는 종료 동작을 제어하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  9. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 촬영 제어부가:
    카메라에 의해 촬영되는 영상의 화면출력을 제어하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  10. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 촬영 제어부가:
    카메라에 의해 촬영되는 영상의 전송을 제어하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  11. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 촬영 제어부가:
    카메라에 의해 촬영되는 영상의 합성을 제어하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  12. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 촬영 제어부가:
    카메라에 의해 촬영되는 영상의 특수효과 처리를 제어하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  13. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 촬영 제어부가:
    카메라에 의해 촬영되는 영상의 위치 이동을 제어하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  14. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 행동 검출부가:
    사용자 영상으로부터 해당 사용자의 카메라쪽으로의 접근 또는 멀어짐을 검출하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  15. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 행동 검출부가:
    사용자 영상으로부터 해당 사용자의 좌측 또는 우측으로의 움직임을 검출하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  16. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 행동 검출부가:
    사용자 영상으로부터 해당 사용자의 좌측 또는 우측 눈의 깜빡임을 검출하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  17. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 행동 검출부가:
    사용자 영상으로부터 해당 사용자의 입 모양을 검출하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  18. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 행동 검출부가:
    사용자 영상으로부터 해당 사용자 얼굴의 기울기를 검출하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  19. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 행동 검출부가:
    사용자 영상으로부터 해당 사용자 얼굴의 좌측 또는 우측 회전을 검출하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  20. 제 1 항 내지 제 3 항 중의 어느 한 항에 있어서,
    상기 행동 검출부가:
    사용자 영상으로부터 해당 사용자 얼굴의 찡그림을 검출하는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말.
  21. 제1카메라는 제1사용자의 이동단말에 설치되고, 제2카메라는 제2사용자의 이동단말에 설치되는 영상인식기법을 이용한 촬영 제어 시스템에 있어서,
    제1카메라에 의해 촬영되는 사용자 영상으로부터 특정 행동을 검출하는 행동 검출부와, 상기 행동 검출부에 의해 특정 행동 검출시 제2카메라의 동작 또는 제2카메라에 의해 촬영되는 영상의 처리를 제어하는 제어명령을 생성하는 제어명령 생성부와, 상기 제어명령 생성부에 의해 생성된 제어명령을 송신하는 제어명령 송신부를 포함하는 제1사용자의 이동단말과;
    상기 제1사용자의 이동단말로부터 송신되는 제2카메라의 동작 또는 제2카메라에 의해 촬영되는 영상의 처리를 제어하는 제어명령을 수신하는 제어명령 수신부와, 상기 제어명령 수신부에 의해 수신된 제어명령에 따라 제2카메라의 동작 또는 제2카메라에 의해 촬영되는 영상의 처리를 제어하는 촬영 제어부를 포함하는 제2사용자의 이동단말을;
    포함하여 이루어지는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 시스템.
  22. 제1카메라는 제1사용자의 이동단말에 설치되고, 제2카메라는 제2사용자의 이동단말에 설치되는 영상인식기법을 이용한 촬영 제어 시스템에 있어서,
    제1카메라에 의해 촬영되는 사용자 영상을 송신하는 영상 송신부를 포함하는 제1사용자의 이동단말과;
    상기 제1사용자의 이동단말로부터 송신되는 사용자 영상을 수신하는 영상 수신부와, 상기 영상 수신부에 의해 수신된 사용자 영상으로부터 특정 행동을 검출하는 행동 검출부와, 상기 행동 검출부에 의해 특정 행동 검출시 제2카메라의 동작 또는 제2카메라에 의해 촬영되는 영상의 처리를 제어하는 촬영 제어부를 포함하는 제2사용자의 이동단말을;
    포함하여 이루어지는 것을 특징으로 하는 영상인식기법을 이용한 촬영 제어 시스템.
KR1020090084494A 2009-09-08 2009-09-08 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말 및 영상인식기법을 이용한 촬영 제어 시스템 KR101078057B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020090084494A KR101078057B1 (ko) 2009-09-08 2009-09-08 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말 및 영상인식기법을 이용한 촬영 제어 시스템
US12/852,113 US20110058051A1 (en) 2009-09-08 2010-08-06 Mobile terminal having photographing control function and photographing control system
EP10172479.7A EP2306706B1 (en) 2009-09-08 2010-08-11 Mobile terminal having photographing control function and photographing control system
JP2010180609A JP2011061770A (ja) 2009-09-08 2010-08-11 映像認識技術を利用した撮影制御機能を備えた移動端末及び映像認識技術を利用した撮影制御システム
TW099128099A TW201138440A (en) 2009-09-08 2010-08-23 Mobile terminal having photographing control function and photographing control system
CN2010102774988A CN102014198A (zh) 2009-09-08 2010-09-07 具有拍摄控制功能的移动终端和拍摄控制***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090084494A KR101078057B1 (ko) 2009-09-08 2009-09-08 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말 및 영상인식기법을 이용한 촬영 제어 시스템

Publications (2)

Publication Number Publication Date
KR20110026727A KR20110026727A (ko) 2011-03-16
KR101078057B1 true KR101078057B1 (ko) 2011-10-31

Family

ID=42983553

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090084494A KR101078057B1 (ko) 2009-09-08 2009-09-08 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말 및 영상인식기법을 이용한 촬영 제어 시스템

Country Status (6)

Country Link
US (1) US20110058051A1 (ko)
EP (1) EP2306706B1 (ko)
JP (1) JP2011061770A (ko)
KR (1) KR101078057B1 (ko)
CN (1) CN102014198A (ko)
TW (1) TW201138440A (ko)

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8564684B2 (en) * 2011-08-17 2013-10-22 Digimarc Corporation Emotional illumination, and related arrangements
JP2013070141A (ja) * 2011-09-21 2013-04-18 Eastman Kodak Co 撮像装置
KR101983288B1 (ko) * 2012-11-22 2019-05-29 삼성전자주식회사 카메라 촬영 제어장치 및 방법
TWI582708B (zh) * 2012-11-22 2017-05-11 緯創資通股份有限公司 臉部表情控制系統、表情控制之方法及其電腦系統
CN102984458A (zh) * 2012-12-18 2013-03-20 深圳市中兴移动通信有限公司 设备间共享拍摄的方法和终端
CN103108087A (zh) * 2013-02-28 2013-05-15 无锡同春新能源科技有限公司 一种用于手机拍照、摄像的智能控制装置
JP2015014672A (ja) * 2013-07-04 2015-01-22 住友電気工業株式会社 カメラ制御装置、カメラシステム、カメラ制御方法、及びプログラム
KR102082661B1 (ko) * 2013-07-12 2020-02-28 삼성전자주식회사 전자 장치의 촬영 이미지 생성 방법 및 장치
KR102031142B1 (ko) * 2013-07-12 2019-10-11 삼성전자주식회사 영상 디스플레이를 제어하는 전자 장치 및 방법
CN105705993B (zh) * 2013-11-29 2019-09-06 英特尔公司 利用面部检测来控制摄像机
CN103795918A (zh) * 2013-11-29 2014-05-14 深圳市中兴移动通信有限公司 一种拍摄方法和拍摄装置
BR102014013800A8 (pt) * 2014-06-06 2018-09-11 Localiza Rent A Car S A sistema de autoatendimento com identificação automatizada do usuário
CN105516576B (zh) * 2014-09-22 2020-01-21 中兴通讯股份有限公司 一种基于口型识别的拍照方法、装置和移动终端
EP3010225B1 (en) * 2014-10-14 2019-07-24 Nokia Technologies OY A method, apparatus and computer program for automatically capturing an image
CN106303194A (zh) * 2015-05-28 2017-01-04 中兴通讯股份有限公司 远程拍摄方法、主控拍摄终端、被控拍摄终端及拍摄***
CN105516598A (zh) * 2015-12-31 2016-04-20 上海摩软通讯技术有限公司 移动终端的拍摄控制方法及拍摄控制***
US10038937B2 (en) * 2016-01-11 2018-07-31 International Business Machines Corporation Location-specific audio capture and correspondence to a video file
CN105718887A (zh) * 2016-01-21 2016-06-29 惠州Tcl移动通信有限公司 基于移动终端摄像头实现动态捕捉人脸摄像的方法及***
CN106161954A (zh) * 2016-08-16 2016-11-23 北京金山安全软件有限公司 一种视频拍摄控制方法、装置及电子设备
CN106412443A (zh) * 2016-11-22 2017-02-15 维沃移动通信有限公司 一种拍摄方法及移动终端
CN106681503A (zh) * 2016-12-19 2017-05-17 惠科股份有限公司 一种显示控制方法、终端及显示装置
CN106941588B (zh) * 2017-03-13 2020-03-24 联想(北京)有限公司 一种数据处理方法及电子设备
CN107395968A (zh) * 2017-07-26 2017-11-24 Tcl移动通信科技（宁波）有限公司 移动终端及其录像操作检测处理方法、及存储介质
CN107911619A (zh) * 2017-12-28 2018-04-13 上海传英信息技术有限公司 一种智能终端的摄像***及其摄像方法
KR101843135B1 (ko) * 2018-01-31 2018-03-28 김규혁 영상 처리 방법, 장치 및 컴퓨터 프로그램
JP2020167517A (ja) * 2019-03-29 2020-10-08 ソニー株式会社 画像処理装置と画像処理方法とプログラムおよび撮像装置
US11792506B2 (en) * 2022-02-09 2023-10-17 Motorola Mobility Llc Electronic devices and corresponding methods for defining an image orientation of captured images

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004222254A (ja) 2002-12-27 2004-08-05 Canon Inc 画像処理システム、方法及びプログラム

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6188431B1 (en) * 1996-02-17 2001-02-13 Casio Computers Co., Ltd. Electronic still camera and method for communication between electronic still cameras
US6215519B1 (en) * 1998-03-04 2001-04-10 The Trustees Of Columbia University In The City Of New York Combined wide angle and narrow angle imaging system and method for surveillance and monitoring
US6943774B2 (en) * 2001-04-02 2005-09-13 Matsushita Electric Industrial Co., Ltd. Portable communication terminal, information display device, control input device and control input method
US7136094B2 (en) * 2002-02-22 2006-11-14 Hewlett-Packard Development Company, L.P. Share link between image capturing devices
KR100464040B1 (ko) * 2002-12-16 2005-01-03 엘지전자 주식회사 얼굴 움직임을 이용한 이동 통신 단말기의 제어 방법
JP2005051340A (ja) * 2003-07-30 2005-02-24 Canon Inc カメラをリモート制御するカメラ
JP2005092419A (ja) * 2003-09-16 2005-04-07 Casio Comput Co Ltd 情報処理装置およびプログラム
JP2005318259A (ja) * 2004-04-28 2005-11-10 Toshiba Corp 画像撮影装置、画像撮影システム及び画像撮影装置制御方法
JP4419759B2 (ja) * 2004-09-01 2010-02-24 株式会社ニコン 電子カメラシステム
JP4587166B2 (ja) * 2004-09-14 2010-11-24 キヤノン株式会社 移動体追跡システム、撮影装置及び撮影方法
US7379664B2 (en) * 2005-07-26 2008-05-27 Tinkers & Chance Remote view and controller for a camera
US7724284B2 (en) * 2005-09-29 2010-05-25 Aptina Imaging Corporation Multi-camera system and method having a common processing block
US20070254640A1 (en) * 2006-04-27 2007-11-01 Bliss Stephen J Remote control and viewfinder for mobile camera phone
US7626612B2 (en) * 2006-06-30 2009-12-01 Motorola, Inc. Methods and devices for video correction of still camera motion
CN101141628A (zh) * 2006-09-07 2008-03-12 环达电脑(上海)有限公司 移动嵌入式设备远程监控***及方法
US7995794B2 (en) * 2007-03-02 2011-08-09 Sony Ericsson Mobile Communications Ab Remote control of an image capturing unit in a portable electronic device
CN101335828A (zh) * 2007-06-26 2008-12-31 英华达(上海)电子有限公司 一种将摄录图像传输到移动终端显示的装置
CN201248116Y (zh) * 2008-08-29 2009-05-27 北京创先泰克科技有限公司 用电话机终端控制摄像装置的控制***
US8788977B2 (en) * 2008-11-20 2014-07-22 Amazon Technologies, Inc. Movement recognition as input mechanism

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004222254A (ja) 2002-12-27 2004-08-05 Canon Inc 画像処理システム、方法及びプログラム

Also Published As

Publication number Publication date
KR20110026727A (ko) 2011-03-16
US20110058051A1 (en) 2011-03-10
TW201138440A (en) 2011-11-01
JP2011061770A (ja) 2011-03-24
EP2306706B1 (en) 2013-08-21
EP2306706A1 (en) 2011-04-06
CN102014198A (zh) 2011-04-13

Similar Documents

Publication Publication Date Title
KR101078057B1 (ko) 영상인식기법을 이용한 촬영 제어 기능을 구비한 이동단말 및 영상인식기법을 이용한 촬영 제어 시스템
TWI586167B (zh) 以臉部偵測控制相機
US8638372B2 (en) Image capture unit with changeable image capture direction
KR101038323B1 (ko) 영상인식기법을 이용한 화면 프레임 제어장치
WO2022100712A1 (zh) 真实环境画面中虚拟道具的显示方法、***及存储介质
EP2536158A1 (en) Imaging control device and imaging control method
US20150271414A1 (en) Display apparatus and display method
KR20180108739A (ko) Vr 제어 방법, 장치, 전자 기기, 프로그램 및 저장매체
CN103914150A (zh) 摄像头控制方法和装置
JP6380787B2 (ja) 撮像装置、カメラ、表示装置、撮像方法、表示方法、及びプログラム
US10447919B2 (en) Imaging device, external device, imaging system, imaging method, operating method, and computer-readable recording medium
CN106664361B (zh) 信息处理装置、信息处理方法和计算机可读存储介质
JP2007251429A (ja) 動画撮影装置及びズーム調整方法
EP3226119B1 (en) Method and apparatus for displaying image data from a terminal on a wearable display
CN113138669A (zh) 电子设备的图像获取方法、装置、***及电子设备
US20160182860A1 (en) Methods for performing image capture and real-time image display on physically separated or separable devices and apparatus therefor
CN114882543A (zh) 图像处理设备、图像处理方法和计算机可读存储介质
WO2024067468A1 (zh) 基于图像识别的交互控制方法、装置及设备
CN114430453A (zh) 一种摄像头防抖动***、控制方法、设备及介质
CN110493503B (zh) 一种图像采集方法、电子设备和存储介质
WO2018074262A1 (ja) 通信装置および通信方法、並びにプログラム
JP2015162822A (ja) 電子機器、撮像装置及び通信装置
JP2022163813A (ja) 装着型の情報端末、その制御方法及びプログラム
KR20140075963A (ko) 이동 단말을 이용한 카메라 원격 제어 장치 및 방법
WO2023181862A1 (ja) 情報処理装置、情報処理方法、記憶媒体

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20141013

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20151001

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20161004

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180329

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20190327

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20191002

Year of fee payment: 9