KR100883467B1 - 통화자 얼굴 추적 이동통신단말기 거치대 및이동통신단말기 - Google Patents

통화자 얼굴 추적 이동통신단말기 거치대 및이동통신단말기 Download PDF

Info

Publication number
KR100883467B1
KR100883467B1 KR1020070069429A KR20070069429A KR100883467B1 KR 100883467 B1 KR100883467 B1 KR 100883467B1 KR 1020070069429 A KR1020070069429 A KR 1020070069429A KR 20070069429 A KR20070069429 A KR 20070069429A KR 100883467 B1 KR100883467 B1 KR 100883467B1
Authority
KR
South Korea
Prior art keywords
mobile communication
communication terminal
face
caller
rotation signal
Prior art date
Application number
KR1020070069429A
Other languages
English (en)
Other versions
KR20090006261A (ko
Inventor
김창한
Original Assignee
(주)케이티에프테크놀로지스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)케이티에프테크놀로지스 filed Critical (주)케이티에프테크놀로지스
Priority to KR1020070069429A priority Critical patent/KR100883467B1/ko
Publication of KR20090006261A publication Critical patent/KR20090006261A/ko
Application granted granted Critical
Publication of KR100883467B1 publication Critical patent/KR100883467B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/04Supports for telephone transmitters or receivers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/50Telephonic communication in combination with video communication

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephone Function (AREA)

Abstract

이동통신단말기의 화상통화용 카메라에서 영상신호를 받아들이는 영상 입력 단계, 영상신호에서 통화자 얼굴의 적어도 일부를 필터링하는 영상 필터링 단계, 필터링된 통화자 얼굴의 적어도 일부의 이동 방향을 검출하는 얼굴 추적 단계, 검출된 이동방향에 따른 이동통신단말기의 화상통화용 카메라의 회전값을 연산하여 회전신호를 생성하는 회전신호 생성 단계 및 회전신호에 대응하여 이동통신단말기 거치대에서 상기 이동통신단말기의 방향을 제어하는 이동통신단말기 방향 제어 단계를 포함하여 이동통신단말기와 이동통신단말기 거치대의 동작방법을 구성한다. 따라서, 통화자의 얼굴을 자동으로 추적하여 화상통화를 가능하도록 구성가능함으로써 간편한 영상회의 용도 등으로 이동통신단말기를 이용가능하도록 할 수 있다.
이동통신단말기, 거치대, 화상통화, 얼굴추적

Description

통화자 얼굴 추적 이동통신단말기 거치대 및 이동통신단말기{MOBILE TELEPHONE SUPPORTING DEVICE AND MOBILE TELEPHONE TRACKING FACE OF CALLER AND OPERATING METHOD THEREOF}
본 발명은 이동통신단말기 거치대 및 이동통신단말기에 관한 것으로, 더욱 상세하게는 화상통화중에 통화자의 얼굴을 자동으로 추적하여 이동통신단말기의 카메라 방향을 제어할 수 있도록 구성된 이동통신단말기 거치대 및 이동통신단말기에 관한 것이다.
이동통신단말기의 급격한 확산은 다양한 사용자의 요구를 적절히 파악하고 파악된 요구를 명확히 반영한 제품화에 힘입은 바가 크다. 특히, 최근의 경향은 이동통신 대역폭의 증대에 따라 대량의 멀티미디어 데이터를 통화자간에 전송할 수 있는 새로운 통신방식의 도입으로 종래의 음성통화 위주의 이동통신 사용 유형을 급격히 변화시키고 있다.
예컨대, 3세대 통신(3G)의 범주에 속하는 WCDMA(wideband code division multiple access) 기술에 의한 영상통화 기능이 그것이다. 3세대 통신은 2GHz대의 주파수를 사용하며, 전송속도가 128Kbps에서 2Mbps에 달한다. 이동통신단말기 사용 자가 정지하거나 걷는 정도로 움직일 때는 최고 384Kbps, 달리는 자동차 안에서는 128Kbps, 고정 또는 장착된 경우 2Mbps의 속도를 낼 수 있다. 이것은 동영상을 주고받을 수 있는 속도이므로 2세대 이동통신과는 이용형태에 있어서 근본적인 차이를 가져올 수 있다. 즉, 뮤직비디오나 인터넷방송,만화,뉴스 등 다양한 동영상 콘텐츠의 주문형 비디오(VOD) 서비스뿐만 아니라 상대방의 모습을 확인하면서 통화를 하는 영상통화를 실시간으로 이용할 수 있다.
이러한 영상통화 기능을 포함하는 이동통신단말기의 기능확대는 이동통신단말기의 사용 영역에 큰 변화를 가져다 줄 수 있다. 예컨대, 고가의 영상회의장치등을 대신하여 간이적으로 영상회의를 가능하게 해줄 수 있다.
전용의 영상회의장치등은 대화면, 동시에 많은 사용자 지원, 광케이블등을 통한 광대역의 통신을 지원하는 등의 장점이 있기는 하나, 이를 위해서 고가의 인프라를 구비하여야 하며, 장비 자체의 규모 또한 커지게 되는 문제점이 있다. 반면에, 영상통화를 지원하는 이동통신단말기를 영상회의 등에 이용하게 될 경우에는 간편한 구성으로 영상회의 등의 목적으로 활용 가능하다. 그러나, 일반적인 영상통화 지원 이동통신단말기는 통화자가 손에 쥐고 통화를 하는 방식으로 동작하게 되므로, 장시간 사용시에는 화면의 흔들림이나 사용상의 불편을 줄 수 있다.
이를 해결하기 위해서 한국등록특허 제413267호(‘얼굴의 특정부위 인식을 이용한 카메라의 자동추적장치를 구비하는 이동통신 단말기’) 및 한국공개특허 제2006-0083762호(‘카메라 피사체 자동 추적 시스템과, 이를 탑재한 이동통신단말기 및 카메라 피사체 자동 추적 방법’) 등에서는 통화자의 얼굴을 자동으로 추적 하여 이동통신단말기에 장착된 카메라 방향을 모터 구동부로 제어하도록 된 구성을 개시하고 있다.
하지만, 소형화된 이동통신단말기 내부에서 화상통화용 카메라를 구동시킨다는 것은 구동의 자유도에 제약을 가져온다. 예를 들면, 통화자의 얼굴 움직임을 추적한다할지라도 이동통신단말기 내부에서 화상통화용 카메라를 통화자의 얼굴을 추적하여 움직일 수 있는 각도에는 한계가 있을 수 있다. 또한, 이동통신단말기 내부에서 화상통화용 카메라를 통화자의 얼굴을 향하여 구동시킨다 하여도 이동통신단말기 자체의 흔들림을 막기는 어렵다. 실질적으로, 이동통신단말기의 흔들림은 화상통화 동영상의 화질 또한 크게 저하시킬 수 있는데, 급격한 화면의 변화로 인해 동영상 압축 효율이 떨어지게 되므로 통화자에게 보여지는 동영상의 화질을 크게 저해시킬 수 있다.
상기 문제점을 해결하기 위한 본 발명의 목적은 화상통화중에 통화자의 얼굴을 자동으로 추적하여 이동통신단말기의 카메라 방향을 제어할 수 있도록 구성된 이동통신단말기 거치대와 이동통신단말기의 동작방법을 제공하는 것이다.
상기 문제점을 해결하기 위한 본 발명의 다른 목적은 화상통화중에 통화자의 얼굴을 자동으로 추적하여 이동통신단말기의 카메라 방향을 제어할 수 있도록 구성된 이동통신단말기 거치대와 이동통신단말기를 제공하는 것이다.
상술한 본 발명의 목적을 해결하기 위해 본 발명은 이동통신단말기의 화상통화용 카메라에서 영상신호를 받아들이는 영상 입력 단계, 상기 영상신호에서 통화자 얼굴의 적어도 일부를 필터링하는 영상 필터링 단계, 상기 필터링된 통화자 얼굴의 적어도 일부의 이동 방향을 검출하는 얼굴 추적 단계, 상기 검출된 이동방향에 따른 상기 이동통신단말기의 화상통화용 카메라의 회전값을 연산하여 회전신호를 생성하는 회전신호 생성 단계 및 상기 회전신호에 대응하여 이동통신단말기 거치대에서 상기 이동통신단말기의 방향을 제어하는 이동통신단말기 방향 제어 단계를 포함하여 구성된 것을 특징으로 하는 이동통신단말기 거치대 및 이동통신단말기의 동작방법을 제공한다.
여기에서, 상기 영상 필터링 단계에서 필터링되는 상기 통화자 얼굴의 적어도 일부는 상기 통화자 얼굴의 눈, 코, 귀 및 입 중 적어도 어느 하나를 포함할 수 있다.
여기에서, 상기 얼굴 추적 단계에서 상기 이동 방향의 검출은 상기 필터링된 통화자 얼굴의 적어도 일부의 이동을 순차적인 프레임간의 비교를 통하여 움직임 벡터로서 산출해낼 수 있다. 또한, 상기 회전신호 생성 단계에서 생성되는 상기 회전신호는 상기 움직임 벡터를 토대로 상기 이동통신단말기의 방향을 제어하기 위한 각속도 및 각벡터값을 포함하여 구성될 수 있다.
상술한 본 발명의 다른 목적을 해결하기 위해 본 발명은 이동통신단말기와 이동통신단말기 거치대의 구성을 제공한다.
여기에서, 이동통신단말기는 화상을 캡쳐하여 영상신호를 출력하는 화상통화용 카메라, 상기 영상신호에서 통화자 얼굴의 적어도 일부를 필터링하는 영상 필터링부, 상기 필터링된 통화자 얼굴의 적어도 일부의 이동방향을 검출하는 얼굴 추적부, 상기 이동방향에 따른 상기 화상통화용 카메라의 회전값을 연산하여 회전신호로서 출력하는 회전신호 생성부 및 상기 회전신호를 외부로 출력하는 회전신호 출력부를 포함하여 구성될 수 있다. 이 때, 이동통신단말기 거치대는 상기 이동통신단말기를 거치시킬 수 있는 이동통신단말기의 거치대로서, 상기 이동통신단말기의 회전신호 출력부로부터 상기 이동통신단말기의 방향을 제어하기 위한 회전신호를 입력받는 회전신호 입력부 및 상기 회전신호에 대응하여 상기 이동통신단말기의 방향을 제어하는 이동통신단말기 구동부를 구비하여 구성될 수 있다.
또한, 이동통신단말기는 화상을 캡쳐하여 영상신호를 출력하는 화상통화용 카메라 및 상기 영상신호를 외부로 출력하는 영상신호 출력부를 포함하여 구성될 수도 있다. 이 때, 이동통신단말기 거치대는 상기 이동통신단말기의 영상신호 출력부로부터 영상신호를 입력받는 영상신호 입력부, 상기 영상신호에서 통화자 얼굴의 적어도 일부를 필터링하는 영상 필터링부, 상기 필터링된 통화자 얼굴의 적어도 일부의 이동방향을 검출하는 얼굴 추적부, 상기 이동방향에 따른 상기 화상통화용 카메라의 회전값을 연산하여 회전신호로서 출력하는 회전신호 생성부 및 상기 회전신호에 대응하여 상기 이동통신단말기의 방향을 제어하는 이동통신단말기 구동부를 포함하여 구성될 수 있다.
여기에서, 상기 영상 필터링부에서 필터링되는 상기 통화자 얼굴의 적어도 일부는 상기 통화자 얼굴의 눈, 코, 귀 및 입 중 적어도 어느 하나를 포함할 수 있다.
여기에서, 상기 얼굴 추적부에서 상기 이동 방향의 검출은 상기 필터링된 통화자 얼굴의 적어도 일부의 이동을 순차적인 프레임간의 비교를 통하여 움직임 벡터로서 산출해내도록 구성될 수 있다.
여기에서, 상기 회전신호 생성부에서 생성되는 상기 회전신호는 상기 움직임 벡터를 토대로 상기 이동통신단말기의 방향을 제어하기 위한 각속도 및 각벡터값을 포함하여 구성될 수 있다.
상기와 같은 이동통신단말기 거치대와 이동통신단말기의 동작방법을 이용하면, 이동통신단말기가 통화자의 얼굴을 자동으로 추적하여 화상통화를 가능하도록 구성가능함으로써 간편한 영상회의 용도로 화상통화 지원 이동통신단말기를 사용할 수 있도록 할 수 있다.
또한, 단말기 거치대에 이동통신단말기가 통화자의 얼굴 방향을 향할 수 있도록 하는 구동부를 마련함으로써, 이동통신단말기를 손에 쥐고 장시간 화상통화를 할 경우의 이동통신단말기의 흔들림을 방지할 수 있다. 이동통신단말기의 흔들림으로 방지함으로써 동영상 압축 기술을 이용하는 화상통화시의 화질 저하를 방지할 수 있는 효과도 가져올 수 있다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다.
그러나, 이는 본 발명의 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 이하, 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.
본 발명의 이동통신단말기 거치대 및 이동통신단말기의 동작방법은 도 1 및 도 2를 통하여 설명될 수 있다.
도 1은 본 발명의 이동통신단말기 거치대 및 이동통신단말기의 동작방법을 설명하기 위한 순서도이다.
또한, 도 2는 본 발명의 이동통신단말기 거치대 및 이동통신단말기의 동작방 법을 설명하기 위한 개념도이다.
도 1 및 도 2를 참조하면, 본 발명의 이동통신단말기(100) 및 이동통신단말기 거치대(200)의 동작방법은 영상 입력 단계(S100), 영상 필터링 단계(S110), 얼굴 추적 단계(S120), 회전신호 생성 단계(S130) 및 이동통신 단말기 방향 제어 단계(S140)를 포함하여 구성될 수 있다.
첫째로, 영상 입력 단계(S100)는 이동통신단말기(100)의 화상통화용 카메라(110)에서 영상신호를 받아들이는 단계이다. 일반적으로 화상통화를 지원하는 이동통신단말기의 경우는 기존의 고화소의 외부전경 촬영용 카메라와는 별도로 통화자의 화상을 촬영할 수 있는 화상통화용 저화소 카메라를 디스플레이가 장비된 측면에 배치하고 있다. 화상통화용 카메라(110)는 통화자의 영상을 촬영하여 영상신호를 생성하게 된다.
둘째로, 영상 필터링 단계(S110)는 상기 영상 입력 단계(S100)에서 생성된 영상신호에서 통화자 얼굴의 적어도 일부를 필터링하는 단계이다. 예컨대, 통화자의 얼굴중, 눈, 코, 귀 및 입에서 적어도 하나를 이용하여 영상신호에서 통화자 얼굴의 적어도 일부를 분리해낼 수 있다. 여기에서, 촬영된 영상신호에서 통화자 얼굴의 적어도 일부를 필터링하는 방법론으로는 다양한 방법론이 채택될 수 있으며 이러한 영상 필터링 방법론은 당업자에게 있어 공지 기술의 영역이므로 설명은 생략된다.
셋째로, 얼굴 추적 단계(S120)는 상기 영상 필터링 단계(S110)에서 필터링된 통화자 얼굴의 적어도 일부의 이동 방향을 검출하는 단계이다.
여기에서, 통화자 얼굴의 적어도 일부의 이동방향을 검출해내는 방법론은 상기 영상 필터링 단계(S110)에서 영상신호로부터 통화자 얼굴의 적어도 일부를 필터링하는 것과 마찬가지로 다양한 방법론이 채택될 수 있다.
예컨대, 상기 영상 필터링 단계(S110)에서 통화자 얼굴의 적어도 일부를 필터링하였다면, 필터링된 통화자 얼굴의 적어도 일부가 동영상을 구성하는 순차적인 프레임들간의 비교를 통하여 이동방향을 산출할 수 있다. 즉, 현재의 프레임에서 분리된 통화자 얼굴의 적어도 일부의 기준점과 직전 프레임에서 분리된 통화자 얼굴의 적어도 일부의 기준점과 비교하여 프레임내에서 움직이는 방향을 움직임 벡터(motion vector)로서 산출해낼 수가 있다.
넷째로, 회전신호 생성 단계(S130)는 상기 얼굴 추적 단계(S120)에서 검출된 통화자 얼굴의 이동방향에 대응하여 이동통신단말기(100)의 회전값을 연산하고 회전신호를 생성하기 위한 단계이다.
얼굴 추적 단계(S120)에서 생성된 움직임 벡터값으로부터 이동통신단말기(100)를 회전시키기 위한 각속도(angle velocity) 및 각벡터(angle vector)값이 연산될 수 있다. 이때, 이동통신단말기의 크기, 이동통신단말기내의 화상통화용 카메라의 위치, 이동통신단말기 거치대의 크기 등을 고려되어, 이동통신단말기의 화상통화용 카메라의 방향이 통화자 얼굴을 향할 수 있도록 회전값이 연산되어야 한다.
예컨대, 이동통신단말기 거치대(200)에 거치된 상태에서의 이동통신단말기(100)내 화상통화용 카메라(110)의 높이 및 구동축과의 관계를 감안하여 구동부 의 회전량에 따른 화상통화용 카메라의 회전량을 종합적으로 고려한 회전값이 연산되어야 하며, 이를 이용하여 회전신호가 생성되어야 한다.
다섯째로, 이동통신단말기 방향 제어 단계(S140)는 상기 회전신호에 대응하여 이동통신단말기 거치대(200)에서 상기 이동통신단말기(100)의 방향을 제어하는 단계이다.
이동통신단말기 거치대(200)에는 이동통신단말기(100)가 탑재되어 이동통신단말기(100)를 좌우 회전(280) 또는 이동통신단말기(100)를 상하 방향(290)으로 기울이기 위한 구동장치가 탑재된다. 회전신호 생성단계(S130)에서 생성된 회전신호에는 구동장치를 제어하기 위한 각속도 및 각벡터 값이 포함되어 있으므로, 이동통신단말기 방향 제어 단계(S140)에서는 수신한 회전신호에 대응하여 이동통신단말기(100)의 방향을 제어할 수 있다.
도 3a는 본 발명의 이동통신단말기의 제 1 실시예를 예시하는 블록도이다.
도 3a를 참조하면, 본 발명의 이동통신단말기(100-1)는 화상통화용 카메라(110), 영상 필터링부(120), 얼굴 추적부(130), 회전신호 생성부(140) 및 회전신호 출력부(150)를 포함하여 구성될 수 있다.
화상통화용 카메라(110)는 화상을 캡쳐하여 영상신호를 출력하기 위한 구성요소로서, 화상통화를 지원하는 이동통신단말기의 경우에는 통상적으로 구비하여야 하는 구성요소에 해당된다. 이때, 화상통화용 카메라로는 CCD(Charge-Coupled Device) 또는 CMOS(Complementary Metal-Oxide Semiconductor)식의 카메라 모듈이 포함되어 구성될 수 있음은 당업자에게 있어 자명할 것이다.
영상 필터링부(120)는 화상통화용 카메라(110)로부터 입력된 상기 영상신호에서 통화자 얼굴의 적어도 일부를 필터링하기 위한 구성요소이다. 여기에서, 통화자 얼굴의 적어도 일부로는 통화자 얼굴의 눈, 코, 귀 및 입에서 적어도 하나를 포함할 수 있다. 전체 얼굴이 촬영된 영상신호로부터 눈, 코, 귀 및 입의 특징점을 파악하여 이들중 적어도 하나를 분리해낼 수 있는 알고리즘은 다양하게 구성될 수 있다.
한편, 영상 필터링부(120)는 프로그램 코드와 프로그램 코드를 실행시킬 수 있는 프로세서 유닛(예컨대, 이동통신단말기 내부에 구비된 메인 프로세서 유닛)에 의하여 구현될 수 있다. 또는, 영상 필터링부(120)는 영상 필터링을 전담하여 처리하는 별도의 하드웨어 구성의 일부로서 주문형 반도체(ASIC:Application Specific Integrated Circuit)의 일부로서 구현될 수도 있을 것이며, 이 경우는 상기 프로세서 유닛 및 프로그램 코드를 이용한 구성과 대비하여 이동통신단말기의 메인 프로세서 유닛의 처리 부담을 줄일 수 있을 것이다.
얼굴 추적부(130)는 상기 영상 필터링부(120)로부터 필터링된 통화자 얼굴의 적어도 일부의 이동방향을 검출하기 위한 구성요소이다.
상기 영상 필터링부(120)에서 통화자 얼굴의 적어도 일부(눈, 코, 귀 및 입)를 필터링하였다면, 이를 기준점으로 하여 동영상을 구성하는 순차적인 프레임내에서 이 기준점의 움직임을 파악할 수 있다.
예컨대, 현재의 프레임과 이전 프레임간에 상기 기준점의 위치 이동을 프레임내에서의 움직임 벡터(motion vector)로서 산출해내도록 구성될 수 있다. 이때, 얼굴 추적부(130)는 상기 영상 필터링부(120)와 마찬가지로, 프로그램 코드 및 프로세서 유닛으로 구성될 수도 있으며, 하드웨어 구성의 일부로서 주문형 반도체의 일부로서 구현될 수도 있음은 당업자에게 있어 자명할 것이다.
회전신호 생성부(140)는 상기 얼굴 추적부(130)에서 출력된 상기 이동방향에 따른 상기 화상통화용 카메라(110)의 방향을 제어할 수 있는 회전값을 연산하여 회전신호로서 출력하기 위한 구성요소이다.
상기 이동방향을 나타내기 위한 움직임 벡터값으로부터 이동통신단말기(100-1)를 회전시키기 위한 각속도 및 각벡터 값이 연산될 수 있다. 이때, 이동통신단말기의 크기, 이동통신단말기내의 화상통화용 카메라의 위치, 이동통신단말기 거치대의 크기 등을 고려되어, 이동통신단말기의 화상통화용 카메라의 방향이 통화자 얼굴을 향할 수 있도록 회전값이 연산되어야 한다. 예컨대, 거치대에 거치된 상태에서의 이동통신단말기내 화상통화용 카메라의 높이 및 구동축과의 관계를 감안하여 구동부의 회전량에 따른 화상통화용 카메라의 회전량을 종합적으로 고려한 회전값이 연산되어야 하며, 이를 이용하여 회전신호가 생성되어야 한다. 이때, 회전신호 생성부(140) 역시 상기 영상 필터링부(120) 및 얼굴 추적부(130)와 마찬가지로, 프로그램 코드 및 프로세서 유닛으로 구성될 수도 있으며, 하드웨어 구성의 일부로서 주문형 반도체의 일부로서 구현될 수도 있음은 당업자에게 있어 자명할 것이다.
회전신호 출력부(150)는 상기 회전신호 생성부(140)로부터 생성된 회전신호를 외부로 출력하기 위한 구성요소이다.
회전신호 생성부(140)가 생성한 회전신호는 회전신호 출력부(150)를 통하여 외부로 출력될 수 있으며, 회전신호 출력부(150)는 통상적인 커넥터를 통하여 구성될 수 있다. 예컨대, 이동통신단말기가 통상적으로 구비하는 커넥터일 예로서, 대한민국내의 이동통신단말기라면 TTA(Telecommnunication Technology Association) 24 핀 통합커넥터, 20 핀 통합커넥터, 이동통신단말기에 특화된 다 종의 커넥터를 이용하여 구성될 수 있으며, 상기 커넥터에 포함된 일부 핀들을 이용하여 회전신호를 외부로 출력할 수 있다. 한편, 회전신호출력부가 외부로 출력하는 회전신호는 일반적으로 도 3a에서 구성이 예시된 이동통신단말기가 거치되는 이동통신단말기 거치대로 입력된다. 이동통신단말기(100-1)에 대응되는 이동통신단말기 거치대(200-1)의 구성은 도 3b를 통하여 설명된다.
도 3b는 본 발명의 이동통신단말기 거치대의 제 1 실시예를 예시하는 블록도이다.
도 3b를 참조하면, 본 발명의 이동통신단말기 거치대(200-1)는 회전신호 입력부(210) 및 이동통신단말기 구동부(220)를 포함하여 구성될 수 있다.
회전신호 입력부(210)는 도 3a에 예시된 이동통신단말기(100-1)의 회전신호 출력부(150)로부터 상기 이동통신단말기(100-1)의 방향을 제어하기 위한 회전신호를 입력받는 구성요소이다. 따라서, 회전신호 출력부(150)가 외부로 회전신호를 출력하기 위하여 사용하는 인터페이스와 동일한 인터페이스가 사용되어야 한다.
이동통신단말기 구동부(220)는 상기 회전신호 입력부(210)를 통하여 입력된 회전신호에 대응하여 상기 이동통신단말기(100-1)의 방향을 제어하는 구성요소이다.
상기 회전신호가 이동통신단말기(100-1)의 방향을 제어하기 위한 각속도 및 각벡터를 포함하고 있다면, 상기 이동통신단말기 구동부(220)는 상기 회전신호를 받아들여서 상기 이동통신단말기 거치대(200-1)에 거치된 이동통신단말기(100-1)의 방향을 제어한다.
이를 위하여, 상기 이동통신단말기 구동부(220)는 펄스(pulse)를 통하여 제어되는 스텝모터(step motor) 또는 직류(DC: Direct Current) 모터 등을 포함하여 상기 이동통신단말기를 좌우방향 및 상하로 기울일 수 있는 동작을 구현할 수 있다.
따라서, 회전신호가 포함하고 있는 각속도 및 각벡터 값들을 이용하여 상기 이동통신단말기 구동부(220)가 포함하고 있는 모터들을 제어할 수 있는 컨트롤러를 포함하여 구성될 수 있다.
한편, 도 3a와 도 3b를 통하여 예시된 본 발명의 이동통신단말기(100-1)와 이동통신단말기 거치대(200-1)의 구성에서는 이동통신단말기(100-1)에 영상 필터링부(120), 얼굴 추적부(130) 및 회전신호 생성부(140)가 포함되어 구성된다. 하지만, 구성예에 따라서는 많은 연산처리량을 필요로 하는 상기 영상 필터링부(120), 얼굴 추적부(130) 및 회전신호 생성부(140)를 이동통신단말기 거치대(200-1)와 이동통신단말기(100-1)에 분산하여 구성할 수도 있다.
도 4a 및 도 4b를 통하여 설명되는 본 발명의 이동통신단말기(100-2)와 이동통신단말기 거치대(200-2)의 제 2 실시예는 이동통신단말기(100-2)로부터 출력되는 영상신호를 이용하여, 상술한 영상 필터링부(120), 얼굴 추적부(130) 및 회전신호 생성부(140)에 대응되는 처리를 이동통신단말기 거치대(200-2)에서 처리하는 구성 을 예시한 것이다. 영상 필터링부(120), 얼굴 추적부(130) 및 회전신호 생성부(140)의 처리 연산량이 이동통신단말기내에 포함된 프로세서 유닛이 처리하기 어려울 정도인 경우에는 도 4a 및 도 4b의 구성이 보다 더 바람직할 수 있다. 그러나, 이동통신단말기와 이동통신단말기 거치대의 구성에 따라서는 더 다양하게 이동통신단말기와 이동통신단말기 거치대에 처리를 분산시킬 수 있다.
도 4a는 본 발명의 이동통신단말기의 제 2 실시예를 예시하는 블록도이다.
도 4a를 참조하면, 본 발명의 이동통신단말기(100-2)의 다른 구성은 화상통화용 카메라(110) 및 영상신호 출력부(160)를 포함하여 구성될 수 있다.
화상통화용 카메라(110)는 화상을 캡쳐하여 영상신호를 출력하기 위한 구성요소로서, 도 3a에서 예시한 본 발명의 이동통신단말기(100-1)의 화상통화용카메라(110)와 동일한 구성요소이다.
영상신호 출력부(160)는 상기 화상통화용 카메라(110)로부터 출력되는 영상신호를 외부로 출력하기 위한 구성요소이다. 영상신호 출력부(160)는 상기 도 3a를 통하여 설명된 본 발명의 이동통신단말기(100-1)의 회전신호 출력부(150)와 유사하게 통상적인 커넥터를 통하여 구성될 수 있다. 예컨대, 이동통신단말기가 통상적으로 구비하는 커넥터(일 예로서, TTA 24 핀 통합커넥터, 20 핀 통합커넥터, 이동통신단말기에 특화된 다 종의 커넥터)를 이용하여 구성될 수 있으며, 상기 커넥터에 포함된 일부 핀들을 이용하여 영상신호를 외부로 출력할 수 있다. 다만, 회전신호 출력부(150)가 출력하는 회전신호와는 달리 영상신호 출력부(160)가 전달해야 하는 영상신호의 데이터 량은 비교할 수 없이 클 수 있으므로 영상신호 출력부(160)의 인터페이스는 회전신호 출력부(150)의 인터페이스에 비해 고속의 인터페이스가 선택되어야 할 것이다. 최근에는 이동통신단말기내에 별도의 TV-Out 출력 단자가 장비되는 경우가 있으므로 구성에 따라서는 이와 같은 TV-Out 출력단자를 영상신호 출력부(160)가 이용하도록 구성될 수도 있을 것이다.
도 4b는 본 발명의 이동통신단말기 거치대의 제 2 실시예를 예시하는 블록도이다.
도 4b를 참조하면, 본 발명의 이동통신단말기 거치대(200-2)의 다른 구성은 영상신호 입력부(230), 영상 필터링부(240), 얼굴 추적부(250), 회전신호 생성부(260) 및 이동통신단말기 구동부(270)를 포함하여 구성될 수 있다.
영상신호 입력부(230)는 상기 도 4a에 도시된 이동통신단말기(100-2)의 영상신호 출력부(160)에 대응되는 구성요소로서 상기 영상신호 출력부(160)에 출력하는 영상신호를 입력받는 구성요소이다. 영상신호 입력부(230)가 입력받은 영상신호는 영상 필터링부(240)에 입력된다.
이하, 영상 필터링부(240), 얼굴 추적부(250) 및 회전신호 생성부(260)는 상기 도 3a에 도시된 이동통신단말기(100-1)에 상응하는 구성요소들, 영상 필터링부(120), 얼굴 추적부(130) 및 회전신호 생성부(140)와 동일한 역할을 수행하는 구성요소이다.
마찬가지로, 이동통신단말기 구동부(220)는 상기 도 3b에 도시된 이동통신단말기 거치대(200-1)의 이동통신단말기 구동부(220)와 동일한 구성요소로서 회전신호 생성부(260)에서 출력하는 회전신호에 응답하여 이동통신단말기(100-2)의 방향 을 제어하도록 구성될 수 있다.
이상 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
도 1은 본 발명의 이동통신단말기 거치대 및 이동통신단말기의 동작방법을 설명하기 위한 순서도이다.
도 2는 본 발명의 이동통신단말기 거치대 및 이동통신단말기의 동작방법을 설명하기 위한 개념도이다.
도 3a는 본 발명의 이동통신단말기의 제 1 실시예를 예시하는 블록도이다.
도 3b는 본 발명의 이동통신단말기 거치대의 제 1 실시예를 예시하는 블록도이다.
도 4a는 본 발명의 이동통신단말기의 제 2 실시예를 예시하는 블록도이다.
도 4b는 본 발명의 이동통신단말기 거치대의 제 2 실시예를 예시하는 블록도이다.
<도면의 주요 부분에 대한 부호의 설명>
100 : 이동통신단말기 110 : 화상통화용 카메라
200 : 이동통신단말기 거치대 280 : 회전방향
290 : 상하방향

Claims (14)

  1. 이동통신단말기와 이동통신단말기 거치대로 구성된 화상통화 시스템에 있어서,
    상기 이동통신단말기에서, 상기 이동통신단말기에 구비된 화상통화용 카메라를 이용하여 영상신호를 받아들이는 영상 입력 단계;
    상기 이동통신단말기에서, 상기 화상통화용 카메라로부터 입력된 영상신호에서 통화자 얼굴의 적어도 일부를 필터링하는 영상 필터링 단계;
    상기 이동통신단말기에서, 상기 필터링된 통화자 얼굴의 적어도 일부의 이동방향을 검출하는 얼굴 추적 단계;
    상기 이동통신단말기에서, 상기 검출된 이동방향에 따른 상기 이동통신단말기의 화상통화용 카메라의 회전값을 연산하여 회전신호를 생성하고, 상기 회전신호를 상기 이동통신단말기 거치대로 출력하는, 회전신호 생성 단계; 및
    상기 이동통신단말기 거치대에서, 상기 회전신호에 대응하여 상기 이동통신단말기의 방향을 제어하는 이동통신단말기 방향 제어 단계를 포함하여 구성된 것을 특징으로 하는 화상통화 시스템 동작방법.
  2. 제 1 항에 있어서,
    상기 영상 필터링 단계에서 필터링되는 상기 통화자 얼굴의 적어도 일부는 상기 통화자 얼굴의 눈,코,귀 및 입 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 화상통화 시스템 동작방법.
  3. 제 1 항에 있어서,
    상기 얼굴 추적 단계에서 상기 이동방향의 검출은 상기 필터링된 통화자 얼굴의 적어도 일부의 이동을 순차적인 프리임간의 비교를 통하여 움직임 벡터로서 산출해내는 것을 특징으로 하는 화상통화 시스템 동작방법.
  4. 제 3 항에 있어서,
    상기 회전신호 생성 단계에서 생성되는 상기 회전신호는 상기 움직임 벡터를 토대로 상기 이동통신단말기의 방향을 제어하기 위한 각속도 및 각 벡터값을 포함하여 구성되는 것을 특징으로 하는 화상통화 시스템 동작방법.
  5. 화상을 캡쳐하여 영상신호를 출력하는 화상통화용 카메라;
    상기 영상신호에서 통화자 얼굴의 적어도 일부를 필터링하는 영상 필터링부;
    상기 필터링된 통화자 얼굴의 적어도 일부의 이동방향을 검출하는 얼굴 추적부;
    상기 이동방향에 따른 상기 화상통화용 카메라의 회전값을 연산하여 회전신호로서 출력하는 회전신호 생성부; 및
    상기 회전신호를 외부로 출력하는 회전신호 출력부를 포함한 것을 특징으로 하는 이동통신단말기.
  6. 제 5 항에 있어서,
    상기 영상 필터링부에서 필터링되는 상기 통화자 얼굴의 적어도 일부는 상기 통화자 얼굴의 눈, 코, 귀 및 입 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 이동통신단말기.
  7. 제 5 항에 있어서,
    상기 얼굴 추적부에서 상기 이동 방향의 검출은 상기 필터링된 통화자 얼굴의 적어도 일부의 이동을 순차적인 프레임간의 비교를 통하여 움직임 벡터로서 산출해내는 것을 특징으로 하는 이동통신단말기.
  8. 제 7 항에 있어서,
    상기 회전신호 생성부에서 생성되는 상기 회전신호는 상기 움직임 벡터를 토대로 상기 이동통신단말기의 방향을 제어하기 위한 각속도 및 각벡터값을 포함하여 구성되는 것을 특징으로 하는 이동통신단말기.
  9. 제 5 항에 기재된 이동통신단말기를 거치시킬 수 있는 이동통신단말기의 거치대로서,
    상기 이동통신단말기의 회전신호 출력부로부터 상기 이동통신단말기의 방향을 제어하기 위한 회전신호를 입력받는 회전신호 입력부; 및
    상기 회전신호에 대응하여 상기 이동통신단말기의 방향을 제어하는 이동통신 단말기 구동부를 구비한 것을 특징으로 하는 이동통신단말기 거치대.
  10. 화상을 캡쳐하여 영상신호를 출력하는 화상통화용 카메라; 및
    상기 영상신호를 외부로 출력하는 영상신호 출력부를 포함한 것을 특징으로 하는 이동통신단말기.
  11. 제 10 항에 기재된 이동통신단말기를 거치시킬 수 있는 이동통신단말기의 거치대로서,
    상기 이동통신단말기의 영상신호 출력부로부터 영상신호를 입력받는 영상신호 입력부;
    상기 영상신호에서 통화자 얼굴의 적어도 일부를 필터링하는 영상 필터링부;
    상기 필터링된 통화자 얼굴의 적어도 일부의 이동방향을 검출하는 얼굴 추적부;
    상기 이동방향에 따른 상기 화상통화용 카메라의 회전값을 연산하여 회전신호로서 출력하는 회전신호 생성부; 및
    상기 회전신호에 대응하여 상기 이동통신단말기의 방향을 제어하는 이동통신단말기 구동부를 포함한 것을 특징으로 하는 이동통신단말기 거치대.
  12. 제 11 항에 있어서,
    상기 영상 필터링부에서 필터링되는 상기 통화자 얼굴의 적어도 일부는 상기 통화자 얼굴의 눈, 코, 귀 및 입 중 적어도 어느 하나를 포함하는 것을 특징으로 하는 이동통신단말기 거치대.
  13. 제 11 항에 있어서,
    상기 얼굴 추적부에서 상기 이동 방향의 검출은 상기 필터링된 통화자 얼굴의 적어도 일부의 이동을 순차적인 프레임간의 비교를 통하여 움직임 벡터로서 산출해내는 것을 특징으로 하는 이동통신단말기 거치대.
  14. 제 13 항에 있어서,
    상기 회전신호 생성부에서 생성되는 상기 회전신호는 상기 움직임 벡터를 토대로 상기 이동통신단말기의 방향을 제어하기 위한 각속도 및 각벡터값을 포함하여 구성되는 것을 특징으로 하는 이동통신단말기 거치대.
KR1020070069429A 2007-07-11 2007-07-11 통화자 얼굴 추적 이동통신단말기 거치대 및이동통신단말기 KR100883467B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070069429A KR100883467B1 (ko) 2007-07-11 2007-07-11 통화자 얼굴 추적 이동통신단말기 거치대 및이동통신단말기

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070069429A KR100883467B1 (ko) 2007-07-11 2007-07-11 통화자 얼굴 추적 이동통신단말기 거치대 및이동통신단말기

Publications (2)

Publication Number Publication Date
KR20090006261A KR20090006261A (ko) 2009-01-15
KR100883467B1 true KR100883467B1 (ko) 2009-02-16

Family

ID=40487505

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070069429A KR100883467B1 (ko) 2007-07-11 2007-07-11 통화자 얼굴 추적 이동통신단말기 거치대 및이동통신단말기

Country Status (1)

Country Link
KR (1) KR100883467B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102427469B1 (ko) 2021-02-10 2022-07-29 한남대학교 산학협력단 페이스 포커싱 스마트폰 거치대

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101626828B1 (ko) * 2013-12-26 2016-06-02 금오공과대학교 산학협력단 스마트폰을 이용한 움직임 제어가 가능한 거치대
KR102238530B1 (ko) * 2014-01-27 2021-04-09 엘지전자 주식회사 이동단말기, 이동단말기용 거치대 그리고 이들을 이용한 영상 촬영방법
KR102546714B1 (ko) * 2015-12-15 2023-06-23 삼성전자주식회사 전자장치 및 그 거치대
KR102537543B1 (ko) 2016-03-24 2023-05-26 삼성전자주식회사 지능형 전자 장치 및 그 동작 방법
WO2022092745A1 (ko) * 2020-10-29 2022-05-05 주식회사 원더풀플랫폼 안면 인식 기반 안면 트래킹 방법
WO2022092746A1 (ko) * 2020-10-29 2022-05-05 주식회사 원더풀플랫폼 스마트기기의 디스플레이 영역에 표시된 피사체의 안면 트래킹 방법
KR102514203B1 (ko) * 2021-01-06 2023-03-24 윤희준 안구운동장치
WO2022244920A1 (ko) * 2021-05-18 2022-11-24 주식회사 쓰리아이 휴대 단말기 및 단말기 거치대의 제어 방법
KR102506732B1 (ko) * 2021-09-15 2023-03-06 김영건 지능형 디바이스 거치대

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100413267B1 (ko) 2001-11-14 2004-01-03 에스케이텔레텍주식회사 얼굴의 특정부위 인식을 이용한 카메라의 자동 추적장치를구비하는 이동통신 단말기
KR20060083762A (ko) * 2005-01-18 2006-07-21 주식회사 팬택앤큐리텔 카메라 피사체 자동 추적 시스템과, 이를 탑재한 이동통신단말기 및 카메라 피사체 자동 추적 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100413267B1 (ko) 2001-11-14 2004-01-03 에스케이텔레텍주식회사 얼굴의 특정부위 인식을 이용한 카메라의 자동 추적장치를구비하는 이동통신 단말기
KR20060083762A (ko) * 2005-01-18 2006-07-21 주식회사 팬택앤큐리텔 카메라 피사체 자동 추적 시스템과, 이를 탑재한 이동통신단말기 및 카메라 피사체 자동 추적 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102427469B1 (ko) 2021-02-10 2022-07-29 한남대학교 산학협력단 페이스 포커싱 스마트폰 거치대

Also Published As

Publication number Publication date
KR20090006261A (ko) 2009-01-15

Similar Documents

Publication Publication Date Title
KR100883467B1 (ko) 통화자 얼굴 추적 이동통신단말기 거치대 및이동통신단말기
US9325905B2 (en) Generating a zoomed image
US7697024B2 (en) Method and system of tracking and stabilizing an image transmitted using video telephony
US20070177025A1 (en) Method and apparatus minimizing die area and module size for a dual-camera mobile device
EP1143694A2 (en) Image capture and processing accessory
EP2306706A1 (en) Mobile terminal having photographing control function and photographing control system
JP5880210B2 (ja) 通信装置、撮像装置、撮像システム及びプログラム
WO2011071917A1 (en) Face detection as a metric to stabilize video during video chat session
KR20180119157A (ko) 시간 잡음 감소를 위한 움직임 적응형 스트림 처리 기법
US20090179982A1 (en) Teleconference terminal apparatus and image transmitting method
JP6721084B2 (ja) ズーム制御装置、ズーム制御方法およびプログラム
EP4016987A1 (en) Photographing method and electronic device
CN113726815B (zh) 一种动态调整视频的方法、电子设备、芯片***和存储介质
KR102058860B1 (ko) 카메라의 이미지 처리 장치 및 방법
JP2007049375A (ja) 画像処理装置、カメラ、通信装置およびその画像処理装置を実現するプログラム
CN114285978A (zh) 视频处理方法、视频处理装置和电子设备
KR101276874B1 (ko) 카메라를 갖는 이동통신단말기 및 그 제어방법
KR100697627B1 (ko) 움직임 감지를 이용한 촬영 방법 및 장치
EP4258661A1 (en) Encoding/decoding method, electronic device, communication system, and storage medium
JP2010232828A (ja) 画像処理装置
WO2022004573A1 (ja) 撮像装置、撮像方法、及び撮像プログラム
JP2001160958A (ja) 携帯テレビ電話装置における撮影画像データ補正方法及びその装置
KR100683998B1 (ko) 디지털 이미지 캡쳐 장치 및 방법
JP4293358B2 (ja) 画像通信機能付き携帯電話端末
KR20060029058A (ko) 휴대단말기의 영상이동 표시방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130201

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140203

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150202

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20180326

Year of fee payment: 10