KR20100133538A - 휴대용 단말기에서 모션 인식 장치 및 방법 - Google Patents

휴대용 단말기에서 모션 인식 장치 및 방법 Download PDF

Info

Publication number
KR20100133538A
KR20100133538A KR20090052132A KR20090052132A KR20100133538A KR 20100133538 A KR20100133538 A KR 20100133538A KR 20090052132 A KR20090052132 A KR 20090052132A KR 20090052132 A KR20090052132 A KR 20090052132A KR 20100133538 A KR20100133538 A KR 20100133538A
Authority
KR
South Korea
Prior art keywords
motion recognition
portable terminal
state
motion
sensing information
Prior art date
Application number
KR20090052132A
Other languages
English (en)
Other versions
KR101607476B1 (ko
Inventor
홍현수
신계중
정우진
이재면
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020090052132A priority Critical patent/KR101607476B1/ko
Priority to US12/802,606 priority patent/US9141206B2/en
Priority to CN201010197630.4A priority patent/CN101923391B/zh
Priority to EP20100165601 priority patent/EP2264567A3/en
Publication of KR20100133538A publication Critical patent/KR20100133538A/ko
Priority to US14/862,035 priority patent/US10732718B2/en
Application granted granted Critical
Publication of KR101607476B1 publication Critical patent/KR101607476B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40Circuits
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Image Analysis (AREA)

Abstract

본 발명은 모션 인식 기능을 제공하는 휴대용 단말기에서 모션 인식 성능을 향상시키기 위한 장치 및 방법에 관한 것으로, 특히 상기 휴대용 단말기를 소지한 사용자의 운동 상태에 따라 발생하는 모션 인식 성능 저하를 방지하기 위하여 상기 휴대용 단말기에서 일반적인 상태에서의 모션을 운동 상태에 따라 변형시키거나 모션 인식 프로세스를 변경시켜 모션 인식 성능을 향상시키기 위한 장치 및 방법에 관한 것으로, 운동 상태를 판단하기 위한 센싱 정보를 수신하여 단말기의 운동 상태를 판단하는 단말 상태 확인부와, 상기 단말 상태 확인부에 의해 판단된 휴대용 단말기의 운동 상태에 따라 모션 인식 프로세스를 변경하는 제어부를 포함하는 것을 특징으로 한다.
모션 인식, 운동 상태, 모션 센싱, 모션 감지, 동작 감지

Description

휴대용 단말기에서 모션 인식 장치 및 방법{APPARATUS AND METHOD FOR MOTION DETECTION IN PORTABLE TERMINAL}
본 발명은 모션 인식 기능을 제공하는 휴대용 단말기에서 모션 인식 성능을 향상시키기 위한 장치 및 방법에 관한 것으로, 특히 상기 휴대용 단말기를 소지한 사용자의 운동 상태에 따라 발생하는 모션 인식 성능 저하를 방지하기 위하여 상기 휴대용 단말기에서 일반적인 상태에서의 모션을 운동 상태에 따라 변형시키거나 모션 인식 프로세스를 변경시켜 모션 인식 성능을 향상시키기 위한 장치 및 방법에 관한 것이다.
최근, 휴대용 단말기는 현대인에게 없어서는 안될 필수품으로서 남녀 노소를 막론하고 사용하고 있으며, 서비스 제공자 및 단말기 제조자는 다른 업체와의 차별화를 위해 제품(또는 서비스)을 경쟁적으로 개발하고 있다.
예를 들어, 상기 휴대용 단말기는 폰북(phone book), 게임(game), 단문 메시지(short message), 이메일(e-mail), 모닝콜(morning call), MP 3(MPEG Layer 3), 디지털 카메라 및 무선 인터넷 서비스가 가능한 멀티미디어 기기로 발전하여 다양한 서비스를 제공한다.
상기와 같은 부가 기능과 더불어 최근에 출시되는 휴대용 단말기는 동작 감지기를 이용한 부가 기능을 제공하고 있다.
예를 들어, 상기 동작 감지기를 이용한 부가 기능은 비트 박스(BeatBox), 주사위, 만보계, 전화 다이얼 등과 같이 상기 휴대용 단말기를 사용하는 사용자의 동작을 감지함에 따라 동작하는 모션 인식 기능으로 사용자에게 많은 즐거움을 제공하고 있다.
상기 동작 감지기를 이용한 부가 기능 가운데 주사위 기능을 예를 들어 설명하면, 상기 휴대용 단말기를 사용하는 사용자가 일정 방향으로 단말기를 흔들 경우, 상기 휴대용 단말기의 화면에 출력된 주사위가 회전하여 사용자에게 직접 주사위를 던지는 것과 같은 효과 및 재미를 제공한다.
상기와 같은 동작 감지기를 이용한 부가 기능은 가속도 센서나 자이로 스코프 센서를 이용하여 사용자의 제스쳐를 인식하는 것으로, 상기 휴대용 단말기를 휴대용 사용자가 움직이거나 이동하는 상황에서는 정확하게 제스쳐를 취할 수 없게 된다.
이로 인하여 상기와 같이 이동하는 사용자가 제스쳐를 취할 경우, 상기 휴대용 단말기는 정확한 제스쳐를 인식하지 못하여 모션 인식 기능의 성능이 저하되는 문제점이 있다.
또한, 상기 휴대용 단말기의 사용자가 이동 중에 모션 인식을 위한 제스쳐와 동일한 움직이 발생할 경우, 사용자는 모션 인식 기능을 수행하는 것이 아니지만 상기 휴대용 단말기는 모션 인식을 위한 제스쳐로 인식하여 불 필요한 동작을 수행하는 문제점이 발생한다.
따라서, 상기와 같이 사용자가 이동하는 상태에서도 정확한 제스쳐를 인식할 수 있는 휴대용 단말기의 장치 및 방법이 요구된다.
본 발명은 상술한 바와 같은 문제점을 해결하기 위하여 도출된 것으로서, 본 발명의 목적은 휴대용 단말기의 모션 인식 성능을 향상시키기 위한 장치 및 방법을 제공함에 있다.
본 발명의 다른 목적은 휴대용 단말기에서 운동 상태에 따라 모션 인식 프로세스를 변경하기 위한 장치 및 방법을 제공함에 있다.
본 발명의 또 다른 목적은 휴대용 단말기에서 일반적인 상태에서의 모션을 운동 상태에 따라 변형시키기 위한 장치 및 방법을 제공함에 있다.
상술한 목적들을 달성하기 위한 본 발명의 제 1 견지에 따르면, 휴대용 단말기의 모션 인식 장치는 운동 상태를 판단하기 위한 센싱 정보를 수신하여 단말기의 운동 상태를 판단하는 단말 상태 확인부와, 상기 단말 상태 확인부에 의해 판단된 휴대용 단말기의 운동 상태에 따라 모션 인식 프로세스를 변경하는 제어부를 포함하는 것을 특징으로 한다.
상술한 목적들을 달성하기 위한 본 발명의 제 2 견지에 따르면, 휴대용 단말기의 모션 인식 방법은 운동 상태를 판단하기 위한 센싱 정보를 수신하여 단말기의 운동 상태를 판단하는 과정과, 상기 판단한 단말기의 운동 상태에 따라 모션 인식 프로세스를 변경하는 과정을 포함하는 것을 특징으로 한다.
상술한 바와 같이 본 발명은 휴대용 단말기를 소지한 사용자의 운동 상태에 따라 발생하는 모션 인식 성능 저하를 방지하기 위하여 상기 휴대용 단말기에서 일반적인 상태에서의 모션을 운동 상태에 따라 변형시키거나, 모션 인식 프로세서를 변경함으로써 종래의 휴대용 단말기의 동작 상태에 따라 추가로 발생하는 센싱 정보에 의해 모션 인식의 성능이 저하되는 것을 방지할 수 있다.
이하 본 발명의 바람직한 실시 예를 첨부된 도면의 참조와 함께 상세히 설명한다. 그리고, 본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다.
이하 설명에서는 본 발명의 바람직한 일 실시 예에 따라 휴대용 단말기의 모션 인식 성능을 향상시키기 위하여 상기 휴대용 단말기에서 운동 상태에 따라 모션 인식 프로세스를 변경하기 위한 장치 및 방법에 대하여 설명할 것이다.
여기에서, 상기 모션 인식 프로세스를 변경하는 것은 모션 인식에 필요한 파라미터를 변경하는 과정, 모션 인식 모델을 변경하는 과정, 운동 상태에 따라 기능 제어를 위한 센싱 정보를 변형시키는 과정, 사용자의 모션을 판단하는 기준을 나타내는 파라미터를 운동 상태에 따라 변경하는 과정, 사용자의 운동 상태에 따라 모션 인식 기능을 비활성화하는 과정 등을 포함한다.
도 1은 본 발명에 따라 모션 인식 성능을 향상시키기 위한 휴대용 단말기의 구성을 도시한 블록도이다.
상기 도 1을 참조하면, 상기 휴대용 단말기는 제어부(100), 모션 인식부(102), 단말 상태 확인부(104), 센서부(106), 메모리부(108), 입력부(110), 표시부(112) 및 통신부(114)를 포함하여 구성할 수 있다.
먼저, 상기 휴대용 단말기의 제어부(100)는 상기 휴대용 단말기의 전반적인 동작을 제어한다. 예를 들어, 음성통화 및 데이터 통신을 위한 처리 및, 제어를 수행하고, 통상적인 기능에 더하여 본 발명에 따라, 상기 제어부(100)는 상기 센서부(106)를 통해 수신하는 센싱 정보를 이용하여 상기 휴대용 단말기의 운동 상태를 판단하도록 처리한다. 이후, 상기 제어부(100)는 상기 판단한 휴대용 단말기의 운동 상태에 따라 모션 인식 프로세스를 변경하도록 처리한다.
여기에서, 상기 모션 인식 프로세스를 변경하는 과정은 기능 제어를 위한 모션 인식의 성공율을 높이기 위하여 모션 인식을 위한 파라미터를 변경하는 과정, 모션 인식 모델을 변경하는 과정, 사용자의 모션을 판단하는 기준을 나타내는 파라미터를 운동 상태에 따라 변경하는 과정, 일반적인 상태의 모션 인식 정보를 운동 상태에 따라 변경하는 과정 등을 말하며, 상기 제어부(100)는 상기 단말 상태 확인부(104)로 하여금 상기 휴대용 단말기의 운동 상태를 판단하도록 처리한다.
상기 모션 인식부(102)는 상기 센서부(106)로부터 수신하는 기능 제어를 위 한 센싱 정보를 이용하여 상기 휴대용 단말기의 사용자가 취한 모션을 판단한 후, 상기 판단한 모션에 대한 정보를 상기 제어부(100)로 제공한다.
상기 단말 상태 확인부(104)는 상기 센서부(106)로부터 상기 휴대용 단말기의 운동 상태를 판단하는데 필요한 센싱 정보를 수신하여 상기 휴대용 단말기의 운동 상태를 판단하도록 처리한다. 즉, 상기 단말 상태 확인부(104)는 상기 센싱 정보를 이용하여 상기 휴대용 단말기의 사용자가 걷고 있는지, 빠른 속도로 걷고 있는지, 뛰고 있는지, 매우 빠른 속도로 뛰고 있는지를 판단하도록 처리한다.
상기 센서부(106)는 다수의 센서들(예 : 자이로 센서, 가속도 센서)로 구성되며 상기 센서들로부터 상기 휴대용 단말기의 운동 상태를 판단하는데 필요한 센싱 정보와 기능 제어를 위한 센싱 정보를 수집한다. 이후, 상기 센서부(106)는 상기 휴대용 단말기의 운동 상태를 판단하는데 필요한 센싱 정보 및 기능 제어를 위한 센싱 정보를 상기 단말 상태 확인부(104)로 제공하거나 또는 상기 기능 제어를 위한 센싱 정보는 상기 모션 인식부(102)로 바로 제공하여 모션 인식 과정을 수행하도록 처리한다.
상기 휴대용 단말기의 메모리부(108)는 롬(ROM ; Read Only Memory), 램(RAM ; Random Access Memory), 플래쉬롬(flash ROM)으로 구성된다. 상기 롬은 상기 제어부(100), 모션 인식부(102), 단말 상태 확인부(104)의 처리 및 제어를 위한 프로그램의 마이크로코드와 각종 참조 데이터를 저장한다.
상기 램은 상기 제어부(100)의 워킹 메모리(working memory)로, 각종 프로그램 수행 중에 발생하는 일시적인 데이터를 저장한다. 또한, 상기 플래쉬롬은 전 화번호부(phone book), 발신메시지, 수신메시지 및 사용자의 터치 입력 지점의 정보와 같은 갱신 가능한 각종 보관용 데이터를 저장한다.
상기 입력부(110)는 0 ~ 9의 숫자키 버튼들과, 메뉴버튼(menu), 취소버튼(지움), 확인버튼, 통화버튼(TALK), 종료버튼(END), 인터넷접속 버튼, 네비게이션 키(또는 방향키) 버튼들 및 문자 입력 키 등 다수의 기능키들을 구비하여 사용자가 누르는 키에 대응하는 키 입력 데이터(예 ; 모션 인식 기능 동작)를 상기 제어부(100)로 제공한다.
상기 표시부(112)는 상기 휴대용 단말기의 동작 중에 발생하는 상태 정보, 제한된 숫자의 문자들, 다량의 동영상 및 정지영상 등을 디스플레이한다. 상기 표시부(112)는 컬러 액정 디스플레이 장치(LCD ; Liquid Crystal Display)를 사용할 수 있으며 상기 표시부(112)는 터치 입력 장치를 구비하여 터치 입력 방식의 휴대용 단말기에 적용할 경우 입력 장치로 사용할 수 있다.
상기 통신부(114)는 안테나(미도시)를 통해 입출력되는 데이터의 무선신호를 송수신 처리하는 기능을 수행한다. 예를 들어, 송신인 경우, 송신할 데이터를 채널 코딩(Channel coding) 및 확산(Spreading)한 후, RF처리하여 송신하는 기능을 수행하고, 수신인 경우, 수신된 RF신호를 기저대역신호로 변환하고 상기 기저대역신호를 역 확산(De-spreading) 및 채널 복호(Channel decoding)하여 데이터를 복원하는 기능을 수행한다.
상기 모션 인식부(102) 및 단말 상태 확인부(104)의 역할은 상기 휴대용 단말기의 제어부(100)에 의해 수행할 수 있으나, 본 발명에서 이를 별도로 구성하여 도시한 것은 설명의 편의를 위한 예시적인 구성이지 결코 본 발명의 범위를 제한하자는 것이 아니며, 당업자라면 본 발명의 범위 내에서 다양한 변형 구성이 가능하다는 것을 알 수 있을 것이다. 예를 들어, 이들 모두를 상기 제어부(100)에서 처리하도록 구성할 수도 있다.
도 2는 본 발명의 바람직한 일 실시 예에 따른 휴대용 단말기에서 단말기의 운동 상태에 따른 모션 인식 동작 과정을 도시한 도면이다.
도 2(a)는 본 발명의 바람직한 일 실시 예에 따른 휴대용 단말기에서 운동 상태에 따라 기능 제어를 위한 센싱 정보를 변형시키는 과정을 도시한 도면이다.
상기 도 2(a)를 참조하면, 상기 휴대용 단말기는 센서부(200)를 통해 상기 휴대용 단말기의 운동 상태를 판단하는데 필요한 센싱 정보(A)(202) 및 기능 제어를 위한 센싱 정보(X)(204)를 수집하도록 처리한다.
상기와 같은 센싱 정보를 수집한 센서부(200)는 상기 수신한 센싱 정보(202), (204)를 단말 상태 확인부(210)로 제공하도록 처리한다.
이에 따라, 상기 단말 상태 확인부(210)는 상기 휴대용 단말기의 운동 상태를 판단하는데 필요한 센싱 정보를 이용하여 도시한 바와 같이 A1, A2,…,AN과 같은 휴대용 단말기의 운동 상태(206)를 판단한다. 여기에서, 상기 휴대용 단말기의 운동 상태는 상기 휴대용 단말기의 사용자가 정지한 상태, 걷는 상태, 빠르게 걷는 상태, 뛰는 상태, 빠르게 뛰는 상태 등이 될 수 있다.
또한, 상기 단말 상태 확인부(210)는 상기 센서부(200)로부터 수신한 기능 제어를 위한 센싱 정보를 상기 판단한 운동 상태에 해당하는 신호인 X1, X2,…,XN로 변형(208)하여 상기 모션 인식부(220)로 제공한다.
예를 들어, 상기 단말 상태 확인부(210)가 A1 상태를 확인한 상태에서 X 신호를 수신할 경우, 수신한 X 신호를 X1 신호로 변형하도록 처리하는 것이다.
이로 인하여 상기 모션 인식부(220)는 상기 휴대용 단말기의 운동 상태에 따라 추가되는 센싱 신호로 정확한 모션 인식을 수행할 수 없는 기존의 문제점을 해결할 수 있다.
도 2(b)는 본 발명의 바람직한 일 실시 예에 따른 휴대용 단말기에서 운동 상태에 따라 모션 인식 모델을 변경시키는 과정을 도시한 도면이다.
상기 도 2(b)를 참조하면, 상기 휴대용 단말기는 센서부(240)를 통해 상기 휴대용 단말기의 운동 상태를 판단하는데 필요한 센싱 정보(A)(242) 및 기능 제어를 위한 센싱 정보(X)(244)를 수집하도록 처리한다.
상기와 같은 센싱 정보를 수집한 센서부(240)는 상기 수신한 센싱 정보(242), (244)를 단말 상태 확인부(250)로 제공하도록 처리한다.
이에 따라, 상기 단말 상태 확인부(250)는 앞서 설명한 바와 같이 상기 휴대용 단말기의 운동 상태를 판단하는데 필요한 센싱 정보(242)를 이용하여 도시한 바와 같이 A1, A2,…,AN과 같은 휴대용 단말기의 상태(248)를 판단한다.
또한, 상기 단말 상태 확인부(250)는 상기 센서부(240)로부터 제공받은 기능 제어를 위한 센싱 정보(X)(244)를 그대로 모션 인식부(260)로 제공(246)한다.
상기 모션 인식부(260)는 상기 단말 상태 확인부(250)에 의해 확인된 상기 휴대용 단말기의 운동 상태에 따라 모션 인식에 필요한 모델(249)을 변경하여 모션 인식을 수행하도록 한다.
예를 들어, 상기 단말 상태 확인부(250)에 의해 상기 휴대용 단말기의 운동 상태가 뛰는 상태임을 확인될 경우, 상기 모션 인식부는 뛰는 상태에서 발생하는 추가적인 센싱 정보로 정확한 모션 인식을 수행할 수 있는 모션 인식 모델로 변경하도록 처리한다.
뿐만 아니라, 본 발명에 따른 휴대용 단말기는 사용자의 모션에 의해 발생한 기능 제어를 위한 센싱 정보를 판단하는 기준이 되는 파라미터를 운동 상태에 따라 변경하여 모션 인식 성능을 향상시킬 수 있다. 예를 들어, 상기 휴대용 단말기가 S라는 파라미터를 통해 기능 제어를 위한 센싱 정보를 판단한다고 가정하여 설명하면, 상기 휴대용 단말기의 사용자가 일반적인 상태에서의 모션을 취할 경우 모션 판단에 기준이 되는 S라는 파라미터로 정확한 모션 인식 즉, 센싱 정보가 기능 제어를 위한 센싱 정보라고 판단할 수 있으나, 상기 휴대용 단말기의 사용자가 빠르게 뛰는 상황에서 센싱 정보를 발생시킬 경우, 상기 휴대용 단말기는 S라는 파라미터로 상기 센싱 정보가 기능 제어를 위한 센싱 정보인지를 판단할 수 없게 된다.
이에 따라, 상기 휴대용 단말기는 빠르게 뛰는 상황에서 발생한 센싱 정보가 기능 제어를 위한 센싱 정보인지 정확하게 판단하기 위하여 모션 인식에 기준이 되는 S라는 파라미터를 S1으로 변경하여 상기 센싱 정보가 기능 제어를 위한 센싱 정보인지 판단할 수 있다.
이상은 본 발명의 바람직한 일 실시 예에 따라 휴대용 단말기의 모션 인식 성능을 향상시키기 위하여 상기 휴대용 단말기에서 운동 상태에 따라 모션 인식 프로세스를 변경하기 위한 장치에 대하여 설명하였고, 이하 설명에서는 본 발명의 바람직한 일 실시 예에 따른 상기 장치를 이용하여 일반적인 상태에서의 모션을 운동 상태에 따라 변형시킴으로써, 휴대용 단말기의 모션 인식 성능을 향상시키기 위한 방법에 대하여 설명할 것이다.
도 3은 본 발명에 따른 휴대용 단말기에서 모션 인식 기능을 성능을 향상시키기 위한 과정을 도시한 흐름도이다.
상기 도 3을 참조하면, 상기 휴대용 단말기는 먼저 301단계에서 운동 상태를 판단하기 위한 센싱 정보를 수신한 후, 303단계로 진행하여 상기 휴대용 단말기를 소지한 사용자의 운동 상태를 판단하는 과정을 수행한다. 여기에서, 상기 휴대용 단말기는 가속도 정보, 기울기 정보와 같은 운동 상태를 판단하기 위한 센싱 정보를 수신하여 상기 사용자가 걷고 있는지, 빠른 속도로 걷고 있는지, 뛰고 있는지, 매우 빠른 속도로 뛰고 있는지를 판단하는 것이다.
이후, 상기 휴대용 단말기는 305단계로 진행하여 운동 상태에 따른 모션 인식 프로세스를 변경하도록 처리한다.
여기에서, 상기 모션 인식 프로세스를 변경하는 과정은 기능 제어를 위한 모션 인식의 성공율을 높이기 위하여 모션 인식을 위한 파라미터를 변경하는 과정, 모션 인식 모델를 변경하는 과정, 일반적인 상태의 모션 인식 동작을 운동 상태에 따라 변경하는 과정, 사용자의 모션을 판단하는 기준을 나타내는 파라미터를 운동 상태에 따라 변경하는 과정을 말한다.
즉, 상기 휴대용 단말기는 사용자가 빠르게 뛰고 있는 상태에서 음악 재생을 위한 모션을 취한다고 가정할 경우, 빠르게 뛰는 상태에서 정확한 모션을 취하는 것이 불가능함에 따라 상기 휴대용 단말기는 모션 인식 동작의 성능을 높이기 위하여 모션 인식에 필요한 기울기 정보, 가속도 정보에 가중치를 부가하여 모션 인식 동작의 성능을 향상시킨다.
또한, 상기 휴대용 단말기는 뛰는 상황에서 음악 재생을 위한 모션을 훈련하여 일반 상태의 음악 재생을 위한 모션을 뛰는 상황에 맞도록 변경하도록 처리한다.
이후, 상기 휴대용 단말기는 307단계로 진행하여 상기 305단계에서 변경된 모션 인식 프로세스를 이용하여 모션 인식 과정을 수행한다.
즉, 상기 휴대용 단말기는 운동 상태에 따라 모션을 인식하는데 필요한 파라미터를 변경하거나 운동 상태에 따라 모션 인식 모델을 변경하거나, 일반 상태의 모션 인식을 위한 정보를 운동 상태에 따라 변형시킴으로써 모션 인식 성능을 향상시킬 수 있다.
이후, 상기 휴대용 단말기는 본 알고리즘을 종료한다.
상기 도 3에서는 본 발명에 따라 모션 인식 성능을 향상시키기 위하여 상기 휴대용 단말기의 상태에 따라 모션 인식을 위한 모션 인식 프로세스를 변경하였으나, 본 발명은 상기 휴대용 단말기의 상태가 모션 인식 성능을 저하시키는 상태일 경우, 모션 인식 기능의 동작을 비활성화시켜 불필요한 오동작이 발생하는 것을 방지할 수 있다.
도 4는 본 발명의 바람직한 일 실시 예에 따른 휴대용 단말기에서 모션 인식 기능을 성능을 향상시키기 위한 과정을 도시한 흐름도이다.
상기 도 4를 참조하면, 상기 휴대용 단말기는 본 발명의 바람직한 일 실시 예에 따라 모션 인식 성능을 향상시키기 위하여 수신하는 센싱 정보를 운동 상태에 따라 변경하고, 변경한 정보를 이용하여 모션을 인식하기 위한 방법에 대하여 설명할 것이다.
상기와 같은 휴대용 단말기는 먼저 401단계에서 운동 상태를 판단하는 센싱 정보를 수신한 후, 403단계로 진행하여 단말기의 운동 상태를 판단한다. 즉, 상기 휴대용 단말기는 상기 휴대용 단말기의 사용자가 일반적인 속도로 이동하는지, 빠른 걸음으로 이동하는지, 뛰면서 이동하는지 등을 판단하는 과정을 수행한다.
이후, 상기 휴대용 단말기는 405단계로 진행하여 기능 제어를 위한 센싱 정보를 수신하는지 확인한다. 여기에서, 상기 기능 제어를 위한 센싱 정보는 모션 인식 기능으로 상기 휴대용 단말기를 제어하기 위한 정보로 상기 휴대용 단말기의 동작을 제어하기 위한 기정의된 휴대용 단말기의 모션 정보를 말한다.
만일, 상기 405단계에서 기능 제어를 위한 센싱 정보를 수신하지 않을 경우, 상기 휴대용 단말기는 상기 401단계로 진행하여 상기 휴대용 단말기의 상태를 판단하는 과정을 수행한다.
한편, 상기 405단계에서 기능 제어를 위한 센싱 정보를 수신할 경우, 상기 휴대용 단말기는 407단계로 진행하여 일반적인 상태에서 기능 제어를 위한 센싱 정보를 수신하였는지 확인한다. 즉, 상기 407단계는 상기 기능 제어를 위한 센싱 정보를 수신한 시기의 휴대용 단말기의 운동 상태를 확인하는 것으로, 상기 휴대용 단말기는 정상적인 모션 인식을 수행할 수 있는 일반적인 상태가 아닌 뛰는 상태, 걷는 상태일 경우, 모션 인식 성능을 향상시키기 위하여 수신하는 기능 제어를 위한 센싱 정보를 운동 상태에 따라 변경하고, 변경한 센싱 정보를 이용하여 모션을 인식하도록 한다.
만일, 상기 407단계에서 일반적인 상태 예를 들어, 사용자가 정지한 상태에서 기능 제어를 위한 센싱 정보를 수신할 경우, 상기 휴대용 단말기는 413단계로 진행하여 상기 수신한 기능 제어를 위한 센싱 정보를 인식하여 해당 기능을 제어하도록 처리한다.
한편, 상기 407단계에서 일반적인 상태가 아닌 상태 예를 들어, 사용자가 뛰는 상태에서 기능 제어를 위한 센싱 정보를 수신할 경우, 상기 휴대용 단말기는 409단계로 진행하여 기능 제어를 위한 센싱 정보를 상기 휴대용 단말기의 운동 상태에 해당하는 정보로 변형시키도록 처리한다.
이때, 상기 휴대용 단말기는 상기 휴대용 단말기의 일반적인 상태의 기능 제어를 위한 모션을 상태별 변형시킬 모션을 미리 학습을 통해 저장하고 있다.
또한, 상기 휴대용 단말기는 사용자가 뛰는 상태로 인한 센싱 정보가 기능 제어를 위한 센싱 정보로 사용되어 불필요한 모션 인식 기능이 수행되는 것을 방지 하기 위하여 모션 인식 기능을 비활성화하도록 처리할 수도 있다.
이후, 상기 휴대용 단말기는 411단계로 진행하여 상기 변형한 센싱 정보를 이용하여 상기 기능 제어를 위한 센싱 정보에 해당 기능을 제어하도록 처리한다,
이후, 상기 휴대용 단말기는 본 알고리즘을 종료한다.
한편 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
도 1은 본 발명에 따라 모션 인식 성능을 향상시키기 위한 휴대용 단말기의 구성을 도시한 블록도,
도 2(a)는 본 발명의 바람직한 일 실시 예에 따른 휴대용 단말기에서 운동 상태에 따라 기능 제어를 위한 센싱 정보를 변형시키는 과정을 도시한 도면,
도 2(b)는 본 발명의 바람직한 일 실시 예에 따른 휴대용 단말기에서 운동 상태에 따라 모션 인식 모델을 변경시키는 과정을 도시한 도면,
도 3은 본 발명에 따른 휴대용 단말기에서 모션 인식 기능을 성능을 향상시키기 위한 과정을 도시한 흐름도 및,
도 4는 본 발명의 바람직한 일 실시 예에 따른 휴대용 단말기에서 모션 인식 기능을 성능을 향상시키기 위한 과정을 도시한 흐름도.

Claims (8)

  1. 휴대용 단말기의 모션 인식 장치에 있어서,
    운동 상태를 판단하기 위한 센싱 정보를 수신하여 단말기의 운동 상태를 판단하는 단말 상태 확인부와,
    상기 단말 상태 확인부에 의해 판단된 휴대용 단말기의 운동 상태에 따라 모션 인식 프로세스를 변경하는 제어부를 포함하는 것을 특징으로 하는 모션 인식 장치.
  2. 제 1항에 있어서,
    상기 휴대용 단말기의 모션 인식 장치는,
    상기 변경된 모션 인식 프로세스를 이용하여 모션 인식을 수행하는 모션 인식부를 더 포함하는 것을 특징으로 하는 장치.
  3. 제 1항에 있어서,
    상기 제어부는,
    상기 단말 상태 확인부로 하여금 모션 인식에 오류가 발생하는 단말기의 운동 상태를 확인할 경우, 모션 인식 기능을 비 활성화 시키는 것을 특징으로 하는 장치.
  4. 제 1항에 있어서,
    상기 모션 인식 프로세스는,
    모션 인식에 필요한 파라미터를 변경하는 과정, 모션 인식 모델을 변경하는 과정, 운동 상태에 따라 기능 제어를 위한 센싱 정보를 변형시키는 과정 가운데 적어도 어느 한 가지를 포함하는 것을 특징으로 하는 장치.
  5. 휴대용 단말기의 모션 인식 방법에 있어서,
    운동 상태를 판단하기 위한 센싱 정보를 수신하여 단말기의 운동 상태를 판단하는 과정과,
    상기 판단한 단말기의 운동 상태에 따라 모션 인식 프로세스를 변경하는 과정을 포함하는 것을 특징으로 하는 방법.
  6. 제 5항에 있어서,
    상기 휴대용 단말기의 모션 인식 방법은,
    상기 변경된 모션 인식 프로세스를 이용하여 모션 인식을 수행하는 과정을 더 포함하는 것을 특징으로 하는 방법.
  7. 제 5항에 있어서,
    상기 휴대용 단말기의 모션 인식 방법은,
    상기 운동 상태를 판단하기 위한 센싱 정보를 수신하여 모션 인식에 오류가 발생하는 단말기의 운동 상태를 확인할 경우, 모션 인식 기능을 비 활성화 시키는 과정을 더 포함하는 것을 특징으로 하는 방법.
  8. 제 5항에 있어서,
    상기 모션 인식 프로세스는,
    모션 인식에 필요한 파라미터를 변경하는 과정, 모션 인식 모델을 변경하는 과정, 운동 상태에 따라 기능 제어를 위한 센싱 정보를 변형시키는 과정 가운데 적어도 어느 한 가지를 포함하는 것을 특징으로 하는 방법.
KR1020090052132A 2009-06-12 2009-06-12 휴대용 단말기에서 모션 인식 장치 및 방법 KR101607476B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020090052132A KR101607476B1 (ko) 2009-06-12 2009-06-12 휴대용 단말기에서 모션 인식 장치 및 방법
US12/802,606 US9141206B2 (en) 2009-06-12 2010-06-10 Apparatus and method for motion detection in portable terminal
CN201010197630.4A CN101923391B (zh) 2009-06-12 2010-06-11 在便携终端中用于运动检测的装置和方法
EP20100165601 EP2264567A3 (en) 2009-06-12 2010-06-11 Apparatus and method for motion detection in portable terminal
US14/862,035 US10732718B2 (en) 2009-06-12 2015-09-22 Apparatus and method for motion detection in portable terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090052132A KR101607476B1 (ko) 2009-06-12 2009-06-12 휴대용 단말기에서 모션 인식 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20100133538A true KR20100133538A (ko) 2010-12-22
KR101607476B1 KR101607476B1 (ko) 2016-03-31

Family

ID=42359483

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090052132A KR101607476B1 (ko) 2009-06-12 2009-06-12 휴대용 단말기에서 모션 인식 장치 및 방법

Country Status (4)

Country Link
US (2) US9141206B2 (ko)
EP (1) EP2264567A3 (ko)
KR (1) KR101607476B1 (ko)
CN (1) CN101923391B (ko)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120005124A (ko) * 2010-07-08 2012-01-16 삼성전자주식회사 휴대용 단말기에서 움직임에 따른 동작을 수행하기 위한 장치 및 방법
KR102084695B1 (ko) * 2011-09-01 2020-03-04 삼성전자주식회사 움직임에 기반하여 화면 잠금 해제를 실행하는 휴대용 단말기 및 그 잠금해제 방법
KR101982820B1 (ko) 2012-09-13 2019-05-27 삼성전자주식회사 센서를 제어하는 방법 및 그 단말기
WO2014119894A1 (en) * 2013-01-29 2014-08-07 Samsung Electronics Co., Ltd. Method of performing function of device and device for performing the method
CN104978014B (zh) * 2014-04-11 2018-05-11 维沃移动通信有限公司 一种快速调用应用程序或***功能的方法及其移动终端
JP6496645B2 (ja) * 2015-09-28 2019-04-03 京セラ株式会社 携帯電子機器
US11209908B2 (en) * 2017-01-12 2021-12-28 Sony Corporation Information processing apparatus and information processing method
US10172090B1 (en) * 2017-10-26 2019-01-01 Invensense, Inc. Sensor headroom control circuit
EP3618015A1 (en) * 2018-08-27 2020-03-04 Continental Automotive GmbH Electronic key and method for operating an electronic key
KR102622564B1 (ko) 2019-02-19 2024-01-09 삼성전자 주식회사 전자 장치 및 전자 장치에서 디스플레이 동작 제어 방법

Family Cites Families (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2552427B2 (ja) * 1993-12-28 1996-11-13 コナミ株式会社 テレビ遊戯システム
GB2289756B (en) * 1994-05-26 1998-11-11 Alps Electric Co Ltd Space coordinates detecting device and input apparatus using same
US6369794B1 (en) * 1998-09-09 2002-04-09 Matsushita Electric Industrial Co., Ltd. Operation indication outputting device for giving operation indication according to type of user's action
US6201554B1 (en) * 1999-01-12 2001-03-13 Ericsson Inc. Device control apparatus for hand-held data processing device
US6375572B1 (en) * 1999-10-04 2002-04-23 Nintendo Co., Ltd. Portable game apparatus with acceleration sensor and information storage medium storing a game progam
JP3847058B2 (ja) * 1999-10-04 2006-11-15 任天堂株式会社 ゲームシステム及びそれに用いられるゲーム情報記憶媒体
US7688306B2 (en) * 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US6798429B2 (en) * 2001-03-29 2004-09-28 Intel Corporation Intuitive mobile device interface to virtual spaces
US6834249B2 (en) * 2001-03-29 2004-12-21 Arraycomm, Inc. Method and apparatus for controlling a computing system
US6831632B2 (en) * 2001-04-09 2004-12-14 I. C. + Technologies Ltd. Apparatus and methods for hand motion tracking and handwriting recognition
US20050222802A1 (en) * 2002-08-27 2005-10-06 Yasuhiro Tamura Mobile terminal apparatus
KR100552688B1 (ko) * 2003-09-08 2006-02-20 삼성전자주식회사 관성 항법 시스템의 자세 보상 방법 및 장치, 이를 이용한관성 항법 시스템의 위치 계산 방법 및 장치
KR100543703B1 (ko) * 2003-09-08 2006-01-20 삼성전자주식회사 포인팅 장치 및 그 방법
US7489299B2 (en) * 2003-10-23 2009-02-10 Hillcrest Laboratories, Inc. User interface devices and methods employing accelerometers
US7173604B2 (en) * 2004-03-23 2007-02-06 Fujitsu Limited Gesture identification of controlled devices
US20050212760A1 (en) * 2004-03-23 2005-09-29 Marvit David L Gesture based user interface supporting preexisting symbols
US7301529B2 (en) * 2004-03-23 2007-11-27 Fujitsu Limited Context dependent gesture response
DE602004009755D1 (de) 2004-04-22 2007-12-13 Saab Ab Reflektor
ES2664472T3 (es) * 2004-04-30 2018-04-19 Idhl Holdings, Inc. Dispositivos de señalización de espacio libre con compensación de inclinación y facilidad de uso mejorada
US7236156B2 (en) * 2004-04-30 2007-06-26 Hillcrest Laboratories, Inc. Methods and devices for identifying users based on tremor
EP1759529A4 (en) * 2004-04-30 2009-11-11 Hillcrest Lab Inc SPACE SHOW AND METHOD
EP1743322A4 (en) * 2004-04-30 2008-04-30 Hillcrest Lab Inc METHOD AND DEVICES FOR REMOVING UNINTENDED MOVEMENTS IN FREE-AIR INDICATORS
FI119746B (fi) * 2004-06-24 2009-02-27 Nokia Corp Elektronisen laitteen ohjaaminen
US7292151B2 (en) * 2004-07-29 2007-11-06 Kevin Ferguson Human movement measurement system
US7231825B2 (en) * 2004-11-08 2007-06-19 Sauer-Danfoss Inc. Accelerometer based tilt sensor and method for using same
US7430439B2 (en) * 2005-01-31 2008-09-30 Research In Motion Limited User hand detection for wireless devices
KR100571849B1 (ko) * 2005-02-04 2006-04-17 삼성전자주식회사 보행자의 보행 횟수 계수방법 및 장치
EP1851606A1 (en) * 2005-02-24 2007-11-07 Nokia Corporation Motion-input device for a computing terminal and method of its operation
CN101133385B (zh) 2005-03-04 2014-05-07 苹果公司 手持电子设备、手持设备及其操作方法
KR100554484B1 (ko) 2005-05-12 2006-03-03 삼성전자주식회사 동작 인식이 가능한 휴대용 단말기 및 동작 인식 방법
KR100537279B1 (ko) * 2005-05-12 2005-12-16 삼성전자주식회사 모션 인지 가능 휴대용 단말기 및 그의 모션 인지 방법
KR100666048B1 (ko) * 2005-05-20 2007-01-10 삼성전자주식회사 기준 기울기를 측정하는 휴대용 단말기 및 이를 이용한기준 기울기의 측정 방법
US7519537B2 (en) * 2005-07-19 2009-04-14 Outland Research, Llc Method and apparatus for a verbo-manual gesture interface
JP3986535B2 (ja) * 2005-12-26 2007-10-03 株式会社コナミデジタルエンタテインメント ビデオゲームプログラム、ビデオゲーム装置及びビデオゲーム制御方法
JP4330593B2 (ja) * 2006-03-13 2009-09-16 任天堂株式会社 ゲーム装置およびゲームプログラム
US7852315B2 (en) * 2006-04-07 2010-12-14 Microsoft Corporation Camera and acceleration based interface for presentations
US7561960B2 (en) * 2006-04-20 2009-07-14 Honeywell International Inc. Motion classification methods for personal navigation
US20070259685A1 (en) * 2006-05-08 2007-11-08 Goran Engblom Electronic equipment with keylock function using motion and method
US20070268246A1 (en) * 2006-05-17 2007-11-22 Edward Craig Hyatt Electronic equipment with screen pan and zoom functions using motion
US7608050B2 (en) * 2006-05-25 2009-10-27 Telefonaktiebolaget Lm Ericsson (Publ) Motion detector for a mobile device
US7702282B2 (en) * 2006-07-13 2010-04-20 Sony Ericsoon Mobile Communications Ab Conveying commands to a mobile terminal through body actions
US8924248B2 (en) * 2006-09-26 2014-12-30 Fitbit, Inc. System and method for activating a device based on a record of physical activity
US8082122B2 (en) * 2006-12-12 2011-12-20 Samsung Electronics Co., Ltd. Mobile device having a motion detector
US8250921B2 (en) * 2007-07-06 2012-08-28 Invensense, Inc. Integrated motion processing unit (MPU) with MEMS inertial sensing and embedded digital electronics
US7934423B2 (en) * 2007-12-10 2011-05-03 Invensense, Inc. Vertically integrated 3-axis MEMS angular accelerometer with integrated electronics
US8952832B2 (en) * 2008-01-18 2015-02-10 Invensense, Inc. Interfacing application programs and motion sensors of a device
JP5127242B2 (ja) * 2007-01-19 2013-01-23 任天堂株式会社 加速度データ処理プログラムおよびゲームプログラム
US20080214160A1 (en) * 2007-03-01 2008-09-04 Sony Ericsson Mobile Communications Ab Motion-controlled audio output
JP4916390B2 (ja) * 2007-06-20 2012-04-11 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法
JP2010034904A (ja) * 2008-07-29 2010-02-12 Kyocera Corp 携帯端末装置

Also Published As

Publication number Publication date
EP2264567A3 (en) 2014-06-18
KR101607476B1 (ko) 2016-03-31
EP2264567A2 (en) 2010-12-22
US9141206B2 (en) 2015-09-22
CN101923391B (zh) 2016-12-07
US20100315253A1 (en) 2010-12-16
CN101923391A (zh) 2010-12-22
US20160085314A1 (en) 2016-03-24
US10732718B2 (en) 2020-08-04

Similar Documents

Publication Publication Date Title
KR20100133538A (ko) 휴대용 단말기에서 모션 인식 장치 및 방법
US10664078B2 (en) Triggering method and wireless handheld device
US7735025B2 (en) Portable terminal having motion-recognition capability and motion recognition method therefor
KR20110101585A (ko) 휴대용 단말기의 화면 전환 장치 및 방법
US20190230210A1 (en) Context recognition in mobile devices
KR100554484B1 (ko) 동작 인식이 가능한 휴대용 단말기 및 동작 인식 방법
US8131319B2 (en) Active display readability enhancement for mobile devices depending on movement
KR101572847B1 (ko) 휴대용 단말기의 동작 감지 장치 및 방법
US20060256082A1 (en) Method of providing motion recognition information in portable terminal
CN109542279B (zh) 一种终端设备控制方法及终端设备
CN111475072B (zh) 一种支付信息显示方法及电子设备
CN106445596B (zh) 一种设置项的管理方法及装置
CN111328119B (zh) 一种语音业务处理方法及电子设备
CN104936039B (zh) 图像处理方法及装置
KR20110088727A (ko) 휴대용 단말기에서 출력 이미지를 회전시키기 위한 장치 및 방법
US20070172953A1 (en) Mobile telecommunication terminal having electrical compass module and playing mobile game method using electrical compass module thereof
US9454300B2 (en) Device, control method, and storage medium storing program
US20070042823A1 (en) Mobile telecommunication terminal having electrical compass module and playing network type mobile game method using electrical compass module thereof
KR101622579B1 (ko) 휴대용 단말기에서 위치 정보 서비스를 제공하기 위한 장치 및 방법
CN111601298B (zh) Sim卡控制方法及电子设备
CN111427644B (zh) 一种目标行为识别方法及电子设备
CN110166621B (zh) 一种文字处理方法及终端设备
CN109639880B (zh) 一种天气信息显示方法及终端设备
US20120230508A1 (en) Earphone, switching system and switching method
KR20080077757A (ko) 휴대용 단말기의 데이터 입력 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190227

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20200227

Year of fee payment: 5