KR102352172B1 - 전자 장치들의 연동 방법 및 장치 - Google Patents

전자 장치들의 연동 방법 및 장치 Download PDF

Info

Publication number
KR102352172B1
KR102352172B1 KR1020150049767A KR20150049767A KR102352172B1 KR 102352172 B1 KR102352172 B1 KR 102352172B1 KR 1020150049767 A KR1020150049767 A KR 1020150049767A KR 20150049767 A KR20150049767 A KR 20150049767A KR 102352172 B1 KR102352172 B1 KR 102352172B1
Authority
KR
South Korea
Prior art keywords
function
electronic device
user interface
wearable device
event
Prior art date
Application number
KR1020150049767A
Other languages
English (en)
Other versions
KR20160120551A (ko
Inventor
김주섭
양철형
이지우
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020150049767A priority Critical patent/KR102352172B1/ko
Priority to US15/070,297 priority patent/US9843662B2/en
Publication of KR20160120551A publication Critical patent/KR20160120551A/ko
Priority to US15/806,475 priority patent/US10057401B2/en
Priority to US16/013,052 priority patent/US10205816B2/en
Priority to US16/214,242 priority patent/US10958776B2/en
Application granted granted Critical
Publication of KR102352172B1 publication Critical patent/KR102352172B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • GPHYSICS
    • G04HOROLOGY
    • G04GELECTRONIC TIME-PIECES
    • G04G21/00Input or output devices integrated in time-pieces
    • G04G21/04Input or output devices integrated in time-pieces using radio waves
    • GPHYSICS
    • G04HOROLOGY
    • G04GELECTRONIC TIME-PIECES
    • G04G9/00Visual time or date indication means
    • G04G9/02Visual time or date indication means by selecting desired characters out of a number of characters or by selecting indicating elements the position of which represent the time, e.g. by using multiplexing techniques
    • G04G9/06Visual time or date indication means by selecting desired characters out of a number of characters or by selecting indicating elements the position of which represent the time, e.g. by using multiplexing techniques using light valves, e.g. liquid crystals
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1698Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a sending/receiving arrangement to establish a cordless communication link, e.g. radio or infrared link, integrated cellular phone
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • H04L29/10
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/60Subscription-based services using application servers or record carriers, e.g. SIM application toolkits

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Chemical & Material Sciences (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

본 발명은 전자 장치, 디바이스 그리고 웨어러블 디바이스(wearable device)의 연동에 의한 기능 수행 방법, 장치 및 그 시스템에 관한 것이다. 본 발명의 다양한 실시 예에 따르면, 전자 장치의 동작 방법은, 웨어러블 디바이스와 연결된 상태에서, 외부 디바이스의 연결에 의한 이벤트를 감지하는 동작, 상기 이벤트에 관련한 상기 외부 디바이스의 종류를 판단하는 동작, 상기 외부 디바이스의 종류에 매칭되는 상기 웨어러블 디바이스의 기능을 판단하는 동작, 상기 기능을 실행하기 위한 실행 명령을 상기 웨어러블 디바이스에 전송하는 동작을 포함할 수 있다. 다양한 실시 예들이 가능하다.

Description

전자 장치들의 연동 방법 및 장치{METHOD AND APPARATUS FOR INTERWORKING BETWEEN ELECTRONIC DEVICES}
본 발명의 다양한 실시 예들은 전자 장치, 디바이스 그리고 웨어러블 디바이스(wearable device)의 연동에 의한 기능 수행 방법 및 그 장치에 관한 것이다.
전자 장치의 기술이 발전함에 따라 사용자에게 제공하는 서비스 또한 빠른 속도로, 다양한 방면으로 증가하고 있다. 예를 들어, 전자 장치는 전화 기능뿐만 아니라, 웹 페이지 브라우징, 콘텐츠 재생, SNS(social networking service) 활동, 이미지 촬영, 동영상 촬영 등 사용자가 전자 장치로 수행 할 수 있는 다양한 기능을 지원하고 있다.
또한 정보 통신 기술의 발달로 인하여, PC(personal computer)나 스마트 폰(smart phone)을 넘어, 일상적인 사물(things)까지도 모두 정보 통신 단말기로 이용되고 있다. 특히, 몸에 걸치거나 입는 형태의 정보 단말기인 웨어러블 디바이스(wearable device)가 최근 큰 주목을 받고 있다. 웨어러블 디바이스는 초기의 특수 목적용으로 개발되거나 한정된 시장만을 대상으로 했던 반면, 이제는 보다 일상적인 용도로 보통 소비자가 쓸 수 있는 형태로 개발 및 사용되고 있다. 웨어러블 디바이스는 사용자 신체에 착용 가능한 전자 장치를 나타낼 수 있으며, 단순히 액세서리처럼 전자 장치를 신체에 착용하는 것이 아니라, 사용자 신체의 가장 가까운 위치에서 사용자와 소통할 수 있는 전자 장치를 나타낼 수 있다. 이러한 웨어러블 디바이스는 현재의 전자 장치(예: 스마트 폰, 태블릿 PC 등)와 달리 손에 쥐거나 들고 다닐 필요가 없고, 휴대성을 높여 사람들이 옷이나 신체에 착용하여 이용할 수 있는 장점이 있다.
웨어러블 디바이스는 주변 환경에 대한 상세 정보나 개인의 신체 변화를 실시간으로 끊이지 않고 지속적으로 수집할 수 있다. 웨어러블 디바이스는 시계, 알람, 운동정보 기록 등과 같이 웨어러블 디바이스에서 독자적으로 정보를 획득하고 저장하고 표시하는 기능을 수행할 수 있다. 또한 최근에는 웨어러블 디바이스의 단독 기능이 아닌 동일한 사용자가 보유하고 있는 전자 장치와 연동하여 기능을 수행할 수 있다. 예를 들어, 전자 장치와 웨어러블 디바이스를 연동하여, 음성 인식 기능, 제스처 기능, 또는 헬스 케어(healthcare) 기능 등을 통해 새로운 사용자 경험을 제공하고 있다.
한 실시 예에 따르면, 전자 장치에서 전화 기능을 수행하면, 웨어러블 디바이스에서는 전자 장치와 사운드 교환 등과 같은 통신 기능을 수행할 수 있다. 이에 따라, 사용자는 웨어러블 디바이스의 마이크(MIC, microphone)와 스피커(SPK, speaker)를 통해 전자 장치에서 수행하는 것처럼 통화를 할 수 있다. 또는 웨어러블 디바이스에서는 숫자 키패드를 표시할 수 있고, 사용자에 의해 터치(touch) 등의 사용자 입력을 수신할 수 있고, 사용자 입력에 응답하여 전자 장치에 전화 기능을 수행하도록 명령 할 수 있다. 또는 웨어러블 디바이스에서 카메라를 통해 촬영 기능을 수행하면 촬영된 이미지를 전자 장치로 전송 하여, 전자 장치를 이용한 촬영 보다 편리하게 하면서, 웨어러블 디바이스의 소형화 및 소량 저장 용량에 따른 단점을 보완할 수 있다. 이와 같이, 웨어러블 디바이스를 단독으로 사용하는 것 보다 전자 장치와의 연결을 통한 연동 기능으로 인해 보다 더 폭넓은 사용자 환경의 제공이 가능하다.
전술한 바와 같이 웨어러블 디바이스와 전자 장치의 연동 기능은, 연결에 대한 연동 과정에서 웨어러블 디바이스와 전자 장치의 연결만을 정의하고 있다. 즉, 전자 장치와 웨어러블 디바이스를 제외한 다른 디바이스와 전자 장치 간의 연결은 전자 장치에 연결된 웨어러블 디바이스와의 연동 기능에는 영향을 주지 않는다. 예를 들어, 전자 장치에는, 전자 장치 또는 웨어러블 디바이스에서 사용 가능한 전자 펜(예: 디지타이저 펜)이 내장되어 있을 수 있다. 또한 전자 펜은 전자 장치에 연결(예: 탈착) 또는 연결 해제(예: 장착)될 경우 전자 장치에 해당 이벤트를 발생할 수 있으나, 웨어러블 디바이스에는 어떠한 이벤트도 발생하지 않는다. 따라서 종래에서는, 사용자가 만약 전자 펜을 이용하여 전자 장치에는 그림을 그리는 사용자 인터페이스(UI, User Interface)를 실행하고, 웨어러블 디바이스에는 그림을 그리기 위한 펜의 속성을 변환하는 사용자 인터페이스를 실행하고자 할 때, 전자 장치와 웨어러블 디바이스를 연동하여, 해당 사용자 인터페이스를 개별적으로 또는 독립적으로 각각 실행시켜야 하는 불편함이 있다.
본 발명의 다양한 실시 예들에서는 전자 장치, 디바이스 및 웨어러블 디바이스를 연동하는 방법 및 그 장치를 제공할 수 있다.
본 발명의 다양한 실시 예들에서는 전자 장치, 디바이스 및 웨어러블 디바이스를 포함하고, 전자 장치와 웨어러블 디바이스가 연결된 상태에서 디바이스에 의한 이벤트에 응답하여 디바이스에 관련된 이벤트를 웨어러블 디바이스와 연동하여 처리할 수 있는 방법 및 그 장치를 제공할 수 있다.
본 발명의 다양한 실시 예들에서는 전자 장치에서, 상기 전자 장치에 연동되고 있는 웨어러블 디바이스 외의 다른 디바이스와의 연결 또는 연결 해제에 따른 이벤트를 웨어러블 디바이스에 제공하여 사용자로 하여금 보다 편리하고 폭넓은 사용자 경험을 제공할 수 있는 방법 및 그 장치를 제공할 수 있다..
본 발명의 다양한 실시 예들에서는 전자 장치들을 연동하고 그에 대응하는 연동 기능을 수행하기 위한 최적의 환경을 구현하여 사용자의 편의성 및 전자 장치의 사용성을 향상시킬 수 있는 전자 장치 및 그 동작 방법을 제공할 수 있다.
본 발명의 다양한 실시 예들에 따른 전자 장치는, 웨어러블 디바이스 및 외부 디바이스와 연결을 위한 통신부와, 상기 웨어러블 디바이스와 연결된 상태에서, 상기 외부 디바이스의 연결에 관련한 이벤트를 감지하고, 상기 이벤트에 관련한 상기 외부 디바이스에 매칭되는 기능을 판단하고, 상기 웨어러블 디바이스에서 상기 기능의 실행을 위한 실행 명령을 상기 웨어러블 디바이스에 전송하도록 제어하는 제어부를 포함할 수 있다.
본 발명의 다양한 실시 예들에 따른 시스템은, 전자 장치와 설정된 통신 인터페이스를 통해 유선 또는 무선 통신에 기반하여 연결하고, 상기 전자 장치에 사용자 입력에 대응하는 제어 신호를 전송하는 웨어러블 디바이스와, 상기 전자 장치와 설정된 통신 인터페이스를 통해 유선 또는 무선 통신에 기반하여 연결되고, 상기 전자 장치와 통신 가능한 상태로 연결에 대응하여 이벤트를 발생하는 외부 디바이스와, 상기 웨어러블 디바이스와 연결된 상태에서, 상기 외부 디바이스의 연결에 관련한 이벤트를 감지하고, 상기 이벤트에 관련한 상기 외부 디바이스에 매칭되는 기능을 판단하고, 상기 기능을 실행하기 위한 실행 명령을 상기 웨어러블 디바이스에 전송하는 상기 전자 장치를 포함할 수 있다.
본 발명의 다양한 실시 예들에 따른 전자 장치의 동작 방법은, 웨어러블 디바이스와 연결된 상태에서, 외부 디바이스의 연결에 의한 이벤트를 감지하는 동작, 상기 이벤트에 관련한 상기 외부 디바이스의 종류를 판단하는 동작, 상기 외부 디바이스의 종류에 매칭되는 상기 웨어러블 디바이스의 기능을 판단하는 동작, 상기 기능을 실행하기 위한 실행 명령을 상기 웨어러블 디바이스에 전송하는 동작을 포함할 수 있다.
본 발명의 다양한 실시 예들에 따른 전자 장치의 동작 방법은, 연결된 전자 장치로부터 실행 명령을 수신하는 동작, 상기 실행 명령에 대응하는 기능 실행 및 관련 사용자 인터페이스를 표시하는 동작, 상기 사용자 인터페이스를 통해 사용자 입력을 수신하는 동작, 상기 사용자 입력에 관련한 제어 신호를 상기 전자 장치에 전송하는 동작을 포함할 수 있다.
본 발명의 다양한 실시 예들에 따른 전자 장치들의 연동 동작 방법은, 전자 장치와 웨어러블 디바이스의 연결을 수행하는 동작, 상기 전자 장치에서 외부 디바이스의 연결에 의한 이벤트를 감지하는 동작, 상기 전자 장치에서 상기 외부 디바이스와 매칭된 기능과 관련된 제1 사용자 인터페이스를 표시하고, 상기 기능의 실행 명령을 상기 웨어러블 디바이스에 전송하는 동작, 상기 웨어러블 디바이스에서 상기 실행 명령의 수신에 응답하여 상기 기능과 관련된 제2 사용자 인터페이스를 표시하는 동작, 상기 웨어러블 디바이스에서 상기 제2 사용자 인터페이스에 기반하여 수신된 사용자 입력에 관련한 제어 신호를 상기 전자 장치에 전송하는 동작, 상기 전자 장치에서 상기 제어 신호의 수신에 응답하여 상기 기능과 관련된 동작을 상기 외부 디바이스와 연동에 의해 실행하는 동작을 포함할 수 있다.
상기와 같은 과제를 해결하기 위하여 본 발명의 다양한 실시 예들에서는, 상기 방법을 프로세서에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체를 포함할 수 있다.
본 발명의 다양한 실시 예들에 따른 기록 매체는, 웨어러블 디바이스와 연결된 상태에서 외부 디바이스의 연결에 대응하여 이벤트를 감지하는 동작, 상기 이벤트에 관련한 상기 외부 디바이스에 매칭된 웨어러블 디바이스 전용 사용자 인터페이스를 판단하는 동작, 상기 사용자 인터페이스의 존재 유무에 대응하여 상기 기능을 독립적으로 실행하거나 상기 웨어러블 디바이스와 연동에 의해 실행하는 동작을 실행시키기 위한 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체를 포함할 수 있다.
본 발명의 다양한 실시 예들에 따른 전자 장치 및 그 동작 방법은, 전자 장치에서 디바이스의 연결 또는 연결 해제 되는 이벤트에 응답하여, 상기 이벤트와 관련된 동작을 전자 장치에 연결된 웨어러블 디바이스와 연동하여 실행할 수 있다.
본 발명의 다양한 실시 예들에 따르면, 전자 장치는 특정 디바이스가 연결되거나 연결 해제될 시 관련된 이벤트를 감지할 수 있고, 감지된 이벤트에 대응하는 기능의 수행 방식을 판단할 수 있다. 전자 장치는 판단하는 동작의 결과에 기반하여 이벤트에 대한 기능을 웨어러블 디바이스와 연동하여 실행하거나 또는 전자 장치가 단독으로 실행할 수 있다. 따라서 사용자는 디바이스를 사용할 시 별도의 추가 조작 없이도 전자 장치와 웨어러블 디바이스 중 적어도 하나에 기반하여 보다 편리하게 사용할 수 있다.
본 발명의 다양한 실시 예들에 따르면, 전자 장치, 디바이스 및 웨어러블 디바이스의 연동 및 그에 의한 연동 기능 실행을 통해 사용자에게 다양한 사용자 경험을 제공할 수 있다.
본 발명의 다양한 실시 예들에 따르면, 전자 장치들을 연동하고 그에 대응하는 연동 기능을 수행하기 위한 최적의 환경을 구현함으로써, 사용자의 편의성을 향상시키고, 전자 장치의 사용성, 편의성, 접근성 및 경쟁력을 향상시키는데 기여할 수 있다.
도 1은 다양한 실시 예들에 따른 전자 장치를 포함하는 네트워크 환경을 도시하는 도면이다.
도 2는 다양한 실시 예들에 따른 전자 장치의 블록도를 도시하는 도면이다.
도 3은 다양한 실시 예들에 따른 프로그램 모듈의 블록도를 도시하는 도면이다.
도 4는 본 발명의 다양한 실시 예들에 따른 전자 장치의 구성을 개략적으로 도시하는 도면이다.
도 5는 본 발명의 다양한 실시 예들에 따른 전자 장치들 간의 동작을 설명하기 위해 도시하는 도면이다.
도 6은 본 발명의 다양한 실시 예들에 따른 전자 장치들의 연동에 의해 기능을 실행하는 동작을 설명하기 위해 도시하는 도면이다.
도 7, 도 8, 도 9 및 도 10은 본 발명의 다양한 실시 예들에 따른 전자 장치들의 동작 예시를 설명하기 위해 도시하는 도면들이다.
도 11은 본 발명의 다양한 실시 예들에 따른 전자 장치에서 연동 동작을 도시하는 흐름도이다.
도 12는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 연동 동작을 도시하는 흐름도이다.
도 13은 본 발명의 다양한 실시 예들에 따른 웨어러블 디바이스에서 연동 동작을 도시하는 흐름도이다.
이하, 본 문서의 다양한 실시 예가 첨부된 도면을 참조하여 기재된다. 그러나, 이는 본 문서에 기재된 기술을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 문서의 실시예의 다양한 변경(modifications), 균등물(equivalents), 및/또는 대체물(alternatives)을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다.
본 문서에서, "가진다," "가질 수 있다," "포함한다," 또는 "포함할 수 있다" 등의 표현은 해당 특징(예: 수치, 기능, 동작, 또는 부품 등의 구성요소)의 존재를 가리키며, 추가적인 특징의 존재를 배제하지 않는다.
본 문서에서, "A 또는 B," "A 또는/및 B 중 적어도 하나," 또는 "A 또는/및 B 중 하나 또는 그 이상"등의 표현은 함께 나열된 항목들의 모든 가능한 조합을 포함할 수 있다. 예를 들면, "A 또는 B," "A 및 B 중 적어도 하나," 또는 "A 또는 B 중 적어도 하나"는, (1) 적어도 하나의 A를 포함, (2) 적어도 하나의 B를 포함, 또는 (3) 적어도 하나의 A 및 적어도 하나의 B 모두를 포함하는 경우를 모두 지칭할 수 있다.
본 문서에서 사용된 "제 1," "제 2," "첫째," 또는 "둘째," 등의 표현들은 다양한 구성요소들을, 순서 및/또는 중요도에 상관없이 수식할 수 있고, 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 뿐 해당 구성요소들을 한정하지 않는다. 예를 들면, 제 1 사용자 기기와 제 2 사용자 기기는, 순서 또는 중요도와 무관하게, 서로 다른 사용자 기기를 나타낼 수 있다. 예를 들면, 본 문서에 기재된 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 바꾸어 명명될 수 있다.
어떤 구성요소(예: 제 1 구성요소)가 다른 구성요소(예: 제 2 구성요소)에 "(기능적으로 또는 통신적으로) 연결되어((operatively or communicatively) coupled with/to)" 있다거나 "접속되어(connected to)" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되거나, 다른 구성요소(예: 제 3 구성요소)를 통하여 연결될 수 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소(예: 제 1 구성요소)가 다른 구성요소(예: 제 2 구성요소)에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 다른 구성요소(예: 제 3 구성요소)가 존재하지 않는 것으로 이해될 수 있다.
본 문서에서 사용된 표현 "~하도록 구성된(또는 설정된)(configured to)"은 상황에 따라, 예를 들면, "~에 적합한(suitable for)," "~하는 능력을 가지는(having the capacity to)," "~하도록 설계된(designed to)," "~하도록 변경된(adapted to)," "~하도록 만들어진(made to)," 또는 "~를 할 수 있는(capable of)"과 바꾸어 사용될 수 있다. 용어 "~하도록 구성된(또는 설정된)"은 하드웨어(hardware)적으로 "특별히 설계된(specifically designed to)" 것만을 반드시 의미하지 않을 수 있다. 대신, 어떤 상황에서는, "~하도록 구성된 장치"라는 표현은, 그 장치가 다른 장치 또는 부품들과 함께 "~할 수 있는" 것을 의미할 수 있다. 예를 들면, 문구 "A, B, 및 C를 수행하도록 구성된(또는 설정된) 프로세서"는 해당 동작을 수행하기 위한 전용 프로세서(예: 임베디드 프로세서), 또는 메모리 장치에 저장된 하나 이상의 소프트웨어 프로그램들을 실행함으로써, 해당 동작들을 수행할 수 있는 범용 프로세서(generic-purpose processor)(예: CPU(central processing unit) 또는 AP(application processor))를 의미할 수 있다.
본 문서에서 사용된 용어들은 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 다른 실시 예의 범위를 한정하려는 의도가 아닐 수 있다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 용어들은 본 문서에 기재된 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가질 수 있다. 본 문서에 사용된 용어들 중 일반적인 사전에 정의된 용어들은, 관련 기술의 문맥상 가지는 의미와 동일 또는 유사한 의미로 해석될 수 있으며, 본 문서에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다. 경우에 따라서, 본 문서에서 정의된 용어일지라도 본 문서의 실시 예들을 배제하도록 해석될 수 없다.
본 문서의 다양한 실시 예들에 따른 전자 장치는, 예를 들면, 스마트폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 영상 전화기, 전자책 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), 워크스테이션(workstation), 서버, PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 스마트 안경, 머리 착용형 장치(head-mounted-device(HMD) 등), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 스마트 미러, 또는 스마트 와치(smart watch)) 중 적어도 하나를 포함할 수 있다.
어떤 실시 예들에서, 전자 장치는 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들면, 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), 홈 오토매이션 컨트롤 패널(home automation control panel), 보안 컨트롤 패널(security control panel), TV 박스(예: 삼성 HomeSyncTM, 애플TVTM, 또는 구글 TVTM), 게임 콘솔(예: XboxTM, PlayStationTM), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
다른 실시 예에서, 전자 장치는, 각종 의료기기(예: 각종 휴대용 의료측정기기(혈당 측정기, 심박 측정기, 혈압 측정기, 또는 체온 측정기 등), MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 또는 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치, 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛(head unit), 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller's machine), 상점의 POS(point of sales), 또는 사물 인터넷 장치(internet of things)(예: 전구, 각종 센서, 전기 또는 가스 미터기, 스프링클러 장치, 화재경보기, 온도조절기(thermostat), 가로등, 토스터(toaster), 운동기구, 온수탱크, 히터, 보일러 등) 중 적어도 하나를 포함할 수 있다.
어떤 실시 예에 따르면, 전자 장치는 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 수신 장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측 기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 다양한 실시 예들에서, 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 어떤 실시 예에 따른 전자 장치는 플렉서블 전자 장치일 수 있다. 또한, 본 문서의 실시 예에 따른 전자 장치는 전술한 기기들에 한정되지 않으며, 기술 발전에 따른 새로운 전자 장치를 포함할 수 있다.
이하, 첨부 도면을 참조하여, 다양한 실시 예들에 따른 전자 장치가 설명된다. 본 문서에서, 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 다양한 실시 예에 따른 전자 장치를 포함하는 네트워크 환경을 도시하는 도면이다.
도 1을 참조하여, 다양한 실시 예들에서의, 네트워크 환경 100 내의 전자 장치 101이 기재된다. 전자 장치 101은 버스(bus) 110, 프로세서(processor) 120, 메모리(memory) 130, 입출력 인터페이스(input/output interface) 150, 디스플레이(display) 160, 및 통신 인터페이스(communication interface) 170을 포함할 수 있다. 어떤 실시 예에서는, 전자 장치 101은, 구성요소들 중 적어도 하나를 생략하거나 다른 구성요소를 추가적으로 구비할 수 있다.
버스 110은, 예를 들면, 구성요소들(110-170)을 서로 연결하고, 구성요소들 간의 통신(예: 제어 메시지 및/또는 데이터)을 전달하는 회로를 포함할 수 있다.
프로세서 120은, 중앙처리장치(central processing unit(CPU)), 어플리케이션 프로세서(application processor(AP)), 또는 커뮤니케이션 프로세서(communication processor(CP)) 중 하나 또는 그 이상을 포함할 수 있다. 프로세서 120은, 예를 들면, 전자 장치 101의 적어도 하나의 다른 구성요소들의 제어 및/또는 통신에 관한 연산이나 데이터 처리를 실행할 수 있다.
메모리 130은, 휘발성 및/또는 비휘발성 메모리를 포함할 수 있다. 메모리 130은, 예를 들면, 전자 장치 101의 적어도 하나의 다른 구성요소에 관계된 명령(command) 또는 데이터(data)를 저장할 수 있다. 한 실시 예에 따르면, 메모리 130은 소프트웨어(software) 및/또는 프로그램(program) 140을 저장할 수 있다. 프로그램 140은, 예를 들면, 커널(kernel) 141, 미들웨어(middleware) 143, 어플리케이션 프로그래밍 인터페이스(application programming interface(API)) 145, 및/또는 어플리케이션 프로그램(또는 "어플리케이션") 147 등을 포함할 수 있다. 커널 141, 미들웨어 143, 또는 API 145의 적어도 일부는, 운영 시스템(operating system(OS))으로 지칭될 수 있다.
커널 141은, 예를 들면, 다른 프로그램들(예: 미들웨어 143, API 145, 또는 어플리케이션 프로그램 147)에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 버스 110, 프로세서 120, 또는 메모리 130 등)을 제어 또는 관리할 수 있다. 또한, 커널 141은 미들웨어 143, API 145, 또는 어플리케이션 프로그램 147에서 전자 장치 101의 개별 구성요소에 접근함으로써, 시스템 리소스들을 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
미들웨어 143은, 예를 들면, API 145 또는 어플리케이션 프로그램 147이 커널 141과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다.
또한 미들웨어 143은 어플리케이션 프로그램 147으로부터 수신된 하나 이상의 작업 요청들을 우선 순위에 따라 처리할 수 있다. 예를 들면, 미들웨어 143은 어플리케이션 프로그램 147 중 적어도 하나에 전자 장치 101의 시스템 리소스(예: 버스 110, 프로세서 120, 또는 메모리 130 등)를 사용할 수 있는 우선 순위를 부여할 수 있다. 예컨대, 미들웨어 143은 상기 적어도 하나에 부여된 우선 순위에 따라 상기 하나 이상의 작업 요청들을 처리함으로써, 상기 하나 이상의 작업 요청들에 대한 스케쥴링(scheduling) 또는 로드 밸런싱(load balancing) 등을 수행할 수 있다.
API 145는, 예를 들면, 어플리케이션 147이 커널 141 또는 미들웨어 143에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어(file control), 창 제어(window control), 영상 처리(image processing), 또는 문자 제어(character control) 등을 위한 적어도 하나의 인터페이스 또는 함수(function)(예: 명령어)를 포함할 수 있다.
입출력 인터페이스 150은, 예를 들면, 사용자 또는 다른 외부 기기로부터 입력된 명령 또는 데이터를 전자 장치 101의 다른 구성요소(들)에 전달할 수 있는 인터페이스의 역할을 할 수 있다. 또한, 입출력 인터페이스 150은 전자 장치 101의 다른 구성요소(들)로부터 수신된 명령 또는 데이터를 사용자 또는 다른 외부 기기로 출력할 수 있다.
디스플레이 160은, 예를 들면, 액정 디스플레이(liquid crystal display(LCD)), 발광 다이오드(light-emitting diode(LED)) 디스플레이, 유기 발광 다이오드(organic light-emitting diode(OLED)) 디스플레이, 또는 마이크로 전자기계 시스템(microelectromechanical systems(MEMS)) 디스플레이, 또는 전자종이(electronic paper) 디스플레이를 포함할 수 있다. 디스플레이 160은, 예를 들면, 사용자에게 각종 콘텐츠(예: 텍스트(text), 이미지(image), 비디오(video), 아이콘(icon), 또는 심볼(symbol) 등)을 표시할 수 있다. 디스플레이 160은, 터치 스크린(touch screen)을 포함할 수 있으며, 예를 들면, 전자 펜 또는 사용자의 신체의 일부를 이용한 터치(touch), 제스처(gesture), 근접(proximity), 또는 호버링(hovering) 입력을 수신할 수 있다.
통신 인터페이스 170은, 예를 들면, 전자 장치 101과 외부 장치(예: 제1 외부 전자 장치 102, 제2 외부 전자 장치 104, 또는 서버 106) 간의 통신을 설정할 수 있다. 예를 들면, 통신 인터페이스 170은 무선 통신 또는 유선 통신을 통해서 네트워크 162에 연결되어 외부 장치(예: 제2 외부 전자 장치 104 또는 서버 106)와 통신할 수 있다.
무선 통신은, 예를 들면, 셀룰러 통신 프로토콜로서, 예를 들면, LTE(long-term evolution), LTE-A(LTE Advance), CDMA(code division multiple access), WCDMA(wideband CDMA), UMTS(universal mobile telecommunications system), WiBro(Wireless Broadband), 또는 GSM(global system for mobile communications) 등 중 적어도 하나를 사용할 수 있다. 또한, 무선 통신은, 예를 들면, 근거리 통신 164를 포함할 수 있다. 근거리 통신 164는, 예를 들면, WiFi(wireless fidelity), 블루투스(Bluetooth), NFC(near field communication), 또는 GPS(global positioning system) 등 중 적어도 하나를 포함할 수 있다. 유선 통신은, 예를 들면, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232), 또는 POTS(plain old telephone service) 등 중 적어도 하나를 포함할 수 있다. 네트워크 162는 통신 네트워크(telecommunications network), 예를 들면, 컴퓨터 네트워크(computer network)(예: LAN 또는 WAN), 인터넷, 또는 전화 네트워크(telephone network) 중 적어도 하나를 포함할 수 있다.
제1 및 제2 외부 전자 장치(102, 104) 각각은 전자 장치 101과 동일한 또는 다른 종류의 장치일 수 있다. 한 실시 예에 따르면, 서버 106은 하나 또는 그 이상의 서버들의 그룹을 포함할 수 있다. 다양한 실시 예들에 따르면, 전자 장치 101에서 실행되는 동작들의 전부 또는 일부는 다른 하나 또는 복수의 전자 장치(예: 전자 장치(102,104), 또는 서버 106에서 실행될 수 있다. 한 실시 예에 따르면, 전자 장치 101이 어떤 기능이나 서비스를 자동으로 또는 요청에 의하여 수행해야 할 경우에, 전자 장치 101은 기능 또는 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 그와 연관된 적어도 일부 기능을 다른 장치(예: 전자 장치(102, 104), 또는 서버 106)에게 요청할 수 있다. 다른 전자 장치(예: 전자 장치(102, 104), 또는 서버 106)는 요청된 기능 또는 추가 기능을 실행하고, 그 결과를 전자 장치 101로 전달할 수 있다. 전자 장치 101은 수신된 결과를 그대로 또는 추가적으로 처리하여 요청된 기능이나 서비스를 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅(cloud computing), 분산 컴퓨팅(distributed computing), 또는 클라이언트-서버 컴퓨팅(client-server computing) 기술이 이용될 수 있다.
도 2는 다양한 실시 예에 따른 전자 장치의 블록도이다.
전자 장치 201은, 예를 들면, 도 1에 도시된 전자 장치 101의 전체 또는 일부를 포함할 수 있다. 전자 장치 201은 하나 이상의 프로세서(예: AP(application processor)) 210, 통신 모듈 220, 가입자 식별 모듈 224, 메모리 230, 센서 모듈 240, 입력 장치 250, 디스플레이 260, 인터페이스 270, 오디오 모듈 280, 카메라 모듈 291, 전력 관리 모듈 295, 배터리 296, 인디케이터 297, 및 모터 298를 포함할 수 있다.
프로세서 210은, 예를 들면, 운영 체제 또는 어플리케이션 프로그램을 구동하여 프로세서 210에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 각종 데이터 처리 및 연산을 수행할 수 있다. 프로세서 210은, 예를 들면, SoC(system on chip)로 구현될 수 있다. 한 실시 예에 따르면, 프로세서 210은 GPU(graphic processing unit) 및/또는 이미지 신호 프로세서(image signal processor)를 더 포함할 수 있다. 프로세서 210은 도 2에 도시된 구성요소들 중 적어도 일부(예: 셀룰러 모듈 221)를 포함할 수도 있다. 프로세서 210은 다른 구성요소들(예: 비휘발성 메모리) 중 적어도 하나로부터 수신된 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리하고, 다양한 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
통신 모듈 220은, 도 1의 통신 인터페이스 170와 동일 또는 유사한 구성을 가질 수 있다. 통신 모듈 220은, 예를 들면, 셀룰러 모듈 221, WiFi 모듈 223, 블루투스 모듈 225, GPS 모듈 227, NFC 모듈 228 및 RF(radio frequency) 모듈 229를 포함할 수 있다.
셀룰러 모듈 221은, 예를 들면, 통신 네트워크를 통해서 음성 통화, 영상 통화, 문자 서비스, 또는 인터넷 서비스 등을 제공할 수 있다. 한 실시 예에 따르면, 셀룰러 모듈 221은 가입자 식별 모듈(예: SIM(subscriber identification module) 카드) 224를 이용하여 통신 네트워크 내에서 전자 장치 201의 구별 및 인증을 수행할 수 있다. 한 실시 예에 따르면, 셀룰러 모듈 221은 프로세서 210이 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 한 실시 예에 따르면, 셀룰러 모듈 221은 커뮤니케이션 프로세서(CP: communication processor)를 포함할 수 있다.
WiFi 모듈 223, 블루투스 모듈 225, GPS 모듈 227 또는 NFC 모듈 228 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. 어떤 실시 예에 따르면, 셀룰러 모듈 221, WiFi 모듈 223, 블루투스 모듈 225, GPS 모듈 227 또는 NFC 모듈 228 중 적어도 일부(예: 두 개 이상)는 하나의 integrated chip(IC) 또는 IC 패키지 내에 포함될 수 있다.
RF 모듈 229는, 예를 들면, 통신 신호(예: RF 신호)를 송수신할 수 있다. RF 모듈 229는, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter), LNA(low noise amplifier), 또는 안테나(antenna) 등을 포함할 수 있다. 다른 실시 예에 따르면, 셀룰러 모듈 221, WiFi 모듈 223, 블루투스 모듈225, GPS 모듈 227 또는 NFC 모듈 228 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호를 송수신할 수 있다.
가입자 식별 모듈 224는, 예를 들면, 가입자 식별 모듈을 포함하는 카드 및/또는 내장 SIM(embedded SIM)을 포함할 수 있으며, 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
메모리 230(예: 메모리 130)은, 예를 들면, 내장 메모리 232 또는 외장 메모리 234를 포함할 수 있다. 내장 메모리 232는, 예를 들면, 휘발성 메모리(volatile memory)(예: DRAM(dynamic RAM(random access memory)), SRAM(static RAM), 또는 SDRAM(synchronous dynamic RAM) 등), 비휘발성 메모리(non-volatile memory)(예: OTPROM(one time programmable ROM(read only memory)), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, 플래시 메모리(예: NAND flash 또는 NOR flash 등), 하드 드라이브, 또는 솔리드 스테이트 드라이브(solid state drive(SSD)) 중 적어도 하나를 포함할 수 있다.
외장 메모리 234는 플래시 드라이브(flash drive), 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital), MMC(MultiMediaCard) 또는 메모리 스틱(memory stick) 등을 더 포함할 수 있다. 외장 메모리 234는 다양한 인터페이스를 통하여 전자 장치 201과 기능적으로 및/또는 물리적으로 연결될 수 있다.
센서 모듈 240은, 예를 들면, 물리량을 계측하거나 전자 장치 201의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 센서 모듈 240은, 예를 들면, 제스처 센서(gesture sensor) 240A, 자이로 센서(gyro sensor) 240B, 기압 센서(barometer) 240C, 마그네틱 센서(magnetic sensor) 240D, 가속도 센서(acceleration sensor) 240E, 그립 센서(grip sensor) 240F, 근접 센서(proximity sensor) 240G, 컬러 센서(color sensor) 240H(예: RGB(red, green, blue) 센서), 생체 센서(medical sensor) 240I, 온/습도 센서(temperature-humidity sensor) 240J, 조도 센서(illuminance sensor) 240K, 또는 UV(ultra violet) 센서 240M 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로(additionally or alternatively), 센서 모듈 240은, 예를 들면, 후각 센서(E-nose sensor), EMG 센서(electromyography sensor), EEG 센서(electroencephalogram sensor), ECG 센서(electrocardiogram sensor), IR(infrared) 센서, 홍채 센서(iris scan sensor) 및/또는 지문 센서(finger scan sensor)를 포함할 수 있다. 센서 모듈 240은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다. 어떤 실시 예에서는, 전자 장치 201은 프로세서 210의 일부로서 또는 별도로, 센서 모듈 240을 제어하도록 구성된 프로세서를 더 포함하여, 프로세서 210가 슬립(sleep) 상태에 있는 동안, 센서 모듈 240을 제어할 수 있다.
입력 장치 250은, 예를 들면, 터치 패널(touch panel) 252, (디지털) 펜 센서(pen sensor) 254, 키(key) 256, 또는 초음파(ultrasonic) 입력 장치 258를 포함할 수 있다. 터치 패널 252는, 예를 들면, 정전식, 감압식, 적외선 방식, 또는 초음파 방식 중 적어도 하나의 방식을 사용할 수 있다. 또한, 터치 패널 252는 제어 회로를 더 포함할 수도 있다. 터치 패널 252는 택타일 레이어(tactile layer)를 더 포함하여, 사용자에게 촉각 반응을 제공할 수 있다.
(디지털) 펜 센서 254는, 예를 들면, 터치 패널의 일부이거나, 별도의 인식용 쉬트(sheet)를 포함할 수 있다. 키 256은, 예를 들면, 물리적인 버튼, 광학식 키, 또는 키패드(keypad)를 포함할 수 있다. 초음파 입력 장치 258은 마이크(예: 마이크 288)를 통해, 입력 도구에서 발생된 초음파를 감지하여, 상기 감지된 초음파에 대응하는 데이터를 확인할 수 있다.
디스플레이 260(예: 디스플레이 160)는 패널 262, 홀로그램 장치 264, 또는 프로젝터 266을 포함할 수 있다. 패널 262는, 도 1의 디스플레이 160과 동일 또는 유사한 구성을 포함할 수 있다. 패널 262는, 예를 들면, 유연하게(flexible), 투명하게(transparent), 또는 착용할 수 있게(wearable) 구현될 수 있다. 패널 262는 터치 패널 252와 하나의 모듈로 구성될 수도 있다. 홀로그램 장치 264는 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 프로젝터 266은 스크린(screen)에 빛을 투사하여 영상을 표시할 수 있다. 스크린은, 예를 들면, 전자 장치 201의 내부 또는 외부에 위치할 수 있다. 한 실시 예에 따르면, 디스플레이 260은 패널 262, 홀로그램 장치 264, 또는 프로젝터 266을 제어하기 위한 제어 회로를 더 포함할 수 있다.
인터페이스 270은, 예를 들면, HDMI(high-definition multimedia interface) 272, USB(universal serial bus) 274, 광 인터페이스(optical interface) 276, 또는 D-sub(D-subminiature) 278을 포함할 수 있다. 인터페이스 270은, 예를 들면, 도 1에 도시된 통신 인터페이스 170에 포함될 수 있다. 추가적으로 또는 대체적으로(additionally and alternatively), 인터페이스 270은, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD(secure digital) 카드/MMC(multi-media card) 인터페이스, 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
오디오 모듈 280은, 예를 들면, 소리(sound)와 전기 신호를 쌍방향으로 변환시킬 수 있다. 오디오 모듈 280의 적어도 일부 구성요소는, 예를 들면, 도 1 에 도시된 입출력 인터페이스 150에 포함될 수 있다. 오디오 모듈 280은, 예를 들면, 스피커 282, 리시버 284, 이어폰 286, 또는 마이크 288 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
카메라 모듈 291은, 예를 들면, 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시 예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈, ISP(image signal processor), 또는 플래시(flash)(예: LED 또는 xenon lamp 등)를 포함할 수 있다.
전력 관리 모듈 295는, 예를 들면, 전자 장치 201의 전력을 관리할 수 있다. 한 실시 예에 따르면, 전력 관리 모듈 295는 PMIC(power management integrated circuit), 충전 IC(charger integrated circuit), 또는 배터리 296 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다. PMIC는, 유선 및/또는 무선 충전 방식을 가질 수 있다. 무선 충전 방식은, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등을 포함하며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로, 또는 정류기 등을 더 포함할 수 있다. 배터리 게이지는, 예를 들면, 배터리 296의 잔량, 충전 중 전압, 전류, 또는 온도를 측정할 수 있다. 배터리 296은, 예를 들면, 충전식 전지(rechargeable battery) 및/또는 태양 전지(solar battery)를 포함할 수 있다.
인디케이터 297은 전자 장치 201 또는 그 일부(예: 프로세서 210)의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 모터 298은 전기적 신호를 기계적 진동으로 변환할 수 있고, 진동(vibration), 또는 햅틱(haptic) 효과 등을 발생시킬 수 있다. 도시되지는 않았으나, 전자 장치 201은 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 모바일 TV 지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting), 또는 미디어플로(MediaFloTM) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
본 문서에서 기술된 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 다양한 실시 예에서, 전자 장치는 본 문서에서 기술된 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 다양한 실시 예에 따른 전자 장치의 구성요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성요소들의 기능을 동일하게 수행할 수 있다.
도 3은 다양한 실시 예에 따른 프로그램 모듈의 블록도이다.
한 실시 예에 따르면, 프로그램 모듈 310(예: 프로그램 140)은 전자 장치(예: 전자 장치 101)에 관련된 자원을 제어하는 운영 체제(operating system(OS)) 및/또는 운영 체제 상에서 구동되는 다양한 어플리케이션(예: 어플리케이션 프로그램 147)을 포함할 수 있다. 운영 체제는, 예를 들면, 안드로이드(android), iOS, 윈도우즈(windows), 심비안(symbian), 타이젠(tizen), 또는 바다(bada) 등이 될 수 있다.
프로그램 모듈 310은 커널 320, 미들웨어 330, 어플리케이션 프로그래밍 인터페이스(application programming interface (API)) 360, 및/또는 어플리케이션 370을 포함할 수 있다. 프로그램 모듈 310의 적어도 일부는 전자 장치 상에 프리로드(preload) 되거나, 외부 전자 장치(예: 전자 장치(102, 104), 서버 106 등)로부터 다운로드(download) 가능하다.
커널 320(예: 커널 141)은, 예를 들면, 시스템 리소스 매니저 321 및/또는 디바이스 드라이버 323을 포함할 수 있다. 시스템 리소스 매니저 321은 시스템 리소스의 제어, 할당, 또는 회수 등을 수행할 수 있다. 한 실시 예에 따르면, 시스템 리소스 매니저 321은 프로세스 관리부, 메모리 관리부, 또는 파일 시스템 관리부 등을 포함할 수 있다. 디바이스 드라이버 323은, 예를 들면, 디스플레이 드라이버, 카메라 드라이버, 블루투스 드라이버, 공유 메모리 드라이버, USB 드라이버, 키패드 드라이버, WiFi 드라이버, 오디오 드라이버, 또는 IPC(inter-process communication) 드라이버를 포함할 수 있다.
미들웨어 330은, 예를 들면, 어플리케이션 370이 공통적으로 필요로 하는 기능을 제공하거나, 어플리케이션 370이 전자 장치 내부의 제한된 시스템 자원을 효율적으로 사용할 수 있도록 API 360을 통해 다양한 기능들을 어플리케이션 370으로 제공할 수 있다. 한 실시 예에 따르면, 미들웨어 330(예: 미들웨어 143)은 런타임 라이브러리 335, 어플리케이션 매니저(application manager) 341, 윈도우 매니저(window manager) 342, 멀티미디어 매니저(multimedia manager) 343, 리소스 매니저(resource manager) 344, 파워 매니저(power manager) 345, 데이터베이스 매니저(database manager) 346, 패키지 매니저(package manager) 347, 연결 매니저(connectivity manager) 348, 통지 매니저(notification manager) 349, 위치 매니저(location manager) 350, 그래픽 매니저(graphic manager) 351, 또는 보안 매니저(security manager) 352 중 적어도 하나를 포함할 수 있다.
런타임 라이브러리 335는, 예를 들면, 어플리케이션 370이 실행되는 동안에 프로그래밍 언어를 통해 새로운 기능을 추가하기 위해 컴파일러가 사용하는 라이브러리 모듈을 포함할 수 있다. 런타임 라이브러리 335는 입출력 관리, 메모리 관리, 또는 산술 함수에 대한 기능 등을 수행할 수 있다.
어플리케이션 매니저 341은, 예를 들면, 어플리케이션 370 중 적어도 하나의 어플리케이션의 생명 주기(life cycle)를 관리할 수 있다. 윈도우 매니저 342는 화면에서 사용하는 GUI 자원을 관리할 수 있다. 멀티미디어 매니저 343은 다양한 미디어 파일들의 재생에 필요한 포맷(format)을 파악하고, 해당 포맷에 맞는 코덱(codec)을 이용하여 미디어 파일의 인코딩(encoding) 또는 디코딩(decoding)을 수행할 수 있다. 리소스 매니저 344는 어플리케이션 370 중 적어도 어느 하나의 어플리케이션의 소스 코드, 메모리 또는 저장 공간 등의 자원을 관리할 수 있다.
파워 매니저 345는, 예를 들면, 바이오스(BIOS: basic input/output system) 등과 함께 동작하여 배터리(battery) 또는 전원을 관리하고, 전자 장치의 동작에 필요한 전력 정보 등을 제공할 수 있다. 데이터베이스 매니저 346은 어플리케이션 370 중 적어도 하나의 어플리케이션에서 사용할 데이터베이스를 생성, 검색, 또는 변경할 수 있다. 패키지 매니저 347은 패키지 파일의 형태로 배포되는 어플리케이션의 설치 또는 업데이트를 관리할 수 있다.
연결 매니저 348은, 예를 들면, WiFi 또는 블루투스 등의 무선 연결을 관리할 수 있다. 통지 매니저 349는 도착 메시지, 약속, 근접성 알림 등의 사건(event)을 사용자에게 방해되지 않는 방식으로 표시 또는 통지할 수 있다. 위치 매니저 350은 전자 장치의 위치 정보를 관리할 수 있다. 그래픽 매니저 351은 사용자에게 제공될 그래픽 효과 또는 이와 관련된 사용자 인터페이스를 관리할 수 있다. 보안 매니저 352는 시스템 보안 또는 사용자 인증 등에 필요한 제반 보안 기능을 제공할 수 있다. 한 실시 예에 따르면, 전자 장치(예: 전자 장치 101)가 전화 기능을 포함한 경우, 미들웨어 330은 전자 장치의 음성 또는 영상 통화 기능을 관리하기 위한 통화 매니저(telephony manager)를 더 포함할 수 있다.
미들웨어 330은 전술한 구성요소들의 다양한 기능의 조합을 형성하는 미들웨어 모듈을 포함할 수 있다. 미들웨어 330은 차별화된 기능을 제공하기 위해 운영 체제의 종류 별로 특화된 모듈을 제공할 수 있다. 또한, 미들웨어 330은 동적으로 기존의 구성요소를 일부 삭제하거나 새로운 구성요소들을 추가할 수 있다.
API 360(예: API 145)는, 예를 들면, API 프로그래밍 함수들의 집합으로, 운영 체제에 따라 다른 구성으로 제공될 수 있다. 예를 들면, 안드로이드 또는 iOS의 경우, 플랫폼(platform) 별로 하나의 API 셋을 제공할 수 있으며, 타이젠(tizen)의 경우, 플랫폼 별로 두 개 이상의 API 셋을 제공할 수 있다.
어플리케이션 370(예: 어플리케이션 프로그램 147)은, 예를 들면, 홈 371, 다이얼러 372, SMS/MMS 373, IM(instant message) 374, 브라우저 375, 카메라 376, 알람 377, 컨택트 378, 음성 다이얼 379, 이메일 380, 달력 381, 미디어 플레이어 382, 앨범 383, 시계 384 등의 기능을 수행할 수 있는 하나 이상의 어플리케이션을 포함할 수 있다. 추가적으로 또는 대체적으로(additionally or alternatively), 어플리케이션 370은, 예를 들면, 건강 관리(health care)(예: 운동량 또는 혈당 등을 측정), 또는 환경 정보 제공(예: 기압, 습도, 또는 온도 정보 등을 제공) 등의 기능을 수행할 수 있는 하나 이상의 어플리케이션을 포함할 수 있다.
한 실시 예에 따르면, 어플리케이션 370은 전자 장치(예: 전자 장치 101)와 외부 전자 장치(예: 전자 장치(102, 104)) 사이의 정보 교환을 지원하는 어플리케이션(이하, 설명의 편의 상, "정보 교환 어플리케이션")을 포함할 수 있다. 정보 교환 어플리케이션은, 예를 들면, 외부 전자 장치(예: 전자 장치(102, 104))에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 외부 전자 장치(예: 전자 장치(102, 104))를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 알림 전달 어플리케이션은 전자 장치의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션, 또는 환경 정보 어플리케이션 등)에서 발생된 알림 정보를 외부 전자 장치(예: 전자 장치(102, 104))로 전달하는 기능을 포함할 수 있다. 또한, 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치(예: 전자 장치(102, 104))로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다.
장치 관리 어플리케이션은, 예를 들면, 전자 장치와 통신하는 외부 전자 장치(예: 전자 장치(102, 104))의 적어도 하나의 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴-온(turn-on)/턴-오프(turn-off) 또는 디스플레이의 밝기(또는, 해상도) 조절), 외부 전자 장치에서 동작하는 어플리케이션 또는 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스 등)를 관리(예: 설치, 삭제, 또는 업데이트)할 수 있다.
한 실시 예에 따르면, 어플리케이션 370은 외부 전자 장치(예: 전자 장치(102, 104))의 속성에 따라 지정된 어플리케이션(예: 모바일 의료 기기의 건강 관리 어플리케이션 등)을 포함할 수 있다. 한 실시 예에 따르면, 어플리케이션 370은 외부 전자 장치(예: 서버 106 또는 전자 장치(102, 104))로부터 수신된 어플리케이션을 포함할 수 있다. 한 실시 예에 따르면, 어플리케이션 370은 프리로드 어플리케이션(preloaded application) 또는 서버로부터 다운로드 가능한 제3자 어플리케이션(third party application)을 포함할 수 있다. 도시된 실시 예에 따른 프로그램 모듈 310의 구성요소들의 명칭은 운영 체제의 종류에 따라서 달라질 수 있다.
다양한 실시 예들에 따르면, 프로그램 모듈 310의 적어도 일부는 소프트웨어, 펌웨어(firmware), 하드웨어, 또는 이들 중 적어도 둘 이상의 조합으로 구현될 수 있다. 프로그램 모듈 310의 적어도 일부는, 예를 들면, 프로세서(예: 프로세서 210)에 의해 구현(implement)(예: 실행)될 수 있다. 프로그램 모듈 310의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트(sets of instructions) 또는 프로세스 등을 포함할 수 있다.
본 문서에서 사용된 용어 "모듈"은, 예를 들면, 하드웨어, 소프트웨어 또는 펌웨어 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. "모듈"은, 예를 들면, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component), 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. "모듈"은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. "모듈"은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. "모듈"은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, "모듈"은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
다양한 실시 예들에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 예컨대, 프로그램 모듈의 형태로 컴퓨터로 읽을 수 있는 기록 매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어가 프로세서(예: 프로세서 120)에 의해 실행될 경우, 상기 하나 이상의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 기록 매체는, 예를 들면, 메모리 130이 될 수 있다.
컴퓨터로 판독 가능한 기록 매체는, 하드디스크, 플로피디스크, 마그네틱 매체(magnetic media)(예: 자기테이프), 광기록 매체(optical media)(예: CD-ROM(compact disc read only memory), DVD(digital versatile disc), 자기-광 매체(magneto-optical media)(예: 플롭티컬 디스크(floptical disk)), 하드웨어 장치(예: ROM(read only memory), RAM(random access memory), 또는 플래시 메모리 등) 등을 포함할 수 있다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 다양한 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
다양한 실시 예들에 따른 모듈 또는 프로그램 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 다양한 실시 예들에 따른 모듈, 프로그램 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
그리고 본 문서에 개시된 실시 예는 개시된, 기술 내용의 설명 및 이해를 위해 제시된 것이며, 본 문서에서 기재된 기술의 범위를 한정하는 것은 아니다. 따라서, 본 문서의 범위는, 본 문서의 기술적 사상에 근거한 모든 변경 또는 다양한 다른 실시 예를 포함하는 것으로 해석되어야 한다.
제안하는 본 발명의 다양한 실시 예들은 복수의 전자 장치들을 연동하여 동작하는 방법 및 이를 지원하기 위한 전자 장치에 관한 것이다. 본 발명의 다양한 실시 예들에 따르면, 전자 장치는 다양한 외부 전자 장치(예: 웨어러블 디바이스(wearable device))와 연결될 수 있다. 전자 장치는 웨어러블 디바이스와 연결된 상태에서, 다른 외부 장치(예: 디바이스)와 연결되거나 연결 해제될 수 있다. 본 발명의 다양한 실시 예들에서, 전자 장치는 디바이스의 연결에 의한 이벤트 또는 디바이스의 연결 해제에 의한 이벤트를 감지할 수 있다. 본 발명의 다양한 실시 예들에서, 상기 디바이스의 연결에 의한 이벤트는 디바이스가 통신이 가능한 상태로 연결되는 동작 또는 이벤트(예: 페어링 이벤트(pairing event))를 포함할 수 있다. 본 발명의 다양한 실시 예들에서, 상기 디바이스의 연결 해제에 의한 이벤트는 디바이스가 통신이 가능한 상태로 연결된 상태에서 통신이 불가능한 상태로 디바이스의 상기 연결이 해제되는 동작 또는 이벤트(예: 페어링 해제 이벤트(pairing release event))를 포함할 수 있다.
이하의 설명에서, 상기 연결에 의한 이벤트(예: 페어링 이벤트)는 전자 장치와 디바이스가 통신 가능한 상태로 서로 간에 연결(접속)되는 동작에 따라 발생하는 동작 또는 이벤트를 포함하는 용어로 사용될 수 있다. 상기 연결 해제에 의한 이벤트(예: 페어링 해제 이벤트)는 전자 장치와 디바이스가 통신 불가능한 상태로 연결(접속)이 해제되는 동작에 따라 발생하는 동작 또는 이벤트를 포함하는 용어로 사용될 수 있다.
본 발명의 다양한 실시 예들에 따르면, 전자 장치는 디바이스에 의한 페어링 이벤트 또는 페어링 해제 이벤트에 응답하여, 해당 이벤트와 관련된 동작을 전자 장치에 연결된 웨어러블 디바이스와 연동하여 실행할 수 있다. 한 실시 예에 따르면, 전자 장치는 특정 디바이스가 연결되거나 연결 해제되는 이벤트에 대응하는 기능의 수행 방식을 판단할 수 있고, 판단하는 동작의 결과에 기반하여 해당 이벤트에 대한 기능을 웨어러블 디바이스와 연동하여 실행하거나 또는 전자 장치가 단독(독립적)으로 실행할 수 있다.
이하에서 설명되는 본 발명의 다양한 실시 예들에서는, 설명의 편의를 위하여 전자 장치, 웨어러블 디바이스 및 디바이스를 구분하고, 전자 장치와 웨어러블 디바이스가 연결된 상태에서, 상기 전자 장치에 디바이스의 연결 또는 연결 해제에 따라 전자 장치와 웨어러블 디바이스 간에 상기 디바이스에 대응하는 기능을 연계하여 수행할 수 있도록 하는 동작을 설명한다. 하지만, 본 발명의 다양한 실시 예들에서 상기 웨어러블 디바이스와 상기 디바이스는 전자 장치의 범주에 포함될 수 있으며, 전자 장치들 간에 연동하는 동작은 상기 웨어러블 디바이스와 상기 디바이스뿐만 아니라, 다양한 전자 장치에서도 동작할 수 있다. 예를 들어, 본 발명의 다양한 실시 예들에서 전자 장치는 본 발명의 다양한 실시 예들에 따른 기능을 지원하는 모든 정보통신기기, 멀티미디어기기, 웨어러블 디바이스 및 그에 대한 응용기기와 같이 AP(application processor)), CP(communication processor), GPU(Graphic Processing Unit), 및 CPU(central processing unit) 등의 다양한 프로세서(예: 프로세서(120, 210)) 중 하나 또는 그 이상을 사용하는 모든 장치를 포함할 수 있다.
본 발명의 다양한 실시 예들에서 전자 장치와 웨어러블 디바이스는 설정된 통신 인터페이스를 통해 연결될 수 있고, 전자 장치는 설정된 통신 인터페이스로 연결된 웨어러블 디바이스를 제어하거나, 웨어러블 디바이스에 의해 제어될 수 있다. 본 발명의 다양한 실시 예들에서 전자 장치와 웨어러블 디바이스 간의 연결은, 개인 통신 네트워크(PAN, personal area network)와 같은 무선 네트워크 기술을 이용하는 무선 통신 인터페이스에 의해 무선 연결되는 것을 대표적으로 설명하지만, USB(universal serial bus), 데이터 커넥터(data connector), 파이어와이어(FireWire), 아이링크(i.Link) 등을 이용하는 유선 통신 인터페이스에 의해 유선 연결될 수도 있다. 본 발명의 다양한 실시 예들에서 개인 통신 네트워크는 근거리 통신 기술을 바탕으로, 전자 장치의 통신 범위 내에서 다양한 전자 장치들(예: 웨어러블 디바이스, 다른 전자 장치) 간의 통신을 위한 네트워크를 나타낼 수 있다. 근거리 통신 기술은 WiFi(wireless fidelity), 블루투스(Bluetooth), NFC(near field communication), IrDA(infrared data association), UWB(ultra wideband), 지그비(ZigBee), 또는 RFID(radio frequency identification) 등 중 적어도 하나를 사용할 수 있다.
본 발명의 다양한 실시 예들에서 전자 장치와 디바이스는 설정된 통신 인터페이스를 통해 연결될 수 있고, 전자 장치는 설정된 통신 인터페이스를 통해 디바이스가 통신 가능한 상태로 연결되는 페어링 이벤트 또는 통신 불가능한 상태로 그 연결이 해제되는 페어링 해제 이벤트를 감지할 수 있다. 본 발명의 다양한 실시 예들에서 전자 장치와 디바이스 간의 연결은 디바이스의 종류에 대응하여 다양한 방식으로 연결될 수 있다. 한 실시 예에 따르면, 전자 장치와 디바이스 간의 연결은, 개인 통신 네트워크와 같은 무선 네트워크 기술을 이용하는 무선 통신 인터페이스에 의해 무선 연결될 수 있고, 또한 USB, 데이터 커넥터, 파이어와이어, 아이링크 등을 이용하는 유선 통신 인터페이스에 의해 유선 연결될 수 있다.
이하에서, 본 발명의 다양한 실시 예들에 따른 전자 장치, 상기 전자 장치와 연결된 웨어러블 디바이스, 상기 전자 장치와 연결되거나 연결 해제되는 디바이스를 이용하여 전자 장치들의 연동에 따른 기능을 수행하는 방법, 장치 및 그의 시스템에 대하여 살펴보기로 한다. 하지만, 본 발명의 다양한 실시 예들이 하기에서 기술하는 내용에 의해 제한되거나 한정되는 것은 아니므로, 하기의 실시 예에 의거하여 다양한 실시 예들에 적용할 수 있음에 유의하여야 한다.
이하에서 설명되는 본 발명의 다양한 실시 예들에서는 하드웨어적인 접근 방법을 예시로서 설명한다. 하지만, 본 발명의 다양한 실시 예들에서는 하드웨어와 소프트웨어를 모두 사용하는 기술을 포함하고 있으므로, 본 발명의 다양한 실시 예들이 소프트웨어 기반의 접근 방법을 제외하는 것은 아니다.
도 4는 본 발명의 다양한 실시 예들에 따른 전자 장치의 구성을 개략적으로 도시하는 도면이다.
상기 도 4를 참조하면, 본 발명의 다양한 실시 예들에 따른 전자 장치 400은 무선 통신부 410, 사용자 입력부 420, 터치스크린 430, 오디오 처리부 440, 메모리 450, 인터페이스부 460, 카메라 모듈 470, 제어부 480, 그리고 전원 공급부 490를 포함할 수 있다. 본 발명의 다양한 실시 예들에서 전자 장치 400은 도 4에 도시된 구성들이 필수적인 것은 아니어서, 도 4에 도시된 구성들보다 많은 구성들을 가지거나, 또는 그보다 적은 구성들을 가지는 것으로 구현될 수 있다.
상기 무선 통신부 410은 상기 도 2의 통신 모듈 220과 동일 또는 유사한 구성을 가질 수 있다. 상기 무선 통신부 410은 전자 장치 400와 무선 통신 시스템 사이 또는 전자 장치 400와 다른 전자 장치(예: 전자 장치(102, 104), 또는 서버 106) 사이의 무선 통신을 가능하게 하는 하나 또는 그 이상의 모듈들을 포함할 수 있다. 예를 들어, 무선 통신부 410은 이동통신 모듈 411, 무선 랜(WLAN, wireless local area network) 모듈 413, 근거리 통신 모듈 415, 위치 산출 모듈 417, 그리고 방송 수신 모듈 419 등을 포함하여 구성될 수 있다. 본 발명의 다양한 실시 예들에서, 상기 무선 통신부 410은 설정된 통신 방식에 기반하여 웨어러블 디바이스와 무선 통신을 수행할 수 있다.
상기 이동통신 모듈 411은 이동통신 네트워크 상에서 기지국, 외부의 전자 장치(예: 전자 장치 104), 그리고 다양한 서버들(예: 통합 서버(integration server), 프로바이더 서버(provider server), 콘텐츠 서버(content server), 인터넷 서버(internet server), 또는 클라우드 서버(cloud server) 등) 중 적어도 하나와 무선 신호를 송수신할 수 있다. 상기 무선 신호는 음성통화 신호, 화상통화 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
상기 이동통신 모듈 411은 하나 또는 그 이상의 데이터들(예: 콘텐츠(contents), 메시지(message), 메일(mail), 이미지(image), 동영상(video), 날씨 정보(weather information), 위치 정보(location information) 또는 시간 정보(time information) 등)을 수신할 수 있다. 한 실시 예에 따르면, 상기 이동통신 모듈 411은 전자 장치 400와 네트워크(예: 이동통신 네트워크)를 통해 연결되어 있는 다른 전자 장치(예: 전자 장치 104 또는 서버 106) 중 적어도 하나와 연결되어 다양한 데이터들을 획득(수신)할 수 있다. 상기 이동통신 모듈 411은 전자 장치 400의 동작에 필요한 다양한 데이터들을 사용자 요청에 응답하여 외부(예: 서버 106, 또는 다른 전자 장치 104 등)로 전송할 수 있다.
상기 이동통신 모듈 411은 통신 기능을 수행할 수 있다. 예를 들어, 이동통신 모듈 411은 제어부 480의 제어 하에 RF(radio frequency) 신호를 기저대역 신호로 변환하여 제어부 480에게 제공하거나, 제어부 480으로부터의 기저대역 신호를 RF 신호로 변환하여 송신할 수 있다. 여기서, 제어부 480은 다양한 통신 방식에 기반하여 기저대역 신호를 처리할 수 있다. 예를 들어, 상기 통신 방식은, 이들에 한정하지는 않지만, GSM(global system for mobile communication) 통신 방식, EDGE(enhanced data GSM environment) 통신 방식, CDMA(code division multiple access) 통신 방식, W-CDMA(w-Code division multiple access) 통신 방식, LTE(long term evolution) 통신 방식 또는 OFDMA(orthogonal frequency division multiple access) 통신 방식 등을 포함할 수 있다.
상기 무선 랜 모듈 413은 무선 인터넷 접속 및 다른 전자 장치(예: 전자 장치 102 또는 서버 106)와 무선 랜 링크(link)를 형성하기 위한 모듈을 나타낼 수 있다. 상기 무선 랜 모듈 413은 전자 장치 400에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 무선 랜(WiFi, wireless fidelity), Wibro(wireless broadband), WiMax(world interoperability for microwave access), HSDPA(high speed downlink packet access), 또는 mmWave(millimeter wave) 등이 이용될 수 있다.
상기 무선 랜 모듈 413은 사용자로부터 선택된 하나 또는 그 이상의 데이터들을 외부로 전송하거나, 또는 외부로부터 수신할 수 있다. 한 실시 예에 따르면, 상기 무선 랜 모듈 413은 전자 장치 400과 네트워크(예: 무선 인터넷 네트워크)를 통해 연결되어 있는 다른 전자 장치(예: 웨어러블 디바이스) 또는 서버 중 적어도 하나와 연동하여, 전자 장치 400의 다양한 데이터들을 외부(예: 웨어러블 디바이스, 다른 전자 장치 또는 서버)로 전송하거나, 또는 외부로부터 수신할 수 있다. 상기 무선 랜 모듈 413은 상시 온(on) 상태를 유지하거나, 전자 장치 400의 설정 또는 사용자 입력에 따라 턴-온(turn-on)될 수 있다.
상기 근거리 통신 모듈 415은 근거리 통신(short range communication)을 수행하기 위한 모듈을 나타낼 수 있다. 근거리 통신 기술로 블루투스(bluetooth), 저전력 블루투스(BLE, bluetooth low energy), RFID(radio frequency identification), 적외선 통신(IrDA, infrared data association), UWB(ultra wideband), 지그비(zigbee), 또는 NFC(near field communication) 등이 이용될 수 있다.
상기 근거리 통신 모듈 415은 하나 또는 그 이상의 데이터들을 수신할 수 있다. 한 실시 예에 따르면, 상기 근거리 통신 모듈 415은 전자 장치 400과 네트워크(예: 근거리 통신 네트워크)를 통해 연결되어 있는 다른 전자 장치(예: 웨어러블 디바이스, 디바이스)와 연동하여 전자 장치 400의 다양한 데이터들을 다른 전자 장치로 전송하거나 수신 받을 수 있다. 상기 근거리 통신 모듈 415은 상시 온 상태를 유지하거나, 전자 장치 400의 설정 또는 사용자 입력에 따라 턴-온(turn-on)될 수 있다.
상기 위치 산출 모듈 417은 전자 장치 400의 위치를 획득하기 위한 모듈로서, 대표적인 예로는 GPS(global position system) 모듈을 포함할 수 있다. 상기 위치 산출 모듈 415은 삼각측량의 원리로 전자 장치 400의 위치를 측정할 수 있다. 예를 들어, 상기 위치 산출 모듈 417은 3개 이상의 기지국들로부터 떨어진 거리 정보와 시간 정보를 산출한 다음 상기 산출된 정보에 삼각법을 적용함으로써, 위도(latitude), 경도(longitude), 및 고도(altitude)에 따른 3차원의 현 위치 정보를 산출할 수 있다. 또는 상기 위치 산출 모듈 417은 3개 이상의 위성들로부터 전자 장치 400의 위치 정보를 실시간으로 계속 수신함으로써 위치 정보를 산출할 수 있다. 전자 장치 400의 위치 정보는 다양한 방법에 의해 획득될 수 있다.
상기 방송 수신 모듈 419은 방송 채널(예: 위성 방송 채널, 지상파 방송 채널 등)을 통하여 외부의 방송 관리 서버로부터 방송 신호(예: TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호 등) 및/또는 방송과 관련된 정보(예: 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보 등)를 수신할 수 있다.
상기 사용자 입력부 420은 전자 장치 400의 동작 제어를 위한 입력 데이터를 사용자 입력에 응답하여 발생할 수 있다. 상기 사용자 입력부 420은 사용자의 다양한 입력을 검출하기 위한 적어도 하나의 입력 수단을 포함할 수 있다. 예를 들어, 상기 사용자 입력부 420은 키패드(key pad), 돔 스위치(dome switch), 물리 버튼, 터치패드(정압/정전), 조그셔틀(jog & shuttle), 그리고 센서(예: 센서 모듈 240) 등을 포함할 수 있다.
상기 사용자 입력부 420은 일부가 전자 장치 400의 외부에 버튼 형태로 구현될 수 있으며, 일부 또는 전체가 터치 패널(touch panel)로 구현될 수도 있다. 상기 사용자 입력부 420은 본 발명의 다양한 실시 예들에 따른 전자 장치 400의 동작을 개시(initiation)하기 위한 사용자 입력을 수신할 수 있고, 사용자 입력에 따른 입력 신호를 발생할 수 있다. 예를 들어, 상기 사용자 입력부 420은 웨어러블 디바이스 연결, 이미지 촬영, 어플리케이션 실행, 데이터 입력(작성, 삽입), 전자 장치 400의 자세 변화, 콘텐츠 표시, 데이터 전송 또는 수신 등을 수행하기 위한 다양한 사용자 입력을 수신할 수 있고, 상기 사용자 입력에 따른 입력 신호를 발생할 수 있다.
상기 터치스크린 430은 입력 기능과 표시 기능을 동시에 수행할 수 있는 입출력 수단을 나타내며, 디스플레이 431(예: 디스플레이(160, 260))와 터치감지부 433를 포함할 수 있다. 상기 터치스크린 430은 전자 장치 400과 사용자 사이에 입출력 인터페이스를 제공하며, 사용자의 터치 입력을 전자 장치 400에게 전달할 수 있고, 또한 전자 장치 400으로부터의 출력을 사용자에게 보여주는 매개체 역할을 담당할 수 있다. 상기 터치스크린 430은 사용자에게 시각적인 출력(visual output)을 보여줄 수 있다. 상기 시각적 출력은 텍스트(text), 그래픽(graphic), 비디오(video)와 이들의 조합의 형태로 나타날 수 있다. 예를 들어, 본 발명의 실시 예에서 상기 터치스크린 430은 디스플레이 431를 통해 전자 장치 400의 동작에 따른 다양한 화면을 표시할 수 있다. 상기 다양한 화면은 예를 들어, 메신저 화면, 통화 화면, 게임 화면, 동영상 재생 화면, 갤러리(gallery) 화면, 웹 페이지 화면, 홈 화면, 또는 네트워크 연결 화면 등 실행하는 어플리케이션에 대응하게 표시 가능한 다양한 사용자 인터페이스(UI, user interface) 기반의 화면이 포함될 수 있다.
상기 터치스크린 430은 상기 디스플레이 431를 통해 특정 화면을 표시하는 중에 상기 터치감지부 433를 통해 사용자로부터 터치(touch), 호버링(hovering) 또는 에어 제스처(air gesture) 중 적어도 하나에 기반하는 이벤트(예: 터치 이벤트, 호버링 이벤트, 에어 제스처 이벤트)를 감지할 수 있고, 상기 이벤트에 따른 입력 신호를 상기 제어부 480에게 전달할 수 있다. 상기 제어부 480은 전달되는 이벤트를 구분하고, 구분된 이벤트에 따른 동작 수행을 제어할 수 있다.
본 발명의 다양한 실시 예들에 따르면, 상기 디스플레이 431은 전자 장치 400에서 처리되는 다양한 정보를 표시(출력)할 수 있다. 예를 들어, 상기 디스플레이 431은 전자 장치 400가 통화 모드로 동작하는 경우 통화와 관련된 사용자 인터페이스(UI, user interface) 또는 그래픽 사용자 인터페이스(GUI, graphical UI)를 표시할 수 있다. 또한 상기 디스플레이 431은 전자 장치 400가 화상통화 모드 또는 촬영 모드인 경우에는 촬영 또는/및 수신된 영상과 해당 모드 운영과 관련된 UI 또는 GUI를 표시할 수 있다. 상기 디스플레이 431은 전자 장치 400의 사용과 관련된 데이터, 콘텐츠, 또는 네트워크에 연결된 다른 전자 장치들(예: 웨어러블 디바이스, 디바이스)에 대한 정보를 표시할 수 있다. 상기 디스플레이 431은 실행되는 어플리케이션에 대응하는 다양한 어플리케이션 실행화면을 표시할 수 있다.
상기 디스플레이 431은 전자 장치 400의 회전 방향(또는 놓인 방향)에 따라 가로모드에 의한 화면 표시, 세로모드에 의한 화면 표시, 또는 가로모드와 세로모드 간의 변화에 따른 화면 표시를 지원할 수 있다. 상기 디스플레이 431은 다양한 디스플레이(예: 디스플레이 160)가 사용될 수 있다. 일부 디스플레이는 투명형 또는 광투명형으로 구성되는 투명 디스플레이(transparent display)로 구현될 수 있다.
상기 터치감지부 433은 상기 디스플레이 431에 안착될 수 있으며, 상기 터치스크린 430 표면에 접촉 또는 근접하는 사용자 입력을 감지할 수 있다. 상기 사용자 입력은 싱글터치(single-touch), 멀티터치(multi-touch), 호버링(hovering), 또는 에어 제스처 중 적어도 하나에 기반하여 입력되는 터치 이벤트 또는 근접 이벤트를 포함할 수 있다. 예를 들어, 상기 사용자 입력은 탭(tap), 드래그(drag), 스윕(sweep), 플릭(flick), 드래그앤드롭(drag&drop), 또는 드로잉 제스처(drawing gesture)(예: 필기) 등)의 방식으로 입력될 수 있다. 상기 터치감지부 433는 상기 터치스크린 430 표면에서 사용자 입력(예: 터치 이벤트 또는 근접 이벤트)을 감지하고, 감지된 사용자 입력에 대응하는 신호를 생성하여 상기 제어부 480에게 전달할 수 있다. 상기 제어부 480은 상기 터치감지부 433에서 전달되는 신호에 의해 사용자 입력(예: 터치 이벤트 또는 근접 이벤트)이 발생된 영역에 해당하는 기능 실행을 제어할 수 있다.
상기 터치감지부 433은 본 발명의 다양한 실시 예들에서 전자 장치 400의 사용과 관련된 동작을 개시하기 위한 사용자 입력을 수신할 수 있고, 사용자 입력에 따른 입력 신호를 발생할 수 있다. 상기 터치감지부 433은 디스플레이 431의 특정 부위에 가해진 압력 또는 디스플레이 431의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력 신호로 변환하도록 구성될 수 있다. 상기 터치감지부 433은 입력 수단(예: 사용자 손가락, 전자 펜 등)이 디스플레이 431의 표면 상에 터치 또는 근접되는 위치 및 면적을 검출할 수 있다. 또한 상기 터치감지부 433은 적용한 터치 방식에 따라 터치 시의 압력까지도 검출할 수 있도록 구현될 수 있다. 상기 터치감지부 433에 대한 터치 또는 근접 입력이 있는 경우, 그에 대응하는 신호(들)는 터치스크린 제어기(미도시)로 전달될 수 있다. 상기 터치스크린 제어기(미도시)는 그 신호(들)를 처리한 다음 해당 데이터를 제어부 480에게 전달할 수 있다. 이로써, 제어부 480은 터치스크린 430의 어느 영역이 터치 또는 근접 되었는지 확인할 수 있고, 그에 대응하는 기능 실행 등을 처리할 수 있다.
상기 오디오 처리부 440은 도 2의 오디오 모듈 280과 동일 또는 유사한 구성을 가질 수 있다. 상기 오디오 처리부 440은 상기 제어부 480로부터 입력 받은 오디오 신호를 스피커(SPK, speaker) 441로 전송하고, 마이크(MIC, microphone) 443로부터 입력 받은 음성 등의 오디오 신호를 제어부 480에 전달하는 기능을 수행할 수 있다. 상기 오디오 처리부 440은 음성/음향 데이터를 제어부 480의 제어에 따라 스피커 441를 통해 가청음으로 변환하여 출력하고, 마이크 443로부터 수신되는 음성 등의 오디오 신호를 디지털 신호로 변환하여 제어부 480에게 전달할 수 있다. 상기 오디오 처리부 440은 데이터에 삽입된 오디오 처리 정보(예: 효과음, 음악파일 등)에 따라 사용자 입력에 반응하는 오디오 신호를 출력할 수 있다.
상기 스피커 441은 무선 통신부 410로부터 수신되거나, 또는 메모리 450에 저장된 오디오 데이터를 출력할 수 있다. 상기 스피커 441은 전자 장치 400에서 수행되는 다양한 동작(기능)과 관련된 음향 신호를 출력할 수도 있다. 상기 스피커 441은 음성 인식, 음성 복제, 디지털 레코딩(recording) 및 전화 기능과 같은 오디오 스트림(stream)의 출력을 담당할 수 있다. 본 발명의 다양한 실시 예들에서는 도시하지 않았지만, 상기 스피커 441은 탈부착 가능한(attachable and detachable) 이어폰(ear phone), 헤드폰(head phone) 또는 헤드셋(head set)을 포함할 수 있고, 이들은 외부 포트를 통해 전자 장치 400에 연결될 수 있다.
상기 마이크 443은 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리할 수 있다. 상기 마이크 443을 통해 처리되는 음성 데이터는 전자 장치 400이 통화 모드인 경우 이동통신 모듈 411을 통하여 외부로 송신 가능한 형태로 변환되어 출력될 수 있다. 상기 마이크 443에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘(noise reduction algorithm)이 구현될 수 있다. 상기 마이크 443은 음성 명령(예: 전자 장치 400과 웨어러블 디바이스의 연결 동작을 개시하기 위한 음성 명령), 음성 인식, 디지털 레코딩(recording) 및 전화 기능과 같은 오디오 스트림의 입력을 담당할 수 있다. 예를 들어, 상기 마이크 443은 음성 신호를 전기 신호로 변환할 수 있다. 본 발명의 다양한 실시 예들에 따르면, 상기 마이크 443은 전자 장치 400에 실장되는 내장 마이크와 전자 장치 400에 연결되는 외장 마이크를 포함할 수 있다.
상기 메모리 450(예: 메모리(130, 230))은 제어부 480에 의해 실행되는 하나 또는 그 이상의 프로그램들(one or more programs)을 저장할 수 있고, 입/출력되는 데이터들의 임시 저장을 위한 기능을 수행할 수도 있다. 상기 입/출력되는 데이터들은 예를 들어, 콘텐츠, 메신저 데이터(예: 대화 데이터), 컨택트(contact) 정보(예: 유선 또는 무선 전화번호 등), 메시지, 미디어 파일(예: 오디오, 동영상, 이미지 등의 파일) 등이 포함될 수 있다.
상기 메모리 450은 디바이스에 의해 발생되는 이벤트(예: 페어링 이벤트 또는 페어링 해제 이벤트)에 따라 전자 장치 400와 웨어러블 디바이스를 연동하여 기능을 실행하는 것과 관련되는 하나 또는 그 이상의 프로그램들과 데이터를 저장할 수 있다. 예를 들어, 상기 메모리 450은 본 발명의 다양한 실시 예들에서 디바이스와의 연결 또는 연결 해제를 감지하는 동작, 디바이스의 연결 또는 연결 해제되는 디바이스의 종류를 판단하는 동작, 판단된 디바이스에 매칭되는 웨어러블 디바이스와 관련된 사용자 인터페이스를 확인하는 동작, 사용자 인터페이스의 존재 유무에 따라 감지된 이벤트에 대응하는 기능의 수행 방식을 결정하는 동작, 결정하는 동작의 결과에 기반하여 사용자 인터페이스를 표시하고 해당 기능을 단독 실행하거나, 또는 기능 실행 명령(사용자 인터페이스 실행 명령)을 웨어러블 디바이스에 전송하여 웨어러블 디바이스와 연동에 의해 기능을 실행하는 동작 등을 처리하는 하나 또는 그 이상의 프로그램들 및 그에 따라 처리되는 데이터를 저장할 수 있다.
상기 메모리 450은 전자 장치 400의 동작에 따른 사용 빈도(예: 웨어러블 디바이스 연결 빈도, 디바이스 사용 빈도, 디바이스 연결 빈도, 어플리케이션 사용 빈도, 콘텐츠 사용 빈도 등), 중요도 및 우선순위도 함께 저장할 수 있다. 상기 메모리 450에는 터치스크린 430 상의 터치 입력 또는 근접 입력에 응답하여 출력되는 다양한 패턴(pattern)의 진동 및 음향에 관한 데이터를 저장할 수도 있다. 상기 메모리 450은 전자 장치 400의 운영체제(OS, operating system), 터치스크린 430을 이용한 입력 및 표시 제어와 관련된 프로그램, 전자 장치 400의 다양한 동작(기능)들의 제어와 관련된 프로그램, 그리고 각 프로그램들의 동작에 의해 발생되는 다양한 데이터 등을 지속적으로 또는 일시적으로 저장할 수 있다.
상기 메모리 450(예: 메모리(130, 230))은 확장 메모리(예: 외장 메모리 234) 또는 내부 메모리(예: 내장 메모리 232)를 포함할 수 있다. 전자 장치 400은 인터넷 상에서 상기 메모리 450의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.
상기 메모리 450은 다양한 소프트웨어를 저장할 수 있다. 예를 들어, 소프트웨어 구성요소는 운영 체제(operating system) 소프트웨어 모듈, 통신 소프트웨어 모듈, 그래픽 소프트웨어 모듈, 사용자 인터페이스 소프트웨어 모듈, MPEG(Moving Picture Experts Group) 모듈, 카메라 소프트웨어 모듈, 또는 하나 이상의 어플리케이션 소프트웨어 모듈 등을 포함할 수 있다. 또한 소프트웨어 구성요소인 모듈은 명령어들의 집합으로 표현할 수 있으므로, 모듈을 명령어 세트(instruction set)라고 표현하기도 한다. 모듈은 또한 프로그램으로 표현하기도 한다. 본 발명의 다양한 실시 예들에서 상기 메모리 450은 앞서 기술한 모듈 이외에 추가적인 모듈(명령어들)을 포함할 수 있다. 또는 필요에 따라, 일부의 모듈(명령어들)을 사용하지 않을 수도 있다.
상기 운영 체제 소프트웨어 모듈은 일반적인 시스템 동작(system operation)을 제어하는 여러 가지의 소프트웨어 구성요소를 포함할 수 있다. 이러한 일반적인 시스템 작동의 제어는, 예를 들면, 메모리 관리 및 제어, 저장 하드웨어(장치) 제어 및 관리, 전력 제어 및 관리 등을 의미할 수 있다. 또한 운영 체제 소프트웨어 모듈은 여러 가지의 하드웨어(장치)와 소프트웨어 구성요소(모듈) 사이의 통신을 원활하게 하는 기능도 수행할 수 있다.
상기 통신 소프트웨어 모듈은 무선 통신부 410 또는 인터페이스부 460을 통해 웨어러블 디바이스, 디바이스, 컴퓨터, 서버 또는 휴대용 단말기 등 다른 전자 장치와 통신을 가능하게 할 수 있다. 그리고, 통신 소프트웨어 모듈은 해당 통신방식에 해당하는 프로토콜 구조로 구성될 수 있다.
상기 그래픽 소프트웨어 모듈은 터치스크린 430 상에 그래픽(graphics)을 제공하고 표시하기 위한 여러 가지 소프트웨어 구성요소를 포함할 수 있다. 상기 그래픽이란 용어는 텍스트(text), 웹 페이지(web page), 아이콘(icon), 디지털 이미지(digital image), 비디오(video), 애니메이션(animation) 등을 포함하는 의미로 사용될 수 있다.
상기 사용자 인터페이스 소프트웨어 모듈은 사용자 인터페이스(UI)에 관련한 여러 가지 소프트웨어 구성요소를 포함할 수 있다. 예를 들어, 사용자 인터페이스의 상태가 어떻게 변경되는지 또는 사용자 인터페이스 상태의 변경이 어떤 조건에서 이루어지는지 등에 대한 내용을 포함할 수 있다.
상기 MPEG 모듈은 디지털 콘텐츠(예: 비디오, 오디오) 관련 프로세스 및 기능들(예: 콘텐츠의 생성, 재생, 배포 및 전송 등)을 가능하게 하는 소프트웨어 구성요소를 포함할 수 있다.
상기 카메라 소프트웨어 모듈은 카메라 관련 프로세스 및 기능들을 가능하게 하는 카메라 관련 소프트웨어 구성요소를 포함할 수 있다.
상기 어플리케이션 모듈은 렌더링 엔진(rendering engine)을 포함하는 웹브라우저(browser), 이메일(email), 즉석 메시지(instant message), 워드 프로세싱(word processing), 키보드 에뮬레이션(keyboard emulation), 어드레스 북(address book), 접촉 리스트(touch list), 위젯(widget), 디지털 저작권 관리(DRM, digital right management), 음성 인식(voice recognition), 위치 결정 기능(position determining function), 위치기반 서비스(location based service) 등을 포함할 수 있다. 본 발명의 다양한 실시 예들에 따라, 상기 어플리케이션 모듈은 웨어러블 디바이스와 연결 설정을 위한 명령어들을 포함할 수 있다. 예를 들어, 상기 어플리케이션 모듈은 전자 장치 400의 웨어러블 디바이스와 연결된 상태에서 디바이스와 관련된 이벤트를 제공할 수 있고, 이벤트에 대응하여 전자 장치 400과 웨어러블 디바이스가 연동하여 기능을 실행하도록 처리할 수 있다.
상기 인터페이스부 460은 도 2의 인터페이스 270과 동일 또는 유사한 구성을 가질 수 있다. 상기 인터페이스부 460은 전자 장치 400에 연결되는 모든 외부 다른 전자 장치와의 인터페이스 역할을 수행할 수 있다. 상기 인터페이스부 460은 외부 다른 전자 장치로부터 데이터를 전송 받거나, 전원을 공급받아 전자 장치 400 내부의 각 구성들에 전달하거나, 전자 장치 400 내부의 데이터가 외부 다른 전자 장치로 전송되도록 할 수 있다. 예를 들어, 유/무선 헤드셋 포트(port), 외부 충전기 포트, 유/무선 데이터 포트, 메모리 카드(memory card) 포트, 식별 모듈이 구비된 장치를 연결하는 포트, 오디오 입/출력(Input/Output) 포트, 비디오 입/출력 포트, 이어폰 포트 등이 인터페이스부 460에 포함될 수 있다. 본 발명의 다양한 실시 예들에 따르면, 상기 인터페이스부 460은 전자 장치 400과 디바이스가 통신이 가능한 연결 상태에서, 상기 디바이스와 통신하여 다양한 데이터들(예: 디바이스에 의한 제어 신호, 전자 장치 400에 의한 응답 신호, 영상 신호, 오디오 신호, 파일 등)을 교환할 수 있다.
상기 카메라 모듈 470(예: 카메라 모듈 291)은 전자 장치 400의 촬영 기능을 지원하는 구성을 나타낸다. 상기 카메라 모듈 470은 피사체의 영상(정지 영상 또는 동영상) 촬영을 지원할 수 있다. 상기 카메라 모듈 470은 제어부 480의 제어에 따라 임의의 피사체를 촬영하고, 촬영된 데이터를 디스플레이 431 및 제어부 480에 전달할 수 있다. 상기 카메라 모듈 470은 입력된 광 신호를 전기적 신호로 변환하는 이미지 센서(또는 카메라 센서)(미도시)와, 상기 이미지 센서로부터 입력되는 전기적 신호를 디지털 영상 데이터로 변환하는 이미지 신호 처리부(미도시) 등을 포함하여 구성될 수 있다. 상기 이미지 센서는 CCD(charge-coupled device) 또는 CMOS(complementary metal-oxide-semiconductor) 등의 방식을 이용하는 센서를 포함할 수 있다. 추가적으로 또는 대체적으로(additionally or alternatively), 카메라 모듈 470은, 예를 들면, 물체가 방사(radiation) 또는 반사(reflection)하는 빛의 파장(wavelength)을 감지하여 색을 판별하기 위한 컬러 센서(color sensor)를 포함할 수 있다. 상기 카메라 모듈 470은 사용자 설정에 따른 다양한 촬영 옵션(예: 주밍(zooming), 화면 비율, 효과(effect)(예: 스케치, 모노, 세피아, 빈티지, 모자이크, 액자 등)에 따른 촬영을 지원하기 위한 이미지 처리 기능을 지원할 수 있다.
상기 제어부 480은 전자 장치 400의 전반적인 동작을 제어할 수 있다. 예를 들어, 상기 제어부 480은 음성 통신, 데이터 통신, 화상 통신 등에 관련된 제어를 수행할 수 있다. 상기 제어부 480은 하나 이상의 프로세서(예: 프로세서 210)를 포함하거나, 또는 제어부 480을 프로세서로 칭할 수도 있다. 예를 들어, 상기 제어부 480은 통신 프로세서(CP, communication processor), 어플리케이션 프로세서(AP, application processor), 인터페이스(예: GPIO(general purpose input/output)), 또는 내부 메모리 등을 별개의 구성요소로 포함하거나, 또는 하나 이상의 집적화된 회로에 집적화될 수 있다. 상기 어플리케이션 프로세서는 여러 가지의 소프트웨어 프로그램을 실행하여 전자 장치 400을 위한 여러 기능을 수행할 수 있고, 상기 통신 프로세서는 음성 통신 및 데이터 통신을 위한 처리 및 제어를 수행할 수 있다. 또한 상기 제어부 480은 메모리 450에 저장되어 있는 특정한 소프트웨어 모듈(명령어 세트(instruction set))을 실행하여 그 모듈에 대응하는 특정한 여러 가지의 기능을 수행하는 역할을 담당할 수 있다.
본 발명의 다양한 실시 예들에 따르면, 상기 제어부 480은 전자 장치들(예: 전자 장치 400, 웨어러블 디바이스, 디바이스)의 연동 및 연동에 따른 다양한 기능을 수행하는 것과 관련된 동작을 제어할 수 있다. 예를 들어, 상기 제어부 480은 전자 장치 400과 웨어러블 디바이스와의 연결을 설정할 수 있다. 제어부 480은 전자 장치 400과 웨어러블 디바이스가 연결된 상태에서 디바이스에 의해 발생하는 이벤트를 감지할 수 있다. 예를 들어, 제어부 480은 디바이스의 연결에 대응하는 페어링 이벤트 또는 디바이스의 연결 해제에 대응하는 페어링 해제 이벤트를 감지할 수 있다. 제어부 480은 디바이스에 의한 이벤트 감지에 응답하여 연결 또는 연결 해제되는 디바이스의 종류를 판단할 수 있고, 판단된 디바이스에 매칭되는 웨어러블 디바이스와 관련된 기능 또는 전용 사용자 인터페이스를 확인할 수 있다.
다양한 실시 예들에 따르면, 제어부 480은 상기 기능 또는 사용자 인터페이스의 존재 유무에 따라 상기 감지된 이벤트에 대응하는 기능의 수행 방식을 결정할 수 있다. 예를 들어, 제어부 480은 상기 디바이스에 매칭되는 웨어러블 디바이스와 관련된 기능이 존재하는 경우 상기 이벤트에 대응하는 기능을 웨어러블 디바이스와 연동에 의한 실행인 것으로 판단할 수 있다. 또한 제어부 480은 상기 디바이스에 매칭되는 웨어러블 디바이스와 관련된 기능이 존재하지 않는 경우 상기 이벤트에 대응하는 기능을 전자 장치 400의 단독(독립적) 실행인 것으로 판단할 수 있다
다양한 실시 예들에 따르면, 제어부 480은 상기 결정하는 동작의 결과에 기반하여 사용자 인터페이스(예: 제1 사용자 인터페이스)를 표시하고 전자 장치 400의 단독으로 기능 운영을 제어할 수 있다. 또한 제어부 480은 상기 결정하는 동작의 결과에 기반하여 기능 실행 명령(또는 제2 사용자 인터페이스 실행 명령)을 웨어러블 디바이스에 전송할 수 있고, 웨어러블 디바이스와 연동에 의해 기능 운영을 제어할 수 있다.
본 발명의 다양한 실시 예들에 따르면, 상기 제어부 480은 웨어러블 디바이스를 유선 또는 무선 통신에 기반하여 연결할 수 있고, 전자 장치 400에 유선 또는 무선 통신에 기반하여 연결되거나, 또는 그 연결이 해제되는 이벤트에 대응하는 기능 제어 명령(예: 기능 실행 명령, 기능 종료 명령)을 웨어러블 디바이스에 전송할 수 있고, 웨어러블 디바이스로부터의 사용자 입력(예: 제스처 입력)에 응답하여 관련 기능 실행을 제어할 수 있다.
본 발명의 다양한 실시 예들에 따르면, 상기 제어부 480은 메모리 450에 저장된 소프트웨어 모듈들과 연동하여 다양한 실시 예들에 따른 전자 장치 400의 전술한 바와 같은 전자 장치들의 연동 기능을 수행할 수 있다. 또한 본 발명의 다양한 실시 예들에 따르면, 상기 제어부 480은 상기한 전자 장치들의 연동 기능을 처리할 수 있는 하나 이상의 모듈들로 구현될 수 있다. 또한 본 발명의 다양한 실시 예들에 따르면, 상기 제어부 480은 메모리 450에 저장되는 하나 또는 그 이상의 프로그램들을 실행하여 본 발명의 다양한 실시 예들에 따른 전자 장치 400의 동작(예: 전자 장치 400, 디바이스 500, 웨어러블 디바이스 600 간의 연동 및 연동에 의한 기능 실행 동작)을 제어하는 하나 또는 그 이상의 프로세서들(one or more processors)로 구현될 수 있다.
본 발명의 다양한 실시 예들에 따른 제어부 480은 상기의 기능 외에 전자 장치 400의 통상적인 기능과 관련된 각종 동작을 제어할 수 있다. 예를 들어, 제어부 480은 특정 어플리케이션 실행 시 그의 운영 및 화면 표시를 제어할 수 있다. 또한 제어부 480은 터치 기반 또는 근접 기반의 입력 인터페이스(예: 터치스크린 430)에서 지원하는 다양한 터치 이벤트 또는 근접 이벤트 입력에 대응하는 입력신호를 수신하고 그에 따른 기능 운영을 제어할 수 있다. 또한 제어부 480은 유선 통신 기반 또는 무선 통신 기반으로 각종 데이터의 송수신을 제어할 수도 있다.
상기 전원 공급부 490은 제어부 480의 제어에 의해 외부의 전원, 내부의 전원을 인가 받아 각 구성 요소들의 동작에 필요한 전원을 공급할 수 있다. 본 발명의 다양한 실시 예들에서 상기 전원 공급부 490은 제어부 480의 제어에 의해 제어부 480의 하나 또는 그 이상의 프로세서들, 디스플레이 431, 무선 통신부 410 등에 전원을 공급 또는 차단(on/off)할 수 있다.
본 발명에서 설명되는 다양한 실시 예들은 소프트웨어, 하드웨어 또는 이들의 조합된 것을 이용하여 컴퓨터(computer) 또는 이와 유사한 장치로 읽을 수 있는 기록 매체 내에서 구현될 수 있다. 하드웨어적인 구현에 의하면, 본 발명에서 설명되는 다양한 실시 예들은 ASICs(application specific integrated circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛(unit) 중 적어도 하나를 이용하여 구현될 수 있다.
본 발명의 다양한 실시 예들에서, 상기 기록 매체는 웨어러블 디바이스와 연결된 상태에서 디바이스의 연결에 대응하여 이벤트를 감지하는 동작, 상기 이벤트에 관련한 상기 디바이스에 매칭된 웨어러블 디바이스 전용 사용자 인터페이스를 판단하는 동작, 상기 사용자 인터페이스의 존재 유무에 대응하여 기능 수행 방식을 결정하는 동작, 상기 결정하는 동작의 결과에 기반하여 상기 기능을 독립적으로 실행하거나 상기 웨어러블 디바이스와 연동에 의해 실행하는 동작을 실행시키기 위한 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체를 포함할 수 있다.
그리고 일부의 경우에 본 명세서에서 설명되는 실시 예들이 제어부 480 자체로 구현될 수 있다. 또한 소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수도 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 동작을 수행할 수 있다.
본 발명의 다양한 실시 예들에 따르면, 전자 장치 400가 수행하는 기능 중의 적어도 일부는 그 외부 장치(예: 서버 106, 웨어러블 디바이스)에 의해 수행될 수 있다. 예를 들면, 상기 서버 106은 제어부 480에 대응하는 처리 모듈을 포함하고, 상기 처리 모듈을 이용하여 전자 장치 400에서 전송되는 정보의 적어도 일부에 기반하여 전자 장치 400의 다른 전자 장치들 간의 연동 및 그에 의한 기능 실행을 제어하는 것과 관련된 기능의 적어도 일부를 처리하고 그 결과를 전자 장치 400에 전송할 수 있다.
이상에서 살펴본 바와 같이, 본 발명의 다양한 실시 예들에 따른 전자 장치 400은 웨어러블 디바이스 600 및 외부 디바이스 500과 연결을 위한 통신부(예: 무선 랜 모듈 413, 근거리 통신 모듈 415, 인터페이스부 460 등)와, 상기 웨어러블 디바이스 600과 연결된 상태에서, 상기 외부 디바이스 500의 연결에 관련한 이벤트를 감지하고, 상기 이벤트에 관련한 상기 외부 디바이스 500에 매칭되는 기능을 판단하고, 상기 기능을 실행하기 위한 실행 명령을 상기 웨어러블 디바이스 600에 전송하도록 제어하는 제어부 480을 포함할 수 있다.
이상에서 살펴본 바와 같이, 본 발명의 다양한 실시 예들에 따른 전자 장치 400은, 다른 전자 장치들(예: 웨어러블 디바이스 600 또는 외부 디바이스 500)과 연결을 위한 통신부(예: 무선 랜 모듈 413, 근거리 통신 모듈 415, 인터페이스부 460 등)와, 제1 전자 장치(예: 웨어러블 디바이스)와 연결된 상태에서, 제2 전자 장치(예: 디바이스)의 연결에 의한 이벤트를 감지하고, 상기 이벤트에 관련한 상기 제2 전자 장치에 매칭되는 기능을 판단하고, 상기 제1 전자 장치에서 상기 기능의 실행을 위한 실행 명령을 상기 제1 전자 장치에 전송하도록 제어하는 제어부 480을 포함할 수 있다.
도 5는 본 발명의 다양한 실시 예들에 따른 전자 장치들 간의 동작을 설명하기 위해 도시하는 도면이다.
상기 도 5에 도시한 바와 같이, 전자 장치 400은, 예를 들면, 상기 도 4에 도시된 전자 장치 400의 전체 또는 일부를 포함할 수 있고, 상기 도 4의 전자 장치 400과 동일한 또는 다른 종류의 장치일 수 있다. 본 발명의 다양한 실시 예들에서 상기 전자 장치 400은 설정된 통신 인터페이스(예: 도 4의 무선 랜 모듈 413, 근거리 통신 모듈 415, 인터페이스부 460)를 통해 웨어러블 디바이스 600과 유선 또는 무선 통신에 기반하여 연결될 수 있다. 또한 상기 전자 장치 400은 설정된 통신 인터페이스(예: 도 4의 무선 랜 모듈 413, 근거리 통신 모듈 415, 인터페이스부 460)를 통해 디바이스 500과 유선 또는 무선 통신에 기반하여 연결될 수 있다.
디바이스 500은 상기 전자 장치 400과 설정된 통신 인터페이스를 통해 유선 또는 무선 통신에 기반하여 연결될 수 있다. 본 발명의 다양한 실시 예들에서 디바이스 500은, 예를 들면, 전자 펜 510, 이어폰 520, 충전기 530, 디스플레이 디바이스 540, 또는 다른 전자 장치 550을 포함할 수 있고, 이들에 한정되지 않으며 전자 장치 400에 연결이 가능한 다양한 종류의 디바이스들이 포함될 수 있다.
웨어러블 디바이스 600은 상기 전자 장치 400과 설정된 통신 인터페이스를 통해 유선 또는 무선 통신에 기반하여 연결될 수 있고, 본 발명의 다양한 실시 예들에서는 무선 통신에 기반하여 연결되는 것을 예시로 설명한다. 본 발명의 다양한 실시 예들에서 웨어러블 디바이스 600은 사용자의 신체에 착용 가능한 장치를 나타낼 수 있다. 예를 들어, 손목에 착용 가능한 손목 시계형 장치, 눈가에 착용 가능한 안경형 장치 등을 포함할 수 있고, 전자 장치 400과 연동하여 다양한 기능을 제공할 수 있는 장치를 나타낼 수 있다.
본 발명의 다양한 실시 예들에서, 상기 웨어러블 디바이스 600은 통신부 610, 터치스크린 620 및 제어부 630을 포함할 수 있다.
다양한 실시 예들에서, 상기 웨어러블 디바이스 600의 상기 통신부 610은 전자 장치 400과 연결을 위한 통신 인터페이스를 포함할 수 있고, 상기 전자 장치 400과 상기 웨어러블 디바이스 600이 서로의 통신을 위해 데이터를 전송 또는 수신하는 구성을 포함할 수 있다. 다양한 실시 예들에서, 상기 웨어러블 디바이스 600의 상기 터치스크린 620은 사용자로부터 입력을 수신하기 위한 구성(예: 터치 감지부)을 포함할 수 있고, 상기 사용자로부터 접촉 또는 근접 형태의 입력을 수신하여 상기 제어부 630에 전달할 수 있다. 상기 터치스크린 620은 상기 제어부 630에서 전달되는 출력 관련 데이터를 사용자에게 표시하는 구성(예: 디스플레이)을 포함할 수 있다. 다양한 실시 예들에서, 상기 웨어러블 디바이스 600의 상기 제어부 630은 상기 웨어러블 디바이스 600의 전반적인 동작을 제어할 수 있다. 예를 들어, 상기 제어부 630은 상기 통신부 610으로부터 전달 받은 상기 전자 장치 400의 데이터를 터치스크린 620에 전달하여 표시하도록 제어하거나, 상기 터치스크린 620을 통해 전달되는 사용자 입력에 대응하는 기능 제어 신호를 생성하여 상기 통신부 610를 통해 상기 전자 장치 400에 전송하는 구성을 포함할 수 있다.
본 발명의 다양한 실시 예들에서, 상기 전자 장치 400과 상기 웨어러블 디바이스 600은 통상적인 절차에 따라 연결될 수 있다. 한 실시 예에 따르면, 전자 장치 400은 설정된 통신 인터페이스에 따라 무선 랜 모듈 413, 근거리 통신 모듈 415 등에 의한 무선 통신 기반으로 웨어러블 디바이스 600과 연결을 수행하거나, 또는 인터페이스부 460을 통해 유선 통신 기반으로 웨어러블 디바이스 600과 연결될 수 있다.
본 발명의 다양한 실시 예들에서, 상기 전자 장치 400은 상기 디바이스 500과 통상적인 절차에 따라 연결될 수 있다. 다양한 실시 예들에 따르면, 디바이스 500이 전자 펜 510인 경우, 상기 전자 펜 510은 전자 장치 400에 마련된 홀(hole)(미도시)에 실장(삽입)되어 장착될 수 있다. 전자 장치 400은 전자 펜 510이 상기 홀에서 탈착(이탈)되는 경우 상기 전자 펜 510에 의한 페어링 이벤트를 감지할 수 있고 통상적인 절차에 따라 전자 펜 510과 연결하여 통신(예: 데이터 교신)을 수행할 수 있다. 전자 장치 400은 전자 펜 510이 상기 홀에 장착(삽입)되는 경우 상기 전자 펜 510에 의한 페어링 해제 이벤트를 감지할 수 있고 통상적인 절차에 따라 전자 펜 510과 연결을 해제할 수 있다.
다양한 실시 예들에 따르면, 디바이스 500이 이어폰 520인 경우, 상기 이어폰 520은 이어폰 단자를 통해 전자 장치 400에 마련된 이어폰 커넥터(또는 포트)(미도시)에 연결될 수 있다. 전자 장치 400은 이어폰 520이 상기 이어폰 커넥터에 삽입되는 경우 상기 이어폰 520에 의한 페어링 이벤트를 감지할 수 있고 통상적인 절차에 따라 이어폰 520과 연결하여 통신(예: 데이터 교신)을 수행할 수 있다. 전자 장치 400은 이어폰 520이 상기 이어폰 커넥터에서 탈착(이탈)되는 경우 상기 이어폰 520에 의한 페어링 해제 이벤트를 감지할 수 있고 이어폰 520과 연결을 해제할 수 있다.
다양한 실시 예들에 따르면, 디바이스 500이 충전기 530인 경우, 상기 충전기 530은 데이터 케이블(data cable)을 통해 전자 장치 400에 마련된 데이터 커넥터(또는 충전 포트)(미도시)에 연결될 수 있다. 전자 장치 400은 충전기 530이 상기 데이터 커넥터에 삽입되는 경우 상기 충전기 530에 의한 페어링 이벤트를 감지할 수 있고 충전기 530과 연결하여 통신(예: 충전 동작)을 수행할 수 있다. 전자 장치 400은 충전기 530이 상기 데이터 커넥터에서 탈착(이탈)되는 경우 상기 충전기 530에 의한 페어링 해제 이벤트를 감지할 수 있고 충전기 530과 연결을 해제하고 충전 동작을 종료할 수 있다.
다양한 실시 예들에 따르면, 디바이스 500이 디스플레이 디바이스 540인 경우, 상기 디스플레이 디바이스 540은 USB 또는 HDMI 등에 기반하여 유선 통신을 통해 전자 장치 400에 연결될 수 있고, 또는 근거리 통신 기술이나 무선 인터넷 기술 등에 기반하여 무선 통신을 통해 전자 장치 400에 연결될 수 있다. 전자 장치 400은 디스플레이 디바이스 540이 상기 유선 또는 무선 통신에 기반하여 접속(access)될 시 상기 디스플레이 디바이스 540에 의한 페어링 이벤트를 감지할 수 있고 디스플레이 디바이스 540과 연결하여 통신(예: 외부 출력 또는 멀티스크린(multi-screen) 동작, 미러링(mirroring) 동작 등)을 수행할 수 있다. 전자 장치 400은 디스플레이 디바이스 540이 상기 유선 또는 무선 통신에 따른 상기 접속이 단절될 시 상기 디스플레이 디바이스 540에 의한 페어링 해제 이벤트를 감지할 수 있고 디스플레이 디바이스 540과 연결을 해제하고 관련 동작을 종료할 수 있다.
다양한 실시 예들에 따르면, 디바이스 500이 다른 전자 장치 550인 경우, 상기 다른 전자 장치 550은 무선 통신부(예: 도 4의 무선 통신부 410)에 기반하여 무선 통신을 통해 전자 장치 400에 연결될 수 있고, 또는 인터페이스부(예: 도 4의 인터페이스부 460)에 기반하여 유선 통신을 통해 전자 장치 400에 연결될 수 있다. 전자 장치 400은 다른 전자 장치 550이 상기 유선 또는 무선 통신에 기반하여 접속될 시 상기 다른 전자 장치 550에 의한 페어링 이벤트를 감지할 수 있고 다른 전자 장치 550과 연결하여 통신(예: 데이터 송수신 또는 통화 동작 등)을 수행할 수 있다. 전자 장치 400은 다른 전자 장치 550이 상기 유선 또는 무선 통신에 따른 상기 접속이 단절될 시 상기 다른 전자 장치 550에 의한 페어링 해제 이벤트를 감지할 수 있고 다른 전자 장치 550과 연결을 해제하고 관련 동작을 종료할 수 있다.
상기 도 5를 참조하면, 본 발명의 다양한 실시 예들에 따르면, 전자 장치 400과 웨어러블 디바이스 600은 서로 연결된 상태일 수 있다. 예를 들어, 전자 장치 400과 웨어러블 디바이스 600은 와이파이 다이렉트(wifi-direct), 블루투스, NFC 등의 통신 방식을 통해 연동이 가능하도록 연결 과정(예: 페어링(pairing) 과정)을 수행할 수 있다. 상기 전자 장치 400과 상기 웨어러블 디바이스 600은 상기 연결 과정 수행에 따라 서로 간의 연동이 가능할 수 있고, 이는 전자 장치 400과 웨어러블 디바이스 600 간에 실시간으로 획득한 데이터에 대해 공유가 가능함을 의미할 수 있다.
전자 장치 400과 웨어러블 디바이스 600이 서로 연결된 상태에서, 제어부 480은 디바이스 500에 의한 이벤트를 감지할 수 있다. 본 발명의 다양한 실시 예들에서 상기 이벤트는 디바이스 500이 전자 장치 400에 통신 가능한 상태로 연결되는 페어링 이벤트와, 디바이스 500이 전자 장치 400에 통신 불가능 상태로 그 연결이 해제되는 페어링 해제 이벤트를 포함할 수 있다. 예를 들어, 디바이스 500은 전술한 바와 같이 다양한 통신 인터페이스 중 디바이스 500이 지원하는 통신 인터페이스에 기반하여 전자 장치 400에 연결될 수 있다. 제어부 480은 이벤트 감지부 481에서 통신 인터페이스를 통해 디바이스 500이 연결되거나 그 연결의 해제되는 것을 검출할 수 있다. 본 발명의 다양한 실시 예들에서 상기 이벤트 감지부 481은 전자 장치 400에 설정되는 다양한 통신 인터페이스들 중 적어도 하나에서 디바이스 500이 연결되거나 그 연결이 해제되는 상태 변화를 감지할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400과 웨어러블 디바이스 600이 연결(예: 페어링)이 완료되어 연동 기능을 수행하는 중에, 상기 전자 장치 400에서 상기 디바이스 500의 연결이나 연결 해제가 감지될 수 있다. 한 실시 예에 따르면, 전자 장치 400에 물리적으로 내장된 전자 펜 510은 전자 장치 400에 탈착 또는 장착(부착) 시에 전자 장치 400으로 하여금 이벤트를 발생시킬 수 있다.
제어부 480은 상기 이벤트 감지부 481을 통해 상기 디바이스 500에 의한 페어링 이벤트를 감지하면, 상기 페어링 이벤트에 응답하여 상기 디바이스 500과 상기 웨어러블 디바이스 600을 연동하여 사용 가능한 기능을 확인할 수 있다. 제어부 480은 확인된 기능과 관련된 사용자 인터페이스(예: 제1 사용자 인터페이스)를 전자 장치 400의 디스플레이 431에 표시하도록 제어할 수 있다. 제어부 480은 상기 사용자 인터페이스의 표시 동작에 병렬적으로 또는 순차적으로, 상기 기능 및 상기 기능과 관련된 사용자 인터페이스(예: 제2 사용자 인터페이스)의 기능 실행 명령을 상기 웨어러블 디바이스 600에 전송할 수 있다.
본 발명의 다양한 실시 예들에서 상기 제1 사용자 인터페이스와 상기 제2 사용자 인터페이스를 구분하여 설명하지만, 상기 제1 사용자 인터페이스와 상기 제2 사용자 인터페이스는 장치들(예: 전자 장치 400, 웨어러블 디바이스 600, 디바이스 500)의 연동에 따라 실행되는 기능에 공통적으로 관련되는 사용자 인터페이스를 나타낼 수 있다. 상기 제1 사용자 인터페이스와 상기 제2 사용자 인터페이스는 해당 사용자 인터페이스가 전자 장치 400에서 구현되는지 또는 웨어러블 디바이스 600에서 구현되는지에 따라 구분될 수 있다. 예를 들어, 상기 웨어러블 디바이스 600은 사용자 인터페이스를 표시하는 디스플레이의 크기가 전자 장치 400의 디스플레이 431보다 작을 수 있다. 따라서 본 발명의 다양한 실시 예들에서 상기 제2 사용자 인터페이스는 상기 웨어러블 디바이스 600의 디스플레이 크기에 대응하도록 상기 제1 사용자 인터페이스와는 다른 형태로 구현될 수 있다. 한 실시 예에 따르면, 상기 제2 사용자 인터페이스는 후술하는 도면들(예: 도 7, 도 8, 도 9)을 참조한 화면 예시에서와 같이, 제1 사용자 인터페이스의 다양한 구성(예: 메뉴)들 중 핵심적인 구성(예: 메인 메뉴)만 선별하여 상기 제1 사용자 인터페이스에 비해 보다 간소화된 형태로 재구성되어 제공될 수 있다. 한 실시 예에 따르면, 상기 제1 사용자 인터페이스와 상기 제2 사용자 인터페이스는 상기 기능과 관련되는 구성들을 포함하되, 상기 제2 사용자 인터페이스는 상기 제1 사용자 인터페이스에 구현되는 구성들 중 적어도 일부의 구성에 기반하여 구현될 수 있다. 전자 장치 400은 상기 제1 사용자 인터페이스에 기반하여 웨어러블 디바이스 600에 대응하는 제2 사용자 인터페이스로 재구성하여 제공할 수 있다.
또한 본 발명의 다양한 실시 예들에서 상기 제1 사용자 인터페이스와 상기 제2 사용자 인터페이스 각각은, 전자 장치 400과 웨어러블 디바이스 600이 연동하지 않고 각각 독립적으로 기능을 실행하는 경우, 또는 전자 장치 400과 웨어러블 디바이스 600이 연동하여 기능을 실행하는 경우에 따라서 다른 형태로 제공될 수 있다.
다양한 실시 예들에 따르면, 제어부 480은 이벤트 감지부 481에 의해 상기 디바이스 500의 연결이나 연결 해제가 감지되는 경우, 기능 처리부 483에 의해 상기 감지된 디바이스 500에 매칭되는 사용자 인터페이스(예: 웨어러블 디바이스 600에서 구현 가능한 제2 사용자 인터페이스(예: 웨어러블 디바이스 600 전용 사용자 인터페이스))가 존재하는지 검색을 수행할 수 있다. 예를 들어, 디바이스 500이 전자 펜 510이고, 상기 전자 펜 510에 의해 동작 가능한 기능으로 그림 그리기 기능이 있을 수 있고, 그림 그리기 기능에 따라 사용자가 전자 펜 510을 이용하여 디스플레이 431을 통해 그림을 그릴 수 있는 사용자 인터페이스가 매칭될 수 있다. 상기 사용자 인터페이스는 그림을 직접 그리는 부분과 그림을 그리는 데에 필요한 부가 옵션(option)(예: 펜 속성(굵기, 색상 등) 설정)과 관련된 부분으로 구분될 수 있다.
본 발명의 다양한 실시 예들에서는 전자 장치 400과 웨어러블 디바이스 600이 연결되어 연동되는 경우, 상기 사용자 인터페이스를 구분하여 전자 장치 400에서 구현되는 제1 사용자 인터페이스와 웨어러블 디바이스 600에서 구현되는 제2 사용자 인터페이스를 정의할 수 있다.
다양한 실시 예들에 따르면, 이벤트 감지부 481에 의해 전자 펜 510에 의한 페어링 이벤트가 감지되는 경우, 전자 장치 400에서는 디스플레이 431을 통해 그림을 직접 그리는 데에 필요한 요소로 구성되는 제1 사용자 인터페이스가 구현될 수 있고, 상기 웨어러블 디바이스 600에서는 상기 그림을 그리는 데에 필요한 부가 옵션과 관련된 요소로 구성되는 제2 사용자 인터페이스가 제공될 수 있다. 다양한 실시 예들에 따르면, 디스플레이 디바이스 540이 감지되는 경우, 실행되는 기능의 표시에 관련되는 부분(예: 기능 실행화면 표시 부분)을 제1 사용자 인터페이스로 구현하여 전자 장치 400에서 제공할 수 있고, 실행되는 기능의 제어에 관련되는 부분(예: 실행화면 표시에 대한 제어 부분)을 제2 사용자 인터페이스로 구현하여 웨어러블 디바이스 600에서 제공할 수 있다.
다양한 실시 예들에 따르면, 제어부 480(예: 기능 처리부 483)은 상기 페어링 이벤트에 응답하여 상기 웨어러블 디바이스 600과 연동하여 사용 가능한 기능을 확인할 수 있다. 제어부 480(예: 기능 처리부 483)은 상기 확인된 기능과 관련하여 사용자 인터페이스(예: 제2 사용자 인터페이스)가 존재할 경우 상기 기능 및 상기 기능에 대응하는 제2 사용자 인터페이스 실행에 대한 기능 실행 명령을 상기 웨어러블 단말기 600에 전송할 수 있다.
다양한 실시 예들에 따르면, 제어부 480(예: 기능 처리부 483)은 상기 확인된 기능과 관련하여 웨어러블 디바이스 600에 매칭되는(웨어러블 디바이스 600에서 구현 가능한) 사용자 인터페이스(예: 제2 사용자 인터페이스)가 존재하지 않거나, 또는 상기 웨어러블 디바이스 600과 관련하여 사용 가능한 기능이 없는 경우 사용자 인터페이스의 구분 없이 전자 장치 400에 의해 사용자 인터페이스를 실행하고, 연동 기능이 아닌 전자 장치 400에서 단독으로(독립적으로) 해당 기능과 관련하여 동작을 처리할 수 있다.
다양한 실시 예들에 따르면, 제어부 480(예: 기능 처리부 483)은 상기 확인된 기능과 관련하여 웨어러블 디바이스 600에 매칭되는 사용자 인터페이스가 존재하지 않거나, 또는 상기 디바이스 600과 관련하여 사용 가능한 기능이 없는 경우 관련 기능(예: 어플리케이션) 또는 사용자 인터페이스(예: 제2 사용자 인터페이스) 등을 전자 장치 400 또는 디바이스 500에서 웨어러블 디바이스 600으로 전송 또는 설치하도록 제어할 수 있다. 한 실시 예에 따르면, 전자 장치 400 또는 디바이스 500에서 상기 관련 기능 또는 상기 제2 사용자 인터페이스가 기 설치되어 있는 경우 웨어러블 디바이스 600으로 관련 데이터를 전송하여 설치를 제어할 수 있다. 한 실시 예에 따르면, 전자 장치 400 또는 디바이스 500에서 상기 관련 기능 또는 상기 제2 사용자 인터페이스가 기 설치되어 있지 않는 경우 관련 서버(예: 어플리케이션 서버, 웹 서버 등)에서 관련 데이터를 다운로드 하여 웨어러블 디바이스 600으로 전송하거나, 또는 상기 관련 데이터를 웨어러블 디바이스 600에서 다운로드 하여 설치하도록 제어할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 상기 전자 장치 400에 의해 기능 실행과 그에 대응하는 제2 사용자 인터페이스 실행에 대한 상기 기능 실행 명령을 수신할 수 있다. 상기 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하면, 상기 기능 실행 명령에 대응하는 정보를 표시할 수 있고 그에 대응하는 사용자 입력(예: 제1 사용자 입력)(예: 수락 또는 거부 등) 수신을 대기할 수 있다. 상기 웨어러블 디바이스 600은 사용자에 의해 상기 기능과 관련하여 웨어러블 600에서의 사용을 수락하는 것과 관련된 사용자 입력을 수신할 경우 상기 제2 사용자 인터페이스를 표시하여 사용자에게 제공할 수 있다. 상기 사용자 입력은, 예를 들면, 상기 웨어러블 디바이스 600의 자세 변화 입력, 생체 인식 입력, 버튼 입력, 또는 터치 제스처 입력 등을 포함할 수 있다. 한 실시 예에 따르면, 상기 사용자 입력은 사용자가 웨어러블 디바이스 600의 터치스크린 620 또는 웨어러블 디바이스 600에 탑재된 버튼(미도시)을 터치하거나, 웨어러블 디바이스 600의 자세를 변화(예: 기울임)하는 제스처(예: 손목 시계형 장치인 경우 사용자의 팔목을 기우는 제스처 등)를 수행하거나, 또는 웨어러블 디바이스 600에 구비된 카메라를 주시하는 제스처 등에 기반하여 이루어질 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 제2 사용자 인터페이스에 기반하여 사용자 입력(예: 제2 사용자 입력)을 수신할 수 있고, 상기 사용자 입력에 대응하는 기능 제어 신호를 상기 전자 장치 400에 전송할 수 있다. 그러면, 전자 장치 400은 상기 웨어러블 디바이스 600의 기능 제어 신호를 수신할 수 있고, 상기 기능 제어 신호에 응답하여 제1 사용자 인터페이스에 기반하여 상기 기능 제어 신호에 대응하는 기능(동작)을 처리하여 표시할 수 있다.
이상에서와 같이, 본 발명의 다양한 실시 예들에 따르면, 전자 장치 400과 웨어러블 디바이스 600이 연결된 상태에서 상기 이벤트 감지부 481을 통해 상기 디바이스 500의 페어링 이벤트에 대응하여 연동 기능을 수행할 수 있다. 본 발명의 다양한 실시 예들에 따르면, 제어부 480은 상기 연동 기능을 수행하는 동안 상기 이벤트 감지부 481을 통해 디바이스 500에 의한 페어링 해제 이벤트를 감지할 수 있다.
제어부 480은 상기 디바이스 500에 의한 페어링 해제 이벤트를 감지하면, 상기 페어링 해제 이벤트에 응답하여 상기 웨어러블 디바이스 500과 동작 중인 연동 기능을 선택적으로 종료할 수 있다. 예를 들어, 제어부 480은 상기 웨어러블 디바이스 500에게 수행 중인 기능 및 상기 기능과 관련된 사용자 인터페이스(예: 제2 사용자 인터페이스)의 표시를 종료하도록 제어할 수 있다. 한 실시 예에 따르면, 제어부 480은 상기 기능 및 상기 기능과 관련된 사용자 인터페이스(예: 제2 사용자 인터페이스)의 표시를 종료하도록 하는 기능 종료 명령을 상기 웨어러블 디바이스 600에 전송할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 웨어러블 디바이스 600에 기능 종료 명령을 전송하고, 상기 웨어러블 디바이스 600과 연동하여 수행 중이던 기능을 단독으로 처리할 수도 있다. 한 실시 예에 따르면, 전자 장치 400은 표시 중인 제1 사용자 인터페이스를 제1 사용자 인터페이스와 제2 사용자 인터페이스가 통합된 사용자 인터페이스로 전환하여 표시할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 상기 전자 장치 400에 의해 기능 종료와 그에 대응하는 제2 사용자 인터페이스 표시 종료에 대한 상기 기능 종료 명령을 수신할 수 있다. 상기 웨어러블 디바이스 600은 상기 기능 종료 명령을 수신하면, 상기 기능 종료 명령에 대응하여 상기 전자 장치 400과 연동하여 실행 중인 기능을 종료하고 제2 사용자 인터페이스 표시를 종료할 수 있다.
본 발명의 다양한 실시 예들에서는 전자 장치 400과 웨어러블 디바이스 600이 연결된 상태에서 디바이스 500에 의한 페어링 이벤트에 따라 연동 기능을 실행할 수 있고, 디바이스 500에 의한 페어링 해제 이벤트에 따라 웨어러블 디바이스 600에서 연동 기능을 종료하는 것을 예시로 설명한다. 하지만, 본 발명의 다양한 실시 예들이 이에 한정되는 것은 아니며, 디바이스 500에 의한 페어링 해제 이벤트가 있더라도 전자 장치 400과 웨어러블 디바이스 600 간의 연동 기능을 계속하여 유지되도록 동작할 수도 있다.
이상에서 살펴본 바와 같이, 본 발명의 다양한 실시 예들에 따른 전자 장치들을 연동하기 위한 시스템은, 전자 장치 400과 설정된 통신 인터페이스를 통해 유선 또는 무선 통신에 기반하여 연결하고, 상기 전자 장치 400에 사용자 입력에 대응하는 제어 신호를 전송하는 웨어러블 디바이스 600과, 상기 전자 장치 400과 설정된 통신 인터페이스를 통해 유선 또는 무선 통신에 기반하여 연결되고, 상기 전자 장치 400과 통신 가능한 상태로 연결에 대응하여 이벤트를 발생하는 디바이스 500과, 상기 웨어러블 디바이스 600과 연결된 상태에서, 상기 디바이스 500의 연결에 의한 이벤트를 감지하고, 상기 이벤트에 응답하여 상기 디바이스 500에 매칭되는 기능을 판단하고, 상기 웨어러블 디바이스 600에서 상기 기능의 실행을 위한 실행 명령을 상기 웨어러블 디바이스 600에 전송하는 상기 전자 장치를 포함할 수 있다.
도 6은 본 발명의 다양한 실시 예들에 따른 전자 장치들의 연동에 의해 기능을 실행하는 동작을 설명하기 위해 도시하는 도면이다.
상기 도 6을 참조하면, 동작 601에서, 전자 장치 400은 디바이스 500과 설정된 통신 방식에 기반하여 연결되거나 또는 그 연결이 해제될 수 있고, 동작 603에서, 전자 장치 400은 상기 디바이스 500의 연결 또는 연결 해제에 응답하여 해당 이벤트(예: 페어링 이벤트, 페어링 해제 이벤트)를 감지할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 전자 펜 510이 전자 장치 400에 장착된 상태에서 탈착(통신 가능 상태)되는 것에 응답하여 페어링 이벤트를 감지할 수 있고, 상기 전자 펜 510이 전자 장치 400에 장착(통신 불가능 상태)되는 것에 응답하여 페어링 해제 이벤트를 감지할 수 있다. 또는 전자 장치 400은 디스플레이 디바이스 540이 전자 장치 400에 접속(통신 가능 상태)되는 것에 응답하여 페어링 이벤트를 감지할 수 있고, 디스플레이 디바이스 540이 전자 장치 400에서 접속이 단절(통신 불가능 상태)되는 것에 응답하여 페어링 해제 이벤트를 감지할 수 있다.
동작 605에서, 전자 장치 400은 상기 디바이스 500에 의한 이벤트에 응답하여, 웨어러블 디바이스 600에 상기 이벤트에 따른 동작 실행을 요청할 수 있다. 다양한 실시 예들에 따르면, 전자 장치 400은 페어링 이벤트에 응답하여 해당 기능 및 그에 관련된 사용자 인터페이스(예: 제2 사용자 인터페이스) 실행을 제어하기 위한 기능 실행 명령을 웨어러블 디바이스 600에 전송할 수 있다. 또는 전자 장치 400은 페어링 해제 이벤트에 응답하여 해당 기능 및 그에 관련된 사용자 인터페이스(예: 제2 사용자 인터페이스) 종료를 제어하기 위한 기능 종료 명령을 웨어러블 디바이스 600에 전송할 수 있다.
동작 607에서, 웨어러블 디바이스 600은 상기 전자 장치 400의 동작 실행 요청(예: 기능 실행 명령, 기능 종료 명령)에 응답하여 관련 동작을 실행할 수 있다. 예를 들어, 웨어러블 디바이스 600은 기능 실행 명령에 응답하여 관련 기능 실행 및 그에 대응하는 제2 사용자 인터페이스를 표시할 수 있다. 또는 웨어러블 디바이스 600은 기능 종료 명령에 응답하여 관련 기능 종료 및 그에 대응하는 제2 사용자 인터페이스 표시를 종료할 수 있다. 한 실시 예에 따르면, 웨어러블 디바이스 600은 상기 제2 사용자 인터페이스 표시를 종료할 시 배경 화면을 표시하거나, 이전에 실행 중이던 기능의 실행 화면을 표시할 수 있다.
동작 609에서, 웨어러블 디바이스 600은 사용자 입력을 감지할 수 있다. 본 발명의 다양한 실시 예들에서, 상기 동작 609의 사용자 입력은 상기 제2 사용자 인터페이스가 표시된 상태에서 전자 장치 400(및/또는 디바이스 500)에 실행 중인 제1 사용자 인터페이스에 연관된 동작(기능)을 제어하기 위한 입력인 것을 가정할 수 있다. 따라서 웨어러블 디바이스 600은 상기 기능 종료 명령에 대응하여 제2 사용자 인터페이스의 표시를 종료한 경우 상기 동작 609 및 이하의 동작 611의 수행은 생략할 수 있다.
동작 611에서, 상기 감지된 사용자 입력에 따른 제어 신호를 전자 장치 400에 전송할 수 있다. 예를 들어, 웨어러블 디바이스 600은 기능 실행 명령에 응답하여 실행된 제2 사용자 인터페이스에 기반하여 전자 장치 400에서 실행 중인 제1 사용자 인터페이스에 적용할 사용자 입력을 수신할 수 있고, 그에 따른 제어 신호를 전자 장치 400에 전송할 수 있다.
동작 613에서, 전자 장치 400은 웨어러블 디바이스 600으로부터 전달되는 상기 제어 신호를 수신할 수 있고, 상기 제어 신호에 응답하여 관련 동작을 실행할 수 있다. 예를 들어, 전자 장치 400은 실행 중인 제2 사용자 인터페이스에 상기 제어 신호에 대응하는 동작(기능)을 적용하여 표시할 수 있다. 상기 제어 신호에 응답하여 수행하는 관련 동작에 대해서는 후술하는 도면들(예: 도 7 내지 도 10)에서 설명될 것이다.
도 7은 본 발명의 다양한 실시 예들에 따른 전자 장치들의 동작 예시를 설명하기 위해 도시하는 도면이다.
상기 도 7에 도시한 바와 같이, 상기 도 7은 전자 장치 400과 웨어러블 디바이스 600이 연결된 상태이고, 디바이스 500이 전자 펜 510인 경우의 예시를 나타낼 수 있다. 한 실시 예에 따르면, 전자 펜 510이 전자 장치 400에서 탈착되는 경우 전자 장치 400과 전자 펜 510은 통신 가능한 상태가 될 수 있고, 전자 장치 400은 상기 전자 펜 510의 탈착에 응답하여 페어링 이벤트를 감지할 수 있다. 전자 장치 400은 전자 펜 510의 탈착에 대응하여 페어링 이벤트를 감지하면, 상기 페어링 이벤트에 응답하여 웨어러블 디바이스 600의 사용자 인터페이스 실행을 제어할 수 있다.
상기 도 7을 참조하면, 전자 장치 400의 본체에는 전자 펜 510이 내장(수납)되어 있을 수 있다. 다양한 실시 예들에 따르면, 전자 펜 510의 탈착에 따라 전자 장치 400에서 페어링 이벤트가 발생할 수 있고, 상기 페어링 이벤트에 응답하여 전자 펜 510에 매칭된 기능 및 사용자 인터페이스가 실행될 수 있다. 다양한 실시 예들에 따르면, 상기 도 7의 예시에서는, 상기 전자 펜 510에 매칭된 기능이 이미지 편집 기능일 수 있고, 그에 대응하여 상기 사용자 인터페이스는 이미지를 편집하는 것과 관련된 사용자 인터페이스가 제공되는 것을 예시로 설명하지만, 다양한 실시 예들이 가능하다. 예를 들어, 전자 펜 510에 매칭되는 기능은 그림 그리기, 메모, 또는 갤러리 등 다양하게 매칭될 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400에서 이미지를 편집하는 어플리케이션이 실행 중일 때 전자 펜 510의 탈착을 감지하거나, 또는 다른 기능을 실행 중이거나 대기 상태에서 전자 펜 510의 탈착을 감지할 수 있다. 다양한 실시 예들에 따르면, 전자 장치 400에서 전자 펜 510의 장착 또는 탈착의 여부는 센싱 정보에 기반하여 판단할 수 있다. 한 실시 예에 따르면, 전자 펜 510이 전자 장치 400에 장착되는 경우 전자 장치 400에서 전자 펜 510과 관련된 센싱 회로가 오픈(open)될 수 있다. 다른 한 실시 예에 따르면, 전자 펜 510이 전자 장치 400에서 탈착되는 경우, 전자 장치 400에서 전자 펜 510과 관련된 센싱 회로가 단락(short)될 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 센싱 회로가 오픈 상태인 경우 전자 펜 510의 장착으로 인지할 수 있고, 이하의 설명에서 전자 펜 510의 장착에 대해 그의 통신 연결 해제로 정의할 수 있다. 다양한 실시 예들에 따르면, 전자 장치 400은 상기 센싱 회로가 단락 상태인 경우 전자 펜 510의 탈착으로 인지할 수 있고, 이하의 설명에서 전자 펜 510의 탈착에 대해 그의 통신 연결로 정의할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400에서 어플리케이션이 실행 중인 경우 전자 장치 400에는 상기 어플리케이션과 관련된 사용자 인터페이스(예: 통합 사용자 인터페이스)가 표시 중인 상태일 수 있고, 이러한 상태에서 전자 펜 510에 의한 페어링 이벤트가 발생할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 페어링 이벤트 감지에 응답하여, 상기 전자 펜 510과 매칭된 상기 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 730)가 존재하는지 검색을 수행할 수 있다. 예를 들어, 전자 장치 400에서 이미지를 편집하는 어플리케이션이 실행 중인 경우 웨어러블 디바이스 600에는 펜의 속성을 결정할 수 있는 사용자 인터페이스(예: 제2 사용자 인터페이스 730)가 존재할 수 있으며, 전자 장치 400은 이에 대한 사용자 인터페이스 유무를 검색할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 730)를 검색하는 동작에 병렬적으로 또는 순차적으로 상기 표시 중인 어플리케이션과 관련된 사용자 인터페이스(예: 통합 사용자 인터페이스)를 제1 사용자 인터페이스 710으로 전환하여 표시하는 동작을 수행할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400이 다른 기능을 실행 중이거나 대기 상태에서 상기 전자 펜 510에 의한 페어링 이벤트가 발생할 수 있다. 다양한 실시 예들에 따르면, 전자 장치 400은 상기 페어링 이벤트 감지에 응답하여 상기 전자 펜 510과 매칭된 상기 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 730)를 검색하는 동작에 병렬적으로 또는 순차적으로, 상기 다른 기능 실행에 따라 표시 중인 사용자 인터페이스를 상기 제1 사용자 인터페이스 710으로 전환하여 표시하는 동작, 또는 상기 대기 상태에서 디스플레이 431을 턴-온(turn-on)한 후 상기 제1 사용자 인터페이스 710을 표시하는 동작을 수행할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 730)가 존재하는 경우, 웨어러블 디바이스 600에 제2 사용자 인터페이스 730의 실행에 대한 기능 실행 명령을 전송할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하고, 사용자 입력을 대기할 수 있다. 한 실시 예에 따르면, 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하면, 상기 기능 실행 명령에 대한 정보(예: 제2 사용자 인터페이스 730의 실행 여부 확인 정보)를 출력(예: 표시, 진동, 알람 등)할 수 있고, 그에 대응하는 제1 사용자 입력(예: 수락 또는 거부에 대응하는 설정된 제스처 입력, 수락 또는 거부를 위한 물리적인 버튼 입력, 수락 또는 거부를 위한 소프트웨어적인 버튼 입력 등)의 수신을 대기할 수 있다. 본 발명의 다양한 실시 예들에서 상기 제1 사용자 입력을 대기하는 동작은 생략 가능한 동작일 수 있다. 예를 들어, 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하는 경우, 상기 제1 사용자 입력의 대기 없이 상기 기능 실행 명령에 응답하여 제2 사용자 인터페이스 730을 바로 실행하여 표시할 수도 있다.
다양한 실시 예들에서, 전자 장치 400과 웨어러블 디바이스 600은 상기 제1 사용자 입력에 반응하거나 또는 제2 사용자 인터페이스 730의 바로 실행에 반영하여, 상기 제2 사용자 인터페이스 730의 제공에 필요한 관련 정보(예: 펜의 속성 등) 요청 및 수신과 같은 데이터 교신 동작을 수행할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 사용자에 의해 제2 사용자 인터페이스 730의 실행이 수락되는 경우 제2 사용자 인터페이스 730(예: 펜의 속성을 결정할 수 있는 사용자 인터페이스 등)을 실행하여 표시할 수 있다. 다양한 실시 예들에서, 웨어러블 디바이스 600은 전자 장치 400과의 연동에 의해 상기 제2 사용자 인터페이스 730이 이미 실행 중인 경우에는 그 동작을 생략할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 상기 제2 사용자 인터페이스 730을 표시한 상태에서 사용자로부터 제2 사용자 입력을 수신하는 경우 관련 동작 수행을 처리할 수 있다. 한 실시 예에 따르면, 웨어러블 디바이스 600은 제2 사용자 인터페이스 730을 통해 제1 사용자 인터페이스 710에 적용할 펜의 특정 속성이 선택되면, 선택된 펜의 특정 속성에 기반하여 상기 제1 사용자 인터페이스 710에 적용을 명령하는 제어 신호를 상기 전자 장치 400에 전송할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 제어 신호에 응답하여 상기 제1 사용자 인터페이스 710에 상기 펜의 특정 속성을 적용하여 표시할 수 있다.
도 8은 본 발명의 다양한 실시 예들에 따른 전자 장치들의 동작 예시를 설명하기 위해 도시하는 도면이다.
상기 도 8에 도시한 바와 같이, 상기 도 8은 전자 장치 400과 웨어러블 디바이스 600이 연결된 상태이고, 디바이스 500이 충전기 530인 경우의 예시를 나타낼 수 있다. 한 실시 예에 따르면, 충전기 530이 전자 장치 400의 데이터 커넥터를 통해 연결(삽입)되는 경우 전자 장치 400과 충전기 530은 통신 가능한 상태가 될 수 있고, 전자 장치 400은 상기 충전기 530의 연결에 응답하여 페어링 이벤트를 감지할 수 있다. 전자 장치 400은 충전기 530의 연결에 대응하여 페어링 이벤트를 감지하면, 상기 페어링 이벤트에 응답하여 웨어러블 디바이스 600의 사용자 인터페이스 실행을 제어할 수 있다.
상기 도 8을 참조하면, 충전기 530의 연결에 따라 전자 장치 400에서 이벤트가 발생할 수 있고, 상기 이벤트에 응답하여 충전기 530에 매칭된 기능 및 사용자 인터페이스가 실행될 수 있다. 다양한 실시 예들에 따르면, 상기 도 8의 예시에서는, 상기 충전기 530에 매칭된 기능이 충전 기능일 수 있고, 그에 대응하여 상기 사용자 인터페이스는 충전과 관련된 사용자 인터페이스가 제공되는 것을 예시로 설명하지만, 다양한 실시 예들이 가능하다.
다양한 실시 예들에 따르면, 전자 장치 400은 다른 기능을 실행 중이거나 대기 상태에서 충전기 530의 연결을 감지할 수 있다. 전자 장치 400은 상기 충전기 530의 연결에 응답하여 페어링 이벤트를 감지할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 페어링 이벤트에 응답하여, 상기 충전기 530에 매칭된 웨어러블 디바이스 600 전용의 사용자 인터페이스가 존재하는지 검색을 수행할 수 있다. 예를 들어, 전자 장치 400에서 충전 기능을 수행하는 경우 웨어러블 디바이스 600에는 충전 상태를 제공할 수 있는 사용자 인터페이스(예: 제2 사용자 인터페이스 830)가 존재할 수 있으며, 전자 장치 400은 이에 대한 사용자 인터페이스 유무를 검색할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 830)를 검색하는 동작에 병렬적으로 또는 순차적으로, 상기 다른 기능 실행에 따라 표시 중인 사용자 인터페이스를 충전 동작과 관련된 상기 제1 사용자 인터페이스 810으로 전환하여 표시하는 동작, 또는 상기 대기 상태에서 디스플레이 431을 턴-온한 후 충전 동작과 관련된 상기 제1 사용자 인터페이스 810을 표시하는 동작을 수행할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 830)가 존재하는 경우, 웨어러블 디바이스 600에 제2 사용자 인터페이스 830의 실행에 대한 기능 실행 명령을 전송할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하고, 상기 기능 실행 명령에 대한 정보를 출력(예: 표시, 진동, 알람 등)할 수 있고, 상기 기능 실행 명령에 따른 제2 사용자 인터페이스 830의 실행 여부 결정을 위한 제1 사용자 입력을 대기할 수 있다. 본 발명의 다양한 실시 예들에서 상기 제1 사용자 입력을 대기하는 동작은 생략 가능한 동작일 수 있다. 예를 들어, 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하는 경우, 상기 제1 사용자 입력의 대기 없이 상기 기능 실행 명령에 응답하여 제2 사용자 인터페이스 830을 바로 실행하여 표시할 수도 있다.
다양한 실시 예들에서, 전자 장치 400과 웨어러블 디바이스 600은 상기 제1 사용자 입력에 반응하거나 또는 제2 사용자 인터페이스 830의 바로 실행에 응답하여, 상기 제2 사용자 인터페이스 830의 제공에 필요한 관련 정보(예: 전자 장치 400의 배터리의 충전량 등) 요청 및 수신과 같은 데이터 교신 동작을 수행할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 사용자에 의해 제2 사용자 인터페이스 830의 실행이 수락되는 경우 제2 사용자 인터페이스 830(예: 충전 상태를 표시할 수 있는 사용자 인터페이스 등)을 실행하여 표시할 수 있다. 다양한 실시 예들에서, 웨어러블 디바이스 600은 전자 장치 400의 현재 충전 중인 충전 상태를 표시하거나, 추가적으로 또는 대체적으로, 상기 전자 장치 400의 충전 상태와 상기 웨어러블 디바이스 600의 충전 상태 등을 함께 표시할 수 있다.
도 9는 본 발명의 다양한 실시 예들에 따른 전자 장치들의 동작 예시를 설명하기 위해 도시하는 도면이다.
상기 도 9에 도시한 바와 같이, 상기 도 9는 전자 장치 400과 웨어러블 디바이스 600이 연결된 상태이고, 디바이스 500이 디스플레이 디바이스 540인 경우의 예시를 나타낼 수 있다. 한 실시 예에 따르면, 디스플레이 디바이스 540이 전자 장치 400에 연결되는 경우 전자 장치 400과 디스플레이 디바이스 540은 통신 가능한 상태가 될 수 있고, 전자 장치 400은 상기 디스플레이 디바이스 540의 연결에 응답하여 페어링 이벤트를 감지할 수 있다. 전자 장치 400은 디스플레이 디바이스 540의 연결에 대응하여 페어링 이벤트를 감지하면, 상기 페어링 이벤트에 응답하여 웨어러블 디바이스 600의 사용자 인터페이스 실행을 제어할 수 있다.
상기 도 9를 참조하면, 전자 장치 400은 디스플레이 디바이스 540과 유선 또는 무선 방식에 기반하여 화면전송 기능(예: 미러링(mirroring) 기능) 등을 통해 연결될 수 있다. 다양한 실시 예들에 따르면, 디스플레이 디바이스 540의 연결에 따라 전자 장치 400에서 페어링 이벤트가 발생할 수 있고, 상기 페어링 이벤트에 응답하여 디스플레이 디바이스 540에 매칭된 기능 및 사용자 인터페이스가 실행될 수 있다. 다양한 실시 예들에 따르면, 상기 도 9의 예시에서는, 상기 디스플레이 디바이스 540에 매칭된 기능이 재생 관련 제어 기능일 수 있고, 그에 대응하여 상기 사용자 인터페이스는 재생 중인 콘텐츠(예: 동영상)을 제어하는 것과 관련된 사용자 인터페이스가 제공되는 것을 예시로 설명하지만, 다양한 실시 예들이 가능하다.
다양한 실시 예들에 따르면, 전자 장치 400에서 콘텐츠를 재생하는 애플리케이션이 실행 중일 때 디스플레이 디바이스 540의 연결을 감지하거나, 또는 다른 기능을 실행 중이거나 대기 상태에서 디스플레이 디바이스 540의 연결을 감지할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400에서 어플리케이션이 실행 중인 경우 전자 장치 400에는 상기 어플리케이션과 관련된 사용자 인터페이스(예: 통합 사용자 인터페이스)가 표시 중인 상태일 수 있고, 이러한 상태에서 디스플레이 디바이스 540에 의한 페어링 이벤트가 발생할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 페어링 이벤트 감지에 응답하여, 상기 디스플레이 디바이스 540과 매칭된 상기 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 930)가 존재하는지 검색을 수행할 수 있다. 예를 들어, 전자 장치 400에서 동영상을 재생하는 어플리케이션이 실행 중인 경우 웨어러블 디바이스 600에는 동영상 재생 제어 또는 음량 제어 등을 수행할 수 있는 사용자 인터페이스(예: 제2 사용자 인터페이스 930)가 존재할 수 있으며, 전자 장치 400은 이에 대한 사용자 인터페이스 유무를 검색할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 930)를 검색하는 동작에 병렬적으로 또는 순차적으로 상기 표시 중인 어플리케이션과 관련된 사용자 인터페이스(예: 통합 사용자 인터페이스)를 제1 사용자 인터페이스 910(예: 도 9에서 재생 제어 관련 인터페이스 포함)으로 전환하여 표시할 수 있고, 상기 화면전송 기능(예: 미러링 기능)에 따라 전자 장치 400의 제3 사용자 인터페이스 950(예: 도 9에서 제어 관련 인터페이스가 없는 동영상 재생 화면)를 디스플레이 디바이스 540에 전송하는 동작을 수행할 수 있다. 본 발명의 다양한 실시 예들에서, 전자 장치 400은 제1 사용자 인터페이스 910을 제공하는 대신 디스플레이 디바이스 540에서 제공되는 사용자 인터페이스(예: 제3 사용자 인터페이스 950)와 동일한 형태의 사용자 인터페이스(예: 재생 제어 관련 인터페이스가 포함되지 않은 사용자 인터페이스)를 제공할 수도 있다.
다양한 실시 예들에 따르면, 전자 장치 400이 다른 기능을 실행 중이거나 대기 상태에서 상기 디스플레이 디바이스 540에 의한 페어링 이벤트가 발생할 수 있다. 다양한 실시 예들에 따르면, 전자 장치 400은 상기 페어링 이벤트 감지에 응답하여 상기 디스플레이 디바이스 540과 매칭된 상기 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 930)를 검색하는 동작에 병렬적으로 또는 순차적으로, 상기 다른 기능 실행에 따라 표시 중인 사용자 인터페이스를 상기 제1 사용자 인터페이스 910으로 전환하여 표시하는 동작, 또는 상기 대기 상태에서 디스플레이 431을 턴-온한 후 상기 제1 사용자 인터페이스 910을 표시하는 동작을 수행하고, 디스플레이 디바이스 540에 제3 사용자 인터페이스 950을 표시하는 동작(예: 미러링 기능)을 수행 할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 930)가 존재하는 경우, 웨어러블 디바이스 600에 제2 사용자 인터페이스 930의 실행에 대한 기능 실행 명령을 전송할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하고, 사용자 입력을 대기할 수 있다. 한 실시 예에 따르면, 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하면, 상기 기능 실행 명령에 대한 정보(예: 제2 사용자 인터페이스 930의 실행 여부 확인 정보)를 출력(예: 표시, 진동, 알람 등)할 수 있고, 그에 대응하는 제1 사용자 입력의 수신을 대기할 수 있다. 본 발명의 다양한 실시 예들에서 상기 제1 사용자 입력을 대기하는 동작은 생략 가능한 동작일 수 있다. 예를 들어, 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하는 경우, 상기 제1 사용자 입력의 대기 없이 상기 기능 실행 명령에 응답하여 제2 사용자 인터페이스 930을 바로 실행하여 표시할 수도 있다.
다양한 실시 예들에서, 전자 장치 400과 웨어러블 디바이스 600은 상기 제1 사용자 입력에 반응하거나 또는 제2 사용자 인터페이스 930의 바로 실행에 응답하여, 상기 제2 사용자 인터페이스 930의 제공에 필요한 관련 정보(예: 재생/음량 관련 기능 제어신호 등) 요청 및 수신과 같은 데이터 교신 동작을 수행할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 사용자에 의해 제2 사용자 인터페이스 930의 실행이 수락되는 경우 제2 사용자 인터페이스 930(예: 동영상 재생 제어 또는 음량 제어 등을 수행할 수 있는 사용자 인터페이스 등)을 실행하여 표시할 수 있다. 다양한 실시 예들에서, 웨어러블 디바이스 600은 전자 장치 400과의 연동에 의해 상기 제2 사용자 인터페이스 930이 이미 실행 중인 경우에는 그 동작을 생략할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 상기 제2 사용자 인터페이스 930을 표시한 상태에서 사용자로부터 제2 사용자 입력을 수신하는 경우 관련 동작 수행을 처리할 수 있다. 한 실시 예에 따르면, 웨어러블 디바이스 600은 제2 사용자 인터페이스 930을 통해 제1 사용자 인터페이스 910(또는 제3 사용자 인터페이스 950)를 제어할 특정 제어 기능이 선택되면, 선택된 특정 제어 기능에 기반하여 상기 제1 사용자 인터페이스 910(또는 제3 사용자 인터페이스 950)에 적용을 명령하는 제어 신호를 상기 전자 장치 400에 전송할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 제어 신호에 응답하여 상기 제1 사용자 인터페이스 910 및 상기 제3 사용자 인터페이스 950에 상기 특정 제어 기능을 적용하여 제공할 수 있다. 한 실시 예에 따르면, 전자 장치 400은 상기 제어 신호에 응답하여 재생 중인 동영상의 음량을 제어하거나, 빨리 감기 또는 뒤로 감기 등의 기능을 제어할 수 있다.
도 10은 본 발명의 다양한 실시 예들에 따른 전자 장치들의 동작 예시를 설명하기 위해 도시하는 도면이다.
상기 도 10에 도시한 바와 같이, 상기 도 10은 전자 장치 400과 웨어러블 디바이스 600이 연결된 상태이고, 디바이스 500이 다른 전자 장치 550인 경우의 예시를 나타낼 수 있다. 한 실시 예에 따르면, 다른 전자 장치 550이 전자 장치 400에 연결되는 경우 전자 장치 400과 다른 전자 장치 550은 통신 가능한 상태가 될 수 있고, 전자 장치 400은 상기 다른 전자 장치 550의 연결에 응답하여 페어링 이벤트를 감지할 수 있다. 전자 장치 400은 다른 전자 장치 550의 연결에 대응하여 페어링 이벤트를 감지하면, 상기 페어링 이벤트에 응답하여 웨어러블 디바이스 600의 사용자 인터페이스 실행을 제어할 수 있다.
상기 도 10을 참조하면, 전자 장치 400은 다른 전자 장치 550과 유선 또는 무선 방식에 기반하여 콘텐츠 또는 파일 전송 등을 위한 전자 장치들(400, 550) 간의 연결을 수행할 수 있다. 다양한 실시 예들에 따르면, 다른 전자 장치 500의 연결에 따라 전자 장치 400에서 페어링 이벤트가 발생할 수 있고, 상기 페어링 이벤트에 응답하여 다른 전자 장치 550에 매칭된 기능 및 사용자 인터페이스가 실행될 수 있다. 다양한 실시 예들에 따르면, 상기 도 10의 예시에서는, 상기 다른 전자 장치 550에 매칭된 기능이 파일 전송을 수행하는 기능일 수 있고, 그에 대응하여 상기 사용자 인터페이스는 파일 전송과 관련된 동작을 지원하는 것과 관련된 사용자 인터페이스가 제공되는 것을 예시로 설명하지만, 다양한 실시 예들이 가능하다.
다양한 실시 예들에 따르면, 전자 장치 400에서 갤러리 어플리케이션이 실행 중일 때 다른 전자 장치 550의 연결을 감지하거나, 또는 다른 기능을 실행 중이거나 대기 상태에서 다른 전자 장치 550의 연결을 감지할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400에서 어플리케이션이 실행 중인 경우 전자 장치 400에는 상기 어플리케이션과 관련된 사용자 인터페이스(예: 제1 사용자 인터페이스 1010)가 표시 중인 상태일 수 있고, 이러한 상태에서 다른 전자 장치 550에 의한 페어링 이벤트가 발생할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 페어링 이벤트에 응답하여, 상기 다른 전자 장치 550과 매칭된 상기 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 1030)(예: 클립보드 어플리케이션 관련 사용자 인터페이스)가 존재하는지 검색을 수행할 수 있다. 예를 들어, 전자 장치 400에서 파일 전송 기능이 수행 중인 경우 웨어러블 디바이스 600에는 상기 전송하는 파일을 임시 보관할 수 있도록 구성된 클립보드 어플리케이션과 관련된 사용자 인터페이스(예: 제2 사용자 인터페이스 1030)가 존재할 수 있으며, 전자 장치 400은 이에 대한 사용자 인터페이스 유무를 검색할 수 있다. 전자 장치 400은 상기 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 1030)를 검색하는 동작에 병렬적으로 또는 순차적으로, 상기 표시 중인 어플리케이션과 관련된 사용자 인터페이스를 제1 사용자 인터페이스 1010으로 전환하여 표시하는 동작을 더 수행할 수도 있다.
다양한 실시 예들에 따르면, 전자 장치 400이 다른 기능을 실행 중이거나 대기 상태에서 상기 다른 전자 장치 550에 의한 페어링 이벤트가 발생할 수 있다. 다양한 실시 예들에 따르면, 전자 장치 400은 상기 페어링 이벤트 감지에 응답하여 상기 다른 전자 장치 550과 매칭된 상기 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 1030)를 검색하는 동작에 병렬적으로 또는 순차적으로, 상기 다른 기능 실행에 따라 표시 중인 사용자 인터페이스를 상기 제1 사용자 인터페이스 1010으로 전환하여 표시하는 동작, 또는 상기 대기 상태에서 디스플레이 431을 턴-온한 후 상기 제1 사용자 인터페이스 1010을 표시하는 동작을 수행할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 웨어러블 디바이스 600 전용의 사용자 인터페이스(예: 제2 사용자 인터페이스 1030)가 존재하는 경우, 웨어러블 디바이스 1030에 제2 사용자 인터페이스 1030의 실행에 대한 기능 실행 명령을 전송할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하고, 사용자 입력을 대기할 수 있다. 한 실시 예에 따르면, 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하면, 상기 기능 실행 명령에 대한 정보(예: 제2 사용자 인터페이스 1030의 실행 여부 확인 정보)를 출력(예: 표시, 진동, 알람 등)할 수 있고, 그에 대응하는 제1 사용자 입력(예: 수락 또는 거부에 대응하는 설정된 제스처 입력, 수락 또는 거부를 위한 물리적인 버튼 입력, 수락 또는 거부를 위한 소프트웨어적인 버튼 입력 등)의 수신을 대기할 수 있다. 본 발명의 다양한 실시 예들에서 상기 제1 사용자 입력을 대기하는 동작은 생략 가능한 동작일 수 있다. 예를 들어, 웨어러블 디바이스 600은 상기 기능 실행 명령을 수신하는 경우, 상기 제1 사용자 입력의 대기 없이 상기 기능 실행 명령에 응답하여 제2 사용자 인터페이스 1030을 바로 실행하여 표시할 수도 있다.
다양한 실시 예들에서, 전자 장치 400과 웨어러블 디바이스 600은 상기 제1 사용자 입력에 반응하거나 또는 제2 사용자 인터페이스 1030의 바로 실행에 응답하여, 상기 제2 사용자 인터페이스 1030의 제공에 필요한 관련 정보(예: 파일 전송을 위해 선택된 파일 등) 요청 및 수신과 같은 데이터 교신 동작을 수행할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 사용자에 의해 제2 사용자 인터페이스 1030의 실행이 수락되는 경우 제2 사용자 인터페이스 1030(예: 파일 전송을 위해 선택되어 임시 저장을 하는 클립보드 영역을 표시하고 이를 제어 가능한 사용자 인터페이스 등)을 실행하여 표시할 수 있다. 다양한 실시 예들에서, 웨어러블 디바이스 600은 전자 장치 400과의 연동에 의해 상기 제2 사용자 인터페이스 1030이 이미 실행 중인 경우에는 그 동작을 생략할 수 있다.
다양한 실시 예들에 따르면, 웨어러블 디바이스 600은 상기 제2 사용자 인터페이스 1030을 표시한 상태에서 사용자로부터 제2 사용자 입력을 수신하는 경우 관련 동작 수행을 처리할 수 있다. 한 실시 예에 따르면, 웨어러블 디바이스 600은 제2 사용자 인터페이스 1030을 통해 클립보드의 파일들을 다른 전자 장치 550에 전송을 명령하거나, 또는 클립보드의 파일들의 적어도 일부를 선택 또는 삭제를 명령하는 제어 신호를 상기 전자 장치 400에 전송할 수 있다.
다양한 실시 예들에 따르면, 전자 장치 400은 상기 제어 신호에 응답하여 상기 다른 전자 장치 550에 파일을 전송하거나, 또는 파일을 선택하거나 선택된 파일을 삭제하는 등 다양한 동작을 수행할 수 있다.
다양한 실시 예들에 따르면, 다른 전자 장치 550은 상기 전자 장치 400과 연결될 시 파일 전송 기능과 관련된 사용자 인터페이스를 디스플레이 1050을 통해 표시할 수 있고, 또한 상기 전자 장치 400의 파일 전송 개시에 대응하여 그 진행 상태와 관련된 사용자 인터페이스를 디스플레이 1050을 통해 표시할 수 있다.
도 11은 본 발명의 다양한 실시 예들에 따른 전자 장치에서 이벤트에 대응하는 처리 동작을 도시하는 흐름도이다.
상기 도 11을 참조하면, 동작 1101에서, 제어부 480은 웨어러블 디바이스 600과 설정된 통신 방식에 기반하여 연결할 수 있다.
동작 1103에서, 제어부 480은 디바이스 500에 의한 이벤트를 감지할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 디바이스 500가 통신이 가능한 상태로 연결되는 경우 페어링 이벤트를 감지할 수 있다. 또는 제어부 480은 디바이스 500이 연결된 상태에서 통신이 불가능한 상태로 그 연결이 해제되는 경우 페어링 해제 이벤트를 감지할 수 있다.
동작 1105에서, 제어부 480은 상기 이벤트 감지에 응답하여 상기 디바이스 500에 연관된 기능을 확인할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 디바이스 500의 종류를 식별할 수 있고, 상기 디바이스 500의 종류에 따라 수행 가능한 기능을 판단할 수 있다. 본 발명의 다양한 실시 예들에서, 제어부 480은 상기 디바이스 500와 수행 가능한 기능 판단 시 상기 기능이 웨어러블 디바이스 600과 연동에 의해 수행 가능한 기능인지도 판단할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 디바이스 500에 의해 수행 가능한 기능과 매칭되는 웨어러블 디바이스 600 전용의 사용자 인터페이스가 존재하는지 판단할 수 있다.
동작 1107에서, 제어부 480은 상기 디바이스 500과 수행 가능한 기능과 관련된 사용자 인터페이스(예: 제1 사용자 인터페이스)를 표시할 수 있다.
동작 1109에서, 제어부 480은 웨어러블 디바이스 600에 상기 기능에 대응하는 기능 실행 명령을 전송할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 디바이스 500에 의한 이벤트에 대응하여 웨어러블 디바이스 600과 연동 기능을 수행하기 위한 기능 실행 명령을 웨어러블 디바이스 600에 전송할 수 있다. 다양한 실시 예들에서, 상기 기능 실행 명령은 상기 이벤트에 대응하여 웨어러블 디바이스 600에 관련 기능을 실행하고, 상기 관련 기능에 대응하는 사용자 인터페이스(예: 제2 사용자 인터페이스)를 출력하도록 제어하는 명령을 포함할 수 있다.
동작 1111에서, 제어부 480은 해당 동작 수행을 처리할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 기능 실행 명령을 웨어러블 디바이스 600에 전송한 후, 상기 웨어러블 디바이스 600으로부터 수신하는 제어 신호에 응답하여 상기 디바이스 500과 수행 중인 연동 기능을 제어할 수 있다.
도 12는 본 발명의 다양한 실시 예들에 따른 전자 장치에서 이벤트에 대응하는 처리 동작을 도시하는 흐름도이다.
상기 도 12를 참조하면, 동작 1201에서, 제어부 480은 웨어러블 디바이스 600과 설정된 통신 방식에 기반하여 연결할 수 있다.
동작 1203에서, 제어부 480은 디바이스 500에 의한 이벤트를 감지할 수 있다. 예를 들어, 제어부 480은 전자 장치 400에 디바이스 500이 통신 가능한 상태로 연결되거나, 또는 통신 불가능한 상태로 연결 해제되는 것에 응답하여 이벤트를 감지할 수 있다.
동작 1205에서, 제어부 480은 상기 이벤트를 감지할 시 상기 디바이스 500의 연결 또는 연결 해제에 대응하여 상기 이벤트 종류를 판단할 수 있고, 동작 1207에서, 제어부 480은 상기 판단하는 결과에 기반하여 상기 이벤트가 페어링 이벤트인지, 또는 페어링 해제 이벤트인지 판단할 수 있다.
상기 동작 1207에서, 제어부 480은 상기 이벤트가 페어링 이벤트인 것으로 판단하면(동작 1207의 YES), 동작 1209에서, 전자 장치 400에 연결되는 디바이스 500의 종류를 판단할 수 있다.
동작 1211에서, 제어부 480은 상기 디바이스 500의 종류를 판단하면, 상기 디바이스 500과 연동 가능한 설정된 기능(매칭된 기능)을 검색하여, 동작 1213에서, 대응하는 기능이 존재하는지 판단할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 디바이스 500과 연동하여 수행 가능한 기능이나, 또는 상기 디바이스 500와 연동 기능으로 미리 설정된 기능이 있는지 판단할 수 있다.
상기 동작 1213에서, 제어부 480은 매칭된 기능이 존재하지 않는 것으로 판단하면(동작 1213의 NO), 동작 1215에서, 전자 장치 400에 의한 단독(독립적인) 기능 실행을 제어할 수 있다. 예를 들어, 제어부 480은 연결 중인 웨어러블 디바이스 600과의 연동에 의한 기능 실행이 아닌, 전자 장치 400에서 독립적으로 기능 수행을 제어할 수 있다. 다른 실시예들에 따르면, 상기 동작 1213에서, 제어부 480은 매칭된 기능이 존재하지 않는 것으로 판단하면(동작 1213의 NO), 제어부 480은 상기 디바이스 500과 연동하여 수행 가능한 기능을 획득(설치)할 수 있는 정보를 웨어러블 디바이스 500에 제공할 수 있다. 예를 들어, 디바이스 500와 매칭된 기능과 관련된 애플리케이션 설치 URL주소를 팝업창 또는 기타 UI 형태로 제공할 수도 있다.
상기 동작 1213에서, 제어부 480은 매칭된 기능이 존재하는 것으로 판단하면(동작 1213의 YES), 동작 1217에서, 상기 디바이스 500과 매칭된 기능과 관련된 사용자 인터페이스(예: 제1 사용자 인터페이스)를 표시할 수 있다.
동작 1219에서, 제어부 480은 웨어러블 디바이스 600에 상기 기능에 대응하는 기능 실행 명령을 전송할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 디바이스 500에 의한 이벤트에 대응하여 웨어러블 디바이스 600에 상기 기능에 대응하는 관련 기능 실행과, 상기 관련 기능에 대응하는 사용자 인터페이스(예: 제2 사용자 인터페이스)를 출력하도록 통지할 수 있다.
동작 1221에서, 제어부 480은 상기 웨어러블 디바이스 600으로부터 제어 신호 수신이 있는지 판단할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 기능 실행 명령을 전송한 후, 상기 웨어러블 디바이스 600에 의해 상기 디바이스 500과 연동하여 실행 중인 기능과 관련되는 제어 신호 수신을 대기할 수 있고, 상기 웨어러블 디바이스 600은 사용자 입력에 응답하여 상기 제어 신호를 전자 장치 400에 전송할 수 있다.
상기 동작 1221에서, 제어부 480은 상기 웨어러블 디바이스 600으로부터 제어 신호를 수신하면(동작 1221의 YES), 동작 1223에서, 상기 수신된 제어 신호에 대응하여 기능 수행을 제어할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 디바이스 500과 연동하여 수행 중인 기능에, 상기 제어 신호에 대응하는 제어(예: 도 7 내지 도 10의 예시에 따른 기능 제어 동작)를 처리할 수 있다.
상기 동작 1221에서, 제어부 480은 상기 웨어러블 디바이스 600으로부터 제어 신호가 수신되지 않으면(동작 1221의 NO), 동작 1225에서, 해당 동작 수행을 처리할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 웨어러블 디바이스 600으로부터의 제어 신호 수신을 대기하면서, 상기 연결된 디바이스 500과 연동하여 수행 중인 기능에 대한 처리를 계속 수행할 수 있다.
상기 동작 1207에서, 제어부 480은 상기 이벤트가 페어링 해제 이벤트인 것으로 판단하면(동작 1207의 NO), 동작 1231에서, 상기 웨어러블 디바이스 600과 연동에 의해 기능이 실행 중인지 판단할 수 있다.
상기 동작 1231에서, 제어부 480은 상기 연동에 의해 기능 실행 중인 것으로 판단하면(동작 1231의 YES), 동작 1233에서, 상기 웨어러블 디바이스 600에 기능 종료 명령을 전송할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 웨어러블 디바이스 600에 실행 중인 기능 종료와, 상기 기능에 대응하는 사용자 인터페이스(예: 제2 사용자 인터페이스) 출력을 종료하도록 통지할 수 있다.
동작 1225에서, 제어부 480은 상기 기능 종료 명령 전송 후 해당 동작 수행을 처리할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 디바이스 500과 수행 중인 기능을 종료할 수 있고, 그에 따라 표시 중인 사용자 인터페이스(예: 제1 사용자 인터페이스)를 종료하고 다른 사용자 인터페이스(예: 이전에 실행 중인 기능과 관련된 사용자 인터페이스(예: 홈 화면 사용자 인터페이스 등))로 전환하여 표시할 수 있다.
상기 동작 1231에서, 제어부 480은 상기 연동에 의해 기능 실행 중이 아닌 것으로 판단하면(동작 1231의 NO), 동작 1225에서, 해당 동작 수행을 처리할 수 있다. 다양한 실시 예들에 따르면, 제어부 480은 상기 디바이스 500과 수행 중인 기능을 종료할 수 있고, 그에 따라 사용자 인터페이스를 전환하여 표시할 수 있다.
도 13은 본 발명의 다양한 실시 예들에 따른 웨어러블 디바이스에서 처리 동작을 도시하는 흐름도이다.
상기 도 13을 참조하면, 동작 1301에서, 웨어러블 디바이스 600의 제어부 630은 전자 장치 400과 설정된 통신 방식에 기반하여 연결할 수 있다.
동작 1303에서, 제어부 630은 상기 전자 장치 400과 연결된 상태에서, 상기 전자 장치 400에 의한 기능 제어 명령을 수신할 수 있다.
동작 1305에서, 제어부 630은 상기 기능 제어 명령을 수신하면 상기 수신된 기능 제어 명령을 판단할 수 있고, 동작 1307에서, 제어부 630은 상기 판단하는 결과에 기반하여 상기 기능 제어 명령이 기능 실행 명령인지, 또는 기능 종료 명령인지 판단할 수 있다.
상기 동작 1307에서, 제어부 630은 상기 기능 제어 명령이 기능 종료 명령인 것으로 판단하면(동작 1307의 NO), 동작 1309에서, 상기 기능 종료 명령에 응답하여 상기 전자 장치 400과 연동하여 수행 중인 기능을 종료할 수 있다.
동작 1311에서, 제어부 630은 상기 기능 종료 후 해당 동작 수행을 처리할 수 있다. 다양한 실시 예들에 따르면, 제어부 630은 상기 기능 종료 명령에 응답하여 해당 기능 종료와 함께 사용자 인터페이스(예: 제2 사용자 인터페이스)를 다른 사용자 인터페이스로 전환하여 표시하거나, 또는 해당 기능 종료와 함께 표시부를 턴-오프(turn-off) 제어할 수 있다.
상기 동작 1307에서, 제어부 630은 상기 기능 제어 명령이 기능 실행 명령인 것으로 판단하면(동작 1307의 YES), 동작 1313에서, 사용자 인터페이스(예: 제2 사용자 인터페이스)를 표시할 수 있다. 다양한 실시 예들에 따르면, 제어부 630은 상기 기능 실행 명령에 대응하는 관련 기능 실행과, 상기 관련 기능에 대응하는 사용자 인터페이스(예: 제2 사용자 인터페이스)를 표시할 수 있다.
동작 1315에서, 제어부 630은 상기 사용자 인터페이스에 기반하여 사용자 입력이 있는지 판단할 수 있다. 다양한 실시 예들에 따르면, 제어부 680은 상기 사용자 인터페이스를 표시한 후, 상기 사용자 인터페이스를 통해 전자 장치 400과 디바이스 500이 연동하여 실행 중인 기능을 제어하기 위한 사용자 입력을 수신할 수 있다.
상기 동작 1315에서, 제어부 630은 사용자 입력이 수신되지 않으면(동작 1315의 NO), 동작 1311에서, 해당 동작 수행을 처리할 수 있다. 다양한 실시 예들에 따르면, 제어부 630은 사용자 인터페이스 표시를 유지하면서 사용자 입력을 대기할 수 있다. 또한 제어부 630은 설정된 일정 시간 동안 사용자 입력이 수신되지 않는 경우 표시부를 턴-오프 제어할 수도 있다.
상기 동작 1315에서, 제어부 630은 사용자 입력을 수신하면(동작 1315의 YES), 동작 1317에서, 전자 장치 400과 연동에 의한 동작 수행을 처리할 수 있다. 다양한 실시 예들에 따르면, 제어부 630은 사용자 입력을 수신하면 상기 사용자 입력에 대응하는 기능을 판단할 수 있고, 판단된 기능에 대응하는 제어 신호를 전자 장치 400에 전송할 수 있다. 또한 제어부 630은 사용자 입력에 응답하여 사용자 인터페이스에 관련 사항을 적용하여 표시하도록 처리할 수 있다.
한편, 상기 도 13에서는 도시 및 그 설명은 생략하였으나, 본 발명의 다양한 실시 예들에 따르면, 웨어러블 디바이스 600의 제어부 630은 전자 장치 400으로부터 기능 실행 명령을 수신하는 경우, 상기 기능 실행 명령과 관련된 정보를 출력할 수 있다. 예를 들어, 제어부 630은 기능 실행 명령 수신에 대하여 표시, 진동, 알람 등 적어도 일부에 기반하여 사용자에게 피드백(feedback)할 수 있다. 제어부 630은 상기 기능 실행 명령과 관련된 정보 출력에 응답하여 사용자 입력(예: 제1 사용자 입력(예: 기능 실행 수락 또는 거부에 대응하는 입력))을 수신할 수 있고, 상기 사용자 입력에 응답하여 사용자 인터페이스를 표시하는 동작을 수행할 수도 있다.
이상에서 살펴본 바와 같이, 본 발명의 다양한 실시 예들에 따른 전자 장치 400의 동작 방법은, 웨어러블 디바이스 600과 연결된 상태에서, 디바이스 500의 연결에 의한 이벤트를 감지하는 동작, 상기 이벤트에 관련한 상기 디바이스 500의 종류를 판단하는 동작, 상기 디바이스 500의 종류에 매칭되는 상기 웨어러블 디바이스 600의 기능을 판단하는 동작, 상기 웨어러블 디바이스 600에서 상기 기능의 실행을 위한 실행 명령을 상기 웨어러블 디바이스 600에 전송하는 동작을 포함할 수 있다.
이상에서 살펴본 바와 같이, 본 발명의 다양한 실시 예들에 따른 웨어러블 디바이스 600의 동작 방법은, 연결된 전자 장치 400으로부터 실행 명령을 수신하는 동작, 상기 실행 명령에 대응하는 기능 실행 및 관련 사용자 인터페이스(예: 제2 사용자 인터페이스)를 표시하는 동작, 상기 사용자 인터페이스를 통해 사용자 입력을 수신하는 동작, 상기 사용자 입력에 관련한 제어 신호를 상기 전자 장치 400에 전송하는 동작을 포함할 수 있다. 다양한 실시 예들에서, 상기 사용자 입력은 상기 전자 장치 400의 동작 또는 기능 제어와 관련하여 상기 사용자 인터페이스(예: 웨어러블 디바이스 600에 표시된 제2 사용자 인터페이스)를 통해 수신하는 입력(예: 제2 사용자 입력)을 포함할 수 있다.
이상에서 살펴본 바와 같이, 본 발명의 다양한 실시 예들에 따른 전자 장치들의 연동 방법은, 전자 장치 400과 웨어러블 디바이스 600의 연결을 수행하는 동작, 상기 전자 장치 400에서 디바이스 500의 연결에 관련한 이벤트를 감지하는 동작, 상기 전자 장치 400에서 상기 디바이스 500과 매칭된 기능과 관련된 제1 사용자 인터페이스를 표시하고, 상기 기능에 대응하는 실행 명령을 상기 웨어러블 디바이스 600에 전송하는 동작, 상기 웨어러블 디바이스 600에서 상기 실행 명령의 수신에 응답하여 상기 기능과 관련된 제2 사용자 인터페이스를 표시하는 동작, 상기 웨어러블 디바이스 600에서 상기 제2 사용자 인터페이스에 기반하여 수신되는 사용자 입력에 관련한 제어 신호를 상기 전자 장치 400에 전송하는 동작, 상기 전자 장치 400에서 상기 제어 신호의 수신에 응답하여 상기 기능과 관련된 동작을 상기 디바이스 500와 연동에 의해 실행하는 동작을 포함할 수 있다.
본 명세서와 도면에 개시된 본 발명의 다양한 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 범위는 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.
400: 전자 장치
410: 무선 통신부 411: 이동통신 모듈
413: 무선 랜 모듈 420: 사용자 입력부
430: 터치스크린 431: 디스플레이
433: 터치감지부 440: 오디오 처리부
441: 스피커 443: 마이크
450: 메모리 460: 인터페이스부
470: 카메라 모듈 480: 제어부
490: 전원 공급부

Claims (25)

  1. 전자 장치에 있어서,
    웨어러블 디바이스 및 외부 디바이스와 연결을 위한 통신부와,
    상기 웨어러블 디바이스와 연결된 상태에서, 상기 외부 디바이스의 연결에 관련한 이벤트를 감지하고, 상기 이벤트에 관련한 상기 외부 디바이스에 매칭되는 기능을 판단하고, 상기 기능을 실행하기 위한 실행 명령을 상기 웨어러블 디바이스에 전송하도록 제어하는 제어부를 포함하고,
    상기 제어부는 상기 외부 디바이스의 종류에 매칭되는 상기 웨어러블 디바이스의 기능이 존재하는지 여부를 판단하고, 상기 웨어러블 디바이스의 기능이 존재하지 않는 경우 상기 디바이스와 연동하여 수행 가능한 기능을 획득할 수 있는 정보를 상기 웨어러블 디바이스에 제공하는, 전자 장치.
  2. 제1항에 있어서, 상기 이벤트는
    상기 외부 디바이스와 통신 가능한 상태로 연결되는 이벤트를 포함하는 전자 장치.
  3. 제1항에 있어서, 상기 통신부는
    상기 웨어러블 디바이스 또는 상기 외부 디바이스 각각과 유선 또는 무선 통신에 기반하여 통신 연결을 지원하는 통신 모듈들을 포함하는 전자 장치.
  4. 제1항에 있어서,
    상기 웨어러블 디바이스는 전자 장치와 설정된 통신 인터페이스를 통해 유선 또는 무선 통신에 기반하여 연결이 가능한 디바이스를 포함하는 전자 장치.
  5. 제1항에 있어서,
    상기 외부 디바이스는 전자 장치와 설정된 통신 인터페이스를 통해 유선 또는 무선 통신에 기반하여 연결이 가능한 전자 펜, 이어폰, 충전기, 디스플레이 디바이스, 또는 다른 전자 장치를 포함하는 전자 장치.
  6. 제1항에 있어서, 상기 제어부는
    상기 웨어러블 디바이스로부터 수신하는 제어 신호에 관련한 상기 기능의 실행을 제어하는, 전자 장치.

  7. 삭제
  8. 제1항에 있어서, 상기 제어부는
    상기 웨어러블 디바이스의 기능이 존재하는 경우 상기 기능과 관련된 제1 사용자 인터페이스를 표시하고, 상기 기능의 실행 또는 상기 기능과 관련된 제2 사용자 인터페이스의 실행 명령을 상기 웨어러블 디바이스에 전송하고, 상기 제2 사용자 인터페이스에 기반하는 상기 웨어러블 디바이스의 제어 신호에 관련한 상기 기능과 관련된 동작을 실행하는 것을 포함하는 전자 장치.
  9. 제8항에 있어서,
    상기 제1 사용자 인터페이스와 상기 제2 사용자 인터페이스는 상기 기능과 관련되는 구성들을 포함하고,
    상기 제2 사용자 인터페이스는 상기 제1 사용자 인터페이스에 구현되는 구성들 중 적어도 일부의 구성에 기반하여 제공하는 것을 포함하는 전자 장치.
  10. 제1항에 있어서, 상기 제어부는
    상기 웨어러블 디바이스와 연결된 상태에서, 상기 외부 디바이스의 연결 해제에 의한 이벤트를 감지하고, 상기 이벤트에 관련한 상기 기능을 종료하기 위한 종료 명령을 상기 웨어러블 디바이스에 전송하도록 제어하는 것을 포함하는 전자 장치.
  11. 전자 장치의 동작 방법에 있어서,
    웨어러블 디바이스와 연결된 상태에서, 외부 디바이스의 연결에 의한 이벤트를 감지하는 동작,
    상기 이벤트에 관련한 상기 외부 디바이스의 종류를 판단하는 동작,
    상기 외부 디바이스의 종류에 매칭되는 상기 웨어러블 디바이스의 기능을 판단하는 동작,
    상기 기능을 실행하기 위한 실행 명령을 상기 웨어러블 디바이스에 전송하는 동작을 포함하고,
    상기 기능을 판단하는 동작은, 상기 외부 디바이스의 종류에 매칭되는 상기 웨어러블 디바이스의 기능이 존재하는지 판단하는 동작을 포함하는, 전자 장치의 동작 방법.
  12. 제11항에 있어서, 상기 이벤트는
    상기 외부 디바이스와 통신 가능한 상태로 연결되는 이벤트를 포함하는 전자 장치의 동작 방법.
  13. 제11항에 있어서,
    상기 웨어러블 디바이스의 기능을 판단하고, 상기 기능에 대응하는 제1 사용자 인터페이스를 표시하는 동작을 더 포함하는 전자 장치의 동작 방법.
  14. 제13항에 있어서, 상기 전송하는 동작은
    상기 기능의 실행 또는 상기 제1 사용자 인터페이스에 기반하여 상기 웨어러블 디바이스에 대응하도록 재구성된 제2 사용자 인터페이스의 실행 명령을 전송하는 동작을 포함하는 전자 장치의 동작 방법.
  15. 제14항에 있어서,
    상기 제1 사용자 인터페이스와 상기 제2 사용자 인터페이스는 상기 기능과 관련되는 구성들을 포함하고,
    상기 제2 사용자 인터페이스는 상기 제1 사용자 인터페이스에 구현되는 구성들 중 적어도 일부의 구성에 기반하여 제공하는 것을 포함하는 전자 장치의 동작 방법.
  16. 제11항에 있어서,
    상기 웨어러블 디바이스로부터 제어 신호를 수신하는 동작,
    상기 기능과 관련된 동작 실행을 제어하는 동작을 포함하는 전자 장치의 동작 방법.
  17. 삭제
  18. 제11항에 있어서, 상기 웨어러블 디바이스에 전송하는 동작은
    상기 웨어러블 디바이스의 기능이 존재하는 경우 상기 기능과 관련된 제1 사용자 인터페이스를 표시하고, 상기 기능의 실행 또는 상기 기능과 관련된 제2 사용자 인터페이스의 실행 명령을 상기 웨어러블 디바이스에 전송하고, 상기 제2 사용자 인터페이스에 기반하는 상기 웨어러블 디바이스의 제어 신호에 응답하여 상기 기능과 관련된 동작을 실행하는 동작을 포함하는 전자 장치의 동작 방법.
  19. 제11항에 있어서,
    상기 웨어러블 디바이스와 연결된 상태에서, 상기 외부 디바이스의 연결 해제에 의한 이벤트를 감지하는 동작,
    상기 이벤트에 관련한 상기 기능의 종료를 위한 종료 명령을 상기 웨어러블 디바이스에 전송하는 동작을 더 포함하는 전자 장치의 동작 방법.


  20. 삭제
  21. 삭제
  22. 삭제
  23. 전자 장치들의 연동 방법에 있어서,
    전자 장치와 웨어러블 디바이스의 연결을 수행하는 동작,
    상기 전자 장치에서 외부 디바이스의 연결에 의한 이벤트를 감지하는 동작,
    상기 전자 장치에서 상기 외부 디바이스와 매칭된 기능과 관련된 제1 사용자 인터페이스를 표시하고, 상기 기능의 실행 명령을 상기 웨어러블 디바이스에 전송하는 동작,
    상기 웨어러블 디바이스에서 상기 실행 명령의 수신에 응답하여 상기 기능과 관련된 제2 사용자 인터페이스를 표시하는 동작,
    상기 웨어러블 디바이스에서 상기 제2 사용자 인터페이스에 기반하여 수신된 사용자 입력에 대응하는 제어 신호를 상기 전자 장치에 전송하는 동작,
    상기 전자 장치에서 상기 제어 신호의 수신에 응답하여 상기 기능과 관련된 동작을 상기 외부 디바이스와 연동에 의해 실행하는 동작을 포함하는 전자 장치의 동작 방법.
  24. 제23항에 있어서,
    상기 제1 사용자 인터페이스와 상기 제2 사용자 인터페이스는 상기 기능과 관련되는 구성들을 포함하고,
    상기 제2 사용자 인터페이스는 상기 제1 사용자 인터페이스에 구현되는 구성들 중 적어도 일부의 구성에 기반하여 제공하는 것을 포함하는 전자 장치의 동작 방법.
  25. 웨어러블 디바이스와 연결된 상태에서 외부 디바이스의 연결에 대응하여 이벤트를 감지하는 동작, 상기 이벤트에 관련한 상기 외부 디바이스에 매칭된 웨어러블 디바이스 전용 사용자 인터페이스를 판단하는 동작, 상기 사용자 인터페이스의 존재 유무에 대응하여 상기 디바이스와 연동하여 수행 가능한 기능을 획득할 수 있는 정보를 상기 웨어러블 디바이스에 제공하거나, 상기 웨어러블 디바이스와 연동에 의해 실행하는 동작을 실행시키기 위한 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체.
KR1020150049767A 2015-04-08 2015-04-08 전자 장치들의 연동 방법 및 장치 KR102352172B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020150049767A KR102352172B1 (ko) 2015-04-08 2015-04-08 전자 장치들의 연동 방법 및 장치
US15/070,297 US9843662B2 (en) 2015-04-08 2016-03-15 Method and apparatus for interworking between electronic devices
US15/806,475 US10057401B2 (en) 2015-04-08 2017-11-08 Method and apparatus for interworking between electronic devices
US16/013,052 US10205816B2 (en) 2015-04-08 2018-06-20 Method and apparatus for interworking between electronic devices
US16/214,242 US10958776B2 (en) 2015-04-08 2018-12-10 Method and apparatus for interworking between electronic devices

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150049767A KR102352172B1 (ko) 2015-04-08 2015-04-08 전자 장치들의 연동 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20160120551A KR20160120551A (ko) 2016-10-18
KR102352172B1 true KR102352172B1 (ko) 2022-01-17

Family

ID=57111405

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150049767A KR102352172B1 (ko) 2015-04-08 2015-04-08 전자 장치들의 연동 방법 및 장치

Country Status (2)

Country Link
US (4) US9843662B2 (ko)
KR (1) KR102352172B1 (ko)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102189787B1 (ko) * 2013-11-13 2020-12-11 삼성전자 주식회사 터치스크린을 가지는 전자 장치 및 이의 입력 처리 방법
US10282057B1 (en) * 2014-07-29 2019-05-07 Google Llc Image editing on a wearable device
US10628186B2 (en) * 2014-09-08 2020-04-21 Wirepath Home Systems, Llc Method for electronic device virtualization and management
US9888351B2 (en) * 2015-10-09 2018-02-06 3G Innovations Llc Wearable device
WO2017104205A1 (ja) * 2015-12-15 2017-06-22 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
JP6682365B2 (ja) * 2016-06-01 2020-04-15 キヤノン株式会社 通信装置、通信装置の制御方法、及び、プログラム
KR102580710B1 (ko) * 2016-07-18 2023-09-20 삼성전자주식회사 전자 장치들의 연동 방법 및 장치
KR20180080629A (ko) * 2017-01-04 2018-07-12 삼성전자주식회사 전자 장치 및 전자 장치의 어플리케이션 실행 히스토리 표시 방법
US10534429B2 (en) * 2017-01-10 2020-01-14 International Business Machines Corporation Method of instant sharing invoked from wearable devices
KR102365678B1 (ko) * 2017-03-29 2022-02-21 삼성전자주식회사 외부 장치를 이용한 화면 출력 방법 및 이를 지원하는 전자 장치
US20180302403A1 (en) * 2017-04-13 2018-10-18 Plas.md, Inc. System and method for location-based biometric data collection and processing
US10951043B2 (en) * 2017-06-04 2021-03-16 Apple Inc. Multi-device charging user interface
CN109767774A (zh) * 2017-11-08 2019-05-17 阿里巴巴集团控股有限公司 一种交互方法和设备
US11003410B2 (en) * 2018-02-13 2021-05-11 SentiAR, Inc. Augmented reality display sharing
KR102477853B1 (ko) * 2018-08-06 2022-12-15 삼성전자주식회사 디스플레이를 통해 외부 장치의 배터리의 충전을 제공하기 위해 어포던스를 표시하는 전자 장치 및 방법
WO2020041657A1 (en) 2018-08-24 2020-02-27 The Johns Hopkins University Synchronizable, low power, low cost, wearable wireless devices
US11249615B2 (en) * 2019-04-16 2022-02-15 Tracfone Wireless, Inc. Device and process to transition a smart phone to a feature phone
US11646591B2 (en) 2019-05-09 2023-05-09 Apple Inc. Indication for protective charging mode
USD952649S1 (en) * 2019-09-02 2022-05-24 Koninklijke Philips N.V. Display screen or portion thereof with animated graphical user interface
KR20210121547A (ko) 2020-03-30 2021-10-08 삼성전자주식회사 원격 입력 장치의 거리에 기초한 알림을 제공하는 방법 및 전자 장치
CN112291598A (zh) * 2020-10-14 2021-01-29 青岛海信传媒网络技术有限公司 一种显示设备功能控制方法及显示设备
CN113653906A (zh) * 2021-08-23 2021-11-16 联想(北京)有限公司 一种底座、电子装置
KR20230111093A (ko) * 2022-01-17 2023-07-25 삼성전자주식회사 전자 장치 및 그 제어 방법
CN116560536A (zh) * 2022-01-28 2023-08-08 华为技术有限公司 应用组件设置方法及相关设备
CN114679612A (zh) * 2022-03-15 2022-06-28 辽宁科技大学 智能家居***及其控制方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050270167A1 (en) 2004-06-03 2005-12-08 Inventec Appliances Corporation Structure for preventing loss of pen for electronic devices

Family Cites Families (35)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6924791B1 (en) * 2000-03-09 2005-08-02 Palmone, Inc. Method and apparatus for automatic power-up and power-down of a computer system based on the positions of an associated stylus and/or hinge
US6977868B2 (en) * 2002-02-14 2005-12-20 Fossil, Inc Method and apparatus for synchronizing data between a watch and external digital device
US20080005423A1 (en) * 2006-06-06 2008-01-03 Robert Alan Jacobs Method and device for acting on stylus removal
EP2179351A4 (en) * 2007-07-10 2013-03-27 Anoto Ab SYSTEM, SOFTWARE MODULE, AND METHODS FOR CREATING RESPONSE TO INPUT BY ELECTRONIC PEN
JP5137791B2 (ja) * 2008-11-21 2013-02-06 株式会社エヌ・ティ・ティ・ドコモ 携帯電話装置
KR101607888B1 (ko) 2009-06-03 2016-03-31 엘지전자 주식회사 시계 겸용 휴대 단말기 및 동작방법
US8744528B2 (en) * 2011-05-16 2014-06-03 Lg Electronics Inc. Gesture-based control method and apparatus of an electronic device
US8595345B2 (en) * 2011-05-26 2013-11-26 Mfluent Llc Enhanced push notification services
KR20130077192A (ko) * 2011-12-29 2013-07-09 엘지전자 주식회사 이동 단말기 및 그 제어방법, 이를 위한 기록매체
KR101978957B1 (ko) * 2012-05-09 2019-05-16 엘지전자 주식회사 디스플레이 장치 및 애플리케이션 실행 및 설치 방법
KR101974820B1 (ko) * 2012-09-10 2019-08-23 삼성전자주식회사 기기 제어 방법 및 이를 수행하는 기기
KR102003005B1 (ko) 2012-10-26 2019-07-23 엘지전자 주식회사 이동 단말기 및 이동 단말기 구동 방법
KR20140071118A (ko) * 2012-12-03 2014-06-11 삼성전자주식회사 가상 버튼을 디스플레이하기 위한 방법 및 그 전자 장치
KR20140076261A (ko) 2012-12-12 2014-06-20 삼성전자주식회사 펜을 이용한 사용자 인터페이스 제공 단말 및 방법
KR101601125B1 (ko) * 2012-12-26 2016-03-09 삼성전자주식회사 단말 장치 및 제어 방법
KR101354625B1 (ko) 2013-05-06 2014-01-22 주식회사 카이언스 원격 보호 및 감시 시스템
KR20140141300A (ko) * 2013-05-31 2014-12-10 엘지전자 주식회사 와치형 단말기 및 그것의 제어 방법
US9301259B2 (en) * 2013-06-05 2016-03-29 Nokia Technologies Oy Apparatus and method for providing device charging information
KR102090755B1 (ko) * 2013-07-02 2020-03-19 삼성전자주식회사 기능 제어 방법 및 그 전자 장치
KR20150016684A (ko) * 2013-08-05 2015-02-13 삼성전자주식회사 전자펜 탈부착 장치 및 이를 구비하는 휴대 장치
US9088895B2 (en) * 2013-08-19 2015-07-21 Arm Ip Limited Establishing communication links automatically with local devices
KR20150025584A (ko) * 2013-08-29 2015-03-11 삼성전자주식회사 화면 공유 방법 및 그 전자 장치
KR102100911B1 (ko) * 2013-08-30 2020-04-14 엘지전자 주식회사 안경형 단말기와 이를 포함하는 시스템 및 안경형단말기의 제어방법
US9203252B2 (en) 2013-11-12 2015-12-01 Google Inc. Redirecting notifications to a wearable computing device
CN104660941A (zh) * 2013-11-22 2015-05-27 北京弘天智达科技有限公司 一种微型显示通讯装置、***和方法
KR101388149B1 (ko) 2013-11-27 2014-04-23 주식회사 엘지유플러스 Nfc 태그를 이용한 페어링 시스템 및 방법
KR20150062691A (ko) * 2013-11-29 2015-06-08 삼성전자주식회사 자동으로 취출 가능한 터치 펜을 갖는 전자 장치
KR102131829B1 (ko) * 2013-12-17 2020-08-05 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9262759B2 (en) * 2014-04-10 2016-02-16 Bank Of America Corporation Wearable device as a payment vehicle
US20150293590A1 (en) * 2014-04-11 2015-10-15 Nokia Corporation Method, Apparatus, And Computer Program Product For Haptically Providing Information Via A Wearable Device
KR20150118813A (ko) * 2014-04-15 2015-10-23 삼성전자주식회사 햅틱 정보 운용 방법 및 이를 지원하는 전자 장치
US9763049B2 (en) * 2014-05-15 2017-09-12 Pebble Technology Corp. Contextual information usage in systems that include accessory devices
KR101671003B1 (ko) 2015-02-26 2016-10-31 주식회사 비트컴퓨터 세탁기용 웨어러블 디바이스의 무선 충전 시스템 및 그 방법
KR102335910B1 (ko) 2015-03-01 2021-12-06 삼성전자주식회사 전원 제어 방법 및 장치
US10951043B2 (en) * 2017-06-04 2021-03-16 Apple Inc. Multi-device charging user interface

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050270167A1 (en) 2004-06-03 2005-12-08 Inventec Appliances Corporation Structure for preventing loss of pen for electronic devices

Also Published As

Publication number Publication date
US9843662B2 (en) 2017-12-12
US20160301791A1 (en) 2016-10-13
KR20160120551A (ko) 2016-10-18
US20180302509A1 (en) 2018-10-18
US10205816B2 (en) 2019-02-12
US10958776B2 (en) 2021-03-23
US20180069955A1 (en) 2018-03-08
US20190124195A1 (en) 2019-04-25
US10057401B2 (en) 2018-08-21

Similar Documents

Publication Publication Date Title
KR102352172B1 (ko) 전자 장치들의 연동 방법 및 장치
US11442580B2 (en) Screen configuration method, electronic device, and storage medium
KR102613731B1 (ko) 복수의 디스플레이를 구비한 전자장치 및 그 제어 방법
KR102218901B1 (ko) 색 보정 방법 및 장치
CN106060192B (zh) 电子装置
KR102360067B1 (ko) 전자 장치 및 전자 장치의 정보 공유 방법
CN110476189B (zh) 用于在电子装置中提供增强现实功能的方法和设备
KR102503937B1 (ko) 전자 장치의 사용자 인터페이스 제공 방법 및 장치
KR102399791B1 (ko) 콘텐츠 탐색 인터페이스 제공 방법 및 이를 지원하는 전자 장치
EP3141982B1 (en) Electronic device for sensing pressure of input and method for operating the electronic device
KR102547115B1 (ko) 어플리케이션을 전환하기 위한 방법 및 그 전자 장치
EP3329355B1 (en) Screen operating method and electronic device supporting the same
KR102391487B1 (ko) 충전 및 데이터 통신 경로 제어 방법 및 이를 구현한 전자 장치
KR102371683B1 (ko) 컨텐츠 공유 방법 및 이를 지원하는 전자 장치
KR102257474B1 (ko) 전자 장치의 데이터 송수신 방법 및 이를 사용하는 전자 장치
KR102559407B1 (ko) 영상을 표시하기 위한 전자 장치 및 컴퓨터 판독 가능한 기록 매체
US20160162058A1 (en) Electronic device and method for processing touch input
KR20180020381A (ko) 전자 장치 및 전자 장치 제어 방법
KR102614044B1 (ko) 미라캐스트 제공 장치 및 방법
KR102277217B1 (ko) 블록을 설정하는 전자 장치 및 방법
KR20170009749A (ko) 웨어러블 장치를 사용하여 스마트 기기 상에서 실행되는 애플리케이션들을 관리하는 방법 및 시스템
KR20160068531A (ko) 어플리케이션 제어 방법 및 전자 장치
KR102645674B1 (ko) 전자 장치 및 그의 동작 방법
KR20200106483A (ko) 화면 구성 방법, 전자 장치 및 저장 매체

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant