KR102454196B1 - 디스플레이 제어 방법 및 이를 제공하는 전자 장치 - Google Patents

디스플레이 제어 방법 및 이를 제공하는 전자 장치 Download PDF

Info

Publication number
KR102454196B1
KR102454196B1 KR1020140144731A KR20140144731A KR102454196B1 KR 102454196 B1 KR102454196 B1 KR 102454196B1 KR 1020140144731 A KR1020140144731 A KR 1020140144731A KR 20140144731 A KR20140144731 A KR 20140144731A KR 102454196 B1 KR102454196 B1 KR 102454196B1
Authority
KR
South Korea
Prior art keywords
information
display
electronic device
application
control module
Prior art date
Application number
KR1020140144731A
Other languages
English (en)
Other versions
KR20150136440A (ko
Inventor
채상원
유인수
이정은
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020140144731A priority Critical patent/KR102454196B1/ko
Priority to US14/714,601 priority patent/US10181305B2/en
Priority to CN201580029195.5A priority patent/CN106462325B/zh
Priority to EP15799463.3A priority patent/EP3149562A4/en
Priority to PCT/KR2015/004989 priority patent/WO2015182912A1/en
Publication of KR20150136440A publication Critical patent/KR20150136440A/ko
Application granted granted Critical
Publication of KR102454196B1 publication Critical patent/KR102454196B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3212—Monitoring battery levels, e.g. power saving mode being initiated when battery voltage goes below a certain level
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3215—Monitoring of peripheral devices
    • G06F1/3225—Monitoring of peripheral devices of memory devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234—Power saving characterised by the action undertaken
    • G06F1/325—Power saving in peripheral device
    • G06F1/3265—Power saving in display device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0613—The adjustment depending on the type of the information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00—Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02—Details of power systems and of start or stop of display operation
    • G09G2330/021—Power management, e.g. power saving
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0428—Gradation resolution change
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0464—Positioning
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00—Aspects of the architecture of display systems
    • G09G2360/14—Detecting light within display terminals, e.g. using a single or a plurality of photosensors
    • G09G2360/144—Detecting light within display terminals, e.g. using a single or a plurality of photosensors the light being ambient light
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 개시는 전자 장치의 디스플레이 제어 방법에 있어서, 디스플레이 제어 모듈이 애플리케이션의 실행에 따른 상기 전자 장치의 부하 정보를 확인하는 동작; 상기 디스플레이 제어 모듈이 상기 확인된 부하 정보를 기반으로 화면 표시 정보를 결정하는 동작; 및 상기 디스플레이 제어 모듈이 상기 결정된 화면 표시 정보를 기반으로 상기 애플리케이션의 실행을 표시하도록 디스플레이를 제어하는 동작을 포함하는 디스플레이 제어 방법을 포함할 수 있다. 다만, 상기 실시예에 한정되지 않고 다른 실시예를 포함할 수 있다.

Description

디스플레이 제어 방법 및 이를 제공하는 전자 장치{METHOD FOR CONTROLLING DISPLAY AND ELECTRONIC DEVICE SUPPORTING THE SAME}
본 발명은 디스플레이 제어 방법 및 이를 제공하는 전자 장치에 관한 것으로, 보다 구체적으로는 미리 설정된 디스플레이 제어 방식을 기반으로 디스플레이를 제어하는 방법 및 이를 제공하는 전자 장치에 관한 것이다.
최근 디지털 기술의 발달과 함께 이동통신 단말기, PDA(Personal Digital Assistant), 전자수첩, 스마트 폰, 태블릿 PC(Personal Computer) 등과 같이, 사용자가 이동하면서 통신 및 개인정보 처리가 가능한 휴대단말이 다양하게 출시되고 있다. 이러한 휴대단말은 각자의 전통적인 고유 영역에 머무르지 않고 다른 단말들의 영역까지 아우르는 모바일 컨버전스(mobile convergence)에 이르고 있다.
전자 장치의 일 예로서, 휴대단말은 음성통화 및 영상통화 등과 같은 통화 기능, SMS(Short Message Service), MMS(Multimedia Message Service) 및 이메일 등과 같은 메시지 송수신 기능, 전자수첩 기능, 촬영 기능, 방송 재생 기능, 동영상 재생 기능, 음악 재생 기능, 인터넷 기능, 메신저 기능 및 소셜 네트워크 서비스(SNS, Social Networking Service) 기능 등을 구비하고 있다. 휴대단말은 이러한 기능을 수행할 수 있는 사용자 인터페이스를 표시하여 사용자들이 이용할 수 있도록 제공하고 있다.
전자 장치는 디스플레이를 장착하여 다양한 기능을 포함하는 사용자 인터페이스(user interface)를 표시할 수 있게 되었다. 최근에는 디스플레이를 통한 사용자 인터페이스를 표시하는 기술이 발전함에 따른 휴대단말은 사용자 인터페이스, 애플리케이션 등을 고해상도로 표시할 수 있게 되었다. 다만, 휴대단말이 고해상도(예: Full-HD 등)의 애플리케이션을 표시할 때, 소모되는 전류 및 메모리의 증가가 요구되었다. 소모되는 전류 및 메모리의 증가는 휴대단말의 부하(load)량을 증가시켰다. 또한, 휴대단말을 턴-온(turn-on) 시간을 유지하기 위해 필요한 배터리 가용 시간의 감소, 발열 문제 등을 발생시켰다.
이에 후술할 실시예는 상기와 같은 문제점들을 줄일 수 있는, 디스플레이 제어 방법 및 이를 제공하는 전자 장치에 있다.
본 발명의 일 실시예에 따른 전자 장치의 디스플레이 제어 방법에 있어서, 디스플레이 제어 모듈이 애플리케이션의 실행에 따른 상기 전자 장치의 부하 정보를 확인하는 동작; 상기 디스플레이 제어 모듈이 상기 확인된 부하 정보를 기반으로 화면 표시 정보를 결정하는 동작; 및 상기 디스플레이 제어 모듈이 상기 결정된 화면 표시 정보를 기반으로 상기 애플리케이션의 실행을 표시하도록 디스플레이를 제어하는 동작을 포함하는 디스플레이 제어 방법 및 이를 제공하는 전자 장치와 저장매체를 포함할 수 있다.
본 발명의 일 실시예에 따른 전자 장치의 디스플레이 제어 방법에 있어서, 디스플레이 제어 모듈이 애플리케이션의 실행에 따른 상기 전자 장치의 부하 정보를 확인하는 동작; 상기 디스플레이 제어 모듈이 상기 확인된 부하 정보를 기반으로 화면 표시 정보를 결정하는 동작; 상기 디스플레이 제어 모듈이 상기 결정된 화면 표시 정보를 기반으로 디스플레이가 상기 애플리케이션의 실행을 표시하도록 제어하는 동작; 상기 디스플레이 제어 모듈이 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 동작; 상기 디스플레이 제어 모듈이 상기 생성된 제어 신호를 기반으로 상기 화면 표시 정보를 갱신하는 동작; 및 상기 디스플레이 제어 모듈이 상기 갱신된 화면 표시 정보를 기반으로 상기 애플리케이션을 표시하도록 상기 디스플레이를 제어하는 동작을 포함하는 디스플레이 제어 방법 및 이를 제공하는 전자 장치와 저장매체를 포함할 수 있다.
본 발명의 일 실시예에 따른 전자 장치의 디스플레이 제어 방법에 있어서, 디스플레이 제어 모듈이 애플리케이션의 실행에 따른 상기 전자 장치의 부하 정보를 확인하는 동작; 상기 디스플레이 제어 모듈이 상기 확인된 부하 정보를 기반으로 화면 표시 정보를 결정하는 동작; 상기 디스플레이 제어 모듈이 상기 결정된 화면 표시 정보를 기반으로 디스플레이가 상기 애플리케이션의 실행을 표시하도록 제어하는 동작; 애플리케이션 및 제2 애플리케이션을 표시할 화면을 적어도 2개의 표시영역으로 분할하는 동작; 애플리케이션 및 제2 애플리케이션의 표시영역에 대한 사용자 입력을 감지함에 따른 활성화 여부에 대한 판단 또는 애플리케이션 및 제2 애플리케이션에서 제공하는 콘텐츠를 기반으로 화면 표시 정보를 결정하는 동작; 및 상기 결정된 화면 표시 정보를 기반으로 적어도 2개의 표시영역 각각에 애플리케이션 및 제2 애플리케이션의 실행을 표시하는 동작을 포함하는 디스플레이 제어 방법 및 이를 제공하는 전자 장치와 저장매체를 포함할 수 있다.
본 발명의 일 실시예에 따른 전자 장치의 디스플레이 제어 방법에 있어서, 디스플레이 제어 모듈이 애플리케이션의 실행에 따른 상기 전자 장치의 부하 정보를 확인하는 동작; 상기 디스플레이 제어 모듈이 상기 확인된 부하 정보를 기반으로 화면 표시 정보를 결정하는 동작; 상기 디스플레이 제어 모듈이 상기 결정된 화면 표시 정보를 기반으로 디스플레이가 상기 애플리케이션의 실행을 표시하도록 제어하는 동작; 상기 애플리케이션이 가상 오브젝트 형태로 표시되도록 제어하는 동작; 상기 전자 장치의 부하 정보에 포함된 화면 전환 데이터값이 미리 설정된 임계 전환 데이터값을 초과하는 지 여부를 판단하는 동작; 상기 초과 여부에 대한 판단 결과를 기반으로 상기 디스플레이가 지원할수 있는 해상도를 결정하는 동작; 및 상기 결정된 해상도를 기반으로 상기 애플리케이션을 렌더링하는 동작을 포함하는 디스플레이 제어 방법 및 이를 제공하는 전자 장치와 저장매체를 포함할 수 있다.
본 발명의 일 실시예에 따른 전자 장치의 디스플레이 제어 방법에 있어서, 디스플레이 제어 모듈이 애플리케이션의 실행에 따른 상기 전자 장치의 부하 정보를 확인하는 동작; 상기 디스플레이 제어 모듈이 상기 확인된 부하 정보를 기반으로 화면 표시 정보를 결정하는 동작; 상기 디스플레이 제어 모듈이 상기 결정된 화면 표시 정보를 기반으로 디스플레이가 상기 애플리케이션의 실행을 표시하도록 제어하는 동작; 상기 전자 장치의 정보를 획득하는 동작; 상기 획득된 정보를 기반으로 색심도 정보를 결정하는 동작; 상기 결정된 색심도 정보를 기반으로 화면 표시 정보를 생성하는 동작; 및 상기 생성된 화면 표시 정보를 기반으로 애플리케이션을 표시하는 동작을 포함하는 디스플레이 제어 방법 및 이를 제공하는 전자 장치와 저장매체를 포함할 수 있다.
본 발명의 일 실시예에 따른 전자 장치의 디스플레이 제어 방법에 있어서, 디스플레이 제어 모듈이 애플리케이션의 실행에 따른 상기 전자 장치의 부하 정보를 확인하는 동작; 상기 디스플레이 제어 모듈이 상기 확인된 부하 정보를 기반으로 화면 표시 정보를 결정하는 동작; 상기 디스플레이 제어 모듈이 상기 결정된 화면 표시 정보를 기반으로 상기 애플리케이션의 실행을 표시하도록 디스플레이를 제어하는 동작; 다른 전자 장치로부터 상기 다른 전자 장치의 상태 정보를 수신하는 동작; 상기 수신한 다른 전자 장치의 상태 정보를 기반으로 색심도 정보를 결정하는 동작; 상기 결정된 색심도 정보를 기반으로 화면 표시 정보를 생성하는 동작; 상기 생성된 화면 표시 정보를 다른 전자 장치로 송신하는 동작을 포함하는 디스플레이 제어 방법 및 이를 제공하는 전자 장치와 저장매체를 포함할 수 있다.
본 발명의 일 실시예에 따른 전자 장치는 전자 장치의 화면 표시 정보에 대한 사용자의 접근성 및 활용성을 증대시킴으로써, 사용자의 편리함, 이용가능성 등을 증대시킬 수 있다.
본 발명의 일 실시예에 따른 전자 장치는 전자 장치의 상태를 기반으로 화면 표시 정보를 결정함으로써, 전자 장치의 소모 전류 감소, 메모리 소모 감소, 배터리 가용 시간 등과 같은 효과를 증대시킬 수 있다.
본 발명의 일 실시예에 따른 전자 장치는 전자 장치의 움직임 정보 및 수직 동기화 시간을 기반으로 해상도를 결정함으로써, 전자 장치 사용자의 화면에 대한 인식 향상 등과 같은 효과를 줄 수 있다.
본 발명의 일 실시예에 따른 전자 장치는 전자 장치의 상태를 기반으로 색심도를 변경함으로써, 전자 장치의 소모 전류 감소, 배터리 유지 시간 향상 등과 같은 효과를 줄 수 있다.
도 1은 본 발명의 다양한 실시예에 따른 전자 장치를 포함하는 네트워크 환경을 도시한다.
도 2a 내지 도 2d는 본 발명의 다양한 실시예에 따른 전자 장치에서 애플리케이션의 표시를 제어하는 동작 설명을 위해 개략적으로 도시한 도면이다.
도 3은 본 발명의 다양한 실시예에 따른 전자 장치에서 애플리케이션의 표시를 제어하는 동작 설명을 위해 개략적으로 도시한 도면이다.
도 4는 본 발명의 다양한 실시예에 따른 전자 장치에서 애플리케이션을 표시하는 흐름도를 도시한 도면이다.
도 5는 본 발명의 다양한 실시예에 따른 전자 장치에서 애플리케이션을 표시하는 흐름도를 도시한 도면이다.
도 6a 내지 도 6c는 본 발명의 다양한 실시예에 따른 전자 장치에서 화면에 표시되는 각각의 애플리케이션 별로 화면 표시 정보를 달리하는 UI를 개략적으로 도시한 도면이다.
도 7은 본 발명의 다양한 실시예에 따른 전자 장치에서 화면에 표시되는 각각의 애플리케이션 별로 화면 표시 정보를 달리하는 UI를 개략적으로 도시한 도면이다.
도 8은 본 발명의 다양한 실시예에 따른 전자 장치의 화면에 표시되는 각각의 애플리케이션 별로 화면 표시 정보를 달리하는 순서도를 도시한다.
도 9는 본 발명의 다양한 실시예에 따른 전자 장치에서 애플리케이션을 가상 오브젝트 형태로 표시하는 일 예를 개략적으로 도시한다.
도 10a 및 도 10b는 본 발명의 다양한 실시예에 따른 전자 장치의 움직임에 따라 화면 표시 정보를 변경하는 일 예를 개략적으로 도시한다.
도 11은 본 발명의 다양한 실시예에 따른 전자 장치의 움직임에 따라 화면 표시 정보를 결정하는 순서도를 도시한다.
도 12는 본 발명의 다양한 실시예에 따른 전자 장치의 색심도 정보를 결정하는 순서도를 도시한다.
도 13은 본 발명의 다양한 실시예에 따른 전자 장치의 다른 전자 장치와의 연결의 일 예를 개략적으로 도시한다.
도 14는 본 발명의 다양한 실시예에 따른 전자 장치의 다른 전자 장치로부터 수신된 다른 전자 장치의 상태 정보를 기반으로 화면 표시 정보를 생성하는 순서도를 도시한다.
도 15는 본 발명의 다양한 실시예들에 따른 전자 장치의 블록도를 도시한다.
도 16은 본 발명의 다양한 실시예에 따른 전자 장치간의 프로토콜 교환을 도시한다.
이하, 본 발명의 다양한 실시예가 첨부된 도면과 연관되어 기재된다. 본 발명의 다양한 실시예는 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있다. 그러나, 이는 본 발명의 다양한 실시예를 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 다양한 실시예의 사상 및 기술 범위에 포함되는 모든 변경 및/또는 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용되었다.
본 발명의 다양한 실시예에서 사용될 수 있는포함한다 또는 포함할 수 있다 등의 표현은 개시(disclosure)된 해당 기능, 동작 또는 구성요소 등의 존재를 가리키며, 추가적인 하나 이상의 기능, 동작 또는 구성요소 등을 제한하지 않는다. 또한, 본 발명의 다양한 실시예에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 발명의 다양한 실시예에서 또는 또는 A 또는/및 B 중 적어도 하나 등의 표현은 함께 나열된 단어들의 어떠한, 그리고 모든 조합을 포함한다. 예를 들어, A 또는 B 또는 A 또는/및 B 중 적어도 하나 각각은, A를 포함할 수도, B를 포함할 수도, 또는 A 와 B 모두를 포함할 수도 있다.
본 발명의 다양한 실시예에서 사용된 제 1, 제2, 첫째, 또는 둘째 등의 표현들은 다양한 실시예들의 다양한 구성요소들을 수식할 수 있지만, 해당 구성요소들을 한정하지 않는다. 예를 들어, 상기 표현들은 해당 구성요소들의 순서 및/또는 중요도 등을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 수 있다. 예를 들어, 제1 사용자 기기와 제 2 사용자 기기는 모두 사용자 기기이며, 서로 다른 사용자 기기를 나타낸다. 예를 들어, 본 발명의 다양한 실시예의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 새로운 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 새로운 다른 구성요소가 존재하지 않는 것으로 이해될 수 있어야 할 것이다.
본 발명의 다양한 실시예에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명의 다양한 실시예를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명의 다양한 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 발명의 다양한 실시예에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 발명의 다양한 실시예에 따른 전자 장치는, 통신 기능 이 포함된 장치일 수 있다. 예를 들면, 전자 장치는 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 또는 스마트 와치(smart watch))중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 통신 기능을 갖춘 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들자면, 전자 장치는 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSync, 애플TV, 또는 구글 TV), 게임 콘솔(game consoles), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치 및 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛, 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic tellers machine) 또는 상점의 POS(point of sales) 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 통신 기능을 포함한 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치는 플렉서블 장치일 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.
이하, 첨부된 도면을 참조하여 다양한 실시예에 따른 전자 장치에 대해서 살펴본다. 다양한 실시예에서 이용되는 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 다양한 실시예에 따른, 전자 장치 101을 포함하는 네트워크 환경 100을 도시한다. 도 1을 참조하면, 상기 전자 장치 101는 버스 110, 프로세서 120, 메모리 130, 입출력 인터페이스 140, 디스플레이 150, 통신 인터페이스 160 및 디스플레이 제어 모듈170을 포함할 수 있다. 일 실시예에 따른 전자 장치 101는 일 구성요소가 생략되거나 추가될 수 있다. 예를 들어, 일 실시예에 따른 전자 장치 101는 디스플레이 150가 생략된 전자 장치 101를 포함할 수 있다.
상기 버스 110는 전술한 구성요소들을 서로 연결하고, 전술한 구성요소들 간의 통신(예: 제어 메시지)을 전달하는 회로일 수 있다.
상기 프로세서 120는, 예를 들면, 상기 버스 110를 통해 전술한 다른 구성요소들(예: 상기 메모리 130, 상기 입출력 인터페이스 140, 상기 디스플레이 150, 상기 통신 인터페이스 160, 또는 상기 디스플레이 제어 모듈170 등)로부터 명령을 수신하여, 수신된 명령을 해독하고, 해독된 명령에 따른 연산이나 데이터 처리를 실행할 수 있다.
본 발명의 일 실시예에 따른 프로세서 120는 애플리케이션이 가상 오브젝트로 표시되도록 제어할 수 있다. 일 실시예에 따른 프로세서 120는 애플리케이션(예: 게임 애플리케이션, 동영상 애플리케이션 등)의 실행을 3차원 형태로 표시되도록 제어할 수 있다. 예를 들어 프로세서 120는 전자 장치 101 의 실제 사용자 공간에 존재하지 않는 정보를 디스플레이 150 및 전자 장치 101를 통해 가상현실(virtual reality)이 표시되도록 제어할 수 있다. 추가적인 예를 들어 프로세서 120는 전자 장치 101의 사용자의 실제 공간 정보와 미리 설정된 가상 정보의 결합을 통해 증강현실(augmented reality)이 표시되도록 제어할 수 있다.
일 실시예에 따른 프로세서 120는 움직임 센서를 통해 감지되는 전자 장치 101의 화면 전환 데이터값을 확인할 수 있다. 일 실시예에 따른 프로세서 120는 센서 모듈 1540의 적어도 하나의 센서(예: 제스쳐 센서 1540A, 자이로 센서 1540B, 가속도 센서 1540E 등)을 통해 측정된 전자 장치 101의 움직임에 따른 화면 전환 데이터 값을 확인할 수 있다. 여기서 화면 전환 데이터 값은 전자 장치 101의 움직임에 대응하는 데이터 값(예: 5m/s, 10m/s 등)일 수 있다.
일 실시예에 따른 프로세서 120는 화면 전환 데이터값이 미리 설정된 임계 전환 데이터값을 초과하는 지 여부를 판단할 수 있다. 여기서 미리 설정된 임계 전환 데이터값은 미리 설정될 수 있고 변경될 수 있다. 디스플레이 제어 모듈 170은 초과 여부에 대한 판단 결과를 기반으로 해상도를 결정하고, 결정된 해상도를 기반으로 애플리케이션을 렌더링 할 수 있다.예를 들어, 프로세서 120가 전자 장치 101의 움직임에 대응하는 화면 전환 데이터값이 미리 설정된 임계 전환 데이터값(예: 20m/s, 30m/s 등)을 초과하는 경우 표시되는 애플리케이션의 해상도, 밝기 등을 낮출 수 있다.
일 실시예에 따른 프로세서 120는 전자 장치 101의 움직임에 대응하는 단계별 임계 전환 데이터값을 확인하고, 움직임에 대응하는 화면 전환 데이터값을 단계에 따라 애플리케이션의 해상도를 낮출 수 있다. 예를 들어, 전자 장치 101의 화면 전환 데이터값이 10m/s인 경우에는 애플리케이션의 해상도를 한 단계(예: 1280*720로부터 1280*768로, 1600*1200로부터 1440*900로 등, 가로*세로, 단위: dpi) 줄일 수 있다. 전자 장치 101의 화면 전환 데이터 값이 20m/s인 경우에는 애플리케이션의 해상도를 두 단계(예: 1280*720로부터 1152*864로, 1600*1200로부터 1400*1050로 등, 가로*세로, 단위: dpi) 줄일 수 있다. 여기서 해상도의 단계별 애플리케이션의 감소 비율, 해상도의 단위(가로*세로, dpi)의 구성 등은 변경될 수 있다.
본 발명의 일 실시예에 따른 프로세서 120는 화면 전환 데이터값이 미리 설정된 임계 전환 데이터값을 초과하는 경우, 애플리케이션의 프레임 별 데이터 연산량을 기반으로 애플리케이션의 렌더링 시간을 측정할 수 있다. 여기서 렌더링이란 2차원, 3차원 그래픽 영상을 화면에 구현하는 그래픽 과정일 수 있다.
일 실시예에 따른 프로세서 120는 원 해상도를 갖는 애플리케이션의 렌더링을 분석하여 렌더링 시간을 측정할 수 있다. 예를 들어 프로세서 120는 800*600(dpi)의 해상도를 갖는 애플리케이션의 렌더링 시간을 측정할 수 있다.
일 실시예에 따른 프로세서 120는 측정된 렌더링 시간이 디스플레이 150의 미리 설정된 수직 동기화 신호의 구간을 초과하는 지 여부를 판단할 수 있다. 여기서 수직 동기화 신호의 구간이란 화면에 이미지를 표시하기 위한 디스플레이 150의 설정된 구간(예: 60fps 등)일 수 있다. 디스플레이 150는 미리 설정된 수직 동기화 신호의 구간(예: 60fps 등)으로 이미지(예: 애플리케이션, 동영상 등)를 표시할 수 있다. 여기서 fps(frame per second)는 초당 프레임 수치로, 1초당 보여지는 화면의 개수일 수 있다.
디스플레이 제어 모듈 170은 측정된 렌더링 시간의 초과 여부에 대한 판단 결과를 기반으로 해상도를 결정할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 측정된 렌더링 시간이 디스플레이 150의 미리 설정된 수직 동기화 시간의 구간을 초과하는 경우, 디스플레이 150가 지원할 수 있는 fps를 갖는 해상도를 결정할 수 있다. 예를 들어 디스플레이 제어 모듈 170은 표시되는 애플리케이션에 포함된 데이터(예: 텍스트 데이터, 이미지 데이터, 프레임 별 화면 전환 데이터 등)를 기반으로, 디스플레이 150가 지원할 수 있는 최대한의 fps를 확인할 수 있다.
디스플레이 제어 모듈 170은 확인된 fps를 기반으로 결정된 해상도를 기반으로 애플리케이션을 렌더링할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 렌더링된 애플리케이션을 스케일러를 통해 크기를 증가시켜 화면에 표시되도록 디스플레이 150를 제어할 수 있다.
상기 메모리 130는, 상기 프로세서 120 또는 다른 구성요소들(예: 상기 입출력 인터페이스 140, 상기 디스플레이 150, 상기 통신 인터페이스 160, 또는 상기 디스플레이 제어 모듈170 등)로부터 수신되거나 상기 프로세서 120 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다. 상기 메모리 130는, 예를 들면, 커널 131, 미들웨어 132, 어플리케이션 프로그래밍 인터페이스(API: application programming interface) 133 또는 어플리케이션 134 등의 프로그래밍 모듈들을 포함할 수 있다. 전술한 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.
상기 커널 131은 나머지 다른 프로그래밍 모듈들, 예를 들면, 상기 미들웨어 132, 상기 API 133 또는 상기 어플리케이션 134에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 상기 버스 110, 상기 프로세서 120 또는 상기 메모리 130 등)을 제어 또는 관리할 수 있다. 또한, 상기 커널 131은 상기 미들웨어 132, 상기 API 133 또는 상기 어플리케이션 134에서 상기 전자 장치 101의 개별 구성요소에 접근하여 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
상기 미들웨어 132는 상기 API 133 또는 상기 어플리케이션 134이 상기 커널 131과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 상기 미들웨어 132는 상기 어플리케이션 134로부터 수신된 작업 요청들과 관련하여, 예를 들면, 상기 어플리케이션 134 중 적어도 하나의 어플리케이션에 상기 전자 장치 101의 시스템 리소스(예: 상기 버스 110, 상기 프로세서 120 또는 상기 메모리 130 등)를 사용할 수 있는 우선 순위를 배정하는 등의 방법을 이용하여 작업 요청에 대한 제어(예: 스케쥴링 또는 로드 밸런싱)을 수행할 수 있다.
상기 API 133는 상기 어플리케이션 134이 상기 커널 131 또는 상기 미들웨어 132에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 화상 처리 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션 134는 SMS/MMS 어플리케이션, 이메일 어플리케이션, 달력 어플리케이션, 알람 어플리케이션, 건강 관리(health care) 어플리케이션(예: 운동량 또는 혈당 등을 측정하는 어플리케이션) 또는 환경 정보 어플리케이션(예: 기압, 습도 또는 온도 정보 등을 제공하는 어플리케이션) 등을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 어플리케이션 134은 상기 전자 장치 101와 외부 전자 장치(예: 전자 장치 104) 사이의 정보 교환과 관련된 어플리케이션일 수 있다. 상기 정보 교환과 관련된 어플리케이션은, 예를 들어, 상기 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 상기 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 상기 알림 전달 어플리케이션은 상기 전자 장치 101 의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션 또는 환경 정보 어플리케이션 등)에서 발생한 알림 정보를 외부 전자 장치(예: 전자 장치 104)로 전달하는 기능을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치(예: 전자 장치 104)로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다. 상기 장치 관리 어플리케이션은, 예를 들면, 상기 전자 장치 101와 통신하는 외부 전자 장치(예: 전자 장치 104)의 적어도 일부에 대한 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴온/턴오프 또는 디스플레이의 밝기(또는, 해상도) 조절), 상기 외부 전자 장치에서 동작하는 어플리케이션 또는 상기 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스)를 관리(예: 설치, 삭제 또는 업데이트)할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션 134은 상기 외부 전자 장치(예: 전자 장치 104)의 속성(예: 전자 장치의 종류)에 따라 지정된 어플리케이션을 포함할 수 있다. 예를 들어, 외부 전자 장치가 MP3 플레이어인 경우, 상기 어플리케이션 134은 음악 재생과 관련된 어플리케이션을 포함할 수 있다. 유사하게, 외부 전자 장치가 모바일 의료기기인 경우, 상기 어플리케이션 134은 건강 관리와 관련된 어플리케이션을 포함할 수 있다. 한 실시예에 따르면, 상기 어플리케이션 134은 전자 장치 101에 지정된 어플리케이션 또는 외부 전자 장치(예: 서버 106 또는 전자 장치 104)로부터 수신된 어플리케이션 중 적어도 하나를 포함할 수 있다.
상기 입출력 인터페이스 140는, 입출력 장치(예: 센서, 키보드 또는 터치 화면)를 통하여 사용자로부터 입력된 명령 또는 데이터를, 예를 들면, 상기 버스 110를 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160, 또는 상기 디스플레이 제어 모듈170에 전달할 수 있다. 예를 들면, 상기 입출력 인터페이스 140은 터치 화면을 통하여 입력된 사용자의 터치에 대한 데이터를 상기 프로세서 120로 제공할 수 있다. 또한, 상기 입출력 인터페이스 140은, 예를 들면, 상기 버스 110을 통해 상기 프로세서 120, 상기 메모리 130, 상기 통신 인터페이스 160, 또는 상기 디스플레이 제어 모듈170로부터 수신된 명령 또는 데이터를 상기 입출력 장치(예: 스피커 또는 디스플레이)를 통하여 출력할 수 있다. 예를 들면, 상기 입출력 인터페이스 140은 상기 프로세서 120를 통하여 처리된 음성 데이터를 스피커를 통하여 사용자에게 출력할 수 있다.
상기 디스플레이 150은 사용자에게 각종 정보(예: 멀티미디어 데이터 또는 텍스트 데이터 등)를 제공하는 사용자 인터페이스를 표시할 수 있다.
일 실시예에 따른 디스플레이 150는 미러링(mirroring) 기술을 통해 외부 장치(예: 전자 장치 102, 104)에 표시되는 화면을 그대로 표시할 수 있다. 여기서 미러링 기술은 제1 장치에서 표시되는 화면의 픽셀 정보. 컨텐츠 파일 등을 유선 또는 무선으로 제2 장치로 송신하는 기술일 수 있다. 예를 들어, 제1 장치는 무선랜, 와이파이, DLNA 등을 이용하여 제2 장치로 화면 정보를 송신할 수 있다. 제2 장치는 수신된 화면 정보를 기반으로 제2 장치의 디스플레이에 제1 장치에 표시된 화면과 동일한 화면(예: 제1 장치의 화면 대비 오차범위 5% 이내, 10% 이내 등)이 표시될 수 있다.
상기 통신 인터페이스 160은 상기 전자 장치 101와 외부 장치(예: 전자 장치 104 또는 서버 106) 간의 통신을 연결할 수 있다. 예를 들면, 상기 통신 인터페이스 160은 무선 통신 또는 유선 통신을 통해서 네트워크 162에 연결되어 상기 외부 장치와 통신할 수 있다. 상기 무선 통신은, 예를 들어, Wifi(wireless fidelity), BT(Bluetooth), NFC(near field communication), GPS(global positioning system) 또는 cellular 통신(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등) 중 적어도 하나를 포함할 수 있다. 상기 유선 통신은, 예를 들어, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232) 또는 POTS(plain old telephone service) 중 적어도 하나를 포함할 수 있다.
한 실시예에 따르면, 상기 네트워크 162는 통신 네트워크(telecommunications network)일 수 있다. 상기 통신 네트워크 는 컴퓨터 네트워크(computer network), 인터넷(internet), 사물 인터넷(internet of things) 또는 전화망(telephone network) 중 적어도 하나를 포함할 수 있다. 한 실시예에 따르면, 상기 전자 장치 101와 외부 장치 간의 통신을 위한 프로토콜(예: transport layer protocol, data link layer protocol 또는 physical layer protocol))은 어플리케이션 134, 어플리케이션 프로그래밍 인터페이스 133, 상기 미들웨어 132, 커널 131 또는 통신 인터페이스 160 중 적어도 하나에서 지원될 수 있다.
한 실시예에 따르면, 상기 서버 106는 상기 전자 장치 101에서 구현되는 동작(또는, 기능)들 중 적어도 하나의 동작을 수행함으로써, 상기 전자 장치 101의 구동을 지원할 수 있다. 예를 들면, 상기 서버 106는 상기 전자 장치 101에 구현된 디스플레이 제어 모듈170을 지원할 수 있는 디스플레이 제어 서버 모듈 108을 포함할 수 있다. 예컨대, 상기 디스플레이 제어 서버 모듈 108은 디스플레이 제어 모듈170의 적어도 하나의 구성요소를 포함하여, 디스플레이 제어 모듈170이 수행하는 동작들 중 적어도 하나의 동작을 수행(예: 대행)할 수 있다.
상기 제 1 및 제 2 외부 전자 장치 102, 104 각각은 상기 전자 장치 101와 동일한 또는 다른 종류의 장치일 수 있다. 일 실시예에 따르면, 상기 서버 106는 하나 또는 그 이상의 서버들의 그룹을 포함할 수 있다. 다양한 실시예에 따르면, 상기 전자 장치 101에서 실행되는 동작들의 전부 또는 일부는 다른 하나 또는 복수의 전자 장치 (예: 전자 장치 102, 104, 또는 서버 106)에서 실행될 수 있다.
일 실시예에 따르면, 상기 전자 장치 101가 어떤 기능이나 서비스를 자동으로 또는 요청에 의하여 수행해야 할 경우에, 상기 전자 장치 101는 상기 기능 또는 상기 서비스를 자체적으로 실행시키는 대신에 또는 추가적으로, 그와 연관된 적어도 일부 기능을 다른 장치 (예: 전자 장치 102, 104, 또는 서버 106)에게 요청할 수 있다. 상기 다른 전자 장치 (예: 전자 장치 102, 104, 또는 서버 106)는 상기 요청된 기능 또는 추가 기능을 실행하고, 그 결과를 상기 전자 장치 101로 전달할 수 있다. 상기 전자 장치 101는 수신된 결과를 그대로 또는 추가적으로 처리하여 상기 요청된 기능이나 서비스를 제공할 수 있다. 이를 위하여, 예를 들면, 클라우드 컴퓨팅, 분산 컴퓨팅, 또는 클라이언트-서버 컴퓨팅 기술이 이용될 수 있다.
본 발명의 일 실시예에 따른 전자 장치 101는 디스플레이 150이 애플리케이션을 실행하는 입력 이벤트를 수신하면, 애플리케이션을 실행함에 따른 전자 장치 101의 부하 정보를 확인할 수 있다. 전자 장치 101는 확인된 부하 정보를 기반으로 화면 표시 정보를 결정하고, 결정된 화면 표시 정보를 기반으로 애플리케이션을 표시하도록 제어하는 디스플레이 제어 모듈 170을 포함할 수 있다.
상기 디스플레이 제어 모듈170은, 다른 구성요소들(예: 상기 프로세서 120, 상기 메모리 130, 상기 입출력 인터페이스 140, 상기 디스플레이 150 또는 상기 통신 인터페이스 160 등)로부터 획득된 정보 중 적어도 일부를 처리하고, 이를 다양한 방법으로 사용자에게 제공 할 수 있다. 예를 들면, 상기 디스플레이 제어 모듈 170는 상기 프로세서 120를 이용하여 또는 이와는 독립적으로, 상기 전자 장치 101이 다른 전자 기기(예: 전자 장치 104 또는 서버 106)와 연동하도록 상기 전자 장치 101의 적어도 일부 기능을 제어할 수 있다. 한 실시예에 따르면, 디스플레이 제어 모듈170의 적어도 하나의 구성은 상기 서버 106(예: 디스플레이 제어 서버 모듈 108)에 포함될 수 있으며, 상기 서버 106로부터 디스플레이 제어 모듈170에서 구현되는 적어도 하나의 동작을 지원받을 수 있다. 후술하는 도 2 내지 도 6을 통하여 상기 디스플레이 제어 모듈 170에 대한 추가적인 정보가 제공된다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 디스플레이 150가 애플리케이션을 실행하는 입력 이벤트를 수신하면, 애플리케이션을 실행함에 따른 전자 장치 101의 부하 정보를 확인할 수 있다. 디스플레이 제어 모듈 170은 확인된 부하 정보를 기반으로 화면 표시 정보를 결정하고, 결정된 화면 표시 정보를 기반으로 애플리케이션을 표시하도록 디스플레이 150를 제어할 수 있다. 여기서 애플리케이션은, 특정한 업무를 실행하기 위해 고안된 프로그램 집합을 의미할 수 있다. 예를 들어, 애플리케이션은 전자 장치 101의 화면(예: 턴 온(turn on)시 화면, 대기화면, 종료화면 등), 특정 기능을 수행하는 프로그램(예: 게임, 워드, 엑셀 등) 등을 포함할 수 있다.
일 실시예에 따른 전자 장치 101의 부하 정보는, 전자 장치 101의 메모리 용량 정보(예: 전자 장치 101의 메모리 용량이 8기가 바이트(GB) 용량 대비 애플리케이션의 용량인 100메가 바이트(MB)의 부하 등), 온도 정보, 배터리 소모 정보, 전자 장치 101의 전력 사용 정보 등을 포함할 수 있다. 여기서 부하 정보는, 미리 저장된 정보이거나 애플리케이션이 실행됨에 따라 해당 애플리케이션의 필요 스펙(spec)(예: 필요 용량, 해상도, 지원하는 운영체제(예: 안드로이드(android), iOs 등))등을 판단하여 디스플레이 제어 모듈 170에 의해 예측될 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 확인된 부하 정보를 기반으로 화면 표시 정보를 결정할 수 있다. 여기서 화면 표시 정보는, 애플리케이션을 표시할 위치 정보, 애플리케이션의 크기 정보, 애플리케이션을 확대할 스케일 정보, 애플리케이션의 해상도 정보 및 애플리케이션의 색심도 정보 중 적어도 어느 하나의 정보를 포함할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 전자 장치 101의 메모리 용량이 부족할 때, 애플리케이션의 해상도를 낮게 결정할 수 있다. 다른 예를 들면, 디스플레이 제어 모듈 170은 전자 장치 101의 배터리 용량이 부족할 때, 표시될 애플리케이션의 해상도를 낮게 결정할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 디스플레이 150가 결정된 화면 표시 정보를 기반으로 애플리케이션을 표시하도록 제어할 수 있다. 예를 들어 디스플레이 제어 모듈 170은, 애플리케이션을 화면 내의 어느 곳에 위치할 것인지에 대한 위치를 결정하고, 결정된 위치에 해상도 값 및 스케일 값을 기반으로 애플리케이션을 표시하도록 제어할 수 있다.
예를 들어, 디스플레이 제어 모듈 170은 애플리케이션의 크기를 화면의 1/4크기로 결정하고, 해상도를 T85로 결정하고, 크기를 변경시킬 스케일 값을 4로 결정할 수 있다. 결정된 애플리케이션은 화면의 1/4크기로 T85의 해상도로 표시된 이후, 4배의 Scale up되어 전체화면으로 표시될 수 있다. 여기서 애플리케이션의 크기 정보, 스케일 정보, 해상도 정보 등은 변경될 수 있다. 여기서 해상도는 이미지를 표현하는 데 몇 개의 픽셀 또는 도트로 나타냈는지 그 정도를 의미하는 것으로서, 그 정도에 따라 T42, T85, T170, T340 등으로 나타낼 수 있다. 예를 들어 T85는 가우시안 그리드(256*128), T42는 가우시안 그리드(128*64) 등을 의미할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다. 예를 들어, 디스플레이 150은 화면 표시 정보를 변경하는 기능을 제공하는 사용자 인터페이스(user interface)를 표시할 수 있다. 디스플레이 150는 표시된 사용자 인터페이스를 통해 변경하는 변경 입력 이벤트를 수신할 수 있다. 일 실시예에 따른 디스플레이 150는 슬라이드 방식(예: 사용자의 드래그 입력 이벤트에 따라 변경되는 방식 등), 리스트 선택 방식(예: 미리 정해진 화면 표시 정보 중 선택하는 방식) 등에 관한 사용자 인터페이스를 표시할 수 있다. 일 실시예에 따른 디스플레이 150는 사용자나 디스플레이 제어 모듈 170이 마지막으로 저장한 화면 표시 정보를 이용하기 위해서 선택하는 사용자 인터페이스를 별도로 제공할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 상태 정보를 기반으로 생성된 화면 표시 정보를 변경하는 변경 신호를 생성할 수 있다. 여기서 변경 신호는, 적어도 하나의 센서로부터 전자 장치 101의 어플리케이션 프로세서(AP)(610), 배터리(696), 디스플레이(660) 표면 등의 온도 값을 확인하고, 온도 값이 미리 설정된 임계온도 값 이상일 때 화면 표시 정보를 변경하는 신호일 수 있다. 예를 들어, 온/습도 센서 640J가 판단한 전자 장치 101의 배터리(696)의 온도가 애플리케이션을 실행함으로써 상승하여, 미리 설정된 임계온도 값(예: 18, 30 등)이상일 때, 디스플레이 제어 모듈 170은 전자 장치 101의 화면 표시 정보를 변경하는 신호를 생성할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 온도 값이 미리 설정된 임계온도 값 이상이 됨에 따라, 실행되고 있는 화면 표시 정보(예: 해상도 등)를 변경할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 고해상도(예: T340 등)로 표시되고 있는 애플리케이션을, T170, T85해상도로 변경하여 표시하도록 제어할 수 있다. 일 실시예에 따른 미리 정해진 임계온도 값은 복수의 단계로 나뉘어져, 1단계는 10이상, 2단계는 20이상 등과 같이 세분화한 후, 각 단계에 대응하는 화면 표시 정보를 각각 생성하여, 표시할 애플리케이션의 해상도 등이 단계적으로 변경될 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 메모리 130 용량 값을 확인하고, 확인된 용량 값이 미리 설정된 임계용량 값 이상일 때 화면 표시 정보를 변경하는 입력 신호를 수신할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 메모리 130에 할당된 용량 값 대비 애플리케이션의 용량 값을 확인할 수 있다. 디스플레이 제어 모듈 170은 애플리케이션의 용량 값이 미리 설정된 임계용량 값 이상일 때, 애플리케이션의 화면 표시 정보(예: 해상도 등)를 변경하는 입력 신호를 수신할 수 있다. 예를 들어, 사용자가 임계용량을 별도로 설정(예: 60MB, 100MB 등)하거나 디스플레이 제어 모듈 170이 메모리 130의 용량이 부족하다고 판단될 때(예: 복수의 애플리케이션의 실행됨에 따른 메모리 부족, 애플리케이션의 메모리 요구량이 과도함 등), 디스플레이 제어 모듈 170은 화면 표시 정보를 변경하는 신호를 생성할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 배터리 상태를 확인하고, 배터리 상태가 미리 설정된 배터리 상태에 도달할 때 화면 표시 정보를 변경하는 신호를 생성할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 전력 관리 모듈 695로부터 배터리 상태를 확인할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 배터리의 상태가 만충(예: 배터리 충전이 99%이상 등) 대비 20%일 때, 현재 실행중인(foreground) 애플리케이션의 해상도를 낮출 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 애플리케이션에서 제공하는 컨텐츠를 기반으로 생성된 화면 표시 정보를 변경하는 신호를 생성할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 애플리케이션에 포함된 컨텐츠의 텍스트 정보값, 이미지 정보값, 비디오 정보값 및 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값을 확인할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 확인된 텍스트 정보값, 이미지 정보값,비디오 정보값 및 프레임 별 해상도 변경에 관한 정보 값 중 적어도 하나의 정보값이 미리 설정된 임계 컨텐츠 정보값 이상인 것을 판단될 때, 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 애플리케이션에서 제공하는 컨텐츠에 포함된 텍스트 정보, 이미지 정보 및 비디오 정보에 포함된 데이터 부하량(예: 텍스트의 개수가 많은 경우, 고해상도를 요구하는 이미지 정보 및 비디오 정보 값 등) 등을 판단할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 애플리케이션에 포함된 컨텐츠의 정보를 에지 검출(edge detection)을 이용하여 판단할 수 있다. 여기서 에지 검출은 영상 안에서의 영역의 경계를 나타내는 특징으로 영상 밝기의 불연속점으로 윤곽선에 해당하는 픽셀을 구하는 방식이다. 이러한 방식은 애플리케이션에서 제공하는 텍스트 문자들 간의 경계를 판단하여 텍스트 정보가 포함하는 데이터 부하량을 판단할 수 있다. 디스플레이 제어 모듈 170은 판단된 정보를 기반으로 화면 표시 정보를 변경하는 신호를 생성할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 텍스트 정보가 많거나 이미지 정보가 고해상도를 요구한다고 판단될 때, 애플리케이션의 화면 표시 정보를 변경할 수 있다. 디스플레이 제어 모듈 170은 변경된 화면 표시 정보를 기반으로 애플리케이션을 표시할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 사용자의 터치 입력 이벤트, 드래그 입력 이벤트, 플립 입력 이벤트, 플릭 입력 이벤트 등에 의해 표시되는 사용자 인터페이스가 변경될 때(예: 문서의 페이지가 변경, 표시하고 있는 인터넷 페이지의 변경 등), 변경된 사용자 인터페이스가 포함하는 컨텐츠 정보(예: 텍스트 정보 및 이미지 정보 등)를 판단하여 화면 표시 정보를 변경하여 애플리케이션을 표시할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 애플리케이션에서 제공하는 정지화면(예: 사진 화면, 문자 메시지 화면 등)의 변경, 움직이는 영상(예: 동영상 등)의 변경, 텍스트의 변경에 따라 화면 표시 정보를 변경하여 애플리케이션을 표시할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 임계 컨텐츠 정보값(예: 이전 화면과 현재 화면의 프레임 레이트(frame rate), 변화량, 복잡도 등)을 판단하여 화면 표시 정보를 변경할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 이전 화면과 현재 화면의 변화량, 프레임 레이트(frame rate) 등이 미리 설정된 기준(예: 사용자 지정, 개발자 등에 의해 미리 저장된 기준(예: 10프레임 레이트(frame rate)) 등) 이상의 변화량 및 프레임 레이트(frame rate)인 것으로 판단될 때 표시되는 애플리케이션의 해상도를 낮추도록 결정할 수 있다. 다른 예를 들면, 디스플레이 제어 모듈 170은 컨텐츠의 화면 복잡성이 높은 것으로 판단되면 화면 표시 정보 중 해상도 정보값을 낮추도록 결정할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 애플리케이션 별로 갱신된 화면 표시 정보를 각각 메모리 130에 저장하도록 제어할 수 있다. 디스플레이 150가 애플리케이션을 실행하는 입력 이벤트를 수신하면, 디스플레이 제어 모듈 170은 실행된 애플리케이션에 대응하는 화면 표시 정보를 메모리 130로부터 추출하여 결정할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 화면 표시 정보를 변경하는 제어 신호를 생성한 후 전자 장치 101의 상태 정보가 변경되는 지 여부를 판단할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 상태 정보가 변경되는 경우 변경된 전자 장치 101의 상태 정보를 기반으로 변경된 화면 표시 정보를 갱신하는 제어 신호를 생성할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 센서 모듈 1540에 포함된 적어도 하나의 센서에 의해 감지된 전자 장치 101의 상태 정보 값, 메모리 130의 임계 용량 값(예: 만충 대비 50% 충전률 등), 배터리 1596 상태(예: 충전 정보 등) 등에 대한 판단을 기반으로 화면 표시 정보를 갱신할 수 있다.
예를 들어, 디스플레이 제어 모듈 170은 전자 장치 101의 배터리 1596 상태가 화면 표시 정보를 변경하는 제어 신호의 생성 전과 동일한 충전량(예: 만충 대비 99% 등)일 경우, 변경된 화면 표시 정보가 제어 신호의 생성 전과 동일한 화면 표시 정보로 갱신되도록 제어 신호를 다시 생성할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 애플리케이션 및 제2 애플리케이션을 표시할 화면을 적어도 2개의 표시영역으로 분할하도록 제어할 수 있다. 예를 들어, 디스플레이 150은 제2 애플리케이션을 실행하는 입력 이벤트를 수신할 수 있다. 디스플레이 제어 모듈 170은 수신된 입력 이벤트에 대응하는 애플리케이션의 화면을 적어도 2개의 영역으로 분할한 제1 표시영역 및 제2 표시영역 등으로 나누어 표시할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 적어도 2개의 표시영역 각각의 화면 표시 정보를 결정할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 결정된 화면 표시 정보를 기반으로 적어도 2개의 표시영역 각각에 애플리케이션 및 제2 애플리케이션의 실행을 표시하도록 디스플레이 150를 제어할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 애플리케이션 및 제2 애플케이션의 표시영역에 대한 사용자 입력을 감지함에 따른 활성화 여부에 대한 판단을 기반으로 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다. 예를 들어, 디스플레이 150가 제1 표시영역에 애플리케이션을 표시하고, 제2 표시영역에 제2 애플리케이션을 표시할 수 있다. 디스플레이 제어 모듈 170은 제1 표시영역에 표시된 애플리케이션에 대한 사용자 입력이 감지되면, 제2 표시영역의 화면 표시 정보를 변경할 수 있다. 추가적인 예를 들면, 디스플레이 제어 모듈 170은 사용자 입력이 감지되지 않은 제2 표시영역에 대한 해상도 값, 색심도 값 등을 낮출 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 애플리케이션 및 제2 애플리케이션에서 제공하는 컨텐츠를 기반으로 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 애플리케이션 및 제2 애플리케이션 각각에 포함된 컨텐츠의 텍스트 정보값, 이미지 정보값, 비디오 정보값, 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값을 확인할 수 있다.
여기서 텍스트 정보값은, 각각의 애플리케이션의 컨텐츠에 포함되는 문자열 값, 문자 비트(bit) 값 등일 수 있다. 이미지 정보값은 이미지가 포함하고 있는 이미지 데이터의 용량 값, 이미지를 구성하는 색심도 정보값 등일 수 있다. 비디오 정보값은 비디오 데이터의 용량 값, 비디오를 구성하는 영상 데이터의 색심도 정보값 등일 수 있다. 프레임 별 해상도 변경에 관한 정보값은 일 영상을 구성하는 해상도(단위: dpi 등)의 변경에 관한 정보값일 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 확인된 텍스트 정보값, 이미지 정보값, 비디오 정보값 및 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값이 미리 설정된 임계 컨텐츠 정보값 이상인 것을 판단될 때, 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다.
예를 들어, 디스플레이 제어 모듈 170은 확인된 텍스트 정보값이 미리 설정된 임계 컨텐츠 정보값(예: 일 화면에 표시되는 문자열 bit값이 600bit 등) 이상인 것으로 판단되면, 표시되는 이미지(예: 애플리케이션 등)의 해상도를 높일 수 있다. 추가적인 예를 들면 디스플레이 제어 모듈 170은 확인된 프레임 별 해상도 변경에 관한 정보 값이 미리 설정된 임계 컨텐츠 정보값(예: 1초당 100*100(가로*세로, 단위(dpi))의 변경 등)이상일 경우, 표시되는 이미지의 해상도를 낮출 수 있다.
디스플레이 제어 모듈 170은 측정된 렌더링 시간의 초과 여부에 대한 판단 결과를 기반으로 해상도를 결정할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 측정된 렌더링 시간이 디스플레이 150의 미리 설정된 수직 동기화 시간의 구간을 초과하는 경우, 디스플레이 150가 지원할 수 있는 fps를 갖는 해상도를 결정할 수 있다. 예를 들어 디스플레이 제어 모듈 170은 표시되는 애플리케이션에 포함된 데이터(예: 텍스트 데이터, 이미지 데이터, 프레임 별 화면 전환 데이터 등)를 기반으로, 디스플레이 150가 지원할 수 있는 최대한의 fps를 확인할 수 있다.
디스플레이 제어 모듈 170은 확인된 fps를 기반으로 결정된 해상도를 기반으로 애플리케이션을 렌더링할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 렌더링된 애플리케이션을 스케일러를 통해 크기를 증가시켜 화면에 표시되도록 디스플레이 150를 제어할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 디스플레이 150가 제공하는 기능 또는 크기에 따라 분류되는 디스플레이의 종류 정보를 획득할 수 있다. 예를 들어, 디스플레이의 분류는 전자 장치 101에서 수신한 표시정보를 기반으로 표시만 할 수 있는 장치, 이미지 생성과 관련된 제어부 및 표시부만을 포함하는 장치와 관련된 분류일 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 디스플레이 150의 밝기 정보, 프로세서 120의 렌더링 계산량 정보, 디스플레이 150의 해상도 정보, 디스플레이 150가 표시하는 화면의 시간 당 프레임 수(fps) 정보를 획득할 수 있다. 여기서 렌더링 계산량 정보는 프레임 당 계산 가능한 시간과 관련된 정보일 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 디스플레이 150의 절전모드 적용 정보, 디스플레이 150의 발열 정보, 디스플레이 150의 소모 전류정보를 획득할 수 있다. 여기서 절전모드 적용 정보는 전자 장치 101 사용자의 의해 설정된 해상도 조절, 밝기 조절, 미리 설정된 시간 동안의 활성화 시간 조절 등과 관련된 정보일 수 있다. 예를 들어 절전모드 적용 정보는 애플리케이션 별로 다르게 적용될수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 적어도 하나의 센서에 의해 감지된 주변 밝기 정보를 획득할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 센서 모듈 1540에 포함된 적어도 하나의 센서(예: 조도 센서 1540K 등)을 통해 전자 장치 101 밝기 정보를 획득할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 획득된 정보를 기반으로 색심도 정보를 결정할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 결정된 색심도 정보를 기반으로 화면 표시 정보를 생성할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 생성된 화면 표시 정보를 기반으로 애플리케이션을 표시할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 전력 소모가 80%이상인 것으로 판단되는 경우에는 32bit의 색심도로 결정할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 전력 소모가 50%이상 80% 미만인 경우에는 24bit의 색심도로 결정할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 전력 소모가 20% 이상 50% 미만인 경우에는 16bit의 색심도로 결정할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 전력 소모가 20% 미만인 경우에는 8bit의 색심도로 결정할 수 있다. 디스플레이 제어 모듈 170은 결정된 색심도를 기반으로 화면 표시 정보를 생성하고, 생성된 화면 표시 정보를 기반으로 애플리케이션(예: 이미지, 동영상 등)을 표시할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 온도값이 미리 설정된 온도값(예 20도 이상 등) 이상인 것으로 판단되면, 색심도를 낮출 수 있다.
본 발명의 일 실시예에 따른, 디스플레이 제어 모듈 170은 미리 설정된 조건(예: 온도값, 밝기, 렌더링 계산량, 해상도 등)을 충족하는 경우 32bit의 색심도를 사용하도록 결정하고, 충족하지 않는 경우 16bit의 색심도를 이용하도록 결정할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 시간당 프레임 수(FPS: frame per second)가 미리 설정된 임계 시간당 프레임 수(예: 40fps, 30fps 등) 이하인 경우, 32bit 색심도를 이용하도록 결정할 수 있다. 디스플레이 제어 모듈 170은 시간당 프레임 수가 미리 설정된 임계 시간당 프레임 수(예: 40fps, 30fps 등) 이상인 경우 색심도를 32bit에서 24bit로 변경되도록 결정할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 주변 밝기 값을 기반으로 색심도를 결정할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 전자 장치 101의 주변 밝기 값이 미리 설정된 임계 밝기 값(예: 30lux, 40lux 등) 이상인 경우 색심도를 32bit를 사용하도록 결정할 수 있다. 디스플레이 제어 모듈 170은 전자 장치 101의 주변 밝기 값이 미리 설정된 임계 밝기 값(예: 30lux, 40lux 등) 이하인 경우, 색심도를 16bit를 사용하도록 결정할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 애플리케이션 별로 색심도를 다르게 설정할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 애플리케이션의 설치 시 애플리케이션에 포함된 이미지를 분석할 수 있다. 디스플레이 제어 모듈 170은 애플리케이션을 구성하는 색심도의 빈도 수(예: RGB의 비율, RGB 중 R, G, B의 사용빈도 등)를 확인할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 일 애플리케이션이 색심도 32bit를 이용하는 것으로 판단된 경우, 애플리케이션 실행 시 색심도 32bit를 적용하여 표시되도록 디스플레이 150를 제어할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 메모리 사용값이 미리 설정된 임계 메모리 사용값(예: 50% 이하, 40% 이하 등) 이하인 경우 색심도를 낮출 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 다른 전자 장치(예: 전자 장치 102, 전자 장치 104 등)로부터 다른 전자 장치(예: 전자 장치 102, 전자 장치 104 등)의 상태 정보를 통신 인터페이스 160로부터 수신할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 수신한 다른 전자 장치(예: 전자 장치 102, 전자 장치 104 등)의 상태 정보를 기반으로 색심도 정보를 결정할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 결정된 색심도 정보를 기반으로 화면 표시 정보를 생성할 수 있다.
여기서 다른 전자 장치(예: 전자 장치 102, 전자 장치 104 등)의 상태 정보는 다른 전자 장치(예: 전자 장치 102, 전자 장치 104 등)의 소모전류 정보, 온도 정보, 절전모드에 관한 정보, 실행된 애플리케이션에 대응하는 전력 정보, 상기 다른 전자 장치의 스크린 크기 정보, 밝기 정보, FPS(Frame Per Second) 정보, 해상도 정보 및 렌더링 계산량 정보 중 적어도 어느 하나의 정보일 수 있다.
일 실시예에 따른 통신 인터페이스 160는 생성된 화면 표시 정보를 다른 전자 장치(예: 전자 장치 102, 전자 장치 104 등)로 송신할 수 있다.
도 2(도 2a, 도 2b, 도2c 및 도2d)는 본 발명의 다양한 실시예에 따른 전자 장치 101에서 애플리케이션의 표시를 제어하는 동작 설명을 위해 개략적으로 도시한 도면이다.
일 실시예에 따른 디스플레이 제어 모듈 170은 애플리케이션을 표시할 위치 정보, 애플리케이션의 크기 정보, 애플리케이션을 확대할 스케일 정보 및 애플리케이션의 해상도 정보 중 적어도 어느 하나의 정보를 기반으로, 애플리케이션을 표시할 수 있다.
도 2a를 참조하면, 디스플레이 제어 모듈 170은 전체 화면 200 대비 A 애플리케이션 201의 위치를 좌측 하단의 위치, 1/4의 크기 정보, 해상도 정보(예: T42, T85 등)로 결정할 수 있다. 디스플레이 제어 모듈 170은 결정된 A 애플리케이션 201을 확대할 스케일 값이 4일 때, 스케일 업(Scale up)되어 A 애플리케이션 201은 전체화면이 표시되도록 제어할 수 있다.
도 2b를 참조하면, 디스플레이 제어 모듈 170은 전체 화면 200 대비 애플리케이션 201의 화면 위치, 크기 정보, 해상도 정보 및 스케일 정보를 결정할 수 있다. 디스플레이 제어 모듈 170은 결정된 화면 위치, 크기 정보, 해상도 정보 및 스케일 정보를 기반으로, 애플리케이션 201을 표시할 수 있다. 디스플레이 제어 모듈 170은 스케일 정보를 기반으로, 표시된 애플리케이션 201을 스케일 업(Scale up)하여 표시되도록 제어할 수 있다.
도 2c를 참조하면, 디스플레이 제어 모듈 170은 전체 화면 200 대비 A 애플리케이션 201의 위치를 좌측 상단의 위치, 1/4의 크기 정보, 해상도 정보(예: T42, T85 등)로 결정할 수 있다. 디스플레이 제어 모듈 170은 결정된 A애플리케이션 201을 확대할 스케일 값이 16/9일 때, 스케일 업(Scale up)하여 A애플리케이션 201을 전체화면 대비 4/9로 스케일 변경하여 표시할 수 있다. 여기서, 애플리케이션을 표시할 위치 정보, 애플리케이션의 크기 정보, 애플리케이션을 확대할 스케일 정보 및 애플리케이션의 해상도 정보는 변경될 수 있다.
도 2d를 참조하면, 디스플레이 제어 모듈 170은 전체 화면 200 대비 애플리케이션 201의 화면 위치, 크기 정보, 해상도 정보 및 스케일 정보를 결정할 수 있다. 디스플레이 제어 모듈 170은 결정된 화면 위치, 크기 정보, 해상도 정보 및 스케일 정보를 기반으로, 애플리케이션 201을 표시할 수 있다. 디스플레이 제어 모듈 170은 스케일 정보를 기반으로, 표시된 애플리케이션 201을 스케일 업(Scale up)하여 표시되도록 제어할 수 있다.
도 3은 본 발명의 다양한 실시예에 따른 전자 장치에서 애플리케이션의 표시를 제어하는 동작 설명을 위해 개략적으로 도시한 도면이다.
본 발명의 일 실시예에 따른 디스플레이 150는 화면 300을 표시할 수 있다. 디스플레이 150는 날짜 조절 UI 301, 그룹 선택 UI 303, 명도 조절 UI 305, 해상도 조절 UI 307, 인터페이스 정보 UI 309, 공지 UI 311 중 적어도 하나의 UI를 포함할 수 있다. 여기서 날짜 조절 UI 301은 년도, 월, 일, 시간 등이 표시될 수 있고, 그룹 선택 UI 303는 Wi-Fi(Wireless Fidelity)를 조절하거나, GPS, 소리(sound), 스크린 전환(Screen rotation), 블루투스(Bluetooth) 등을 조절하는 기능을 제공하는 그룹을 제공할 수 있다. 명도 조절 UI 305는 디스플레이 150의 밝기를 조절하는 기능을 제공하는 사용자 인터페이스일 수 있다. 명도 조절 UI 305는 명도 AUTO UI 306을 포함할 수 있고, 여기서 명도 AUTO UI 306은 사용자나 시스템이 최종적으로 선택한 명도를 저장하여 사용하는 기능을 제공할 수 있다.
해상도 조절 UI 307은 디스플레이 150에 표시되는 애플리케이션의 해상도를 조절하는 기능을 제공하는 사용자 인터페이스일 수 있다. 해상도 조절 UI 307은 슬라이드 바를 이용하여 표시될 애플리케이션의 해상도를 조절할 수 있다. 해상도 조절 UI 307은 해상도 AUTO UI 308을 포함할 수 있고, 여기서 해상도 AUTO UI 308 은 사용자나 시스템이 최종적으로 선택한 해상도를 저장하여 사용하는 기능을 제공할 수 있다. 인터페이스 정보 UI 309는 SIM 카드가 삽입되었는지 여부를 알리는 기능을 제공하고, 공지 UI 311는 소프트웨어 업데이트 유무 등에 대한 알림을 제공할 수 있다.
도 4는 본 발명의 다양한 실시예에 따른 전자 장치 101에서 애플리케이션을 표시하는 흐름도를 도시한 도면이다.
전자 장치 101는 애플리케이션을 실행하는 입력 신호를 수신할 수 있다. 예를 들어, 디스플레이 150가 애플리케이션을 실행하는 입력 이벤트를 수신하거나, 통신 인터페이스 160를 통해 유선 또는 무선으로 연결되는 외부 장치(예: 다른 전자 장치 102, 104 등)로부터 애플리케이션의 실행을 요청하는 신호를 수신할 수 있다. 프로세서 120는 외부 장치로부터 수신된 입력 신호를 기반으로 애플리케이션을 실행할 수 있다.
디스플레이 제어 모듈 170은 401동작에서 애플리케이션을 실행함에 따른 전자 장치의 부하 정보를 확인한다. 일 실시예에 따른 전자 장치 101의 부하 정보는, 전자 장치 101의 메모리 용량 정보, 온도 정보, 배터리 소모 정보, 전자 장치 101의 전력 사용 정보 등을 포함할 수 있다. 여기서 부하 정보는, 미리 저장된 정보이거나 애플리케이션이 실행됨에 따라 해당 애플리케이션의 필요 스펙(spec)(예: 필요 용량, 해상도, 지원하는 운영체제(예: 안드로이드(android), iOs 등))등을 판단하여 디스플레이 제어 모듈 170에 의해 예측될 수 있다.
디스플레이 제어 모듈 170은 403동작에서 확인된 부하 정보를 기반으로 화면 표시 정보를 결정한다. 디스플레이 제어 모듈 170은 405동작에서 결정된 화면 표시 정보를 기반으로 애플리케이션을 표시한다. 여기서 화면 표시 정보는, 애플리케이션을 표시할 위치 정보, 애플리케이션의 크기 정보, 애플리케이션을 확대할 스케일 정보 및 애플리케이션의 해상도 정보 중 적어도 어느 하나의 정보를 포함할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 전력 사용량, 메모리 사용 수준, 시스템 리소스의 부하 정도를 판단하여 화면 표시 정보를 결정할 수 있다. 예를 들어, 실행될 애플리케이션의 사용할 수 있는 메모리 용량 값이 미리 설정된 임계용량 값(예: 100MB 등)이하일 경우에, 디스플레이 제어 모듈 170은 화면 표시 정보를 변경(예: 해상도를 낮춤)하여 애플리케이션을 표시할 수 있다.
도 5는 본 발명의 다양한 실시예에 따른 전자 장치에서 애플리케이션을 표시하는 흐름도를 도시한 도면이다.
전자 장치 101는 애플리케이션을 실행하는 입력 신호를 수신할 수 있다. 예를 들어, 디스플레이 150가 애플리케이션을 실행하는 입력 이벤트를 수신하거나, 통신 인터페이스 160를 통해 유선 또는 무선으로 연결되는 외부 장치(예: 다른 전자 장치 102, 104 등)로부터 애플리케이션의 실행을 요청하는 신호를 수신할 수 있다. 프로세서 120는 외부 장치로부터 수신된 입력 신호를 기반으로 애플리케이션을 실행할 수 있다.
디스플레이 제어 모듈 170은 501동작에서 애플리케이션을 실행함에 따른 전자 장치의 부하 정보를 확인한다. 일 실시예에 따른 전자 장치 101의 부하 정보는, 전자 장치 101의 메모리 용량 정보, 온도 정보, 배터리 소모 정보, 전자 장치 101의 전력 사용 정보 등을 포함할 수 있다. 여기서 부하 정보는, 미리 저장된 정보이거나 애플리케이션이 실행됨에 따라 해당 애플리케이션의 필요 스펙(spec)(예: 필요 용량, 해상도, 지원하는 운영체제(예: 안드로이드(android), iOs 등))등을 판단하여 디스플레이 제어 모듈 170에 의해 예측될 수 있다.
디스플레이 제어 모듈 170은 503동작에서 확인된 부하 정보를 기반으로 화면 표시 정보를 결정한다. 디스플레이 제어 모듈 170은 505 동작에서 결정된 화면 표시 정보를 기반으로 애플리케이션을 표시한다. 여기서 화면 표시 정보는, 애플리케이션을 표시할 위치 정보, 애플리케이션의 크기 정보, 애플리케이션을 확대할 스케일 정보 및 애플리케이션의 해상도 정보 중 적어도 어느 하나의 정보를 포함할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 전력 사용량, 메모리 사용 수준, 시스템 리소스의 부하 정도를 판단하여 화면 표시 정보를 결정할 수 있다. 예를 들어, 실행될 애플리케이션의 사용할 수 있는 메모리 용량 값이 미리 설정된 임계용량 값(예: 100MB 등)이하일 경우에, 디스플레이 제어 모듈 170은 화면 표시 정보를 변경(예: 해상도를 낮춤)하여 애플리케이션을 표시할 수 있다.
디스플레이 제어 모듈 170은 507동작에서 화면 표시 정보를 변경하는 제어신호를 생성한다. 일 실시예에 따른 디스플레이 제어 모듈 170은 적어도 하나의 센서로부터 전자 장치 101의 온도 값을 확인하고, 온도 값이 미리 설정된 임계온도 값 이상일 때 상기 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 사용할 수 있는 메모리 용량 값(예: 메모리의 정격 용량 대비 가용한 용량 등)을 확인하고, 용량 값이 미리 설정된 임계용량 값 이하일 때 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 배터리 상태를 확인하고, 배터리 상태가 미리 설정된 배터리 상태에 도달할 때 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다.
디스플레이 제어 모듈 170은 509동작에서 생성된 제어 신호를 기반으로 화면 표시 정보를 갱신한다. 디스플레이 제어 모듈 170은 511동작에서 갱신된 화면 표시 정보를 기반으로 애플리케이션을 표시한다. 여기서 화면 표시 정보는, 애플리케이션을 표시할 위치 정보, 애플리케이션의 크기 정보, 상기 애플리케이션을 확대할 스케일 정보 및 상기 애플리케이션의 해상도 정보 중 적어도 어느 하나의 정보를 포함할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 화면 표시 정보(예: 해상도 등)를 결정하고, 가상해상도에 따른 렌더링(rendering)을 수행하고 서피스 플링거(surface flinger)를 통해 애플리케이션의 크기를 변화시킬 수 있다. 여기서 렌더링은 모델(또는 이들을 모아놓은 장면인 씬(scene) 파일로부터 영상을 만들어 내는 과정을 의미할 수 있다. 여기서 서피스 플링거(surface flinger)는 디스플레이 150에 애플리케이션의 실행화면을 출력하는 기능을 제공할 수 있다. 예를 들어, 서피스 플링거는 페이지 플립핑(page flipping), 레이어 합성, OpenGL, ES, EGL 등의 기술을 복합적으로 이용할 수 있다.
디스플레이 제어 모듈 170이 화면의 원 해상도에 따라서 렌더링을 할 필요가 없고 원 해상도에 맞는 메모리 공간이 필요하지 않으므로 메모리 및 전류의 감소의 효과를 얻을 수 있다. 표1을 참조하면, 홈 스크린(Home screen), 라이브 월페이퍼(live wallpaper)의 경우, 메모리 사용량이 113.2MB에서 47.8MB로 감소됨을 확인할 수 있다. 홈 스크린(Home screen), 월 페이퍼(wallpaper), 목록 화면에서 간단한 활동(Simple activity with a list view), 오픈 지엘(OpenGL), 게임(Game)(예: Hill Climb Racing),GFX 벤치(GFX Bench)(예: Manhattan test),등의 애플리케이션의 경우에도 메모리 사용량이 감소됨을 확인할 수 있다.
애플리케이션(Application) 스케일링 수행하지 않음
(No Scaling) 		스케일링 수행(Scaling)
애플리케이션(Application) 메모리 사용량(Memory usage) (단위: 메가바이트(MB))
홈 스크린(Home screen), 라이브 월페이퍼(live wallpaper) 113.2 47.8
홈 스크린(Home screen), 고정 월페이퍼(static wallpaper) 92.7 44.9
목록 화면에서 간단한 활동(Simple activity with a list view) 121.5 44.9
오픈 지엘(OpenGL), 게임(Game) 123.7 50.9
GFX 벤치(GFX Bench) 128.8 55.1
표2를 참조하면 목록 화면에서 간단한 활동(Simple listview activity), 스크롤 업 및 다운(scroll up/down)과 같은 간단하게 사용시 60줄(joule, 에너지 단위)에서 54줄(joule, 에너지 단위)로 감소됨을 확인할 수 있다. 게임(예: 앵그리 버드(Angry birds), 구글 크롬 브라우저(Google Chrome-Browse),GL 벤치마크 2.5(GL Benchmark 2.5)-Egypt test,게임(예: 템플런 2(Temple Run) 2,게임(예: Fruit Ninja), 게임(예: Fruit Ninja 터치 없이 사용),와 같은 일 애플리케이션의 경우에도 에너지 소비가 줄어드는 효과를 확인할 수 있다.
애플리케이션(Application) 스케일링 수행하지 않음
(No Scaling) 		스케일링 수행(Scaling)
애플리케이션(Application) 에너지 소비(Energy consumption) (단위: 줄(J)), 감소량 단위(%)
목록 화면에서 간단한 활동(Simple activity with a list view), 45초 동안 스크롤 업 및 다운(scroll up/down) 60 54(10%)
게임(예: 앵그리 버드(Angry birds)), 125초 동안 사용 200 190(5%)
구글 크롬(Google Chrome) - 90초동안 브라우저 사용 181 160(12%)
GL 벤치마크 2.5(GL Benchmark 2.5) 120초간 사용 484 370(24%)
게임(예: 템플런2(Temple Run 2)) 120초 동안 사용 184 152(18%)
게임(예: Fruit Ninja) 60초간 사용 103 93(10%)
게임(예: Fruit Ninja) 60초간 터치 입력 없이 사용 77 63(19%)
도 6a 내지 도 6c는 본 발명의 다양한 실시예에 따른 전자 장치 101에서 화면에 표시되는 각각의 애플리케이션 별로 화면 표시 정보를 달리하는 UI를 개략적으로 도시한 도면이다.
도 6a를 참조하면, 본 발명의 다양한 실시예에 따른 화면 600은 적어도2개의 표시영역과 표시영역의 크기 조절을 지원하는 세퍼레이터 650를 포함할 수 있다. 여기서, 화면 600에서 분할되는 각 표시영역은 실행 애플리케이션에 따른 네비게이션(navigation), 스크롤, 텍스트 입력 등이 서로 독립적으로 이루어질 수 있다. 여기서 표시영역들 중 임의의 표시영역에 대해서 제1 표시영역 610, 제2 표시영역 620와 같이 표현할 수 있다. 다양한 일 실시예에 따른 화면 600은 별도의 인터페이스(예: 메모 인터페이스, 인터페이스 등)를 포함하는 팝업 윈도우를 포함할 수 있다.
도 6a에서는 본 발명의 일 실시예에 따른 하나의 세퍼레이터 650를 통해 전자 장치 101의 화면이 2개의 실행영역(표시영역)들로 구분된 것을 예시로 하였으나, 본 개시의 실시예에 따르면 화면 크기에 비례하여 최대 분할될 수 있는 N(N > 1인 자연수) 개로 분할될 수 있다. 따라서 세퍼레이터 650는 화면이 분할되는 개수 즉, 화면 600이 구성되는 분할 방식에 대응하여 하나 또는 그 이상이 제공될 수 있다. 이렇게 나뉘어진 표시영역을 제1 표시영역 610, 제2 표시영역 620 등으로 명명할 수 있다.
예를 들어, 도6a에서와 같이 2개의 실행영역들로 구분되는 경우 하나의 세퍼레이터 650로 제어될 수 있고, 3개의 실행영역들로 구분되는 경우 2개의 세퍼레이터 650로 제어될 수 있고, 4개의 실행영역들로 구분되는 경우 구분되는 영역에 따라 2개 또는 3개의 세퍼레이터 650로 제어될 수 있다.
도 6a 도시된 바와 같이, 디스플레이 150는 A 애플리케이션을 전체화면으로 표시할 수 있다. 전자 장치 101가 화면 600을 통해 2개의 애플리케이션들을 실행 중일 때의 전자 장치 101의 화면 예시를 나타낸 것이다. 예를 들어, 사용자는 A 애플리케이션의 전체 화면이 표시된 상태에서 B 애플리케이션을 추가적으로 실행할 수 있다. 디스플레이 150는 하나의 화면이 세퍼레이터 650를 통해 2개의 표시영역들을 독립적인 표시영역들로 구분하고, 각 표시영역들을 통해 A 애플리케이션 및 B 애플리케이션의 화면이 각각 제공되게 표시할 수 있다. 예를 들어, 디스플레이 150는 A 애플리케이션은 제1 표시영역 610에 표시하고, B 애플리케이션은 제2 표시영역 620에 표시할 수 있다. 이와 같이, 본 발명의 실시예에 따른 적어도 2개의 화면 분할에 의한 복수개의 애플리케이션들을 동시 제어할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 제1 표시영역 610에 표시되는 A애플리케이션 및 제2 표시영역 620에 표시되는 B애플리케이션에 대한 사용자 입력 여부를 판단할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 제1 표시영역 610에 대해서 사용자 입력을 감지하면, B애플리케이션이 표시되는 제2 표시영역 620에 대한 화면 표시 정보(예: 해상도 정보, 밝기 정보, 색심도 정보 등)를 변경할 수 있다. 예를 들어, A 애플리케이션을 표시하는 제1 표시영역 610에 대한 입력 이벤트를 감지하면 제2 표시영역 620에 대한 해상도 값, 밝기 값, 색심도 값 등을 낮출 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 A애플리케이션 및 B애플리케이션이 제공하는 컨텐츠를 기반으로 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 A애플리케이션 및 B애플리케이션에 포함된 컨텐츠의 텍스트 정보값, 이미지 정보값, 비디오 정보값, 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값을 확인할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 확인된 확인된 텍스트 정보값, 이미지 정보값, 비디오 정보값 및 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값이 미리 설정된 임계 컨텐츠 정보값 이상인 것을 판단될 때, 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다. 예를 들어 디스플레이 제어 모듈 170은 제2 표시 영역 620에서 동영상 애플리케이션이 실행 중인 경우, 동영상 애플리케이션에 포함된 프레임 별 해상도 변경이 전체 화면 대비 20%이상인 경우, 동영상 애플리케이션의 해상도를 낮출 수 있다.
도 6b를 참조하면, 본 발명의 일 실시예에 따른 디스플레이 150는 A 애플리케이션, B 애플리케이션, 그리고 C 애플리케이션이 2개의 세퍼레이터 650를 통해 3개의 표시영역들을 통해 실행 중일 때의 화면을 표시할 수 있다. 예를 들어, 디스플레이 150는 A 애플리케이션을 제1 표시영역 610에 표시하고, B 애플리케이션을 제2 표시영역 620에 표시하고, C애플리케이션을 제3 표시영역 630에 표시할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 제1 표시영역 610에 표시되는 A애플리케이션, 제2 표시영역 620에 표시된 B 애플리케이션 및 제3 표시영역 630에 표시되는 C애플리케이션에 대한 사용자 입력 여부를 판단할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 제1 표시영역 610에 대해서 사용자 입력을 감지하면, B애플리케이션이 표시되는 제2 표시영역 620 및 C 애플리케이션이 표시되는 제3 표시영역 630에 대한 화면 표시 정보(예: 해상도 정보, 밝기 정보, 색심도 정보 등)를 변경할 수 있다. 예를 들어, A 애플리케이션을 표시하는 제1 표시영역 610에 대한 입력 이벤트를 감지하면 제2 표시영역 620 및 제3 표시영역 630에 대한 해상도 값, 밝기 정보 값, 색심도 정보 값 등을 낮출 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 A애플리케이션 및 B애플리케이션이 제공하는 컨텐츠를 기반으로 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 A애플리케이션, B애플리케이션 및 C 애플리케이션에 포함된 컨텐츠의 텍스트 정보값, 이미지 정보값, 비디오 정보값, 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값을 확인할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 확인된 텍스트 정보값, 이미지 정보값, 비디오 정보값 및 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값이 미리 설정된 임계 컨텐츠 정보값 이상인 것을 판단될 때, 화면 표시 정보를 변경하는 제어 신호를 생성할 수 있다.
예를 들어 디스플레이 제어 모듈 170은 제1 표시영역 610에는 메모 애플리케이션이 표시되고, 제2 표시영역 620에는 날짜 애플리케이션이 표시되고, 제3 표시영역 630에는 3D 게임 애플리케이션이 표시될 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 3D 게임 애플리케이션이 표시되는 제3 표시영역 630의 해상도를 높이고, 제1 표시영역 610 및 제2 표시영역 620의 해상도를 낮출 수 있다. 여기서 화면 표시 정보(예: 해상도 정보, 밝기 정보, 색심도 정보 등)의 조절(예: 높이고 낮춤 등)은 변경 및 갱신될 수 있다.
도 6c를 참조하면, 본 발명의 일 실시예에 따른 디스플레이 150는 4개의 표시영역에 A 애플리케이션과 B 애플리케이션, C애플리케이션을 표시할 수 있다. 디스플레이 150는 표시영역들 중 하나의 표시영역을 애플리케이션이 실행되지 않는 빈(empty) 표시영역으로 표시할 수 있다. 디스플레이 150는 복수개의 세퍼레이터 650를 통해 구분된 4개의 표시영역들을 통해 실행 중일 때의 화면을 표시할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 150는 4개의 표시영역에 A 애플리케이션과 B 애플리케이션, C애플리케이션, D애플리케이션을 표시할 수 있다. 사용자의 지정에 의하여 하나의 표시영역을 빈 표시영역으로 설정할 수 있다. 복수개의 세퍼레이터 650를 통해 구분된 4개의 표시영역들을 통해 실행 중일 때의 화면을 표시할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 150가 제1 표시영역 610에는 동영상이 재생 중인 화면을 표시하고, 제2 표시영역 620에는 SNS(Social Network service)가 진행 중인 화면을 표시하고, 제3 표시영역 630에는 e-book 기능과 관련된 실행 화면을 표시하고, 제4표시영역 640에는 Internet뉴스 실행 화면을 표시하고, 제3 표시영역 630의 e-book에 최종 터치 입력 이벤트가 검출 될 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 제3 표시영역 630의 해상도를 높이고, 제1 표시영역 610, 제2 표시영역 620 및 제4 표시영역 640의 해상도를 낮출 수 있다. 여기서 해상도의 조절 정도는 변경될 수 있고, 해상도의 증가 및 낮춤은 변경될 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 제1 표시영역 610에 표시되는 애플리케이션에서 요구하는 이미지 정보값(예: 픽셀 값(단위: 가로*세로, dpi) 등)이 제2 표시영역 620, 제3 표시영역 630 및 제4 표시영역 640에서 표시되는 애플리케이션의 이미지 정보값 보다 높을 경우, 제1 표시영역 610에 표시되는 애플리케이션의 밝기 및 색심도 등을 높일 수 있다.
도 7은 본 발명의 다양한 실시예에 따른 전자 장치 101에서 화면에 표시되는 각각의 애플리케이션 별로 화면 표시 정보를 달리하는 UI를 개략적으로 도시한 도면이다.
도 7을 참조하면, 디스플레이 150는 복수개의 애플리케이션들을 각각의 표시영역(제1 표시영역 610 및 제2 표시영역 620)에 표시할 수 있다.
본 발명의 일 실시예에 따른 디스플레이 제어 모듈 170은 제1 표시영역 610에 표시되는 인터넷 애플리케이션 및 제2 표시영역 620에 표시되는 메모 애플리케이션에 대한 사용자 입력 여부를 판단할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 제1 표시영역 610에 대해서 사용자 입력을 감지하면, 메모 애플리케이션이 표시되는 제2 표시영역 620에 대한 화면 표시 정보(예: 해상도 정보, 밝기 정보, 색심도 정보 등)를 변경할 수 있다. 예를 들어, 인터넷 애플리케이션을 표시하는 제1 표시영역 610에 대한 입력 이벤트를 감지하면 제2 표시영역 620에 대한 해상도, 밝기, 색심도 등을 낮출 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 제1 표시영역 610에 표시되는 인터넷 애플리케이션이 요구하는 이미지 정보값(예: 픽셀 값), 텍스트 정보값(예: 인터넷에 포함된 텍스트 데이터 값(예: 텍스트 문자 비트 값)이 제2 표시영역 620에 표시되는 메모 애플리케이션 보다 높은 것으로 판단되는 경우, 제1 표시영역 610에 표시되는 인터넷 애플리케이션의 해상도 및 밝기 등을 높이고, 제2 표시영역 620에 표시되는 메모 애플리케이션의 해상도 및 밝기 등을 낮출 수 있다.
도 8은 본 발명의 다양한 실시예에 따른 전자 장치 101의 화면에 표시되는 각각의 애플리케이션 별로 화면 표시 정보를 달리하는 순서도를 도시한다.
전자 장치 101는 애플리케이션을 실행하는 입력 신호를 수신할 수 있다. 예를 들어, 디스플레이 150가 애플리케이션을 실행하는 입력 이벤트를 수신하거나, 통신 인터페이스 160를 통해 유선 또는 무선으로 연결되는 외부 장치(예: 다른 전자 장치 102, 104 등)로부터 애플리케이션의 실행을 요청하는 신호를 수신할 수 있다. 프로세서 120는 외부 장치로부터 수신된 입력 신호를 기반으로 애플리케이션을 실행할 수 있다.
디스플레이 제어 모듈 170은 801동작에서 애플리케이션의 실행에 따른 전자 장치 101의 부하 정보를 확인한다. 디스플레이 제어 모듈 170은 803동작에서 확인된 부하 정보를 기반으로 화면 표시 정보를 결정한다. 디스플레이 제어 모듈 170은 805동작에서 결정된 화면 표시 정보를 기반으로 애플리케이션의 실행을 표시한다.
전자 장치 101는 제2 애플리케이션을 실행하는 입력 신호를 수신할 수 있다. 예를 들어, 디스플레이 150가 제2 애플리케이션을 실행하는 입력 이벤트를 수신하거나, 통신 인터페이스 160를 통해 유선 또는 무선으로 연결되는 외부 장치(예: 다른 전자 장치 102, 104 등)로부터 제2 애플리케이션의 실행을 요청하는 신호를 수신할 수 있다. 프로세서 120는 외부 장치로부터 수신된 입력 신호를 기반으로 제2 애플리케이션을 실행할 수 있다. 일 실시예에 따른 전자 장치 101는 화면을 적어도 2개의 표시영역으로 분할하는 요청 신호를 수신할 수 있다.
디스플레이 제어 모듈 170은 807동작에서 애플리케이션 및 제2 애플리케이션을 표시할 화면을 적어도 2개의 표시영역으로 분할한다. 예를 들어 디스플레이 제어 모듈 170은 멀티 윈도우로 구성되는 화면을 표시하도록 디스플레이 150를 제어할 수 있다.
디스플레이 제어 모듈 170은 809동작에서 애플리케이션 및 제2 애플리케이션의 표시영역에 대한 사용자 입력을 감지함에 따른 활성화 여부에 대한 판단 또는 애플리케이션 및 제2 애플리케이션에서 제공하는 컨텐츠를 기반으로 화면 표시 정보를 결정한다. 예를 들어 디스플레이 제어 모듈 170은 사용자 입력이 감지되지 않은 표시 영역에 대한 해상도, 밝기 등을 낮출 수 있다. 추가적인 예를 들면, 디스플레이 제어 모듈 170은 애플리케이션을 표시하는 제1 표시영역에 포함된 픽셀 값, 프레임 별 해상도 변경 값이 제2 애플리케이션을 표시하는 제2 표시영역 보다 높은 경우, 제2 애플리케이션이 표시되는 제2 표시 영역의 밝기, 해상도 등을 낮출 수 있다.
디스플레이 제어 모듈 170은 811동작에서 결정된 화면 표시 정보를 기반으로 적어도 2개의 표시영역 각각에 애플리케이션 및 제2 애플리케이션의 실행을 표시한다. 다양한 실시예들에 따른 상기 동작들은 추가되거나 생략될 수 있고, 801 동작 내지 807 동작은 생략될 수 있다.
도 9는 본 발명의 다양한 실시예에 따른 전자 장치 101에서 애플리케이션을 가상 오브젝트 형태로 표시하는 일 예를 개략적으로 도시한다.
본 발명의 일 실시예에 따른 전자 장치 101는 웨어러블 장치(wearable device, 예: 전자 안경과 같은 head-mounted-device(HMD))일 수 있다.
본 발명의 일 실시예에 따른 HMD인 전자 장치 101를 장착한 사용자 910는 가상 오브젝트 형태로 표시된 이미지 데이터(900, 예: 애플리케이션, 동영상 데이터 등)를 관찰할 수 있다. 일 실시예에 따른 HMD인 전자 장치 101를 장착한 사용자 910는 가상 오브젝트 형태로 표시된 이미지 데이터 내의 관찰 영역 920을 변경할 수 있다. 예를 들어, HMD인 전자 장치 101을 장착한 사용자는 현실 공간에서 움직일 수 있고, 가상 공간에서 사용자의 위치를 변경할 수 있다.
일 실시예에 따른 HMD인 전자 장치 101는 현실 공간 또는 가상 공간에서 표시되는 이미지에 대한 관찰 영역 920을 변경할 수 있다. 프로세서 120는 전자 장치 101의 사용자의 시야 변경을 감지하고, 감지된 시야에 대응하는 이미지가 표시되도록 제어할 수 있다.
본 발명의 일 실시예에 따른 전자 장치 101는 사용자 910의 움직임을 감지함으로써, 움직임에 대응하는 화면의 표시 정보를 조절할 수 있다. 예를 들면, 전자 장치 101는 사용자 910의 움직임 데이터 값이 미리 설정된 임계 움직임 데이터 값(예: 5m/s, 10m/s 등)인 경우, 화면에 표시되는 이미지의 해상도, 밝기 값 등을 낮출 수 있다.
도 10a 및 도 10b는 본 발명의 다양한 실시예에 따른 전자 장치 101의 움직임에 따라 화면 표시 정보를 변경하는 일 예를 개략적으로 도시한다.
도 10a를 참조하면 일 실시예에 따른 전자 장치 101는 센서 모듈 1540에 포함된 적어도 하나의 센서(예: 제스쳐 센서 1540A, 자이로 센서 1540B, 가속도 센서 1540D 등)에 의해 전자 장치 101의 움직임을 감지할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 움직임에 따라 해상도 1010를 변경할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 움직임 값이 미리 설정된 임계 움직임 값(예: 5m/s, 20m/s 등)을 초과하는 경우, 표시하고 있는 화면의 표시 정보 1000를 변경할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 전자 장치 101의 움직임 값이 미리 설정된 임계 움직임 값(예: 5m/s, 20m/s 등)을 초과하는 경우 해상도 값, 밝기 값 등을 낮출 수 있다.
도 10b를 참조하면 일 실시예에 따른 전자 장치 101는 웨어러블 디바이스(예: HMD 등)일 수 있다. 전자 장치 101는 센서 모듈 1540에 포함된 적어도 하나의 센서(예: 제스쳐 센서 1540A, 자이로 센서 1540B, 가속도 센서 1540D 등)에 의해 전자 장치 101의 움직임을 감지할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 움직임에 따라 해상도 1010를 변경할 수 있다.
일 실시예에 따른 디스플레이 제어 모듈 170은 전자 장치 101의 움직임 값이 미리 설정된 임계 움직임 값(예: 10m/s, 500m/s 등)을 초과하는 경우, 표시하고 있는 화면의 표시 정보를 변경할 수 있다. 예를 들어, 디스플레이 제어 모듈 170은 전자 장치 101의 움직임 값이 미리 설정된 임계 움직임 값(예: 10m/s, 500m/s 등)을 초과하는 경우 애플리케이션을 표시하는 밝기 값, 해상도 값 1010 등을 낮출 수 있다.
도 11은 본 발명의 다양한 실시예에 따른 전자 장치 101의 움직임에 따라 화면 표시 정보를 결정하는 순서도를 도시한다.
전자 장치 101는 애플리케이션을 실행하는 입력 신호를 수신할 수 있다. 예를 들어, 디스플레이 150가 애플리케이션을 실행하는 입력 이벤트를 수신하거나, 통신 인터페이스 160를 통해 유선 또는 무선으로 연결되는 외부 장치(예: 다른 전자 장치 102, 104 등)로부터 애플리케이션의 실행을 요청하는 신호를 수신할 수 있다. 프로세서 120는 외부 장치로부터 수신된 입력 신호를 기반으로 애플리케이션을 실행할 수 있다.
디스플레이 제어 모듈 170은 1101동작에서 애플리케이션의 실행에 따른 전자 장치 101의 부하 정보를 확인한다. 디스플레이 제어 모듈 170은 1103동작에서 확인된 부하 정보를 기반으로 화면 표시 정보를 결정한다. 디스플레이 제어 모듈 170은 1105동작에서 결정된 화면 표시 정보를 기반으로 애플리케이션의 실행을 표시한다.
디스플레이 제어 모듈 170은 1107동작에서 애플리케이션이 가상 오브젝트로 표시되도록 제어한다. 프로세서 120는 1109동작에서 전자 장치 101의 부하 정보에 포함된 화면 전환 데이터값이 미리 설정된 임계 전환 데이터 값을 초과하는 지 여부를 판단한다. 예를 들어 화면 전환 데이터값은 전자 장치 101의 이동 속도(예: 5m/s, 3m/s 등), 이동 거리(예: 10cm, 20cm 등)에 대응하는 데이터값일 수 있다. 디스플레이 제어 모듈 170은 화면 전환 데이터 값이 미리 설정된 임계 전환 데이터값을 초과하지 않는 경우, 1111동작에서 원 해상도를 기반으로 애플리케이션을 렌더링한다.
디스플레이 제어 모듈 170은 화면 전환 데이터값이 미리 설정된 임계 전환 데이터값을 초과하는 경우, 1113 동작에서 애플리케이션의 프레임 별 데이터 연산량을 기반으로 애플리케이션의 렌더링 시간을 측정한다.
디스플레이 제어 모듈 170은 1115동작에서 측정된 렌더링 시간이 미리 설정된 수직 동기화 구간을 초과하는 지 여부를 판단한다. 디스플레이 제어 모듈 170은 1115동작에서 측정된 렌더링 시간이 미리 설정된 수직 동기화 구간을 초과하지 않는 경우, 1111동작과 같이 원 해상도를 기반으로 애플리케이션을 렌더링 한다.
디스플레이 제어 모듈 170은 측정된 렌더링 시간이 미리 설정된 수직 동기화 시간의 구간을 초과하는 경우 1117 동작에서 디스플레이 150가 지원할 수 있는 해상도를 결정한다. 예를 들어 디스플레이 제어 모듈 170은 디스플레이 150가 지원할 수 있는 최대의 시간당 프레임 수(fps)를 갖는 해상도를 결정할 수 있다. 디스플레이 제어 모듈 170은 1119동작에서 결정된 해상도를 기반으로 애플리케이션을 렌더링한다.
일 실시예에 따른 디스플레이 제어 모듈 170은 확인된 fps를 기반으로 결정된 해상도를 기반으로 애플리케이션을 렌더링할 수 있다. 일 실시예에 따른 디스플레이 제어 모듈 170은 렌더링된 애플리케이션을 스케일러를 통해 크기를 증가시켜 화면에 표시되도록 디스플레이 150를 제어할 수 있다.
상기 동작들 중 일부 동작은 생략되거나 다른 동작이 추가될 수 있다. 추가적으로 1101동작 내지 1107동작은 생략될 수 있다.
도 12는 본 발명의 다양한 실시예에 따른 전자 장치 101의 색심도 정보를 결정하는 순서도를 도시한다.
전자 장치 101는 애플리케이션을 실행하는 입력 신호를 수신할 수 있다. 예를 들어, 디스플레이 150가 애플리케이션을 실행하는 입력 이벤트를 수신하거나, 통신 인터페이스 160를 통해 유선 또는 무선으로 연결되는 외부 장치(예: 다른 전자 장치 102, 104 등)로부터 애플리케이션의 실행을 요청하는 신호를 수신할 수 있다. 프로세서 120는 외부 장치로부터 수신된 입력 신호를 기반으로 애플리케이션을 실행할 수 있다.
디스플레이 제어 모듈 170은 1201동작에서 애플리케이션의 실행에 따른 전자 장치 101의 부하 정보를 확인한다. 디스플레이 제어 모듈 170은 1203동작에서 확인된 부하 정보를 기반으로 화면 표시 정보를 결정한다. 디스플레이 제어 모듈 170은 1205동작에서 결정된 화면 표시 정보를 기반으로 애플리케이션의 실행을 표시한다.
디스플레이 제어 모듈 170은 1207동작에서 전자 장치 101의 정보를 획득한다. 여기서 전자 장치 101의 정보는 디스플레이 150가 제공하는 기능 또는 크기에 따라 분류되는 디스플레이 150의 종류 정보, 디스플레이 150의 밝기 정보, 프로세서 120의 렌더링 계산량 정보, 디스플레이 150의 해상도 정보, 디스플레이 150의 FPS 정보, 디스플레이 150의 절전모드 적용 정보, 디스플레이 150의 발열 정보, 디스플레이 150의 소모 전류정보 및 전자 장치 101에 의해 감지되는 주변 밝기 정보 중 적어도 하나의 정보일 수 있다.
디스플레이 제어 모듈 170은 1209동작에서 획득된 정보를 기반으로 색심도 정보를 결정한다. 여기서 색심도 정보는 1개의 픽셀에서 표현할 수 있는 색의 수에 관한 정보일 수 있다. 예를 들어, 색심도 정보는 RGB(적, 녹, 청) 각각에 대해 몇 비트씩 할당 후 조합을 통해 여러 색을 나타내는 정보일 수 있다.
디스플레이 제어 모듈 170은 1211동작에서 결정된 색심도 정보를 기반으로 화면의 표시 정보를 생성한다. 디스플레이 제어 모듈 170은 1213동작에서 생성된 화면 표시 정보를 기반으로 애플리케이션을 표시한다.
상기 동작들 중 일부 동작은 생략되거나 다른 동작이 추가될 수 있다. 추가적으로 1201동작 내지 1205동작은 생략될 수 있다.
도 13은 본 발명의 다양한 실시예에 따른 전자 장치 101의 다른 전자 장치(전자 장치 102, 전자 장치 104 등)와의 연결의 일 예를 개략적으로 도시한다.
예를 들어, 전자 장치 101는 휴대 단말기 일 수 있고, 다른 전자 장치(전자 장치 102, 전자 장치 104 등)는 HMD, 웨어러블 디바이스, 휴대 단말기, TV 등일 수 있다. 일 실시예에 따른 전자 장치 101는 다른 전자 장치(전자 장치 102, 전자 장치 104 등)의 상태 정보를 수신할 수 있다. 전자 장치 101는 수신한 다른 전자 장치(전자 장치 102, 전자 장치 104 등)의 상태 정보를 기반으로 색심도 정보를 결정할 수 있다. 전자 장치 101는 결정된 색심도 정보를 기반으로 화면을 표시 정보를 생성하여 다른 전자 장치(전자 장치 102, 전자 장치 104 등)로 송수신할 수 있다.
여기서 다른 전자 장치(전자 장치 102, 전자 장치 104 등)의 상태 정보는 여기서 다른 전자 장치(예: 전자 장치 102, 전자 장치 104)의 상태 정보는, 소모전류 정보, 온도 정보, 절전모드에 관한 정보, 실행된 애플리케이션에 대응하는 전력 정보, 상기 다른 전자 장치의 스크린 크기 정보, 밝기 정보, FPS(Frame Per Second) 정보, 해상도 정보 및 렌더링 계산량 정보 중 적어도 하나의 정보일 수 있다.
도 14는 본 발명의 다양한 실시예에 따른 전자 장치 101의 다른 전자 장치(예: 전자 장치 102, 전자 장치 104)로부터 수신된 다른 전자 장치(예: 전자 장치 102, 전자 장치 104)의 상태 정보를 기반으로 화면 표시 정보를 생성하는 순서도를 도시한다.
전자 장치 101는 애플리케이션을 실행하는 입력 신호를 수신할 수 있다. 예를 들어, 디스플레이 150가 애플리케이션을 실행하는 입력 이벤트를 수신하거나, 통신 인터페이스 160를 통해 유선 또는 무선으로 연결되는 외부 장치(예: 다른 전자 장치 102, 104 등)로부터 애플리케이션의 실행을 요청하는 신호를 수신할 수 있다. 프로세서 120는 외부 장치로부터 수신된 입력 신호를 기반으로 애플리케이션을 실행할 수 있다.
디스플레이 제어 모듈 170은 1401동작에서 애플리케이션의 실행에 따른 전자 장치 101의 부하 정보를 확인한다. 디스플레이 제어 모듈 170은 1403동작에서 확인된 부하 정보를 기반으로 화면 표시 정보를 결정한다. 디스플레이 제어 모듈 170은 1405동작에서 결정된 화면 표시 정보를 기반으로 애플리케이션의 실행을 표시한다.
디스플레이 제어 모듈 170은 1407동작에서 다른 전자 장치(예: 전자 장치 102, 전자 장치 104)로부터 다른 전자 장치(예: 전자 장치 102, 전자 장치 104)의 상태 정보를 수신한다. 디스플레이 제어 모듈 170은 1409 동작에서 수신한 다른 전자 장치(예: 전자 장치 102, 전자 장치 104)의 상태 정보를 기반으로 색심도 정보를 결정한다. 여기서 다른 전자 장치(예: 전자 장치 102, 전자 장치 104)의 상태 정보는, 소모전류 정보, 온도 정보, 절전모드에 관한 정보, 실행된 애플리케이션에 대응하는 전력 정보, 상기 다른 전자 장치의 스크린 크기 정보, 밝기 정보, FPS(Frame Per Second) 정보, 해상도 정보 및 렌더링 계산량 정보 중 적어도 하나의 정보일 수 있다.
디스플레이 제어 모듈 170은 1411동작에서 결정된 색심도 정보를 기반으로 화면 표시 정보를 생성한다. 디스플레이 제어 모듈 170은 1413동작에서 생성된 화면 표시 정보를 다른 전자 장치(예: 전자 장치 102, 전자 장치 104)로 송신한다.
상기 동작들 중 일부 동작은 생략되거나 다른 동작이 추가될 수 있다. 추가적으로 1401동작 내지 1405동작은 생략될 수 있다.도 15 은 다양한 실시예들에 따른 전자 장치 1501은 블록도 1500를 도시한다. 상기 전자 장치 1501는, 예를 들면, 도 1에 도시된 전자 장치 101의 전체 또는 일부를 구성할 수 있다. 도 15을 참조하면, 상기 전자 장치 1500는 하나 이상의 어플리케이션 프로세서(AP: application processor) 1510, 통신 모듈 1520, SIM(subscriber identification module) 카드 1524, 메모리 1530, 센서 모듈 1540, 입력 장치 1550, 디스플레이 1560, 인터페이스 1570, 오디오 모듈 1580, 카메라 모듈 1591, 전력관리 모듈 1595, 배터리 1596, 인디케이터 1597 및 모터 1598 를 포함할 수 있다.
상기 AP 1510는 운영체제 또는 응용 프로그램을 구동하여 상기 AP 1510에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 멀티미디어 데이터를 포함한 각종 데이터 처리 및 연산을 수행할 수 있다. 상기 AP 1510는, 예를 들면, SoC(system on chip) 로 구현될 수 있다. 한 실시예에 따르면, 상기 AP 1510는 GPU(graphic processing unit, 미도시)를 더 포함할 수 있다.
상기 통신 모듈 1520(예: 상기 통신 인터페이스 160)은 상기 전자 장치 1501(예: 상기 전자 장치 101)와 네트워크를 통해 연결된 다른 전자 장치들(예: 전자 장치 104 또는 서버 106) 간의 통신에서 데이터 송수신을 수행할 수 있다. 한 실시예에 따르면, 상기 통신 모듈 1520은 셀룰러 모듈 1521, Wifi 모듈 1523, BT 모듈 1525, GPS 모듈 1527, NFC 모듈 1528 및 RF(radio frequency) 모듈 1529를 포함할 수 있다.
상기 셀룰러 모듈 1521은 통신망(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등)을 통해서 음성 통화, 영상 통화, 문자 서비스 또는 인터넷 서비스 등을 제공할 수 있다. 또한, 상기 셀룰러 모듈 1521은, 예를 들면, 가입자 식별 모듈(예: SIM 카드 1524)을 이용하여 통신 네트워크 내에서 전자 장치의 구별 및 인증을 수행할 수 있다. 한 실시예에 따르면, 상기 셀룰러 모듈 1521은 상기 AP 1510가 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 예를 들면, 상기 셀룰러 모듈 1521은 멀티 미디어 제어 기능의 적어도 일부를 수행할 수 있다.
한 실시예에 따르면, 상기 셀룰러 모듈 1521은 커뮤니케이션 프로세서(CP: communication processor)를 포함할 수 있다. 또한, 상기 셀룰러 모듈 1521은, 예를 들면, SoC로 구현될 수 있다. 도 15에서는 상기 셀룰러 모듈 1521(예: 커뮤니케이션 프로세서), 상기 메모리 1530 또는 상기 전력관리 모듈 1595 등의 구성요소들이 상기 AP 1510와 별개의 구성요소로 도시되어 있으나, 한 실시예에 따르면, 상기 AP 1510가 전술한 구성요소들의 적어도 일부(예: 셀룰러 모듈 1521)를 포함하도록 구현될 수 있다.
한 실시예에 따르면, 상기 AP 1510 또는 상기 셀룰러 모듈 1521(예: 커뮤니케이션 프로세서)은 각각에 연결된 비휘발성 메모리 또는 다른 구성요소 중 적어도 하나로부터 수신한 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리할 수 있다. 또한, 상기 AP 1510 또는 상기 셀룰러 모듈 1521은 다른 구성요소 중 적어도 하나로부터 수신하거나 다른 구성요소 중 적어도 하나에 의해 생성된 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
상기 Wifi 모듈 1523, 상기 BT 모듈 1525, 상기 GPS 모듈 1527 또는 상기 NFC 모듈 1527 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. 도 15에서는 셀룰러 모듈 1521, Wifi 모듈 1523, BT 모듈 1525, GPS 모듈 1527 또는 NFC 모듈 1528이 각각 별개의 블록으로 도시되었으나, 한 실시예에 따르면, 셀룰러 모듈 1521, Wifi 모듈 1523, BT 모듈 1525, GPS 모듈 1527 또는 NFC 모듈 1528 중 적어도 일부(예: 두 개 이상)는 하나의 integrated chip(IC) 또는 IC 패키지 내에 포함될 수 있다. 예를 들면, 셀룰러 모듈 1521, Wifi 모듈 1523, BT 모듈 1525, GPS 모듈 1527 또는 NFC 모듈 1528 각각에 대응하는 프로세서들 중 적어도 일부(예: 셀룰러 모듈 1521에 대응하는 커뮤니케이션 프로세서 및 Wifi 모듈 1523에 대응하는 Wifi 프로세서)는 하나의 SoC로 구현될 수 있다.
상기 RF 모듈 1529는 데이터의 송수신, 예를 들면, RF 신호의 송수신을 할 수 있다. 상기 RF 모듈 1529는, 도시되지는 않았으나, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter) 또는 LNA(low noise amplifier) 등을 포함할 수 있다. 또한, 상기 RF 모듈 1529는 무선 통신에서 자유 공간상의 전자파를 송수신하기 위한 부품, 예를 들면, 도체 또는 도선 등을 더 포함할 수 있다. 도 15에서는 셀룰러 모듈 1521, Wifi 모듈 1523, BT 모듈 1525, GPS 모듈 1527 및 NFC 모듈 1528이 하나의 RF 모듈 1529을 서로 공유하는 것으로 도시되어 있으나, 한 실시예에 따르면, 셀룰러 모듈 1521, Wifi 모듈 1523, BT 모듈 1525, GPS 모듈 1527 또는 NFC 모듈 1528 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호의 송수신을 수행할 수 있다.
상기 SIM 카드 1524는 가입자 식별 모듈을 포함하는 카드일 수 있으며, 전자 장치의 특정 위치에 형성된 슬롯에 삽입될 수 있다. 상기 SIM 카드 1524는 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다.
상기 메모리 1530(예: 상기 메모리 130)는 내장 메모리 1532 또는 외장 메모리 1534를 포함할 수 있다. 상기 내장 메모리 1532는, 예를 들면, 휘발성 메모리(예를 들면, DRAM(dynamic RAM), SRAM(static RAM), SDRAM(synchronous dynamic RAM) 등) 또는 비휘발성 메모리(non-volatile Memory, 예를 들면, OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, NAND flash memory, NOR flash memory 등) 중 적어도 하나를 포함할 수 있다.
한 실시예에 따르면, 상기 내장 메모리 1532는 Solid State Drive (SSD)일 수 있다. 상기 외장 메모리 1534는 flash drive, 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital) 또는 Memory Stick 등을 더 포함할 수 있다. 상기 외장 메모리 1534는 다양한 인터페이스를 통하여 상기 전자 장치 1501과 기능적으로 연결될 수 있다. 한 실시예에 따르면, 상기 전자 장치 1501는 하드 드라이브와 같은 저장 장치(또는 저장 매체)를 더 포함할 수 있다.
상기 센서 모듈 1540은 물리량을 계측하거나 전자 장치 1501의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 상기 센서 모듈 1540은, 예를 들면, 제스처 센서 1540A, 자이로 센서 1540B, 기압 센서 1540C, 마그네틱 센서 1540D, 가속도 센서 1540E, 그립 센서 1540F, 근접 센서 1540G, color 센서 1540H(예: RGB(red, green, blue) 센서), 생체 센서 1540I, 온/습도 센서 1540J, 조도 센서 1540K 또는 UV(ultra violet) 센서 1540M 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 센서 모듈 1540은, 예를 들면, 후각 센서(E-nose sensor, 미도시), EMG 센서(electromyography sensor, 미도시), EEG 센서(electroencephalogram sensor, 미도시), ECG 센서(electrocardiogram sensor, 미도시), IR(infra red) 센서(미도시), 홍채 센서(미도시) 또는 지문 센서(미도시) 등을 포함할 수 있다. 상기 센서 모듈 1540은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 입력 장치 1550은 터치 패널(touch panel) 1552, (디지털) 펜 센서(pen sensor) 1554, 키(key) 1556 또는 초음파(ultrasonic) 입력 장치 1558를 포함할 수 있다. 상기 터치 패널 1552은, 예를 들면, 정전식, 감압식, 적외선 방식 또는 초음파 방식 중 적어도 하나의 방식으로 터치 입력을 인식할 수 있다. 또한, 상기 터치 패널 1552은 제어 회로를 더 포함할 수도 있다. 정전식의 경우, 물리적 접촉 또는 근접 인식이 가능하다. 상기 터치 패널 1552은 택타일 레이어(tactile layer)를 더 포함할 수도 있다. 이 경우, 상기 터치 패널 1552은 사용자에게 촉각 반응을 제공할 수 있다.
상기 (디지털) 펜 센서 1554는, 예를 들면, 사용자의 터치 입력을 받는 것과 동일 또는 유사한 방법 또는 별도의 인식용 쉬트(sheet)를 이용하여 구현될 수 있다. 상기 키 1556는, 예를 들면, 물리적인 버튼, 광학식 키 또는 키패드를 포함할 수 있다. 상기 초음파(ultrasonic) 입력 장치 1558는 초음파 신호를 발생하는 입력 도구를 통해, 전자 장치 1501에서 마이크(예: 마이크 1588)로 음파를 감지하여 데이터를 확인할 수 있는 장치로서, 무선 인식이 가능하다. 한 실시예에 따르면, 상기 전자 장치 1501는 상기 통신 모듈 1520를 이용하여 이와 연결된 외부 장치(예: 컴퓨터 또는 서버)로부터 사용자 입력을 수신할 수도 있다.
상기 디스플레이 1560(예: 상기 디스플레이 150)은 패널 1562, 홀로그램 장치 1564 또는 프로젝터 1566을 포함할 수 있다. 상기 패널 1562은, 예를 들면, LCD(liquid-crystal display) 또는 AM-OLED(active-matrix organic light-emitting diode) 등일 수 있다. 상기 패널 1562은, 예를 들면, 유연하게(flexible), 투명하게(transparent) 또는 착용할 수 있게(wearable) 구현될 수 있다. 상기 패널 1562은 상기 터치 패널 1552과 하나의 모듈로 구성될 수도 있다. 상기 홀로그램 장치 1564은 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 상기 프로젝터 1566는 화면에 빛을 투사하여 영상을 표시할 수 있다. 상기 화면은, 예를 들면, 상기 전자 장치 1501의 내부 또는 외부에 위치할 수 있다. 한 실시예에 따르면, 상기 디스플레이 1560은 상기 패널 1562, 상기 홀로그램 장치 1564, 또는 프로젝터 1566를 제어하기 위한 제어 회로를 더 포함할 수 있다.
상기 인터페이스 1570는, 예를 들면, HDMI(high-definition multimedia interface) 1572, USB(universal serial bus) 1574, 광 인터페이스(optical interface) 1576 또는 D-sub(D-subminiature) 1578를 포함할 수 있다. 상기 인터페이스 1570는, 예를 들면, 도 1에 도시된 통신 인터페이스 160에 포함될 수 있다. 추가적으로 또는 대체적으로, 상기 인터페이스 1570는, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD(secure Digital) 카드/MMC(multi-media card) 인터페이스 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
상기 오디오 모듈 1580은 소리(sound)와 전기신호를 쌍방향으로 변환시킬 수 있다. 상기 오디오 모듈 1580의 적어도 일부 구성요소는, 예를 들면, 도 1 에 도시된 입출력 인터페이스 140에 포함될 수 있다. 상기 오디오 모듈 1580은, 예를 들면, 스피커 1582, 리시버 1584, 이어폰 1586 또는 마이크 1588 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다.
상기 카메라 모듈 1591은 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈(미도시), ISP(image signal processor, 미도시) 또는 플래쉬 (flash, 미도시)(예: LED 또는 xenon lamp)를 포함할 수 있다.
상기 전력 관리 모듈 1595은 상기 전자 장치 1501의 전력을 관리할 수 있다. 도시하지는 않았으나, 상기 전력 관리 모듈 1595은, 예를 들면, PMIC(power management integrated circuit), 충전 IC(charger integrated circuit) 또는 배터리 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다.
상기 PMIC는, 예를 들면, 집적회로 또는 SoC 반도체 내에 탑재될 수 있다. 충전 방식은 유선과 무선으로 구분될 수 있다. 상기 충전 IC는 배터리를 충전시킬 수 있으며, 충전기로부터의 과전압 또는 과전류 유입을 방지할 수 있다. 한 실시예에 따르면, 상기 충전 IC는 유선 충전 방식 또는 무선 충전 방식 중 적어도 하나를 위한 충전 IC를 포함할 수 있다. 무선 충전 방식으로는, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등이 있으며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로 또는 정류기 등의 회로가 추가될 수 있다.
상기 배터리 게이지는, 예를 들면, 상기 배터리 1596의 잔량, 충전 중 전압, 전류 또는 온도를 측정할 수 있다. 상기 배터리 1596는 전기를 저장 또는 생성할 수 있고, 그 저장 또는 생성된 전기를 이용하여 상기 전자 장치 1501에 전원을 공급할 수 있다. 상기 배터리 1596는, 예를 들면, 충전식 전지(rechargeable battery) 또는 태양 전지(solar battery)를 포함할 수 있다.
상기 인디케이터 1597는 상기 전자 장치 1501 혹은 그 일부(예: 상기 AP 1510)의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 상기 모터 1598는 전기적 신호를 기계적 진동으로 변환할 수 있다. 도시되지는 않았으나, 상기 전자 장치 1501는 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 상기 모바일 TV지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting) 또는 미디어플로우(media flow) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
도 16은 다양한 실시예들에 따른 복수의 전자 장치들(예: 전자 장치 1610 및 전자 장치 1630) 사이의 통신 프로토콜 1600을 도시한다. 도 16을 참조하면, 예를 들어, 상기 통신 프로토콜 1600은, 장치 발견 프로토콜(device discovery protocol) 1651, 기능 교환 프로토콜(capability exchange protocol) 1653, 네트워크 프로토콜(network protocol) 1655 및 어플리케이션 프로토콜(application protocol) 1657 등을 포함할 수 있다.
한 실시예에 따르면, 상기 장치 발견 프로토콜 1651은 전자 장치들(예: 전자 장치 1610 또는 전자 장치 1630)이 자신과 통신 가능한 외부 전자 장치를 감지하거나 감지된 외부 전자 장치와 연결하기 위한 프로토콜일 수 있다. 예를 들어, 전자 장치 1610(예: 전자 장치 101)은, 상기 장치 발견 프로토콜 1651을 이용하여, 상기 전자 장치 1610에서 사용 가능한 통신 방법(예: Wifi, BT 또는 USB 등)을 통해, 상기 전자 장치 1610와 통신 가능한 기기(device)로, 전자 장치 1630(예: 전자 장치 104)를 감지할 수 있다. 상기 전자 장치 1610는, 상기 전자 장치 1630과의 통신 연결을 위해, 상기 장치 발견 프로토콜 1651을 이용하여, 감지된 전자 장치 1630에 대한 식별 정보를 획득하여 저장할 수 있다. 상기 전자 장치 1610는, 예를 들면, 적어도 상기 식별 정보에 기반하여, 상기 전자 장치 1630와의 통신 연결을 개설할 수 있다.
어떤 실시예에 따르면, 상기 장치 발견 프로토콜 1651은 복수의 전자 장치들 사이에서 상호 인증을 하기 위한 프로토콜일 수 있다. 예를 들어, 전자 장치 1610는 적어도 전자 장치 1630와 연결을 위한 통신 정보(예: MAC(media access control) address, UUID(universally unique identifier), SSID(subsystem identification), IP(internet protocol) address)에 기반하여, 상기 전자 장치 1610와 상기 전자 장치 1630 간의 인증을 수행할 수 있다.
한 실시예에 따르면, 상기 기능 교환 프로토콜 1653은 전자 장치 1610 또는 전자 장치 1630 중 적어도 하나에서 지원 가능한 서비스의 기능과 관련된 정보를 교환하기 위한 프로토콜일 수 있다. 예를 들어, 전자 장치 1610 및 전자 장치 1630은 상기 기능 교환 프로토콜 1653을 통하여, 각각이 현재 제공하고 있는 서비스의 기능과 관련된 정보를 서로 교환할 수 있다. 교환 가능한 정보는 전자 장치 1610 및 전자 장치 1630에서 지원 가능한 복수의 서비스들 중에서 특정 서비스를 가리키는 식별 정보를 포함할 수 있다. 예를 들어, 전자 장치 1610는 상기 기능 교환 프로토콜 1653을 통해 전자 장치 1630로부터 상기 전자 장치 1630가 제공하는 특정 서비스의 식별 정보를 수신할 수 있다. 이 경우, 전자 장치 1610는 상기 수신된 식별 정보에 기반하여, 상기 전자 장치 1610이 상기 특정 서비스를 지원할 수 있는지 여부를 판단할 수 있다.
한 실시예에 따르면, 상기 네트워크 프로토콜 1655은 통신이 가능하도록 연결된 전자 장치들(예: 전자 장치 1610, 전자 장치 1630) 간에, 예컨대, 서비스를 연동하여 제공하기 위하여 송수신 되는, 데이터 흐름을 제어하기 위한 프로토콜일 수 있다. 예를 들어, 전자 장치 1610 또는 전자 장치 1630 중 적어도 하나는 상기 네트워크 프로토콜 1655을 이용하여, 오류 제어, 또는 데이터 품질 제어 등을 수행할 수 있다. 추가적으로 또는 대체적으로, 상기 네트워크 프로토콜 1655은 전자 장치 1610와 전자 장치 1630 사이에서 송수신되는 데이터의 전송 포맷을 결정할 수 있다. 또한, 전자 장치 1610 또는 전자 장치 1630 중 적어도 하나는 상기 네트워크 프로토콜 1655를 이용하여 상호간의 데이터 교환을 위한 적어도 세션(session)을 관리(예: 세션 연결 또는 세션 종료)할 수 있다.
한 실시예에 따르면, 상기 어플리케이션 프로토콜 1657은 외부 전자 장치로 제공되는 서비스와 관련된 데이터를 교환하기 위한, 절차 또는 정보를 제공하기 위한 프로토콜일 수 있다. 예를 들어, 전자 장치 1610(예: 전자 장치 101)은 상기 어플리케이션 프로토콜 1657을 통해 전자 장치 1630(예: 전자 장치 104 또는 서버 106)로 서비스를 제공할 수 있다.
한 실시예에 따르면, 상기 통신 프로토콜 1600은 표준 통신 프로토콜, 개인 또는 단체에서 지정한 통신 프로토콜(예: 통신 장치 제조 업체 또는 네트워크 공급 업체 등에서 자체적으로 지정한 통신 프로토콜) 또는 이들의 조합을 포함할 수 있다.본 발명의 다양한 실시예에 따른 전자 장치의 전술한 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다.
본 발명의 다양한 실시예에 사용된 용어 모듈은, 예를 들어, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. 모듈은 예를 들어, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component) 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. 모듈은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. 모듈은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. 모듈은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, 본 발명의 다양한 실시예에 따른 모듈은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
다양한 실시예에 따르면, 본 발명의 다양한 실시예에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 예컨대, 프로그래밍 모듈의 형태로 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어는, 하나 이상의 프로세서 (예: 상기 프로세서 122)에 의해 실행될 경우, 상기 하나 이상의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리 130가 될 수 있다. 상기 프로그래밍 모듈의 적어도 일부는, 예를 들면, 상기 프로세서210에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그래밍 모듈 의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트 (sets of instructions) 또는 프로세스 등을 포함할 수 있다.
상기 컴퓨터로 판독 가능한 기록 매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 마그네틱 매체(Magnetic Media)와, CD-ROM(Compact Disc Read Only Memory), DVD(Digital Versatile Disc)와 같은 광기록 매체(Optical Media)와, 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media)와, 그리고 ROM(Read Only Memory), RAM(Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령(예: 프로그래밍 모듈)을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 본 발명의 다양한 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
본 발명의 다양한 실시예에 따른 모듈 또는 프로그래밍 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 본 발명의 다양한 실시예에 따른 모듈, 프로그래밍 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다. 그리고 본 명세서와 도면에 개시된 실시예들은 본 명세서에 개시된 기술 내용을 쉽게 설명하고 본 개시의 다양한 실시예들에 대한 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 따라서 본 개시의 범위는 여기에 개시된 다양한 실시예들 이외에도 본 개시의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 개시의 범위에 포함되는 것으로 해석되어야 한다.
101: 전자 장치 130: 메모리
140: 입출력 인터페이스 150: 디스플레이
160: 통신 인터페이스 170: 디스플레이 제어 모듈

Claims (34)

  1. 전자 장치에 있어서,
    애플리케이션을 표시하는 디스플레이;
    상기 애플리케이션의 실행을 위한 데이터를 일시적으로 저장하는 메모리; 및
    디스플레이 제어 모듈을 포함하고,
    상기 디스플레이 제어 모듈은,
    상기 애플리케이션의 실행에 따라 생성되는 상기 전자 장치의 부하 정보를 확인하고,
    상기 확인된 부하 정보에 기반하여 상기 메모리의 잔여 용량을 확인하고,
    상기 메모리의 잔여 용량이 미리 설정된 임계 값 이하임을 확인함에 기반하여 상기 애플리케이션의 실행 화면의 화면 표시 정보를 변경하고, 및
    상기 변경된 화면 표시 정보를 기반으로 상기 애플리케이션의 실행 화면을 표시하도록 상기 디스플레이를 제어하도록 설정되며,
    상기 디스플레이 제어 모듈은,
    상기 애플리케이션 및 제2 애플리케이션을 표시할 화면을 적어도 2개의 표시영역으로 분할하도록 제어하고, 상기 적어도 2개의 표시영역 각각의 화면 표시 정보를 결정하고, 상기 결정된 화면 표시 정보를 기반으로 상기 적어도 2개의 표시영역 각각에 상기 애플리케이션 및 제2 애플리케이션의 실행을 표시하도록 상기 디스플레이를 제어하며,
    상기 애플리케이션 또는 제2 애플리케이션의 표시영역에 대한 사용자 입력을 수신함에 따른 활성화 여부를 기반으로, 상기 애플리케이션의 실행 화면의 화면 표시 정보 또는 상기 제2 애플리케이션의 실행 화면의 화면 표시 정보 중 적어도 하나를 변경하는 제어 신호를 생성하도록 설정된 전자 장치.
  2. 제1항에 있어서,
    상기 디스플레이 제어 모듈은,
    상기 화면 표시 정보를 변경하는 제어 신호를 생성하고, 상기 생성된 제어 신호를 기반으로 상기 화면 표시 정보를 변경하고, 상기 변경된 화면 표시 정보를 기반으로 상기 애플리케이션을 표시하도록 상기 디스플레이를 제어하는 것을 특징으로 하는 전자 장치.
  3. 제2항에 있어서,
    상기 디스플레이는,
    상기 화면 표시 정보의 변경을 위한 사용자 인터페이스(user interface)를 표시하고, 상기 표시된 사용자 인터페이스를 통해 변경 입력 이벤트를 수신하는 것을 특징으로 하는 전자 장치.
  4. 제2항에 있어서,
    상기 디스플레이 제어 모듈은,
    상기 전자 장치의 상태 정보를 기반으로 상기 화면 표시 정보를 변경하는 제어 신호를 생성하거나, 상기 애플리케이션에서 제공하는 컨텐츠를 기반으로 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 것을 특징으로 하는 전자 장치.
  5. ◈청구항 5은(는) 설정등록료 납부시 포기되었습니다.◈
    제4항에 있어서,
    상기 디스플레이 제어 모듈은,
    적어도 하나의 센서로부터 감지된 상기 전자 장치의 프로세서 및 배터리 중 적어도 하나의 온도 값을 확인하고, 상기 온도 값이 미리 설정된 임계온도 값 이상일 때 상기 화면 표시 정보를 변경하는 제어 신호를 생성하거나,
    상기 전자 장치의 배터리 상태를 확인하고, 상기 배터리 상태가 미리 설정된 배터리 상태에 도달할 때 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 것을 특징으로 하는 전자 장치.
  6. ◈청구항 6은(는) 설정등록료 납부시 포기되었습니다.◈
    제4항에 있어서,
    상기 디스플레이 제어 모듈은,
    상기 애플리케이션에 포함된 컨텐츠의 텍스트 정보값, 이미지 정보값, 비디오 정보값 및 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값을 확인하고, 상기 확인된 텍스트 정보값, 이미지 정보값, 비디오 정보값 및 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값이 미리 설정된 임계 컨텐츠 정보값 이상인 것을 판단될 때, 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 것을 특징으로 하는 전자 장치.
  7. 제1항에 있어서,
    상기 화면 표시 정보는,
    상기 애플리케이션을 표시할 위치 정보, 상기 애플리케이션의 크기 정보, 상기 애플리케이션을 확대할 스케일 정보, 상기 애플리케이션의 색심도 정보 및 상기 애플리케이션의 해상도 정보 중 적어도 어느 하나의 정보를 포함하는 것을 특징으로 하는 전자 장치.
  8. ◈청구항 8은(는) 설정등록료 납부시 포기되었습니다.◈
    제1항에 있어서,
    상기 전자 장치의 부하 정보는,
    상기 전자 장치의 프로세서 및 배터리의 온도 정보, 및 상기 전자 장치의 사용할 수 있는 배터리 정보 중 적어도 하나의 정보를 포함하는 것을 특징으로 하는 전자 장치.
  9. 제4항에 있어서,
    상기 디스플레이 제어 모듈은,
    상기 전자 장치의 상태 정보를 기반으로 상기 화면 표시 정보를 변경하는 제어 신호를 생성한 후, 상기 전자 장치의 상태 정보가 변경되는 지 여부를 판단하고, 상기 전자 장치의 상태 정보가 변경되는 경우 상기 변경된 전자 장치의 상태 정보를 기반으로 상기 변경된 화면 표시 정보를 갱신하는 제어 신호를 생성하는 것을 특징으로 하는 전자 장치.
  10. 삭제
  11. 삭제
  12. 제1항에 있어서,
    상기 디스플레이 제어 모듈은,
    상기 애플리케이션 및 제2 애플리케이션 각각에 포함된 컨텐츠의 텍스트 정보값, 이미지 정보값, 비디오 정보값, 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값을 확인하고, 상기 확인된 텍스트 정보값, 이미지 정보값, 비디오 정보값 및 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값이 미리 설정된 임계 컨텐츠 정보값 이상인 것을 판단될 때, 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 것을 특징으로 하는 전자 장치
  13. ◈청구항 13은(는) 설정등록료 납부시 포기되었습니다.◈
    제1항에 있어서,
    상기 애플리케이션이 가상 오브젝트 형태로 표시되도록 제어하고, 상기 전자 장치의 부하 정보에 포함된 화면 전환 데이터값이 미리 설정된 임계 전환 데이터값을 초과하는 지 여부를 판단하는 프로세서를 더 포함하고,
    상기 디스플레이 제어 모듈은,
    상기 초과 여부에 대한 판단 결과를 기반으로 해상도를 결정하고, 상기 결정된 해상도를 기반으로 상기 애플리케이션을 렌더링하는 것을 특징으로 하는 전자 장치.
  14. ◈청구항 14은(는) 설정등록료 납부시 포기되었습니다.◈
    제13항에 있어서,
    상기 프로세서는,
    움직임 센서를 통해 감지되는 상기 화면 전환 데이터값이 미리 설정된 임계 전환 데이터값을 초과하는 경우, 상기 애플리케이션의 프레임 별 데이터 연산량을 기반으로 상기 애플리케이션의 렌더링 시간을 측정하고, 상기 측정된 렌더링 시간이 상기 디스플레이의 미리 설정된 수직 동기화 신호의 구간을 초과하는 여부를 판단하고,
    상기 디스플레이 제어 모듈은,
    상기 판단 여부에 대한 결과를 기반으로 상기 디스플레이가 지원할 수 있는 해상도를 결정하고, 상기 결정된 해상도를 기반으로 상기 애플리케이션을 렌더링하는 것을 특징으로 하는 전자 장치.
  15. 제1항에 있어서,
    상기 디스플레이 제어 모듈은,
    상기 디스플레이가 제공하는 기능 또는 크기에 따라 분류되는 상기 디스플레이의 종류 정보, 상기 디스플레이의 밝기 정보, 상기 전자 장치의 프로세서의 렌더링 계산량 정보, 상기 디스플레이의 해상도 정보, 상기 디스플레이의 FPS 정보, 상기 디스플레이의 절전모드 적용 정보, 상기 디스플레이의 발열 정보, 상기 디스플레이의 소모 전류정보 및 상기 전자 장치에 의해 감지되는 주변 밝기 정보 중 적어도 하나의 정보를 획득하고, 상기 획득된 정보를 기반으로 색심도 정보를 결정하고, 상기 결정된 색심도 정보를 기반으로 화면 표시 정보를 생성하고, 상기 생성된 화면 표시 정보를 기반으로 상기 애플리케이션을 표시하는 것을 특징으로 하는 전자 장치.
  16. 제1항에 있어서,
    다른 전자 장치로부터 상기 다른 전자 장치의 상태 정보를 수신하는 통신 인터페이스를 더 포함하고,
    상기 디스플레이 제어 모듈은,
    상기 수신한 다른 전자 장치의 상태 정보를 기반으로 색심도 정보를 결정하고, 상기 결정된 색심도 정보를 기반으로 화면 표시 정보를 생성하고,
    상기 통신 인터페이스는,
    상기 생성된 화면 표시 정보를 상기 다른 전자 장치로 송신하는 것을 특징으로 하는 전자 장치.
  17. ◈청구항 17은(는) 설정등록료 납부시 포기되었습니다.◈
    제16항에 있어서,
    상기 다른 전자 장치의 상태 정보는,
    상기 다른 전자 장치의 소모전류 정보, 온도 정보, 절전모드에 관한 정보, 실행된 애플리케이션에 대응하는 전력 정보, 상기 다른 전자 장치의 스크린 크기 정보, 밝기 정보, FPS(Frame Per Second) 정보, 해상도 정보 및 렌더링 계산량 정보 중 적어도 어느 하나의 정보인 것을 특징으로 하는 전자 장치.
  18. 전자 장치의 디스플레이 제어 방법에 있어서,
    디스플레이 제어 모듈이 애플리케이션의 실행에 따라 생성되는 상기 전자 장치의 부하 정보를 확인하는 동작;
    상기 디스플레이 제어 모듈이 상기 확인된 부하 정보에 기반하여, 상기 애플리케이션의 실행을 위한 데이터를 일시적으로 저장하는 메모리의 잔여 용량을 확인하는 동작;
    상기 메모리의 잔여 용량이 미리 설정된 임계 값 이하임을 확인함에 기반하여 상기 애플리케이션의 실행 화면의 화면 표시 정보를 변경하는 동작; 및
    상기 디스플레이 제어 모듈이 상기 변경된 화면 표시 정보를 기반으로 상기 애플리케이션의 실행 화면을 표시하도록 디스플레이를 제어하는 동작;
    상기 디스플레이 제어 모듈이 상기 애플리케이션 및 제2 애플리케이션을 표시할 화면을 적어도 2개의 표시영역으로 분할하도록 제어하는 동작;
    상기 디스플레이 제어 모듈이 상기 적어도 2개의 표시영역 각각의 화면 표시 정보를 결정하는 동작; 및
    상기 디스플레이 제어 모듈이 상기 결정된 화면 표시 정보를 기반으로 상기 적어도 2개의 표시영역 각각에 상기 애플리케이션 및 제2 애플리케이션의 실행을 표시하도록 상기 디스플레이를 제어하는 동작을 포함하며,
    상기 디스플레이 제어 모듈이 상기 적어도 2개의 표시영역 각각의 화면 표시 정보를 결정하는 동작은, 상기 디스플레이 제어 모듈이 상기 애플리케이션 또는 제2 애플리케이션의 표시영역에 대한 사용자 입력을 수신함에 따른 활성화 여부를 기반으로 상기 애플리케이션의 실행 화면의 화면 표시 정보 또는 상기 제2 애플리케이션의 실행 화면의 화면 표시 정보 중 적어도 하나를 결정하는 동작을 포함하는 디스플레이 제어 방법.
  19. ◈청구항 19은(는) 설정등록료 납부시 포기되었습니다.◈
    제18항에 있어서,
    상기 디스플레이 제어 모듈이 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 동작;
    상기 디스플레이 제어 모듈이 상기 생성된 제어 신호를 기반으로 상기 화면 표시 정보를 변경하는 동작; 및
    상기 디스플레이 제어 모듈이, 상기 변경된 화면 표시 정보를 기반으로 상기 애플리케이션을 표시하도록 상기 디스플레이를 제어하는 동작을 더 포함하는 디스플레이 제어 방법.
  20. ◈청구항 20은(는) 설정등록료 납부시 포기되었습니다.◈
    제19항에 있어서,
    상기 디스플레이 제어 모듈이 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 동작은,
    상기 디스플레이 제어 모듈이 상기 화면 표시 정보의 변경을 위한 사용자 인터페이스(user interface)를 표시하도록 상기 디스플레이를 제어하고, 상기 표시된 사용자 인터페이스를 통해 변경 입력 이벤트를 수신함에 따라 제어 신호를 생성하는 동작;
    상기 디스플레이 제어 모듈이 상기 전자 장치의 상태 정보를 기반으로 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 동작; 및
    상기 디스플레이 제어 모듈이 상기 애플리케이션에서 제공하는 컨텐츠를 기반으로 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 동작 중 적어도 어느 하나의 동작을 포함하는 디스플레이 제어 방법.
  21. ◈청구항 21은(는) 설정등록료 납부시 포기되었습니다.◈
    제20항에 있어서,
    상기 디스플레이 제어 모듈이 상기 전자 장치의 상태 정보를 기반으로 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 동작은,
    상기 디스플레이 제어 모듈이, 적어도 하나의 센서로부터 감지된 상기 전자 장치의 프로세서 및 배터리 중 적어도 하나의 온도 값을 확인하고, 상기 온도 값이 미리 설정된 임계온도 값 이상일 때 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 동작; 및
    상기 디스플레이 제어 모듈이 상기 전자 장치의 배터리 상태를 확인하고, 상기 배터리 상태가 미리 설정된 배터리 상태에 도달할 때 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 동작 중 적어도 어느 하나의 동작을 포함하는 디스플레이 제어 방법.
  22. ◈청구항 22은(는) 설정등록료 납부시 포기되었습니다.◈
    제20항에 있어서,
    상기 디스플레이 제어 모듈이 상기 애플리케이션에서 제공하는 컨텐츠를 기반으로 화면 표시 정보를 변경하는 제어 신호를 생성하는 동작은,
    상기 디스플레이 제어 모듈이 상기 애플리케이션에 포함된 컨텐츠의 텍스트 정보값, 이미지 정보값, 비디오 정보값 및 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값을 확인하는 동작; 및
    상기 디스플레이 제어 모듈이 상기 확인된 텍스트 정보값, 이미지 정보값, 비디오 정보값 및 프레임 별 해상도 변경에 관한 정보값이 미리 설정된 임계 컨텐츠 정보값 이상인 것을 판단될 때, 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 동작을 포함하는 디스플레이 제어 방법.
  23. ◈청구항 23은(는) 설정등록료 납부시 포기되었습니다.◈
    제18항에 있어서,
    상기 화면 표시 정보는,
    상기 애플리케이션을 표시할 위치 정보, 상기 애플리케이션의 크기 정보, 상기 애플리케이션을 확대할 스케일 정보, 상기 애플리케이션의 색심도 정보 및 상기 애플리케이션의 해상도 정보 중 적어도 어느 하나의 정보를 포함하는 것을 특징으로 하는 디스플레이 제어 방법.
  24. ◈청구항 24은(는) 설정등록료 납부시 포기되었습니다.◈
    제18항에 있어서,
    상기 전자 장치의 부하 정보는,
    상기 전자 장치의 프로세서 및 배터리의 온도 정보, 및 상기 전자 장치의 사용할 수 있는 배터리 정보 중 적어도 하나의 정보를 포함하는 것을 특징으로 하는 디스플레이 제어 방법.
  25. ◈청구항 25은(는) 설정등록료 납부시 포기되었습니다.◈
    제20항에 있어서,
    상기 디스플레이 제어 모듈이 상기 전자 장치의 상태 정보를 기반으로 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 경우,
    상기 제어 신호를 생성한 후 상기 전자 장치의 상태 정보가 변경되는 지 여부를 판단하는 동작; 및
    상기 전자 장치의 상태 정보가 변경되는 경우 상기 변경된 전자 장치의 상태 정보를 기반으로 상기 변경된 화면 표시 정보를 갱신하는 동작을 더 포함하는 디스플레이 제어 방법.
  26. 삭제
  27. 삭제
  28. ◈청구항 28은(는) 설정등록료 납부시 포기되었습니다.◈
    제18항에 있어서,
    상기 디스플레이 제어 모듈이 상기 애플리케이션 및 제2 애플리케이션에서 제공하는 컨텐츠를 기반으로 상기 화면 표시 정보를 결정하는 경우, 상기 디스플레이 제어 모듈이 상기 화면 표시 정보를 결정하는 동작은,
    상기 디스플레이 제어 모듈이 상기 애플리케이션 및 제2 애플리케이션 각각에 포함된 컨텐츠의 텍스트 정보값, 이미지 정보값 비디오 정보값, 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값을 확인하는 동작; 및
    상기 디스플레이 제어 모듈이 상기 확인된 텍스트 정보값, 이미지 정보값, 비디오 정보값 및 프레임 별 해상도 변경에 관한 정보값 중 적어도 하나의 정보값이 미리 설정된 임계 컨텐츠 정보값 이상인 것을 판단될 때, 상기 화면 표시 정보를 변경하는 제어 신호를 생성하는 동작을 포함하는 것을 특징으로 하는 디스플레이 제어 방법.
  29. ◈청구항 29은(는) 설정등록료 납부시 포기되었습니다.◈
    제18항에 있어서,
    프로세서가, 상기 애플리케이션이 가상 오브젝트 형태로 표시되도록 제어하는 동작;
    상기 프로세서가, 상기 전자 장치의 부하 정보에 포함된 화면 전환 데이터값이 미리 설정된 임계 전환 데이터값을 초과하는 지 여부를 판단하는 동작;
    상기 디스플레이 제어 모듈이, 상기 초과 여부에 대한 결과를 기반으로 해상도를 결정하는 동작; 및
    상기 디스플레이 제어 모듈이 상기 결정된 해상도를 기반으로 상기 애플리케이션을 렌더링하는 동작을 더 포함하는 디스플레이 제어 방법.
  30. ◈청구항 30은(는) 설정등록료 납부시 포기되었습니다.◈
    제29항에 있어서,
    상기 디스플레이 제어 모듈이 상기 결정된 해상도를 기반으로 상기 애플리케이션을 렌더링하는 동작은,
    상기 프로세서가, 움직임 센서를 통해 감지되는 상기 화면 전환 데이터값이 미리 설정된 임계 전환 데이터값을 초과하는 경우, 상기 애플리케이션의 프레임 별 데이터 연산량을 기반으로 상기 애플리케이션의 렌더링 시간을 측정하는 동작;
    상기 프로세서가, 상기 측정된 렌더링 시간이 상기 디스플레이의 미리 설정된 수직 동기화 신호의 구간을 초과하는 여부를 판단하는 동작;
    상기 디스플레이 제어 모듈이, 상기 초과 여부에 대한 판단 결과를 기반으로 상기 디스플레이가 지원할 수 있는 해상도를 결정하는 동작; 및
    상기 디스플레이 제어 모듈이, 상기 결정된 해상도를 기반으로 상기 애플리케이션을 렌더링하는 동작을 포함하는 디스플레이 제어 방법.
  31. ◈청구항 31은(는) 설정등록료 납부시 포기되었습니다.◈
    제18항에 있어서,
    상기 디스플레이 제어 모듈이 상기 디스플레이가 제공하는 기능 또는 크기에 따라 분류되는 상기 디스플레이의 종류 정보, 상기 디스플레이의 밝기 정보, 상기 전자 장치의 프로세서의 렌더링 계산량 정보, 상기 디스플레이의 해상도 정보, 상기 디스플레이의 FPS 정보, 상기 디스플레이의 절전모드 적용 정보, 상기 디스플레이의 발열 정보, 상기 디스플레이의 소모 전류정보 및 상기 전자 장치에 의해 감지되는 주변 밝기 정보 중 적어도 하나의 정보를 획득하는 동작;
    상기 디스플레이 제어 모듈이 상기 획득된 정보를 기반으로 색심도 정보를 결정하는 동작;
    상기 디스플레이 제어 모듈이 상기 결정된 색심도 정보를 기반으로 화면 표시 정보를 생성하는 동작; 및
    상기 디스플레이 제어 모듈이 상기 생성된 화면 표시 정보를 기반으로 상기 애플리케이션을 표시하는 동작을 더 포함하는 디스플레이 제어 방법.
  32. ◈청구항 32은(는) 설정등록료 납부시 포기되었습니다.◈
    제18항에 있어서,
    통신 인터페이스가, 다른 전자 장치로부터 상기 다른 전자 장치의 상태 정보를 수신하는 동작;
    상기 디스플레이 제어 모듈이, 상기 수신한 다른 전자 장치의 상태 정보를 기반으로 색심도 정보를 결정하는 동작;
    상기 디스플레이 제어 모듈이, 상기 결정된 색심도 정보를 기반으로 화면 표시 정보를 생성하는 동작; 및
    상기 통신 인터페이스가, 상기 생성된 화면 표시 정보를 상기 다른 전자 장치로 송신하는 동작을 더 포함하는 디스플레이 제어 방법.
  33. ◈청구항 33은(는) 설정등록료 납부시 포기되었습니다.◈
    제32항에 있어서,
    상기 다른 전자 장치의 상태 정보는,
    상기 다른 전자 장치의 소모전류 정보, 온도 정보, 절전모드에 관한 정보, 실행된 애플리케이션에 대응하는 전력 정보, 상기 다른 전자 장치의 스크린 크기 정보, 밝기 정보, FPS(Frame Per Second) 정보, 해상도 정보 및 렌더링 계산량 정보 중 적어도 어느 하나의 정보인 것을 특징으로 하는 디스플레이 제어 방법.
  34. ◈청구항 34은(는) 설정등록료 납부시 포기되었습니다.◈
    제 18항 내지 제 25항 및 제 28항 내지 제 33항 중 어느 한 항의 방법을 실행시키기 위한 프로그램을 기록한 컴퓨터 판독 가능한 저장 매체.
KR1020140144731A 2014-05-27 2014-10-24 디스플레이 제어 방법 및 이를 제공하는 전자 장치 KR102454196B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020140144731A KR102454196B1 (ko) 2014-05-27 2014-10-24 디스플레이 제어 방법 및 이를 제공하는 전자 장치
US14/714,601 US10181305B2 (en) 2014-05-27 2015-05-18 Method of controlling display and electronic device for providing the same
CN201580029195.5A CN106462325B (zh) 2014-05-27 2015-05-19 控制显示器的方法和提供该方法的电子设备
EP15799463.3A EP3149562A4 (en) 2014-05-27 2015-05-19 Method of controlling display and electronic device for providing the same
PCT/KR2015/004989 WO2015182912A1 (en) 2014-05-27 2015-05-19 Method of controlling display and electronic device for providing the same

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR20140063734 2014-05-27
KR1020140063734 2014-05-27
KR1020140144731A KR102454196B1 (ko) 2014-05-27 2014-10-24 디스플레이 제어 방법 및 이를 제공하는 전자 장치

Publications (2)

Publication Number Publication Date
KR20150136440A KR20150136440A (ko) 2015-12-07
KR102454196B1 true KR102454196B1 (ko) 2022-10-14

Family

ID=54699193

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140144731A KR102454196B1 (ko) 2014-05-27 2014-10-24 디스플레이 제어 방법 및 이를 제공하는 전자 장치

Country Status (5)

Country Link
US (1) US10181305B2 (ko)
EP (1) EP3149562A4 (ko)
KR (1) KR102454196B1 (ko)
CN (1) CN106462325B (ko)
WO (1) WO2015182912A1 (ko)

Families Citing this family (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013081600A1 (en) * 2011-11-30 2013-06-06 Intel Corporation Reducing power for 3d workloads
USD737833S1 (en) * 2013-06-09 2015-09-01 Apple Inc. Display screen or portion thereof with graphical user interface
KR101577986B1 (ko) * 2015-03-24 2015-12-16 (주)해든브릿지 양방향 가상 현실 구현 시스템
IN2015CH02495A (ko) * 2015-05-18 2015-06-05 Wipro Ltd
KR102456724B1 (ko) * 2015-09-30 2022-10-21 엘지디스플레이 주식회사 타이밍 컨트롤러, 표시패널, 유기발광표시장치 및 그 구동방법
GB2544476B (en) * 2015-11-16 2018-08-08 Displaylink Uk Ltd Data compression method and apparatus
KR20170096364A (ko) * 2016-02-16 2017-08-24 삼성전자주식회사 디스플레이 화면 구성 방법 및 이를 수행하는 전자 장치
KR102557935B1 (ko) * 2016-03-10 2023-07-21 삼성전자주식회사 전자 장치 및 전자 장치의 디스플레이 제어 방법
CN107357404A (zh) * 2016-05-10 2017-11-17 联发科技（新加坡）私人有限公司 图像显示方法及其电子装置
CN105959799A (zh) * 2016-05-27 2016-09-21 北京金山安全软件有限公司 一种视频压缩方法、装置及电子设备
KR20230051620A (ko) * 2016-06-12 2023-04-18 애플 인크. 제어가능한 외부 디바이스들을 관리하기 위한 사용자 인터페이스
DK179594B1 (en) 2016-06-12 2019-02-25 Apple Inc. USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES
KR102586780B1 (ko) * 2016-06-30 2023-10-12 삼성디스플레이 주식회사 표시 장치 및 이를 이용한 콘텐츠 표시 시스템 및 방법
KR102608997B1 (ko) * 2016-08-01 2023-12-06 삼성전자주식회사 화면 제어 방법 및 이를 지원하는 전자 장치
US20210191527A1 (en) * 2016-10-07 2021-06-24 Hewlett-Packard Development Company, L.P. Keyboard with secondary display device
KR20180055322A (ko) * 2016-11-17 2018-05-25 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법
CN109478395A (zh) * 2016-11-29 2019-03-15 华为技术有限公司 一种画面显示方法及电子设备
KR102623391B1 (ko) 2017-01-10 2024-01-11 삼성전자주식회사 영상 출력 방법 및 이를 지원하는 전자 장치
CN107071264A (zh) * 2017-01-13 2017-08-18 维沃移动通信有限公司 一种图像分辨率调整方法及移动终端
CN106919400A (zh) 2017-03-10 2017-07-04 广东欧珀移动通信有限公司 一种移动终端的显示场景识别方法、装置及移动终端
CN108664228A (zh) * 2017-03-31 2018-10-16 上海中兴软件有限责任公司 一种图像显示方法及移动终端
CN106997282B (zh) * 2017-05-02 2018-06-08 腾讯科技（深圳）有限公司 客户端的显示模式的处理方法和装置
US10914834B2 (en) 2017-05-10 2021-02-09 Google Llc Low-power radar
CN107194890B (zh) * 2017-05-18 2020-07-28 上海兆芯集成电路有限公司 使用多分辨率改善图像质量的方法及装置
CN107194891B (zh) * 2017-05-18 2020-11-10 上海兆芯集成电路有限公司 改善图像质量的方法及虚拟实境装置
USD843405S1 (en) 2017-06-05 2019-03-19 Apple Inc. Display screen or portion thereof with graphical user interface
CN107398072B (zh) * 2017-07-24 2019-01-08 腾讯科技（深圳）有限公司 游戏画面的显示方法和装置
KR102379313B1 (ko) * 2017-08-23 2022-03-28 삼성전자주식회사 어플리케이션을 표시하기 위한 전자 장치 및 그의 동작 방법
KR102474460B1 (ko) * 2017-08-23 2022-12-07 삼성전자 주식회사 전자 장치 및 전자 장치의 동작 제어 방법
JP6984377B2 (ja) * 2017-12-12 2021-12-17 富士通株式会社 情報処理装置、画面表示システム及びプログラム
KR102495326B1 (ko) 2018-01-31 2023-02-02 삼성전자주식회사 전자장치 및 그 제어방법
KR102553092B1 (ko) * 2018-04-17 2023-07-10 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
CN108596834B (zh) * 2018-04-27 2023-11-17 腾讯科技（深圳）有限公司 图像的分辨率处理方法、图像处理装置及***、存储介质
CN114845122B (zh) 2018-05-07 2024-04-30 苹果公司 用于查看实况视频馈送和录制视频的用户界面
GB2575463B (en) * 2018-07-10 2022-12-14 Displaylink Uk Ltd Compression of display data
KR102577051B1 (ko) * 2018-07-17 2023-09-11 삼성전자주식회사 분할 화면을 제공하기 위한 전자 장치 및 방법
CN109144649B (zh) * 2018-08-22 2020-12-29 Oppo广东移动通信有限公司 图标的显示方法、装置、终端及存储介质
KR101973985B1 (ko) * 2018-10-10 2019-04-30 주식회사 누리콘 고해상도 디스플레이를 위한 분산 병렬 처리 방식의 영상 렌더링 시스템 및 그 방법
US11550048B2 (en) 2019-05-20 2023-01-10 Google Llc Mobile device-based radar system for providing a multi-mode interface
US11363071B2 (en) 2019-05-31 2022-06-14 Apple Inc. User interfaces for managing a local network
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
WO2020256692A1 (en) * 2019-06-17 2020-12-24 Google Llc Mobile device-based radar system for applying different power modes to a multi-mode interface
CN110418198B (zh) * 2019-06-30 2021-05-18 联想(北京)有限公司 一种视频信息处理方法、电子设备及存储介质
KR20210037548A (ko) 2019-09-27 2021-04-06 삼성전자주식회사 온도 제어를 수행하는 전자 장치 및 방법
US10997893B1 (en) 2019-10-24 2021-05-04 Dell Products L.P. Organic light emitting diode display compensation tool
US11011109B1 (en) * 2019-10-24 2021-05-18 Dell Products L.P. Organic light emitting diode display power management based on usage scaling
US11011110B1 (en) 2019-10-24 2021-05-18 Dell Products L.P. Organic light emitting diode display thermal management
CN111432261A (zh) * 2019-12-31 2020-07-17 杭州海康威视数字技术股份有限公司 一种视频窗口画面显示方法及装置
JP2021117305A (ja) * 2020-01-23 2021-08-10 シャープ株式会社 表示制御装置、制御方法、および制御プログラム
CN111341457B (zh) * 2020-02-25 2024-05-10 广州七乐康药业连锁有限公司 一种基于大数据检索的医疗诊断信息可视化方法及装置
USD982605S1 (en) * 2020-04-02 2023-04-04 Basf Coatings Gmbh Display screen or portion thereof with graphical user interface
US11369874B2 (en) * 2020-04-29 2022-06-28 Lenovo (Singapore) Pte. Ltd. Rendering video game on display device using GPU in display device and video game data from second device
US11513667B2 (en) 2020-05-11 2022-11-29 Apple Inc. User interface for audio message
CN112331153B (zh) * 2020-11-18 2022-03-11 冠捷显示科技（厦门）有限公司 一种具备背光渲染场景显示的电视及方法
KR20230029229A (ko) * 2021-08-24 2023-03-03 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
CN113849037A (zh) * 2021-09-07 2021-12-28 联想(北京)有限公司 一种电子设备、控制方法、装置及计算机可读存储介质
TWI785785B (zh) * 2021-09-09 2022-12-01 華碩電腦股份有限公司 電子裝置及其電源管理方法

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6313822B1 (en) * 1998-03-27 2001-11-06 Sony Corporation Method and apparatus for modifying screen resolution based on available memory
US6947057B2 (en) * 2000-01-11 2005-09-20 Sun Microsystems, Inc. Rendering lines with sample weighting
US6873306B2 (en) * 2001-10-26 2005-03-29 International Business Machines Corporation Display controller architecture for portable computers
JP4161854B2 (ja) * 2003-09-02 2008-10-08 ソニー株式会社 電池残容量算出方法、電池残容量算出装置および電池残容量算出プログラム
US7538762B2 (en) * 2003-09-30 2009-05-26 Intel Corporation Switching display update properties upon detecting a power management event
US20050096102A1 (en) 2003-11-05 2005-05-05 Motorola, Inc Remotely initiated low power mode
US7389432B2 (en) * 2004-11-10 2008-06-17 Microsoft Corporation Advanced power management for computer displays
US7561145B2 (en) * 2005-03-18 2009-07-14 Microsoft Corporation Systems, methods, and computer-readable media for invoking an electronic ink or handwriting interface
US7489825B2 (en) 2005-07-13 2009-02-10 Ge Medical Systems Method and apparatus for creating a multi-resolution framework for improving medical imaging workflow
US20080055318A1 (en) * 2006-08-31 2008-03-06 Glen David I J Dynamic frame rate adjustment
JP2008129420A (ja) * 2006-11-22 2008-06-05 Nec Electronics Corp 表示装置およびコントローラドライバ
KR101341460B1 (ko) * 2006-12-15 2013-12-16 엘지전자 주식회사 스팀건조기
US9131078B2 (en) * 2007-07-27 2015-09-08 Lagavulin Limited Apparatuses, methods, and systems for a portable, image-processing transmitter
US20090102868A1 (en) 2007-10-23 2009-04-23 Motorola, Inc. Method and apparatus for dynamically adjusting resolution of display device in mobile computing devices
US7911509B2 (en) 2008-03-12 2011-03-22 Sony Ericsson Mobile Communications Ab Adaptive video encode scaling
US8514215B2 (en) * 2008-11-12 2013-08-20 International Business Machines Corporation Dynamically managing power consumption of a computer with graphics adapter configurations
CN101777009B (zh) * 2009-11-30 2012-12-19 英业达股份有限公司 应用程序的负载控管方法
JP2011118099A (ja) 2009-12-02 2011-06-16 Canon Inc 表示システム、画像処理装置、その制御方法、及びプログラム
JP5648282B2 (ja) * 2009-12-24 2015-01-07 富士ゼロックス株式会社 画面管理装置及びプログラム
KR20130113811A (ko) * 2012-04-06 2013-10-16 엘지전자 주식회사 이동 단말기 및 그것을 이용한 애플리케이션 관리 시스템
WO2012147276A1 (ja) * 2011-04-28 2012-11-01 パナソニック株式会社 映像表示装置および映像表示方法
US20130031589A1 (en) 2011-07-27 2013-01-31 Xavier Casanova Multiple resolution scannable video
CN102681648A (zh) * 2012-03-28 2012-09-19 中兴通讯股份有限公司 大屏幕终端省电的方法及装置
US8621253B1 (en) 2012-06-26 2013-12-31 Google Inc. Processor boost based on user interface demand
US8928678B2 (en) * 2012-08-02 2015-01-06 Intel Corporation Media workload scheduler
US9666119B2 (en) 2012-08-30 2017-05-30 Apple Inc. Systems and methods for controlling current in display devices
KR101387685B1 (ko) * 2012-09-24 2014-04-21 이철우 오미자 추출물을 유효성분으로 함유하는 혈전증 예방 또는 치료용 약학적 조성물 및 건강 기능 식품
US9892668B2 (en) 2012-09-28 2018-02-13 Avaya Inc. Screen resize for reducing power consumption
KR101997776B1 (ko) 2012-10-16 2019-07-08 삼성전자주식회사 디스플레이 장치의 소모 전력을 감소시키기 위한 방법 및 그 전자 장치

Non-Patent Citations (6)

* Cited by examiner, † Cited by third party
Title
미국공개특허 제2006-0101293호(2006.05.11.) 1부.*
미국공개특허 제2008-0055318호(2008.03.06.) 1부.*
미국공개특허 제2014-0043534호(2014.02.13.) 1부.*
미국특허공보 제6313822호(2001.11.06.) 1부.*
한국공개특허 제10-2013-0113811호(2013.10.16.) 1부.*
한국공개특허 제10-2014-0018157호(2014.02.12.) 1부.*

Also Published As

Publication number Publication date
WO2015182912A1 (en) 2015-12-03
US20150348493A1 (en) 2015-12-03
KR20150136440A (ko) 2015-12-07
CN106462325A (zh) 2017-02-22
EP3149562A1 (en) 2017-04-05
CN106462325B (zh) 2019-10-18
EP3149562A4 (en) 2018-05-30
US10181305B2 (en) 2019-01-15

Similar Documents

Publication Publication Date Title
KR102454196B1 (ko) 디스플레이 제어 방법 및 이를 제공하는 전자 장치
KR102353766B1 (ko) 디스플레이를 제어하는 장치 및 방법
US10257416B2 (en) Apparatus and method for setting camera
KR102383103B1 (ko) 전자 장치 및 이의 화면 표시 방법
KR102367551B1 (ko) 전자 장치의 정보 처리 방법 및 장치
US10732793B2 (en) Apparatus and method for providing information via portion of display
US20160004425A1 (en) Method of displaying graphic user interface and electronic device implementing same
US9772711B2 (en) Input processing method and electronic device thereof
KR102262086B1 (ko) 이미지 처리 방법 및 장치
KR102277353B1 (ko) 영상 처리 방법 및 전자 장치
KR102266882B1 (ko) 전자장치의 화면 표시 방법
KR20160011915A (ko) 화면 제어 방법 및 이를 사용하는 전자 장치
US10275056B2 (en) Method and apparatus for processing input using display
KR102268540B1 (ko) 데이터 관리 방법 및 그 방법을 처리하는 전자 장치
KR102294040B1 (ko) 데이터 송수신 방법 및 장치
KR102319286B1 (ko) 드래그 앤 드롭 처리 방법 및 장치
US20160381291A1 (en) Electronic device and method for controlling display of panorama image
KR20150135911A (ko) Ui 효과 디스플레이 방법 및 전자 장치
JP2020502696A (ja) 電子装置及びこれを用いたウェブページ表示方法
US20160344925A1 (en) Electronic device and method of operating camera of the same
KR20150096956A (ko) 전자 장치에서 정보를 표시하는 방법 및 장치
KR102277217B1 (ko) 블록을 설정하는 전자 장치 및 방법
KR20160027699A (ko) 이미지 처리 방법 및 그 전자 장치
KR102157295B1 (ko) 이미지 처리 방법 및 그 전자 장치
EP2953058A1 (en) Method for displaying images and electronic device for implementing the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right