KR20140034612A - 멀티 유저를 위한 디스플레이 장치 및 그 제어 방법 - Google Patents

멀티 유저를 위한 디스플레이 장치 및 그 제어 방법 Download PDF

Info

Publication number
KR20140034612A
KR20140034612A KR1020120101165A KR20120101165A KR20140034612A KR 20140034612 A KR20140034612 A KR 20140034612A KR 1020120101165 A KR1020120101165 A KR 1020120101165A KR 20120101165 A KR20120101165 A KR 20120101165A KR 20140034612 A KR20140034612 A KR 20140034612A
Authority
KR
South Korea
Prior art keywords
display
input means
user
access
input
Prior art date
Application number
KR1020120101165A
Other languages
English (en)
Inventor
권오인
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020120101165A priority Critical patent/KR20140034612A/ko
Priority to US13/798,653 priority patent/US20140075330A1/en
Priority to EP13161659.1A priority patent/EP2708984A3/en
Priority to CN201310294303.4A priority patent/CN103677248A/zh
Publication of KR20140034612A publication Critical patent/KR20140034612A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0381Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/038Indexing scheme relating to G06F3/038
    • G06F2203/0382Plural input, i.e. interface arrangements in which a plurality of input device of the same type are in communication with a PC

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)

Abstract

멀티 유저를 위한 디스플레이 장치가 개시된다. 디스플레이 장치는 복수의 입력 수단과 연결되는 인터페이스부, 각 입력 수단에 대해 고유하게 설정된 표시 속성 정보가 저장된 저장부, 복수의 입력 수단 각각에 대해 설정된 표시 속성 정보를 이용하여, 복수의 입력 수단 각각에 대응되는 표시 속성을 가지는 복수의 디스플레이 객체를 생성하는 디스플레이 처리부, 복수의 디스플레이 객체를 하나의 화면 내에 디스플레이하는 디스플레이부 및 복수의 디스플레이 객체에 대해 복수의 입력 수단을 이용한 액세스가 시도되면, 각 입력 수단 및 각 디스플레이 객체 사이의 대응 관계에 기초하여 액세스를 제한적으로 허용하는 제어부를 포함한다. 이에 따라, 디스플레이 장치는 복수의 입력 신호를 처리하여 하나의 디스플레이에 표시하는 것이 가능하다.

Description

멀티 유저를 위한 디스플레이 장치 및 그 제어 방법{DISPLAY APPARATUS FOR MULTI USER AND THE METHOD THEREOF}
본 발명은 디스플레이 장치 및 그 제어 방법에 관한 것으로, 더욱 상세하게는 다수의 사용자가 공유하는 디스플레이 장치 및 그 제어 방법에 관한 것이다.
디스플레이 장치는 제어부에서 처리한 명령 또는 신호를 기반으로 사용자에게 그 결과를 영상으로 보여주는 장치이다. 기존에는 한 명의 사용자가 이용하는 것을 가정하여 디스플레이 장치의 인터페이스는 설계되었다. 따라서, 다수의 사용자가 하나의 디스플레이 장치를 이용하여 각자의 작업을 수행하려면, 상호간 입력 명령의 충돌 또는 방해(interrupt)로 인해 작업을 수행할 수 없다. 한편, 하나의 디스플레이 장치에는 키보드, 마우스, 조이스틱 등과 같은 다수의 입력 장치가 연결될 수 있다. 그러나, 이와 같은 경우에도 디스플레이 장치는 다수의 입력 장치로부터 입력되는 신호에 대해 사용자를 구분하여 개별적으로 애플리케이션을 이용할 수 있는 매커니즘을 지원하지 않는다.
종래에는 싱글 유저가 하나의 디스플레이 장치를 사용하는 경우가 대부분이었으므로 다수 사용자에 의한 입력 처리가 필요한 경우가 거의 없었다. 그러나, 최근 고해상도, 대형 디스플레이 장치의 사용이 늘어나고 있으며, 유비쿼터스 환경이 구축됨에 따라 다수의 입력 장치를 이용하여 여러 사용자가 동시에 이용할 수 있는 기술에 대한 필요성이 대두되고 있다.
종래에는 디스플레이 장치 하나에 한 명의 사용자를 가정하기 때문에 복수의 애플리케이션을 구동하더라도 한 번에 한 애플리케이션만 입력 장치의 포커스를 가진다. 게다가 키 입력/포인터 입력 신호는 복수 장치에서 데이터가 주어지더라도 하나의 입력 스트림으로 생성되어 처리된다. 이 때문에 복수의 입력장치가 디스플레이 장치에 연결되어 있어도 동시에 여러 애플리케이션을 이용할 수가 없다. 예를 들어, 키보드 입력 장치를 N개 연결하고 워드프로세서 애플리케이션도 N개 구동하더라도 한 번에 하나의 워드프로세서 애플리케이션에서만 문서 편집이 가능하다. 즉 멀티 포커스와 멀티 입력 스트림을 지원할 방법이 필요하다. 그리고 데이터 입력 뿐만 아니라 팝업 창 처리 등과 같은 UI 객체의 동작 시나리오들도 복수 사용자가 고려되지 않았기 때문에, 임의의 사용자가 확인 메시지를 받거나 다른 사용자의 메뉴를 조작할 수 있는 사용성 저해 요소들이 있다. 이러한 부분들도 해결방법이 필요하다.
정리하면 종래의 디스플레이 장치 운영 방식은 한 명의 사용자 시나리오에만 대응 가능하기 때문에 여러 사용자가 동시에 이용하는 시나리오에 대응하기 위해서는 입력 장치의 처리 방법, 애플리케이션 화면의 운영 방법, 복수 사용자를 식별하는 방법 등에 대해서 새로운 접근이 필요하다.
본 발명은 상술한 필요성에 따라 안출된 것으로, 본 발명의 목적은 복수의 입력 장치로부터 입력되는 복수의 입력 신호를 처리하는 디스플레이 장치 및 그 제어 방법을 제공하는 것이다.
본 발명의 상술한 목적을 달성하기 위한 일 실시예에 따르면 디스플레이 장치는 복수의 입력 수단과 연결되는 인터페이스부, 각 입력 수단에 대해 고유하게 설정된 표시 속성 정보가 저장된 저장부, 상기 복수의 입력 수단 각각에 대해 설정된 표시 속성 정보를 이용하여, 상기 복수의 입력 수단 각각에 대응되는 표시 속성을 가지는 복수의 디스플레이 객체를 생성하는 디스플레이 처리부, 상기 복수의 디스플레이 객체를 하나의 화면 내에 디스플레이하는 디스플레이부 및 상기 복수의 디스플레이 객체에 대해 상기 복수의 입력 수단을 이용한 액세스가 시도되면, 각 입력 수단 및 각 디스플레이 객체 사이의 대응 관계에 기초하여 상기 액세스를 제한적으로 허용하는 제어부를 포함한다.
그리고, 상기 제어부는 상기 복수의 입력 수단 중에서 제1 입력 수단에 대응되는 표시 속성을 가지는 제1 디스플레이 객체에 대해 상기 제1 입력 수단을 이용한 제1 사용자 액세스가 이루어지면, 상기 제1 사용자 액세스에 따라 상기 제1 디스플레이 객체의 표시 상태를 변경하도록 상기 디스플레이 처리부를 제어하고, 상기 제1 디스플레이 객체에 대해 상기 제1 입력 수단을 제외한 나머지 입력 수단을 이용한 제2 사용자 액세스가 이루어지면 상기 제2 사용자 액세스를 무시할 수 있다.
또한, 상기 제어부는 상기 복수의 입력 수단에 대해 각각 개별적으로 설정된 표시 속성을 가지는 커서를 생성하여 상기 디스플레이부의 화면 상에 표시하고, 상기 복수의 입력 수단 각각을 통해 입력되는 이동 명령에 따라 대응되는 커서를 이동시키며, 각 커서가 액세스가 제한된 디스플레이 객체 상으로 이동되면 해당 커서의 표시 상태를 변경하도록 상기 디스플레이 처리부를 제어할 수 있다.
한편, 상기 복수의 디스플레이 객체 중에서 적어도 하나의 디스플레이 객체는 상기 복수의 입력 수단 각각에 의해 액세스 가능한 공유 객체가 될 수 있다.
그리고, 상기 공유 객체는 어플리케이션 아이콘이며, 상기 제어부는 상기 복수의 입력 수단 중 하나인 제1 입력 수단에 의해 상기 어플리케이션 아이콘이 선택되면 상기 어플리케이션 아이콘에 대응되는 어플리케이션을 실행시키고, 상기 어플리케이션의 실행 화면을 상기 제1 입력 수단에 대응되는 표시 속성을 따라 생성하여 디스플레이할 수 있다.
한편, 상기 복수의 입력 수단은 키보드, 마우스, 조이스틱, 전자 펜, 트랙 볼, 리모콘, 휴대폰, 태블릿 PC 중 적어도 하나를 포함할 수 있다.
본 발명의 상술한 목적을 달성하기 위한 다른 실시예에 따르면 디스플레이 장치는 사용자 음성 신호를 입력받는 마이크를 더 포함하며, 상기 저장부는 사용자별로 고유하게 설정된 표시 속성 정보를 저장하고, 상기 제어부는 상기 사용자 음성 신호가 입력되면 상기 사용자 음성 신호에 대응되는 표시 속성을 가지는 디스플레이 객체를 생성하여 디스플레이하도록 상기 디스플레이 처리부 및 상기 디스플레이부를 제어할 수 있다.
본 발명의 상술한 목적을 달성하기 위한 또 다른 실시예에 따르면 디스플레이 장치는 사용자를 촬상하는 적어도 하나의 카메라를 더 포함하며, 상기 저장부는 사용자별로 고유하게 설정된 표시 속성 정보를 저장하고, 상기 제어부는 상기 카메라에서 촬상된 사용자에 대응되는 표시 속성을 가지는 디스플레이 객체를 생성하여 디스플레이하도록 상기 디스플레이 처리부 및 상기 디스플레이부를 제어할 수 있다.
한편, 상기 표시 속성은 상기 디스플레이 객체의 모양, 색상, 크기, 테두리 이미지, 타이틀 레이블(title label) 또는 배경 이미지 중 적어도 하나일 수 있다.
본 발명의 상술한 목적을 달성하기 위한 일 실시예에 따르면 디스플레이 장치의 제어 방법은 디스플레이 장치에 연결된 복수의 입력 수단 각각에 대해 고유하게 설정된 표시 속성 정보를 이용하여, 상기 복수의 입력 수단 각각에 대응되는 표시 속성을 가지는 복수의 디스플레이 객체를 생성하는 단계, 상기 복수의 디스플레이 객체를 하나의 화면 내에 디스플레이하는 단계 및 상기 복수의 디스플레이 객체에 대해 상기 복수의 입력 수단을 이용한 액세스가 시도되면, 각 입력 수단 및 각 디스플레이 객체 사이의 대응 관계에 기초하여 상기 액세스를 제한적으로 허용하는 단계를 포함한다.
그리고, 상기 디스플레이하는 단계는 상기 복수의 입력 수단 중에서 제1 입력 수단에 대응되는 표시 속성을 가지는 제1 디스플레이 객체에 대해 상기 제1 입력 수단을 이용한 제1 사용자 액세스가 이루어지면, 상기 제1 사용자 액세스에 따라 상기 제1 디스플레이 객체의 표시 상태를 변경하고, 상기 액세스를 제한적으로 허용하는 단계는 상기 제1 디스플레이 객체에 대해 상기 제1 입력 수단을 제외한 나머지 입력 수단을 이용한 제2 사용자 액세스가 이루어지면 상기 제2 사용자 액세스를 무시할 수 있다.
또한, 상기 디스플레이하는 단계는 상기 복수의 입력 수단에 대해 각각 개별적으로 설정된 표시 속성을 가지는 커서를 생성하여 상기 화면 상에 표시하고, 상기 복수의 입력 수단 각각을 통해 입력되는 이동 명령에 따라 대응되는 커서를 이동시키며, 각 커서가 액세스가 제한된 디스플레이 객체 상으로 이동되면 해당 커서의 표시 상태를 변경할 수 있다.
한편, 상기 복수의 디스플레이 객체 중에서 적어도 하나의 디스플레이 객체는 상기 복수의 입력 수단 각각에 의해 액세스 가능한 공유 객체가 될 수 있다.
또한, 상기 공유 객체는 어플리케이션 아이콘이며, 상기 디스플레이 객체를 생성하는 단계는 상기 복수의 입력 수단 중 하나인 제1 입력 수단에 의해 상기 어플리케이션 아이콘이 선택되면 상기 어플리케이션 아이콘에 대응되는 어플리케이션을 실행시키고, 상기 어플리케이션의 실행 화면을 상기 제1 입력 수단에 대응되는 표시 속성을 따라 생성할 수 있다.
그리고, 상기 복수의 입력 수단은 키보드, 마우스, 조이스틱, 전자 펜, 트랙 볼, 리모콘, 휴대폰, 태블릿 PC 중 적어도 하나를 포함할 수 있다.
한편, 본 발명의 상술한 목적을 달성하기 위한 다른 실시예에 따르면 사용자 음성 신호를 입력받는 단계 및 사용자별로 고유하게 설정된 표시 속성 정보를 저장하는 단계를 더 포함하며, 상기 디스플레이 객체를 생성하는 단계는 상기 사용자 음성 신호가 입력되면 상기 사용자 음성 신호에 대응되는 표시 속성을 가지는 디스플레이 객체를 생성할 수 있다.
한편, 본 발명의 상술한 목적을 달성하기 위한 또 다른 실시예에 따르면 사용자를 촬상하는 단계 및 사용자별로 고유하게 설정된 표시 속성 정보를 저장하는 단계를 더 포함하며, 상기 디스플레이 객체를 생성하는 단계는 상기 촬상된 사용자에 대응되는 표시 속성을 가지는 디스플레이 객체를 생성할 수 있다.
그리고, 상기 표시 속성은 상기 디스플레이 객체의 모양, 색상, 크기, 테두리 이미지, 타이틀 레이블 또는 배경 이미지 중 적어도 하나일 수 있다.
이상과 같이 본 발명의 다양한 실시예에 따르면, 복수의 입력 신호를 처리하여 하나의 화면에 표시하는 것이 가능하다.
도 1은 본 발명의 일 실시예에 따른 디스플레이 장치의 블록도.
도 2는 본 발명의 일 실시예에 따른 표시 속성을 이용한 표시 방법을 설명하기 위한 도면.
도 3은 본 발명의 일 실시예에 따른 시스템 계층 구조를 설명하기 위한 도면
도 4는 본 발명의 일 실시예에 따른 복수의 입력 장치가 연결된 디스플레이 장치를 나타내는 도면.
도 5는 본 발명의 일 실시예에 따른 멀티 유저 환경에서의 디스플레이 장치를 설명하기 위한 도면.
도 6 내지 도11은 본 발명의 일 실시예에 따른 사용자 인터페이스 (User Interface: UI) 화면을 설명하기 위한 도면.
도 12는 본 발명의 일 실시예에 따른 디스플레이 장치 제어 방법의 흐름도.
도 13은 본 발명의 일 실시예에 따른 사용자 음성을 이용한 디스플레이 장치 제어 방법의 흐름도.
도 14는 본 발명의 일 실시예에 따른 사용자 제스처를 이용한 디스플레이 장치 제어 방법의 흐름도.
이하에서, 첨부된 도면을 이용하여 본 발명에 대하여 구체적으로 설명한다.
도 1은 본 발명의 일 실시예에 따른 디스플레이 장치의 블록도이다.
도 1에 따르면, 디스플레이 장치(100)는 인터페이스부(110), 저장부(120), 디스플레이 처리부(130), 디스플레이부(140), 제어부(150)를 포함한다. 인터페이스부(110)는 입력 수단으로부터 신호를 입력받는다. 인터페이스부(110)는 하나 이상의 입력 수단과 연결될 수 있다. 저장부(120)는 각 입력 수단에 대해 고유하게 설정된 표시 속성 정보를 저장한다. 표시 속성 정보는 화면에 표시하는 디스플레이 객체의 속성에 관한 정보를 의미하며, 디스플레이 객체는 사용자와 디스플레이 장치 사이에서 의사소통을 할 수 있는 사용자 인터페이스(User Inteface: UI)를 구성하는 물리적, 가상적 매개체를 의미한다. 예를 들어, 디스플레이 객체는 포인터, 아이콘, 폴더 등을 의미하고, 표시 속성 정보는 마우스 포인터의 특징, 실행 창의 모양, 배경 이미지의 속성 등과 같은 정보를 의미한다.
디스플레이 처리부(130)는 복수의 입력 수단 각각에 대해 설정된 표시 속성 정보를 이용하여, 복수의 입력 수단 각각에 대응되는 표시 속성을 가지는 복수의 디스플레이 객체를 생성한다. 디스플레이부(140)는 하나 이상의 디스플레이 객체를 하나의 화면 상에 표시한다.
제어부(150)는 인터페이스부(110), 저장부(120), 디스플레이 처리부(130)를 제어하고, 디스플레이 처리부(130)을 통해 디스플레이부(140)를 제어한다. 또한, 하나 이상의 디스플레이 객체에 대해 하나 이상의 입력 수단을 이용한 액세스가 시도되면, 각 입력 수단 및 각 디스플레이 객체 사이의 대응 관계에 기초하여 상기 액세스를 제한적으로 허용한다.
상술한 바와 같이, 입력 수단에 따른 디스플레이 객체 속성 정보에 따라 디스플레이 객체의 표시 및 입력 수단의 액세스 여부가 결정된다.따라서, 입력 수단에 대응되는 표시 속성을 가지는 디스플레이 객체를 생성하는 동작에 대해서 하술하기로 한다.
도 2는 본 발명의 일 실시예에 따른 표시 속성을 이용한 표시 방법을 설명하기 위한 도면이다.
도 2를 참조하면, 사용자 등록 관리자(151)는 입력 수단 A 또는 B(181, 182)로부터 입력 신호와 함께 고유 ID를 입력받고, 입력 수단 A 또는 B(181, 182)에 대응되는 프로파일 A 또는 B를 생성한다. 각 프로파일은 입력 수단에 대응되는 디스플레이 객체의 표시 속성 정보를 포함한다. 예를 들어, 디스플레이 객체의 표시 속성으로는 포인터의 모양, 색상, 크기, 특징이나 아이콘의 모양, 색상, 크기, 권한이나 폴더의 모양, 색상, 크기, 권한이나 메뉴의 글꼴, 모양, 색상, 항목이나 실행 창의 글꼴, 모양, 색상이나 타이틀 레이블(title label), 테두리 이미지, 배경 이미지 등이 있다. 따라서, 프로파일 1은 사용자 A(또는 입력 수단 A)에 대응되는 데이터로서, 포인터 및 실행 창의 모양은 사각형, 색상은 노란색 등의 정보를 포함할 수 있다. 디스플레이 객체 표시 속성은 해당하는 입력 수단을 이용하여 설정이나 변경을 할 수 있다. 입력 수단이 디스플레이 장치(100)와 최초로 연결되는 경우에는 각 입력 수단에 대응되는 표시 속성 정보는 기설정된 초기값으로 세팅될 수 있다.
이렇게 각 입력 수단에 대응되는 표시 속성 정보를 포함하는 프로파일은 디스플레이 객체 관리자(131)에서 속성 정보를 확인하고, 저장부(120)에 런타임 사용자 표시 속성 정보(121)로서 저장된다. 런타임 사용자 속성 정보(121)는 각 입력 수단에 대응되는 고유 정보이지만, 일반적으로 멀티 사용자에 의한 동시 입력 명령이 있는 경우를 설명하기 위한 것이므로 도 2의 런타임 사용자 표시 속성 정보(121)에서는 사용자 A, B, C로 표시하였다. 프로파일 A, B, C는 각 사용자(또는 각 입력 수단)에 대응되는 디스플레이 객체의 표시 속성을 포함한다.
입력 수단 A 또는 B의 입력 신호가 있는 경우 디스플레이 객체 관리자(131)는 각 입력 수단에 해당하는 프로파일 A 또는 B를 저장부(120)에 저장된 런타임 사용자 표시 속성 정보(121)로부터 검색한다. 검색된 프로파일 A 또는 B의 표시 속성을 이용하여 각 디스플레이 객체의 속성을 세팅한다. 즉, 디스플레이 객체 A(211)의 속성은 프로파일 A의 해당 속성으로 세팅하고, 입력 수단 A의 ID(221)를 붙인다. 디스플레이 객체 B(212)의 속성은 프로파일 B의 해당 속성으로 세팅하고, 입력 수단 B의 ID(222)를 붙인다. 디스플레이 객체 Z(213)은 공유 속성 객체이므로 공유 ID(223)을 붙인다. 또는 공유 속성 객체의 경우 ID를 붙이지 않고 널(Null) 값으로 할 수도 있다. 디스플레이 객체 A, B, C(211, 212, 213)는 디스플레이부(140)에 표시된다. 각 디스플레이 객체에 붙은 ID는 내부적으로 세팅된 값이며 디스플레이부(140)에 표시되는 것은 아니다.
도 2에서는 복수 개의 디스플레이 객체를 구분하여 표시하는 방법에 대해 설명하였다. 아래에서는 복수 개의 디스플레이 객체를 동시에 실행시키는 방법에 대해 시스템 계층 구조를 이용하여 설명한다.
도 3은 본 발명의 일 실시예에 따른 시스템 계층 구조를 설명하기 위한 도면이다.
도 3에 따르면, 복수의 입력 수단(311, 312, 313)이 디스플레이 장치(100)와 연결될 수 있다. 또한, 복수의 사용자로부터 음성이나 제스처를 입력받기 위한 마이크(321) 또는 카메라(322)가 연결될 수도 있다. 사용자의 음성이나 제스처를 이용한 입력은 물리적인 복수의 입력 수단(311, 312, 313)과 별도로 구성되며, 복수의 입력 수단(311, 312, 313)과 함께 사용될 수 있다. 또는, 사용자의 음성이나 제스처만이 입력 수단으로 사용될 수도 있다.
각 사용자의 음성에 따라 입력 수단을 구별하기 위해서는 이를 구별하기 위한 기준 음성이 필요하다. 따라서, 디스플레이 장치(100)는 일정한 음성 정보를 마이크(321)를 통해 미리 입력받아 저장부(120)에 저장시켜 둔다. 저장된 음성 정보는 물리적인 입력 수단의 ID와 같은 역할을 한다. 디스플레이 장치(100)는 사용자의 음성을 입력받으면 기 저장된 기준 음성을 기반으로 프로파일을 생성하여 디스플레이 객체에 적용한다.
각 사용자의 영상에 따라 입력 수단을 구별하기 위해서는 기준 영상이 필요하다. 따라서, 디스플레이 장치(100)는 일정한 영상 정보를 카메라(322)를 통해 미리 입력받아 저장부(120)에 저장시켜 둔다. 저장된 영상 정보는 물리적인 입력 수단의 ID와 같은 역할을 한다. 기준 영상은 사용자의 안면 영상이 될 수 있다. 또는, 촬상된 일정한 제스처 영상 또는 일련의 제스처 집합 영상을 기준 영상으로 사용할 수도 있다.
마이크(321)는 스테레오 음성 입력을 위해 두 개 이상 구비될 수 있으며, 카메라(322)도 다양한 제스처의 입력을 위해 복수 개가 구비될 수 있다. 상술한 바와 같이, 다양한 입력 수단은 유선 또는 무선으로 디스플레이 장치(100)와 연결될 수 있다. 다양한 입력 수단으로부터 발생된 신호는 하드웨어(HW)(330)로 입력된다. HW(330)의 각 구성부는 도 1에서 설명하였으므로 생략하기로 한다.
HW(330)의 위에는 OS(커널) 계층(340)이 존재한다. OS(커널) 계층(340)은 시간을 슬라이싱(slicing)하거나 멀티 코어(multi-core) CPU를 이용하여 복수의 어플리케이션을 동시에 실행시킨다. OS(커널) 계층(340) 위에는 윈도우 관리자(Window Manager)(351)와 I/O 관리자(Input/OPutput Manager)(352)가 존재한다. 윈도우 관리자(351)은 일반적인 OS와 CPU 자원을 관리한다. I/O 관리자(352)는 각 입력 수단에 대응한 권한 허용 여부와 관련하여 입력 데이터를 분배하거나, 출력 속성 정보(예, 제어 포커스(contol focus), 포인터 동작(pointer motion), 레이아웃(layout) 등)를 관리한다.
윈도우 관리자(351)와 I/O 관리자(352)의 위에는 실행시키기 위한 복수의 응용 프로그램(어플리케이션)(361, 362, 363)이 존재한다.
지금까지 디스플레이 장치(100)의 내부 구조를 설명하였으므로 다양한 입력 수단과 연결된 디스플레이 장치(100)에 대해서 설명하기로 한다.
도 4은 본 발명의 일 실시예에 따른 복수의 입력 장치가 연결된 디스플레이 장치를 나타내는 도면이다.
도 4에 따르면, 디스플레이 장치(100)는 다양한 입력 수단과 연결될 수 있다. 입력 수단은 키보드(171), 마우스(172), 조이스틱(173), 전자 펜(174), 트랙 볼(미도시), 리모콘(미도시), 휴대폰(미도시), 태블릿 PC(미도시) 등이 될 수 있다. 경우에 따라, 제어부는 입력 수단의 종류별로 하나씩 동일한 사용자의 입력 수단으로 인식할 수 있다. 예를 들어, 제1 및 제2 키보드는 제1 및 제2 사용자의 입력 수단으로 인식하고, 추가로 하나의 마우스가 연결되면, 추가된 마우스를 제1 사용자의 입력 수단으로 인식할 수 있다. 또한, 제1 사용자의 입력 수단으로 인식된 마우스는 설정 메뉴를 통하여 제2 사용자의 입력 수단으로 변경될 수도 있다. 이와 같이, 복수 개의 입력 수단을 동일한 사용자의 입력 수단으로 인식하는 경우, 복수 개의 입력 수단에 대응되는 각각의 디스플레이 객체는 동일한 사용자 프로파일이 적용된다.
상술한 입력 수단 외에 사용자의 음성이나 제스처 등도 디스플레이 장치(100)의 입력 수단이 될 수 있다.
입력 수단과 디스플레이 장치(100)는 유선 또는 무선으로 연결될 수 있다. 디스플레이 장치(100)가 다양한 입력 수단과 유선으로 연결될 수 있도록, 디스플레이(100)는 USB 2.0, USB 3.0, HDMI, IEEE 1394 등의 커넥터를 다수 포함할 수 있다. 또는, 디스플레이 장치(100)가 입력 수단과 무선으로 연결되는 경우 디스플레이 장치(100)는 무선 통신 모듈(미도시)을 포함할 수 있다. 무선 통신 모듈은 제어부(150)에 의해 제어되며, 미국전기전자학회(IEEE)의 규격(IEEE802.11x)을 지원한다. 또한, 입력 수단과 디스플레이 장치(100)는 블루투스(bluetooth), 적외선 통신(Infrared Data Association: IrDA) 등을 이용하여 무선으로 연결 가능하다.
아래에서는 각 입력 수단에 대응하는 고유의 디스플레이 객체 속성 정보를 이용한 디스플레이 장치의 표시 방법에 대해서 설명하기로 한다.
도 5는 본 발명의 일 실시예에 따른 멀티 유저 환경에서의 디스플레이 장치를 설명하기 위한 도면이다.
도 5를 참조하면, 두 명의 사용자가 두 개의 입력 수단(181, 182)을 이용하여 디스플레이 장치에 신호를 입력한다. 제어부 및 디스플레이 처리부는 입력된 신호를 처리하여 디스플레이부(140)에 디스플레이 객체를 표시한다. 제1 디스플레이 객체(211)는 제1 입력 수단(181)에 대응하는 디스플레이 객체를 나타내고, 제2 디스플레이 객체(212)는 제2 입력 수단(182)에 대응하는 디스플레이 객체를 나타낸다. 도 5에서 도시한 바와 같이, 디스플레이부(140)는 제1 및 제2 입력 수단(181, 182)에 대응하는 디스플레이 객체를 복수 개 표시할 수 있다. 또한, 입력 수단도 디스플레이 장치(100)와 복수 개 연결할 수 있음은 상술한 바 있다.
도 6 내지 도11은 본 발명의 일 실시예에 따른 사용자 인터페이스 (User Interface: UI) 화면을 설명하기 위한 도면이다.
도 6을 참조하면, 제1 및 제2 입력 수단(171a, 172b)이 디스플레이 장치와 연결된다. 도 1 및 도 2에서 설명한 바와 같이, 디스플레이 처리부(130)와 제어부(150)에 의해 각 입력 수단에 대응되는 각 디스플레이 객체는 디스플레이 속성 정보가 적용되어 디스플레이부(140)에 표시된다. 또한, 도 4에서 설명한 바와 같이, 제어부(150)는 복수 개의 다른 종류의 입력 수단(예, 키보드와 마우스)을 동일한 사용자 입력 수단으로 인식하여 동일한 사용자 프로파일을 적용할 수도 있다. 도 4에 도시된 바와 같이, 제1 입력 수단(171a)에 대응되는 디스플레이 객체로서, 폴더 A1(11a), A2(21a) 및 제1 포인터(16a)가 디스플레이부(140)에 표시된다. 또한, 제2 입력 수단(171b)에 대응되는 디스플레이 객체로서, 폴더 B1(11b) 및 제2 포인터(16b)가 표시된다. 디스플레이부(140)에 표시된 폴더 C1(11c)은 공유 속성을 가진 폴더를 의미한다.
제1 입력 수단(171a)에 대응하는 폴더의 속성은 원형 테두리가 지정되어 있다. 따라서, 폴더 A1(11a)와 폴더 A2(21a)의 외곽은 원형의 테두리를 가지고 있다. 또한, 제1 포인터(16a)의 속성도 원형으로 지정되어 있으므로 원형의 제1 포인터(16a)가 디스플레이부(140)에 표시된다. 반면에, 제2 입력 수단(171b)에 대응하는 폴더의 속성은 사각형 테두리가 지정되어 있다. 따라서, 폴더 B1(11b)의 외곽은 사각형의 테두리를 가지고 있다. 또한, 제2 포인터(16b)의 속성도 사각형으로 지정되어 있으므로 사각형의 제2 포인터(16b)가 디스플레이부(140)에 표시된다. 공유 속성을 가진 폴더 C1(11c)는 테두리에 대한 속성이 없으므로 테두리 없는 폴더가 표시된다.
제어부(150)는 하나의 디스플레이 객체에 대하여 각 입력 수단을 통한 액세스(access) 신호가 있더라도, 디스플레이 객체에 적용된 고유 속성 정보에 따라 액세스가 이루어지도록 하거나, 액세스를 무시하는 제어를 수행한다.
도 7에 따르면, 사용자는 제1 입력 수단(171a)을 이용하여 제1 입력 수단(171a)에 대응하는 속성을 가진 폴더 A1(12a)을 클릭한다. 따라서, 폴더 A1(12a)은 목록을 표시하는 실행 창 형태로 디스플레이부(140)에 표시된다. 이때, 제1 입력 수단(171a)의 속성은 원형 테두리가 지정되어 있으므로 폴더 A1의 테두리도 원형으로 표시된다. 제1 포인터(16a)는 제1 입력 수단(171a)에 대응되는 속성(이하, 제1 속성)을 가지고, 제2 포인터(16b)는 제2 입력 수단(171b)에 대응되는 속성(이하, 제2 속성)을 가진다.
제어부(150)는 복수의 입력 수단 중에서 제1 입력 수단(171a)에 대응되는 표시 속성을 가지는 폴더 A1(11a)에 대해 제1 입력 수단(171a)을 이용한 제1 사용자 액세스가 이루어지면 제1 사용자 액세스에 따라 폴더 A1(11a)의 표시 상태를 변경할 수 있다. 제1 입력 수단(171a)의 입력 위치는 제1 포인터(16a)에 의해서 사용자에게 인식될 수 있다.
그러나, 제어부(150)는 제2 입력 수단(171b)을 이용한 제2 사용자 액세스가 이루어지면 제2 사용자 액세스를 무시한다. 즉, 제2 속성을 가지는 제2 포인터(16b)가 제1 속성을 가지는 폴더 A1(12a)에서 액세스를 해도 아무런 입력이 이루어지지 않는다. 또는, 제어부(150)는 제2 포인터(16b)가 폴더 A1(12a)로 움직이는 경우 투명 또는 반투명해지도록 표시 상태를 변경할 수 있으며, 바운싱하도록 설정할 수도 있다.
지금까지, 제1 또는 제2 사용자가 제1 또는 제2 입력 수단(171a, 171b)을 이용하여 제1 속성을 가진 폴더 A1(12a)에 대한 액세스를 하는 실시예를 설명하였지만, 디스플레이 객체는 폴더에 한정되지 않고, 아이콘, 메뉴 창과 같은 디스플레이 객체에 대해서도 적용될 수 있다.
그러나, 제1 또는 제2 입력 수단(171a, 171b)은 속성에 상관없이 공유 속성을 가진 디스플레이 객체에 대한 접근이 가능하다. 따라서, 디스플레이부(140)에 공유 속성을 가지는 폴더는 제1 또는 제2 입력 수단(171a, 171b)에 의한 접근이 가능하다. 즉, 제1 속성을 가진 제1 포인터(16a)에 의해 폴더 C1(12c)은 실행되고 액세스될 수 있으며, 제2 속성을 가진 제2 포인터(16b)에 의해 폴더 C1(12c)은 실행되고 액세스될 수 있다.
그러나, 공유 속성을 가진 디스플레이 객체라도 어느 한 사용자가 실행시키는 경우 실행되는 동안에는 해당 사용자에 대응되는 속성을 적용시킬 수 있다.
도 8은 제1 사용자가 제1 입력 수단(171a)을 이용하여 공유 속성을 가지는 폴더 C1(12c)를 실행시키는 실시예를 도시한 도면이다.
도 8에 따르면, 제1 사용자가 공유 폴더 C1(12c)를 실행시켰으므로 실행되는 동안 임시로 제1 속성이 적용된다. 따라서, 폴더 C1(12c)는 원형의 테두리를 포함한다. 제1 속성이 적용된 공유 폴더 C1(12c)은 제1 사용자만이 액세스할 수 있다. 따라서, 제1 속성이 적용된 제1 포인터(16a)는 액세스, 이동 등이 자유롭다. 그러나, 제2 속성이 적용된 제2 포인터(16b')는 액세스가 제한된다. 액세스가 제한된 제2 포인터(16b')는 도 7에서 설명한 바와 같이 변경될 수 있지만, 도 8에서 도시된 바와 같이 'X'표시를 하여 제2 포인터(16b')의 액세스가 제한됨을 표시할 수도 있다. 제어부(150)의 구체적인 제어 방법은 도 7에서 설명한 바와 동일하므로 생략하기로 한다.
도 9는 제1 사용자가 제1 속성을 가진 디스플레이 객체의 속성을 변경하는 실시예를 도시한 도면이다.
도 9의 (1)에 따르면, 제1 속성을 가진 폴더 A1, A2(11a, 21a), 제2 속성을 가진 폴더 B1(11b) 및 공통 속성을 가진 폴더 C1(11c)가 디스플레이부(140)에 표시되어 있다. 폴더 A2(21a)는 제1 속성을 가지고 있으므로 제1 입력 수단(171a)만이 액세스 가능하다. 제1 사용자는 제1 입력 수단(171a)를 이용하여 폴더 A2(21a)의 메뉴 창(17a)를 연다. 메뉴 창(17a)은 여러 가지 항목을 포함할 수 있으며, 속성 정보를 변경하는 항목도 포함할 수 있다. 제1 사용자는 제1 입력 수단(171a)을 이용하여 폴더 A2(21a)의 속성을 공유 속성으로 변경할 수 있다.
도 9의 (2)에 따르면 폴더 A2(22a)는 제1 속성에서 공유 속성으로 변경되었다. 따라서, 폴더 A2(22a)는 도 9의 (1)에서와 같이 제1 속성을 나타내는 원형의 테두리가 없어지고, 공유 속성을 가진 폴더 C1(11c)와 같이 테두리가 없는 폴더로 디스플레이부(140)에 표시된다.
도 9의 (1)에서는 폴더 A2(21a)는 제1 속성을 가지고 있으므로 제2 입력 수단(171b)을 이용한 액세스가 차단되지만, 도 9의 (2)에서는 공유 속성으로 변경되었으므로 제2 입력 수단(171b)을 이용한 액세스가 허용된다.
도 10은 제2 사용자가 디스플레이 객체를 생성하는 실시예를 도시한 도면이다.
도 10의 (1)에 따르면, 제1 속성을 가진 폴더 A1, A2(11a, 21a), 제2 속성을 가진 폴더 B1(11b) 및 공통 속성을 가진 폴더 C1(11c)가 디스플레이부(140)에 표시되어 있다. 제2 사용자는 제2 입력 수단(171b)를 이용하여 메뉴 창(17b)을 연다. 메뉴 창(17b)은 여러 가지 항목을 포함할 수 있으며, 새로운 디스플레이 객체를 생성하는 항목도 포함할 수 있다. 제2 사용자는 제2 입력 수단(171b)을 이용하여 새로운 폴더를 생성한다.
도 10의 (2)에 따르면, 새로운 폴더 B2(21b)가 생성되었다. 폴더 B2(21b)는 제2 입력 수단(171b)를 이용하여 생성하였으므로 제2 속성을 가진다. 따라서, 폴더 B2(21b)는 사각형 테두리를 가진다.
지금까지 디스플레이 장치(100)에 대한 복수의 사용자가 액세스하는 실시예를 설명하였다. 그러나, 디스플레이 장치(100)는 한 명의 사용자가 액세스할 수도 있다.
도 11은 한 명의 사용자가 하나의 입력 장치(151a)를 이용하여 액세스하는 실시예를 도시한 도면이다.
도 11에 따르면, 디스플레이부(140)에 표시되는 화면은 도 6에서 설명한 화면과 유사하다. 따라서, 도 6과 차이가 있는 부분만을 설명한다. 제1 사용자(151a)만이 디스플레이 장치(100)에 연결하였으므로 디스플레이부(140)의 배경 이미지(141a)는 제1 속성에 해당하는 이미지를 표시한다. 제2 속성을 가진 폴더 B1(11b)는 생략될 수 있다. 또는, 폴더 B1(11b)는 표시될 수 있으나, 속성이 다르므로 제1 입력 수단(151a)을 이용한 액세스는 금지될 수 있다. 공유 폴더 C1은 제1 입력 수단(151a)을 이용하여 액세스 할 수 있으므로 디스플레이부(140)에 표시된다.
도 12는 본 발명의 일 실시예에 따른 디스플레이 장치 제어 방법의 흐름도이다.
도 12에 따르면, 디스플레이 장치에 연결된 복수의 입력 수단 각각에 대해 고유하게 설정된 표시 속성 정보를 이용하여 복수의 입력 수단 각각에 대응되는 표시 속성을 가지는 복수의 디스플레이 객체를 생성한다(S1210). 상술한 바와 같이, 표시 속성 정보는 입력 수단 각각에 대해 설정될 수 있으나, 입력 수단의 종류별로 하나씩 복수 개의 입력 수단(예, 키보드와 마우스)이 하나의 표시 속성 정보로 설정될 수도 있다.
복수의 디스플레이 객체를 하나의 화면 내에 디스플레이한다(S1220). 제어부는 복수의 입력 수단 중에서 제1 속성을 가지는 제1 디스플레이 객체에 대해 제1 입력 수단을 이용한 액세스가 이루어지면, 제1 디스플레이 객체의 표시 상태를 변경할 수 있다. 그리고, 복수의 입력 수단에 대해 각각 개별적으로 설정된 표시 속성을 가지는 포인터(또는 커서)를 생성하여 디스플레이부의 화면 상에 표시하고, 복수의 입력 수단 각각을 통해 입력되는 이동 명령에 따라 대응되는 포인터(또는 커서)를 이동시킬 수 있다. 또한, 각 포인터(또는 커서)가 액세스가 제한된 디스플레이 객체 상으로 이동되면 해당 포인터(또는 커서)의 표시 상태를 변경할 수 있다.
복수의 디스플레이 객체에 대해 복수의 입력 수단을 이용하여 액세스가 시도되면, 각 입력 수단 및 각 디스플레이 객체 사이의 대응 관계에 기초하여 액세스를 제한적으로 허용한다(S1230). 제어부는 제1 디스플레이 객체에 대해 제1 입력 수단을 제외한 나머지 입력 수단을 이용한 제2 액세스가 이루어지면, 제2 액세스를 무시할 수 있다.
다음에는 사용자 음성이 입력 수단으로 이용될 때 디스플레이 제어 방법에 대해서 설명한다.
도 13은 본 발명의 일 실시예에 따른 사용자 음성을 이용한 디스플레이 장치 제어 방법의 흐름도이다.
상술한 바와 같이 사용자 음성을 입력 수단으로 이용하기 위해서 디스플레이 장치(100)는 마이크를 구비한다. 또한, 입력된 음성 신호를 구별하기 위해 사용자별로 저장된 기준 음성 정보를 저장한다. 디스플레이 장치(100)는 마이크를 이용하여 사용자 음성 신호를 입력받는다(S1310). 입력받은 음성 신호와 기 저장된 기준 음성 정보를 비교하여 사용자를 확인한다. 사용자별로 고유하게 설정된 표시 속성 정보를 저장한다(S1320). 사용자 음성 신호에 대응되는 표시 속성을 가지는 디스플레이 객체를 생성한다(S1330). 구체적인 방법은 상술한 바와 동일하므로 생략하기로 한다.
다음에는 사용자 제스처가 입력 수단으로 이용될 때 디스플레이 제어 방법에 대해서 설명한다.
도 14는 본 발명의 일 실시예에 따른 사용자 제스처를 이용한 디스플레이 장치 제어 방법의 흐름도이다.
상술한 바와 같이 사용자 제스처를 입력 수단으로 이용하기 위해서 디스플레이 장치(100)는 카메라를 구비한다. 또한, 입력된 사용자를 구별하기 위해 사용자 별로 저장된 기준 영상 정보를 저장한다. 디스플레이 장치(100)는 카메라를 이용하여 사용자를 촬상한다(S1410). 입력받은 사용자의 영상과 기 저장된 기준 영상 정보와 비교하여 사용자를 확인한다. 사용자별로 고유하게 설정된 표시 속성 정보를 저장한다(S1420). 촬상된 사용자에 대응되는 표시 속성을 가지는 디스플레이 객체를 생성한다(S1430). 구체적인 방법은 상술한 바와 동일하므로 생략하기로 한다.
한편, 상술한 다양한 실시 예들에 따른 방법들은 소프트웨어로 생성되어 디스플레이 장치 또는 시스템에 탑재될 수 있다.
구체적으로는, 본 발명의 일 실시 예에 따르면, 복수의 입력 수단에 대해 고유하게 설정된 표시 속성 정보를 저장하는 단계, 복수의 입력 수단 각각에 대해 설정된 표시 속성 정보를 이용하여, 복수의 입력 수단 각각에 대응되는 표시 속성을 가지는 복수의 디스플레이 객체를 생성하는 단계, 복수의 디스플레이 객체를 하나의 화면 내에 디스플레이하는 단계 및 복수의 디스플레이 객체에 대해 복수의 입력 수단을 이용한 액세스가 시도되면, 각 입력 수단 및 각 디스플레이 객체 사이의 대응 관계에 기초하여 액세스를 제한적으로 허용하는 단계를 수행하는 프로그램이 저장된 비일시적 판독 가능 매체(non-transitory computer readable medium)가 설치될 수 있다.
비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.
이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
100 : 디스플레이 장치
110 : 인터페이스부 120 : 저장부
130 : 디스플레이 처리부 140 : 디스플레이부
150 : 제어부
311 : 입력수단 1 312 : 입력수단 2
313 : 입력수단 3
321 : 마이크 322 : 카메라

Claims (18)

  1. 복수의 입력 수단과 연결되는 인터페이스부;
    각 입력 수단에 대해 고유하게 설정된 표시 속성 정보가 저장된 저장부;
    상기 복수의 입력 수단 각각에 대해 설정된 표시 속성 정보를 이용하여, 상기 복수의 입력 수단 각각에 대응되는 표시 속성을 가지는 복수의 디스플레이 객체를 생성하는 디스플레이 처리부;
    상기 복수의 디스플레이 객체를 하나의 화면 내에 디스플레이하는 디스플레이부; 및
    상기 복수의 디스플레이 객체에 대해 상기 복수의 입력 수단을 이용한 액세스가 시도되면, 각 입력 수단 및 각 디스플레이 객체 사이의 대응 관계에 기초하여 상기 액세스를 제한적으로 허용하는 제어부;를 포함하는 디스플레이 장치.
  2. 제1항에 있어서,
    상기 제어부는,
    상기 복수의 입력 수단 중에서 제1 입력 수단에 대응되는 표시 속성을 가지는 제1 디스플레이 객체에 대해 상기 제1 입력 수단을 이용한 제1 사용자 액세스가 이루어지면, 상기 제1 사용자 액세스에 따라 상기 제1 디스플레이 객체의 표시 상태를 변경하도록 상기 디스플레이 처리부를 제어하고,
    상기 제1 디스플레이 객체에 대해 상기 제1 입력 수단을 제외한 나머지 입력 수단을 이용한 제2 사용자 액세스가 이루어지면 상기 제2 사용자 액세스를 무시하는 것을 특징으로 하는 디스플레이 장치.
  3. 제1항에 있어서,
    상기 제어부는,
    상기 복수의 입력 수단에 대해 각각 개별적으로 설정된 표시 속성을 가지는 커서를 생성하여 상기 디스플레이부의 화면 상에 표시하고, 상기 복수의 입력 수단 각각을 통해 입력되는 이동 명령에 따라 대응되는 커서를 이동시키며, 각 커서가 액세스가 제한된 디스플레이 객체 상으로 이동되면 해당 커서의 표시 상태를 변경하도록 상기 디스플레이 처리부를 제어하는 것을 특징으로 하는 디스플레이 장치.
  4. 제1항에 있어서,
    상기 복수의 디스플레이 객체 중에서 적어도 하나의 디스플레이 객체는 상기 복수의 입력 수단 각각에 의해 액세스 가능한 공유 객체인 것을 특징으로 하는 디스플레이 장치.
  5. 제4항에 있어서,
    상기 공유 객체는 어플리케이션 아이콘이며,
    상기 제어부는, 상기 복수의 입력 수단 중 하나인 제1 입력 수단에 의해 상기 어플리케이션 아이콘이 선택되면 상기 어플리케이션 아이콘에 대응되는 어플리케이션을 실행시키고, 상기 어플리케이션의 실행 화면을 상기 제1 입력 수단에 대응되는 표시 속성을 따라 생성하여 디스플레이하는 것을 특징으로 하는 디스플레이 장치.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서,
    상기 복수의 입력 수단은,
    키보드, 마우스, 조이스틱, 전자 펜, 트랙 볼, 리모콘, 휴대폰, 태블릿 PC 중 적어도 하나를 포함하는 디스플레이 장치.
  7. 제1항 내지 제5항 중 어느 한 항에 있어서,
    사용자 음성 신호를 입력받는 마이크;를 더 포함하며,
    상기 저장부는,
    사용자별로 고유하게 설정된 표시 속성 정보를 저장하고,
    상기 제어부는,
    상기 사용자 음성 신호가 입력되면 상기 사용자 음성 신호에 대응되는 표시 속성을 가지는 디스플레이 객체를 생성하여 디스플레이하도록 상기 디스플레이 처리부 및 상기 디스플레이부를 제어하는 것을 특징으로 하는 디스플레이 장치.
  8. 제1항 내지 제5항 중 어느 한 항에 있어서,
    사용자를 촬상하는 적어도 하나의 카메라;를 더 포함하며,
    상기 저장부는,
    사용자별로 고유하게 설정된 표시 속성 정보를 저장하고,
    상기 제어부는,
    상기 카메라에서 촬상된 사용자에 대응되는 표시 속성을 가지는 디스플레이 객체를 생성하여 디스플레이하도록 상기 디스플레이 처리부 및 상기 디스플레이부를 제어하는 것을 특징으로 하는 디스플레이 장치.
  9. 제1항 내지 제5항 중 어느 한 항에 있어서,
    상기 표시 속성은,
    상기 디스플레이 객체의 모양, 색상, 크기, 테두리 이미지, 타이틀 레이블(title label) 또는 배경 이미지 중 적어도 하나인 것을 특징으로 하는 디스플레이 장치.
  10. 디스플레이 장치의 제어 방법에 있어서,
    상기 디스플레이 장치에 연결된 복수의 입력 수단 각각에 대해 고유하게 설정된 표시 속성 정보를 이용하여, 상기 복수의 입력 수단 각각에 대응되는 표시 속성을 가지는 복수의 디스플레이 객체를 생성하는 단계;
    상기 복수의 디스플레이 객체를 하나의 화면 내에 디스플레이하는 단계; 및
    상기 복수의 디스플레이 객체에 대해 상기 복수의 입력 수단을 이용한 액세스가 시도되면, 각 입력 수단 및 각 디스플레이 객체 사이의 대응 관계에 기초하여 상기 액세스를 제한적으로 허용하는 단계;를 포함하는 디스플레이 장치의 제어 방법.
  11. 제10항에 있어서,
    상기 디스플레이하는 단계는,
    상기 복수의 입력 수단 중에서 제1 입력 수단에 대응되는 표시 속성을 가지는 제1 디스플레이 객체에 대해 상기 제1 입력 수단을 이용한 제1 사용자 액세스가 이루어지면, 상기 제1 사용자 액세스에 따라 상기 제1 디스플레이 객체의 표시 상태를 변경하고,
    상기 액세스를 제한적으로 허용하는 단계는,
    상기 제1 디스플레이 객체에 대해 상기 제1 입력 수단을 제외한 나머지 입력 수단을 이용한 제2 사용자 액세스가 이루어지면 상기 제2 사용자 액세스를 무시하는 것을 특징으로 하는 디스플레이 장치의 제어 방법.
  12. 제10항에 있어서,
    상기 디스플레이하는 단계는,
    상기 복수의 입력 수단에 대해 각각 개별적으로 설정된 표시 속성을 가지는 커서를 생성하여 상기 화면 상에 표시하고, 상기 복수의 입력 수단 각각을 통해 입력되는 이동 명령에 따라 대응되는 커서를 이동시키며, 각 커서가 액세스가 제한된 디스플레이 객체 상으로 이동되면 해당 커서의 표시 상태를 변경하는 것을 특징으로 하는 디스플레이 장치의 제어 방법.
  13. 제10항에 있어서,
    상기 복수의 디스플레이 객체 중에서 적어도 하나의 디스플레이 객체는 상기 복수의 입력 수단 각각에 의해 액세스 가능한 공유 객체인 것을 특징으로 하는 디스플레이 장치의 제어 방법.
  14. 제13항에 있어서,
    상기 공유 객체는 어플리케이션 아이콘이며,
    상기 디스플레이 객체를 생성하는 단계는,
    상기 복수의 입력 수단 중 하나인 제1 입력 수단에 의해 상기 어플리케이션 아이콘이 선택되면 상기 어플리케이션 아이콘에 대응되는 어플리케이션을 실행시키고, 상기 어플리케이션의 실행 화면을 상기 제1 입력 수단에 대응되는 표시 속성을 따라 생성하는 것을 특징으로 하는 디스플레이 장치의 제어 방법.
  15. 제10항 내지 제14항 중 어느 한 항에 있어서,
    상기 복수의 입력 수단은,
    키보드, 마우스, 조이스틱, 전자 펜, 트랙 볼, 리모콘, 휴대폰, 태블릿 PC 중 적어도 하나를 포함하는 디스플레이 장치의 제어 방법.
  16. 제10항 내지 제14항 중 어느 한 항에 있어서,
    사용자 음성 신호를 입력받는 단계;
    사용자별로 고유하게 설정된 표시 속성 정보를 저장하는 단계;를 더 포함하며,
    상기 디스플레이 객체를 생성하는 단계는,
    상기 사용자 음성 신호가 입력되면 상기 사용자 음성 신호에 대응되는 표시 속성을 가지는 디스플레이 객체를 생성하는 것을 특징으로 하는 디스플레이 장치의 제어 방법.
  17. 제10항 내지 제14항 중 어느 한 항에 있어서,
    사용자를 촬상하는 단계;
    사용자별로 고유하게 설정된 표시 속성 정보를 저장하는 단계;를 더 포함하며,
    상기 디스플레이 객체를 생성하는 단계는,
    상기 촬상된 사용자에 대응되는 표시 속성을 가지는 디스플레이 객체를 생성하는 것을 특징으로 하는 디스플레이 장치의 제어 방법.
  18. 제10항 내지 제14항 중 어느 한 항에 있어서,
    상기 표시 속성은,
    상기 디스플레이 객체의 모양, 색상, 크기, 테두리 이미지, 타이틀 레이블 또는 배경 이미지 중 적어도 하나인 것을 특징으로 하는 디스플레이 장치의 제어 방법.
KR1020120101165A 2012-09-12 2012-09-12 멀티 유저를 위한 디스플레이 장치 및 그 제어 방법 KR20140034612A (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020120101165A KR20140034612A (ko) 2012-09-12 2012-09-12 멀티 유저를 위한 디스플레이 장치 및 그 제어 방법
US13/798,653 US20140075330A1 (en) 2012-09-12 2013-03-13 Display apparatus for multiuser and method thereof
EP13161659.1A EP2708984A3 (en) 2012-09-12 2013-03-28 Display Apparatus for Multiuser and Method Thereof
CN201310294303.4A CN103677248A (zh) 2012-09-12 2013-07-12 用于多用户的显示装置及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120101165A KR20140034612A (ko) 2012-09-12 2012-09-12 멀티 유저를 위한 디스플레이 장치 및 그 제어 방법

Publications (1)

Publication Number Publication Date
KR20140034612A true KR20140034612A (ko) 2014-03-20

Family

ID=48044646

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120101165A KR20140034612A (ko) 2012-09-12 2012-09-12 멀티 유저를 위한 디스플레이 장치 및 그 제어 방법

Country Status (4)

Country Link
US (1) US20140075330A1 (ko)
EP (1) EP2708984A3 (ko)
KR (1) KR20140034612A (ko)
CN (1) CN103677248A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10048791B2 (en) 2016-04-19 2018-08-14 Humax Co., Ltd. Image processing device and method for displaying a force input of a remote controller with three dimensional image in the same
WO2023054991A1 (ko) * 2021-09-28 2023-04-06 삼성전자 주식회사 적어도 하나의 입력 장치를 제어하는 전자 장치 및 그 제어 방법

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160164976A1 (en) * 2012-09-24 2016-06-09 Suitable Technologies, Inc. Systems and methods for remote presence
KR102135092B1 (ko) * 2013-06-03 2020-07-17 엘지전자 주식회사 영상표시장치의 동작 방법
US9846526B2 (en) * 2013-06-28 2017-12-19 Verizon and Redbox Digital Entertainment Services, LLC Multi-user collaboration tracking methods and systems
US20150081679A1 (en) * 2013-09-13 2015-03-19 Avishek Gyanchand Focused search tool
US9720567B2 (en) * 2014-02-17 2017-08-01 Microsoft Technology Licensing, Llc Multitasking and full screen menu contexts
WO2015168580A1 (en) * 2014-05-01 2015-11-05 Google Inc. Computerized systems and methods for providing information related to displayed content
USD751115S1 (en) * 2014-07-29 2016-03-08 Krush Technologies, Llc Display screen or portion thereof with icon
USD754195S1 (en) * 2014-07-29 2016-04-19 Krush Technologies, Llc Display screen or portion thereof with icon
USD755838S1 (en) * 2014-07-30 2016-05-10 Krush Technologies, Llc Display screen or portion thereof with icon
JP6245117B2 (ja) 2014-09-02 2017-12-13 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
JP2016110590A (ja) * 2014-12-10 2016-06-20 コニカミノルタ株式会社 画像処理装置、データ登録方法およびデータ登録プログラム
DE112016001140T5 (de) * 2015-03-09 2017-11-30 Sensory Technologies LLC Interaktives Mehrbenutzer-Anzeigesystem und Verfahren
US9710142B1 (en) * 2016-02-05 2017-07-18 Ringcentral, Inc. System and method for dynamic user interface gamification in conference calls
US20190251884A1 (en) * 2018-02-14 2019-08-15 Microsoft Technology Licensing, Llc Shared content display with concurrent views
CN108920241B (zh) * 2018-06-29 2021-07-27 创新先进技术有限公司 一种显示状态调整方法、装置及设备
WO2022076487A1 (en) 2020-10-05 2022-04-14 Lucid Software, Inc. Online collaboration platform
CN112965617A (zh) * 2021-01-15 2021-06-15 聚融医疗科技(杭州)有限公司 一种多屏超声诊断设备多鼠标输入控制方法与***
US11789696B2 (en) 2021-03-23 2023-10-17 Microsoft Technology Licensing, Llc Voice assistant-enabled client application with user view context
US11972095B2 (en) * 2021-03-23 2024-04-30 Microsoft Technology Licensing, Llc Voice assistant-enabled client application with user view context and multi-modal input support

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5107443A (en) * 1988-09-07 1992-04-21 Xerox Corporation Private regions within a shared workspace
US5337407A (en) * 1991-12-31 1994-08-09 International Business Machines Corporation Method and system for identifying users in a collaborative computer-based system
US5339388A (en) * 1991-12-31 1994-08-16 International Business Machines Corporation Cursor lock region
JP3549097B2 (ja) * 2000-04-26 2004-08-04 インターナショナル・ビジネス・マシーンズ・コーポレーション 共同作業オブジェクトのオーナ識別方法、コンピュータシステムおよびコンピュータ可読な記録媒体
KR20060034250A (ko) * 2003-06-30 2006-04-21 코닌클리케 필립스 일렉트로닉스 엔.브이. 아이콘들에 의한 보호된 콘텐츠 아이템들의 식별
US20070273658A1 (en) * 2006-05-26 2007-11-29 Nokia Corporation Cursor actuation with fingerprint recognition
US7712041B2 (en) * 2006-06-20 2010-05-04 Microsoft Corporation Multi-user multi-input desktop workspaces and applications
US8325214B2 (en) * 2007-09-24 2012-12-04 Qualcomm Incorporated Enhanced interface for voice and video communications
US8217854B2 (en) * 2007-10-01 2012-07-10 International Business Machines Corporation Method and system for managing a multi-focus remote control session
US7941399B2 (en) * 2007-11-09 2011-05-10 Microsoft Corporation Collaborative authoring
JP5248225B2 (ja) * 2008-07-11 2013-07-31 富士フイルム株式会社 コンテンツ表示装置、コンテンツ表示方法およびプログラム
US8427424B2 (en) * 2008-09-30 2013-04-23 Microsoft Corporation Using physical objects in conjunction with an interactive surface
JP5369702B2 (ja) * 2009-01-23 2013-12-18 セイコーエプソン株式会社 共有情報表示装置、共有情報表示方法およびコンピュータプログラム
JP2010181978A (ja) * 2009-02-03 2010-08-19 Seiko Epson Corp 共同作業装置及び共同作業の制御方法
US8929887B2 (en) * 2009-08-20 2015-01-06 T-Mobile Usa, Inc. Shared book reading
KR101164813B1 (ko) * 2009-11-13 2012-07-12 삼성전자주식회사 디스플레이장치, 단말기 및 영상표시방법
KR20110053110A (ko) * 2009-11-13 2011-05-19 삼성전자주식회사 디스플레이장치, 클라이언트, 이를 포함하는 영상표시시스템 및 영상표시방법
US8924864B2 (en) * 2009-11-23 2014-12-30 Foresight Imaging LLC System and method for collaboratively communicating on images and saving those communications and images in a standard known format
US8522308B2 (en) * 2010-02-11 2013-08-27 Verizon Patent And Licensing Inc. Systems and methods for providing a spatial-input-based multi-user shared display experience
JP5621421B2 (ja) * 2010-09-06 2014-11-12 ソニー株式会社 画像処理装置、プログラム及び画像処理方法
JP2013041350A (ja) * 2011-08-12 2013-02-28 Panasonic Corp タッチテーブルシステム
US20140157128A1 (en) * 2012-11-30 2014-06-05 Emo2 Inc. Systems and methods for processing simultaneously received user inputs
US9846526B2 (en) * 2013-06-28 2017-12-19 Verizon and Redbox Digital Entertainment Services, LLC Multi-user collaboration tracking methods and systems

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10048791B2 (en) 2016-04-19 2018-08-14 Humax Co., Ltd. Image processing device and method for displaying a force input of a remote controller with three dimensional image in the same
WO2023054991A1 (ko) * 2021-09-28 2023-04-06 삼성전자 주식회사 적어도 하나의 입력 장치를 제어하는 전자 장치 및 그 제어 방법

Also Published As

Publication number Publication date
EP2708984A2 (en) 2014-03-19
US20140075330A1 (en) 2014-03-13
CN103677248A (zh) 2014-03-26
EP2708984A3 (en) 2016-08-10

Similar Documents

Publication Publication Date Title
KR20140034612A (ko) 멀티 유저를 위한 디스플레이 장치 및 그 제어 방법
KR102230708B1 (ko) 사용자 인터렉션을 제공하는 사용자 단말 장치 및 그 방법
US11281360B2 (en) Display management for native user experiences
CN107111496B (zh) 可定制刀片应用
US20130132878A1 (en) Touch enabled device drop zone
TWI515646B (zh) 擴展螢幕模式下之應用程式運作方法以及使用該方法的平板電腦
US9804767B2 (en) Light dismiss manager
US20140245205A1 (en) Keyboard navigation of user interface
US20160343350A1 (en) Gesture for task transfer
KR102205283B1 (ko) 적어도 하나의 어플리케이션을 실행하는 전자 장치 및 그 제어 방법
US20170109020A1 (en) Interactive presentation system
JP2014211858A (ja) ジェスチャに基づくユーザ・インターフェイスを提供するシステム、方法及びプログラム
US20140145969A1 (en) System and method for graphic object management in a large-display area computing device
US10908764B2 (en) Inter-context coordination to facilitate synchronized presentation of image content
US10120659B2 (en) Adaptive user interfaces
KR20200076588A (ko) 헤드 마운트 장치 입력을 위한 시스템 및 방법
US20140215388A1 (en) Resizable and lockable user interfaces
KR102551568B1 (ko) 전자 장치 및 그 제어 방법
US10102404B2 (en) Security of screen in electronic device
CN113168286A (zh) 终端、用于该终端的控制方法以及记录用于实现该方法的程序的记录介质
CN107924276B (zh) 电子设备及其文本输入方法
KR20200033640A (ko) 단말기, 이의 제어 방법 및 상기 방법을 구현하기 위한 프로그램을 기록한 기록 매체
EP3635527B1 (en) Magnified input panels
KR20130141259A (ko) 화면 분할에 의한 실행영상 처리 방법 및 그 방법을 실행하는 프로그램이 기록된 기록매체
WO2023210352A1 (ja) 情報処理装置、情報処理方法、及びプログラム

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid