CN107026752A - 显示装置及其控制方法 - Google Patents

显示装置及其控制方法 Download PDF

Info

Publication number
CN107026752A
CN107026752A CN201710057322.3A CN201710057322A CN107026752A CN 107026752 A CN107026752 A CN 107026752A CN 201710057322 A CN201710057322 A CN 201710057322A CN 107026752 A CN107026752 A CN 107026752A
Authority
CN
China
Prior art keywords
electronic equipment
icon
user
image
item controlled
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710057322.3A
Other languages
English (en)
Inventor
权五絪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN107026752A publication Critical patent/CN107026752A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46Interconnection of networks
    • H04L12/4604LAN interconnection over a backbone network, e.g. Internet, Frame Relay
    • H04L12/462LAN interconnection over a bridge based backbone
    • H04L12/4625Single bridge functionality, e.g. connection of two networks over a single bridge
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/22Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks comprising specially adapted graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4131Peripherals receiving signals from specially adapted client devices home appliance, e.g. lighting, air conditioning system, metering devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227Providing Remote input by a user located remotely from the client device, e.g. at work
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508Management of client data or end-user data
    • H04N21/4516Management of client data or end-user data involving client characteristics, e.g. Set-Top-Box type, software version or amount of memory available
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Environmental & Geological Engineering (AREA)
  • Environmental Sciences (AREA)
  • Remote Sensing (AREA)
  • Databases & Information Systems (AREA)
  • Ecology (AREA)
  • Emergency Management (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Automation & Control Theory (AREA)
  • User Interface Of Digital Computer (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)

Abstract

提供一种显示装置及其控制方法。显示装置包括:显示器、通信器、用户输入接收器和处理器,其中,通信器配置成经由网络与生成用户设备的功能中所使用的信息的多个电子设备通信;用户输入接收器配置成接收用户输入;处理器配置成:在显示器上显示包括分别与多个电子设备对应的多个图标的图形用户接口(GUI)以及基于多个图标中的至少一个图标上的用户输入来控制多个电子设备中的对应至少一个电子设备的操作。显示装置提供用于控制多个电子设备的GUI,由此使得用户能够以直观方便的方式来控制电子设备。

Description

显示装置及其控制方法
技术领域
根据示例性实施方式的设备和方法涉及显示装置及其控制方法,更具体地,涉及在物联网(IoT)环境下使用用户接口来控制电子设备的显示装置及其控制方法。
背景技术
在IoT环境中,为了设置或测试从简单传感器和控制器到智能设备、汽车、机器人等的具有复杂多样功能的诸多设备,用户必须检查相应设备的状态并且直接或间接地由设备来操控相应设备。另外,这种做法是低效的,因为相应设备仅可以由随其一起提供的独特应用和接口来控制。
允许用户在IoT环境中直观方便地对相应设备的操作进行设置、测试、编程、维护和修复的用户体验也不足够。
因此,需要提供对什么服务或功能对于用户是必要的、什么操控对于用户最有用等的用户体验,以控制诸多设备。
发明内容
示例性实施方式至少解决以上问题和/或缺点以及上文未描述的其它缺点。另外,不要求示例性实施方式克服上述缺点,而是示例性实施方式可以不克服上述任意问题。
示例性实施方式可提供使用用户接口来控制电子设备的显示装置及其控制方法。
另外,示例性实施方式可提供以直观方便的方式对电子设备的操作进行设置、测试、编程、维护和修复的显示装置及其控制方法。
根据示例性实施方式的方面,提供一种显示装置,该显示装置包括显示器、通信器、用户输入接收器以及处理器,其中,通信器配置成经由网络与生成用户设备的功能中所使用的信息的多个电子设备通信;用户输入接收器配置成接收用户输入;处理器配置成在显示器上显示包括分别与多个电子设备对应的多个图标的图形用户接口(GUI);以及基于多个图标中的至少一个图标上的用户输入来控制多个电子设备中的对应至少一个电子设备的操作。
根据示例性实施方式,显示装置可提供用于控制多个电子设备的GUI,由此使得用户能够以直观方便的方式来控制电子设备。
处理器可配置成:作为至少一个电子设备经由通信器被配对的响应,来显示与至少一个电子设备对应的至少一个图标。因此,显示装置(诸如,电视)可在GUI上显示与其配对的至少一个电子设备,由此使得用户能够直接控制至少一个电子设备。
处理器可配置成:经由通信器从多个电子设备中的至少一个电子设备接收设备信息;以及基于所接收的设备信息来显示与至少一个图标对应的图像。出于该原因,显示装置可显示与其配对的至少一个电子设备的图像,从而使得用户能够直观地识别被配对的至少一个电子设备。
处理器可配置成:显示能够设置至少一个电子设备的至少一个操作的控制项目;以及根据控制项目上的用户输入来设置至少一个电子设备的至少一个操作。凭借此,显示装置可显示能够设置与其配对的至少一个电子设备的项目,由此使得用户能够设置或测试被配对的至少一个电子设备的至少一个操作。
可基于经由通信器从至少一个电子设备接收的设备信息来显示控制项目。根据此,显示装置可基于从至少一个电子设备接收的元信息将控制项目提供到至少一个电子设备。
处理器可配置成:基于与多个电子设备中的第一电子设备对应的第一控制项目和与多个电子设备中的第二电子设备对应的第二控制项目上的用户输入,在操作中连接第一电子设备和第二电子设备。因此,显示装置可通过选择显示在GUI上的多个电子设备的控制项目在操作中连接电子设备。
处理器可配置成:经由通信器从期间至少一个操作被设置的至少一个电子设备接收状态信息;以及基于所接收的状态信息来显示与设定的结果状态有关的信息。凭借此,显示装置可向用户提供与经由GUI设置的至少一个电子设备的至少一个操作有关的状态和结果。
GUI还可包括指示其中提供有多个电子设备的地点的图像,并且分别与多个电子设备对应的多个图标可在图像上放置于分别提供有多个电子设备的位置处。因此,显示装置可在GUI上显示指示地点的图像映射,并且可在图像映射上指示多个电子设备的位置,由此帮助用户理解多个电子设备的位置并使得用户能够在操作中直观地连接多个电子设备。
可根据用户输入来生成或更改图像的至少一部分。因此,当直接绘制或更改指示地点的图像映射时,用户可在图像映射上显示用户想要的被配对的至少一个电子设备。
根据另一个示例性实施方式的方面,提供一种显示装置的控制方法,其包括:经由网络与生成用户设备的功能中所使用的信息的多个电子设备通信;显示包括分别与多个电子设备对应的多个图标的GUI;以及基于多个图标中的至少一个图标上的用户输入,控制多个电子设备中的对应至少一个电子设备的操作。
根据示例性实施方式,显示装置可提供用于控制多个电子设备的GUI,由此使得用户能够以直观方便的方式来控制电子设备。
该方法还可包括:响应于至少一个电子设备经由通信器被配对来显示与至少一个电子设备对应的至少一个图标。因此,显示装置(诸如,电视)可在GUI上显示与其配对的至少一个电子设备,由此使得用户能够直接控制至少一个电子设备。
该方法还可包括:经由通信器从多个电子设备中的至少一个电子设备接收设备信息;以及基于所接收的设备信息来显示与至少一个图标对应的图像。由于这个原因,显示装置可显示与其配对的至少一个电子设备的图像,由此使得用户能够直观地识别被配对的至少一个电子设备。
该方法还可包括:显示能够设置至少一个电子设备的至少一个操作的控制项目;以及根据控制项目上的用户输入来设置至少一个电子设备的至少一个操作。凭借此,显示装置可显示能够设置与其配对的至少一个电子设备的项目,由此使得用户能够设置或测试被配对的至少一个电子设备的至少一个操作。
可基于经由通信器从至少一个电子设备接收的设备信息来显示控制项目。根据此,显示装置可基于从至少一个电子设备接收的元信息将控制项目提供到至少一个电子设备。
该方法还可包括:基于与多个电子设备中的第一电子设备对应的第一控制项目和与多个电子设备中的第二电子设备对应的第二控制项目上的用户输入,在操作中连接第一电子设备和第二电子设备。因此,显示装置可通过选择显示在GUI上的多个电子设备的控制项目在操作中连接电子设备。
该方法还可包括:经由通信器从期间至少一个操作被设置的至少一个电子设备接收状态信息;以及基于所接收的状态信息来显示与所述设定的结果状态有关的信息。凭借此,显示装置可向用户提供与经由GUI设置的至少一个电子设备的至少一个操作有关的状态和结果。
GUI还可包括指示其中提供有多个电子设备的地点的图像,并且分别与多个电子设备对应的多个图标可在图像上放置于其中分别提供有多个电子设备的位置处。因此,显示装置可在GUI上显示指示地点的图像映射,并且可在图像映射上指示多个电子设备的位置,由此帮助用户理解多个电子设备的位置并使得用户能够在操作中直观地连接多个电子设备。
可根据用户输入来生成或更改图像的至少一部分。因此,当直接绘制或更改指示地点的图像映射时,用户可在图像映射上显示用户想要的被配对的至少一个电子设备。
如上文所描述,根据示例性实施方式,显示装置可提供用于控制多个电子设备的GUI,由此使得用户能够以直观方便的方式来控制电子设备。
另外,根据示例性实施方式,显示装置可使得用户能够以直观方便的方式来对电子设备的操作进行设置、测试、编程、维护和修复。
附图说明
通过结合附图的以下说明,本公开的某些实施方式的以上和其它方面、特征及有益效果将更加显而易见,在附图中:
图1是示出根据示例性实施方式的显示装置的构造的框图;
图2示出根据示例性实施方式在图形用户接口(GUI)上显示被配对的电子设备的图标的示例;
图3示出根据示例性实施方式设置与电子设备的事件对应的操作的示例;
图4示出根据示例性实施方式执行用于在操作中连接电子设备的设定的示例;
图5示出根据示例性实施方式执行用于在操作中连接电子设备的设定的示例;
图6示出根据示例性实施方式执行用于在操作中连接电子设备的设定的示例;
图7示出根据示例性实施方式执行用于在操作中连接电子设备和用户终端的设定的示例;
图8示出根据示例性实施方式显示用于响应于电子设备的事件来设置电子设备的操作的控制项目的示例;
图9示出根据示例性实施方式显示用于响应于电子设备的事件来设置电子设备的操作的控制项目的示例;
图10示出根据示例性实施方式响应于电子设备的事件将通知传输到用户终端的示例;
图11是示出根据示例性实施方式的显示装置的控制方法的流程图;
图12是示出根据示例性实施方式的显示装置的控制方法的流程图;以及
图13是示出根据示例性实施方式的显示装置的控制方法的流程图。
在全部附图中,相同的参考标号应理解为表示相同的部件、组件和结构。
具体实施方式
参考附图,将详细描述示例性实施方式以使本领域技术人员没有困难地实践本公开。示例性实施方式可以各种形式来实现,而不限于本文中所提供的实施方式。为了清楚地描述示例性实施方式,已省略与描述无关的内容;而且在本说明书通篇中,相同的参考标记指示相同的元件。
在下文中,将通过图1来详细描述根据示例性实施方式的显示装置。图1是示出根据示例性实施方式的显示装置的构造的框图。如图1中所示,根据示例性实施方式的显示装置10包括信号接收器11、信号处理器12、显示器13、用户输入接收器14、主处理器15、通信器16和存储器17。根据示例性实施方式的显示装置10可实施为例如智能电视(TV)、智能电话、平板个人计算机、计算机、上网本等。
显示装置10可使用通信协议(诸如,无线保真(Wi-Fi)、蓝牙(BT)、紫蜂(Zigbee)等)与第一电子设备181、第二电子设备182、……、和第N电子设备183连接。第一至第N电子设备181至183可实施为例如传感器,诸如门传感器、温度传感器、动作传感器等。作为另一示例,第一至第N电子设备181至183可实施为电子产品,诸如智能电视、智能电话、空调、洗衣机、机器人吸尘器、灯开关、温度控制件等。第一至第N电子设备181至183的类型并不限于此,而是可由能够在物联网(IoT)环境中使用的各种各样的电子设备来实施。包括在显示装置10中的部件也并不限于上文所描述的示例性实施方式,而是可实施为包括其它额外部件。
显示装置10经由网络与生成用户设备的功能中所使用的信息的多个电子设备181至183通信。显示装置10显示图形用户接口(GUI),所述GUI包括分别与多个电子设备181至183对应的多个图标。基于多个图标中的至少一个图标上的用户输入,显示装置10控制在多个电子设备181至183中的对应至少一个电子设备的操作。
根据示例性实施方式,显示装置提供用于控制多个电子设备的GUI。因此,用户可以直观方便的方式来控制电子设备。另外,用户可以直观方便的方式来对电子设备的操作进行设置、测试、编程、维护和修复。
信号接收器11接收广播信号或图像信号。可根据所接收的广播信号或图像信号的标准和显示装置10的实施类型以各种形式来提供信号接收器11。例如,信号接收器11可实施为调谐器,所述调谐器接收从广播站传输的射频(RF)广播信号或卫星信号。作为另一示例,信号接收器11可从外部设备(诸如,数字通用光盘(DVD)播放器、通用串行总线(USB)设备等)接收图像信号,所述外部设备与显示装置10连接。此时,信号接收器11也并不限于上文所描述的示例性实施方式,而是可以各种形式来接收广播信号或图像信号。
信号处理器12对从信号接收器11所接收的广播信号或图像信号执行预定信号处理。由信号处理器12执行的信号处理的示例是解码、去交错、缩放、噪声衰减、细节增强等,且其类型并不限于此。可由片上***(SOC)(其中整合有如上文所描述的各种功能)或图像处理板(上面安装有能够独立地执行每个过程的个别部件)来实施信号处理器12。
显示器13基于由信号处理器12处理的广播信号或图像信号来显示图像。显示器13的实施类型不受限制,并且可以各种形式来实施显示器13,诸如等离子体显示面板(PDP)、液晶显示器(LCD)、有机发光二极管(OLED)、柔性显示器等。
用户输入接收器14接收用于控制显示装置10的至少一个功能的用户输入。作为示例,用户输入接收器14可实施为与显示装置10连接的键盘、鼠标等,并且也呈设置于显示装置10外部上的输入面板的形式。作为另一示例,用户输入接收器14可包括设置于显示装置10上的触摸屏。触摸屏可配置成检测触摸位置、触摸区域和触摸输入。另外,除了真实触摸之外,触摸屏可配置成还检测接近触摸。此处,真实触摸意指用户的身体(例如,手指)或设置为触摸工具的触摸笔(例如,指向设备、手写笔、触觉、电子笔等)实际碰到屏幕上的情况。另外,接近触摸意指用户的身体或触摸笔实际上没有碰到屏幕而是接近离屏幕的预设距离的情况(例如,可检测距离小于30mm的情况)。
通信器16与外部设备通信。通信器16经由网络与多个电子设备通信,所述电子设备生成用户设备的功能中所使用的信息。用户设备可实施为例如智能电话、智能电视、智能手表、平板PC等,且多个电子设备可在IoT环境中经由网络将关于电子设备的操作的信息提供到用户设备。
通信器16可使用通信协议(诸如,Wi-Fi、蓝牙、Zigbee、6LoWPAN等)与第一至第N电子设备181至183连接。如果经由蓝牙与第一至第N电子设备181至183通信,则通信器16与第一至第N电子设备181至183中的至少一者配对以与其连接。例如,通信器16可从第一至第N电子设备181至183中的至少一者接收配对请求,并识别所接收的请求以准许与其连接。此时,为了准许与第一至第N电子设备181至183中的至少一者连接,通信器16可经由用户输入接收器14从用户接收输入(诸如,密码等)。
作为另一示例,通信器16可检索第一至第N电子设备181至183中的至少一个可连接设备,并经由Wi-Fi与至少一个可连接设备连接。
主处理器15基于存储在至少一个存储器中并设定为用于GUI的图像以及分别与多个电子设备对应的多个图标来生成图形用户接口(GUI)屏幕。主处理器15在显示器上显示所生成的GUI屏幕。响应于用于在多个图标中选择图标的用户输入,主处理器15显示用于控制与所选图标对应的电子设备的操作的控制项目。响应于用于选择控制项目的用户输入,经由通信器将与控制项目相关联的信号传输到对应于控制项目的电子设备以控制电子设备的操作。
主处理器15在显示器13上显示包括分别与多个电子设备(即,第一至第N电子设备181至183)对应的多个图标的GUI。此处,GUI可包括指示提供有多个电子设备的地点的图像。例如。显示在显示器13上的图像可实施为呈其中组合并生成有预存储的组件图像(诸如,房间、门、窗户、阳台、入口等)的房子形式的图像映射。另外,可根据用户输入来创建或更改图像的至少一部分。作为示例,使用触摸输入或鼠标操控,用户可更改或删除呈房子形式的图像映射中的组件图像的至少一部分和/或其位置,并将新的组件图像添加到图像映射中。作为另一示例,呈房子形式的图像映射不是通过组合预存储的组件图像来生成的,而是可以以使得用户使用图像生成程序或应用直接绘制图像映射的方式来创建。
在示例性实施方式中,主处理器15可响应于第一至第N电子设备181至183中的至少一个电子设备经由通信器16被配对来显示与所述至少一个电子设备对应的至少一个图标。例如,用户可执行将配对请求输入到第一至第N电子设备181至183中的至少一个电子设备中的操作,诸如按压配对按钮。此时,显示装置10可识别配对请求信号并让用户确定她或他是否准许与配对请求被输入到其中的至少一个电子设备连接。作为示例,为了与配对请求被输入到其中的至少一个电子设备连接,显示装置10可执行用户认证,诸如从用户接收密码等。
凭借此,如果与第一至第N电子设备181至183中的至少一者配对,则显示装置10可生成并显示与被配对的至少一个电子设备对应的至少一个图标。
可在呈房子形式的图像映射上显示对应于第一至第N电子设备181至183的图标。使用用户操控,可更改图标的位置并将图标放置在更改的位置处。
在示例性实施方式中,主处理器15可经由通信器16从多个电子设备181至183中的至少一个电子设备接收设备信息,并基于所接收的设备信息来显示至少一个图标。例如,如果显示装置10与第一至第N电子设备181至183中的至少一者配对,则主处理器15可向和从被配对的至少一个电子设备请求和接收所述至少一个电子设备的元信息,并且基于元信息从服务器(未示出)下载对应于被配对的至少一个电子设备的图像以显示至少一个图标。凭借此,显示装置10可显示被配对的至少一个电子设备的图像,以允许用户视觉上识别被配对的至少一个电子设备。
在示例性实施方式中,主处理器15可从存储于存储器中的多个图像中选择所述图像以生成用于物联网(IOT)模式的GUI屏幕。主处理器15可通过将所选图像与多个图标合并来生成用于IOT模式的GUI屏幕。
在示例性实施方式中,主处理器15可基于电子设备的识别信息通过互联网搜索来获取图标的图像。
在示例性实施方式中,主处理器15可通过用户命令在用于IOT模式的GUI屏幕中移动多个图标中的至少一个图标,并且可响应于在移动至少一个图标之后的存储命令,存储用于IOT模式的GUI屏幕。
在示例性实施方式中,主处理器15可显示能够设置第一至第N电子设备181至183中的至少一者的操作的控制项目,并且根据控制项目上的用户输入来设置至少一个电子设备的操作。此时,可基于经由通信器16从对应电子设备所接收的信息来显示控制项目。例如,如果显示装置10与第一至第N电子设备181至183中的至少一者配对,则主处理器15可从至少一个电子设备接收元信息,所述元信息包括至少一个电子设备所支持的操作应用编程接口(API)的列表。凭借此,显示装置10可经由菜单、基于元信息显示可由至少一个电子设备执行的操作,并且用户可在所显示的操作中选择一者以设置至少一个电子设备的操作。作为示例,通过设置感测事件API,显示装置10可接收并显示关于其它设备是否接近的信息,所述感测事件API通知用户其它设备是否接近近距离传感器。
在示例性实施方式中,主处理器15可基于与第一电子设备181对应的第一控制项目和与第二电子设备182对应的第二控制项目上的用户输入在操作中连接多个电子设备181至183中的第一电子设备181和第二电子设备182。例如,如果显示装置10与第一电子设备181和第二电子设备182配对,则主处理器15可从第一电子设备181和第二电子设备182中的每一者接收元信息,所述元信息包括可支持的操作API的列表。此时,显示装置10可基于分别从第一电子设备181和第二电子设备182所接收的元数据来将由第一电子设备181和第二电子设备182支持的操作显示为第一控制项目和第二控制项目。用户可通过以下步骤来连接第一电子设备181的第一操作和第二电子设备182的第二操作:在所显示的第一控制项目中的操作中选择由第一电子设备181支持的第一操作,以及在所显示的第二控制项目中的操作中选择由第二电子设备182支持的第二操作。
在示例性实施方式中,主处理器15可经由通信器16从第一至第N电子设备181至183中期间操作被控制的电子设备接收状态信息,并且基于所接收的状态信息来显示与所述操作的结果状态有关的信息。例如,如果用户通过至少一个电子设备的控制项目来设置操作,则主处理器15可接收关于至少一个电子设备是否执行设置操作的状态或结果的信息,并在显示器13上显示所接收的信息。
在示例性实施方式中,主处理器15可包括控制程序、非易失性存储器、易失性存储器以及至少一个微处理器,其中,控制程序用于进行控制以执行如上文所描述的控制操作;非易失性存储器中安装有控制程序;易失性存储器中加载有至少一个控制程序;至少一个微处理器用于执行所加载的控制程序。控制程序可包括以BIOS、设备驱动器、操作***、固件、平台和应用程序(应用)中的至少一者的形式来实施的程序(或多个程序)。根据示例性实施方式,可在制造过程中事先将应用程序安装或存储在显示装置10中,或在使用过程中基于从外部设备接收的数据将应用程序安装在显示装置10中。作为可由计算机执行的记录介质的外部装置可以是其中存储有应用程序的数据的记录介质。根据另一个示例性实施方式,外部装置可以是网络服务器,并且应用程序的数据可从网络服务器(例如,应用市场等)下载。在这种情况下,网络服务器可将存储在记录介质中的应用程序的数据提供到显示装置10。
存储器17可存储与至少一个电子设备的连接信息,所述至少一个电子设备先前与显示装置10连接。连接信息可包括用于在显示装置10例如经由蓝牙与至少一个电子设备通信时与多个电子设备181至183中的至少一个电子设备配对的信息。根据示例性实施方式,存储器17可存储从多个电子设备181至183中的至少一个电子设备接收的设备信息。此时,存储器17还可基于设备信息来存储从服务器接收的至少一个电子设备的图像。根据另一个示例性实施方式,存储器17可存储与基于从多个电子设备181至183中的至少一个电子设备接收的设备信息来显示的控制项目有关的信息。
图2示出根据示例性实施方式在GUI上显示被配对的电子设备的图标的示例。如图2中所示,电视20可在屏幕上显示指示房子的内部结构的图像映射21,并且在所显示的图像映射21上将与电视20配对的多个电子设备显示为图标22至27。作为示例,如果与多个电子设备中的至少一者配对,则电视20可在屏幕上显示对应于被配对的至少一个电子设备的图标22至27。作为另一示例,电视20可显示对应于先前已与电视20配对的至少一个电子设备的所有图标22至27,并且指示关于在所显示的图标22至27中当前与电视20配对的门传感器的图标26的配对状态,其中所述配对状态具有预设色彩等。
在示例性实施方式中,电视20可针对当前被配对的门传感器的图标26显示所述门传感器的图片图像28和当前状态信息29。换句话说,为了允许用户找出被配对的门传感器的类型,电视20可显示门传感器的从门传感器制造商的服务器或网络服务器提供的图片图像28。另外,为允许用户找出被配对的门传感器的当前操作状态,电视20可从门传感器接收与门是打开还是关闭有关的状态信息29,并在屏幕上显示状态信息29。
图3示出根据示例性实施方式设置与电子设备的事件对应的操作的示例。如图3中所示,电视30可在屏幕上显示指示房子的内部结构的图像映射31,并且在所显示的图像映射31上将先前已与电视30配对的多个电子设备显示为图标32至36。作为示例,电视30可指示关于所显示的图标32至36中当前与电视30配对的门传感器的图标35的配对状态,其中所述配对状态具有预设色彩等。另外,可通过用户输入将显示在图像映射31上的图标32至36分别放置在用户想要的位置处。换句话说,用户可考虑到对应电子设备的真实位置来放置图标32至36,从而允许用户方便地设置多个电子设备的操作。作为另一示例,用户可删除显示在图像映射31上的图标32和36的一部分,或将对应于新电子设备的图标添加到图像映射31中以在图像映射31上进行显示。
在示例性实施方式中,为使得用户能够视觉上识别被配对的门传感器,电视30可显示指示门传感器的类型的图片或图形图像37连同门传感器的图标35。此时,可基于从被配对的门传感器接收的设备信息来显示图片或图形图像37。作为另一示例,可基于从被配对的门传感器接收的设备信息从其中存储有图片或图形图像37的服务器下载图片或图形图像37,并在电视上显示图片或图形图像37。
在示例性实施方式中,电视30可显示与关于被配对的门传感器所发生的事件对应的活动控制项目。作为示例,如果在门传感器处生成事件(诸如,“门打开”),则电视30可设置成将消息传输到用户终端或通知用户终端该事件。此外,如果在门传感器处生成事件(诸如,“门打开”),则电视30可设置成接通房子的电源开关。另外,如果在门传感器处生成事件(诸如,“门关闭”),则电视30可设置成切断房子的电源开关和热水器。
如上文所描述,根据示例性实施方式,电视可在GUI上显示被配对的电子设备的图标,并且当在被配对的电子设备处生成事件时可加以设置以执行特定操作或控制其它电子设备。
图4示出根据示例性实施方式执行用于在操作中连接电子设备的设定的示例。如图4中所示,电视40可在屏幕上显示指示房子的内部结构的图像映射41,并且在所显示的图像映射41上将先前已与电视40配对的多个电子设备显示为图标。此时,电视40可指示关于在显示于图像映射41上的多个图标中当前与电视40配对的门传感器和客厅灯开关的图标42和45的配对状态,其中所述配对状态具有预设色彩等。
在示例性实施方式中,电视40可分别针对门传感器的图标42和客厅灯开关的图标45来显示指示门传感器和客厅灯开关的类型的图片或图形图像43和46。此时,可基于从与电视40配对的门传感器和客厅灯开关接收的设备信息来显示图片或图形图像43和46。作为另一示例,可基于从门传感器和客厅灯开关接收的设备信息从其中存储有图片或图形图像43和46的服务器来下载图片或图形图像43和46。
在示例性实施方式中,电视40可分别针对与电视40配对的门传感器和客厅灯开关的图标42和45来显示能够设置门传感器的操作的第一控制项目44和能够设置客厅灯开关的操作的第二控制项目47。作为示例,门传感器的第一控制项目44可包括“打开”项目和“关闭”项目,且客厅灯开关的第二控制项目47可包括“接通”项目和“切断”项目。
在示例性实施方式中,电视40可基于显示在图像映射41上的门传感器的第一控制项目44和客厅灯开关的第二控制项目47上的用户输入在操作中连接门传感器和客厅灯开关。例如,如果用户选择其项目中的第一控制项目44的“打开”项目和第二控制项目47的“接通”项目,则电视40可设置成使得当在门传感器处检测到门打开时接通客厅灯开关。作为另一示例,如果用户通过拖放方法来连接第一控制项目44的“打开”项目和第二控制项目47的“接通”项目,则电视可设置成使得当在门传感器处检测到门打开时接通客厅灯开关。
如上文所描述,根据示例性实施方式,电视可在GUI上显示多个被配对的电子设备的图标,并且可加以设置以通过多个被配对的电子设备的图标上的用户输入在操作中连接用户想要控制的电子设备。
图5示出根据示例性实施方式执行用于在操作中连接电子设备的设定的示例。如图5中所示,电视50可在屏幕上显示指示房子的内部结构的图像映射51,并且在所显示的图像映射51上将先前已与电视50配对的多个电子设备显示为图标。此时,电视50可指示关于在显示于图像映射51上的多个图标中当前彼此配对的无线电话与电视50自身的图标53和56的配对状态,其中所述配对状态具有预设色彩等。
在示例性实施方式中,电视50可分别关于无线电话的图标53和电视50的图标56来显示指示无线电话和电视50的类型的图片或图形图像52和55。此时,可基于从与电视50配对的无线电话接收的设备信息和存储在电视50中的设备信息来显示图片或图形图像52和55。作为另一示例,可基于从无线电话接收的设备信息和存储在电视50中的设备信息从其中存储有图片或图形图像52和55的服务器下载图片或图形图像52和55。
在示例性实施方式中,电视50可分别针对彼此配对的无线电话与电视50的图标53和56显示能够设置无线电话的操作的第一控制项目54和能够设置电视50的操作的第二控制项目57。作为示例,无线电话的第一控制项目54可包括“铃声”项目和“静音”项目,电视50的第二控制项目57可包括“接通”项目和“切断”项目。
在示例性实施方式中,电视50可基于显示在图像映射电视51上的无线电话的第一控制项目54和电视50的第二控制项目57上的用户输入在操作中连接无线电话和电视50。作为示例,如果用户选择其项目中的第一控制项目54的“铃声”项目和第二控制项目57的“切断”项目,则电视50可设定成使得当在无线电话处有铃声时电视50切断或操作成暂停输出音频。作为另一示例,如果用户通过拖放方法连接第一控制项目54的“铃声”项目和第二控制项目57的“切断”项目,则电视50可设置成使得当在无线电话处有铃声时电视50切断。
如上文所描述,根据示例性实施方式,电视可在GUI上显示彼此配对的多个电子设备与电视自身的图标,并且可加以设置以通过多个电子设备和电视的图标上的用户输入在操作中连接用户想要控制的电子设备和电视。
图6示出根据示例性实施方式的执行用于在操作中连接电子设备的设定的示例。如图6中所示,电视60可在屏幕上显示指示房子的内部结构的图像映射61,并且在所显示的图像映射61上将先前已与电视60配对的多个电子设备显示为图标。此时,电视60可指示关于在显示于图像映射61上的多个图标中当前与电视60配对的门传感器、第一温度传感器、第二温度传感器、第三温度传感器和第四温度传感器的图标621、631、641、651和661的配对状态,其中所述配对状态具有预设色彩等。另外,电视60可连同其图标621、631、641、651和661一起显示指示门传感器的类型的图片或图形图像622以及指示第一至第四温度传感器的类型的图片或图形图像。
在示例性实施方式中,电视60分别针对门传感器的图标621和第一至第四温度传感器的图标631、641、651和661显示能够设置门传感器的操作的第一控制项目623和能够设置第一至第四温度传感器的操作的第二控制项目632、642、652和662。作为示例,门传感器的第一控制项目623可包括“打开”项目和“关闭”项目,第一至第四温度传感器的第二控制项目632、642、652和662可包括“接通”项目和“切断”项目。
在示例性实施方式中,电视60可基于显示在图像映射电视61上的门传感器的第一控制项目623和第一至第四温度传感器的第二控制项目632、642、652和662上的用户输入在操作中连接门传感器和第一至第四温度传感器。作为示例,如果用户通过拖放方法来连接其项目中第一控制项目623的“打开”项目和第二控制项目632、642、652和662的“接通”项目,则电视60可设置成使得当在门传感器处检测到门打开时操作第一至第四温度传感器。此时,第一至第四温度传感器可分别将对应房间的温度调节到预设温度。
如上文所描述,根据示例性实施方式,电视可在GUI上显示与电视配对的多个电子设备的图标,并且可加以设置以通过多个电子设备的图标上的用户输入在操作中连接一个电子设备与多个其它电子设备。
图7示出根据示例性实施方式执行用于在操作中连接电子设备和用户终端的设定的示例。如图7中所示,电视70可在屏幕上显示指示房子的内部结构的图像映射71,并且在所显示的图像映射71上将先前已与电视70配对的多个电子设备显示为图标。另外,用户可将智能电话(由用户指定)的图标721显示为与显示在图像映射71上的多个电子设备的图标分离。此时,电视70可指示关于在显示于图像映射71上的多个图标中当前与电视70配对的门传感器和智能电话的图标731和721的配对状态,其中所述配对状态具有预设色彩等。另外,电视70可显示指示门传感器和智能电话的类型的图片或图形图像732和722连同其图标731和721。
在示例性实施方式中,电视70可分别针对与电视70配对的门传感器和智能电话的图标731和721来显示能够设置门传感器的操作的第一控制项目733和能够设置智能电话的操作的第二控制项目723。作为示例,门传感器的第一控制项目733可包括“打开”项目和“关闭”项目,且智能电话的第二控制项目723可包括“文本消息接收”项目和“图片接收”项目。
在示例性实施方式中,电视70可基于显示在图像映射电视71上的门传感器的第一控制项目733和智能电话的第二控制项目723上的用户输入在操作中连接门传感器和智能电话。作为示例,如果用户通过拖放方法来连接其项目中第一控制项目733的“打开”项目和第二控制项目723的“图片接收”项目,则电视70可设置成使得当在门传感器处检测到门打开时用户的智能电话接收由在入口门位置处的相机拍摄的图片图像。
如上文所描述,根据示例性实施方式,电视可在GUI上显示与电视配对的电子设备和用户终端(由用户指定)的图标,并且可加以设置以当在电子设备处生成事件时通过电子设备和用户终端的图标上的用户输入来将图片或文本消息传输到用户终端。
图8示出根据示例性实施方式显示用于响应于电子设备的事件来设置电子设备的操作的控制项目的示例。如图8中所示,电视80可在屏幕上显示指示房子的内部结构的图像映射81,并且在所显示的图像映射81上将先前已与电视80配对的多个电子设备显示为图标。此时,电视80可指示关于在显示于图像映射81上的多个图标中当前与电视80配对的门传感器的图标82的配对状态,其中所述配对状态具有预设色彩等。另外,电视80可显示指示门传感器的类型的图片或图形图像83连同其图标82。
在示例性实施方式中,电视80可针对与电视80配对的门传感器的图标82来显示能够设置门传感器的操作的控制项目84。作为示例,门传感器的控制项目84可包括“打开”项目和“关闭”项目。
在示例性实施方式中,电视80可显示能够设置选自控制项目84中的项目的活动的活动控制项目85。作为示例,如果用户在门传感器的控制项目84中选择“打开”项目,则电视80可将活动控制项目85显示为用于设置对应于所选“打开”项目的活动的用户接口。活动控制项目85可包括以下的项目:诸如,“可连接设备查看”项目、“通向用户的智能电话消息传输设定”项目等。换句话说,如果在门传感器处检测到门打开,则电视80可设置成控制由用户选自可连接设备中的设备的操作或将消息传输到用户的所选智能电话。
如上文所描述,根据示例性实施方式,电视可在GUI上显示被配对的电子设备的图标,并且当在被配对的电子设备处生成事件时可通过被配对的电子设备的图标上的用户输入来设置对应于所述事件的活动。
图9示出根据示例性实施方式显示用于响应于电子设备的事件来设置电子设备的操作的控制项目的示例。如图9中所示,电视90可在屏幕上显示指示房子的内部结构的图像映射91,并且在所显示的图像映射91上将先前已与电视90配对的多个电子设备显示为图标。此时,电视90可显示能够设置门传感器的操作并对应于显示于图像映射91上的多个图标中当前与电视90配对的门传感器的图标92的控制项目94。作为示例,门传感器的控制项目94可包括“打开”项目和“关闭”项目。另外,电视90可显示指示门传感器的类型的图片或图形图像93。
在示例性实施方式中,电视90可显示能够设置选自控制项目94中的项目的活动的活动控制项目95。作为示例,如果用户在门传感器的控制项目94中选择“打开”项目,则电视90可将活动控制项目95显示为用于设置对应于所选“打开”项目的活动的用户接口。活动控制项目95可包括例如用于设置相应可连接设备的操作的项目。作为示例,就活动控制项目95来说,如果在门传感器处检测到门打开,则可设置电视90以接通客厅的灯、房间1的温度传感器和空调并切断客厅的电视。
图10示出根据示例性实施方式响应于电子设备的事件将通知传输到用户设备的示例。如图10中所示,电视100可在屏幕上显示指示房子的内部结构的图像映射101,并且在所显示的图像映射101上将先前已与电视100配对的多个电子设备显示为图标。此时,电视100可显示能够设置门传感器的操作并对应于显示在图像映射101上的多个图标中当前与电视100配对的门传感器的图标102的控制项目104。作为示例,门传感器的控制项目104可包括“打开”项目和“关闭”项目。另外,电视100可显示指示门传感器的类型的图片或图形图像103。
在示例性实施方式中,电视100可显示能够设置选自控制项目104中的项目的活动的活动控制项目105。作为示例,如果用户在门传感器的控制项目104中选择“打开”项目,则电视100可将活动控制项目105显示为用于设置对应于所选“打开”项目的活动的用户接口。活动控制项目105可包括例如用于设置通向用户智能电话的消息传输等的项目。作为示例,就活动控制项目105来说,如果在门传感器处检测到门打开,则电视100可设置成将用于通知用户通过门传感器检测到门打开的状态的消息传输到用户的智能电话106。
例如,如果电视100将通过门传感器检测到门打开的状态传输到用户的智能电话106,则智能电话106可显示从电视100的家电管理应用接收到讲述检测到门打开的消息107。另外,智能电话106可显示诸如“CCTV图像检查”项目、“呼叫112”项目等的项目,以允许用户对门打开采取措施。
图11是示出根据示例性实施方式的显示装置的控制方法的流程图。如图11中所示,在操作S110处,显示装置经由网络与生成用户设备的功能中所使用的信息的多个电子设备通信。在操作S111处,显示装置显示包括分别与多个电子设备对应的多个图标的GUI。此处,GUI还可包括指示其中提供有多个电子设备的地点的图像,并且可在图像上将分别与多个电子设备对应的多个图标放置在其中分别提供有多个电子设备的位置处。此时,可根据用户输入来生成或更改图像的至少一部分。
在示例性实施方式中,在操作S111处,显示装置可响应于至少一个电子设备经由通信器被配对来显示与至少一个电子设备对应的至少一个图标。另外,在操作S111处,显示装置可经由通信器从多个电子设备中的至少一个电子设备接收设备信息,并且基于所接收的设备信息来显示与至少一个图标对应的图像。
最后,在操作S112处,基于多个图标中的至少一个图标上的用户输入,显示装置可控制多个电子设备中的对应至少一个电子设备的操作。
图12是示出根据示例性实施方式的显示装置的控制方法的流程图。如图12中所示,在操作S120处,显示装置经由网络与生成用户设备的功能中所使用的信息的多个电子设备通信。在操作S121处,显示装置显示包括分别与多个电子设备对应的多个图标的GUI。在示例性实施方式中,在操作S121处,显示装置可响应于经由通信器被配对的至少一个电子设备来显示与至少一个电子设备对应的至少一个图标。另外,在操作S121处,显示装置可经由通信器从多个电子设备中的至少一个电子设备接收设备信息,并且基于所接收的设备信息来显示与至少一个图标对应的图像。
在操作S122处,显示装置显示能够设置至少一个电子设备的至少一个操作的控制项目。此时,可基于经由通信器从至少一个电子设备接收的设备信息来显示控制项目。最后,在操作S123处,显示装置根据控制项目上的用户输入来设置至少一个电子设备的至少一个操作。在示例性实施方式中,显示装置可进一步:经由通信器从至少一个操作在期间被设置的至少一个电子设备接收状态信息;以及基于所接收的状态信息来显示关于所述设定的结果状态的信息。
图13是示出根据示例性实施方式的显示装置的控制方法的流程图。如图13中所示,在操作S130处,显示装置经由网络与生成用户设备的功能中所使用的信息的多个电子设备通信。在操作S131处,显示装置显示包括分别与多个电子设备对应的多个图标的GUI。此处,GUI还可包括指示其中提供有多个电子设备的地点的图像,并且可在图像上将分别与多个电子设备对应的多个图标放置在其中分别提供有多个电子设备的位置处。此时,可根据用户输入来生成或更改图像的至少一部分。
在示例性实施方式中,在操作S131处,显示装置可响应于至少一个电子设备经由通信器被配对来显示对应于所述至少一个电子设备的至少一个图标。另外,在操作S131处,显示装置可经由通信器从多个电子设备中的至少一个电子设备接收设备信息,并且基于所接收的设备信息来显示与至少一个图标对应的图像。
在操作S132处,显示装置显示与多个电子设备中的第一电子设备对应的第一控制项目和与多个电子设备中的第二电子设备对应的第二控制项目。最后,在操作S133处,显示装置基于第一控制项目和第二控制项目上的用户输入在操作中连接第一电子设备和第二电子设备。
如上文所描述,根据示例性实施方式的显示装置可提供用于控制多个电子设备的GUI,由此使得用户能够以直观方便的方式来控制电子设备。另外,根据示例性实施方式的显示装置可通过选择显示在GUI上的多个电子设备的多个控制项目在操作中连接多个电子设备。
虽然示例性实施方式已参考其各种实施方式加以示出和描述,但本领域技术人员将理解,在不脱离如由所附权利要求及其等效物限定的本公开的精神和范围的情况下,可在形式和细节方面对这些实施方式做出各种变化。

Claims (15)

1.一种显示装置,包括:
显示器;
通信器,配置成经由网络与多个电子设备通信;
用户输入接收器,配置成接收用户输入;
至少一个存储器,存储指令;以及
至少一个处理器,执行所述指令以致使所述显示装置:
基于存储在所述至少一个存储器中并被设定为用于图形用户接口(GUI)的图像以及分别与所述多个电子设备对应的多个图标来生成图形用户接口屏幕,
在所述显示器上显示所生成的图形用户接口屏幕,
响应于用于在所述多个图标中选择图标的用户输入,显示用于控制所述多个电子设备中与所选择的图标对应的至少一个电子设备的操作的控制项目;以及
响应于用于选择所述控制项目的用户输入,经由所述通信器将与所述控制项目相关联的信号传输到与所述控制项目对应的电子设备以控制所述电子设备的操作。
2.根据权利要求1所述的装置,其中所述至少一个处理器执行所述指令以致使所述显示装置:
响应于所述至少一个电子设备经由所述通信器被配对,显示与所述至少一个电子设备对应的至少一个图标。
3.根据权利要求1所述的装置,其中所述至少一个处理器执行所述指令以致使所述显示装置:
经由所述通信器从所述至少一个电子设备接收设备信息;以及
基于所接收的设备信息来显示所述至少一个图标。
4.根据权利要求1所述的装置,其中所述至少一个处理器执行所述指令以致使所述显示装置:
在存储于所述存储器中的多个图像中选择图像,以生成用于物联网(IOT)模式的所述图形用户接口屏幕。
5.根据权利要求4所述的装置,其中所述至少一个处理器执行所述指令以致使所述显示装置:
通过将所选择的图像与所述多个图标合并来生成用于所述物联网模式的所述图形用户接口屏幕。
6.根据权利要求1所述的装置,其中所述至少一个处理器执行所述指令以致使所述显示装置:
基于所述电子设备的识别信息通过互联网搜索来获取所述图标的图像。
7.根据权利要求4所述的装置,其中所述至少一个处理器执行所述指令以致使所述显示装置:
通过用户命令在用于所述物联网模式的图形用户接口屏幕中移动所述多个图标中的至少一个图标;以及
响应于在移动所述至少一个图标之后的存储命令,存储用于所述物联网模式的图形用户接口屏幕。
8.根据权利要求1所述的装置,其中基于经由所述通信器从对应的所述电子设备接收的信息来配置所述控制项目。
9.根据权利要求1所述的装置,其中所述至少一个处理器执行所述指令以致使所述显示装置:
基于与所述多个电子设备中的第一电子设备对应的第一控制项目和与所述多个电子设备中的第二电子设备对应的第二控制项目上的用户输入,在操作中连接所述第一电子设备和所述第二电子设备。
10.根据权利要求4所述的装置,其中所述至少一个处理器执行所述指令以致使所述显示装置:
经由所述通信器从所述操作被控制的所述电子设备接收状态信息;以及
基于所接收的状态信息来显示与所述操作的结果状态有关的信息。
11.根据权利要求1所述的装置,其中
所述GUI屏幕还包括指示提供所述多个电子设备的地点的图像,以及
分别与所述多个电子设备对应的多个图标在所述图像上放置于分别提供有所述多个电子设备的位置处。
12.根据权利要求1所述的装置,其中所述至少一个处理器执行所述指令以致使所述显示装置:
根据用户输入生成或更改所述图像的至少一部分。
13.一种显示装置的控制方法,包括:
经由网络与多个电子设备通信;
基于存储在所述至少一个存储器中并设定为用于图形用户接口(GUI)的图像以及分别与所述多个电子设备对应的多个图标,来生成图形用户接口屏幕;
在显示器上显示所生成的图形用户接口屏幕;
响应于用于在所述多个图标中选择图标的用户输入,显示用于控制与所选择的图标对应的电子设备的操作的控制项目;以及
响应于用于选择所述控制项目的用户输入,经由通信器将与所述控制项目相关联的信号传输到与所述控制项目对应的电子设备,以控制所述电子设备的操作。
14.根据权利要求13所述的方法,还包括:
在存储于所述存储器中的多个图像中选择图像,以生成用于物联网(IOT)模式的图形用户接口屏幕。
15.根据权利要求14所述的方法,还包括:
通过将所选择的图像与所述多个图标合并来生成用于所述物联网模式的图形用户接口屏幕。
CN201710057322.3A 2016-02-01 2017-01-26 显示装置及其控制方法 Pending CN107026752A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020160012432A KR20170091426A (ko) 2016-02-01 2016-02-01 디스플레이장치 및 그 제어방법
KR10-2016-0012432 2016-02-01

Publications (1)

Publication Number Publication Date
CN107026752A true CN107026752A (zh) 2017-08-08

Family

ID=58094136

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710057322.3A Pending CN107026752A (zh) 2016-02-01 2017-01-26 显示装置及其控制方法

Country Status (4)

Country Link
US (1) US10956012B2 (zh)
EP (1) EP3200468A1 (zh)
KR (1) KR20170091426A (zh)
CN (1) CN107026752A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110795179A (zh) * 2019-07-04 2020-02-14 华为技术有限公司 一种显示方法及电子设备

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10165054B2 (en) * 2017-03-13 2018-12-25 Kiturami Co., Ltd. Control system and method for IoT boilers using central management server
KR102417418B1 (ko) 2017-12-12 2022-07-07 삼성전자 주식회사 디스플레이장치, 그 제어방법 및 기록매체
CN112368512A (zh) * 2018-05-02 2021-02-12 豪倍公司 触屏照明***控制器
USD953344S1 (en) 2018-05-02 2022-05-31 Hubbell Lighting, Inc. Display screen with graphical user interface for a lighting system control panel
US10679060B2 (en) 2018-09-25 2020-06-09 Sap Se Automatic generation of user interfaces using image recognition
KR20200062864A (ko) * 2018-11-27 2020-06-04 삼성전자주식회사 디스플레이 장치 및 그 동작 방법
US11954774B2 (en) 2021-08-29 2024-04-09 Snap Inc. Building augmented reality experiences with IoT devices
US11941231B2 (en) * 2021-08-29 2024-03-26 Snap Inc. Camera interfaces to interact with IoT devices

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140068486A1 (en) * 2012-08-31 2014-03-06 Verizon Patent And Licensing Inc. Connected home user interface systems and methods
US20140108943A1 (en) * 2012-10-16 2014-04-17 Korea Electronics Technology Institute Method for browsing internet of things and apparatus using the same
US20140269614A1 (en) * 2013-03-15 2014-09-18 Facebook, Inc. Portable Platform for Networked Computing
US20150350031A1 (en) * 2014-02-05 2015-12-03 Apple Inc. Accessory management system using environment model

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000512472A (ja) 1997-06-25 2000-09-19 サムソン エレクトロニクス カンパニー リミテッド ホームネットワークのためのプログラミングツール
US10628136B2 (en) 2013-05-24 2020-04-21 Tata Consultancy Services Limited Internet of things (IoT) application development
US9372922B2 (en) * 2013-07-11 2016-06-21 Neura, Inc. Data consolidation mechanisms for internet of things integration platform
CN104144470B (zh) * 2014-03-12 2015-12-30 腾讯科技(深圳)有限公司 一种蓝牙连接方法和客户端
US10120354B1 (en) * 2015-04-07 2018-11-06 SmartHome Ventures, LLC Coordinated control of home automation devices
KR102371683B1 (ko) * 2015-09-23 2022-03-08 삼성전자주식회사 컨텐츠 공유 방법 및 이를 지원하는 전자 장치
US10001976B2 (en) * 2015-12-28 2018-06-19 Microsoft Technology Licensing, Llc Generation of a device application

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140068486A1 (en) * 2012-08-31 2014-03-06 Verizon Patent And Licensing Inc. Connected home user interface systems and methods
US20140108943A1 (en) * 2012-10-16 2014-04-17 Korea Electronics Technology Institute Method for browsing internet of things and apparatus using the same
US20140269614A1 (en) * 2013-03-15 2014-09-18 Facebook, Inc. Portable Platform for Networked Computing
US20150350031A1 (en) * 2014-02-05 2015-12-03 Apple Inc. Accessory management system using environment model

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110795179A (zh) * 2019-07-04 2020-02-14 华为技术有限公司 一种显示方法及电子设备
CN110795179B (zh) * 2019-07-04 2021-04-09 华为技术有限公司 一种显示方法及电子设备

Also Published As

Publication number Publication date
US20170220236A1 (en) 2017-08-03
KR20170091426A (ko) 2017-08-09
EP3200468A1 (en) 2017-08-02
US10956012B2 (en) 2021-03-23

Similar Documents

Publication Publication Date Title
CN107026752A (zh) 显示装置及其控制方法
KR101287497B1 (ko) 홈-네트워크 시스템의 제어 명령 전달 장치 및 그 방법
KR100817427B1 (ko) 범용 원격 제어기를 업그레이드 하기 위한 방법 및 시스템
US8552832B2 (en) System and method for interactive appliance control
RU2684506C2 (ru) Способ и приспособление для управления устройством
CN104104585B (zh) 用于在群聊中提供私聊的装置和方法
CN104464250B (zh) 用于可编程多媒体控制器的遥控装置
WO2019105227A1 (zh) 应用图标的显示方法、终端及计算机可读存储介质
CN109348052A (zh) 用于管理可控外部设备的用户界面
US9760174B1 (en) Haptic feedback as accessibility mode in home automation systems
CN107153541A (zh) 浏览交互处理方法及装置
CN105629751B (zh) 设备控制方法及装置
CN105487805A (zh) 对象操作方法及装置
KR102498714B1 (ko) 콘텐트 제공을 위한 전자 장치 및 방법
US20110255012A1 (en) Method and electronic device capable of telecontrolling television
CN109634438A (zh) 一种输入法的控制方法及终端设备
CN110213729A (zh) 一种消息发送方法及终端
CN109358784A (zh) 一种整理图标的方法、终端设备及存储介质
CN106354744A (zh) 用于共享内容信息的方法及其电子设备
US20110068897A1 (en) Method for setting remote controller and remote controller applying the same
CN110188252A (zh) 一种搜索方法及终端
CN110221741A (zh) 图标管理方法及终端设备
CN106358064A (zh) 控制电视机的方法及设备
CN108491128A (zh) 一种应用程序管理方法及终端
CN106961664A (zh) 通信连接控制方法、装置及蓝牙键盘

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170808

WD01 Invention patent application deemed withdrawn after publication