WO2015102470A1 - 제어 장치 - Google Patents

제어 장치 Download PDF

Info

Publication number
WO2015102470A1
WO2015102470A1 PCT/KR2015/000111 KR2015000111W WO2015102470A1 WO 2015102470 A1 WO2015102470 A1 WO 2015102470A1 KR 2015000111 W KR2015000111 W KR 2015000111W WO 2015102470 A1 WO2015102470 A1 WO 2015102470A1
Authority
WO
WIPO (PCT)
Prior art keywords
screen
window
control
button
unit
Prior art date
Application number
PCT/KR2015/000111
Other languages
English (en)
French (fr)
Inventor
전지현
신영선
장혜정
원보규
하창호
서선영
윤소영
윤지윤
홍은경
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020140001554A external-priority patent/KR102229356B1/ko
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to US15/110,019 priority Critical patent/US10592062B2/en
Priority to CN201580002600.4A priority patent/CN105745873B/zh
Publication of WO2015102470A1 publication Critical patent/WO2015102470A1/ko
Priority to US16/787,680 priority patent/US11334208B2/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/12—Synchronisation between the display unit and other units, e.g. other display units, video-disc players
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/06—Consumer Electronics Control, i.e. control of another device by a display or vice versa
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/046—Interoperability with other network applications or services

Definitions

  • the present invention relates to a control device for monitoring and controlling the devices in the home.
  • the home network system connects digital home appliances, sensors, lighting equipment, air conditioning and gas appliances, etc. installed in the home with a short-range wired or wireless network so that users can control the devices they want regardless of time and place. System.
  • Such a home network system typically includes a home server (or a home monitoring gateway) that performs a function of a master, a plurality of home network devices (hereinafter referred to as 'controlled devices'), and a home server monitored and controlled by a home server. It includes a controller for monitoring and controlling a plurality of control target devices in or outside the home only by connection with.
  • a home server is generally implemented on a residential gateway (RG) or a wall pad
  • a controller is generally implemented on a wall pad, a TV, a mobile phone, a computer, and the like. It can be integrated in one device.
  • the TV may play the role of the control device together with the role of the home server.
  • a home server is a controlled device connected to a home network in a home via various physical media (eg, power line, serial communication such as RS-232, Ethernet, etc.) such as a TV, a refrigerator, a lamp, and the like. It can automatically recognize microwaves, sensors, boilers, washing machines, etc., and displays the recognized home network devices on the screen so that the user can control the desired control target devices.
  • various physical media eg, power line, serial communication such as RS-232, Ethernet, etc.
  • the controller performs monitoring and control of a plurality of control target devices through communication with a home server.
  • the home server of such a home network system transmits and receives data to and from an external network mainly implemented as an internet network.
  • a user connects to a home server from inside or outside the home by using a control device such as a PC, a notebook, a PDA, a smartphone, a tablet PC, a TV, a wearable device, and various remote controllers, and then connects to a home network in the home. Access home appliances.
  • a control device such as a PC, a notebook, a PDA, a smartphone, a tablet PC, a TV, a wearable device, and various remote controllers.
  • the electric device is registered in the external server, the plurality of electric devices registered in the external server is accessed through the external server regardless of the home server.
  • control device When using the control device to monitor and control the controlled devices in the home, it is complicated to select the controlled devices and to monitor or control the controlled devices after network connection and authentication with the selected controlled devices. There was a problem.
  • home appliances such as air conditioners or air cleaners for air conditioning, and humidifiers for humidity control are often operated and controlled.
  • the user has to issue a motion control command to each home appliance separately, which is cumbersome. It was inefficient.
  • One aspect provides a control device having a notification window for notifying an operation event of an electric device, and displaying a chat unit screen for chatting with the electric device when the notification window is touched.
  • Another aspect of the present invention provides a control apparatus including an overview unit having an icon of an electric device in a home, a speech bubble displaying an operation state of the electric device, and a moving button for moving the screen on which the icon is displayed left and right when an app for a home network is executed.
  • Another aspect provides a control device including a master key unit having a plurality of buttons for integrally controlling an electric device in a home based on a preset operation command when an app for a home network is executed.
  • Another aspect provides a control device including a chat unit configured to chat with an electric device in a home by using a preset shortcut button when the app for a home network is executed.
  • a control device for controlling an operation of at least one electric device includes: a user interface having a notification window associated with at least one electric device on a home screen and receiving an operation command of at least one electric device; part; A control unit controls to display notification information related to the event in the notification window when an event related to at least one electric device is generated and controls to switch the home screen to one of a chat screen, a service screen, and a control screen when the notification information is selected.
  • the notification window includes a message unit for notifying information about the generated event and a button unit for screen switching, and the control unit controls to switch the home screen to the chat screen when the message unit is selected, and at least one home screen when the button unit is selected. Switch control to the control screen for controlling the electrical equipment.
  • the notification window includes a message unit for notifying information about an event and a button unit for screen switching, and the control unit controls to switch the home screen to a chat screen when the message unit is selected, and when the button unit is selected, at least one electric device. Control to switch to the service screen for providing service information for.
  • the notification window displays a current operation state of at least one electric device, and includes a button unit for receiving an operation command of the at least one electric device, and the control unit controls to change the current operation state to another operation state when the button unit is selected. do.
  • the operating state includes a start state and a stop state.
  • the controller checks the touch direction when the notification window is touched and controls to switch the home screen to any one of a chat screen, a service screen, and a control screen based on the identified touch direction.
  • the control unit controls to switch the home screen to the chat screen when the touch direction is the first direction, and controls to switch the home screen to the control screen when the touch direction is the second direction.
  • the controller checks the touch time when the notification window is touched, and controls to switch the home screen to the control screen when the identified touch time is longer than a predetermined time.
  • the controller checks the touch time when the notification window is touched, controls to expand the notification window when the identified touch time is longer than a predetermined time, and controls the mini control window to be displayed in the extended notification window area.
  • the controller checks the touch time when the notification window is touched, and controls the mini control window to overlap and display on the notification window when the identified touch time is longer than a predetermined time.
  • the control unit controls to switch the home screen to the chat screen when the notification window is touched and to display the mini control window overlapping the chat screen.
  • the mini-control window includes at least one of an on-off button, a start button, a stop button, and a pause button for receiving an operation command of at least one electric device.
  • the mini control window controls to switch the home screen to the chat screen, and to display a shortcut button for performing an operation corresponding to an event in the chat screen.
  • a control device includes a control device for controlling an operation of at least one electric device, the control device comprising: a user interface having a home screen and receiving an operation command of at least one electric device; And a control unit for controlling a pop-up window for notifying information about the generated event to be displayed on the home screen when an event occurs during at least one electric device operation.
  • the popup window includes a positive / negative popup window.
  • the user interface unit may further include a quick panel window disposed on a home screen in a hidden state, and a notification window displaying an operation state of at least one electric device.
  • the control unit controls the quick panel window to be displayed when the top of the home screen is dragged. If an event occurs during operation of at least one electrical device, the notification window is controlled to be displayed on the quick panel.
  • displaying a notification window notifying the operation event of the electrical device on the quick panel window of the home screen it is possible to easily determine the operating state of the electrical device even if the app is not running on the user interface.
  • the operation state of the electric device is displayed through a pop-up window even if the app is not executed on the user interface, the operation state of the electric device can be easily and quickly known.
  • the operation state of the electric device can be changed only by touching an icon, the operation of the electric device can be easily controlled, and the electric devices can be simultaneously and collectively controlled using a plurality of buttons of the master key.
  • the convenience and efficiency can be improved, and the status information of the electric device can be quickly and easily checked by outputting an event in which the state of the electric device is changed in a pop-up window.
  • an operation command may be simply and easily transmitted to at least one electric device.
  • FIG. 1 is an exemplary diagram of a home network system in communication with a control device according to an embodiment.
  • FIG. 2 is a block diagram of a home network system that communicates with a control device according to an embodiment.
  • FIG 3 is an exemplary diagram of a dashboard screen and a plug-in screen of the control device according to an embodiment.
  • FIGS. 4 to 6 are views illustrating execution of an overview unit in a dashboard screen of a control device according to an embodiment.
  • FIG. 7 is an exemplary diagram of a master key in a dashboard screen of a control device according to an embodiment.
  • FIG. 8 is an exemplary view of execution of a master key in a dashboard screen of a control device according to an embodiment.
  • FIG. 9 is an exemplary diagram of a master key part setting window 318 in a second plug-in screen of a control device according to an embodiment.
  • 10 and 11 are exemplary diagrams for setting a master key unit in a second plug-in screen of a control device according to an embodiment.
  • 12A to 18 are views illustrating execution of a chat unit in a dashboard screen of a control device according to an embodiment.
  • 19 is a control block diagram of a control device according to another embodiment.
  • 20 is an exemplary view of displaying a home screen of a control device according to another embodiment.
  • 21 is an exemplary view of a pop-up window displayed on the home screen of a control device according to another embodiment.
  • 22 to 27 are exemplary views of an operation of a quick panel window displayed on a home screen of a user interface unit of a control device according to another embodiment.
  • FIG. 1 is an exemplary diagram of a home network system communicating with a control device according to an embodiment
  • FIG. 2 is a block diagram of a home network system communicating with a control device according to an embodiment. Electrical devices 100a to 100h and networks.
  • the electrical apparatuses 100a to 100h are apparatuses that perform a predetermined unique function, and transmit an operation information corresponding to an operating state to the control apparatus by communicating with the control apparatus through a network as an additional function, and transmitted from the control apparatus. Perform an operation corresponding to an operation command.
  • the control device 300 includes a mobile device.
  • Such electric devices include a cleaning robot 100a, a lighting device 100b, a washing machine 100c, an air conditioner 100d, a television 100e, a cooking apparatus 100f, a refrigerator 100g, and a dishwasher disposed in a groove. It may include a home appliance that is not portable, such as (100h), and may further include a terminal used in the home such as a laptop, a PC, a tablet, and the like, and a security device provided with a camera and a microphone. It is also possible to include more.
  • the network 200 is a home network in which all electrical and electronic devices used in a home can be connected and connected in one system.
  • the network 200 may share information between the plurality of electric devices and the control device 300 through the wired / wireless internet.
  • the information transmission method in the home can be divided into wired and wireless.
  • Representative examples of the wired type include home phone line networking alliance (PNA), IEEE 1394, and power line using existing telephone lines. Frequency (Bluetooth), Infrared Data Association (IrDA) and Wireless LAN (Wifi), Zigbee, Z-wave, Near Field Communication (NFC, etc.).
  • the network 200 includes a home server that manages and controls a plurality of electrical devices.
  • Such a home server may be implemented on a residential gateway (RG), a wall pad, or a TV.
  • RG residential gateway
  • wall pad a wall pad
  • TV TV
  • the home server may be implemented in software in various electric devices or various control devices in the home.
  • the home server may be combined with hardware in various home appliances or various mobile devices.
  • the home server displays an operation state of the plurality of electric devices in the home, receives an operation command of at least one electric device among the plurality of electric devices from the user, and when the operation command of the at least one electric device is input, at least one electric Sends an operation command to the device.
  • the control device 300 communicates with at least one of the plurality of electrical devices through wired or wireless communication.
  • control device 300 may communicate with each of the plurality of electric devices in the home, and may transmit and receive information of the plurality of electric devices through communication with the home server.
  • the control device 300 includes an app for monitoring and controlling a plurality of electric devices in the home by communicating with a network in the home, and when the app is executed by the user, at least one of the plurality of electric devices in the home Outputs an operation state of the device, receives an operation command from the user, and controls the operation of the at least one electric device based on the input operation command.
  • the control device 300 is a terminal device that can move outside the home, such as a smartphone, a tablet PC, a laptop, or the like, and is a device fixed inside the home, such as a TV or various remote controllers, and can install an app provided by a content provider. It may be a device, or may be a device in which an app, software, or firmware is built by a manufacturer.
  • the control device 300 includes a user interface 310, a controller 320, a storage 330, and a communication unit 340.
  • the user interface 310 outputs an operation state of a pre-registered electric device among the plurality of electric devices arranged in the home and receives an operation command of at least one of the pre-registered electric devices.
  • the user interface unit 310 includes a display unit for displaying an operation state of a pre-registered electric device, and an input unit for receiving an operation command from a user.
  • the input unit may be a touch panel that receives an operation command by a touch method
  • the user interface 310 may be implemented as a touch screen in which the display panel of the display unit and the touch panel of the input unit are integrally formed.
  • the input method of the input unit may be an input of an electronic pen, a pointing device (mouse, etc.), a keyboard, etc. in addition to the touch panel.
  • the display panel and the input unit of the display unit may be separately formed, but in the case of a touch type electronic pen or the like, may be integrally formed.
  • the user interface 310 includes a home screen on which icons of various apps are displayed.
  • the user interface 310 displays an icon of an app for monitoring and controlling an electric device on a home screen, and when an icon of the app is selected by the user, transmits an app selection signal to the controller 320, and the controller 320. Display a screen corresponding to the running of the app on the basis of the command.
  • the screen display configuration of such a user interface unit will be described later.
  • the controller 320 controls the user interface unit 310 to output an operation state of a pre-registered electric device, and based on an operation command input to the user interface unit 310 of the at least one electric device. Control transmission of a signal corresponding to an operation command.
  • control unit 320 The control configuration of the control unit 320 will be described later in association with the screen display configuration of the user interface unit.
  • the storage unit 330 stores identification information of the electric device in the home registered by the user and an app for monitoring and controlling the electric device registered in advance.
  • the storage unit 330 stores an operation command of a pre-registered electric device for each button of the master key unit, and stores an operation command for an electric device for each shortcut button of the chat unit.
  • the communication unit 340 communicates with a pre-registered electric device.
  • the communication unit 340 may communicate with a home server in the home.
  • the user interface unit 310 will be described in detail with reference to FIGS. 3 to 20. In addition, the control operation of the control unit 320 will be described together.
  • FIG 3 is an exemplary view of a dashboard screen and a plug-in screen of the control device according to the embodiment.
  • the user interface 310 displays the dashboard screen as the first screen 310a when the app is executed.
  • the dashboard screen 310a is a screen on which basic information and information for controlling an operation of a plurality of electric devices connected through a home network are displayed.
  • the user interface 310 switches the screen to the plug-in screen 310b or 310c.
  • the user interface 310 displays a first plug-in screen 310b displaying a device registration item for registering an electric device when a sliding touch sliding from left to right is input to the dashboard screen 310a, and the dash is displayed.
  • the second plug-in screen 310c displaying a service item for service and setting of the electric device is displayed.
  • the user interface unit displays the dashboard screen 310a when a sliding touch sliding from the right side to the left side is input while the first plug-in screen is displayed.
  • the number of plug-in screens is two, but may be one or more than three.
  • the controller 320 checks the currently displayed screen, and when a sliding touch sliding from right to left is input, controls the screen to be displayed as a screen arranged on the right side of the current screen, and the sliding touch sliding from left to right is When input, the screen is switched to control the screen arranged on the left side of the current screen.
  • the controller 320 checks the input sliding touch direction, and when it is determined that the checked sliding touch direction is the left-to-right direction, the first plug-in Controlling the switching to the screen 310b, and if it is determined that the identified sliding touch direction is from the right direction to the left direction, the control is switched to the second plug-in screen 310c.
  • the dashboard screen 310a includes an overview 311 for displaying list information and operation information of a pre-registered electric device, and execution command information and monitoring information for quickly and easily controlling the operation of the pre-registered electric device. It includes a widget unit 312, 313, 314 to display.
  • the dashboard screen 310a also includes a screen switcher 315 for directly switching from the dashboard screen to the plug-in screen, directly from the plug-in screen to the dashboard screen, or directly from one plug-in screen to another plug-in screen. More).
  • Switching directly here includes switching the screen by a single touch rather than a sliding touch.
  • the screen switching unit 315 includes a plurality of page buttons equal to the number of screens, and the arrangement of the plurality of page buttons corresponds to the arrangement of the plurality of screens, respectively, and the page buttons corresponding to the positions of the currently displayed screens remain the same. This is different from the page button. This allows the user to recognize the location of the currently displayed screen.
  • the arrangement information of the plurality of screens is set in advance, and the arrangement between the screens can be changed by the user.
  • the user interface unit of the present embodiment includes a total of three screens, such as a dashboard screen, a first plug-in screen, and a second plug-in screen, and the arrangement of the three screens includes a first plug-in on the left side of the dashboard screen. The screen is placed and the second plug-in screen is placed on the right side.
  • three screens such as a dashboard screen, a first plug-in screen, and a second plug-in screen
  • the arrangement of the three screens includes a first plug-in on the left side of the dashboard screen. The screen is placed and the second plug-in screen is placed on the right side.
  • the page buttons of the screen switching unit 315 include three in total, and the page buttons disposed at the leftmost of the three page buttons are linked to the first plug-in screen 310b, and the page buttons disposed at the middle of the page buttons are In conjunction with the dashboard screen, the rightmost page button is linked with the second plug-in screen.
  • the leftmost page button When the leftmost page button is touched, the first plug-in screen 310b is displayed on the user interface, and the leftmost page button has a different color from the remaining buttons.
  • the dashboard screen 310a is displayed on the user interface, and the center page button has a different color from the remaining buttons.
  • the second plug-in screen 310c is displayed on the user interface, and the rightmost page button has a different color from the rest of the buttons.
  • the controller 320 checks the touch input page button among the plurality of page buttons of the screen switching unit 315, checks the screen corresponding to the confirmed page button, and displays the confirmed screen on the user interface 310. To control.
  • the first plug-in screen 310b and the second plug-in screen 310c are screens for changing setting information of a main function, setting additional functions, or receiving a service.
  • the first plug-in screen 310b includes a device confirmation button having registration information about a pre-registered electric device, and a registration setting button 316 for registering a new device.
  • the second plug-in screen 310c may include a setting change button for changing settings of a master key unit, a chat unit, and a home view unit of a widget unit, a service button for receiving a service for a pre-registered electric device, and a pre-registered electric device.
  • the management button 317 is included.
  • FIGS. 4 to 6 are views illustrating execution of the overview unit in the dashboard screen of the control device according to the embodiment, and the overview unit 311 will be described in detail with reference to this.
  • the overview unit 311 displays a list of pre-registered electric devices, and displays icons A1 of pre-registered electric devices.
  • the overview unit 311 further includes a movement button A2 for moving the screen on which icons of pre-registered electric devices are arranged.
  • the move button A2 is a button for changing the display position of the icon by moving the currently displayed icon to display the icon of the remaining electric device that is not displayed on one screen in the overview unit.
  • the move button A2 is hidden when the number of icons of pre-registered electric devices is less than a certain number that can be displayed on one screen, and the display state when the number of icons of pre-registered electric devices is more than a certain number that can be displayed on one screen.
  • the move button A2 is a first direction button ⁇ for instructing to move from the current screen currently displayed on the overview unit 311 to the screen extending in the first direction, and the screen extending in the second direction from the current screen. It includes a second direction button (>) to indicate the movement of.
  • the second direction is opposite to the first direction.
  • the overview unit 311 rearranges icons by shifting the icons of a certain number of electric devices in the current screen by one space in the second direction, and when the second direction button (>) is selected.
  • the icons of a certain number of electric devices in the current screen are shifted by one space in the first direction to rearrange the icons.
  • the overview unit 311 rearranges the icon of the new electric device on the left outermost column of the screen, and disappears the icon of the electric device disposed on the right outermost column.
  • the direction button (>) is selected, the icon of the new electric device is rearranged in the right outermost cell and the icon of the electric device arranged in the left outermost cell disappears.
  • the overview unit 311 displays an icon of an electric device arranged on the left screen by displaying the left screen of the current screen
  • the second direction button (>) is selected, the current screen It is also possible to display an icon of an electric device arranged on the right screen by displaying the right screen of the.
  • the screen moves to the screen disposed on the left side of the currently displayed screen, and the cleaner and lighting Redisplay the icons of appliances, washing machines and air conditioners.
  • the controller 320 controls the user interface 310 to maintain the screen of the widgets 312, 313, and 314 in a current state even when the movement button of the overview unit 311 is touched.
  • the overview unit 311 further includes a speech bubble A3 for guiding the on-off state and the progress state of the current operation state of the pre-registered electric device.
  • the speech bubble A3 is disposed around the icon A1 so as to be easily recognized by the user.
  • the speech bubble A3 changes the guide text indicating the operating state of the electric device based on the command of the controller 320.
  • the controller 320 changes the operation state of the electric device corresponding to the touch-input icon, and displays the changed operation state as a speech bubble.
  • the unit 310 is controlled.
  • the controller 320 controls the air conditioner off when the icon of the air conditioner is touched while the air conditioner is on, and controls the user interface 310 to display the off condition of the air conditioner in a speech bubble.
  • the air conditioner is controlled to be turned on and the user interface 310 is controlled to display the air conditioner on the speech bubble.
  • the overview unit 311 has an icon of a cleaning robot, a lighting device, a washing machine, and an air conditioner, respectively. OFF) 'through the speech bubble, and when the cleaning robot that is off is touched through the speech bubble that the cleaning robot is' Cleaning'.
  • the controller 320 checks the driving progress state of the washing machine when the icon of the washing machine is touched while the washing machine is turned on, and controls the user interface 310 to display the confirmed driving progress state of the washing machine.
  • the overview unit 311 has a cleaning robot, a lighting device, a washing machine, and an air conditioner displaying the icons, respectively, and when the washing machine is in operation, the progress of the washing machine is '1 hour 10 minutes'. Guide the speech through the speech bubble.
  • controller 320 may check at least one of an update, an error, and a reservation state of a pre-registered electric device, and control the user interface unit to display the confirmed state information on a speech bubble.
  • the speech bubble A3 guides any one of update information, error information, and reservation information of the corresponding electric device.
  • controller 320 may change the operating state of the at least one electric device in response to a touch input to the master key unit 312 of the widget unit and a chat command input of the chat unit 313.
  • the interface unit 310 is controlled.
  • the widget unit of the user interface unit 310 may be configured to perform a chat with the master key unit 312 for operating the pre-registered electric device based on a preset operation command and at least one of the pre-registered electric devices.
  • FIG. 7 is an exemplary view of a master key in a dashboard screen of a control device according to an embodiment.
  • the master key unit 312 includes a button for integrally controlling the operations of the plurality of electrical devices. This button includes a pre-operation command for each electric device.
  • the button of the master key part 312 can be set based on a schedule of a user.
  • the master key unit 312 includes an outgoing button B1, a return button B2, and a sleep button B3.
  • the control unit 320 confirms a touch input button and transmits a preset operation command for each electric device corresponding to the confirmed button to a pre-registered electric device, respectively. On the basis of the pre-registered electric device to operate. At this time, the user interface 310 guides the operation state of the pre-registered electric device through a speech bubble.
  • Buttons for integrated control of the master key 312 can be added. This can be added through the 'master key setting button' of the second plug-in screen.
  • the operation command of the electric device for each button of the master key 312 can be changed. This can also be changed through the master key setting button on the second plug-in screen.
  • FIG. 8 is an exemplary view of execution of a master key in a dashboard screen of a control device according to an embodiment.
  • the overview unit 311 displays icons of a cleaning robot, a lighting device, a washing machine, and an air conditioner, and displays a speech bubble for guiding an operation state of each electric device around each icon.
  • the operation command for each electric device corresponding to the outgoing button is the lighting device off and the air conditioner off
  • the operation command for each electric device corresponding to the home button is the lighting device on and the air conditioner on.
  • the user interface 310 has an outgoing button (Going) of the master key 312 in the operating state of the cleaning robot is turned off, the operating state of the lighting equipment is turned off, the operating state of the washing machine is turned on, the operating state of the air conditioner is turned on When Out, B1) is touched (T), the operation state of the cleaning robot and the lighting device is kept off, and the operation state of the washing machine is kept on to prevent the washing machine from stopping in the middle.
  • the operating state is turned off and the operating state of each electric machine is guided through a speech bubble.
  • the user interface 310 has a return button (Coming) of the master key unit 312 when the operation state of the cleaning robot is off, the operation state of the lighting apparatus is off, the operation state of the washing machine is off, and the operation state of the air conditioner is off.
  • a return button (Coming) of the master key unit 312 when the operation state of the cleaning robot is off, the operation state of the lighting apparatus is off, the operation state of the washing machine is off, and the operation state of the air conditioner is off.
  • Home (B2) is touched (T)
  • T the operation state of the cleaning robot and the washing machine is kept off, the operation state of the lighting device and the air conditioner is turned on, and the operation state of each electric device is guided through the speech bubble.
  • the icon of the air conditioner (T) to turn off the operation of the air conditioner and guides it through a speech bubble.
  • FIGS. 10 and 11 are examples of setting the master key portion in the second plug-in screen of the control apparatus according to the embodiment. It is also.
  • the user interface 310 switches the dashboard screen to the master key setting screen 318 when the master key setting button in the second plug-in screen is touched.
  • the master key unit setting screen 318 includes an icon D1 of a pre-registered electric device, a move button D2 for moving the icon list of the electric device, and a preset operation for each electric device.
  • a speech balloon D3 for guiding the command, a plurality of buttons D4 registered in advance, an edit button D5 for each of the plurality of buttons, and an add button D6 for adding a button for integrated control.
  • the master key portion setting screen 318 is a lighting device is turned on, the television is turned off, the air conditioner is set in advance with the indoor target temperature of 25 °C, the cleaner in operation, the go out button is selected and the lighting equipment
  • the icon of the touch is changed to the operation command of the lighting device to turn off and guide through the speech balloon
  • the icon of the air conditioner is touched to change the operation command of the air conditioner to guide through the speech balloon.
  • the preset command for each electric device corresponding to the outgoing button of the master key unit is a lighting device off, a television off, an air conditioner off, and a cleaner operation command.
  • the master key unit setting screen 318 is a button for integrated control, and when the edit button of the weather button is touched in a state where the outgoing button, the return button, the sleep button, and the wake button are set, Displays preset operation command information for each corresponding electric device, and when the delete button of the option menu is touched, displays a window indicating that all information related to the weather button is deleted, and when the 'OK' button is touched, the weather button is deleted. Display multiple buttons.
  • FIGS. 12A to 12D are diagrams illustrating examples of a chat screen when a chat unit is executed in a dashboard screen of a control apparatus according to an embodiment, and a display change example of a chat screen corresponding to a conversation input method.
  • the user interface 310 converts the dashboard screen to the chat screen 319 when the chat unit 313 is touched. This is the same as in FIG.
  • the chat screen 319 selects a conversation display window E1 displaying a conversation with at least one electric device, an icon of the at least one electric device, or an entire device selection icon. And a conversation input window E3 for selecting a conversation input method with at least one of the pre-registered electrical devices and inputting a conversation.
  • the dialog input window E3 is a text window E31 for selecting a text input method, a transmission button E32 for instructing the transmission of a text sentence, and a list for instructing a list display of a shortcut button in which a chat command is implied.
  • the text window E31 displays a QWER type keypad E36 when touch is input.
  • the keypad E36 includes a switching button with Korean or numeric characters, and it is possible to display Korean or numeric characters by touching the switching button.
  • FIG. 12 are examples of display change of a chat screen corresponding to a conversation input method. This will be described with reference to FIGS. 13 to 18.
  • the keypad E36 is displayed to prepare a user to chat.
  • the chat screen 319 displays the icon of the washing machine in the target window when the icon of the washing machine is touched, and displays the keypad E36 when the text window is touched to prepare the user for chatting. Perform.
  • the chat screen 319 displays the input text on the representative display window when the send button is touched after the character inputting the washing machine is inputted, and then receives the information on the current progress status from the washing machine and provides the progress status. Is indicated by a progress bar or the like.
  • chat screen displays a time when the chat word is entered in the chat display window.
  • the chat screen 319 displays the icon of the air conditioner in the target window when the icon of the air conditioner is touched, and displays the keypad E36 when the text window is touched. Carry out the preparations you can make.
  • the chat screen 319 displays the input on-operation command on the dialog window and displays the current room temperature provided by the air conditioner when the transmit button is touched after the operation command is input by text. If the transmit button is touched after input, the input indoor target temperature is displayed on the dialog display window, and the received character is displayed on the dialog display window by receiving a response from the air conditioner.
  • the chat screen 319 is ready for a user to chat by displaying a full device selection icon in a target window when the full device selection icon is selected and a keypad E36 when the text window is touched. Perform the process.
  • the chat screen 319 displays an input chat word in a chat display window when a chat word for monitoring of the entire device is input through a keypad, and displays monitoring information for each electric device received when monitoring information is received from a pre-registered electric device. Mark on.
  • the chat screen 319 hides the keypad when the chat display window is touched while displaying monitoring information for each electric device.
  • the chat screen 319 is ready for a user to chat by displaying a full device selection icon in a target window when the full device selection icon is selected and a keypad E36 when the text window is touched. Perform the process.
  • the chat screen 319 displays an input chat word on a chat display window when a chat word notifying the entire device is input through the keypad, and receives received operation status information corresponding to the out of the pre-registered electric device.
  • the operation status information is displayed on the dialog display window.
  • the chat screen 319 hides the keypad when the chat display window is touched while displaying the operation status information for each electric device.
  • the icon of the air conditioner When the icon of the air conditioner is touched, the icon of the air conditioner is displayed on the target window, and when the text window is touched, the keypad E36 is displayed to perform a preparation process for the user to chat.
  • the chat screen 319 displays the input on-operation command on the dialog window and displays the current room temperature provided by the air conditioner when the transmit button is touched after the operation command is input by text. If the transmit button is touched after input, the input indoor target temperature is displayed on the dialog display window, and the received character is displayed on the dialog display window by receiving a response from the air conditioner.
  • the chat screen 319 displays a plurality of shortcut buttons E37 on which a chat command is displayed to perform a preparation process for the user to chat.
  • 17 illustrates an example of a shortcut button for each electric device registered in advance.
  • FIG. 17A illustrates an example of a shortcut button list corresponding to an entire device selection icon, and each of the plurality of shortcut buttons has an operation command for collectively controlling all pre-registered electric devices when selecting the entire device selection icon.
  • a plurality of shortcut buttons for transmitting a control command to all devices correspond to buttons of the master key portion.
  • FIG. 17B is a diagram illustrating a shortcut button list corresponding to the operation control of the air conditioner
  • FIG. 17C is a diagram illustrating a shortcut button list corresponding to the operation control of the cleaning robot
  • FIG. ) Is an exemplary view of a shortcut button list corresponding to the operation control of the washing machine
  • Figure 17 (e) is an illustration of a shortcut button list corresponding to the operation control of the cooking appliance
  • Figure 17 (f) is for the operation control of the refrigerator. It is an example figure of corresponding shortcut button list.
  • the chat screen 319 displays an icon of the air conditioner in the target window when the icon of the air conditioner is touched, receives information about the current room temperature from the air conditioner, and provides a current.
  • the room temperature is displayed in the dialog window.
  • the chat screen 319 displays a plurality of shortcut buttons E37 on which a chat command for controlling an operation related to the air conditioner is displayed.
  • the chat screen 319 displays a conversation corresponding to the touched shortcut button on the dialog display window when the shortcut button for instructing cooling is touched among the plurality of shortcut buttons, and performs the cooling operation by receiving an operation state with an air conditioner.
  • the list button disappears when the list button is touched, and then an icon selection window and a shortcut button list are displayed when the list button in the dialog input window is touched.
  • the chat screen 319 displays the entire device selection icon on the target window, and displays a list of shortcut buttons corresponding to the entire device selection icon.
  • chat screen displays a time when the chat word is entered in the chat display window.
  • the chat screen 319 displays a voice input window E38 for receiving a voice command when the microphone button E34 is touched to prepare a user for chatting. Perform.
  • the chat screen 319 displays an icon of the washing machine in the target window when the icon of the washing machine is touched, and a voice input for receiving a voice command when the microphone button E34 is touched.
  • a user prepares to chat.
  • the voice input window includes a button for setting voice command feedback, a button for voice input, and a keypad switch button for switching to the keypad.
  • chat screen 319 ignites while the button for voice input is touched, voice is collected and recognized through a microphone, the recognized voice is displayed on a conversation display window, and a question corresponding to the recognized voice is stored in the washing machine. If the question about the progress status is provided with information on the current progress status from the washing machine and displays the progress status provided by a progress bar.
  • chat screen displays a time when the chat word is entered in the chat display window.
  • the home view unit 314 may output an image inside the home of the user at a predetermined time interval, and when the touch command is input, the home view image may be enlarged and output on the dashboard screen.
  • the home view unit 314 may output a past image in response to a user's command.
  • control device 300 includes a user interface 500, a controller 360, a storage 330, and a communication unit 340.
  • the control device 300a communicates with the other control device 300b and controls the at least one electric device among the plurality of electric devices based on an operation command or information related to the operation command transmitted from the other control device 300b. Send the command.
  • the other control device may be an IT device that can be installed on a human body, and may be, for example, a wearable device 300b provided in a watch, a belt, glasses, or the like. Such wearable devices are capable of input / output and communication.
  • control device 300a may be a smart phone that communicates with a wrist watch-type device
  • the other control device 300b may be a wrist watch-type device.
  • control device 300a may be a TV associated with the TV remote control, and the other control device 300b may be a separate TV remote control.
  • the other control device 300b receives an operation command of at least one of the plurality of electric devices from the user and transmits the input operation command to the control device 300a registered in advance.
  • the other control device 300b may be installed with an app for controlling an electric device in the home.
  • the other control device 300b may include an input unit.
  • the input through the input unit of another control device may be a touch input, an electronic pen, a pointing device (for example, a mouse), a keyboard, a voice, an action, or the like.
  • control device 300b may include an output unit.
  • the output through the output unit of the other control device may be an output through a display unit such as a touch panel, a voice output, vibration, light, or the like.
  • the control device 300a and the other control device 300b may be wired or wirelessly connected, and the wired connection may include MHL and USB, and the wireless connection may include Bluetooth, Wi-fi, Zigbee, IrDA, and short-range communication. Manner and the like.
  • control device 300a Although not shown, a method of controlling an electric device using the control device 300a and another control device 300b will be described below.
  • the input through the other control device 300b may be an input through voice, or may be a touch input when the other control device 300b includes a touch panel.
  • the other control device 300b transmits the voice information to the control device 300a as it is, and the control device 300a analyzes the voice and acquires a corresponding command. Perform the control action corresponding to the command.
  • control device 300a analyzes the digitized or encoded information and acquires a corresponding command, which corresponds to the command. Perform a control action.
  • control device 300a when the other control device 300b analyzes the voice information and transmits specific information indicating the result of the analysis to the control device 300a, the control device 300a acquires a command related to the specific information and performs a control operation corresponding to the command. Do this.
  • control device 300a when another control device 300b analyzes the voice information and transmits a command corresponding to the voice information to the acquisition control device 300a, the control device 300a performs a control operation corresponding to the command.
  • control device 300a When the control command is input to the other control device 300b through the touch input, when the other control device 300b transmits the information corresponding to the touched icon to the control device 300a, the control device 300a corresponds to the information. Acquire a command to perform a control operation corresponding to the command.
  • control device 300a when the other control device 300b acquires a corresponding command through the information corresponding to the touched icon and transmits the command to the control device 300a, the control device 300a performs a control operation corresponding to the command.
  • the control command may be a command for controlling a plurality of devices.
  • the other control device 300b determines whether the input command is a command for controlling the plurality of electric devices, and determines the result of the determination of the control device 300a. To).
  • the determination result may be transmitted simultaneously with the input command, or may be transmitted separately. Alternatively, if it is determined that the command input from the other control device 300b is a command for controlling the plurality of electric devices and then a command for controlling the plurality of electric devices, the control target electric devices are not directly passed through the control device 300a. Send control command to.
  • control device 300a determines whether the command is a command for controlling the plurality of electric devices, and performs a corresponding control operation.
  • the user can simply control the electric device in the home via a wristwatch-type device or a TV remote control.
  • a user can turn off in-house devices by simply saying 'Good night' to the wristwatch-type device.
  • the control device 300a includes a user interface 500, a controller 350, a storage 330, and a communication unit 340.
  • the user interface 500 outputs an operation state of a pre-registered electric device among the plurality of electric devices arranged in the home and receives an operation command of at least one of the pre-registered electric devices.
  • the user interface unit 500 includes a display unit for displaying an operation state of a pre-registered electric device, and an input unit for receiving an operation command from a user.
  • the input unit may be a touch panel that receives an operation command by a touch method
  • the user interface 500 may be implemented as a touch screen in which a display panel of the display unit and a touch panel of the input unit are integrally formed.
  • the input method may be an input such as an electronic pen, a pointing device (for example, a mouse), a keyboard, voice recognition, and gesture recognition.
  • the display panel and the input unit of the display unit may be separately formed, but in the case of a touch type electronic pen, they may be integrally formed.
  • the user interface 500 displays an icon 500b of an app for monitoring and controlling an electric device on the home screen 500, and selects an app when an icon of the app is selected by the user.
  • the signal is transmitted to the controller 360, and a screen corresponding to the execution of the app is displayed based on the command of the controller 360.
  • the user interface 500 includes a home screen 500a that displays icons of various apps, and is disposed in a hidden state at the top of the home screen 500a so that the top bar 500c of the home screen 500a is dragged. Displayed on a part of the home screen 500a and arranged with icons related to various settings such as Wi-Fi, GPS, sound, auto-rotation, power saving, blocking, and Bluetooth read / write P2P. It further includes a quick panel window 510 for displaying the back.
  • the quick panel window 510 can easily release or execute various settings, and the user can easily check the running application and the like.
  • the quick panel window 510 includes a notification window 510a for notifying a user of update information of at least one app.
  • the notification window 510a informs the details of the function being executed, such as the progress of the application or the download progress, and the shortcut is executed when the corresponding list is selected.
  • the notification window 510a displays the operation state of the pre-registered electric device or various information for managing the electric device.
  • the notification window 510a may display the event information only when an event requiring notification information is generated in relation to the electric device.
  • the user interface may display the event information of the electric device as a shortcut icon on the top bar of the home screen.
  • the user interface unit on the home screen 'washing progress after completion of washing (Y / N)', 'washing completion after docking (Y / N)', 'washing due to the washing machine door open ( Y / N) ', etc., or whether the new function is in progress such as' progress or cancellation of home view', etc. is displayed as a positive-negative popup window (p).
  • the user moves to the chat screen 520 through the notification window 510a of the quick panel window 510 or through a positive / negative pop up (p).
  • the controller 360 of the control device moves to the chat screen, the electric device displayed on the notification window 510a or the popup window p becomes a chat conversation partner, and the electronic device can be directly controlled through the chat.
  • the controller 360 controls the display of the quick panel window 510 when the top bar 500c of the home screen is dragged, and displays a chat screen when the notification window 510a of the quick panel window 510 is touched.
  • the controller 360 may control to display the control screen and the service screen according to the position, type, or direction of the touch touched on the notification window 510a.
  • the location of the touch includes a message area and an icon area
  • the type of touch includes a tab and a long tap
  • the direction of the touch includes a sliding direction
  • the controller 360 may control to display the mini control window when the notification window 510a is touched.
  • the storage unit 330 stores identification information of the electric device in the home registered by the user and an app for monitoring and controlling the electric device registered in advance.
  • the storage unit 330 stores an operation command for each touch position, an operation command for each touch type, and an operation command for each touch direction.
  • the communication unit 340 communicates with an electric device in the home and a home server in the home.
  • the communication unit 340 communicates with another control device.
  • FIG. 22 is a diagram illustrating a quick panel window and a chat screen displayed on a home screen of a control device according to another embodiment.
  • the control device determines whether an event that requires a notification has occurred in at least one electric device, and when it is determined that an event that requires a notification has occurred, the control device displays notification information corresponding to the occurrence of the event on the home screen 500a of the user interface 500. Display through the quick panel window 510 on.
  • the user interface unit 500 further includes a notification window 510a disposed on the quick panel window 510 of the home screen 500a to display event information of the electric device.
  • control device may display notification information on the update, error, and management time of the at least one electric device in the state where the app is not executed through the quick panel window on the home screen.
  • the user interface 500 displays information on the corresponding electric device on the chat screen 520 in detail.
  • the user interface 500 may also display a solution or solution information for resolving the event.
  • the user interface 500 may further display a shortcut button for executing a solution or solution information.
  • the user interface unit 500 displays information related to washing the washing tub on the chat screen 520 and displays a shortcut button 520a for performing an operation related to washing the washing tub. .
  • the user interface unit displays a tutorial of the corresponding electric device on the service screen 540, and the user interface unit displays the 'Start Now button' in the chat screen 520.
  • the washing tank washing command is transmitted to the washing machine and the washing tank washing process is displayed on the chat screen 520, and when the washing tank washing is completed, information related to the washing tank washing is displayed.
  • FIG 23 is another exemplary view of a quick panel window displayed on a home screen of a control device according to another embodiment.
  • the user interface unit 500 is disposed on the quick panel window 510 of the home screen 500a to display a notification window 510a informing of event information of the electric device.
  • the notification window 510a includes a message unit 511 displaying event information of the electric device, and a button unit 512 on which at least one button for screen switching is arranged.
  • the user interface unit 500 converts and displays the home screen as a chat screen and displays the corresponding electric device.
  • the information is displayed on the chat screen 520.
  • control device may grasp the state information of the electric device through the chat screen or control the electric device through the chat.
  • the user interface unit 500 converts the home screen to the control screen 530 and displays the home screen.
  • An operation control button for controlling an operation on the device and an operation state information are displayed on the control screen 530.
  • the user interface unit displays a target temperature, an operation mode, an indoor temperature, and the like on the control screen 530 when the electric device is an air conditioner, and displays a temperature control button, a reservation button, etc. for adjusting the target temperature.
  • the user interface unit 500 converts the home screen to the service screen 540 and displays the home screen. It is also possible to display service information for the device. For example, the user interface unit 500 outputs a usage instruction program or the like to the service screen 540.
  • the button of the button unit 512 is set with information related to switching to the control screen or service screen. This can be set by the user.
  • the button unit 512 may also include a plurality of screen switching buttons for direct switching to the control screen and the service screen.
  • 24 is a still another diagram illustrating a quick panel window displayed on a home screen of a control device according to another embodiment.
  • the user interface unit 500 is disposed on the quick panel window 510 of the home screen 500a to display a notification window 510a informing of event information of the electric device.
  • the notification window 510a includes a message unit 511 displaying event information of the electric device, and a button unit 513 in which a shortcut button for receiving an operation command of the electric device is arranged.
  • the user interface unit 500 converts and displays the home screen as a chat screen and displays the corresponding electric device.
  • the information is displayed on the chat screen 520.
  • control device may grasp the state information of the electric device through the chat screen or control the electric device through the chat.
  • the user interface 500 changes and controls the operation state of the electric device when the button unit 513 of the notification window 510a is touched, and the operation state is changed. Display the current operation state of the other buttons or other notification window or change the existing notification window (510a) to display.
  • the quick panel window 510 displays the on button on the button unit 513 of the notification window 510a when the current operation state of the electric device is off, and when the off button is touched by the user, The execution command is transmitted, and a stop or pause button is displayed on the button unit 513.
  • an execution button is displayed on the button unit 513, and when the user wants to execute washing, the user moves to a separate control screen by selecting the execution button. Washing can be performed easily without the need.
  • the quick panel window displays a button of another state which can be changed from the current state.
  • 25 is a view illustrating another quick panel window displayed on a home screen of a control device according to another embodiment.
  • the user interface unit 500 is disposed on the quick panel window 510 of the home screen 500a to display a notification window 510a informing of event information of the electric device.
  • the notification window 510a includes a message unit 511 displaying event information of the electric device.
  • the user interface unit 500 checks the touch direction when the message unit 511 of the notification window 510a is touched, and the first drag when the confirmed touch direction changes from left to right.
  • the controller determines an operation command corresponding to the first drag and performs the confirmed operation command.
  • the user interface unit converts and displays the home screen on the chat screen, and displays information on the electric device on the chat screen 520.
  • the user interface unit 500 checks the touch direction when the message unit 511 of the notification window 510a is touched, and the second drag when the confirmed touch direction changes from right to left. (D2), the operation command corresponding to the second drag is confirmed, and the confirmed operation command is performed.
  • the user interface unit displays the home screen by switching to the control screen 530 and displays information on the electric device on the control screen 530.
  • the user interface unit 500 converts and displays the home screen to the service screen 540 and displays service information on the corresponding electric device. It is also possible to display. For example, the user interface unit 500 outputs a usage instruction program or the like to the service screen 540.
  • the control device stores in advance the information of the screen to be switched according to the touch direction, that is, the direction of the drag. This can be set by the user.
  • the touch direction is moved left and right, and the screen may be switched in response to the touch direction being moved up and down in the notification window.
  • FIG. 26 is a diagram illustrating another quick panel window displayed on a home screen of a control device according to another embodiment.
  • the user interface unit 500 is disposed on the quick panel window 510 of the home screen 500a to display a notification window 510a informing of event information of the electric device.
  • the notification window 510a includes a message unit 511 displaying event information of the electric device.
  • the home screen is switched to the chat screen and displayed, and information about the corresponding electric device is displayed on the chat screen ( 520).
  • the status information of the device can be checked through the chat screen, or the electronic device can be controlled through chat.
  • the user interface 500 controls the home screen when the message unit 511 of the notification window 510a is touched, but the long touch tap is longer than a predetermined time. ) And display information on the electric device on the control screen 530.
  • the user interface unit 500 extends the notification window 510a when the message unit 511 of the notification window 510a is touched but has a long tap for a predetermined time or more. It is also possible to add and display the mini control window 514 in the extended notification window (510a).
  • the mini control window 514 includes an on / off button, a start button, a stop button, a pause button, and the like for simple control of the electric device.
  • the user interface unit 500 is a mini control window on the notification window 510a when the message unit 511 of the notification window 510a is touched but has a long tap for a predetermined time or more. 514 is overlapped and displayed.
  • the mini-control window is displayed when the long tap is input.
  • the mini-control window may be displayed in response to the tap and the shake.
  • FIG. 27 is a diagram illustrating still another quick panel window displayed on a home screen of a control device according to another embodiment.
  • the user interface unit 500 is disposed on the quick panel window 510 of the home screen 500a to display a notification window 510a informing of event information of the electric device.
  • the notification window 510a includes a message unit 511 displaying event information of the electric device.
  • the user interface unit 500 converts the home screen to the chat screen 520 and displays the information. Is displayed on the chat screen 520, but overlaps the mini control window 522 in the chat window 521 in the chat screen.
  • FIG. 28 is a control flowchart of a control device according to another embodiment, which will be described with reference to FIG. 23.
  • the control device determines whether notification information has been received from at least one of the electric devices pre-registered in the home (471).
  • control device If it is determined that the notification information has been received, the control device outputs the received notification information through the quick panel window of the home screen (472).
  • outputting the notification information received through the quick panel window of the home screen may display an emoticon indicating that the notification information has been received on the top bar of the home screen, and a positive-negative popup window (positive) on the home screen 500a It is also possible to display notification information via / negative pop up: p).
  • the user moves to the chat screen 520 through the notification window 510a of the quick panel window 510 or through a positive / negative pop up (p).
  • the control device controls the display of the quick panel window 510 when the top bar 500c of the home screen is dragged, and determines whether the first area corresponding to the message part in the notification window 510a of the quick panel window 510 is selected. If it is determined that the first area is selected, a chat screen is displayed on the user interface unit (474).
  • a control screen is displayed 475 on the user interface unit.
  • the screen display is controlled based on the touched area, but it is also possible to control the screen display based on the type of touch or the touch direction.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Automation & Control Theory (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Selective Calling Equipment (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 적어도 하나의 전기기기의 동작을 제어하는 제어 장치에 있어서, 홈 스크린에 적어도 하나의 전기기기와 관련된 알림 창을 갖고, 적어도 하나의 전기기기의 동작 명령을 입력받는 사용자인터페이스부; 적어도 하나의 전기기기와 관련된 이벤트가 발생되면 알림창에 이벤트와 관련된 알림 정보가 표시되도록 제어하고 알림 정보가 선택되면 홈스크린을 채팅 스크린, 서비스 스크린 및 제어 스크린 중 어느 하나의 스크린으로 전환 제어하는 제어부를 포함한다. 본 발명은 홈 스크린의 퀵 패널창에 전기기기의 동작 이벤트를 알리는 알림창을 표시함으로써 사용자인터페이스부 상에 앱이 실행되지 않아도 전기기기의 동작 상태를 용이하게 파악할 수 있도록 한다. 또한 퀵 패널창 내의 알림창을 터치 입력함으로써 채팅 스크린, 제어 스크린, 서비스 스크린으로 용이하게 접근할 수 있다.

Description

제어 장치
본 발명은 홈 내의 기기들을 모니터링 및 제어하기 위한 제어 장치에 관한 것이다.
최근 들어, 유무선 데이터 통신 기술의 급격한 발달과 그 기반이 되는 통신 네트워크의 확대 보급은 인터넷 등과 같은 초고속 통신 서비스의 대중화를 가져왔다. 특히, 가정 내로 초고속 인터넷이 보급됨에 따라 기존에 이루어지던 PC 기반의 네트워크 구축 기술은 가정 내의 디지털 정보가전들을 원격지에서 제어할 수 있도록 하기 위한 홈 네트워크 기술로 발전하고 있다.
홈 네트워크 시스템은 가정 내에 설치되는 디지털 가전기기, 센서, 조명기기, 냉난방기기, 가스 기기 등을 근거리 유선 네트워크 또는 무선 네트워크로 연결하여 사용자가 원하는 기기들을 시간과 장소에 구애받지 않고 제어할 수 있도록 하는 시스템이다.
이러한 홈 네트워크 시스템은 통상, 마스터의 기능을 수행하는 홈 서버(또는 홈 모니터링 게이트웨이), 홈 서버에 의하여 모니터링 및 제어되는 다수의 홈 네트워크 기기(이하, '제어대상 기기'로 칭함), 및 홈 서버와의 연결만을 통해 댁 내부 또는 외부에서 다수의 제어대상 기기들을 모니터링 및 제어하는 제어기기를 포함한다.
이때 홈 서버는 가정용 게이트웨이(RG: Residential Gateway)나 월 패드(Wall Pad) 상에서 구현되는 것이 일반적이고, 제어기기는 월 패드, TV, 휴대폰, 컴퓨터 등에서 구현되는 것이 일반적이며, 홈 서버와 제어기기를 하나의 장치에서 통합적으로 구현 가능하다. 예를 들면, TV가 홈 서버의 역할과 함께 제어 장치의 역할을 수행할 수 있다.
이와 같은 홈 네트워크 시스템에서 홈 서버는, 다양한 물리매체(예를 들어 전력선, RS-232 등의 직렬통신, 이더넷 등)를 통해 댁내의 홈 네트워크에 연결되는 제어대상 기기들, 예컨대 TV, 냉장고, 전등, 전자레인지, 센서, 보일러, 세탁기 등을 자동적으로 인식할 수 있으며, 인식된 홈 네트워크 기기를 화면에 표시하여 사용자가 원하는 제어대상 기기를 제어할 수 있도록 한다.
그리고, 제어기기는 홈 서버와의 통신을 통하여 다수의 제어대상 기기에 대한 모니터링 및 제어를 수행한다.
이러한 홈 네트워크 시스템의 홈 서버는 주로 인터넷망으로 구현되는 외부 네트워크와 데이터를 송수신한다.
사용자는 PC, 노트북, PDA, 스마트폰, 태블릿 PC, TV, 웨어러블 디바이스, 각종 리모트 컨트롤러 등과 같은 제어 장치를 사용하여 홈 내부 또는 외부에서 홈서버로 접속한 후 가정 내부의 홈 네트워크망에 연결된 복수개의 가전기기를 액세스한다.
또한 전기기기가 외부 서버에 등록되어 있다면, 홈 서버와 무관하게 외부 서버를 통해 외부 서버에 등록된 복수의 전기기기를 액세스 한다.
이러한 제어 장치를 이용하여 댁 내의 제어 대상 기기들을 모니터링 및 제어할 경우, 제어 대상 기기들을 선택하고 선택된 제어 대상 기기와의 네트워크 접속 및 인증 후 제어 대상 기기를 모니터링 또는 제어해야 하기 때문에 그 사용이 복잡하다는 문제가 있었다.
예를 들어, 공기조화를 위한 에어컨 또는 공기청정기, 습도 조절을 위한 가습기 등의 가전기기는 주로 같이 동작 제어되는 경우가 많은데, 이를 위해서 사용자는 매번 각 가전기기에 따로 동작제어 명령을 발령해야 하므로 번거롭고 비효율적이었다.
일 측면은 전기기기의 동작 이벤트를 알리는 알림창을 갖고, 알림창이 터치 입력되면 전기기기와의 채팅을 위한 채팅부 스크린을 표시하는 제어 장치를 제공한다.
다른 측면은 홈 네트워크를 위한 앱이 실행되면 홈 내 전기기기의 아이콘과, 전기기기의 동작 상태를 표시하는 말풍선과, 아이콘이 표시된 스크린을 좌우로 움직이기 위한 이동 버튼을 가지는 오버뷰부를 포함하는 제어 장치를 제공한다.
또 다른 측면은 홈 네트워크를 위한 앱이 실행되면 홈 내 전기기기를 미리 설정된 동작 명령에 기초하여 통합 제어하기 위한 복수 버튼을 가지는 마스터 키부를 포함하는 제어 장치를 제공한다.
또 다른 측면은 홈 네트워크를 위한 앱이 실행되면 채팅어가 미리 설정된 단축 버튼을 이용하여 홈 내 전기기기와 채팅을 수행하는 채팅부를 포함하는 제어 장치를 제공한다.
일 측면에 따른 제어 장치는 적어도 하나의 전기기기의 동작을 제어하는 제어 장치에 있어서, 홈 스크린에 적어도 하나의 전기기기와 관련된 알림 창을 갖고, 적어도 하나의 전기기기의 동작 명령을 입력받는 사용자인터페이스부; 적어도 하나의 전기기기와 관련된 이벤트가 발생되면 알림창에 이벤트와 관련된 알림 정보가 표시되도록 제어하고 알림 정보가 선택되면 홈스크린을 채팅 스크린, 서비스 스크린 및 제어 스크린 중 어느 하나의 스크린으로 전환 제어하는 제어부를 포함한다.
알림창은, 발생된 이벤트에 대한 정보를 알리는 메시지부 및 스크린 전환을 위한 버튼부를 포함하고, 제어부는, 메시지부가 선택되면 홈 스크린을 채팅 스크린으로 전환 제어하고, 버튼부가 선택되면 홈 스크린을 적어도 하나의 전기기기를 제어하기 위한 제어 스크린으로 전환 제어한다.
알림창은, 이벤트에 대한 정보를 알리는 메시지부 및 스크린 전환을 위한 버튼부를 포함하고, 제어부는, 메시지부가 선택되면 홈 스크린을 채팅 스크린으로 전환 제어하고, 버튼부가 선택되면 홈 스크린을 적어도 하나의 전기기기에 대한 서비스 정보를 제공 위한 서비스 스크린으로 전환 제어한다.
알림창은, 적어도 하나의 전기기기의 현재 동작 상태를 표시하고, 적어도 하나의 전기기기의 동작 명령을 입력받기 위한 버튼부를 포함하고, 제어부는, 버튼부가 선택되면 현재 동작 상태를 다른 동작 상태로 변경 제어한다.
동작 상태는, 시작 상태 및 정지 상태를 포함한다.
제어부는 알림창이 터치 입력되면 터치 방향을 확인하고, 확인된 터치 방향에 기초하여 홈 스크린을 채팅 스크린, 서비스 스크린 및 제어 스크린 중 어느 하나의 스크린으로 전환 제어한다.
제어부는 터치 방향이 제 1방향이면 홈 스크린을 채팅 스크린으로 전환 제어하고, 터치 방향이 제 2방향이면 홈 스크린을 제어 스크린으로 전환 제어한다.
제어부는 알림창이 터치 입력되면 터치 시간을 확인하고, 확인된 터치 시간이 일정 시간 이상이면 홈 스크린을 제어 스크린으로 전환 제어한다.
제어부는 알림창이 터치 입력되면 터치 시간을 확인하고, 확인된 터치 시간이 일정 시간 이상이면 알림 창이 확장되도록 제어하고 확장된 알림 창의 영역 내에 미니 제어창이 표시되도록 제어한다.
제어부는 알림창이 터치 입력되면 터치 시간을 확인하고, 확인된 터치 시간이 일정 시간 이상이면 알림 창 상에 미니 제어창이 오버랩되어 표시되도록 제어한다.
제어부는 알림창이 터치 입력되면 홈 스크린을 채팅 스크린으로 전환 제어하고, 채팅 스크린 상에 미니 제어창이 오버랩되어 표시되도록 제어한다.
미니 제어창은, 적어도 하나의 전기기기의 동작 명령을 입력받기 위한 온오프 버튼, 시작 버튼, 정지 버튼 및 일시 정지 버튼 중 적어도 하나의 버튼을 포함한다.
미니 제어창은, 알림창이 선택되면 홈 스크린을 채팅 스크린으로 전환 제어하고, 채팅 스크린 내에 이벤트에 대응하는 동작을 수행하기 위한 단축버튼이 표시되도록 제어한다.
다른 측면에 따른 제어 장치는 적어도 하나의 전기기기의 동작을 제어하는 제어 장치에 있어서, 홈 스크린을 갖고 적어도 하나의 전기기기의 동작 명령을 입력받는 사용자인터페이스부; 적어도 하나의 전기기기 동작 중 이벤트가 발생하면 발생된 이벤트에 대한 정보를 알리는 팝업창이 홈스크린 상에 표시되도록 제어하는 제어부를 포함한다.
팝업창은, 포지티브/네거티브 팝업창을 포함한다.
사용자인터페이스부는, 홈 스크린에 숨김 상태로 배치된 퀵 패널창과, 적어도 하나의 전기기기의 동작 상태를 표시하는 알림 창을 더 포함하고, 제어부는 홈스크린의 상단이 드래그되면 퀵 패널창이 표시되도록 제어하고, 적어도 하나의 전기기기의 동작 중 이벤트가 발생되면 사익 퀵 패널창에 알림창이 표시되도록 제어한다.
일 측면에 따르면, 홈 스크린의 퀵 패널창에 전기기기의 동작 이벤트를 알리는 알림창을 표시함으로써 사용자인터페이스부 상에 앱이 실행되지 않아도 전기기기의 동작 상태를 용이하게 파악할 수 있도록 한다.
또한 퀵 패널창 내의 알림창을 터치 입력함으로써 채팅 스크린, 제어 스크린, 서비스 스크린으로 용이하게 접근할 수 있다.
또한 사용자 인터페이스부 상에 앱이 실행되지 않아도 팝업 창을 통해서 전기기기의 동작상태를 표시하기 때문에 전기기기의 동작 상태를 쉽고 빠르게 알 수 있다.
또한 홈 내 복수 전기기기를 아이콘으로 표시함으로써 식별이 용이하도록 하고, 아이콘 주변에 전기기기의 동작 상태를 말풍선으로 표시함으로써 홈 내의 전기기기의 동작 상태를 용이하게 확인할 수 있다. 즉 사용자에게 편리함을 제공할 수 있다.
또한 아이콘 터치만으로 전기기기의 동작 상태를 변경할 수 있기 때문에, 전기기기의 동작을 용이하게 제어할 수 있고, 마스터 키의 복수 버튼을 이용하여 전기기기들을 동시에 통합적으로 제어할 수 있어 전기기기의 제어의 편의성 및 효율성을 향상시킬 수 있고, 전기기기의 상태가 변경되는 이벤트를 팝업 창으로 출력함으로써 전기기기의 상태 정보를 신속하고 용이하게 확인할 수 있다.
또한 채팅부의 단축 버튼을 이용하여 적어도 하나의 전기기기로 동작 명령을 간단하고 용이하게 전송할 수 있다.
도 1은 일 실시예에 따른 제어 장치와 통신하는 홈 네트워크 시스템의 예시도이다.
도 2는 일 실시예에 따른 제어 장치와 통신하는 홈 네트워크 시스템의 구성도이다.
도 3은 일 실시예에 따른 제어 장치의 대시보드 스크린과 플러그인 스크린의 예시도이다.
도 4 내지 도 6은 일 실시예에 따른 제어 장치의 대시보드 스크린 내 오버뷰부의 실행 예시도이다.
도 7은 일 실시예에 따른 제어 장치의 대시보드 스크린 내 마스터 키부의 예시도이다.
도 8은 일 실시예에 따른 제어 장치의 대시보드 스크린 내 마스터 키부의 실행 예시도이다.
도 9는 일 실시예에 따른 제어 장치의 제2플러그인 스크린 내 마스터 키부 설정 창(318)의 예시도이다.
도 10 및 도 11은 일 실시예에 따른 제어 장치의 제2플러그인 스크린 내 마스터 키부의 설정 예시도이다.
도 12a 내지 도 18은 일 실시 예에 따른 제어 장치의 대시보드 스크린 내 채팅부의 실행 예시도이다.
도 19는 다른 실시예에 따른 제어 장치의 제어 구성도이다.
도 20은 다른 실시예에 따른 제어 장치의 홈 스크린의 표시 예시도이다.
도 21은 다른 실시예에 따른 제어 장치의 홈 스크린에 표시되는 팝업창의 예시도이다.
도 22 내지 도 27은 다른 실시예에 따른 제어장치의 사용자 인터페이스부의 홈스크린에 표시되는 퀵 패널창의 동작 예시도이다.
도 28은 다른 실시예에 따른 제어 장치의 제어 순서도이다.
이하에서는 첨부도면을 참조하여 본 발명에 대해 상세히 설명한다.
도 1은 실시예에 따른 제어 장치와 통신하는 홈 네트워크 시스템의 예시도이고, 도 2는 실시예에 따른 제어 장치와 통신하는 홈 네트워크 시스템의 구성도로, 제어 장치와 통신하는 홈 네트워크 시스템은 복수의 전기기기(100a 내지 100h) 및 네트워크를 포함한다.
전기기기(100a 내지 100h)는 미리 정해진 고유 기능을 수행하는 기기로, 부가 기능으로 네트워크를 통해 제어 장치와 통신을 수행함으로써 동작 상태에 대응하는 동작 정보를 제어 장치로 전송하고, 제어 장치에서 전송된 동작 명령에 대응하는 동작을 수행한다. 여기서 제어 장치(300)는 모바일 장치를 포함한다.
이러한 전기기기는 홈 내에 배치되는 청소 로봇(100a), 조명기기(100b), 세탁기(100c), 공기 조화기(100d), 텔레비전(100e), 조리기기(100f), 냉장고(100g), 식기 세척기(100h)와 같이 휴대가 불가능한 가전기기를 포함하고, 이 뿐만 아니라 노트북, PC, 태플릿과 같이 홈 내에서 사용되는 단말기 등을 더 포함하는 것도 가능하며, 카메라 및 마이크로 폰 등이 마련된 보안 장치를 더 포함하는 것도 가능하다.
네트워크는(200)는 홈 내에서 사용되는 모든 전기, 전자 기기들이 하나의 시스템으로 연결, 쌍방향 통신이 가능하도록 하는 홈 네트워크이다.
좀 더 구체적으로 네트워크(200)는 유/무선 인터넷을 통해 복수의 전기기기와 제어 장치(300) 사이에 정보를 공유할 수 있도록 한다.
홈 내 정보 전송방식은 유선과 무선으로 나눌 수 있는데, 유선형태의 대표적인 것으로 기존 전화선을 이용한 홈 PNA(Home Phoneline Networking Alliance), IEEE 1394, 전력선 등을 들 수 있고, 무선형태로 홈 RF(Home Radio Frequency), 블루투스(Bluetooth), IrDA(Infrared Data Association) 및 무선 LAN(Wifi), Zigbee, Z-wave, 근거리 통신(NFC 등) 등이 있다.
네트워크(200)는 복수의 전기기기를 관리 및 제어하는 홈 서버를 포함한다.
이러한 홈 서버는 가정용 게이트웨이(RG: Residential Gateway)나 월 패드(Wall Pad) 또는 TV 상에서 구현 가능하다.
홈 서버는 홈 내 각종 전기기기 또는 각종 제어 장치 내부에 소프트웨어로 구현 가능하다. 또한 홈 서버는 홈 내 각종 전기기기 또는 각종 모바일 장치와 하드웨어로 결합되는 것도 가능하다.
즉 홈 서버는, 홈 내 복수 전기기기의 동작 상태를 표시하고, 사용자로부터 복수 전기기기 중 적어도 하나의 전기기기의 동작 명령을 입력받으며, 적어도 하나의 전기기기의 동작 명령이 입력되면 적어도 하나의 전기기기로 동작 명령을 전송한다.
제어 장치(300)는 유무선 통신을 통해 복수의 전기기기 중 적어도 하나의 전기기기와 통신을 수행한다.
아울러, 제어 장치(300)는 홈 내 복수의 전기기기와 각각 통신을 수행하는 것도 가능하고, 홈 서버와의 통신을 통해 복수 전기기기의 정보를 송수신하는 것도 가능하다.
이러한 제어 장치(300)는 홈 내 네트워크와의 통신을 수행하여 홈 내 복수 전기기기를 모니터링하고 제어하기 위한 앱을 포함하고, 사용자에 의해 앱이 실행되면 홈 내 복수의 전기기기 중 적어도 하나의 전기기기의 동작 상태를 출력하고, 사용자로부터 동작 명령을 입력받고 입력된 동작 명령에 기초하여 적어도 하나의 전기기기의 동작을 제어한다.
제어 장치(300)는 스마트 폰, 태블릿 PC, 노트북 등과 같이 홈 외부로 이동 가능한 단말 장치 또는 TV, 각종 리모트 컨트롤러 등과 같이 홈 내부에 고정된 장치로, 컨텐츠 제공 업체에서 제공하는 앱의 설치가 가능한 단말 장치일 수 있고, 제조 업체에서 제조 시 앱 또는 소프트웨어, 펌 웨어를 내장한 장치일 수 있다.
도 2에 도시된 바와 같이 제어 장치(300)는 사용자 인터페이스부(310), 제어부(320), 저장부(330) 및 통신부(340)를 포함한다.
사용자 인터페이스부(310)는 홈 내 배치된 복수의 전기기기 중 미리 등록된 전기기기의 동작 상태를 출력하고 미리 등록된 전기기기 중 적어도 하나의 전기기기의 동작 명령을 입력받는다.
이러한 사용자 인터페이스부(310)는, 미리 등록된 전기기기에 대한 동작 상태를 표시하기 위한 표시부와, 사용자로부터 동작 명령을 입력받기 위한 입력부를 포함한다.
여기서 입력부는 터치 방식으로 동작 명령을 입력받는 터치 패널로, 사용자 인터페이스부(310)는 표시부의 디스플레이 패널과 입력부의 터치 패널이 일체로 형성된 터치 스크린으로 구현 가능하다.
또한, 입력부의 입력 방식은 터치 패널 외에도 전자펜, 포인팅 디바이스(마우스 등), 키보드 등의 입력이 될 수 있다. 이 경우에는 표시부의 디스플레이 패널과 입력부가 별도로 형성될 수 있으나, 터치 방식의 전자펜의 경우 등에는 일체로 형성될 수도 있다.
사용자 인터페이스부(310)는 각종 앱의 아이콘이 표시되는 홈 스크린을 포함한다.
사용자 인터페이스부(310)는 홈 스크린에 전기기기를 모니터링 및 제어하기 위한 앱의 아이콘을 표시하고, 사용자에 의해 앱의 아이콘이 선택되면 앱 선택 신호를 제어부(320)에 전송하고, 제어부(320)의 명령에 기초하여 앱 실행에 대응하는 스크린을 표시한다. 이러한 사용자 인터페이스부의 스크린 표시 구성은 추후 설명하도록 한다.
제어부(320)는 앱이 실행되면 미리 등록된 전기기기의 동작 상태가 출력되도록 사용자 인터페이스부(310)를 제어하고, 사용자 인터페이스부(310)에 입력된 동작 명령에 기초하여 적어도 하나의 전기기기의 동작 명령에 대응하는 신호의 전송을 제어한다.
이러한 제어부(320)의 제어 구성은, 추후 사용자 인터페이스부의 스크린 표시 구성과 연관시켜 설명하도록 한다.
저장부(330)는 사용자에 의해 등록된 홈 내 전기기기의 식별 정보와, 미리 등록된 전기기기를 모니터링하고 제어하기 위한 앱을 저장한다.
저장부(330)는 마스터 키부의 버튼별 미리 등록된 전기기기의 동작 명령을 저장하고, 채팅부의 단축 버튼별 전기기기의 동작 명령을 저장한다.
통신부(340)는 미리 등록된 전기기기와 통신을 수행한다.
아울러 통신부(340)는 홈 내 홈 서버와 통신을 수행하는 것도 가능하다.
도 3 내지 도 20을 참조하여 사용자 인터페이스부(310)를 구체적으로 설명한다. 아울러 제어부(320)의 제어 동작을 함께 설명한다.
도 3은 실시예에 따른 제어 장치의 대시보드 스크린과 플러그인 스크린의 예시도이다.
사용자 인터페이스부(310)는 앱이 실행되면 대시보드 스크린을 최초 스크린(310a)으로 표시한다.
여기서 대시보드 스크린(310a)은 홈 네트워크를 통해 연결된 복수 전기기기에 대한 기본 정보 및 동작을 제어하기 위한 정보 등이 표시되는 스크린이다.
사용자 인터페이스부(310)는 대시보드 스크린(310a)에 슬라이딩 터치가 입력되면 대시보드 스크린(310a)을 플러그인(Plug-in) 스크린(310b 또는 310c)으로 스크린을 전환한다.
즉 사용자 인터페이스부(310)는 대시보드 스크린(310a)에 좌측에서 우측으로 슬라이딩되는 슬라이딩 터치가 입력되면 전기기기를 등록하기 위한 기기 등록 항목을 표시하는 제1플러그인 스크린(310b)을 표시하고, 대시보드 스크린(310a)에 우측에서 좌측으로 슬라이딩되는 슬라이딩 터치가 입력되면 전기기기의 서비스 및 설정을 위한 서비스 항목을 표시하는 제2플러그인 스크린(310c)을 표시한다.
아울러, 사용자 인터페이스부는 제1플러그인 스크린이 표시된 상태에서 우측에서 좌측으로 슬라이딩되는 슬라이딩 터치가 입력되면 대시보드 스크린(310a)을 표시한다.
본 실시 예에서 플러그인 스크린의 개수는 두 개이지만 하나 또는 셋 이상일 수 있다.
제어부(320)는 현재 표시되는 스크린을 확인하고, 우측에서 좌측으로 슬라이딩되는 슬라이딩 터치가 입력되면 현재 스크린의 우측에 배치된 스크린으로 표시되도록 스크린을 전환 제어하고, 좌측에서 우측으로 슬라이딩되는 슬라이딩 터치가 입력되면 현재 스크린의 좌측에 배치된 스크린이 표시되도록 스크린을 전환 제어한다.
예를 들어 제어부(320)는 대시 보드 스크린(310a)을 표시하고 있는 상태에서 슬라이딩 터치가 입력되면 입력된 슬라이딩 터치 방향을 확인하고 확인된 슬라이딩 터치 방향이 좌측 방향에서 우측 방향이라고 판단되면 제1플러그인 스크린(310b)으로의 전환을 제어하고, 확인된 슬라이딩 터치 방향이 우측 방향에서 좌측 방향이라고 판단되면 제2플러그인 스크린(310c)으로의 전환을 제어한다.
대시보드 스크린(310a)은 미리 등록된 전기기기의 리스트 정보 및 동작 정보를 표시하는 오버뷰부(311)와, 미리 등록된 전기기기의 동작을 신속하고 용이하게 제어하기 위한 실행 명령 정보 및 모니터링 정보를 표시하는 위젯부(312, 313, 314)를 포함한다.
또한 대시보드 스크린(310a)은 대시보드 스크린에서 플러그인 스크린으로 바로 전환하거나, 플러그인 스크린에서 대시보드 스크린으로 바로 전환하거나, 하나의 플러그인 스크린에서 다른 하나의 플러그인 스크린으로 바로 전환하기 위한 스크린 전환부(315)를 더 포함한다.
여기서 바로 전환하는 것은, 슬라이딩 터치가 아니라 싱글 터치에 의해 스크린을 전환하는 것을 포함한다.
즉 스크린 전환부(315)는 복수 스크린 개수와 동일한 복수의 페이지 버튼을 포함하고, 이 복수의 페이지 버튼의 배열은 복수 스크린의 배열과 각각 대응하며, 현재 표시된 스크린의 위치와 대응하는 페이지 버튼은 나머지 페이지 버튼과 서로 다르게 표시된다. 이를 통해 사용자는 현재 표시된 스크린의 위치를 인식할 수 있다.
아울러, 복수 스크린의 배열 정보는 미리 설정되어 있으며, 스크린 간의 배열은 사용자에 의해 변경 가능하다.
예를 들어, 본 실시 예의 사용자 인터페이스부는 대시보드 스크린, 제1플러그인 스크린 및 제2플러그인 스크린 등 총 세 개의 스크린을 포함하고, 총 세 개의 스크린의 배열은 대시 보드 스크린을 기준으로 좌측에 제1플러그인 스크린이 배치되고 우측에 제2플러그인 스크린이 배치된다.
이에 따라 스크린 전환부(315)의 페이지 버튼은 총 세 개를 포함하고, 세 개의 페이지 버튼 중 가장 좌측에 배치된 페이지 버튼은 제1플러그인 스크린(310b)과 연동하며, 중간에 배치된 페이지 버튼은 대시보드 스크린과 연동하고, 가장 우측에 배치된 페이지 버튼은 제2플러그인 스크린과 연동한다.
가장 좌측에 배치된 페이지 버튼이 터치되면 제1플러그인 스크린(310b)이 사용자 인터페이스부에 표시되고, 이때 가장 좌측에 배치된 페이지 버튼은 나머지 버튼과 다른 색상을 가진다.
그리고 가운데 배치된 페이지 버튼이 터치되면 대시보드 스크린(310a)이 사용자 인터페이스부에 표시되고, 이때 가운데 배치된 페이지 버튼은 나머지 버튼과 다른 색상을 가진다.
또한 가장 우측에 배치된 페이지 버튼이 터치되면 제2플러그인 스크린(310c)이 사용자 인터페이스부에 표시되고, 이때 가장 우측에 배치된 페이지 버튼은 나머지 버튼과 다른 색상을 가진다.
즉 제어부(320)는 스크린 전환부(315)의 복수 페이지 버튼 중 터치 입력된 페이지 버튼을 확인하고, 확인된 페이지 버튼과 대응하는 스크린을 확인한 후 확인된 스크린이 사용자 인터페이스부(310)에 표시되도록 제어한다.
제1 플러그인 스크린(310b)과 제2플러그인 스크린(310c)은 주 기능의 설정 정보를 변경하거나, 부가적인 기능을 설정하거나, 서비스를 제공 받기 위한 스크린이다.
좀 더 구체적으로, 제1 플러그인 스크린(310b)은 미리 등록된 전기기기에 대한 등록 정보를 가지는 기기 확인 버튼과, 새로운 기기를 등록하기 위한 등록 설정 버튼(316)을 포함한다.
제2플러그인 스크린(310c)은 위젯부의 마스터 키부, 채팅부, 홈뷰부의 설정을 변경하기 위한 설정 변경 버튼과, 미리 등록된 전기기기에 대한 서비스를 제공받기 위한 서비스 버튼과, 미리 등록된 전기기기별 관리 버튼(317)을 포함한다.
도 4 내지 도 6은 실시예에 따른 제어 장치의 대시보드 스크린 내 오버뷰부의 실행 예시도로, 이를 참조하여 오버뷰부(311)를 구체적으로 설명한다.
도 4에 도시된 바와 같이, 오버뷰부(311)는 미리 등록된 전기기기의 리스트를 표시하되, 미리 등록된 전기기기의 아이콘(A1)들을 표시한다.
또한 오버뷰부(311)는 미리 등록된 전기기기의 아이콘들이 배치된 스크린을 이동시키는 이동 버튼(A2)을 더 포함한다.
즉 이동 버튼(A2)은 오버뷰부 내 하나의 스크린에 표시되지 못하고 숨겨져 있는 나머지 전기기기의 아이콘을 표시하기 위해 현재 표시된 아이콘을 이동시켜 아이콘의 표시 위치를 변경하기 위한 버튼이다.
이때 이동 버튼(A2)은 미리 등록된 전기기기의 아이콘 수가 하나의 스크린에 표시 가능한 일정 수 미만이면 숨김 상태가 되고, 미리 등록된 전기기기의 아이콘 수가 하나의 스크린에 표시 가능한 일정 수 이상이면 표시 상태가 된다.
이동 버튼(A2)은 오버뷰부(311)에 현재 표시된 현재 스크린에서 제1방향으로 연장된 스크린으로의 이동을 지시하는 제1방향 버튼(<)과, 현재 스크린에서 제2방향으로 연장된 스크린으로의 이동을 지시하는 제2방향 버튼(>)을 포함한다. 여기서 제2방향은 제1방향과 반대 방향이다.
오버뷰부(311)는 제1방향 버튼(<)이 선택되면 현재 스크린 내 일정 개수의 전기기기의 아이콘들을 제2방향으로 한 칸씩 시프트시켜 아이콘들을 재배치시키고, 제2방향 버튼(>)이 선택되면 현재 스크린 내 일정 개수의 전기기기의 아이콘들을 제1방향으로 한 칸씩 시프트시켜 아이콘들을 재배치시킨다.
이때 오버뷰부(311)는 제1방향 버튼(<)이 선택되면 스크린의 좌측 최외곽 칸에 새로운 전기기기의 아이콘을 재배치하고, 우측 최외곽 칸에 배치되었던 전기기기의 아이콘을 사라지게 하고, 제2방향 버튼(>)이 선택되면 우측 최외곽 칸에 새로운 전기기기의 아이콘을 재배치하고, 좌측 최외곽 칸에 배치되었던 전기기기의 아이콘을 사라지게 한다.
또한 오버뷰부(311)는 제1방향 버튼(<)이 선택되면 현재 스크린의 좌측 스크린을 표시하여 좌측 스크린에 배치된 전기기기의 아이콘을 표시하고, 제2방향 버튼(>)이 선택되면 현재 스크린의 우측 스크린을 표시하여 우측 스크린에 배치된 전기기기의 아이콘을 표시하는 것도 가능하다.
도 4에 도시된 바와 같이, 오버뷰부(311)의 현재 스크린에 청소기, 조명기기, 세탁기, 공기 조화기의 아이콘이 각각 배치되어 있는 상태에서, 제2방향 버튼(>)이 터치되면 현재 스크린의 우측 스크린에 배치된 공기 조화기2, 청소 로봇2 및 텔레비전의 아이콘을 표시한다.
그리고 공기 조화기2, 청소 로봇2 및 텔레비전의 아이콘을 표시하고 있는 상태에서 제1방향 버튼(<)이 터치되면 현재 표시된 스크린의 좌측에 배치된 스크린으로 이동하고, 이 스크린에 배치된 청소기, 조명기기, 세탁기, 공기 조화기의 아이콘을 다시 표시한다.
제어부(320)는 오버뷰부(311)의 이동 버튼이 터치 입력되어도 위젯부(312, 313, 314)의 스크린이 현재 상태로 유지되도록 사용자 인터페이스부(310)를 제어한다.
오버뷰부(311)는 미리 등록된 전기기기의 현재의 동작 상태인 온오프 상태 및 진행 상태를 안내하는 말풍선(speech bubble: A3)을 더 포함한다. 이러한 말풍선(A3)은 사용자가 인식하기 용이하도록 해당 아이콘(A1)의 주변에 배치한다.
말풍선(A3)은 제어부(320)의 명령에 기초하여 전기기기의 동작 상태를 나타내는 안내문을 변경한다.
즉 제어부(320)는 오버뷰부(311)에 표시된 아이콘들 중 어느 하나의 아이콘이 터치 입력되면 터치 입력된 아이콘에 대응하는 전기기기의 동작 상태를 변경하고, 변경된 동작 상태가 말풍선으로 표시되도록 사용자 인터페이스부(310)를 제어한다.
예를 들어 제어부(320)는 공기 조화기가 온 상태일 때 공기 조화기의 아이콘이 터치 입력되면 공기 조화기를 오프 제어하고, 공기 조화기의 오프 상태가 말풍선에 표시되도록 사용자 인터페이스부(310)를 제어하며, 공기 조화기가 오프 상태일 때 공기 조화기의 아이콘이 터치 입력되면 공기 조화기를 온 제어하고 공기 조화기의 온 상태가 말풍선에 표시되도록 사용자 인터페이스부(310)를 제어한다.
도 5에 도시된 바와 같이, 오버뷰부(311)는 청소로봇, 조명기기, 세탁기, 공기 조화기의 아이콘이 각각 표시된 상태에서, 온 동작 중인 공기 조화기가 터치되면 공기 조화기의 동작이 '오프(OFF)'됨을 말풍선을 통해 안내하고, 오프 중인 청소 로봇이 터치되면 청소 로봇이 '청소 중(Cleaning)'임을 말풍선을 통해 안내한다.
또한 제어부(320)는 세탁기가 온 상태일 때 세탁기의 아이콘이 터치 입력되면 세탁기의 운전 진행 상태를 확인하고 확인된 세탁기의 운전 진행 상태가 말풍선에 표시되도록 사용자 인터페이스부(310)를 제어한다.
도 6에 도시된 바와 같이, 오버뷰부(311)는 청소로봇, 조명기기, 세탁기, 공기 조화기의 아이콘이 각각 표시된 상태에서, 온 동작 중인 세탁기가 터치되면 세탁기의 진행 상황이 '1 시간 10분 경과'됨을 말풍선을 통해 안내한다.
아울러 제어부(320)는 미리 등록된 전기기기의 업데이트, 에러 및 예약 상태 중 적어도 하나의 상태를 확인하고, 확인된 상태 정보가 말풍선에 표시되도록 사용자 인터페이스부를 제어하는 것도 가능하다.
즉 말풍선(A3)은 해당 전기기기의 업데이트 정보, 에러 정보, 예약 정보 중 어느 하나의 정보를 안내한다.
또한 제어부(320)는 위젯부 중 마스터 키부(312)에 터치 입력 및 채팅부(313)의 채팅 명령 입력에 대응하여 적어도 하나의 전기기기의 동작 상태가 변경되면 변경된 동작 상태가 말풍선에 표시되도록 사용자 인터페이스부(310)를 제어한다.
사용자 인터페이스부(310)의 위젯부는, 미리 등록된 전기기기를 미리 설정된 동작 명령에 기초하여 동작시키기 위한 마스터 키부(312)와, 미리 등록된 전기기기 중 적어도 하나의 전기기기와 채팅을 수행하기 위한 채팅부(313)와, 홈 내 영상을 출력하는 홈뷰부(314)를 포함한다. 이를 도 7 및 도 8을 참조하여 설명한다.
도 7은 실시예에 따른 제어 장치의 대시보드 스크린 내 마스터 키부의 예시도이다.
마스터 키부(312)는 복수의 전기기기의 동작을 통합적으로 제어하기 위한 버튼을 포함한다. 이 버튼은 전기기기별 미리 동작 명령을 포함한다.
마스터 키부(312)의 버튼은, 사용자의 스케줄에 기초하여 설정 가능하다.
도 7에 도시된 바와 같이 마스터 키부(312)는 외출 버튼(B1), 귀가 버튼(B2), 취침 버튼(B3)을 포함한다.
제어부(320)는 사용자 인터페이스부의 마스터 키부(312)가 터치되면 터치 입력된 버튼을 확인하고 확인된 버튼에 대응하는 전기기기별 미리 설정된 동작 명령을 미리 등록된 전기기기에 각각 전송함으로써 미리 설정된 동작명령에 기초하여 미리 등록된 전기기기가 동작하도록 한다. 이때 사용자 인터페이스부(310)는 미리 등록된 전기기기의 동작 상태를 말풍선을 통해 안내한다.
마스터 키부(312)의 통합 제어를 위한 버튼은 추가 가능하다. 이는 제2플러그인 스크린의 '마스터 키 설정 버튼'을 통해 추가 가능하다.
아울러 마스터 키부 내에 '마스터 키 설정 버튼'을 배치시키는 것도 가능하다.
또한 마스터 키부(312)의 버튼별 전기기기의 동작 명령은 변경 가능하다. 이 또한 제2플러그인 스크린의 '마스터 키 설정 버튼'을 통해 변경 가능하다.
아울러, 마스터 키부(312)에 설정된 버튼을 삭제하는 것도 가능하다. 이 또한 제2플러그인 스크린의 '마스터 키 설정 버튼'을 통해 삭제 가능하다.
도 8은 실시예에 따른 제어 장치의 대시보드 스크린 내 마스터 키부의 실행 예시도이다.
도 8에 도시된 바와 같이, 오버뷰부(311)는 청소로봇, 조명기기, 세탁기, 공기 조화기의 아이콘을 표시하고, 각 아이콘 주변에 각 전기기기의 동작 상태를 안내하는 말풍선을 표시한다.
외출 버튼에 대응하는 전기기기별 동작 명령이 조명기기 오프, 공기 조화기 오프이고, 귀가 버튼에 대응하는 전기기기별 동작 명령이 조명기기 온, 공기 조화기 온이라고 가정한다.
사용자 인터페이스부(310)는 청소로봇의 동작 상태가 오프, 조명기기의 동작 상태가 오프, 세탁기의 동작 상태가 온, 공기 조화기의 동작 상태가 온 상태에서 마스터 키부(312)의 외출 버튼(Going Out, B1)이 터치(T)되면 청소로봇 및 조명 기기의 동작 상태를 오프로 유지시키고, 세탁기의 운전이 중간에 멈추는 것을 방지하기 위해 세탁기의 동작 상태를 온 상태로 유지시키며, 공기 조화기의 동작 상태는 오프시키고 각 전기기기의 동작 상태를 말풍선을 통해 안내한다.
사용자 인터페이스부(310)는 청소로봇의 동작 상태가 오프, 조명기기의 동작 상태가 오프, 세탁기의 동작 상태가 오프, 공기 조화기의 동작 상태가 오프 상태에서 마스터 키부(312)의 귀가 버튼(Coming Home, B2)이 터치(T)되면 청소로봇 및 세탁기의 동작 상태를 오프로 유지시키고, 조명 기기 및 공기 조화기의 동작 상태는 온시키고 각 전기기기의 동작 상태를 말풍선을 통해 안내하며, 이 상태에서 사용자가 공기 조화기의 아이콘을 터치(T)하면 공기 조화기의 동작을 오프 시키고 이를 말풍선을 통해 안내한다.
도 9는 실시예에 따른 제어 장치의 제2플러그인 스크린 내 마스터 키부 설정 스크린(318)의 예시도이고, 도 10 및 도 11은 실시예에 따른 제어 장치의 제2플러그인 스크린 내 마스터 키부의 설정 예시도이다.
사용자 인터페이스부(310)는 제2플러그인 스크린 내 마스터 키부 설정 버튼이 터치되면 대시보드 스크린을 마스터키부 설정 스크린(318)으로 전환한다.
도 9에 도시된 바와 같이, 마스터 키부 설정 스크린(318)은 미리 등록된 전기기기의 아이콘(D1)과, 전기기기의 아이콘 리스트를 이동시키기 위한 이동 버튼(D2)과, 전기기기별 미리 설정된 동작 명령을 안내하는 말풍선(D3)과, 미리 등록된 복수 버튼(D4)과, 복수 버튼 각각의 편집 버튼(D5)과, 통합 제어를 위한 버튼을 추가하기 위한 추가버튼(D6)을 포함한다.
도 10에 도시된 바와 같이, 마스터 키부 설정 스크린(318)은 조명기기가 온, 텔레비전이 오프, 공기 조화기가 실내 목표 온도 25℃, 청소기가 동작 중으로 미리 설정된 상태에서, 외출 버튼이 선택되고 조명기기의 아이콘이 터치되면 조명기기의 동작 명령을 오프로 변경한 후 말풍선을 통해 안내하고, 공기 조화기의 아이콘이 터치되면 공기 조화기의 동작 명령을 오프로 변경한 후 말풍선을 통해 안내한다.
이에 따라 마스터 키부의 외출 버튼에 대응하는 전기기기별 미리 설정된 명령은, 조명기기 오프, 텔레비전이 오프, 공기 조화기 오프, 청소기 동작 명령이다.
도 11에 도시된 바와 같이, 마스터 키부 설정 스크린(318)은 통합 제어를 위한 버튼으로 외출 버튼, 귀가 버튼, 취침 버튼, 기상 버튼이 설정되어 있는 상태에서 기상 버튼의 편집 버튼이 터치되면 기상 버튼에 대응하는 전기기기별 미리 설정된 동작 명령 정보를 표시하고, 이때 옵션 메뉴의 삭제 버튼이 터치되면 기상 버튼과 관련된 모든 정보를 삭제함을 알리는 창을 표시하고, 'OK' 버튼이 터치되면 기상 버튼이 삭제된 복수 버튼을 표시한다.
도 12a 내지 도 12d는 실시 예에 따른 제어 장치의 대시보드 스크린 내 채팅부 실행 시 채팅 스크린의 예시도 및 대화 입력 방법에 대응하는 채팅 스크린의 표시 변화 예시도이다.
사용자 인터페이스부(310)는 채팅부(313)가 터치되면 대시보드 스크린을 채팅 스크린(319)으로 전환한다. 이는 도 12의 (a)와 같다.
도 12의 (a)에 도시된 바와 같이 채팅 스크린(319)은 적어도 하나의 전기기기와의 대화를 표시하는 대화 표시 창(E1)과, 적어도 하나의 전기기기의 아이콘 또는 전체 기기 선택 아이콘을 선택받는 아이콘 선택 창(E2)과, 미리 등록된 전기기기 중 적어도 하나의 전기기기와의 대화 입력 방법을 선택하고 대화를 입력하기 위한 대화 입력창(E3)을 포함한다.
여기서 대화 입력 창(E3)은 문자 입력 방식을 선택하기 위한 텍스트창(E31)과, 텍스트 문장의 전송을 지시하는 전송 버튼(E32)과, 채팅 명령어가 함축된 단축 버튼의 리스트 표시를 지시하는 리스트 버튼(E33)과, 음성 입력을 지시하는 마이크 버튼(E34)과, 채팅 중인 전기기기의 아이콘을 표시하는 타깃창(E35)을 포함한다.
텍스트창(E31)은 터치 입력되면 QWER 타입의 키패드(E36)를 표시한다.
아울러, 키패드(E36)는 한글 또는 숫자로 전환 버튼을 포함하고, 전환 버튼을 터치함에 따라 한글 또는 숫자를 표시하는 것이 가능하다.
도 12의 (b), (c) 및 (d)는 대화 입력 방법에 대응하는 채팅 스크린의 표시 변화 예시도이다. 이를 도 13 내지 도 18을 참조하여 설명한다.
도 12의 (b)에 도시된 바와 같이, 텍스트창이 터치되면 키패드(E36)을 표시함으로써 사용자가 채팅할 수 있는 준비 과정을 수행한다.
도 13에 도시된 바와 같이, 채팅 스크린(319)은 세탁기의 아이콘이 터치되면 타깃 창에 세탁기의 아이콘을 표시하고, 텍스트창이 터치되면 키패드(E36)을 표시함으로써 사용자가 채팅할 수 있는 준비 과정을 수행한다.
채팅 스크린(319)은 세탁기에게 진행 상태를 물어 보는 문자가 입력된 후 전송 버튼이 터치되면 입력된 문자를 대표 표시창에 표시하고, 이 후 세탁기로부터 현재의 진행 상태에 대한 정보를 제공받고 제공된 진행 상태를 프로그레스 바 등으로 표시한다.
아울러 채팅 스크린은 대화 표시 창에 채팅어가 입력된 시간을 함께 표시한다.
또한 도 14에 도시된 바와 같이, 채팅 스크린(319)은 공기 조화기의 아이콘이 터치되면 타깃 창에 공기조화기의 아이콘을 표시하고, 텍스트창이 터치되면 키패드(E36)을 표시함으로써 사용자가 채팅할 수 있는 준비 과정을 수행한다.
채팅 스크린(319)은 문자로 동작 명령이 입력된 후 전송 버튼이 터치되면 입력된 온 동작 명령을 대화 표시창에 표시하고 공기조화기에서 제공된 현재 실내 온도를 표시하고, 문자로 입력된 실내 목표 온도가 입력된 후 전송 버튼이 터치되면 입력된 실내 목표 온도를 대화 표시창에 표시하며, 공기조화기로부터 명령을 수행하겠다는 대답을 수신하여 수신된 문자를 대화 표시창에 표시한다.
도 15에 도시된 바와 같이, 채팅 스크린(319)은 전체 기기 선택 아이콘이 선택되면 타깃 창에 전체 기기 선택 아이콘을 표시하고, 텍스트창이 터치되면 키패드(E36)을 표시함으로써 사용자가 채팅할 수 있는 준비 과정을 수행한다.
채팅 스크린(319)은 키패드를 통해 전체 기기의 모니터링을 위한 채팅어가 입력되면 입력된 채팅어를 대화 표시창에 표시하고, 미리 등록된 전기기기로부터 모니터링 정보가 수신되면 수신된 전기기기별 모니터링 정보를 대화 표시창에 표시한다.
채팅 스크린(319)은 전기기기별 모니터링 정보를 표시한 상태에서 대화 표시창이 터치되면 키패드를 숨긴다.
도 16에 도시된 바와 같이, 채팅 스크린(319)은 전체 기기 선택 아이콘이 선택되면 타깃 창에 전체 기기 선택 아이콘을 표시하고, 텍스트창이 터치되면 키패드(E36)을 표시함으로써 사용자가 채팅할 수 있는 준비 과정을 수행한다.
채팅 스크린(319)은 키패드를 통해 전체 기기에 외출을 알리는 채팅어가 입력되면 입력된 채팅어를 대화 표시창에 표시하고, 미리 등록된 전기기기로 외출 에 대응하는 동작 상태 정보가 수신되면 수신된 전기기기별 동작 상태 정보를 대화 표시창에 표시한다.
채팅 스크린(319)은 전기기기별 동작 상태 정보를 표시한 상태에서 대화 표시창이 터치되면 키패드를 숨긴다.
공기 조화기의 아이콘이 터치되면 타깃 창에 공기조화기의 아이콘을 표시하고, 텍스트창이 터치되면 키패드(E36)을 표시함으로써 사용자가 채팅할 수 있는 준비 과정을 수행한다.
채팅 스크린(319)은 문자로 동작 명령이 입력된 후 전송 버튼이 터치되면 입력된 온 동작 명령을 대화 표시창에 표시하고 공기조화기에서 제공된 현재 실내 온도를 표시하고, 문자로 입력된 실내 목표 온도가 입력된 후 전송 버튼이 터치되면 입력된 실내 목표 온도를 대화 표시창에 표시하며, 공기조화기로부터 명령을 수행하겠다는 대답을 수신하여 수신된 문자를 대화 표시창에 표시한다.
도 12의 (c)에 도시된 바와 같이, 채팅 스크린(319)은 리스트 버튼이 터치되면 채팅 명령어가 표시된 복수의 단축 버튼(E37)을 표시함으로써 사용자가 채팅할 수 있는 준비 과정을 수행한다.
도 17는 미리 등록된 전기기기별 단축 버튼의 예를 도시한 것이다.
도 17의 (a)는 전체 기기 선택 아이콘에 대응하는 단축 버튼 리스트의 예시도로, 복수의 단축 버튼은 전체 기기 선택 아이콘 선택 시 미리 등록된 전기기기 모두를 통합적으로 제어할 수 있는 동작 명령을 각각 갖는다. 아울러 전체 기기로 제어 명령을 전송하기 위한 복수 단축 버튼은 마스터키부의 버튼과 대응한다.
도 17의 (b)는 공기 조화기의 동작 제어에 대응하는 단축 버튼 리스트 예시도이고, 도 17의 (c)는 청소 로봇의 동작 제어에 대응하는 단축 버튼 리스트 예시도이며, 도 17의 (d)는 세탁기의 동작 제어에 대응하는 단축 버튼 리스트 예시도이고, 도 17의 (e)는 조리기기의 동작 제어에 대응하는 단축 버튼 리스트 예시도이며, 도 17의 (f)는 냉장고의 동작 제어에 대응하는 단축 버튼 리스트 예시도이다.
도 18에 도시된 바와 같이, 채팅 스크린(319)은 공기조화기의 아이콘이 터치되면 타깃 창에 공기조화기의 아이콘을 표시하고, 공기조화기로부터 현재의 실내 온도에 대한 정보를 제공받고 제공된 현재 실내 온도를 대화 표시 창에 표시한다.
채팅 스크린(319)은 리스트 버튼이 터치되면 공기 조화기와 관련된 동작 제어를 위한 채팅 명령어가 표시된 복수의 단축 버튼(E37)을 표시한다.
채팅 스크린(319)은 복수의 단축 버튼 중 냉방을 지시하는 단축 버튼이 터치되면 터치된 단축 버튼에 해당하는 대화를 대화 표시 창에 표시하고, 공기 조화기로 동작 상태를 제공받아 냉방 운전을 수행한다는 내용의 대화를 표시하며, 미리 설정된 시간이 경과한 후 리스트 버튼이 터치되면 리스트 버튼을 사라지게 하고 이후 대화 입력창 내 리스트 버튼이 터치되면 아이콘 선택 창과 단축 버튼 리스트를 표시한다.
채팅 스크린(319)은 아이콘 선택 창과 단축 버튼 리스트를 표시한 상태에서 전체 기기 선택 아이콘이 터치되면 타깃 창에 전체 기기 선택 아이콘을 표시하고,전체 기기 선택 아이콘에 대응하는 단축 버튼의 리스트를 표시한다.
이후 복수의 단축 버튼 중 외출 버튼이 터치되면 외출 버튼이 터치되었음을 알리는 대화를 대화 표시창에 표시하고, 외출 버튼에 대응하는 전기기기별 미리 설정된 동작 명령을 각 전기기기에 전송한다.
아울러 채팅 스크린은 대화 표시 창에 채팅어가 입력된 시간을 함께 표시한다.
도 12의 (d)에 도시된 바와 같이, 채팅 스크린(319)은 마이크 버튼(E34)이 터치되면 음성 명령을 입력받기 위한 음성 입력 창(E38)을 표시함으로써 사용자가 채팅할 수 있는 준비 과정을 수행한다.
도 12의 (d)에 도시된 바와 같이, 채팅 스크린(319)은 세탁기의 아이콘이 터치되면 타깃 창에 세탁기의 아이콘을 표시하고, 마이크 버튼(E34)이 터치되면 음성 명령을 입력받기 위한 음성 입력 창(E38)을 표시함으로써 사용자가 채팅할 수 있는 준비 과정을 수행한다.
아울러 음성 입력 창은 음성 명령 피드백 설정을 위한 버튼과, 음성 입력을 위한 버튼과, 키패드로 전환하기 위한 키패드 전환 버튼을 포함한다.
채팅 스크린(319)은 음성 입력을 위한 버튼이 터치된 상태에서 발화하면 마이크로 폰을 통해 음성이 수집 후 인식되고, 인식된 음성을 대화 표시 창에 표시하고, 인식된 음성에 대응하는 질문이 세탁기의 진행 상태를 묻는 질문이라면 세탁기로부터 현재의 진행 상태에 대한 정보를 제공받고 제공된 진행 상태를 프로그레스 바 등으로 표시한다.
아울러 채팅 스크린은 대화 표시 창에 채팅어가 입력된 시간을 함께 표시한다.
홈 뷰부(314)는 사용자의 홈 내부의 영상을 미리 설정된 시간 간격으로 출력하고, 터치 명령이 입력되면 대시보드 스크린에 홈 뷰 영상을 확대하여 출력하는 것도 가능하다.
아울러, 홈 뷰부(314)는 사용자의 명령에 대응하여 과거의 영상을 출력하는 것도 가능하다.
도 19는 다른 실시 예에 따른 제어 장치의 제어 구성도로, 제어 장치(300)는 사용자 인터페이스부(500), 제어부(360), 저장부(330) 및 통신부(340)를 포함한다.
제어 장치(300a)는, 다른 제어 장치(300b)와 통신을 수행하고, 다른 제어 장치(300b)에서 전송된 동작 명령 또는 동작 명령과 관련된 정보에 기초하여 복수 전기기기 중 적어도 하나의 전기기기로 제어 명령을 전송한다.
여기서 다른 제어 장치는 사람의 몸에 설치 가능한 IT 기기로, 예를 들어 시계, 벨트, 안경 등에 마련된 웨어러블 디바이스(300b)일 수 있다. 이러한 웨어러블 디바이스는 입출력 및 통신이 가능하다.
예를 들어, 제어 장치(300a)는 손목 시계형의 디바이스와 통신을 수행하는 스마트 폰일 수 있고, 다른 제어 장치(300b)는 손목 시계형의 디바이스일 수 있다.
또는, 제어 장치(300a)는 TV 리모콘과 관련된 TV일 수 있고, 다른 제어 장치(300b)는 별도의 TV 리모콘일 수 있다.
즉, 다른 제어 장치(300b)는 사용자로부터 복수의 전기기기 중 적어도 하나의 전기기기의 동작 명령을 입력받고 입력된 동작 명령을 미리 등록된 제어 장치(300a)로 전송한다.
이러한 다른 제어 장치(300b)에는 홈 내의 전기기기를 제어하기 위한 앱이 설치되어 있는 것도 가능하다.
도시되지는 않았으나 다른 제어 장치(300b)는 입력부를 구비할 수 있다.
다른 제어 장치의 입력부를 통한 입력으로는 터치 입력, 전자펜, 포인팅 디바이스(예를 들어, 마우스 등), 키보드, 음성, 동작 등이 될 수 있다.
또한 다른 제어 장치(300b)는 출력부를 구비할 수 있다.
다른 제어 장치의 출력부를 통한 출력으로는 터치 패널 등의 디스플레이부를 통한 출력, 음성 출력, 진동, 광(light) 등이 될 수 있다.
제어 장치(300a)와 다른 제어 장치(300b)는 유/무선으로 연결될 수 있으며, 유선 연결 방식은 MHL, USB를 포함할 수 있으며, 무선 연결 방식은 Bluetooth, Wi-fi, Zigbee, IrDA, 근거리 통신 방식 등을 포함할 수 있다.
도시되지는 않았으나 제어 장치(300a)와 다른 제어 장치(300b)를 이용하여 전기기기를 제어하는 방법을 예를 들어 설명하면 다음과 같다.
다른 제어 장치(300b)를 통한 입력은 음성을 통한 입력일 수 있고, 다른 제어 장치(300b)가 터치 패널을 구비할 경우 터치 입력일 수 있다.
음성을 통해 다른 제어 장치에 제어 명령을 입력할 경우, 다른 제어 장치(300b)는 음성 정보를 그대로 제어 장치(300a)에 전달하면 제어 장치(300a)에서는 음성을 분석하여 해당하는 명령어를 취득, 그 명령어에 해당하는 제어 동작을 수행한다.
또는 다른 제어 장치(300b)는 음성 정보를 디지털화 또는 인코딩을 하여 제어 장치(300a)에 전송하면 제어 장치(300a)는 디지털화된 또는 인코딩된 정보를 분석하여 해당하는 명령어를 취득, 그 명령어에 해당하는 제어 동작을 수행한다.
또는 다른 제어 장치(300b)에서 음성 정보를 분석하여 분석된 결과를 나타내는 특정 정보를 제어 장치(300a)에 전송하면 제어 장치(300a)는 특정 정보에 관련된 명령어를 취득, 그 명령어에 해당하는 제어 동작을 수행한다.
또는 다른 제어 장치(300b)에서 음성 정보를 분석하여 음성 정보에 해당하는 명령어를 취득 제어 장치(300a)에 전송하면 제어 장치(300a)에서는 명령어에 해당하는 제어 동작을 수행한다.
터치 입력을 통해 다른 제어 장치(300b)에 제어 명령을 입력할 경우, 다른 제어 장치(300b)는 터치된 아이콘에 해당하는 정보를 제어 장치(300a)에 전송하면 제어 장치(300a)에서는 정보에 해당하는 명령어를 취득, 그 명령어에 해당하는 제어 동작을 수행한다.
또는 다른 제어 장치(300b)는 터치된 아이콘에 해당하는 정보를 통해 해당하는 명령어를 취득하여 제어 장치(300a)에 전송하면 제어 장치(300a)에서는 그 명령어에 해당하는 제어 동작을 수행한다.
여기서 제어 명령은 복수의 기기를 제어하기 위한 명령일 수 있다.
다른 제어 장치(300b)에 복수의 전기기기를 제어하기 위한 명령이 입력되면 다른 제어 장치(300b)는 입력된 명령이 복수의 전기기기를 제어하기 위한 명령인지 판단하여 그 판단 결과를 제어 장치(300a)에게 전송한다.
판단 결과는 입력된 명령과 동시에 전송될 수 있고, 별도로 전송될 수도 있다. 또는 다른 제어 장치(300b)에서 입력된 명령이 복수의 전기기기를 제어하기 위한 명령인지 판단한 후 복수의 전기기기를 제어하기 위한 명령일 경우에는 제어 장치(300a)를 거치지 않고 바로 제어 대상 전기기기들에게 제어 명령을 전송한다.
또는 다른 제어 장치(300b)에 복수의 전기기기를 제어하기 위한 명령이 입력되었을 때 제어 장치(300a)에서 명령이 복수의 전기기기를 제어하기 위한 명령인지 아닌지 판단하고 해당하는 제어 동작을 수행한다.
상기와 같이 다른 제어 장치(300b)를 이용할 경우, 사용자는 손목 시계형 디바이스 또는 TV리모콘을 통해 간단하게 홈 내 전기기기를 제어할 수 있다.
예를 들면 사용자는 손목 시계형 디바이스에 'Good night'이라고 말하는 것만으로 댁 내 기기들을 일괄적으로 오프(Off)시킬 수 있다.
이러한 제어 장치(300a)는 사용자 인터페이스부(500), 제어부(350), 저장부(330) 및 통신부(340)를 포함한다.
사용자 인터페이스부(500)는 홈 내 배치된 복수의 전기기기 중 미리 등록된 전기기기의 동작 상태를 출력하고 미리 등록된 전기기기 중 적어도 하나의 전기기기의 동작 명령을 입력받는다.
이러한 사용자 인터페이스부(500)는 미리 등록된 전기기기에 대한 동작 상태를 표시하기 위한 표시부와, 사용자로부터 동작 명령을 입력받기 위한 입력부를 포함한다.
여기서 입력부는 터치 방식으로 동작 명령을 입력받는 터치 패널로, 사용자 인터페이스부(500)는 표시부의 디스플레이 패널과 입력부의 터치 패널이 일체로 형성된 터치 스크린으로 구현 가능하다.
또한 입력부의 입력 방식은 터치 패널 외에도, 전자펜, 포인팅 디바이스(예를 들어, 마우스 등), 키보드, 음성 인식 및 제스쳐 인식 등의 입력이 될 수 있다.
이 경우에는 표시부의 디스플레이 패널과 입력부가 별도로 형성될 수 있으나, 터치 방식의 전자 펜의 경우에는 일체로 형성될 수 있다.
도 20에 도시된 바와 같이, 사용자 인터페이스부(500)는 홈 스크린(500)에 전기기기를 모니터링 및 제어하기 위한 앱의 아이콘(500b)을 표시하고, 사용자에 의해 앱의 아이콘이 선택되면 앱 선택 신호를 제어부(360)에 전송하고, 제어부(360)의 명령에 기초하여 앱 실행에 대응하는 스크린을 표시한다.
사용자 인터페이스부(500)는 각종 앱의 아이콘이 표시되는 홈 스크린(500a)을 포함하고, 홈 스크린(500a)의 상단에 숨김 상태로 배치되어 홈 스크린(500a)의 상단 바(500c)가 드래그되면 홈 스크린(500a)의 일 부분에 표시되고 와이파이, GPS, 소리, 자동회전, 절전, 차단, 블루투스 읽기/쓰기 P2P 등의 각종 설정과 관련된 아이콘이 배열되어 있고 사용 중인 애플리케이션, 다운로드 파일, 재생 중인 음악 등을 표시하는 퀵 패널 창(510)을 더 포함한다.
즉, 퀵 패널 창(510)은 각종 설정들을 쉽게 해제하거나 실행할 수 있고, 실행 중인 애플리케이션 등을 사용자가 쉽게 확인할 수 있도록 한다.
이러한 퀵 패널 창(510)은 적어도 하나의 앱의 업데이트 정보 등을 사용자에게 알리는 알림창(510a)을 포함한다.
이 알림창(510a)에는 진행 중인 애플리케이션이나 다운로드 진행 정도 등 실행 중인 기능의 내역을 알려 주며 해당 목록을 선택하면 바로가기가 실행되도록 한다.
즉 알림창(510a)에는 미리 등록된 전기기기의 동작 상태 또는 전기기기의 관리를 위한 다양한 정보가 표시된다. 이러한 알림창(510a)은 전기기기에 관련되어 알림 정보가 필요한 이벤트가 발생된 경우에만 이벤트 정보를 표시하는 것도 가능하다.
아울러 사용자 인터페이스부는 홈스크린의 상단바에 전기기기의 이벤트 정보를 단축 아이콘으로 표시하는 것도 가능하다.
도 21에 도시된 바와 같이 사용자 인터페이스부는, 도 20과 같이 홈스크린(500a)을 표시하고 있는 상태에서, 전기기기와 관련된 알림 정보를 필요로 하는 이벤트가 발생되면 홈 스크린(500a) 상에 포지티브-네거티브 팝업창(positive/negative pop up: p)을 통해 알림 정보를 표시하는 것도 가능하다.
예를 들어, 사용자 인터페이스부는 홈 스크린 상에 '세탁 완료 후 건조 행정 진행 여부(Y/N)'나, '청소 완료 후 도킹 여부(Y/N)', '세탁기 도어 열림으로 인한 세탁 진행 여부(Y/N)', 등의 이벤트나, '홈뷰의 진행이나 취소' 등과 같이 새로운 기능의 진행 여부 등을 포지티브-네거티브 팝업창(p)으로 표시한다.
사용자는 퀵 패널 창(510)의 알림창(510a)을 통해서 혹은 포지티브-네거티브 팝업창(positive/negative pop up: p)을 통해서 채팅 스크린(520)으로 이동한다.
제어 장치의 제어부(360)는 채팅 스크린으로 이동 시, 알림창(510a) 또는 팝업창(p)에 표시된 전기기기가 채팅 대화 상대가 되며, 채팅을 통해 바로 전자기기의 제어가 가능해진다.
제어부(360)는 홈 스크린의 상단 바(500c)가 드래그되면 퀵 패널 창(510)의 표시를 제어하고, 퀵 패널 창(510)의 알림창(510a)이 터치되면 채팅 스크린이 표시되도록 제어한다.
제어부(360)는 알림창(510a)에 터치된 터치의 위치, 종류나 방향에 따라 제어 스크린, 서비스 스크린이 표시되도록 제어하는 것도 가능하다.
여기서 터치의 위치는 메시지 영역, 아이콘 영역을 포함하고, 터치의 종류는 탭, 롱 탭을 포함하고, 터치의 방향은 슬라이딩 방향을 포함한다.
제어부(360)는 알림창(510a)이 터치되면 미니 제어창을 표시되도록 제어하는 것도 가능하다.
저장부(330)는 사용자에 의해 등록된 홈 내 전기기기의 식별 정보와, 미리 등록된 전기기기를 모니터링하고 제어하기 위한 앱을 저장한다.
저장부(330)는 터치 위치별 동작 명령, 터치 종류별 동작 명령, 터치 방향별 동작 명령을 저장한다.
통신부(340)는 홈 내의 전기기기 및 홈 내의 홈 서버와 통신을 수행한다.
통신부(340)는 다른 제어 장치와 통신을 수행한다.
도 22 내지 도 27을 통해서 퀵 패널 창(510)의 알림창(510a)을 통해 채팅 스크린으로 이동하여 전기기기를 제어하는 실시예에 대해 상세히 설명한다. 포지티브-네거티브 팝업창(positive/negative pop up: p)을 통해 채팅 스크린으로 이동하여 전기기기를 제어하는 경우에도 채팅 스크린으로 이동 후의 동작은 동일하므로 별도로 설명하지는 않는다.
도 22는 다른 실시 예에 따른 제어 장치의 홈 스크린에 표시되는 퀵 패널창 및 채팅 스크린의 일 예시도이다.
제어 장치는 사용자에게 알림이 필요한 이벤트가 적어도 하나의 전기기기에서 발생하였는지 판단하고, 알림이 필요한 이벤트가 발생되었다고 판단되면 이벤트 발생에 대응하는 알림 정보를 사용자 인터페이스부(500)의 홈 스크린(500a) 상에서 퀵 패널창(510)을 통해 표시한다.
즉 사용자 인터페이스부(500)는 홈 스크린(500a)의 퀵 패널창(510)에 배치되어 전기기기의 이벤트 정보를 표시하는 알림창(510a)을 더 포함한다.
또한 제어 장치는 앱이 미실행되는 상태에서 적어도 하나의 전기기기의 업데이트, 에러 및 관리 시기에 대한 알림 정보를 홈 스크린 상의 퀵 패널창을 통해 표시하는 것도 가능하다.
사용자 인터페이스부(500)는 알림 창(510a)의 알림 정보가 터치되면 해당 전기기기에 대한 정보를 채팅 스크린(520)에 상세하게 표시한다.
사용자 인터페이스부(500)는 알림정보가 동작 에러와 관련된 이벤트 정보이면 해당 이벤트를 해결하기 위한 해결 방법 또는 해결 정보를 함께 표시하는 것도 가능하다.
사용자 인터페이스부(500)는 해결 방법 또는 해결 정보를 실행하기 위한 단축 버튼을 더 표시할 수 있다.
사용자 인터페이스부(500)는 알림 정보가 세탁조 세척과 관련된 정보이면 채팅 스크린(520) 상에 세탁조 세척과 관련된 정보를 표시하고, 세탁조 세척과 관련된 동작을 수행할 수 있는 단축 버튼(520a)을 표시한다.
예를 들어 사용자 인터페이스부는 채팅 스크린(520) 내의 '뷰 튜토리얼 버튼'이 터치 입력되면 서비스 스크린(540)에 해당 전기기기의 튜토리얼을 표시하고, 사용자 인터페이스부는 채팅 스크린(520) 내의 '스타트 나우 버튼'이 터치 입력되면 세탁기에 세탁조 세척 명령을 전송하고 채팅 스크린(520)에 세탁조 세척 진행 과정을 표시하며, 세탁조 세척 완료 시 세탁조 세척 완료와 관련된 정보를 표시한다.
도 23은 다른 실시 예에 따른 제어 장치의 홈 스크린에 표시되는 퀵 패널창의 다른 예시도이다.
(a)에 도시된 바와 같이 사용자 인터페이스부(500)는 홈 스크린(500a)의 퀵 패널창(510)에 배치되어 전기기기의 이벤트 정보를 알리는 알림창(510a)을 표시한다.
알림 창(510a)은 전기기기의 이벤트 정보를 표시하는 메시지부(511)와, 스크린 전환을 위한 적어도 하나의 버튼이 배치된 버튼부(512)를 포함한다.
(b) 및 (c)에 도시된 바와 같이 사용자 인터페이스부(500)는 알림 창(510a)의 메시지부(511)가 터치 입력되면 홈 스크린을 채팅 스크린으로 전환하여 표시하고, 해당 전기기기에 대한 정보를 채팅 스크린(520)에 표시한다.
이후 제어 장치는 채팅 스크린을 통해 해당 전기기기의 상태 정보를 파악하거나 채팅을 통해 해당 전기기기를 제어할 수 있다.
(d) 및 (e)에 도시된 바와 같이 사용자 인터페이스부(500)는 알림 창(510a)의 버튼부(512)가 터치 입력되면 홈 스크린을 제어 스크린(530)으로 전환하여 표시하고, 해당 전기기기에 대한 동작을 제어하기 위한 동작 제어 버튼과 동작 상태 정보를 출력하는 제어 스크린(530)에 표시한다.
예를 들어, 사용자 인터페이스부는 전기기기가 공기 조화기인 경우 제어 스크린(530)에 목표 온도, 운전 모드, 실내 온도 등을 표시하고, 목표 온도를 조절하기 위한 온도 조절 버튼, 예약 버튼 등을 표시한다.
(d) 및 (f)에 도시된 바와 같이 사용자 인터페이스부(500)는 알림 창(510a)의 버튼부(512)가 터치 입력되면 홈 스크린을 서비스 스크린(540)으로 전환하여 표시하고, 해당 전기기기에 대한 서비스 정보를 표시하는 것도 가능하다. 예를 들어 사용자 인터페이스부(500)는 서비스 스크린(540)에 사용 지침 프로그램(Tutorial) 등을 출력한다.
이러한 버튼부(512)의 버튼에는 제어 스크린이나 서비스 스크린으로 전환과 관련된 정보가 설정되어 있다. 이는 사용자에 의해 설정 가능하다.
버튼부(512)는 제어 스크린과 서비스 스크린으로의 직접 전환을 위한 스크린 전환 버튼을 복수개 포함하는 것도 가능하다.
도 24는 다른 실시 예에 따른 제어 장치의 홈 스크린에 표시되는 퀵 패널창의 또 다른 예시도이다.
(a)에 도시된 바와 같이 사용자 인터페이스부(500)는 홈 스크린(500a)의 퀵 패널창(510)에 배치되어 전기기기의 이벤트 정보를 알리는 알림창(510a)을 표시한다.
알림 창(510a)은 전기기기의 이벤트 정보를 표시하는 메시지부(511)와, 전기기기의 동작 명령을 입력받기 위한 바로가기 버튼이 배치된 버튼부(513)를 포함한다.
(b) 및 (c)에 도시된 바와 같이 사용자 인터페이스부(500)는 알림 창(510a)의 메시지부(511)가 터치 입력되면 홈 스크린을 채팅 스크린으로 전환하여 표시하고, 해당 전기기기에 대한 정보를 채팅 스크린(520)에 표시한다.
이후 제어 장치는 채팅 스크린을 통해 해당 전기기기의 상태 정보를 파악하거나 채팅을 통해 해당 전기기기를 제어할 수 있다.
(d) 및 (e)에 도시된 바와 같이 사용자 인터페이스부(500)는 알림 창(510a)의 버튼부(513)가 터치 입력되면 전기기기의 동작 상태를 변경 제어하고, 동작 상태가 변경된 전기기기의 현재 동작 상태를 다른 버튼 또는 다른 알림창으로 표시하거나 기존 알림창(510a)을 변경하여 표시한다.
예를 들어, 퀵 패널창(510)은 전기기기의 현재 동작 상태가 오프 상태이면 알림창(510a)의 버튼부(513)에 온 버튼을 표시하고, 사용자에 의해 오프 버튼이 터치 입력되면 전기기기로 실행 명령을 전송하고 버튼부(513)에 정지 또는 일시 정지 버튼을 표시한다.
예를 들어 알림창(510a)를 통해 표시된 메시지가 세탁 시간임을 알려 주는 메시지라면 버튼부(513)에 실행 버튼을 표시하고, 사용자가 세탁을 실행코자 할 때 실행 버튼을 선택함으로써 별도의 제어 스크린으로 이동할 필요없이 간편하게 세탁을 실행할 수 있다.
즉, 퀵 패널창은 현재 상태에서 변경 가능한 다른 상태의 버튼을 표시한다.
도 25는 다른 실시 예에 따른 제어 장치의 홈 스크린에 표시되는 퀵 패널창의 또 다른 예시도이다.
(a)에 도시된 바와 같이 사용자 인터페이스부(500)는 홈 스크린(500a)의 퀵 패널창(510)에 배치되어 전기기기의 이벤트 정보를 알리는 알림창(510a)을 표시한다.
알림 창(510a)은 전기기기의 이벤트 정보를 표시하는 메시지부(511)를 포함한다.
(b)에 도시된 바와 같이 사용자 인터페이스부(500)는 알림 창(510a)의 메시지부(511)가 터치되면 터치 방향을 확인하고 확인된 터치 방향이 왼쪽에서 오른쪽으로 변화하는 방향이면 제1드래그(D1)라고 판단하고 제1드래그와 대응하는 동작 명령을 확인하고 확인된 동작 명령을 수행한다.
즉, 사용자 인터페이스부는 홈 스크린을 채팅 스크린으로 전환하여 표시하고, 해당 전기기기에 대한 정보를 채팅 스크린(520)에 표시한다.
(c)에 도시된 바와 같이 사용자 인터페이스부(500)는 알림 창(510a)의 메시지부(511)가 터치되면 터치 방향을 확인하고 확인된 터치 방향이 오른 쪽에서 왼쪽으로 변화하는 방향이면 제2드래그(D2)라고 판단하고 제2드래그와 대응하는 동작 명령을 확인하고 확인된 동작 명령을 수행한다.
즉, 사용자 인터페이스부는 홈 스크린을 제어 스크린(530)으로 전환하여 표시하고, 해당 전기기기에 대한 정보를 제어 스크린(530)에 표시한다.
(d)에 도시된 바와 같이 사용자 인터페이스부(500)는 확인된 터치 방향이 오른 쪽에서 왼쪽으로 변화하는 방향이면 홈 스크린을 서비스 스크린(540)으로 전환하여 표시하고, 해당 전기기기에 대한 서비스 정보를 표시하는 것도 가능하다. 예를 들어 사용자 인터페이스부(500)는 서비스 스크린(540)에 사용 지침 프로그램(Tutorial) 등을 출력한다.
제어 장치는 터치 방향, 즉 드래그의 방향에 따라 전환할 스크린의 정보를 미리 저장한다. 이는 사용자에 의해 설정 가능하다.
이와 같이 터치 방향이 좌우로 이동하는 것 외에도, 알림 창 내에서 터치 방향이 상하로 이동하는 것에 대응하여 스크린을 전환하는 것도 가능하다.
도 26은 다른 실시 예에 따른 제어 장치의 홈 스크린에 표시되는 퀵 패널창의 또 다른 예시도이다.
(a)에 도시된 바와 같이 사용자 인터페이스부(500)는 홈 스크린(500a)의 퀵 패널창(510)에 배치되어 전기기기의 이벤트 정보를 알리는 알림창(510a)을 표시한다.
알림 창(510a)은 전기기기의 이벤트 정보를 표시하는 메시지부(511)를 포함한다.
도시되지는 않았으나 알림 창(510a)의 메시지부(511)가 터치 시간이 일정 시간 이하인 탭(Tap) 터치되면, 홈 스크린을 채팅 스크린으로 전환하여 표시하고, 해당 전기기기에 대한 정보를 채팅 스크린(520)에 표시한다.
이후 채팅 스크린을 통해 해당 기기의 상태 정보를 파악하거나 채팅을 통해 해당 전기기기를 제어할 수 있다.
(b)에 도시된 바와 같이 사용자 인터페이스부(500)는 알림 창(510a)의 메시지부(511)가 터치되되 터치된 터치 시간이 일정 시간 이상인 롱탭(Long Tap)이면 홈 스크린을 제어 스크린(530)으로 전환하여 표시하고, 해당 전기기기에 대한 정보를 제어 스크린(530)에 표시한다.
또한 (c)에 도시된 바와 같이 사용자 인터페이스부(500)는 알림 창(510a)의 메시지부(511)가 터치되되 터치 시간이 일정 시간 이상인 롱탭(Long Tap)이면 알림 창(510a)을 확장시키고 확장된 알림 창(510a) 내에 미니 제어창(514)를 추가하여 표시하는 것도 가능하다.
여기서 미니 제어창(514)은 전기기기를 심플 제어하기 위한 온오프 버튼, 시작 버튼, 정지 버튼, 일시 정지 버튼 등을 포함한다.
(d)에 도시된 바와 같이 사용자 인터페이스부(500)는 알림 창(510a)의 메시지부(511)가 터치되되 터치 시간이 일정 시간 이상인 롱탭(Long Tap)이면 알림 창(510a) 상에 미니 제어창(514)을 오버랩시켜 표시한다.
본 예에서 롱 탭 입력 시에 미니 제어창이 표시되는 것을 예로 들었지만 탭, 쉐이크에 대응하여 미니 제어창을 표시하는 것도 가능하다.
도 27은 다른 실시 예에 따른 제어 장치의 홈 스크린에 표시되는 퀵 패널창의 또 다른 예시도이다.
(a)에 도시된 바와 같이 사용자 인터페이스부(500)는 홈 스크린(500a)의 퀵 패널창(510)에 배치되어 전기기기의 이벤트 정보를 알리는 알림창(510a)을 표시한다.
알림 창(510a)은 전기기기의 이벤트 정보를 표시하는 메시지부(511)를 포함한다.
(b)에 도시된 바와 같이 사용자 인터페이스부(500)는 알림 창(510a)의 메시지부(511)가 터치 입력되면 홈 스크린을 채팅 스크린(520)으로 전환하여 표시하고, 해당 전기기기에 대한 정보를 채팅 스크린(520)에 표시하되, 채팅 스크린 내의 대화 창(521) 내에 미니 제어창(522)을 오버랩시켜 표시한다.
도 28은 다른 실시 예에 따른 제어 장치의 제어 순서도로, 도 23을 참조하여 설명한다.
제어 장치는 홈 내에 미리 등록된 전기기기 중 적어도 하나의 전기기기로부터 알림 정보가 수신되었는지 판단(471)한다.
제어 장치는 알림 정보가 수신되었다고 판단되면 홈 스크린의 퀵 패널창을 통해 수신된 알림 정보를 출력(472)한다.
여기서 홈스크린의 퀵 패널창을 통해 수신된 알림 정보를 출력하는 것은, 홈 스크린의 상단바에 알림 정보가 수신되었음을 알리는 이모티콘을 표시하는 것도 가능하고, 홈 스크린(500a) 상에 포지티브-네거티브 팝업창(positive/negative pop up: p)을 통해 알림 정보를 표시하는 것도 가능하다.
아울러, 미리 정해진 사운드를 통해 적어도 하나의 전기기기의 이벤트가 발생하였음을 알리는 것도 가능하다.
사용자는 퀵 패널 창(510)의 알림창(510a)을 통해서 혹은 포지티브-네거티브 팝업창(positive/negative pop up: p)을 통해서 채팅 스크린(520)으로 이동한다.
제어 장치는 홈 스크린의 상단 바(500c)가 드래그되면 퀵 패널 창(510)의 표시를 제어하고, 퀵 패널 창(510)의 알림창(510a) 내의 메시지부에 해당하는 제1영역이 선택되었는지 판단(473)하고, 제1영역이 선택되었다고 판단되면 사용자 인터페이스부에 채팅 스크린을 표시(474)한다.
반면, 퀵 패널 창(510)의 알림창(510a) 내의 버튼부(512)에 해당하는 제2영역이 선택되었다고 판단되면 사용자 인터페이스부에 제어 스크린을 표시(475)한다.
본 실시에서, 터치된 영역에 기초하여 스크린 표시를 제어하는 것을 설명하였지만, 터치의 종류 또는 터치 방향에 기초하여 스크린 표시를 제어하는 것도 가능하다.

Claims (16)

  1. 적어도 하나의 전기기기의 동작을 제어하는 제어 장치에 있어서,
    홈 스크린에 상기 적어도 하나의 전기기기와 관련된 알림 창을 갖고, 상기 적어도 하나의 전기기기의 동작 명령을 입력받는 사용자인터페이스부;
    상기 적어도 하나의 전기기기와 관련된 이벤트가 발생되면 상기 알림창에 이벤트와 관련된 알림 정보가 표시되도록 제어하고 상기 알림 정보가 선택되면 상기 홈스크린을 채팅 스크린, 서비스 스크린 및 제어 스크린 중 어느 하나의 스크린으로 전환 제어하는 제어부를 포함하는 제어 장치.
  2. 제 1 항에 있어서,
    상기 알림창은, 상기 발생된 이벤트에 대한 정보를 알리는 메시지부 및 스크린 전환을 위한 버튼부를 포함하고,
    상기 제어부는, 상기 메시지부가 선택되면 상기 홈 스크린을 상기 채팅 스크린으로 전환 제어하고, 상기 버튼부가 선택되면 상기 홈 스크린을 상기 적어도 하나의 전기기기를 제어하기 위한 제어 스크린으로 전환 제어하는 제어 장치.
  3. 제 1 항에 있어서,
    상기 알림창은, 이벤트에 대한 정보를 알리는 메시지부 및 스크린 전환을 위한 버튼부를 포함하고,
    상기 제어부는, 상기 메시지부가 선택되면 상기 홈 스크린을 상기 채팅 스크린으로 전환 제어하고, 상기 버튼부가 선택되면 상기 홈 스크린을 상기 적어도 하나의 전기기기에 대한 서비스 정보를 제공 위한 서비스 스크린으로 전환 제어하는 제어 장치.
  4. 제 1 항에 있어서,
    상기 알림창은, 상기 적어도 하나의 전기기기의 현재 동작 상태를 표시하고, 상기 적어도 하나의 전기기기의 동작 명령을 입력받기 위한 버튼부를 포함하고,
    상기 제어부는, 상기 버튼부가 선택되면 현재 동작 상태를 다른 동작 상태로 변경 제어하는 제어 장치.
  5. 제 4 항에 있어서,
    상기 동작 상태는, 시작 상태 및 정지 상태를 포함하는 제어 장치.
  6. 제 1 항에 있어서, 상기 제어부는,
    상기 알림창이 터치 입력되면 터치 방향을 확인하고, 상기 확인된 터치 방향에 기초하여 상기 홈 스크린을 상기 채팅 스크린, 서비스 스크린 및 제어 스크린 중 어느 하나의 스크린으로 전환 제어하는 제어 장치.
  7. 제 6 항에 있어서, 상기 제어부는,
    상기 터치 방향이 제 1방향이면 상기 홈 스크린을 상기 채팅 스크린으로 전환 제어하고, 상기 터치 방향이 제 2방향이면 상기 홈 스크린을 상기 제어 스크린으로 전환 제어하는 제어 장치.
  8. 제 1 항에 있어서, 상기 제어부는,
    상기 알림창이 터치 입력되면 터치 시간을 확인하고, 상기 확인된 터치 시간이 일정 시간 이상이면 상기 홈 스크린을 상기 제어 스크린으로 전환 제어하는 제어 장치.
  9. 제 1 항에 있어서, 상기 제어부는,
    상기 알림창이 터치 입력되면 터치 시간을 확인하고, 상기 확인된 터치 시간이 일정 시간 이상이면 상기 알림 창이 확장되도록 제어하고 상기 확장된 알림 창의 영역 내에 미니 제어창이 표시되도록 제어하는 제어 장치.
  10. 제 1 항에 있어서, 상기 제어부는,
    상기 알림창이 터치 입력되면 터치 시간을 확인하고, 상기 확인된 터치 시간이 일정 시간 이상이면 상기 알림 창 상에 미니 제어창이 오버랩되어 표시되도록 제어하는 제어 장치.
  11. 제 1 항에 있어서, 상기 제어부는,
    상기 알림창이 터치 입력되면 상기 홈 스크린을 채팅 스크린으로 전환 제어하고, 상기 채팅 스크린 상에 미니 제어창이 오버랩되어 표시되도록 제어하는 제어 장치.
  12. 제 11 항에 있어서, 상기 미니 제어창은,
    상기 적어도 하나의 전기기기의 동작 명령을 입력받기 위한 온오프 버튼, 시작 버튼, 정지 버튼 및 일시 정지 버튼 중 적어도 하나의 버튼을 포함하는 제어 장치.
  13. 제 1 항에 있어서, 상기 미니 제어창은,
    상기 알림창이 선택되면 상기 홈 스크린을 상기 채팅 스크린으로 전환 제어하고, 상기 채팅 스크린 내에 이벤트에 대응하는 동작을 수행하기 위한 단축버튼이 표시되도록 제어하는 제어 장치.
  14. 적어도 하나의 전기기기의 동작을 제어하는 제어 장치에 있어서,
    홈 스크린을 갖고 상기 적어도 하나의 전기기기의 동작 명령을 입력받는 사용자인터페이스부;
    상기 적어도 하나의 전기기기 동작 중 이벤트가 발생하면 발생된 이벤트에 대한 정보를 알리는 팝업창이 상기 홈스크린 상에 표시되도록 제어하는 제어부를 포함하는 제어 장치.
  15. 제 14 항에 있어서, 상기 팝업창은,
    포지티브/네거티브 팝업창인 제어 장치.
  16. 제 15 항에 있어서,
    상기 사용자인터페이스부는, 상기 홈 스크린에 숨김 상태로 배치된 퀵 패널창과, 상기 적어도 하나의 전기기기의 동작 상태를 표시하는 알림 창을 더 포함하고,
    상기 제어부는, 상기 홈스크린의 상단이 드래그되면 상기 퀵 패널창이 표시되도록 제어하고, 상기 적어도 하나의 전기기기의 동작 중 이벤트가 발생되면 상기 퀵 패널창에 상기 알림창이 표시되도록 제어하는 제어 장치.
PCT/KR2015/000111 2014-01-06 2015-01-06 제어 장치 WO2015102470A1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US15/110,019 US10592062B2 (en) 2014-01-06 2015-01-06 Control apparatus
CN201580002600.4A CN105745873B (zh) 2014-01-06 2015-01-06 控制设备
US16/787,680 US11334208B2 (en) 2014-01-06 2020-02-11 Control apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2014-0001554 2014-01-06
KR1020140001554A KR102229356B1 (ko) 2013-09-05 2014-01-06 제어 장치

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US15/110,019 A-371-Of-International US10592062B2 (en) 2014-01-06 2015-01-06 Control apparatus
US16/787,680 Continuation US11334208B2 (en) 2014-01-06 2020-02-11 Control apparatus

Publications (1)

Publication Number Publication Date
WO2015102470A1 true WO2015102470A1 (ko) 2015-07-09

Family

ID=53498709

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2015/000111 WO2015102470A1 (ko) 2014-01-06 2015-01-06 제어 장치

Country Status (3)

Country Link
US (2) US10592062B2 (ko)
CN (1) CN105745873B (ko)
WO (1) WO2015102470A1 (ko)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2746065C (en) * 2011-07-18 2013-02-19 Research In Motion Limited Electronic device and method for selectively applying message actions
US10540058B2 (en) * 2016-01-08 2020-01-21 Whirlpool Corporation Network and method for casting a user interface
USD810758S1 (en) * 2016-02-19 2018-02-20 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
USD803861S1 (en) * 2016-06-07 2017-11-28 Paypal, Inc. Display screen or a portion thereof with animated graphical user interface
USD803257S1 (en) * 2016-06-07 2017-11-21 Paypal, Inc. Display screen or a portion thereof with animated graphical user interface
CN108332356A (zh) 2017-01-19 2018-07-27 开利公司 空调交互终端、空调***的控制器、空调***及空调交互***
USD861723S1 (en) * 2017-07-05 2019-10-01 Lg Electronics Inc. Oven display screen with graphical user interface
JP6972806B2 (ja) * 2017-09-11 2021-11-24 富士フイルムビジネスイノベーション株式会社 情報処理装置、プログラム及び制御方法
WO2020087644A1 (zh) * 2018-10-31 2020-05-07 深圳市大疆创新科技有限公司 一种控制操作切换方法、装置及遥控设备
CN111857897A (zh) * 2019-04-25 2020-10-30 北京小米移动软件有限公司 一种信息显示方法、装置及存储介质
US11762966B2 (en) * 2020-04-02 2023-09-19 Motorola Mobility Llc Methods and devices for operational access grants using facial features and facial gestures

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120072518A (ko) * 2010-12-24 2012-07-04 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US20120316984A1 (en) * 2011-05-02 2012-12-13 Sears Brands, Llc System and methods for interacting with networked home appliances
KR20130013238A (ko) * 2011-07-27 2013-02-06 엘지전자 주식회사 가전제품 및 이를 포함하여 이루어지는 온라인 시스템
KR20130021280A (ko) * 2011-08-22 2013-03-05 엘지전자 주식회사 세탁장치 및 이를 포함하여 이루어지는 온라인 시스템
US20130106613A1 (en) * 2011-10-26 2013-05-02 Samsung Electronics Co., Ltd. System and method for transmitting messages related to operations of electronic devices

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6727916B1 (en) * 2000-12-21 2004-04-27 Sprint Spectrum, L.P. Method and system for assisting a user to engage in a microbrowser-based interactive chat session
US20040141004A1 (en) * 2003-01-17 2004-07-22 International Business Machines Corporation Electronic messaging system and method with automatic prompting
US20090024401A1 (en) * 2006-05-10 2009-01-22 Zhihua Jiang Involvement of a Novel Nuclear-Encoded Mitochondrial Poly(A) Polymerase PAPD1 in Extreme Obesity-Related Phenotypes in Mammals
US9274681B2 (en) * 2008-03-26 2016-03-01 Lg Electronics Inc. Terminal and method of controlling the same
KR101481557B1 (ko) * 2008-03-26 2015-01-13 엘지전자 주식회사 단말기 및 그 제어 방법
US8775963B2 (en) * 2010-04-23 2014-07-08 Blackberry Limited Method and apparatus for controlling a display to generate notifications
KR20110119324A (ko) * 2010-04-27 2011-11-02 엘지전자 주식회사 스마트 제어 디바이스
JP5548553B2 (ja) * 2010-08-05 2014-07-16 本田技研工業株式会社 自動二輪車
US9015641B2 (en) * 2011-01-06 2015-04-21 Blackberry Limited Electronic device and method of providing visual notification of a received communication
US8936603B2 (en) * 2011-03-07 2015-01-20 Frederic Mani Pneumatic surgical instrument and corresponding methods for penetrating, resecting and microfracturing bone
US9438678B2 (en) * 2011-03-17 2016-09-06 Sears Brands, L.L.C. Methods and systems for appliance community service management
CN102436351A (zh) * 2011-12-22 2012-05-02 优视科技有限公司 通过拖拽手势控制应用界面的方法和装置
US20130268446A1 (en) * 2012-04-10 2013-10-10 Talkto, Inc. System and method for entry of structured data
CN103019116A (zh) * 2012-12-04 2013-04-03 缪军 智能家电家居控制装置及内嵌该装置的冰箱
US20140189597A1 (en) * 2012-12-28 2014-07-03 Samsung Electronics Co., Ltd. Method and electronic device for presenting icons
US9225677B2 (en) * 2013-03-15 2015-12-29 Facebook, Inc. Systems and methods for displaying a digest of messages or notifications without launching applications associated with the messages or notifications
US9467558B2 (en) * 2013-06-14 2016-10-11 Lg Electronics Inc. Mobile terminal and controlling method thereof
KR102108439B1 (ko) * 2013-08-23 2020-05-08 삼성전자주식회사 휴대 장치 및 휴대 장치의 사용 제한 방법
US20150188861A1 (en) * 2013-12-26 2015-07-02 Aaren Esplin Mechanism for facilitating dynamic generation and transmission of canned responses on computing devices
US9716680B2 (en) * 2014-04-25 2017-07-25 Jordan H. Taler Expandable graphical icon for response to electronic text transmission

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120072518A (ko) * 2010-12-24 2012-07-04 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US20120316984A1 (en) * 2011-05-02 2012-12-13 Sears Brands, Llc System and methods for interacting with networked home appliances
KR20130013238A (ko) * 2011-07-27 2013-02-06 엘지전자 주식회사 가전제품 및 이를 포함하여 이루어지는 온라인 시스템
KR20130021280A (ko) * 2011-08-22 2013-03-05 엘지전자 주식회사 세탁장치 및 이를 포함하여 이루어지는 온라인 시스템
US20130106613A1 (en) * 2011-10-26 2013-05-02 Samsung Electronics Co., Ltd. System and method for transmitting messages related to operations of electronic devices

Also Published As

Publication number Publication date
US11334208B2 (en) 2022-05-17
US20160334943A1 (en) 2016-11-17
CN105745873B (zh) 2019-10-08
US20200183543A1 (en) 2020-06-11
US10592062B2 (en) 2020-03-17
CN105745873A (zh) 2016-07-06

Similar Documents

Publication Publication Date Title
WO2015102471A1 (ko) 제어 장치
WO2015102470A1 (ko) 제어 장치
WO2015102469A1 (ko) 제어 장치 및 그 제어 방법
WO2016200211A1 (en) Method and apparatus for service oriented input and output
WO2012093897A2 (ko) 세탁처리장치 및 원격 제어기
WO2019107945A1 (en) Method of providing service based on location of sound source and speech recognition device therefor
WO2016137167A1 (en) Terminal
WO2015102284A1 (en) User terminal apparatus and control method thereof
WO2017003007A1 (ko) 영상표시장치 및 이동 단말기
WO2017171204A1 (ko) 단말장치 및 그 제어방법
WO2019168383A1 (en) Electronic device
WO2019168380A1 (en) Electronic device
WO2015167165A1 (en) Method and electronic device for managing display objects
WO2015037932A1 (en) Display apparatus and method for performing function of the same
WO2018169222A1 (en) Method and electronic apparatus for displaying information
WO2016108660A1 (en) Method and device for controlling home device
WO2014069885A1 (en) Agent apparatus, electrical apparatus, and method of controlling agent apparatus
WO2016047837A1 (ko) 와치 타입의 단말기 및 그 동작 방법
WO2016010202A1 (en) Mobile terminal and control method for the mobile terminal
WO2017159941A1 (en) Display device and method of operating the same
WO2015030445A1 (en) Method and apparatus for executing application using multiple input tools on touchscreen device
WO2017142266A1 (en) Electronic device including light emitting device and operating method thereof
WO2017119673A1 (ko) 의류처리장치
WO2017119674A1 (ko) 의류처리장치
WO2016013705A1 (ko) 원격제어장치 및 그의 동작 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15733163

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 15110019

Country of ref document: US

122 Ep: pct application non-entry in european phase

Ref document number: 15733163

Country of ref document: EP

Kind code of ref document: A1