WO2021117949A1 - 스마트 월 및 그 제어 방법 - Google Patents

스마트 월 및 그 제어 방법 Download PDF

Info

Publication number
WO2021117949A1
WO2021117949A1 PCT/KR2019/017672 KR2019017672W WO2021117949A1 WO 2021117949 A1 WO2021117949 A1 WO 2021117949A1 KR 2019017672 W KR2019017672 W KR 2019017672W WO 2021117949 A1 WO2021117949 A1 WO 2021117949A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
user
information
smart wall
screen
Prior art date
Application number
PCT/KR2019/017672
Other languages
English (en)
French (fr)
Inventor
정미진
임철민
김현기
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to PCT/KR2019/017672 priority Critical patent/WO2021117949A1/ko
Priority to KR1020227006055A priority patent/KR20220114521A/ko
Publication of WO2021117949A1 publication Critical patent/WO2021117949A1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42212Specific keyboard arrangements
    • H04N21/42218Specific keyboard arrangements for mapping a matrix of displayed objects on the screen to the numerical key-matrix of the remote control
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B21/00Projectors or projection-type viewers; Accessories therefor
    • G03B21/54Accessories
    • G03B21/56Projection screens
    • G03B21/58Projection screens collapsible, e.g. foldable; of variable area
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/4662Learning process for intelligent management, e.g. learning user preferences for recommending movies characterized by learning algorithms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4758End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for providing answers, e.g. voting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4784Supplemental services, e.g. displaying phone caller identification, shopping application receiving rewards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8166Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173End-user applications, e.g. Web browser, game

Definitions

  • the present invention relates to a smart wall and a control method therefor, and more particularly, recognizes a user based on an image captured by a camera mounted on the smart wall, and displays required information differently depending on the amount of information based on the recognized user It relates to a smart wall and its control method.
  • An embodiment of the present invention aims to provide a smart wall that recognizes a user by analyzing an image captured by a camera, and displays information corresponding to the user differently depending on the amount of information based on the recognized user, and a method for controlling the same do it with
  • Another embodiment of the present invention aims to provide a smart wall that displays information corresponding to a recognized user differently according to the properties of an application, and a method for controlling the same.
  • a smart wall includes a display for displaying a graphic image; a screen that is rolled on the display to adjust a screen size of the display; a driving roller positioned on the screen and wound around the screen; a motor providing rotational force to the driving roller; a screen sensing unit for sensing the size of the first area of the screen; a first camera for capturing at least one first image comprising a user in front of the screen; a second camera for capturing at least one second image including the user; and controlling the driving of the motor based on the size of the first area sensed by the screen sensing unit, recognizing a user based on the at least one first image and the at least one second image, and the display and a control unit for controlling the information corresponding to the recognized user to be displayed differently according to the amount of information.
  • a method for controlling a smart wall comprising: capturing at least one first image including a user in front of a screen with a first camera; capturing at least one second image including the user with a second camera; recognizing a user based on the at least one first image and the at least one second image; and controlling the display to display information corresponding to the recognized user differently according to the amount of information.
  • the display when the amount of information exceeds a preset reference amount of information, the display can be controlled to display the information corresponding to the user by converting the information corresponding to the user from the line view to the half view, or from the half view to the full view. Therefore, the size of the displayed screen can be variably changed according to the amount of information required, thereby improving user convenience.
  • FIG. 2 is an exploded perspective view of a smart wall according to an embodiment of the present invention.
  • FIG. 7 is a view for explaining a method of installing the frame structure of the smart wall according to an embodiment of the present invention.
  • FIG. 8 is a view for explaining a basket of a smart wall according to an embodiment of the present invention.
  • FIG. 10 is a diagram illustrating an example of a screen sensing unit of a smart wall.
  • 15 is a diagram illustrating a configuration of a smart wall according to an embodiment of the present invention.
  • 16 is a flowchart illustrating a method for controlling a smart wall according to an embodiment of the present invention.
  • FIG. 17 is a diagram illustrating a hardware configuration of a smart wall according to an embodiment of the present invention.
  • FIG. 18 is a diagram illustrating a hardware configuration of a smart wall according to an embodiment of the present invention.
  • FIG. 19 is a diagram illustrating a line view, a half view, and a full view of a smart wall according to an embodiment of the present invention.
  • 20 is a diagram illustrating differently displaying information corresponding to a user according to an application attribute, according to an embodiment of the present invention.
  • 21 is a diagram illustrating display of customized information corresponding to a user in a line view in the case of a smart home application according to an embodiment of the present invention.
  • 22 is a diagram illustrating a display by converting information corresponding to a user from a line view to a half view based on the amount of information, according to an embodiment of the present invention.
  • 23 is a diagram illustrating a display by converting information corresponding to a user from a half view to a full view based on the amount of information, according to an embodiment of the present invention.
  • 24 is a diagram illustrating determining a user's intention using a reinforcement learning model, according to an embodiment of the present invention.
  • FIG. 1 is a view showing a wall-type frame of the smart wall 100 of the present invention.
  • the present invention relates to a smart wall 100 in which electronic devices used at home, such as media devices and home appliances, are integrated into the wall so as not to be exposed to the exterior.
  • electronic devices such as display unit, intercom, speaker, air purifier, humidifier, lighting, digital watch, router, and set-top box are mounted on the wall to provide a total space solution that minimizes the exposure of electronic devices in the space.
  • the thickness of the smart wall 100 of the present invention can be formed as thin as 15 to 20 cm, thereby preventing the narrowing of the indoor space during installation. Rather, the storage furniture and home appliances 160 may be embedded in the smart wall 100 to provide a neat appearance. If necessary, a part of the wall may be selectively pulled out so that the necessary home appliances may protrude, and the space in which the home appliances are not buried may be utilized as a mounting space 114 such as a drawer.
  • a TV can be thinned in recent years to realize a thin display unit.
  • the TV itself serves as a cover for the frame and can be combined with the frame to form a front appearance.
  • An opening 153 may be formed in the art wall 151 to expose the display unit of the display device 161 , and a cover for opening and closing the opening 153 may be further provided.
  • the display unit using OLED Since the display unit using OLED is curved, it is exposed to the outside only when in use, and when not in use, it can be rolled up and stored inside the wall, thereby providing a neat screen in appearance.
  • the projector As for the projector, a short throw projector has recently been developed, and the projector can be mounted on a wall and drawn out in the form of a drawer and output to the screen to realize a large screen. In this case, when not in use, the display unit is not visible on the outside of the smart wall 100 to provide a cleaner appearance.
  • FIG 2 is an exploded view of the smart wall 100 of the present invention
  • Figure 3 is a block diagram of the smart wall 100 of the present invention
  • the inside of the front art wall 150 is a plurality of shape steel 115 (shape steel) ) can be located in a frame structure arranged in a grid.
  • the frame structure 110 is a rigid member and can be supported so as not to collapse even when an impact is applied to the wall.
  • the electronic product 160 mounted on the frame structure 110 may be hidden and configured to be viewed as a wall.
  • the front wall covered with such a panel is called an art wall 150 .
  • the art wall 150 can be changed differently according to the taste of the consumer. It can also be easily changed after installation to change the atmosphere of the house.
  • the section steel 115 arranged in a lattice form may partition the mounting space 114 , and the electronic product 160 may be seated in each mounting space 114 .
  • Each mounting space 114 may have the same size or multiple sizes, so that the mounted electronic product 160 may be modularized and disposed at any position within the frame structure 110 .
  • an acoustic device 162 such as a speaker may be mounted in the mounting space 114 , and a plurality of acoustic devices 162 may be configured according to the number of channels.
  • the art wall 152 covering the sound device 162 may be configured in a mesh shape to output sound or selectively open and close the opening through which sound is output to minimize the opening exposed to the art wall 152 . It is also possible to prevent water from entering through the opening by using a waterproof mesh or the like.
  • Seasonal home appliances such as a dehumidifier 163, a humidifier 165, an air purifier 164 and air conditioner, may be provided with a heater 167 such as a stove.
  • a heater 167 such as a stove.
  • these seasonal household appliances are not in use, if they are left exposed to the outside, dust accumulates and looks unsightly, so it is common to put a cover or put them in a warehouse.
  • the art wall 150 can cover it so that it is not exposed to the outside even if it is left as it is even when not in use. That is, a separate storage space is provided for seasonal home appliances. no need to do
  • the dehumidifier 163 or the humidifier 165 may implement a space for collecting/storing water to remove the collected water or to fill the water in a drawer type.
  • An opening 154 through which air passes is required for water to be discharged or to collect surrounding moisture.
  • Such an opening 154 may use the gap between the art wall 150 and the frame structure 110, even if it is not necessarily formed in the art wall 150.
  • the air purifier 164 may include an openable and openable cover to periodically replace the filter.
  • Each of the electronic products may be individually controlled, but may further include a controller 180 for integrally controlling the electronic products mounted on the smart wall.
  • the controller may have its own memory 185 to store the collected data.
  • the dehumidifier, humidifier, and air purifier 164 may be installed at the lower part of the smart wall 100 so that the user can easily operate it.
  • a set-top box or WIFI router 175 if a set-top box or WIFI router 175 is mounted, a home network system can be implemented. can Through the WIFI router 175, not only the functional unit mounted on the smart wall 100, but also other electronic devices such as a computer or a mobile terminal located outside the smart wall 100 can be connected and interoperable, and the smart wall 100 It may include a controller 180 for controlling each electronic product 160 mounted on the.
  • an LED or a small display panel By arranging an LED or a small display panel on the upper portion of the smart wall 100, simple information such as weather and time event information may be provided to the user, or may be used as lighting. An interior effect can be added by arranging lighting on the smart wall 100 itself.
  • the router 175 is an intermediate device through which the router organizes and guides the way when different communication methods or signals are used.
  • the functional unit mounted on the smart wall 100 can be controlled by connecting it through the WIFI router 175 without necessarily connecting it by wire.
  • the router 175 serves to connect the external network and the internal network at the same time, the user can access the home network as well as the electronic product 160 mounted on the smart wall 100 through the router 175 connected to the external network from the outside. It can control other home appliances and media devices connected to it.
  • the controller 180 may control the electronic devices of the smart wall 100 in conjunction with the mobile device. That is, when a mobile device is mounted on the smart wall 100, media images and music in the mobile device are output, or when a video call is made through the mobile device, information from the mobile device is transmitted through Bluetooth or Wi-Fi and the smart wall 100 ) may output the image of the other party to the display device 161 .
  • a wall pad connected to a camera or method system at the entrance may be provided in the mounting space 114 of the smart wall 100 .
  • the wall pad embedded in the existing load-bearing wall is difficult to repair and replace and difficult to change in case of failure, but it has the advantage of easy maintenance when it is configured in a unit form and provided in the smart wall 100 .
  • the smart wall 100 may be installed in the living room as well as the room. By configuring the wall between the rooms as the smart wall 100, the smart wall 100 can be used in both directions in a neighboring room. For example, if one air conditioner or air purifier is allowed to flow in both directions, it can be used in both spaces.
  • a monitor and a PC may be mounted and used according to the purpose of the room.
  • different functional units such as an electronic board, may be mounted and used according to the age of the child.
  • a smart wall 100 When installed in an office, a smart wall 100 equipped with functional units such as an electronic board, an air purifier, a video conference system, and a PC can be used. Since the electronic product 160 mounted on the smart wall 100 is covered by the art wall 150, a separate exterior case is not required.
  • the same module can be manufactured and supplied on a large scale when constructing a hotel/resort or apartment, thereby reducing the defect rate and producing at a low cost.
  • the assembled smart wall 100 is difficult to transport, and when the building is completed, it is difficult to bring it into the building. Therefore, when the smart wall 100 is installed when moving to an existing building or interior, the smart wall 100 can be implemented by installing a frame in the building and inserting a unit module. In this case, for convenience of installation and standardization, the frame structure 110 may be implemented using a plurality of module frames.
  • FIG. 4 shows a coupling method of the frame modules 111, 112, and 113 of the smart wall 100 according to an embodiment of the present invention.
  • frame modules 111 , 112 , and 113 in the form of bookshelves including a mounting space 114 may be used.
  • Frame modules 111 , 112 , and 113 may be manufactured by arranging a plurality of beam-shaped sections 115 in a grid to partition the mounting space 114 .
  • the frame modules 111 , 112 , and 113 are a first frame module 111 in which the mounting spaces 114 are arranged side by side in the horizontal direction, and a second frame module for mounting a large product 160 such as the display device 161 . (112) and the mounting space 114 in the vertical direction may include a third frame module 113 arranged side by side.
  • the second frame module 112 includes a large space to be mounted regardless of the size of the display device 161 . If necessary, as shown in FIG. 4 , a beam partitioning the mounting space 114 may be provided to fix the display device 161 and the rigidity of the frame structure 110 may be improved.
  • the first frame module 111 may be vertically stacked with the second frame module 112 .
  • the horizontal length of the first frame module 111 may be the same as the horizontal length of the second frame module 112 so that the lattice does not shift when stacked in the vertical direction.
  • the first frame module 111 may be disposed above and below the second frame module 112 , respectively, depending on the size of the first frame module 111 and the second frame module 112 or the size of the installation space. Accordingly, the number of the first frame modules 111 stacked in the vertical direction may be increased or decreased.
  • the third frame module 113 in which the mounting spaces 114 are arranged side by side in the vertical direction may have the same height as that of the first frame module 111 and the second frame module 112 stacked in the vertical direction.
  • the third frame module 113 may be positioned in the lateral direction of the first frame module 111 and the second frame module 112 as shown in FIG. 4 .
  • a plurality of frame modules 111 , 112 , and 113 may be combined with fasteners to form a rectangular parallelepiped frame structure 110 .
  • FIG. 5 is a diagram illustrating a method of manufacturing the frame modules 111, 112, and 113 of the present invention.
  • the third frame module 113 in which the mounting space 114 is disposed in the vertical direction will be described as an example.
  • Each of the frame modules 111 , 112 , and 113 may use a section steel 115 elongated in one direction.
  • a shape steel is a structural member and refers to a bar-shaped member having various cross-sectional shapes.
  • a column-shaped section having the same cross section in the longitudinal direction can be constructed by rolling or bending a plate material. Since the section steel has more empty space than a beam-shaped member having a circular or rectangular cross section, it has the advantage of obtaining rigidity of a certain size or more with light and less material.
  • the present invention may use a C-shaped steel 115 having a C-shaped cross section as shown in FIG. 5 .
  • the C-shaped steel 115 may be formed by vertically bending both ends of a metal plate in the width direction. If both ends are vertically bent only once, a C-shaped cross-section can be obtained, and when both ends are vertically bent twice, a C-shaped cross-section can be obtained.
  • a power source or signal line connected to the electronic product 160 may be disposed, and an outlet module 140 to which power or data cables are fastened may be disposed.
  • the outlet module 140 may include a power terminal for supplying power, a data terminal for transmitting and receiving data such as an Internet line or cable input, and a connector for connecting a functional unit inserted into the frame to another functional unit.
  • the connector has terminals on both sides of the frame, and data can be exchanged with each other by inserting a data connection line of each electronic device into the terminal.
  • the outlet module 140 may include a rail structure that moves along the frame modules 111 , 112 , and 113 .
  • a vent hole 116 may be formed in the section steel 115 as shown in FIG. 5 .
  • the vent hole 116 may reduce the weight of the section steel 115 and may discharge heat generated from the electronic product 160 .
  • a fan may be used to exhaust hot air to the outside.
  • a heating effect can be obtained in winter.
  • a structure that circulates heat inside using a bar fan that raises the indoor temperature or discharges heat to the outside can be added in addition to the wiring connected to the outdoor unit of the air conditioner.
  • Each frame module may include an outer steel forming a quadrangle on the outer periphery and an inner steel for partitioning the mounting space 114 therebetween.
  • the outer cavity may include a vertical cavity extending in a vertical direction and a horizontal cavity extending in a horizontal direction.
  • the first frame module 111 to the third frame module 113 may be assembled by arranging a horizontal steel between a pair of vertical steel.
  • the vertical brackets 122 and 123 of the fixing member 120 may be inserted and fastened to the ends of the vertical steel by locating the vertical steel outside the horizontal steel.
  • the inner steel located inside the outer steel divides the space surrounded by the outer steel to constitute the mounting space 114, and the inner steel can be welded to the outer steel and assembled to be non-movable, and some inner steel is formed using bolts or hooks. It can be combined so that it can be removed as needed.
  • the number of times of assembly in the field can be minimized.
  • the dimensions of the product 160 can be kept constant and the installation time can be reduced.
  • it can be modularized to a size that is easy to move, so it can be easily transported to the field.
  • 6 shows an example of various frame structures 110 according to a combination of the frame modules 111, 112, and 113 of the present invention.
  • 6A is a frame structure 110 in a state in which a pair of first frame modules 111a, one second frame module 112a, and a pair of third frame modules 113 of FIG. 4 are assembled. ) is shown. Since the first frame module 111a has four mounting spaces 114, it may be difficult to install in a narrow indoor space due to a wide width.
  • a first frame module 111b having a short horizontal length having three mounting spaces 114 may be used.
  • the second frame module 112b may have a length corresponding to the horizontal length of the first frame module 111b.
  • the third frame module 113 may be disposed on both sides of the first frame module 111 and the second frame module 112 stacked in the vertical direction. Since the floor height of a typical house is 220 cm to 230 cm, the height of the third frame module 113 may be configured to be less than 220 cm. Although a 5-stage vertical frame is shown in the drawing, a 6-stage vertical frame may also be manufactured in case of a high multi-story or high floor.
  • the frame structure 110 may be configured by omitting the third frame module 113 and using only the first frame module 111a and the second frame module 112a, and a large display device ( If the 161) is not mounted, only the third frame may be arranged in a line to implement the frame structure 110 .
  • Each of the frame modules 111 , 112 , and 113 may be fastened by bolts or by a welding method.
  • the frame structure 110 configured by fastening the frame modules 111 , 112 , and 113 may be fixed to the ceiling and the floor in order to be installed in an indoor space.
  • the fixing bracket 125 installed on the ceiling or floor is a member bent in an L-shape, and one side 125b extends vertically from the ceiling or floor, and the other side 125a extends from the ceiling or floor. It may include a first vertical bracket 122 inserted into the inner space of the vertical cavity of the first frame module 111 and the second frame module 112 .
  • the first vertical bracket 122 may be formed to be longer than the vertical length of the first frame module 111 so that not only the first frame module 111 but also the second frame module 112 can be fastened.
  • a second vertical bracket 123 disposed side by side with the first vertical bracket 122 and inserted into the third frame module 113 may be further included. Since the vertical cavity of the third frame module 113 is one member, it is not necessary to be as long as the first vertical bracket 122 .
  • the coupling bracket 121 coupled to the ends of the first vertical bracket 122 and the second vertical bracket 123 may form a T-shape together with the vertical brackets 122 and 123 .
  • the coupling bracket 121 is coupled to the vertical brackets 122 and 123 and is perpendicular to the seating portion 121b and the seating portion 121b that are seated on the upper surfaces of the first frame module 111 and the third frame module 113 . It may include a fastening portion (121a) extending in the direction and fastened to the fixing bracket (125).
  • the coupling bracket 121 and the fixing bracket 125 can be fastened using a screw, and the fastener to which the screw is fastened can be formed to be elongated in the vertical direction so that it can be adjusted according to the ceiling height.
  • the smart wall 100 When the smart wall 100 is installed on the existing wall, it may further include a fixing member 120 for fastening to the existing wall.
  • the smart wall 100 Since the smart wall 100 has an audio device, such as the speaker 162 , when it is used as a temporary wall, a space separated from the wall is generated. At this time, in order to block the sound of the two spaces, the smart wall 100 may be fixed by adding a soundproof structure so that the sound does not leak to the ceiling, floor, and sidewall in contact with the smart wall 100 .
  • the frame modules 111 , 112 , and 113 may be partitioned into a plurality of mounting spaces 114 by using the inner section steel 115 . As shown in FIG. 7 , the basket 130 may be inserted into the mounting space 114 to provide a space for the electronic product 160 to be seated.
  • the second frame module 112 has a relatively large mounting space 114 because the display device 161 is located, but the mounting space 114 of the first frame module 111 and the third frame module 113 is It can be formed in a standardized size. If the mounting space 114 of a standardized size is used, the basket 130 can also be standardized, so there is an advantage in that there is no need to unnecessarily manufacture parts of various shapes.
  • the size of the mounting space is formed to be the same, it is convenient for standardization, but a larger space may be required depending on the electronic product 160 to be mounted.
  • the size of the mounting space 114 may be formed as an integer multiple of the basic size in consideration of the difference. For example, with respect to the first mounting space 1141 having a horizontal size and b, a second mounting space 1142 having a horizontal size an integer multiple of a, or a third mounting space having an integer multiple of b It may include a mounting space 1143 .
  • the horizontal size of the first mounting space 1141 corresponds to the horizontal size of the third frame module 113
  • the vertical size corresponds to the vertical size of the first frame module 111
  • the mounting space 114 means an internal space partitioned by the section steel 115 , so the size of the first frame module 111 and the size of the third frame module 113 are compared with the difference due to the thickness of the section steel 115 . is ignored
  • the first frame module 111 may include only the first mounting space 1141 and the second mounting space 1142 , and the third frame module 113 has a short horizontal length. Therefore, only the first mounting space 1141 and the third mounting space 1143 may be included.
  • FIG. 9 is a diagram illustrating a screen change according to a size at which the display device 161 of the smart wall 100 is exposed to the front according to an embodiment of the present invention. As shown in (a) of FIG. 9, only half of the display device 161 may be exposed to provide necessary information to the user, or as shown in FIG. 9(b), an interior effect may be obtained by exposing the display device 161 in a small size.
  • the smart wall 100 of the present invention may include a screen 200 that covers the front surface of the display device 161 .
  • the screen 200 may use a material that can be wound on a roll, such as a fabric material, and covers the front of the display device 161 so that when the display device 161 is not used, the display device 161 is not exposed to the outside. serves as a cover.
  • the screen 200 may be wound around the driving roller 210 in order to adjust the area of the first region of the screen 200 positioned in front of the display device 161 . If the number of times that the screen 200 is wound around the driving roller 210 is large, the area of the first region is reduced and the display device 161 is exposed to the front.
  • a part of the screen 200 (a first area) is located in front of the display device 161 by winding the screen 200 around the driving roller 210 half a turn, and a part of the screen 200 (a second area) is a display device. It can be configured to be located on the back of (161).
  • the area of the second region positioned on the rear surface of the display device 161 is increased, the area of the first region positioned on the front surface of the display device 161 is reduced. The size of the area exposed on the front surface of the display device 161 may be adjusted.
  • the control unit 180 adjusts the rotation direction of the driving roller 210 to adjust the area of the screen 200 positioned in front of the display device 161, and when the screen 200 reaches a preset position, the driving roller ( 210) to stop the rotation.
  • the controller may control the image output to the display device 161 according to the position of the screen 200 .
  • an image needs to be output to only a part of the display device 161 .
  • an image is output to the portion where the screen 200 is located, there is a problem of unnecessary power consumption and providing a cropped image to the user.
  • the screen 200 can be pushed from the surface of the driving roller, and in the case of an embodiment wound on the driving roller, the longer the length of the screen 200 wound on the driving roller, the longer the screen moves per rotation of the driving roller ( Since the length of the 200) is different, it is difficult to accurately match the moving distance of the screen 200 with the number of revolutions of the motor that rotates the driving roller 210 .
  • a screen sensing unit for detecting the size of the first area of the screen 200 is required. Since the screen 200 of the present invention moves only in the vertical direction, the size of the screen 200 can be known by sensing the movement distance in the vertical direction or the position of the lower end of the first area of the screen 200, the screen sensing unit It can be said that it is a device for sensing the length of the first area in the vertical direction.
  • the screen sensing unit of this embodiment is a conductive pattern 241 formed on the surface of the screen 200, a pair of terminals 242, and a pair of and a determination unit that measures the resistance between the terminals 242 and determines that the size of the first area is larger as the resistance is greater, and that the size of the first area is smaller as the resistance is smaller.
  • the conductive pattern 241 formed on the second surface 200b includes a first vertical pattern 241a extending in a vertical direction, a second vertical pattern spaced apart from the first vertical pattern 241a and extending in a vertical direction, and the second vertical pattern 241a.
  • a connection pattern 241c connecting the lower end of the first vertical pattern 241a and the lower end of the second vertical pattern 241b may be included.
  • the positions of the first vertical pattern 241a and the second vertical pattern 241b are not limited on the second surface 200b of the screen 200, and the connection state with the terminal 242 is determined in both the full view state and the line view state. It is sufficient if it has a length that can be maintained, and the connection pattern 241c has a straight line extending in the horizontal direction on the drawing, but it is not necessarily a straight line.
  • the first vertical pattern 241a and the second vertical pattern 241b A conductive member connecting the lower ends of the
  • the pair of terminals 242 respectively contact the first vertical pattern 241a and the second vertical pattern 241b and are fixed to the frame.
  • a member having elasticity may be used.
  • the contact state between the conductive pattern 241 and the terminal 242 may be maintained by using a material having elasticity such as a sponge or using a member having elasticity such as a clip shape or a pogo pin.
  • the pair of terminals 242 are connected to the conductive pattern 241 , and when power is applied to the terminal 242 , a current flows through the conductive pattern 241 .
  • the resistance between the terminals 242 may vary according to the length of the conductive pattern 241 .
  • the screen sensing unit may detect the size of the resistance to calculate an increase/decrease in the length of the conductive pattern 241 and calculate the size of the first region of the screen 200 .
  • FIG. 11 is a view for explaining the operation of the screen sensing unit according to a change in the size of the first area of the screen sensing unit of FIG. 10 .
  • the lower end of the display device 161 as shown in FIG. 9(b). It is a view showing the second surface 200b of the screen 200 in the line view mode in which only a portion is exposed.
  • FIG. 11B is a diagram illustrating the second surface 200b of the screen 200 in a half-view mode in which only half of the display unit is exposed as shown in FIG. 9A .
  • FIG. 11C is a diagram illustrating the second surface 200b of the screen 200 in the full-view mode exposing the entire area of the display device 161 as in FIG. 1 .
  • the conductive pattern 241 positioned between the pair of terminals 242 in FIG. 11A has the longest length and the conductive pattern 241 positioned between the pair of terminals 242 in FIG. 11C . ) is the shortest. Accordingly, since the length of the conductive pattern 241 positioned between the pair of terminals 242 is changed in each mode, the size of the resistance is also changed. Since the resistance increases as the length of the conductive pattern 241 increases, R1 may be the largest, then R2 and then R3 may decrease in size.
  • the controller may store the resistance value at the designated stop position in the memory, and stop driving the motor when the resistance value stored in the memory is equal to the resistance between the pair of terminals 242 .
  • FIG. 12 is a diagram illustrating a modified example of the screen sensing unit of FIG. 10 .
  • the screen 200 uses a thin material such as fabric, it may be shaken or wrinkled when the screen 200 moves in the vertical direction.
  • the load bar 209 may be disposed at the lower end of the first region to prevent such wrinkling and maintain a flat state.
  • the load bar 209 may provide a force to pull the first area of the screen 200 downward and prevent the screen 200 from being bent in the horizontal direction. Since the first surface 200a is exposed to the user, it may be disposed on the second surface 200b as shown in FIG. 12 .
  • the first vertical pattern 241a and the second vertical pattern 241b of the conductive pattern 241 may be disposed adjacent to the left and right ends of the screen 200 as shown in FIG. 12 .
  • An electromagnet 246 may be disposed on a frame adjacent to the first vertical pattern 241a and the second vertical pattern 241b, and a horizontal pulling force may be provided to the screen 200 using the electromagnet 246 .
  • the control unit When the screen 200 moves in the vertical direction, that is, when the motor is driven, the control unit does not apply power to the electromagnet 246 , and the position of the screen 200 can be sensed using the conductive pattern 241 . .
  • the control unit applies power to the electromagnet 246 , the electromagnet 246 provides a magnetism that pulls the conductive pattern 241 so that the screen 200 is shown in FIG. 12 .
  • the attractive force is provided in the left and right directions, and the screen 200 can be spread flat.
  • a pair of electromagnets 246 positioned on the left and right of the screen 200 may apply a force in the left and right directions so that the screen 200 can be flattened regardless of the stop position of the screen 200 .
  • the screen sensor may include an ultrasonic sensor 243 for detecting the position of the lower end of the first area.
  • the ultrasonic sensor 243 may measure the distance between the lower end of the screen 200 and the ultrasonic sensor 243 by emitting ultrasonic waves and detecting ultrasonic waves that are reflected and returned to the lower portion of the first region of the screen 200 . Based on this, the size of the first area of the screen 200 may be calculated, and the ultrasonic sensor 243 may be located below the mounting space 114 .
  • a distance sensing sensor can be implemented using infrared or other microwaves.
  • the ultrasonic sensor 243 includes a transmitter 243a that emits ultrasonic waves, and a receiver 243b that detects ultrasonic waves emitted from the transmitter 243a and reflected from the lower end of the first region.
  • the ultrasonic sensor 243 is accommodated in the housing 244 in which the opening 244a is formed in order to prevent foreign substances from entering the ultrasonic sensor 243 when ultrasonic waves are not used, and
  • the opening 244a can be selectively opened and closed by using the sensor cover 245 .
  • the sensor cover 245 of this embodiment rotates and moves, and the control unit removes the sensor cover 245 only when the motor for rotating the driving roller is driven (FIG. 14a), and normally the sensor cover 245 opens the opening. 244a can be maintained in a covered state (FIG. 14(b)).
  • the size of the first area of the screen 200 can be continuously monitored, so that the screen 200 can be controlled to be driven naturally.
  • the speed of the motor gradually increases from 0 (acceleration section, v1), moves at a constant speed (constant speed section, v2), and reaches the stop position (SP).
  • the speed is reduced (v3, deceleration section) to stop exactly at the stop position SP as shown in FIG. 13(b).
  • the smart wall 100 of the present invention as described above is mounted on the wall with multimedia devices such as TV and audio, and is installed on the wall at the same height as the wall to provide a neat appearance.
  • a cleaner appearance of the smart wall 100 may be provided by using the screen 200 selectively exposing the display device 161 according to the usage aspect of the display device 161 .
  • the controller can provide an image synchronized with the position of the screen 200 .
  • FIGS. 15 to 24 will be described in detail below with reference to FIGS. 15 to 24 .
  • those skilled in the art may supplementally interpret FIGS. 15 to 24 or modify the embodiment with reference to FIGS. 1 to 14 described previously.
  • 15 is a diagram illustrating a configuration of a smart wall according to an embodiment of the present invention.
  • the smart wall 100 includes a microphone 122 , an air purifier 130 , a first outlet 132 , a second outlet 134 , a first camera 140 , and a second camera 142 . ), display 151 , screen 152 , driving roller 153 , motor 154 , screen sensing unit 155 , first speaker 160 , second speaker 162 , memory 170 , control unit (180).
  • the smart wall 100 includes a mounting cell for mounting a multimedia device that reproduces content.
  • the multimedia device displays content executed by the first application.
  • the multimedia device includes a digital TV, a DVD player, an audio player, and the like.
  • the microphone 122 processes an external sound signal as electrical voice data.
  • the processed voice data may be utilized in various ways according to a function (or a running application program) being performed by the smart wall 100 .
  • various noise removal algorithms for removing noise generated in the process of receiving an external sound signal may be implemented in the microphone 122 .
  • the air purifier 130 purifies the air when the sensed concentration of the fine dust is greater than or equal to a threshold value.
  • the first outlet 132 discharges the purified air to the first space (discharge air).
  • the second outlet 134 discharges the purified air to the second space.
  • the first camera 140 captures at least one first image including a user and an object in front of the screen.
  • the second camera 142 captures at least one second image including the user and the object.
  • the first camera 140 and the second camera 142 include a TOF camera.
  • TOF camera refers to a camera in which a TOF sensor is attached to a general camera. Specifically, an image sensor that captures a scene and shows it produces a 2D-based result. If the TOF sensor intervenes here, depth measurement becomes possible and 3D results can be realized.
  • TOF Time of Flight
  • the TOF sensor is a kind of component that can detect this role.
  • a depth map refers to an image containing information related to a distance from an observation point to an object surface in 3D computer graphics.
  • the TOF camera captures the first image including the depth map.
  • an image is obtained as a result of applying the original image, the depth map, and the depth map to the original image.
  • the first speaker 160 outputs sound to the first space.
  • the second speaker 162 has a property different from that of the first speaker and includes a second speaker 162 that outputs sound to the second space.
  • the first speaker 160 may be a 5.1ch non-directional speaker
  • the second speaker 162 may be a directional speaker.
  • a topographic speaker is a speaker system that emits sound only in a desired direction, and means that two or more speakers of the same caliber are placed on the same plane to operate as one speaker as a whole. It is also called column speaker because its height is large compared to its width or depth and it is in the shape of a column. It does not occupy a floor area and has the advantage of being able to adjust the listening position to the height of the ear.
  • the memory 170 stores a user's preset motion image.
  • the controller 180 determines whether to switch to the directional speaker based on the images of the first camera 140 and the second camera 142 , and controls at least one of the first outlet 130 and the second outlet 132 . do.
  • the display 151 displays a graphic image.
  • the controller 180 controls the display 151 to display a graphic image corresponding to the content executed by the first application.
  • the screen 152 covers the front surface of the display and is rolled over the display 151 to adjust the screen size of the display 151 .
  • the screen size of the display may be a line view, a half view, or a full view.
  • the driving roller 153 is positioned above the screen 152 and controls the screen 152 to be wound.
  • the motor 154 provides rotational force to the driving roller 153 .
  • the screen sensing unit 155 detects the size of the first area of the screen 152 .
  • the size of the first area may be a line view, a half view, or a full view.
  • the memory 170 stores an image of an object.
  • the controller 180 controls the driving of the motor 154 based on the size of the first area detected by the screen sensing unit 155, and controls the user based on at least one first image and at least one second image. is recognized, and the display 151 is controlled to display information corresponding to the recognized user differently according to the amount of information.
  • 16 is a flowchart illustrating a method for controlling a smart wall according to an embodiment of the present invention.
  • the present invention is performed by the controller 180 .
  • At least one first image including the user in front of the screen 152 is captured by the first camera 140 (S1610).
  • At least one second image including the user is captured by the second camera 142 ( S1620 ).
  • the user is recognized based on the at least one first image and the at least one second image (S1630).
  • the display 151 controls to display information corresponding to the recognized user differently according to the amount of information (S1640).
  • FIG. 17 is a diagram illustrating a hardware configuration of a smart wall according to an embodiment of the present invention.
  • the smart wall 100 includes a screen 152 and a display 151 .
  • the size of the display 151 corresponding to the area viewed by the user may be adjusted.
  • FIG. 18 is a diagram illustrating a hardware configuration of a smart wall according to an embodiment of the present invention.
  • the mounting space of the smart wall 100 means a space for mounting parts.
  • the mounting space of the smart wall 100 includes a driving roller 153 , a first speaker 160 , a second speaker 162 , a display 151 , a first camera 140 , a second camera 142 , and an air purifier.
  • a first outlet 132 connected to the second outlet 134 connected to the air purifier may be equipped with a device cabinet (not shown), a power distributor (not shown), an internet distributor (not shown), and the like.
  • 19 is a diagram illustrating a line view, a half view, and a full view of a smart wall according to an embodiment of the present invention. 19 includes FIGS. 19(a), 19(b), and 19(c).
  • 19A is a diagram illustrating a line view.
  • 19A is a diagram illustrating a line view.
  • 19B is a diagram illustrating a half view.
  • 19( c ) is a diagram illustrating a full view.
  • the line view refers to a view in which the display 151 in the smallest size is exposed at the bottom of the smart wall and provides simple notification information.
  • the half-view means a view in which the display 151 is exposed in a medium size when the smart wall is interrupted, and provides notification information with a larger amount of information than the line view.
  • the full view refers to a view used when the display 151 is exposed in the largest size when the smart wall is stopped, and is used when watching a movie or watching TV.
  • FIG. 20 is a diagram illustrating differently displaying information corresponding to a user according to an application attribute, according to an embodiment of the present invention.
  • Fig. 20 includes Figs. 20(a) and 20(b).
  • 20A is a diagram illustrating display of information corresponding to the first application in a line view when the first application is a widget application.
  • 20B is a diagram illustrating a case in which the first application is a weather widget, a music play widget, a fire place widget, and a gallery widget.
  • a widget is a graphical user interface (GUI) that more smoothly supports interaction between a user and an application program/operating system; it refers to an environment in which a user can work through graphics.
  • GUI graphical user interface
  • the controller 180 controls the display 151 to display the information 30 corresponding to the first application in a line view.
  • the line view refers to a view in which the screen 152 is rolled on the display 151 to minimize the screen size of the display 151 .
  • the controller 180 recognizes a user based on at least one first image and the at least one second image, and the display 151 provides information corresponding to the recognized user. 1 Control to display differently in the properties of the application.
  • the first application includes a weather widget 2010, a music playback widget 2020, a fire place widget 2030 and a gallery widget 2040, and a video playback widget (not shown).
  • the information includes information optimized for the user.
  • the controller 180 controls the display 151 to display weather widget information corresponding to the user in a line view.
  • the controller 180 controls the display 151 to display video playback widget information corresponding to the user in a full view.
  • the controller 180 controls the display 151 to display execution information of the first application in a line view.
  • the controller 180 controls the display 151 to display the weather widget execution information corresponding to the user in a line view.
  • the controller 180 controls the display 151 to display the music playback widget execution information corresponding to the user in a line view.
  • the controller 180 controls the display 151 to display Fire Place widget execution information corresponding to the user in a line view.
  • the user may be a first user or a second user.
  • the display 151 displays the weather widget execution information corresponding to the first user control to display in line view.
  • the display 151 displays the weather widget execution information corresponding to the second user in a half view control to do
  • the view determined based on the amount of information may be a line view, and the view determined based on the intention of the second user may be a half view. A detailed description thereof will be described later with reference to FIG. 24 .
  • execution information of the first application is displayed in a line view based on the number of selections.
  • the controller 180 controls the display 151 to display execution information of the first application in a line view based on the number of times selected by the user for a predetermined time.
  • the controller 180 controls the display 1510 to display execution information of the weather widget application in a line view. control to display.
  • a user in the case of a weather widget, a music play widget, a fire place widget, and a gallery widget, a user can directly select a specific widget application, or an AI learned according to a set frequency can automatically select and play it.
  • the controller 180 controls the display 151 to be in an inactive state.
  • the display when there is no user in front of the smart wall, the display can be turned off to save power, and the lifespan of the display panel can be extended.
  • the user When a user appears in front of the smart wall, the user can be recognized more accurately through vision recognition using two cameras, and the execution screen of various widgets can be displayed in a line view.
  • FIG. 21 is a diagram illustrating display of customized information corresponding to a user in a line view in the case of a smart home application according to an embodiment of the present invention.
  • Fig. 21 includes Figs. 21(a) and 21(b).
  • 21A is a diagram illustrating display of customized information corresponding to a user in a line view in the case of a smart home application.
  • 21( b ) is a diagram illustrating customized information corresponding to a user in various situations.
  • the controller 180 controls the display 151 to display customized information 30 corresponding to a recognized user in a line view.
  • the line view refers to a view in which the screen 152 is rolled on the display 151 to minimize the screen size of the display 151 .
  • various situations may be user recognition 2110 , delivery arrival notification 2120 , front door open notification 2130 , part installation guide 2140 to be mounted on the smart wall, and the like.
  • the controller 180 controls the display 151 to display a text implying face recognition, an emoticon indicating welcome, and a welcome message such as hello to the first user. and control to display customized information corresponding to the first user in a line view.
  • the controller 180 displays a text implying the arrival of the parcel, an icon indicating the arrival of the parcel, and a message indicating the arrival of the parcel. and control to display customized information corresponding to the first user in a line view.
  • the controller 180 controls the display 151 to display a text implying that the door is open, an icon indicating the door open, and a message indicating that the front door is opened. and control to display customized information corresponding to the first user in a line view.
  • the control unit 180 controls the display 151 to include a text on the part installation method and a message explaining the part installation method, and the first user Controls to display customized information corresponding to the line view.
  • the user when a smart home application is used even when the smart TV is off, the user can be recognized and customized information such as a personal schedule corresponding to the recognized user can be provided in a line view.
  • the customized information includes user recognition, provision of personal information such as schedule, operation monitoring and completion notification of home appliances, delivery arrival notification, visitor notification, peripheral device installation guidance, information on how to replace consumables such as air conditioner filters, and the like.
  • FIG. 22 is a diagram illustrating a display by converting information corresponding to a user from a line view to a half view based on the amount of information, according to an embodiment of the present invention.
  • Fig. 22 includes Figs. 22(a) and 22(b).
  • 22A is a diagram illustrating display of customized information corresponding to a user in a line view in the case of a smart home application.
  • 22B is a diagram illustrating display of customized information corresponding to a user in a half view.
  • control unit 180 When the amount of information exceeds the first reference amount of information, the control unit 180 shows the information 30 corresponding to the user on the display 151 in the line view shown in FIG. 22(a) in FIG. 22(b). Control to display by converting to one half view.
  • the energy usage 30 may be simply displayed in a line view.
  • the controller 180 displays the energy usage in half-view in more detail. can do.
  • the display 151 controls the display 151 to convert the information corresponding to the user from the half view to the full view.
  • the controller 180 may display the energy usage in more detail in a full view.
  • the second reference information amount means that more information is included than the first reference information amount.
  • the present invention it is possible to provide detailed information by notifying an approximate energy usage in a line view and automatically switching to a half view or a full view according to the amount of information when detailed information is required.
  • the line view includes this month's estimated electricity bill and a comparison of neighboring houses.
  • the half view includes information of the line view, monthly usage (kWh), comparison of all households in the same apartment complex and in the complex, comparative analysis this month and last month, and annual usage history information may include
  • FIG. 23 is a diagram illustrating a display by converting information corresponding to a user from a line view to a full view based on the amount of information, according to an embodiment of the present invention.
  • Fig. 23 includes Figs. 23(a) and 23(b).
  • 23A is a diagram illustrating display of customized information corresponding to a user in a line view when the first application is a community reservation application.
  • 23B is a diagram illustrating display of customized information corresponding to a user in a full view.
  • the controller 180 may display text information 30 obtained by converting a user's speech into text with an STT function in a line view. For example, what the user is saying could be, book a guest house for this Saturday.
  • the controller 180 controls the display 151 to convert the information corresponding to the user from the line view to the full view and display it.
  • the second reference information amount means that more information is included than the first reference information amount.
  • the information amount of the guest house reservation screen 30 may exceed the second reference information amount.
  • the controller 180 controls the display 151 to convert the guest house reservation screen 30 from the line view to the full view and display it. In normal case, it converts from line view to half view, and displays from half view to full view.
  • 24 is a diagram illustrating determining a user's intention using a reinforcement learning model, according to an embodiment of the present invention.
  • the reinforcement learning model (300, Reinforcement Learning, hereinafter, RL) is one of the problems that machine learning deals with, and the agent 301 defined in an environment 302 recognizes the current state 303, , means a method of selecting the action that maximizes the reward 305 among the selectable actions 304 .
  • the reinforcement learning model 300 includes an agent 301 , an environment 302 , a state 303 , a reward 304 , and an action 305 .
  • Agent 301 means observing state 303, selecting action 305, and directing a goal.
  • the agent 301 includes a learner and a decision maker.
  • the environment 302 (Environment) means the rest except for the agent 301 .
  • a state 303 means information indicating the current situation of a system user.
  • Action 304 means what the agent 301 does in the current situation.
  • the reward 305 refers to information indicating good or bad behavior 304 .
  • the controller 180 receives the feedback from the user and determines the user's intention by using the reinforcement learning model 300 reflecting the received feedback.
  • Feedback includes positive feedback and negative feedback.
  • the feedback corresponds to the reward 305 .
  • the controller 180 controls the display 151 to display information corresponding to the recognized user according to the determined intention of the user.
  • the controller 180 controls the display 151 to correspond to the first user. Controls the weather widget information to be displayed in a line view.
  • the controller 180 determines that the user's intention is correct.
  • the controller 180 determines that the user's intention is wrong. For example, when the user wants to view the weather widget information on a larger screen and the user changes the weather widget information from the line view to the half view, the controller 180 determines that the user's intention is wrong.
  • the controller 180 determines the display view based on the amount of information, and the display view determined based on the user's intention may be different from the display view determined based on the amount of information.
  • the controller 180 sets the priority of the user's intention to be higher. Accordingly, even if the line view is determined based on the amount of information, the user's intention is a half view, so the controller 180 displays the weather widget information as a half view.
  • the controller 180 If the determined intention of the user is correct, the controller 180 provides additional points to the reinforcement learning model 300 , and if the determined intention of the user is incorrect, the controller 180 provides points to the reinforcement learning model 300 .
  • the controller 180 For example, if the determined intention of the user is correct, the controller 180 provides an additional point + 10 to the reinforcement learning model 300 , and if the determined intention of the user is incorrect, the controller 180 provides a deduction point - 10 to the reinforcement learning model 300 . to provide.
  • a widget can be used as a line view, there is an advantage in that it is possible to increase the utilization of a TV that has been operated only in an ON/OFF state.
  • the present invention by recognizing a user with a camera, it is possible to provide personalized and customized information to the user.
  • the present invention it is possible to variably utilize the display size according to the amount of information required, and by changing the screen size as necessary, it is possible to contribute to energy saving and lifespan extension of the display panel.
  • the present invention it is possible to recognize a user by analyzing an image captured by a camera, and to display information corresponding to the user based on the recognized user differently according to the amount of information, thereby providing customized information to the user. Therefore, user convenience can be improved.
  • the display when the amount of information exceeds a preset reference amount of information, the display can be controlled to display the information corresponding to the user by converting the information corresponding to the user from the line view to the half view, or from the half view to the full view. Therefore, the size of the displayed screen can be variably changed according to the amount of information required, thereby improving user convenience.
  • the smart wall and its control method according to the present invention are not limited to the configuration and method of the embodiments described as described above, but all or part of each embodiment may be modified so that various modifications may be made. They may be selectively combined and configured.
  • the smart wall control method of the present invention can be implemented as a processor-readable code on a processor-readable recording medium provided in the smart wall.
  • the processor-readable recording medium includes all types of recording devices in which data readable by the processor is stored. Examples of the processor-readable recording medium include ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, etc., and also includes those implemented in the form of carrier waves such as transmission over the Internet. .
  • the processor-readable recording medium is distributed in a computer system connected through a network, so that the processor-readable code can be stored and executed in a distributed manner.
  • the present invention is used in a smart wall related field that recognizes a user based on an image captured by a camera mounted on a smart wall mounted on the smart wall, and displays required information differently depending on the amount of information based on the recognized user. .

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)

Abstract

본 발명은 스마트 월 및 그 제어 방법에 관한 것으로서, 스크린의 전면에 있는 사용자를 포함하는 적어도 하나의 제 1 이미지를 제 1 카메라로 캡쳐하고, 사용자를 포함하는 적어도 하나의 제 2 이미지를 제 2 카메라로 캡쳐하고, 적어도 하나의 제 1 이미지와 상기 적어도 하나의 제 2 이미지를 기초로 사용자를 인식하고, 디스플레이가 인식된 상기 사용자에 대응하는 정보를 정보량에 따라 다르게 디스플레이하도록 제어하는 것을 그 요지로 한다.

Description

스마트 월 및 그 제어 방법
본 발명은 스마트 월 및 그 제어 방법에 관한 것으로서, 보다 구체적으로는 스마트 월에 장착된 카메라가 캡쳐한 이미지를 기초로 사용자를 인식하고, 인식된 사용자를 기초로 정보량에 따라 다르게 필요한 정보를 다르게 디스플레이하는 스마트 월 및 그 제어 방법에 관한 것이다.
최근 스마트폰을 넘어 가정 안의 모든 미디어 기기와 가전제품들이 인터넷과 연결되는 인프라가 구축되면서, 스마트 홈이 새로운 스마트 생태계의 키워드로 뜨고 있다. 특히 개인 미디어 기기였던 스마트폰을 통해 이미 축적된 이용자들의 경험과 가치가 다른 디바이스로 확장되기 시작하였다.
이처럼 미디어 기기와 가전제품 들이 상호 연동하며 작동하기 위해서 홈 네트워크 시스템을 구축하는 등의 다양한 시도가 이루어지면서 가정 내에 전자기기의 개수가 많아지고 이를 일일이 연결하는 번거로움이 있었다. 그래서, 전자기기의 개수를 줄이기 위해서, TV, 공기 청정기, 스피커를 하나로 묶는 통합 작업이 진행되고 있다.
예를 들어, 스마트 월의 실장 공간에 스마트 TV, DVD 플레이어와 같은 멀티미디어 디바이스, 공기 청정기, 콘솔 게임기 등을 설치할 수 있다.
그런데, 종래 기술의 경우, 디스플레이 영역의 크기를 조절하는 경우, 사용자가 일일이 수동으로 멀티미디어 디바이스의 환경을 설정해야 해서 사용자가 불편함을 느끼는 문제점이 있었다.
본 발명의 일 실시 예는, 카메라로 캡쳐된 이미지를 분석하여 사용자를 인식하고, 인식된 사용자를 기초로 사용자에 대응하는 정보를 정보량에 따라 다르게 디스플레이하는 스마트 월 및 그 제어 방법을 제공하는 것을 목적으로 한다.
본 발명의 다른 실시 예는, 인식된 사용자에 대응하는 정보를 애플리케이션의 속성에 따라 다르게 디스플레이하는 스마트 월 및 그 제어 방법을 제공하는 것을 목적으로 한다.
본 발명의 또 다른 실시 예는, 정보량이 기설정된 기준 정보량을 초과하면, 디스플레이가 상기 사용자에 대응하는 정보를 라인 뷰에서, 하프 뷰로 변환하거나, 하프 뷰에서 풀 뷰로 변환하여 디스플레이하도록 제어하는 스마트 월 및 그 제어 방법을 제공하는 것을 목적으로 한다.
본 발명에서 이루고자 하는 기술적 과제는 상기 언급한 기술적 과제로 제한되지 않으며, 언급하지 않은 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일면에 따른, 스마트 월은, 그래픽 이미지를 디스플레이하는 디스플레이; 상기 디스플레이 위에서 롤링되어 상기 디스플레이의 화면 크기를 조절하는 스크린; 스크린의 상부에 위치하며 상기 스크린이 감기는 구동롤러; 구동롤러에 회전력을 제공하는 모터; 상기 스크린의 제 1 영역의 크기를 감지하는 스크린 감지부; 상기 스크린의 전면에 있는 사용자를 포함하는 적어도 하나의 제 1 이미지를 캡쳐하는 제 1 카메라; 상기 사용자를 포함하는 적어도 하나의 제 2 이미지를 캡쳐하는 제 2 카메라; 및 상기 스크린 감지부에서 감지한 상기 제 1 영역의 크기를 기초로 상기 모터의 구동을 제어하고, 상기 적어도 하나의 제 1 이미지와 상기 적어도 하나의 제 2 이미지를 기초로 사용자를 인식하고, 상기 디스플레이가 인식된 상기 사용자에 대응하는 정보를 정보량에 따라 다르게 디스플레이하도록 제어하는 제어부를 포함한다.
본 발명의 다른 면에 따른, 스마트 월의 제어 방법은, 스크린의 전면에 있는 사용자를 포함하는 적어도 하나의 제 1 이미지를 제 1 카메라로 캡쳐하는 단계; 상기 사용자를 포함하는 적어도 하나의 제 2 이미지를 제 2 카메라로 캡쳐하는 단계; 상기 적어도 하나의 제 1 이미지와 상기 적어도 하나의 제 2 이미지를 기초로 사용자를 인식하는 단계; 및 상기 디스플레이가 인식된 상기 사용자에 대응하는 정보를 정보량에 따라 다르게 디스플레이하도록 제어하는 단계를 포함한다.
본 발명의 일 실시 예에 따르면, 카메라로 캡쳐된 이미지를 분석하여 사용자를 인식하고, 인식된 사용자를 기초로 사용자에 대응하는 정보를 정보량에 따라 다르게 디스플레이할 수 있어서 사용자에게 맞춤화된 정보를 제공할 수 있으므로 사용자 편의성을 향상 시킬 수 있다.
본 발명의 다른 실시 예에 따르면, 인식된 사용자에 대응하는 정보를 애플리케이션의 속성에 따라 다르게 디스플레이할 수 있어서 사용자에게 맞춤화된 정보를 제공할 수 있으므로 사용자 편의성을 향상 시킬 수 있다.
본 발명의 또 다른 실시 예에 따르면, 정보량이 기설정된 기준 정보량을 초과하면, 디스플레이가 상기 사용자에 대응하는 정보를 라인 뷰에서, 하프 뷰로 변환하거나, 하프 뷰에서 풀 뷰로 변환하여 디스플레이하도록 제어할 수 있어서, 필요한 정보량에 따라 디스플레이되는 화면 크기를 가변적으로 변경할 수 있으므로 사용자 편의성을 향상 시킬 수 있다.
본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
도 1은 본 발명의 스마트 월의 설치예를 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 스마트 월의 분해사시도이다.
도 3은 본 발명의 일 실시예에 따른 스마트 월의 블록도이다.
도 4는 본 발명의 일 실시예에 따른 스마트 월의 프레임의 구성을 도시한 도면이다.
도 5는 본 발명의 프레임 모듈의 조합에 따른 다양한 프레임 구조체의 예를 도시하고 있다.
도 6는 본 발명의 일 실시예에 따른 스마트 월의 프레임 모듈을 설명하기 위한 도면이다.
도 7은 본 발명의 일 실시예에 따른 스마트 월의 프레임 구조체를 설치하는 방법을 설명하기 위한 도면이다.
도 8은 본 발명의 일 실시예에 따른 스마트 월의 바스켓을 설명하기 위한 도면이다.
도 9는 본 발명의 일 실시예에 따른 스마트 월의 디스플레이부가 전면에 노출되는 크기에 따른 화면의 변화를 도시한 도면이다.
도 10은 스마트 월의 스크린 감지부의 일 예를 도시한 도면이다.
도 11은 도 10의 스크린 감지부의 제1 영역의 크기 변화에 따른 스크린 감지부의 동작을 설명하기 위한 도면이다.
도 12는 도 10의 스크린 감지부의 변형 예를 도시한 도면이다.
도 13은 스마트 월의 스크린 감지부의 다른 예를 도시한 도면이다.
도 14는 도 13의 스크린 감지부의 구체적인 구조를 도시한 도면이다.
도 15는 본 발명의 일 실시 예에 따른, 스마트 월의 구성도를 도시한 도면이다.
도 16은 본 발명의 일 실시 예에 따른, 스마트 월의 제어 방법을 도시한 순서도를 도시한 도면이다.
도 17은 본 발명의 일 실시 예에 따른, 스마트 월의 하드웨어 구성을 도시한 도면이다.
도 18은 본 발명의 일 실시 예에 따른, 스마트 월의 하드웨어 구성을 도시한 도면이다.
도 19는 본 발명의 일 실시 예에 따른, 스마트 월의 라인 뷰, 하프 뷰, 풀 뷰를 도시한 도면이다.
도 20은 본 발명의 일 실시 예에 따른, 애플리케이션의 속성에 따라 사용자에 대응하는 정보를 다르게 디스플레이하는 것을 도시한 도면이다.
도 21은 본 발명의 일 실시 예에 따른, 스마트 홈 애플리케이션의 경우, 사용자에 대응하는 맞춤형 정보를 라인 뷰로 디스플레이하는 것을 도시한 도면이다.
도 22는 본 발명의 일 실시 예에 따른, 디스플레이가 정보량을 기초로 사용자에 대응하는 정보를 라인 뷰에서 하프 뷰로 변환하여 디스플레이하는 것을 도시한 도면이다.
도 23은 본 발명의 일 실시 예에 따른, 디스플레이가 정보량을 기초로 사용자에 대응하는 정보를 하프 뷰에서 풀 뷰로 변환하여 디스플레이하는 것을 도시한 도면이다.
도 24는 본 발명의 일 실시 예에 따른, 강화 학습 모델을 이용하여 사용자의 의도를 결정하는 것을 도시한 도면이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.
또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.
또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제 1, 제 2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
도 1은 본 발명의 스마트 월(100)의 벽체형 프레임을 도시한 도면이다. 본 발명은 미디어 기기와 가전 기기와 같이 집에서 이용하는 전자기기를 벽에 일체화시켜 외관에 노출되지 않도록 시스템화 한 스마트 월(100)에 관한 것이다. 벽에 디스플레이부, 인터폰, 스피커, 공기청정기, 가습기, 조명, 디지털 시계, 공유기, 셋톱박스 등의 다양한 전자기기가 실장되어 공간내에 전자기기가 노출되는 것을 최소화한 공간 토탈 솔루션을 제공한다.
최근에 디스플레이 장치(161)의 두께가 얇아짐에 따라 본 발명의 스마트 월(100)의 두께는 15~20cm수준으로 얇게 형성할 수 있어, 설치 시 실내 공간이 좁아지는 것을 방지할 수 있다. 오히려 수납 가구와 가전제품(160)이 스마트 월(100)에 매립되어 깔끔한 외관을 제공할 수 있다. 필요한 경우 선택적으로 벽의 일부가 인출되어 필요한 가전이 돌출될 수도 있고, 가전이 매립되지 않은 공간은 서랍과 같은 실장공간(114)으로 활용할 수도 있다.
TV는 최근 박형화 가능하여 얇은 디스플레이부를 구현할 수 있는 바, 실질적으로 TV자체가 프레임의 커버역할을 하며 상기 프레임에 결합하여 전면 외관을 형성할 수 있다. 디스플레이 장치(161)의 디스플레이부를 노출시키기 위해 아트월(151)에 개구부(153)을 형성할 수 있으며, 개구부(153)을 개폐하는 커버를 더 구비할 수도 있다.
OLED를 이용한 디스플레이부는 휘어지기 때문에 사용하는 경우만 외측으로 노출되고 사용하지 않는 경우 감겨서 벽체 내부로 수납될 수 있어 외관 상 깔끔한 화면을 제공할 수 있다.
프로젝터는 최근 단초점 프로젝터가 개발 되어 프로젝터를 벽에 탑재하고 서랍형식으로 이를 인출하여 스크린에 출력함으로써 대형화면을 구현할 수 있다. 이 경우 사용하지 않는 경우 스마트 월(100)의 외측에 디스플레이부가 보이지 않아 더 깔끔한 외관을 제공할 수 있다.
도 2는 본 발명의 스마트 월(100)의 분해도이고, 도 3은 본 발명의 스마트 월(100)의 블록도로서, 전면의 아트월(150)의 내부는 복수개의 형강(115)(shape steel)을 격자로 배치한 프레임의 구조체가 위치할 수 있다. 프레임 구조체(110)는 강성의 부재로서 벽체에 충격이 가해지더라도 무너지지 않게 지지할 수 있다. 프레임 구조체(110)의 전면에 패널을 부착하여 프레임 구조체(110)에 실장된 전자제품(160)을 숨기고 벽체로 보이도록 구성할 수 있다. 이와 같은 패널로 커버된 전면벽을 아트월(150)이라 한다.
아트월(150)은 소비자의 취향에 따라 다르게 변경 가능하다. 설치 후에 손쉽게 변경하여 집안의 분위기를 바꿀 수도 있다.
격자형식으로 배치된 형강(115)은 실장공간(114)을 구획하고, 각 실장공간(114)에 전자제품(160)을 안착할 수 있다. 각 실장공간(114)의 크기는 동일한 사이즈 또는 배수의 사이즈를 가지도록 하여 실장되는 전자제품(160)을 모듈화하여 프레임 구조체(110) 내에 어느 위치에도 배치할 수 있다.
전술한 디스플레이 장치(161) 이외에 스피커와 같은 음향장치(162)를 실장공간(114)에 탑재할 수도 있으며 음향장치(162)는 채널수에 따라 복수개로 구성될 수도 있다. 음향장치(162)를 커버하는 아트월(152)은 소리가 출력될 수 있도록 매쉬형태로 구성하거나 음향이 출력되는 개구부를 선택적으로 개폐하여 아트월(152)에 노출되는 개구부를 최소화 할 수 있다. 방수매쉬 등을 이용하여 상기 개구부를 통해 물이 유입되는 것을 방지할 수도 있다.
계절 가전인 제습기(163), 가습기(165), 공기청정기(164) 및 에어컨, 난로와 같은 냉난방기(167) 등을 구비할 수 있다. 이와 같은 계절 가전은 사용하지 않는 경우 계속 외측으로 노출되게 두는 경우 먼지가 쌓이고 외관상 보기 좋지 않아 커버를 씌우거나 창고 등에 넣어 두는 것이 일반적이다. 다만 본 발명과 같이 스마트 월(100) 내에 매립 설치하면 이용하지 않는 시기에도 그대로 두더라도 외부로 노출되지 않도록 아트월(150)이 커버할 수 있다.즉, 계절 가전을 위해 별도의 수납공간을 따로 구비할 필요가 없다.
제습기(163)나 가습기(165)는 모인 물을 제거하거나 물을 채우기 위해 물을 수집/저장하는 공간을 서랍형으로 구현할 수 있다. 물이 토출되거나 주변의 수분을 모으기 위해 공기가 통과하는 개구부(154)가 필요하다.
이러한 개구부(154)는 반드시 아트월(150)에 형성하지 않더라도 아트월(150)과 프레임 구조체(110) 사이의 틈을 이용할 수 있으며
공기청정기(164)는 필터를 주기적으로 교환할 수 있도록 개폐가능한 커버를 구비할 수 있다.
각 전자제품은 각각 개별적으로 제어할 수도 있으나 스마트 월에 탑재된 전자제품을 통합적으로 제어하는 제어부(180)를 더 포함할 수 있다. 제어부는 자체적으로 메모리(185)를 구비하여 수집한 데이터를 저장할 수 있다.
제습기, 가습기 및 공기청정기(164) 등은 사용자가 쉽게 조작할 수 있도록 스마트 월(100)의 하단 부분에 설치할 수 있다.또한 셋톱박스나 WIFI라우터(175) 등이 장착되는 경우 홈 네트워크 시스템을 구현할 수 있다. WIFI라우터(175)를 통해 스마트 월(100)에 탑재된 기능유닛 뿐만 아니라 스마트 월(100) 외측에 위치하는 컴퓨터나 휴대 단말기와 같은 다른 전자기기와 연결하여 상호 연동할 수 있으며 스마트 월(100)에 실장된 각 전자제품(160)를 제어하는 제어부(180)를 포함할 수 있다.
스마트 월(100)의 상부에는 LED나 작은 디스플레이 패널을 배치하여 날씨, 시간 이벤트 정보와 같은 간단한 정보를 사용자에게 제공할 수도 있고, 조명으로서 이용할 수도 있다. 스마트 월(100) 자체에 조명을 배치하여 인테리어적 효과를 추가할 수 있다.
라우터(175)는 서로 다른 통신 방식이나 신호를 이용하는 경우 라우터가 이를 정리하고 길을 안내해주는 중간장치이다. 또한, 스마트 월(100)에 탑재되는 기능 유닛을 반드시 유선으로 연결하지 않고 WIFI라우터(175)를 통해 연결하여 제어할 수 있다.
또한 라우터(175)는 외부 네트워크와 내부 네트워크를 연결하는 역할을 동시에 하기 때문에 사용자가 외부에서 외부 네트워크와 연결된 라우터(175)를 통해 스마트 월(100)에 탑재된 전자제품(160)뿐만 아니라 홈 네트워크에 연결된 다른 가전 및 미디어 기기들을 제어할 수 있다.
또한 제어부(180)는 모바일 기기와 연동하여 스마트 월(100)의 전자기기들을 제어할 수 있다. 즉, 스마트 월(100)에 모바일 기기를 장착하면 모바일기기에 있는 미디어 영상과 음악을 출력하던가, 모바일 기기를 통해 영상통화가 걸려오면 블루투스나 와이파이를 통해 모바일 기기의 정보를 전송받아 스마트 월(100)의 디스플레이 장치(161)에 상대방의 영상을 출력할 수 있다.
또한 현관의 카메라나 방법 시스템과 연결된 월패드를 스마트 월(100)의 실장공간(114)에 구비할 수 있다. 기존의 내력벽에 매립되었던 월패드는 고장 시 수리 및 교체가 어렵고 위치의 변경 등의 어려움이 있었으나, 유닛형태로 구성하여 스마트 월(100)에 구비하는 경우 유지 관리가 용이한 장점이 있다.
스마트 월(100)은 거실 뿐만 아니라 방에 설치할 수도 있다. 방 사이의 벽을 스마트 월(100)로 구성하여 이웃하는 방에서 스마트 월(100)을 양방향으로 이용할 수도 있다. 예를 들어 하나의 에어컨이나 공기청정기 등을 양 방향으로 통하게 하면 2개의 공간에 모두 사용할 수 있다. 거실에서 사용하는 TV와 스피커(162) 대신에 방의 용도에 따라 모니터와 PC를 탑재하여 이용할 수 있다. 또는, 전자칠판 등 아이의 연령대에 따라 다른 기능유닛을 탑재하여 이용할 수 있다.
사무실에 설치 시 전자칠판, 공기청정기, 화상회의 시스템, PC등의 기능유닛을 탑재한 스마트 월(100)을 이용할 수 있다. 스마트 월(100)에 탑재되는 전자제품(160)은 아트월(150)에 가려지므로 별도의 외관 케이스를 필요로 하지 않는다.
스마트 월(100)을 공장에서 사용자의 설치 장소에 맞춰서 제조 후에 설치하는 방식을 이용하면 호텔/리조트나, 아파트 건설 시 대규모로 동일한 모듈을 제조하여 공급할 수 있어 불량률을 줄이고 저렴한 비용으로 생산할 수 있다.
다만, 조립이 완료된 스마트 월(100)은 운반이 어렵고, 건물이 완공된 경우에는 건물 내부로 반입이 어렵다. 따라서, 기존의 건물에 이사, 인테리어 시에 스마트 월(100)을 설치하는 경우에는 건물 내에 프레임을 설치하고 단위 모듈을 삽입하여 스마트 월(100)을 구현할 수 있다. 이 경우 설치의 편의성과 규격화를 위해 프레임 구조체(110)는 복수개의 모듈 프레임을 이용하여 구현할 수 있다.
도 4는 본 발명의 일 실시예에 따른 스마트 월(100)의 프레임 모듈(111, 112, 113)의 결합 방식을 도시하고 있다. 각 부품을 실장하기 위해 실장공간(114)을 포함하는 책장 형태의 프레임 모듈(111, 112, 113)을 이용할 수 있다. 실장공간(114)을 구획하기 위해 복수개의 빔 형태의 형강(115)을 격자로 배치하여 프레임 모듈(111, 112, 113)을 제조할 수 있다.
프레임 모듈(111, 112, 113)은 수평방향으로 실장공간(114)이 나란히 배치된 제1 프레임 모듈(111), 디스플레이 장치(161)와 같이 큰 제품(160)이 실장되기 위한 제2 프레임 모듈(112) 및 수직방향으로 실장공간(114)이 나란히 배치된 제3 프레임 모듈(113)을 포함할 수 있다.
제2 프레임 모듈(112)은 디스플레이 장치(161)의 인치에 상관없이 모두 실장될 수 있도록 큰 공간을 포함한다. 필요한 경우 도 4에 도시된 바와 같이 실장공간(114)을 구획하는 빔을 구비하여 디스플레이 장치(161)를 고정하고 프레임 구조체(110)의 강성을 제고할 수 있다.
제1 프레임 모듈(111)은 제2 프레임 모듈(112)과 수직방향으로 적층되어 배치될 수 있다. 제1 프레임 모듈(111)의 수평방향의 길이는 제2 프레임 모듈(112)의 수평방향 길이와 같게 형성하여 수직방향으로 적층시 격자가 어긋나지 않게 배치될 수 있다.
제1 프레임 모듈(111)은 제2 프레임 모듈(112)의 상측과 하측에 각각 배치될 수 있으며 제1 프레임 모듈(111)과 제2 프레임 모듈(112)의 크기에 따라 또는 설치공간의 크기에 따라 제1 프레임 모듈(111)의 수직방향으로 적층되는 개수를 가감할 수 있다.
수직방향으로 실장공간(114)이 나란히 배치된 제3 프레임 모듈(113)은 수직방향으로 적층된 제1 프레임 모듈(111)과 제2 프레임 모듈(112)의 높이와 동일한 높이를 가질 수 있다. 제3 프레임 모듈(113)은 도 4에 도시된 바와 같이 제1 프레임 모듈(111)과 제2 프레임 모듈(112)의 측방향에 위치할 수 있다. 복수개의 프레임 모듈(111, 112, 113)을 체결구로 결합하여 직육면체의 프레임 구조체(110)를 형성할 수 있다.
도 5는 본 발명의 프레임 모듈(111, 112, 113)을 제조하는 방법을 도시한 도면으로 수직방향으로 실장공간(114)이 배치된 제3 프레임 모듈(113)을 예로 들어 설명한다. 각 프레임 모듈(111, 112, 113)은 일방향으로 길게 연장된 형강(115)을 이용할 수 있다. 형강(shape steel)은 구조용 부재로 각종 단면형상을 가진 봉형상의 부재를 총칭하여 말한다. 압연방식 또는 판재를 절곡하여 길이방향으로 동일한 단면을 가지는 기둥형상의 형강을 구성할 수 있다. 형강은 원형이나 사각형의 단면을 가지는 빔형 부재보다 빈 공간이 있어 가볍고 적은 재료로 일정 크기 이상의 강성을 얻을 수 있는 장점이 있다.
본 발명은 도 5에 도시된 바와 같이 C형상의 단면을 가지는 C형강(115)을 이용할 수 있다. C형강(115)은 금속판재를 너비방향의 양 단부를 수직으로 절곡하여 형성할 수 있다. 양 단부를 1회만 수직절곡하면 ㄷ 형상의 단면을 가지고, 2회 수직으로 절곡하면 C형상의 단면응ㄹ 가질 수 있다. 상기 내부공간에 전자제품(160)과 연결되는 전원이나 신호선이 배치되고 전원이나 데이터 케이블들이 체결되는 아울렛 모듈(140)이 배치될 수 있다.
아울렛 모듈(140)은 전원을 공급하는 전원 단자, 인터넷 선이나 케이블 입력 등의 데이터 송수신을 위한 데이터 단자 및 프레임에 삽입된 기능 유닛이 다른 기능유닛과 연결하기 위한 커넥터를 구비할 수 있다. 커넥터는 프레임을 기준으로 양측에 단자가 있으며 상기 단자에 각 전자기기의 데어터 연결 선을 삽입하면 서로 데이터를 주고 받을 수 있다. 상기 아울렛 모듈(140)은 프레임 모듈(111, 112, 113)을 따라 이동하는 레일 구조를 포함할 수 있다.
형강(115)에는 도 5에 도시된 바와 같이 벤트홀(116)을 형성할 수 있다. 벤트홀(116)은 형강(115)의 무게를 줄일 수 있으며 전자제품(160)에서 발생하는 열을 배출할 수 있다. 보다 능동적으로 열을 배출하기 위해 팬을 이용하여 뜨거운 공기를 외부로 배출할 수도 있다. 전자제품(160)의 열을 실내로 배출하는 경우 겨울에는 난방 효과를 얻을 수 있다. 그러나 여름에는 실내 온도를 높이는 원인이 되는 바 팬을 이용하여 내부에 열을 순환시키거나 에어컨의 실외기와 연결되는 배선에 추가하여 외부로 열을 배출하는 구조를 추가 할 수 있다.
각 프레임 모듈(111, 112, 113)은 외측 둘레에 사각형을 이루는 외측강과 그 사이에 실장공간(114)을 구획 하기 위한 내측강을 포함할 수 있다. 외측강은 수직방향으로 연장된 수직강과 수평방향으로 연장된 수평강을 포함할 수 있다. 제1 프레임 모듈(111)내지 제3 프레임 모듈(113)은 한 쌍의 수직강 사이에 수평강을 배치하여 조립할 수 있다. 천장과 바닥에 고정하는 고정부재(120)와 수직강을 체결하기 위해서 수직강의 상하 단부가 노출될 수 있도록 배치할 필요가 있다. 따라서, 수평강보다 수직강을 바깥쪽에 위치시켜 수직강의 단부로 고정부재(120)의 수직 브라켓(122, 123)을 삽입하여 체결할 수 있다.
외측강 내부에 위치하는 내측강은 외측강으로 둘러싸인 공간을 구획하여 실장공간(114)을 구성하며 내측강은 외측강에 용접하여 이동 불가능하게 조립할 수도 있고, 일부 내측강은 볼트나 후크를 이용하여 필요에 따라 제거할 수 있도록 결합할 수 있다.
이와 같이 반제품(160) 형태의 프레임 모듈(111, 112, 113) 사이를 체결하는 방식을 이용하면 현장에서 조립하는 횟수를 최소화 할 수 있다. 제품(160)의 치수를 일정하게 유지할 수 있으며 설치 시간을 줄일 수 있다. 또한, 이동이 용이한 사이즈로 모듈화 할 수 있어 손쉽게 현장으로 이송할 수 있다.
도 6은 본 발명의 프레임 모듈(111, 112, 113)의 조합에 따른 다양한 프레임 구조체(110)의 예를 도시하고 있다. 도 6의 (a)는 도 4의 한 쌍의 제1 프레임 모듈(111a), 하나의 제2 프레임 모듈(112a) 및 한 쌍의 제3 프레임 모듈(113)을 조립한 상태의 프레임 구조체(110)를 도시하고 있다. 제1 프레임 모듈(111a)은 4개의 실장공간(114)을 가지므로 너비가 넓어져 좁은 실내공간에는 설치가 어려울 수 있다.
따라서 도 6의 (b)와 같이, 3개의 실장공간(114)을 구비하는 수평방향의 길이가 짧은 형태의 제1 프레임 모듈(111b)을 이용할 수도 있다. 제2 프레임 모듈(112b)은 제1 프레임 모듈(111b)의 수평방향 길이에 상응하는 길이를 가질 수 있다.
그리고 제1 프레임 모듈(111)과 제2 프레임 모듈(112)이 수직방향으로 적층한 양 옆에 제3 프레임 모듈(113)을 배치할 수 있다. 통상적인 주택의 층고는 220cm ~230cm 이므로 제3 프레임 모듈(113)의 높이는 220cm가 조금 안되게 구성할 수 있다. 도면상으로 5단의 세로형 프레임을 도시하고 있으나, 복층이나 층고가 높은 경우를 대비하여 6단의 세로형 프레임도 제조할 수 있다.
더 좁은 공간에 설치하는 경우 제3 프레임 모듈(113)을 생략하고 제1 프레임 모듈(111a)과 제2 프레임 모듈(112a)만 이용하여 프레임 구조체(110)를 구성할 수도 있고, 큰 디스플레이 장치(161)를 실장하지 않는 경우 제3 프레임만 일렬로 배치하여 프레임 구조체(110)를 구현할 수 있다. 각 프레임 모듈(111, 112, 113)은 볼트로 체결할 수도 있고, 용접방식으로 체결할 수도 있다.
도 7은 본 발명의 일 실시예에 따른 스마트 월(100)의 프레임 구조체(110)를 설치하는 방법을 설명하기 위한 도면이다. 프레임 모듈(111, 112, 113)을 체결하여 구성한 프레임 구조체(110)는 실내 공간에 설치하기 위해 천장과 바닥에 고정할 수 있다.
천장 또는 바닥에 설치하는 고정 브라켓(125)은 L자 형상으로 꺾어진 부재로 일측(125b)은 천장 또는 바닥에 타측(125a)은 천장 또는 바닥에서 수직방향으로 연장된다. 제1 프레임 모듈(111)과 제2 프레임 모듈(112)의 수직강의 내부공간에 삽입되는 제1 수직 브라켓(122)을 포함할 수 있다.
제1 수직 브라켓(122)은 제1 프레임 모듈(111)뿐만 아니라 제2 프레임 모듈(112)까지 체결할 수 있도록 제1 프레임 모듈(111)의 수직방향 길이보다 더 길게 형성할 수 있다. 제1 수직 브라켓(122)과 나란히 배치되며 제3 프레임 모듈(113)에 삽입되는 제2 수직 브라켓(123)을 더 포함할 수 있다. 제3 프레임 모듈(113)의 수직강은 하나의 부재이므로 제1 수직 브라켓(122)과 같이 길 필요는 없다.
제1 수직 브라켓(122)과 제2 수직 브라켓(123)의 단부에 결합된 결합 브라켓(121)은 수직 브라켓(122, 123)과 함께 T자 형상을 이룰 수 있다. 결합 브라켓(121)은 수직 브라켓(122, 123)과 결합하며 제1 프레임 모듈(111)과 제3 프레임 모듈(113)의 상면에 안착되는 안착부(121b)와 상기 안착부(121b)에서 수직방향으로 연장되어 고정 브라켓(125)과 체결되는 체결부(121a)를 포함할 수 있다. 결합 브라켓(121)과 고정 브라켓(125)의 체결은 스크류를 이용하여 체결할 수 있으며 천장고에 따라 조절할 수 있도록 스크류가 체결되는 체결구는 상하방향으로 길게 형성할 수 있다.
스마트 월(100)을 기존의 벽에 덧대어 설치하는 경우 기존의 벽체와 체결하는 고정부재(120)를 더 포함할 수 있다.
스마트 월(100)은 스피커(162)와 같이 음향기기가 위치하기 때문에 이를 가벽으로 이용하는 경우 벽을 기준으로 분리되는 공간이 발생한다. 이 때 두 공간의 소리를 차단하기 위해 스마트 월(100)과 맞닿는 천장, 바닥 및 측벽에 소리가 새지 않도록 방음 구조를 부가하여 스마트 월(100)을 고정할 수 있다.
도 8은 본 발명의 일 실시예에 따른 스마트 월(100)의 바스켓(130)을 설명하기 위한 도면이다. 프레임 모듈(111, 112, 113)은 내측 형강(115)을 이용하여 복수개의 실장공간(114)으로 구획할 수 있다. 실장공간(114)에 도 7에 도시된 바와 같이 바스켓(130)을 삽입하여 전자제품(160)이 안착되는 공간을 제공할 수 있다. 제2 프레임 모듈(112)은 디스플레이 장치(161)가 위치하므로 상대적으로 큰 실장공간(114)을 구비하나, 제1 프레임 모듈(111)과 제3 프레임 모듈(113)의 실장공간(114)은 규격화된 사이즈로 형성할 수 있다. 규격화된 사이즈의 실장공간(114)을 이용하면 바스켓(130)도 규격화 할 수 있어 불필요하게 다양한 형상의 부품을 제조할 필요가 없는 장점이 있다.
실장 공간의 크기를 모두 동일하게 형성하는 경우 규격화에 편리하나 실장되는 전자제품(160)에 따라 더 큰 공간이 필요할 수 있다. 예를 들어 에어컨과 공기청정기의 크기는 상이하므로 이러한 차이를 고려하여 실장공간(114)의 크기를 기본크기의 정수배로 형성할 수 있다. 예를 들어 가로 크기는 a, 세로 크기는 b를 가지는 제1 실장공간(1141)을 기준으로 가로크기가 a의 정수배를 가지는 제2 실장공간(1142) 또는 세로 크기가 b의 정수배를 가지는 제3 실장공간(1143)을 포함할 수 있다.
제1 실장공간(1141)의 가로방향의 크기는 제3 프레임 모듈(113)의 가로방향 크기에 상응하고 세로방향의 크기는 제1 프레임 모듈(111)의 세로방향의 크기에 상응한다. 여기서 실장공간(114)은 형강(115)으로 구획된 내부공간을 의미하므로 제1 프레임 모듈(111)의 크기와 제3 프레임 모듈(113)의 크기와 비교는 형강(115)의 두께에 의한 차이는 무시한다.
제1 프레임 모듈(111)은 수직방향의 길이가 짧으므로 제1 실장공간(1141)과 제2 실장공간(1142)만 포함할 수 있고, 제3 프레임 모듈(113)은 수평방향의 길이가 짧으므로 제1 실장공간(1141)과 제3 실장공간(1143)만 포함할 수 있다.
도 9는 본 발명의 일 실시예에 따른 스마트 월(100)의 디스플레이 장치(161)가 전면에 노출되는 크기에 따른 화면의 변화를 도시한 도면이다. 도 9의 (a)와 같이 디스플레이 장치(161)를 반절만 노출시켜 사용자에게 필요한 정보를 제공할 수도 있고 도 9의 (b)와 같이 평소에는 작은 사이즈로 노출시켜 인테리어적 효과를 얻을 수도 있다.
본 발명의 스마트 월(100)은 디스플레이 장치(161)의 전면을 커버하는 스크린(200)을 포함할 수 있다. 스크린(200)은 패브릭 소재와 같이 롤에 감을 수 있는 재질을 이용할 수 있으며 디스플레이 장치(161)의 전면을 커버하며 디스플레이 장치(161)를 사용하지 않는 경우 디스플레이 장치(161)가 외부로 노출되지 않도록 가리는 역할을 한다.
디스플레이 장치(161)의 전면에 위치하는 스크린(200)의 제1 영역의 면적을 조절하기 위해 구동롤러(210)에 스크린(200)을 권취할 수 있다. 스크린(200)이 구동롤러(210)에 감긴 횟수가 많으면 제1 영역의 면적이 작아지고 디스플레이 장치(161)가 전면에 노출된다.
구동롤러(210)에 스크린(200)을 반 바퀴 감아 스크린(200)의 일부(제1 영역)는 디스플레이 장치(161)의 전면에 위치하고, 스크린(200)의 일부(제2 영역)는 디스플레이 장치(161)의 배면에 위치하도록 구성할 수 있다. 디스플레이 장치(161)의 배면에 위치하는 제2 영역의 면적을 증가시키면 디스플레이 장치(161)의 전면에 위치하는 제1 영역의 면적이 줄어들게 되는 바, 제1 영역과 제2 영역의 면적을 조절하여 디스플레이 장치(161)의 전면에 노출되는 면적의 크기를 조절할 수 있다.
제어부(180)는 구동롤러(210)의 회전방향을 조절하여 디스플레이 장치(161)의 전면에 위치하는 스크린(200)의 면적을 조절하며, 스크린(200)이 기 설정된 위치에 도달하면 구동롤러(210)의 회전을 중지시킬 수 있다.
제어부는 스크린(200)의 위치에 상응하여 디스플레이 장치(161)에 출력되는 영상을 제어할 수 있다. 예를 들어 도 9의 (a)와 같은 라인뷰 모드나 도 9의 (b)와 같은 하프뷰 모드 에서는 디스플레이 장치(161)의 일부에만 영상을 출력해야 한다. 스크린(200)이 위치하는 부분까지 영상을 출력하면 불필요한 전력 소모 및 사용자에게 잘린 영상을 제공하는 문제가 있다.
구동롤러를 회전시 스크린(200)이 구동롤러의 표면에서 밀릴 수 있고, 구동롤러에 감기는 실시예의 경우 구동롤러에 감기는 스크린(200)의 길이가 길어질수록 구동롤러 1회전 당 이동하는 스크린(200)의 길이가 차이가 나기 때문에 구동롤러(210)를 회전시키는 모터의 회전수와 스크린(200)의 이동거리를 정확히 일치시키는 것이 어렵다.
또한, 스크린(200)의 위치와 디스플레이 장치9161)에 출력되는 영상과 동기화율을 높이기 위해서는 스크린(200)의 제1 영역의 크기를 감지하는 스크린 감지부가 필요하다. 본 발명의 스크린(200)은 상하방향으로만 이동하므로 상하방향으로 이동 거리 또는 스크린(200)의 제1 영역의 하단부의 위치를 감지하면 스크린(200)의 크기를 알 수 있는 바, 스크린 감지부는 제1 영역의 상하방향의 길이를 감지하는 장치라고 할 수 있다.
도 10은 스마트 월(100)의 스크린 감지부의 일 예를 도시한 도면으로 본 실시예의 스크린 감지부는 스크린(200)의 표면에 형성된 전도성 패턴(241), 한 쌍의 단자(242) 및 한 쌍의 단자(242) 사이의 저항을 측정하여 저항이 클수록 상기 제1 영역의 크기가 크고, 저항이 작을수록 상기 제1 영역의 크기가 작은 것으로 판단하는 판단부를 포함한다.
한 쌍의 전도성 패턴(241)은 외부로 노출되는 제1 면(200a)의 반대 면인 제2 면(200b)에 형성되면 사용자에게 노출되지 않는다. 제2 면(200b)에 형성된 전도성 패턴(241)은 수직방향으로 연장된 제1 수직패턴(241a)과 상기 제1 수직패턴(241a)과 이격되어 수직방향으로 연장된 제2 수직 패턴 및 상기 제1 수직패턴(241a)의 하단과 상기 제2 수직패턴(241b)의 하단을 연결하는 연결패턴(241c)을 포함할 수 있다.
제1 수직패턴(241a)과 제2 수직패턴(241b)의 위치는 스크린(200)의 제2 면(200b) 상에 제한이 없고 풀뷰상태와 라인뷰 상태에서 모두 단자(242)과 접속상태를 유지할 수 있는 길이를 가지고 있으면 충분하고 연결패턴(241c)은 도면상으로 수평방향으로 연장된 직선형태를 가지고 있으나, 반드시 직선이 아니어도 되며 제1 수직패턴(241a)과 제2 수직패턴(241b)의 하단을 연결하는 전도성 부재이면 충분하다.
한 쌍의 단자(242)은 제1 수직패턴(241a)과 제2 수직패턴(241b)에 각각 접촉되며, 프레임에 고정된다. 단자(242)에 걸려 스크린(200)의 상하방향 이동에 영향을 미치는 것을 방지하고, 스크린(200)이 전후 방향으로 흔들리더라도 상기 전도성 패턴(241)과 단자(242)의 접촉상태를 유지하기 위해 탄성을 가지는 부재를 이용할 수 있다. 스펀지와 같이 탄성이 있는 소재를 포함하거나, 클립형태나 포고핀과 같이 탄성을 가지는 부재를 이용하여 전도성 패턴(241)과 단자(242)의 접촉상태를 유지할 수 있다.
한 쌍의 단자(242)은 전도성 패턴(241)과 연결되며 단자(242)에 전원을 인가하면 전도성 패턴(241)을 통과하여 전류가 흐르게 된다. 도 10의 (c)에 도시된 바와 같이 전도성 패턴(241)의 길에 따라 단자(242) 사이의 저항이 달라질 수 있다. 스크린 감지부는 상기 저항의 크기를 감지하여 전도성 패턴(241)의 길이의 증감을 산출하고 스크린(200)의 제1 영역의 크기를 산출할 수 있다.
도 11은 도 10의 스크린 감지부의 제1 영역의 크기 변화에 따른 스크린 감지부의 동작을 설명하기 위한 도면으로, 도 11의 (a)은 도 9의 (b)와 같이 디스플레이 장치(161)의 하단부만 일부 노출시키는 라인뷰 모드에서의 스크린(200)의 제2 면(200b)을 도시한 도면이다. 도 11의 (b)는 도 9의 (a)와 같이 디스플레이부의 반절만 노출시키는 하프 뷰 모드에서 스크린(200)의 제2 면(200b)을 도시한 도면이다. 도 11의 (c)는 도 1과 같이 디스플레이 장치(161)의 전체면적을 노출시키는 풀뷰 모드에서의 스크린(200)의 제2 면(200b)을 도시한 도면이다.
스크린(200)이 상하방향으로 이동 시 한 쌍의 단자(242)은 제1 수직패턴(241a)과 제2 수직패턴(241b) 상에 접촉하는 위치가 달라질 수 있다. 도 11의 (a)에서 한 쌍의 단자(242) 사이에 위치하는 전도성 패턴(241)의 길이가 가장 길고 도 11의 (c)에서 한 쌍의 단자(242) 사이에 위치하는 전도성 패턴(241)의 길이가 가장 짧다. 따라서, 각 모드에서 한 쌍의 단자(242) 사이에 위치하는 전도성 패턴(241)의 길이가 달라지므로 저항의 크기도 달라진다. 저항은 전도성 패턴(241)의 길이가 길수록 크게 나타나므로 R1이 가장 크고 그 다음에 R2 그리고 R3의 순서로 크기가 작아질 수 있다. 제어부는, 지정된 정지위치에서의 저항값을 메모리에 저장하고, 메모리에 저장된 저항값과 한 쌍의 단자(242) 사이의 저항이 같아지면 모터의 구동을 멈출 수 있다.
도 12는 도 10의 스크린 감지부의 변형 예를 도시한 도면이다. 스크린(200)은 패브릭과 같은 얇은 소재를 이용하므로 스크린(200)이 상하방향으로 이동시 흔들리거나 구김이 갈 수 있다. 이러한 구김을 방지하고 편평하게 펴진 상태를 유지할 수 있도록 제1 영역의 하단부에 하중바(209)를 배치할 수 있다. 하중바(209)는 스크린(200)의 제1 영역을 하측 방향으로 당기는 힘을 제공하며 스크린(200)이 수평방향으로 휘어지는 것을 방지할 수 있다. 제1 면(200a)은 사용자에게 노출되므로 도 12에 도시된 바와 같이 제2 면(200b)에 배치할 수 있다.
전도성 패턴(241)의 제1 수직패턴(241a)과 제2 수직패턴(241b)을 을 도 12에 도시된 바와 같이 스크린(200)의 좌우 단부에 인접하게 배치할 수 있다. 제1 수직패턴(241a) 및 제2 수직패턴(241b)과 인접한 프레임에 전자석(246)을 배치하고 전자석(246)을 이용하여 스크린(200)에 수평방향으로 당기는 힘을 제공할 수 있다.
스크린(200)이 상하방향으로 이동하는 경우, 즉 모터가 구동 시에 제어부는 전자석(246)에 전원을 인가하지 않고, 전도성 패턴(241)을 이용하여 스크린(200)의 위치를 감지할 수 있다. 스크린(200)의 이동이 멈춘 경우, 즉 모터가 정지한 때에 제어부는 전자석(246)에 전원을 인가하면 전자석(246)은 전도성 패턴(241)을 당기는 자성을 제공하여 스크린(200)이 도 12에 도시된 바와 같이 좌우 방향으로 인력이 제공되고 스크린(200)이 편평하게 펼쳐질 수 있다. 스크린(200)의 좌우에 위치하는 한 쌍의 전자석(246)은 스크린(200)의 정지위치에 관계없이 스크린(200)이 편평하게 펴질 수 있도록 좌우 방향으로 힘을 인가할 수 있다.
도 13은 스마트 월(100)의 스크린 감지부의 다른 예를 도시한 도면이다. 본 실시예의 스크린 감지부는 제1 영역의 하단부의 위치를 감지하는 초음파 센서(243)를 포함할 수 있다. 초음파 센서(243)는 초음파를 사출하고 스크린(200) 제1 영역의 하부에 반사되어 돌아온 초음파를 감지하여 스크린(200)의 하단부와 초음파 센서(243) 사이의 거리를 측정할 수 있다. 기초로 스크린(200) 제1 영역의 크기를 산출할 수 있으며, 초음파 센서(243)는 실장공간(114)의 하부에 위치할 수 있다. 초음파 이외에 적외선이나 다른 마이크로 웨이브를 이용하여 거리감지 센서를 구현할 수 있다.
도 14는 도 13의 스크린 감지부의 구체적인 구조를 도시한 도면이다. 초음파 센서(243)는 초음파를 사출하는 송신부(243a), 송신부(243a)에서 사출되어 상기 제1 영역의 하단에서 반사된 초음파를 감지하는 수신부(243b)를 포함한다.
도 14의 (a)에 도시된 바와 같이 초음파를 사용하지 않는 경우 초음파 센서(243)에 이물질이 유입되는 것을 방지하기 위해 개구부(244a)가 형성된 하우징(244)에 초음파 센서(243)를 수납하고 센서커버(245)를 이용하여 개구부(244a)를 선택적으로 개폐할 수 있다. 본 실시예의 센서커버(245)는 회전하며 이동하고, 제어부는 상기 구동롤러를 회전시키는 모터가 구동시에만 상기 센서커버(245)를 제거하고 (도 14a) 평소에는 센서커버(245)가 상기 개구부(244a)를 커버한 상태로 유지할 수 있다(도 14(b)).
스크린 감지부를 이용하면 스크린(200)의 제1 영역의 크기를 연속적으로 모니터링할 수 있는 바, 스크린(200)의 구동이 자연스럽게 이루어지도록 제어할 수 있다. 도 13의 (a)에 도시된 바와 같이, 처음 움직임이 시작되면 모터의 속도가 0 에서 점점 빨라지고(가속구간, v1), 일정한 속도로 이동하다가(정속구간, v2), 정지위치(SP)에 가까워지면 속도를 줄여(v3, 감속구간) 도 13의 (b)와 같이 정확히 정지위치(SP)에서 멈출 수 있다.
이상에서 살펴본 본 발명의 스마트 월(100)은 벽체에 TV 및 오디오와 같은 멀티미디어 기기가 탑재되어 벽면에 같은 높이로 벽면에 설치되어 깔끔한 외관을 제공할 수 있다.
디스플레이 장치(161)의 사용태양에 따라 디스플레이 장치(161)를 선택적으로 노출시키는 스크린(200)을 이용하여 보다 더 깔끔한 스마트 월(100)의 외관을 제공할 수 있다.
또한, 스크린(200)의 위치를 정확히 감지할 수 있어, 제어부는 스크린(200) 위치와 동기화된 영상을 제공할 수 있다. 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.
또한, 이하에서도 도 15 내지 도 24를 참조하여, 스마트 월 및 그 제어 방법에 대하여 상세히 설명하기로 한다. 다만, 당업자는 이전에 설명한 도 1 내지 도 14를 참조하여, 도 15 내지 도 24를 보충 해석하거나 실시 예를 변형하는 것도 가능하다.
도 15는 본 발명의 일 실시 예에 따른, 스마트 월의 구성도를 도시한 도면이다.
도 15를 참조하면, 스마트 월(100)은 마이크(122), 공기 정화부(130), 제 1 배출구(132), 제 2 배출구(134), 제 1 카메라(140), 제 2 카메라(142), 디스플레이(151), 스크린(152), 구동롤러(153), 모터(154), 스크린 감지부(155), 제 1 스피커(160), 제 2 스피커(162), 메모리(170), 제어부(180)를 포함한다.
스마트 월(100)은 컨텐트를 재생하는 멀티미디어 디바이스를 장착하는 실장 공간(mounting cell)을 포함한다. 멀티 미디어 디바이스는 제 1 애플리케이션이 실행하는 컨텐트를 디스플레이한다. 여기서, 멀티미디어 디바이스는 디지털 TV, DVD 플레이어, 오디오 플레이어 등을 포함한다.
마이크(122)는 외부의 음향 신호를 전기적인 음성 데이터로 처리한다. 처리된 음성 데이터는 스마트 월(100)에서 수행 중인 기능(또는 실행 중인 응용 프로그램)에 따라 다양하게 활용될 수 있다. 한편, 마이크(122)에는 외부의 음향 신호를 입력 받는 과정에서 발생되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘이 구현될 수 있다.
공기 정화부(130)는 센싱된 상기 미세 먼지의 농도가 임계값 이상이면, 공기를 정화시킨다.
제 1 배출구(132)는 정화된 공기를 제 1 공간으로 배출(discharge air)한다.
제 2 배출구(134)는 정화된 공기를 제 2 공간으로 배출한다.
제 1 카메라(140)는 스크린의 전면에 있는 사용자와 오브젝트를 포함하는 적어도 하나의 제 1 이미지를 캡쳐한다.
제 2 카메라(142)는 사용자와 상기 오브젝트를 포함하는 적어도 하나의 제 2 이미지를 캡쳐한다.
제 1 카메라(140)와 제 2 카메라(142)는 TOF 카메라를 포함한다.
TOF 카메라는 일반 카메라에 TOF 센서를 부착한 카메라를 의미한다. 구체적으로, 장면을 촬영해 보여주는 이미지센서는 2D 기반의 결과물을 도출한다. 여기에 TOF 센서가 개입하면 심도 측정이 가능해지면서 3D 결과물을 구현할 수 있다. TOF (Time of Flight)는 음파나 광원을 피사체에 전송하고, 피사체를 거쳐 다시 돌아오는 시간을 의미한다. TOF 센서는 이러한 역할을 감지할 수 있는 부품의 일종이다.
뎁쓰 맵은 (depth map)은 3차원 컴퓨터 그래픽에서 관찰 시점(viewpoint)으로부터 물체 표면과의 거리와 관련된 정보가 담긴 하나의 이미지를 의미한다.
TOF 카메라는 뎁쓰 맵을 포함하는 제 1 이미지를 촬영한다. TOF 카메라로 촬영을 하면, 원본 이미지, 뎁스 맵, 원본 이미지에 뎁스 맵을 적용한 결과 이미지를 획득한다.
제 1 스피커(160)는 제 1 공간으로 사운드를 출력한다. 제 2 스피커(162)는 제 1 스피커와 속성이 다르고, 사운드를 제 2 공간으로 출력하는 제 2 스피커(162)를 포함한다.
예를 들어, 제 1 스피커(160)는 5.1ch 무지향성 스피커가 될 수 있고, 제 2 스피커(162)는 지향성 스피커가 될 수 있다. 지형성 스피커는 목적으로 하는 방향으로만 소리를 방사하는 지향성을 갖게 한 스피커 시스템으로, 둘 이상의 동일 구경 스피커를 같은 평면상에 배치하여 전체로서 하나의 스피커로서 동작하도록 한 것을 의미한다. 높이가 가로폭이나 깊이에 비해 크고 기둥 모양으로 되므로 칼럼 스피커라고도 불리며, 체육관이나 강당, 옥외 경기장 등에서 널리 사용된다. 바닥 면적을 차지하지 않고, 청취 위치를 귀의 높이로 조절할 수 있는 장점이 있다.
메모리(170)는 사용자의 기설정된 동작 이미지를 저장한다.
제어부(180)는 제 1 카메라(140)와 제 2 카메라(142)의 이미지를 근거로 지향성 스피커로 전환 여부를 결정하고, 제 1 배출구(130) 및 제 2 배출구(132) 중 적어도 하나를 제어한다.
디스플레이(151)는 그래픽 이미지를 디스플레이한다. 제어부(180)는 디스플레이(151)가 제 1 애플리케이션이 실행하는 컨텐트에 대응하는 그래픽 이미지를 디스플레이하도록 제어한다.
스크린(152)은 디스플레이의 전면을 커버하고, 디스플레이(151) 위에서 롤링되어 디스플레이(151)의 화면 크기를 조절한다. 도 19에 도시한 바와 같이, 디스플레이의 화면 크기는 라인 뷰, 하프 뷰, 풀 뷰가 될 수 있다.
구동롤러(153)는 스크린(152)의 상부에 위치하며 스크린(152)이 감기게 제어한다.
모터(154)는 구동롤러(153)에 회전력을 제공한다.
스크린 감지부(155)는 스크린(152)의 제 1 영역의 크기를 감지한다. 제 1 영역의 크기는 라인 뷰, 하프 뷰, 풀 뷰가 될 수 있다.
메모리(170)는 오브젝트의 이미지를 저장한다.
제어부(180)는 스크린 감지부(155)에서 감지한 제 1 영역의 크기를 기초로 모터(154)의 구동을 제어하고, 적어도 하나의 제 1 이미지와 적어도 하나의 제 2 이미지를 기초로 사용자를 인식하고, 디스플레이(151)가 인식된 상기 사용자에 대응하는 정보를 정보량에 따라 다르게 디스플레이하도록 제어한다.
예를 들어, 제어부(180)는 정보량에 따라, 라인 뷰, 하프 뷰, 풀 뷰 중 어느 하나로 디스플레이할 수 있다.
도 16은 본 발명의 일 실시 예에 따른, 스마트 월의 제어 방법을 도시한 순서도를 도시한 도면이다. 본 발명은 제어부(180)에 의하여 수행된다.
스크린(152)의 전면에 있는 사용자를 포함하는 적어도 하나의 제 1 이미지를 제 1 카메라(140)로 캡쳐한다(S1610).
사용자를 포함하는 적어도 하나의 제 2 이미지를 제 2 카메라(142)로 캡쳐한다(S1620).
적어도 하나의 제 1 이미지와 상기 적어도 하나의 제 2 이미지를 기초로 사용자를 인식한다(S1630).
디스플레이(151)가 인식된 사용자에 대응하는 정보를 정보량에 따라 다르게 디스플레이하도록 제어한다(S1640).
도 17은 본 발명의 일 실시 예에 따른, 스마트 월의 하드웨어 구성을 도시한 도면이다.
도 17을 참조하면, 스마트 월(100)은 스크린(152), 디스플레이(151)를 포함한다. 스크린(152)이 디스플레이(151) 위에서 상하로 움직이면서, 사용자가 시청하는 영역에 대응하는 디스플레이(151)의 크기를 조절할 수 있다.
도 18은 본 발명의 일 실시 예에 따른, 스마트 월의 하드웨어 구성을 도시한 도면이다.
도 18을 참조하여, 스마트 월(100)의 실장 공간에 대하여 설명한다. 스마트 월(100)의 실장 공간은 부품을 장착하는 공간을 의미한다.
스마트 월(100)의 실장 공간에는 구동롤러(153), 제 1 스피커(160), 제 2 스피커(162), 디스플레이(151), 제 1 카메라(140), 제 2 카메라(142), 공기 청정기와 연결된 제 1 배출구(132), 공기 청정기와 연결된 제 2 배출구(134) 디바이스 수납장(미도시), 전원 분배기(미도시), 인터넷 분배기(미도시) 등이 장착될 수 있다.
도 19는 본 발명의 일 실시 예에 따른, 스마트 월의 라인 뷰, 하프 뷰, 풀 뷰를 도시한 도면이다. 도 19는 도 19(a), 도 19(b), 도 19(c)를 포함한다.
도 19(a)는 라인 뷰를 도시한 도면이다. 도 19(a)는 라인 뷰를 도시한 도면이다. 도 19(b)는 하프 뷰를 도시한 도면이다. 도 19(c)는 풀 뷰를 도시한 도면이다.
도 19(a)를 참조하면, 라인 뷰는 스마트 월의 하단에 제일 작은 크기로 디스플레이(151)가 노출되며, 간단한 알림 정보를 제공하는 뷰를 의미한다.
도 19(b)를 참조하면, 하프 뷰는 스마트 월의 중단에 중간 크기로 디스플레이(151)가 노출되며, 라인 뷰보다 정보량이 많은 알림 정보를 제공하는 뷰를 의미한다.
도 19(c)를 참조하면, 풀 뷰는 스마트 월의 중단에 가장 큰 크기로 디스플레이(151)가 노출되며, 영화 감상, TV 시청할 때 사용하는 뷰를 의미한다.
도 20은 본 발명의 일 실시 예에 따른, 애플리케이션의 속성에 따라 사용자에 대응하는 정보를 다르게 디스플레이하는 것을 도시한 도면이다. 도 20은 도 20(a) 및 도 20(b)를 포함한다.
도 20(a)는 제 1 애플리케이션이 위젯 애플리케이션인 경우, 제 1 애플리케이션에 대응하는 정보를 라인 뷰로 디스플레이하는 것을 도시한 도면이다. 도 20(b)는 제 1 애플리케이션이 날씨 위젯, 음악 재생 위젯, 파이어 플래이스 위젯, 갤러리 위젯인 경우를 도시한 도면이다.
도 20(a)를 참조하면, 위젯은 이용자와 응용프로그램·운영체계와의 상호작용을 보다 원활하게 지원해주는 그래픽 유저 인터페이스(GUI; 그래픽을 통해 작업할 수 있는 환경을 뜻하는 말로, 마우스를 이용하여 화면의 메뉴 중 하나를 선택하여 작업하는 형태)의 하나인 미니 애플리케이션(응용프로그램, 소프트웨어)을 의미한다.
스마트 월(100)에서 제 1 애플리케이션이 위젯 애플리케이션인 경우, 제어부(180)는 디스플레이(151)가 제 1 애플리케이션에 대응하는 정보(30)를 라인 뷰로 디스플레이하도록 제어한다. 라인 뷰는 스크린(152)이 디스플레이(151) 위에서 롤링되어 디스플레이(151)의 화면 크기를 최소화되도록 조절된 뷰를 의미한다. 뷰는 라인 뷰, 하프 뷰, 풀 뷰가 있다.
도 20(b)를 참조하면, 제어부(180)는 적어도 하나의 제 1 이미지와 상기 적어도 하나의 제 2 이미지를 기초로 사용자를 인식하고, 디스플레이(151)가 인식된 사용자에 대응하는 정보를 제 1 애플리케이션의 속성에 다르게 디스플레이하도록 제어한다.
예를 들어, 제 1 애플리케이션은 날씨 위젯(2010), 음악 재생 위젯(2020), 파이어 플래이스 위젯(2030) 및 갤러리 위젯(2040), 동영상 재생 위젯(미도시)을 포함한다. 여기서, 정보는 사용자에게 최적화된 정보를 포함한다.
애플리케이션의 속성에 따라 다르게 디스플레이하는 실시 예에 대하여 설명한다.
제어부(180)는 사용자가 제 1 사용자이고 제 1 애플리케이션의 속성이 날씨 위젯(2010)인 경우, 디스플레이(151)가 사용자에 대응하는 날씨 위젯 정보를 라인 뷰로 디스플레이하도록 제어한다.
제어부(180)는 사용자가 제 1 사용자이고, 제 1 애플리케이션의 속성이 동영상 재생 위젯(미도시)인 경우, 디스플레이(151)가 사용자에 대응하는 동영상 재생 위젯 정보를 풀 뷰로 디스플레이하도록 제어한다.
다음으로, 위젯 애플리케이션의 경우, 라인 뷰로 디스플레이하는 실시 예에 대하여 설명한다.
제어부(180)는 제 1 애플리케이션이 특정 애플리케이션인 경우, 디스플레이(151)가 제 1 애플리케이션의 실행 정보를 라인 뷰로 디스플레이하도록 제어하는,
예를 들어, 제어부(180)는 제 1 애플리케이션의 속성이 날씨 위젯(2010)인 경우, 디스플레이(151)가 사용자에 대응하는 날씨 위젯 실행 정보를 라인 뷰로 디스플레이하도록 제어한다.
제어부(180)는 제 1 애플리케이션의 속성이 음악 재생 위젯(2020)인 경우, 디스플레이(151)가 사용자에 대응하는 음악 재생 위젯 실행 정보를 라인 뷰로 디스플레이하도록 제어한다.
제어부(180)는 제 1 애플리케이션의 속성이 파이어 플래이스 위젯(2030)인 경우, 디스플레이(151)가 사용자에 대응하는 파이어 플래이스 위젯 실행 정보를 라인 뷰로 디스플레이하도록 제어한다.
다음으로, 동일 시간에 사용자에 따라 다르게 애플리케이션 실행 화면을 디스플레이하는 것에 대하여 설명한다. 여기서, 사용자는 제 1 사용자, 제 2 사용자가 될 수 있다.
예를 들어, 오후 3시에 사용자가 제 1 사용자인 경우, 제어부(180)는 제 1 애플리케이션의 속성이 날씨 위젯(2010)인 경우, 디스플레이(151)가 제 1 사용자에 대응하는 날씨 위젯 실행 정보를 라인 뷰로 디스플레이하도록 제어한다.
오후 3시에 사용자가 제 2 사용자인 경우, 제어부(180)는 제 1 애플리케이션의 속성이 날씨 위젯(2010)인 경우, 디스플레이(151)가 제 2 사용자에 대응하는 날씨 위젯 실행 정보를 하프 뷰로 디스플레이하도록 제어한다.
이것은 정보량을 기초로 결정된 뷰는 라인 뷰인데, 제 2 사용자의 의도를 기초로 결정된 뷰는 하프 뷰가 될 수 있다. 이에 대한 자세한 설명은 도 24에서 후술한다.
다음으로, 선택 횟수를 기초로 제 1 애플리케이션의 실행 정보를 라인 뷰로 실시 예에 대하여 설명한다.
제어부(180)는 소정 시간 동안 사용자가 선택한 횟수를 기초로 디스플레이(151)가 제 1 애플리케이션의 실행 정보를 라인 뷰로 디스플레이하도록 제어한다.
예를 들어, 제 1 사용자가 현재 시점으로부터 1개월 동안 오전 7시에서 오전 8 시 사이에 날씨 위젯을 30 회 실행하는 경우, 제어부(180)는 디스플레이(1510가 날씨 위젯 애플리케이션의 실행 정보를 라인 뷰로 디스플레이하도록 제어한다.
본 발명에 따르면, 날씨 위젯, 음악 재생 위젯, 파이어 플래이스 위젯, 갤러리 위젯의 경우, 사용자가 직접 특정 위젯 애플리케이션을 선택하거나, 설정 빈도수에 따라 학습된 AI가 자동으로 선택하여 재생할 수 있다.
다음으로, 제 1 이미지와 제 2 이미지에 사용자가 없는 실시 예에 대하여 설명한다.
예를 들어, 제어부(180)는 적어도 하나의 제 1 이미지와 상기 적어도 하나의 제 2 이미지를 기초로 사용자가 없다고 결정되는 경우, 디스플레이(151)를 비활성화 상태가 되도록 제어한다.
본 발명에 따르면, 스마트 월 앞에 사용자가 없을 때는 디스플레이를 오프 상태로 하여 절전할 수 있고, 디스플레이 패널의 수명을 연장시킬 수 있다.
사용자가 스마트 월 앞에 등장하면 두 개의 카메라를 이용한 비전 인식으로 사용자를 보다 정확하게 인식할 수 있고, 다양한 위젯의 실행 화면을 라인 뷰로 디스플레이할 수 있다.
도 21은 본 발명의 일 실시 예에 따른, 스마트 홈 애플리케이션의 경우, 사용자에 대응하는 맞춤형 정보를 라인 뷰로 디스플레이하는 것을 도시한 도면이다. 도 21은 도 21(a) 및 도 21(b)를 포함한다.
도 21(a)는 스마트 홈 애플리케이션인 경우, 사용자에 대응하는 맞춤형 정보를 라인 뷰로 디스플레이하는 것을 도시한 도면이다. 도 21(b)는 여러 상황에서의 사용자에 대응하는 맞춤형 정보를 도시한 도면이다.
도 21(a)를 참조하면, 제어부(180)는 제 1 애플리케이션이 스마트 홈 애플리케이션인 경우, 디스플레이(151)가 인식된 사용자에 대응하는 맞춤형 정보(30)를 라인 뷰로 디스플레이하도록 제어한다. 라인 뷰는 스크린(152)이 디스플레이(151) 위에서 롤링되어 디스플레이(151)의 화면 크기를 최소화되도록 조절된 뷰를 의미한다. 뷰는 라인 뷰, 하프 뷰, 풀 뷰가 있다.
도 21(b)를 참조하면, 다양한 상황은 사용자 인식(2110), 택배 도착 알림(2120), 현관문 열림 알림(2130), 스마트 월에 장착하는 부품 설치 안내(2140) 등이 될 수 있다.
사용자 인식(2110)의 경우, 인식된 사용자가 제 1 사용자로 결정된 경우, 제어부(180)는 디스플레이(151)가 얼굴 인식을 암시하는 텍스트, 환영을 나타내는 이모티콘, 제 1 사용자님 안녕하세요와 같은 환영 메시지를 포함하고 제 1 사용자에 대응하는 맞춤형 정보를 라인 뷰로 디스플레이하도록 제어한다.
택배 도착 알림(2120)의 경우, 인식된 사용자가 제 1 사용자로 결정된 경우, 제어부(180)는 디스플레이(151)가 택배 도착을 암시하는 텍스트, 택배 도착을 나타내는 아이콘, 택배 도착을 알리는 메시지를 포함하고 제 1 사용자에 대응하는 맞춤형 정보를 라인 뷰로 디스플레이하도록 제어한다.
문열림(2130)의 경우, 인식된 사용자가 제 1 사용자로 결정된 경우, 제어부(180)는 디스플레이(151)가 문열림을 암시하는 텍스트, 문열림을 나타내는 아이콘, 현관문이 열렸음을 알리는 메시지를 포함하고 제 1 사용자에 대응하는 맞춤형 정보를 라인 뷰로 디스플레이하도록 제어한다.
부품 설치 방법(2140)의 경우, 인식된 사용자가 제 1 사용자로 결정된 경우, 제어부(180)는 디스플레이(151)가 부품 설치 방법을 텍스트, 부품 설치 방법에 대하여 설명하는 메시지를 포함하고 제 1 사용자에 대응하는 맞춤형 정보를 라인 뷰로 디스플레이하도록 제어한다.
본 발명에 따르면, 스마트 TV가 오프 상태에서도 스마트 홈 애플리케이션을 사용한 경우, 사용자를 인식하고, 인식된 사용자에 대응하는 개인 스케줄과 같은 맞춤 정보를 라인 뷰로 제공할 수 있다.
예를 들어, 맞춤 정보는 사용자 인식, 스케줄과 같은 개인 정보 제공, 가전 제품 동작 모니터링 및 완료 알림, 택배 도착 알림, 방문자 알림, 주변 기기 설치 안내, 에어컨 필터같은 소모품 교체 방법 안내 등을 포함한다.
도 22는 본 발명의 일 실시 예에 따른, 디스플레이가 정보량을 기초로 사용자에 대응하는 정보를 라인 뷰에서 하프 뷰로 변환하여 디스플레이하는 것을 도시한 도면이다. 도 22는 도 22(a) 및 도 22(b)를 포함한다.
도 22(a)는 스마트 홈 애플리케이션인 경우, 사용자에 대응하는 맞춤형 정보를 라인 뷰로 디스플레이하는 것을 도시한 도면이다. 도 22(b)는 사용자에 대응하는 맞춤형 정보를 하프 뷰로 디스플레이하는 것을 도시한 도면이다.
화면의 크기를 라인 뷰에서 하프 뷰로 자동 전환하는 실시 예에 대하여 설명한다.
제어부(180)는 정보량이 기설정된 제 1 기준 정보량을 초과하면, 디스플레이(151)가 사용자에 대응하는 정보(30)를 도 22(a)에 도시한 라인 뷰에서, 도 22(b)에 도시한 하프 뷰로 변환하여 디스플레이하도록 제어한다.
예를 들어, 스마트 월(100)의 제어부(180)가 에너지 사용량을 사용자에게 알려줄 때, 도 22(a)에서 도시한 바와 같이, 에너지 사용량(30)을 라인 뷰로 간단히 디스플레이할 수 있다.
이후, 자세한 정보를 원하는 입력을 사용자로부터 수신하는 경우, 정보량이 기설정된 제 1 기준 정보량을 초과하므로 도 22(b)에서 도시한 바와 같이, 제어부(180)는 에너지 사용량을 하프 뷰로 보다 상세하게 디스플레이할 수 있다.
다음으로, 풀 뷰로 디스플레이하는 것에 대하여 설명한다.
정보량이 기설정된 제 2 기준 정보량을 초과하면, 디스플레이(151)가 사용자에 대응하는 정보를 하프 뷰에서 풀 뷰로 변환하여 디스플레이하도록 제어한다.
예를 들어, 정보량이 기설정된 제 2 기준 정보량을 초과하는 경우, 하프 뷰가 부족할 수 있다. 이러한 경우, 디스플레이는 제어부(180)는 에너지 사용량을 풀 뷰로 보다 상세하게 디스플레이할 수 있다.
여기서, 제 2 기준 정보량은 상기 제 1 기준 정보량보다 더 많은 정보를 포함하는 것을 의미한다.
본 발명에 따르면, 라인 뷰로 대략적인 에너지 사용량을 알려주고, 자세한 정보 제공이 필요하면 정보량에 따라 하프 뷰 또는 풀 뷰로 자동 전환되어 상세 정보를 제공할 수 있다.
예를 들어, 에너지 사용 알림의 경우, 도 22(a)에 도시한 바와 같이, 라인 뷰는 이번 달 예상 전기 요금, 이웃집 비교를 포함한다. 도 22(b)에 도시한 바와 같이, 하프 뷰는 라인 뷰의 정보를 포함하고, 월 사용량(kWh), 동일 평형 및 단지 내 전체 가구 비교, 이번 달 및 지난 달 비교 분석, 연간 사용량 history 정보를 포함할 수 있다.
도 23은 본 발명의 일 실시 예에 따른, 디스플레이가 정보량을 기초로 사용자에 대응하는 정보를 라인 뷰에서 풀 뷰로 변환하여 디스플레이하는 것을 도시한 도면이다. 도 23은 도 23(a) 및 도 23(b)를 포함한다.
도 23(a)는 제 1 애플리케이션이 커뮤니티 예약 애플리케이션인 경우, 사용자에 대응하는 맞춤형 정보를 라인 뷰로 디스플레이하는 것을 도시한 도면이다. 도 23(b)는 사용자에 대응하는 맞춤형 정보를 풀 뷰로 디스플레이하는 것을 도시한 도면이다.
도 23(a)를 참조하면, 커뮤니티 예약 애플리케이션을 실행한 상태에서, 제어부(180)는 사용자가 말하는 내용을 STT 기능으로 텍스트 변환한 텍스트 정보(30)를 라인 뷰로 디스플레이할 수 있다. 예를 들어, 사용자가 말하는 내용은 이번 주 토요일에 게스트 하우스 예약해줘가 될 수 있다.
도 23(b)를 참조하면, 제어부(180)는 정보량이 기설정된 제 2 기준 정보량을 초과하면, 디스플레이(151)가 사용자에 대응하는 정보를 라인 뷰에서 풀 뷰로 변환하여 디스플레이하도록 제어한다. 여기서, 제 2 기준 정보량은 제 1 기준 정보량보다 더 많은 정보를 포함하는 것을 의미한다.
예를 들어, 도 23(b)에 도시한 바와 같이, 게스트 하우스 예약 화면(30)의 정보량은 제 2 기준 정보량을 초과할 수 있다. 이러한 경우, 제어부(180)는 디스플레이(151)가 게스트 하우스 예약 화면(30)를 라인 뷰에서 풀 뷰로 변환하여 디스플레이하도록 제어한다. 보통의 경우, 라인 뷰에서 하프 뷰로 변환하고, 하프 뷰에서 풀 뷰로 디스플레이한다.
본 발명의 경우, 정보량이 기설정된 제 2 기준 정보량을 초과하면, 중간 과정을 거치지 않고 바로 풀 뷰로 디스플레이할 수 있다.
도 24는 본 발명의 일 실시 예에 따른, 강화 학습 모델을 이용하여 사용자의 의도를 결정하는 것을 도시한 도면이다.
도 24를 참조하면, 강화 학습 모델(300, Reinforcement Learning, 이하, RL)은 기계 학습이 다루는 문제들 중 하나로 어떤 환경(302) 안에서 정의된 에이전트(301)가 현재의 상태(303)를 인식하여, 선택 가능한 행동(304) 중 보상(305)을 최대화하는 행동을 선택하는 방법을 의미한다.
강화 학습 모델(300)은 에이전트(301), 환경(302), 상태(303), 보상(304), 및 행동(305)을 포함한다.
에이전트(301, Agent)는 상태(303)를 관찰하고, 행동(305)을 선택하고, 목표를 지향하는 것을 의미한다. 에이전트(301)는 학습자(learner), 결정권자(decision maker)를 포함한다.
환경(302, Environment)는 에이전트(301)를 제외한 나머지를 의미한다.
상태(303, State)는 시스템 사용자의 현재 상황을 나타내는 정보를 의미한다.
행동(304, Action)은 현재 상황에서 에이전트(301)가 하는 것을 의미한다.
보상(305, Reward)는 행동(304)의 좋고 나쁨을 알려주는 정보를 의미한다.
도 24를 참조하여, 피드백을 반영하는 강화 학습 모델을 이용하여 사용자의 대응하는 정보를 정보량에 따라 다르게 디스플레이하는 실시 예를 설명한다.
제어부(180)는 피드백을 사용자로부터 수신하고, 수신된 피드백을 반영하는 강화 학습 모델(300)을 이용하여 사용자의 의도를 결정한다. 피드백은 긍정 피드백, 부정 피드백을 포함한다. 여기서, 피드백은 보상(305)에 대응된다.
제어부(180)는 디스플레이(151)가 인식된 사용자에 대응하는 정보를 결정된 사용자의 의도에 따라 디스플레이하도록 제어한다.
먼저, 정보량을 기초로 결정된 뷰와 사용자의 의도를 기초로 결정된 뷰가 다른 경우에 대하여 설명한다.
예를 들어, 도 20(b)에 도시한 바와 같이, 제어부(180)는 사용자가 제 1 사용자이고 제 1 애플리케이션의 속성이 날씨 위젯(2010)인 경우, 디스플레이(151)가 제 1 사용자에 대응하는 날씨 위젯 정보를 라인 뷰로 디스플레이하도록 제어한다.
제어부(180)는 날씨 위젯 정보를 라인 뷰로 디스플레이한 경우, 사용자(10)가 디스플레이의 뷰를 수정하지 않으면, 제어부(180)는 사용자의 의도가 맞았다고 결정한다.
사용자(10)가 디스플레이의 뷰를 수정하면, 제어부(180)는 사용자의 의도가 틀렸다고 결정한다. 예를 들어, 사용자는 날씨 위젯 정보를 보다 큰 화면에서 보기를 원하여 사용자는 날씨 위젯 정보를 라인 뷰에서 하프 뷰로 변경하는 경우, 제어부(180)는 사용자의 의도가 틀렸다고 결정한다.
이 경우, 디폴트 상태에서, 제어부(180)는 정보량을 기초로 디스플레이 뷰를 결정하는데, 사용자의 의도를 기초로 결정된 디스플레이 뷰와 정보량을 기초로 결정된 디스플레이 뷰가 다를 수 있다.
사용자의 의도를 기초로 결정된 뷰와 정보량을 기초로 결정된 뷰가 다른 경우, 제어부(180)는 사용자의 의도의 우선 순위를 더 높게 설정한다. 따라서, 정보량을 기초로 라인 뷰로 결정되어도 사용자의 의도는 하프 뷰이므로 제어부(180)는 날씨 위젯 정보를 하프 뷰로 디스플레이한다.
제어부(180)는 결정된 사용자의 의도가 맞으면, 가점 포인트를 강화 학습 모델(300)에 제공하고, 결정된 사용자의 의도가 틀리면, 감점 포인트를 강화 학습 모델(300)에 제공한다.
예를 들어, 제어부(180)는 결정된 사용자의 의도가 맞으면, 가점 포인트 + 10 을 강화 학습 모델(300)에 제공하고, 결정된 사용자의 의도가 틀리면, 감점 포인트- 10 을 강화 학습 모델(300)에 제공한다.
본 발명에 따르면, 가점 포인트와 감점 포인트를 반영하므로 강화 학습 모델(300)의 정확성을 향상 시킬 수 있다.
본 발명에 따르면, 위젯을 라인 뷰로 활용할 수 있어서, 단순히 ON/OFF 상태로만 작동하던 TV의 활용도를 높일 수 있는 장점이 있다.
본 발명에 따르면, 카메라로 사용자를 인식하여, 사용자에게 개인화 및 맞춤화된 정보를 제공할 수 있다.
본 발명에 따르면, 필요한 정보량에 따라 디스플레이 사이즈를 가변적으로 활용할 수 있고, 필요에 따라 화면 크기를 변화시킴으로써 에너지 절약과 디스플레이 패널 수명 연장에 기여할 수 있다.
본 발명의 일 실시 예에 따르면, 카메라로 캡쳐된 이미지를 분석하여 사용자를 인식하고, 인식된 사용자를 기초로 사용자에 대응하는 정보를 정보량에 따라 다르게 디스플레이할 수 있어서 사용자에게 맞춤화된 정보를 제공할 수 있으므로 사용자 편의성을 향상 시킬 수 있다.
본 발명의 다른 실시 예에 따르면, 인식된 사용자에 대응하는 정보를 애플리케이션의 속성에 따라 다르게 디스플레이할 수 있어서 사용자에게 맞춤화된 정보를 제공할 수 있으므로 사용자 편의성을 향상 시킬 수 있다.
본 발명의 또 다른 실시 예에 따르면, 정보량이 기설정된 기준 정보량을 초과하면, 디스플레이가 상기 사용자에 대응하는 정보를 라인 뷰에서, 하프 뷰로 변환하거나, 하프 뷰에서 풀 뷰로 변환하여 디스플레이하도록 제어할 수 있어서, 필요한 정보량에 따라 디스플레이되는 화면 크기를 가변적으로 변경할 수 있으므로 사용자 편의성을 향상 시킬 수 있다.
본 발명에 따른 스마트 월 및 그 제어 방법은 상기한 바와 같이 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
한편, 본 발명의 스마트 월의 제어 방법은 스마트 월에 구비된 프로세서가 읽을 수 있는 기록매체에 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.
다양한 실시 예가 본 발명을 실시하기 위한 최선의 형태에서 설명되었다.
본 발명은 스마트 월에 장착된 스마트 월에 장착된 카메라가 캡쳐한 이미지를 기초로 사용자를 인식하고, 인식된 사용자를 기초로 정보량에 따라 다르게 필요한 정보를 다르게 디스플레이하는 스마트 월의 관련 분야에서 이용된다.
본 발명의 사상이나 범위를 벗어나지 않고 본 발명에서 다양한 변경 및 변형이 가능함은 당업자에게 자명하다. 따라서, 본 발명은 첨부된 청구항 및 그 동등 범위 내에서 제공되는 본 발명의 변경 및 변형을 포함하는 것으로 의도된다.

Claims (20)

  1. 제 1 애플리케이션이 실행하는 컨텐트를 디스플레이하는 멀티미디어 디바이스가 장착된 스마트 월에서,
    그래픽 이미지를 디스플레이하는 디스플레이;
    상기 디스플레이 위에서 롤링되어 상기 디스플레이의 화면 크기를 조절하는 스크린;
    스크린의 상부에 위치하며 상기 스크린이 감기는 구동롤러;
    구동롤러에 회전력을 제공하는 모터;
    상기 스크린의 제 1 영역의 크기를 감지하는 스크린 감지부;
    상기 스크린의 전면에 있는 사용자를 포함하는 적어도 하나의 제 1 이미지를 캡쳐하는 제 1 카메라;
    상기 사용자를 포함하는 적어도 하나의 제 2 이미지를 캡쳐하는 제 2 카메라; 및
    상기 스크린 감지부에서 감지한 상기 제 1 영역의 크기를 기초로 상기 모터의 구동을 제어하고,
    상기 적어도 하나의 제 1 이미지와 상기 적어도 하나의 제 2 이미지를 기초로 사용자를 인식하고,
    상기 디스플레이가 인식된 상기 사용자에 대응하는 정보를 정보량에 따라 다르게 디스플레이하도록 제어하는 제어부
    를 포함하는 스마트 월.
  2. 제 1 항에 있어서, 상기 제어부는
    상기 디스플레이가 인식된 상기 사용자에 대응하는 정보를 상기 제 1 애플리케이션의 속성에 다르게 디스플레이하도록 제어하는.
    스마트 월.
  3. 제 2 항에 있어서, 상기 제어부는
    상기 제 1 애플리케이션이 특정 애플리케이션인 경우, 상기 디스플레이가 상기 제 1 애플리케이션의 실행 정보를 라인 뷰로 디스플레이하도록 제어하는,
    스마트 월.
  4. 제 2 항에 있어서, 상기 제어부는
    사용자가 선택한 횟수를 기초로 상기 디스플레이가 상기 제 1 애플리케이션의 실행 정보를 라인 뷰로 디스플레이하도록 제어하는,
    스마트 월.
  5. 제 1 항에 있어서, 상기 제어부는
    상기 적어도 하나의 제 1 이미지와 상기 적어도 하나의 제 2 이미지를 기초로 사용자가 없다고 결정되는 경우, 상기 디스플레이를 비활성화 상태가 되도록 제어하는,
    스마트 월.
  6. 제 1 항에 있어서, 상기 제어부는
    상기 제 1 애플리케이션이 스마트 홈 애플리케이션인 경우, 상기 디스플레이가 인식된 상기 사용자에 대응하는 맞춤형 정보를 라인 뷰로 디스플레이하도록 제어하는.
    스마트 월.
  7. 제 1 항에 있어서, 상기 제어부는
    상기 정보량이 기설정된 제 1 기준 정보량을 초과하면, 상기 디스플레이가 상기 사용자에 대응하는 정보를 라인 뷰에서, 하프 뷰로 변환하여 디스플레이하도록 제어하는,
    스마트 월.
  8. 제 7 항에 있어서, 상기 제어부는
    상기 정보량이 기설정된 제 2 기준 정보량을 초과하면, 상기 디스플레이가 상기 사용자에 대응하는 정보를 하프 뷰에서 풀 뷰로 변환하여 디스플레이하도록 제어하되,
    상기 제 2 기준 정보량은 상기 제 1 기준 정보량보다 더 많은 정보를 포함하는 것을 의미하는,
    스마트 월.
  9. 제 1 항에 있어서, 상기 제어부는
    피드백을 사용자로부터 수신하고,
    수신된 상기 피드백을 반영하는 강화 학습 모델을 이용하여 사용자의 의도를 결정하고,
    상기 디스플레이가 인식된 상기 사용자에 대응하는 정보를 결정된 상기 사용자의 의도에 따라 디스플레이하도록 제어하는,
    스마트 월.
  10. 제 9 항에 있어서,
    상기 사용자가 상기 디스플레이의 뷰를 수정하지 않으면, 보상 포인트를 상기 강화 학습 모델에 제공하고,
    상기 사용자가 상기 디스플레이의 뷰를 수정하면, 감점 포인트를 상기 강화 학습 모델에 제공하는,
    스마트 월
  11. 스마트 월의 제어 방법에 있어서,
    스크린의 전면에 있는 사용자를 포함하는 적어도 하나의 제 1 이미지를 제 1 카메라로 캡쳐하는 단계;
    상기 사용자를 포함하는 적어도 하나의 제 2 이미지를 제 2 카메라로 캡쳐하는 단계;
    상기 적어도 하나의 제 1 이미지와 상기 적어도 하나의 제 2 이미지를 기초로 사용자를 인식하는 단계; 및
    상기 디스플레이가 인식된 상기 사용자에 대응하는 정보를 정보량에 따라 다르게 디스플레이하도록 제어하는 단계;
    를 포함하는 스마트 월 제어 방법.
  12. 제 11 항에 있어서,
    상기 디스플레이가 인식된 상기 사용자에 대응하는 정보를 상기 제 1 애플리케이션의 속성에 다르게 디스플레이하도록 제어하는 단게를 더 포함하는,
    스마트 월 제어 방법.
  13. 제 12 항에 있어서,
    상기 제 1 애플리케이션이 특정 애플리케이션인 경우, 상기 디스플레이가 상기 제 1 애플리케이션의 실행 정보를 라인 뷰로 디스플레이하도록 제어하는 단계를 더 포함하는,
    스마트 월 제어 방법.
  14. 제 12 항에 있어서,
    사용자가 선택한 횟수를 기초로 상기 디스플레이가 상기 제 1 애플리케이션의 실행 정보를 라인 뷰로 디스플레이하도록 제어하는 단계를 더 포함하는,
    스마트 월 제어 방법.
  15. 제 11 항에 있어서,
    상기 적어도 하나의 제 1 이미지와 상기 적어도 하나의 제 2 이미지를 기초로 사용자가 없다고 결정되는 경우, 상기 디스플레이를 비활성화 상태가 되도록 제어하는 단계를 더 포함하는,
    스마트 월 제어 방법.
  16. 제 11 항에 있어서,
    상기 제 1 애플리케이션이 스마트 홈 애플리케이션인 경우, 상기 디스플레이가 인식된 상기 사용자에 대응하는 맞춤형 정보를 라인 뷰로 디스플레이하도록 제어하는 단계를 더 포함하는,
    스마트 월 제어 방법.
  17. 제 11 항에 있어서,
    상기 정보량이 기설정된 제 1 기준 정보량을 초과하면, 상기 디스플레이가 상기 사용자에 대응하는 정보를 라인 뷰에서, 하프 뷰로 변환하여 디스플레이하도록 제어하는 단계를 더 포함하는,
    스마트 월 제어 방법.
  18. 제 17 항에 있어서,
    상기 정보량이 기설정된 제 2 기준 정보량을 초과하면, 상기 디스플레이가 상기 사용자에 대응하는 정보를 하프 뷰에서 풀 뷰로 변환하여 디스플레이하도록 제어하는 단계를 더 포함하되,
    상기 제 2 기준 정보량은 상기 제 1 기준 정보량보다 더 많은 정보를 포함하는 것을 의미하는,
    스마트 월 제어 방법.
  19. 제 11 항에 있어서,
    피드백을 사용자로부터 수신하는 단계;
    수신된 상기 피드백을 반영하는 강화 학습 모델을 이용하여 사용자의 의도를 결정하는 단계; 및
    상기 디스플레이가 인식된 상기 사용자에 대응하는 정보를 결정된 상기 사용자의 의도에 따라 디스플레이하도록 제어하는 단계를 더 포함하는,
    스마트 월 제어 방법.
  20. 제 19 항에 있어서,
    상기 사용자가 상기 디스플레이의 뷰를 수정하지 않으면, 보상 포인트를 상기 강화 학습 모델에 제공하는 단계; 및
    상기 사용자가 상기 디스플레이의 뷰를 수정하면, 감점 포인트를 상기 강화 학습 모델에 제공하는 단계를 더 포함하는,
    스마트 월 제어 방법.
PCT/KR2019/017672 2019-12-13 2019-12-13 스마트 월 및 그 제어 방법 WO2021117949A1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/KR2019/017672 WO2021117949A1 (ko) 2019-12-13 2019-12-13 스마트 월 및 그 제어 방법
KR1020227006055A KR20220114521A (ko) 2019-12-13 2019-12-13 스마트 월 및 그 제어 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2019/017672 WO2021117949A1 (ko) 2019-12-13 2019-12-13 스마트 월 및 그 제어 방법

Publications (1)

Publication Number Publication Date
WO2021117949A1 true WO2021117949A1 (ko) 2021-06-17

Family

ID=76330416

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2019/017672 WO2021117949A1 (ko) 2019-12-13 2019-12-13 스마트 월 및 그 제어 방법

Country Status (2)

Country Link
KR (1) KR20220114521A (ko)
WO (1) WO2021117949A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090083594A (ko) * 2008-01-30 2009-08-04 삼성전자주식회사 개인 일생 기록을 위한 디지털 이미징 기기의 촬영프로파일 학습 장치 및 방법
US20100088634A1 (en) * 2007-01-25 2010-04-08 Akira Tsuruta Multi-window management apparatus and program, storage medium and information processing apparatus
KR20110050217A (ko) * 2009-11-06 2011-05-13 엘지전자 주식회사 디스플레이 장치 및 그 사용자 인터페이스 제공 방법
KR20140118221A (ko) * 2013-03-28 2014-10-08 엘지전자 주식회사 사용자 인식 장치 및 그 방법
KR20140144029A (ko) * 2013-06-10 2014-12-18 엘지전자 주식회사 플렉시블 디스플레이를 포함하는 멀티미디어 디바이스 및 그 제어 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100088634A1 (en) * 2007-01-25 2010-04-08 Akira Tsuruta Multi-window management apparatus and program, storage medium and information processing apparatus
KR20090083594A (ko) * 2008-01-30 2009-08-04 삼성전자주식회사 개인 일생 기록을 위한 디지털 이미징 기기의 촬영프로파일 학습 장치 및 방법
KR20110050217A (ko) * 2009-11-06 2011-05-13 엘지전자 주식회사 디스플레이 장치 및 그 사용자 인터페이스 제공 방법
KR20140118221A (ko) * 2013-03-28 2014-10-08 엘지전자 주식회사 사용자 인식 장치 및 그 방법
KR20140144029A (ko) * 2013-06-10 2014-12-18 엘지전자 주식회사 플렉시블 디스플레이를 포함하는 멀티미디어 디바이스 및 그 제어 방법

Also Published As

Publication number Publication date
KR20220114521A (ko) 2022-08-17

Similar Documents

Publication Publication Date Title
WO2014084413A1 (ko) 가전 기기 구동 장치 및 방법
WO2016200211A1 (en) Method and apparatus for service oriented input and output
WO2015026017A1 (en) Display apparatus and operation method thereof
WO2014200151A1 (en) Multimedia device having flexible dipslay and controlling method thereof
WO2014175605A1 (en) Cleaning robot, home monitoring apparatus, and method for controlling the cleaning robot
EP3047583A1 (en) Home appliance and mobile terminal
WO2021085658A1 (ko) 크기가 변경되는 디스플레이를 포함하는 전자 장치 및 그 제어 방법
WO2019050227A1 (ko) 공기조화기의 동작 방법
EP3248380A1 (en) Display apparatus and method for controlling a screen of display apparatus
WO2021100915A1 (ko) 스마트 월
WO2021117949A1 (ko) 스마트 월 및 그 제어 방법
WO2019212144A1 (en) Electronic device and operating method thereof
WO2021100886A1 (ko) 스마트 월 및 그 제어 방법
WO2017039194A1 (ko) 냉장고
KR101343385B1 (ko) 걸이형 셋톱박스
WO2022025408A1 (ko) 전자 장치 및 그 제어 방법
WO2017007051A1 (ko) 멀티미디어 디바이스
WO2021107186A1 (ko) 스마트 월 및 그 제어 방법
KR20210004407A (ko) 스마트 월
WO2021006406A1 (ko) 인공지능 기반의 공기조화기
EP3827430A1 (en) Electronic device and operation method thereof
WO2021029762A1 (ko) 스마트 월
WO2021049697A1 (ko) 공기청정기 및 스마트 월
WO2021149850A1 (ko) 스마트 월
KR200495809Y1 (ko) 스마트 욕실 천정 시스템

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19955596

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19955596

Country of ref document: EP

Kind code of ref document: A1