KR101362376B1 - A smart closet, a management apparatus and method thereof - Google Patents

A smart closet, a management apparatus and method thereof Download PDF

Info

Publication number
KR101362376B1
KR101362376B1 KR1020070065427A KR20070065427A KR101362376B1 KR 101362376 B1 KR101362376 B1 KR 101362376B1 KR 1020070065427 A KR1020070065427 A KR 1020070065427A KR 20070065427 A KR20070065427 A KR 20070065427A KR 101362376 B1 KR101362376 B1 KR 101362376B1
Authority
KR
South Korea
Prior art keywords
user
information
user interface
unit
clothing
Prior art date
Application number
KR1020070065427A
Other languages
Korean (ko)
Other versions
KR20090001208A (en
Inventor
문지현
김석근
박종애
김태호
김현기
이혜주
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070065427A priority Critical patent/KR101362376B1/en
Publication of KR20090001208A publication Critical patent/KR20090001208A/en
Application granted granted Critical
Publication of KR101362376B1 publication Critical patent/KR101362376B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47BTABLES; DESKS; OFFICE FURNITURE; CABINETS; DRAWERS; GENERAL DETAILS OF FURNITURE
    • A47B61/00Wardrobes
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47BTABLES; DESKS; OFFICE FURNITURE; CABINETS; DRAWERS; GENERAL DETAILS OF FURNITURE
    • A47B2220/00General furniture construction, e.g. fittings
    • A47B2220/0091Electronic or electric devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

지능형 옷장의 외부에 설치된 사용자 인터페이스부를 통해, 사용자와의 인터랙션에 따라 지능형 옷장을 제어하고 관련 정보를 제공받는 장치 및 방법이 개시된다. 본 발명의 지능형 옷장 관리장치는, 사용자에게 제공되는 정보와, 사용자와의 인터랙션을 수행하고 그에 따른 결과를 표시하는 사용자 인터페이스부; 의류의 입출고 관련정보를 포함하는 통합의류정보를 입력받는 입출고정보 입력부; 및 상기 사용자 인터페이스부 및 입출고정보 입력부를 제어하며 상기 통합의류정보를 관리하는 제어부를 포함하는 것을 특징으로 한다. 이에 의해 지능형 옷장을 사용하여 의류를 보다 효율적으로 관리할 수 있어 코디 정보, 의류이력관리 등을 통합 관리할 수 있으며, 날씨, 행사, 취향에 따라 사용자에게 적절한 옷을 추천할 수도 있어 옷장 이용의 편리성을 도모할 수 있다.An apparatus and method for controlling an intelligent closet and receiving related information according to an interaction with a user through a user interface installed outside the intelligent closet is disclosed. The intelligent closet management apparatus of the present invention, a user interface for performing the interaction with the user and information provided to the user and displays the result accordingly; Entry and exit information input unit for receiving the integrated clothing information including the entry and exit information of the clothing; And a control unit controlling the user interface unit and the warehouse information input unit and managing the integrated clothing information. By using intelligent wardrobes, clothes can be managed more efficiently, which enables integrated management of coordination information, clothing history management, etc., and recommends appropriate clothes to users according to the weather, events, and tastes. We can plan sex.

옷장, 디스플레이 Wardrobe, display

Description

지능형 옷장, 그 관리 장치 및 방법 {A smart closet, a management apparatus and method thereof}Smart closet, a management apparatus and method

도 1은 본 발명의 일실시예에 따른 지능형 옷장의 일구성도,1 is a configuration diagram of an intelligent wardrobe according to an embodiment of the present invention;

도 2는 본 발명의 지능형 옷장에 설치된 사용자 인터페이스부(200)의 표시화면의 일예를 도시한 도면,2 is a view showing an example of a display screen of the user interface unit 200 installed in the intelligent closet of the present invention;

도 3은 본 발명의 지능형 옷장 관리 장치의 구성도,3 is a block diagram of an intelligent closet management apparatus of the present invention,

도 4a 내지 도 4b는 사용자의 손 동작을 인식하여 메뉴를 브라우징하는 과정을 설명하기 위한 참조도,4A to 4B are reference views for explaining a process of browsing a menu by recognizing a user's hand gesture;

도 5는 사용자의 손 동작에 따른 메뉴 선택의 일예를 도시한 도면,5 is a diagram illustrating an example of menu selection according to a user's hand gesture;

도 6은 본 발명의 지능형 옷장 관리 방법의 플로우차트이다.6 is a flowchart of the intelligent closet management method of the present invention.

<도면의 주요 부분에 대한 설명>DESCRIPTION OF THE EMBODIMENTS

310 : 사용자 인터페이스부 320 : 제어부310: user interface unit 320: control unit

330 : 입출고정보 입력부330: input and output information input unit

본 발명은 지능형 옷장 및 그 관리에 관한 것으로, 보다 상세하게는 지능형 옷장의 설치된 사용자 인터페이스부를 통해 지능형 옷장을 제어하고, 여러가지 관련 정보를 제공받는 장치 및 방법에 관한 것이다.The present invention relates to an intelligent closet and its management, and more particularly, to an apparatus and method for controlling an intelligent closet through an installed user interface of the intelligent closet and receiving various related information.

종래, 옷장 내에 설치되어 자외선 살균을 하거나, 건조, 탈취 기능을 하는 설비를 갖춘 다목적 기능의 옷장이 개시되어 있다. 예를 들어, 수납공간 내부의 행거에 걸린 의류 또는 접혀져 보관되는 의류 사이로 살균 효과가 뛰어난 특정 파장의 자외선을 조사하여 살균시키거나, 히터와 송풍수단에 의해 따뜻한 공기를 강제로 순환시키는 건조탈취 수단을 이용하여 옷을 건조시키는 건조기를 구비하거나, 방향수단에 의해 향을 발산하도록 하여 의류에 배어 있는 악취를 제거하는 등의 여러가지 기능의 옷장이 개시되어 있다.BACKGROUND ART Conventionally, a multipurpose wardrobe having a facility installed in a closet to perform ultraviolet sterilization, drying, and deodorization functions has been disclosed. For example, dry deodorizing means for irradiating and sterilizing ultraviolet rays of a specific wavelength having excellent sterilization effect between clothes hanging on a hanger or folded clothes inside the storage space or forcibly circulating warm air by a heater and a blowing means. Background Art A wardrobe having various functions such as providing a dryer for drying clothes, or discharging incense by means of aroma means to remove odors contained in clothes are disclosed.

그러나, 이러한 옷장들은 종래의 옷장에 건조기, 살균기, 방향 수단 등 기계적인 구조물을 더 결합하여 종래의 옷장에 다목적 기능을 부여하는 것에 대해서만 개시하고 있을 뿐, 사용자와의 인터랙션에 따라 명령을 입력받고 그에 따른 관련정보를 제공하는 지능형 옷장에 대해서는 개시하고 있지 않다.However, these wardrobes disclose only the combination of mechanical structures, such as dryers, sterilizers, and direction means, to the conventional wardrobe to provide multipurpose functions to the conventional wardrobe, and receive commands according to the interaction with the user. It does not disclose intelligent closets that provide relevant information.

따라서, 본 발명이 이루고자 하는 기술적 과제는 지능형 옷장의 설치된 사용자 인터페이스부를 통해, 사용자와의 인터랙션에 따라 지능형 옷장을 제어하고 관련 정보를 제공받는 장치 및 방법을 제공하는 것이다.Accordingly, an aspect of the present invention is to provide an apparatus and method for controlling an intelligent closet and receiving related information according to an interaction with a user through an installed user interface of the intelligent closet.

본 발명이 이루고자 하는 다른 기술적 과제는, 의류를 보관하는 수납부와 의류에 부착된 불순물을 제거하고 냄새를 제거하거나 항균처리 또는 구김제거를 포함하는 복원가공을 수행하는 재생부를 구비하며, 사용자와의 인터랙션에 따라 상기 수납부 또는 재생부에 입고된 의류의 상태 또는 이력정보를 표시하고 통합관리하는 지능형 옷장을 제공하는 것이다.Another technical object of the present invention is to provide a storage unit for storing clothes and a regeneration unit for removing the impurities attached to the clothes and to remove the smell or to perform a restoration process including antibacterial treatment or wrinkle removal, and with the user According to the interaction it is to provide an intelligent wardrobe that displays and integrated management of the status or history information of the clothes worn in the storage unit or playback unit.

상기 기술적 과제는 본 발명에 따라, 사용자에게 제공되는 정보와, 사용자와의 인터랙션을 수행하고 그에 따른 결과를 표시하는 사용자 인터페이스부; 의류의 입출고 관련정보를 포함하는 통합의류정보를 입력받는 입출고정보 입력부; 및 상기 사용자 인터페이스부 및 입출고정보 입력부를 제어하며 상기 통합의류정보를 관리하는 제어부를 포함하는 것을 특징으로 하는 지능형 옷장 관리 장치에 의해서 달성된다.The technical problem according to the present invention, the user interface unit for performing the interaction with the user and the information provided to the user and displays the result accordingly; Entry and exit information input unit for receiving the integrated clothing information including the entry and exit information of the clothing; And a control unit controlling the user interface unit and the warehouse information input unit and managing the integrated clothing information.

또한, 상기 기술적 과제는 본 발명에 따라, 의류를 보관하는 수납부; 의류에 부착된 불순물을 제거하고 냄새를 제거하거나 항균처리 또는 구김제거를 포함하는 복원가공을 수행하는 재생부; 및 사용자와의 인터랙션에 따라 상기 수납부 또는 재생부에 입고된 의류의 상태또는 이력정보를 표시하고 통합관리하는 지능형 옷장 관리장치를 포함하는 것을 특징으로 하는 지능형 옷장에 의해서도 달성된다.In addition, according to the present invention, the storage unit for storing the clothing; A regeneration unit for removing impurities attached to clothes and removing odors or performing restoration processing including antibacterial treatment or wrinkle removal; And it is also achieved by the intelligent wardrobe characterized in that it comprises an intelligent closet management device for displaying and managing the status or history information of the clothing worn in the storage unit or the playback unit in accordance with the interaction with the user.

한편, 본 발명의 다른 분야에 따르면, 상기 기술적 과제는 의류의 입출고 관련정보를 포함하는 통합의류정보를 입력받는 입출고 정보 입력단계; 및 상기 통합의류정보를 관리하며, 사용자와의 인터랙션을 수행하고 그에 따른 관련 정보를 제공하는 정보제공단계를 포함하는 것을 특징으로 하는 지능형 옷장 관리 방법에 의해서도 달성된다.On the other hand, according to another field of the present invention, the technical problem is the input and output warehouse information input step of receiving integrated clothing information including the warehouse entry and reception information; And an information providing step of managing the integrated clothing information, performing an interaction with a user, and providing related information accordingly.

이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대해 상세히 설 명한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 따른 지능형 옷장의 일구성도이다.1 is a block diagram of an intelligent wardrobe according to an embodiment of the present invention.

본 발명의 지능형 옷장(100)은 수납부(120)와 재생부(130)를 구비하며, 옷장(100)의 상태 및 의류에 대한 정보를 처리하고 사용자와의 인터랙션을 제어하는 지능형 옷장 관리장치(110)를 더 포함한다. 지능형 옷장 관리장치(110)는 일예로 수납부(120)의 전면 또는 측면에 설치된 사용자 인터페이스부를 통해 사용자에게 여러가지 정보를 제공하고, 터치 스크린 등의 입력 수단을 통해 사용자로부터의 명령을 입력받는다. 그리고 사용자로부터 입력된 명령에 따라 관련 정보를 제공한다. 지능형 옷장 관리장치(110)에 대한 상세한 설명은 도 2 내지 3을 참조하여 후술한다.The intelligent wardrobe 100 of the present invention includes an accommodating unit 120 and a reproducing unit 130, and processes an information about a state and clothes of the wardrobe 100 and controls an interaction with a user ( 110) more. For example, the intelligent wardrobe management device 110 provides various information to the user through a user interface installed at the front or side of the housing 120, and receives a command from the user through an input means such as a touch screen. Then, the relevant information is provided according to the command input from the user. A detailed description of the intelligent closet management device 110 will be described later with reference to FIGS.

수납부(120)는 의류를 보관하는 공간을 제공한다. 즉, 옷걸이 등을 사용하여 옷을 걸 수 있도록 하는 공간 또는 서랍이나 선반 등을 공간을 제공하여 사용자가 의류를 수납할 수 있는 공간을 제공한다. 재생부(130)는 의류에 부착된 불순물을 제거하고 냄새를 제거하거나 항균처리 또는 구김제거를 포함하는 복원가공을 수행한다. 불순물을 제거하는 일례로 에어 샤워부를 구비한 공기 공조장치를 사용하여 의류를 클리닝할 수 있다. 또한, 방향제 또는 살균 소독제를 도포하여 냄새를 제거하거나 살균을 할 수 있으며, 고온의 스팀을 분사하여 옷감의 구김을 제거할 수도 있다. 즉, 재생부(130)는 사용자가 착용하여 오염되거나 손상된 옷을 클리닝 또는 구김제거 등의 방법으로 깨끗한 상태로 복원한다.The storage unit 120 provides a space for storing clothing. That is, a space for hanging clothes using a hanger or the like, or a space for a drawer or a shelf to provide a space for the user to store clothes. The regeneration unit 130 removes impurities attached to clothes and removes odors or performs restoration processing including antibacterial treatment or wrinkle removal. As an example of removing impurities, clothing may be cleaned using an air conditioning apparatus including an air shower unit. In addition, it is possible to remove the smell or sterilization by applying a fragrance or disinfectant disinfectant, it is also possible to remove the wrinkles of the cloth by spraying hot steam. That is, the regeneration unit 130 restores the dirty or damaged clothes worn by the user to a clean state by cleaning or wrinkle removal.

도 2는 본 발명의 지능형 옷장의 사용자 인터페이스부(200)의 표시화면의 일 예를 도시한 도면이다.2 is a view showing an example of a display screen of the user interface unit 200 of the intelligent closet of the present invention.

사용자 인터페이스부(200)는 여러가지 정보를 사용자에게 제공할 수 있다. 예를 들어 디스플레이 화면을 기본정보 표시부(210), 메뉴 표시부(220), 부가정보 표시부(230)로 분할하여 각 표시부에 해당 정보를 표시할 수도 있고, 기타 다른 부가정보를 표시하는 표시부를 더 추가하여 해당 정보를 표시할 수도 있다.The user interface 200 may provide various information to the user. For example, the display screen may be divided into a basic information display unit 210, a menu display unit 220, and an additional information display unit 230 to display corresponding information on each display unit, or may further add a display unit displaying other additional information. This information can also be displayed.

이때 사용자 인터페이스부(200)는 사용자가 일정한 거리 밖에 있을 때는 사용자 인터페이스부(200)에 구비된 반사수단 또는 백라이트를 제어하여 사용자 인터페이스부(200)의 동작을 오프시킨채 거울로 만들고, 사용자가 일정한 거리 이내로 접근하면 사용자 인터페이스부(200)를 웨이크-업(wake-up) 시켜 사용자와 인터랙션하는 메뉴를 디스플레이하도록 하여 불필요한 전력 소모를 방지한다. 일예로 적외선 센서, 움직임 감지 센서 등이 설치되어 사용자의 움직임을 감지하여 일정한 거리, 예를 들어 사용자의 손이 접촉할 수 있는 범위내에 사용자가 접근한 것으로 판단하면 사용자 인터페이스부(200)를 웨이크-업 시켜 사용자와의 인터랙션을 수행한다.In this case, when the user is outside a certain distance, the user interface 200 controls the reflecting means or the backlight provided in the user interface 200 to turn off the operation of the user interface 200 to make a mirror, and the user is fixed. When approaching within a distance, the user interface 200 wakes up to display a menu interacting with a user, thereby preventing unnecessary power consumption. For example, an infrared sensor, a motion sensor, and the like are installed to detect a user's movement, and when the user determines that the user approaches a certain distance, for example, within a range where the user's hand can touch, the user interface unit 200 wakes up. To interact with the user.

사용자가 이렇게 일정한 거리 이내로 접근하면, 사용자의 기본정보와 날씨, 기온 등의 정보를 조합하여 기본정보 표시부(210)에 메시지를 표시한다. 예를 들어, 기본정보 표시부(210)에 "홍길동 님, 안녕하세요. 오늘은 날씨가 쌀쌀하고 비가 올 예정입니다. 두툼한 옷을 준비하세요" 라는 메시지를 표시할 수 있다. 이러한 메시지는 사용자의 성향, 날씨, 기온 등에 따라 달리 나타날 수 있다. When the user approaches within a predetermined distance, a message is displayed on the basic information display unit 210 by combining the basic information of the user with information such as weather and temperature. For example, the basic information display unit 210 may display a message, "Hong Gil-dong, hello. The weather is cold and it is going to rain today. Prepare thick clothes." Such messages may appear differently depending on the user's disposition, weather, and temperature.

메뉴 표시부(220)는 지능형 옷장을 제어하고 관리하는 여러가지 메뉴를 표시 한다. 예를 들어 클리닝, 관리, 입고/출고와 같은 메뉴를 사용자에게 제공하여 각 항목에 따른 명령을 사용자로부터 입력받는다. 그리고 사용자의 손 움직임 등을 통해 메뉴를 선택받아 선택된 메뉴에 따라 추가적인 정보를 더 표시한다. 그러나, 사용자 인터페이스부는 키패드나 마우스 등과 같은 키 입력부를 추가로 구비하여, 터치 스크린 또는 사용자의 움직임 감지수단을 통한 입력외에 직접 키 입력을 통해 사용자로부터 명령을 입력받을 수도 있다.The menu display unit 220 displays various menus for controlling and managing the intelligent closet. For example, a menu such as cleaning, management, goods receipt / release is provided to the user to receive a command for each item from the user. In addition, the user selects a menu through the user's hand movement and displays additional information according to the selected menu. However, the user interface unit may further include a key input unit such as a keypad or a mouse, and may receive a command from the user through direct key input in addition to an input through a touch screen or a user's motion sensing means.

한편, 부가정보 표시부(230)는 사용자에게 여러가지 추가적인 정보를 제공한다. 예를 들어, 사용자의 성향, 날씨, 행사의 종류, 사용자의 기분 등에 따라 추천의상 정보를 사진, 아이콘 기타 여러가지 방법으로 표시할 수 있다.Meanwhile, the additional information display unit 230 provides various additional information to the user. For example, the recommendation costume information may be displayed by a photo, an icon, or various other methods according to the user's disposition, weather, type of event, and mood of the user.

도 3은 본 발명의 지능형 옷장 관리 장치의 구성도이다.3 is a block diagram of the intelligent closet management apparatus of the present invention.

지능형 옷장 관리 장치는 사용자 인터페이스부(310), 제어부(320), 입출고정보 입력부(330), 네트워크 접속부(340)를 포함한다. 사용자 인터페이스부(310)의 화면 구성과 표시되는 정보는 도 2를 참조하여 전술한 바와 같다. 즉, 사용자에게 관련 메뉴를 제공하고, 사용자의 제스쳐를 인식하여 메뉴를 선택받아, 선택된 메뉴를 표시한다. 메뉴의 선택은 사용자의 화면 터치, 체스쳐 외에도 키패드, 마우스 등을 통한 다양한 사용자 인터페이스를 통해서도 이루어질 수 있다. 표시되는 정보로, 사용자의 기본정보 또는, 날씨 및 기온을 포함하는 환경정보, 사용자에게 제공하는 추천의상 정보 등을 들 수 있다.The intelligent closet management device includes a user interface 310, a controller 320, a warehouse information input unit 330, and a network connection unit 340. The screen configuration of the user interface 310 and the displayed information are as described above with reference to FIG. 2. That is, a menu is provided to a user, a user's gesture is recognized, a menu is selected, and the selected menu is displayed. The menu may be selected through various user interfaces through a keypad, a mouse, etc., in addition to the user's screen touch and chess. The displayed information may include basic information of the user, environmental information including weather and temperature, recommendation clothes information provided to the user, and the like.

또한 사용자 인터페이스부(310)는 적외선 센서 등이 부착되어 사용자가 일정한 거리 이내로 접근하는 것을 감지할 수 있다. 그리고, 사용자와의 인터랙션을 위하여 손짓이나 기타 인체의 움직임을 감지할 수 있는 센서가 부착되어 사용자로부터 여러가지 명령을 입력받을 수 있다. 인체의 움직임은 접촉식의 터치 센서가 사용될 수 있으며, 비접촉식의 센서를 사용하여 직접 사용자 인터페이스부에 접촉하지 않고도 명령을 입력받을 수 있다. 비접촉식인 경우 명령을 입력받는 예에 대해서는 도 4a 내지 도 5를 참조하여 후술한다.In addition, the user interface 310 may be attached to the infrared sensor can detect that the user approaches within a certain distance. In addition, a sensor for detecting a gesture of a hand or other human body is attached to interact with the user and may receive various commands from the user. The touch of the human body may be used as a touch sensor, and a non-contact sensor may be used to receive a command without directly contacting the user interface. An example of receiving a command in the case of a non-contact type will be described later with reference to FIGS. 4A to 5.

입출고정보 입력부(330)는 수납부(120) 또는 재생부(130)에 입출고되는 의류의 입출고 관련정보를 입력받는다. 예를 들어, 의류에 부착된 RFID 또는 바코드를 포함하는 태그로부터 데이터를 읽어 입고 및 출고시간, 상태, 의류 착용 정보 등을 체크하여 제어부(320)로 전달한다. 한편, RFID나 바코드 등을 사용하지 않고도 사용자가 직접 입출고 관련정보를 입력할 수 있다. 예를 들어, 사용자 인터페이스부(310)를 통해 현재 입고하고자 하는 의류에 대한 상세정보 등을 키 입력, 마우스, 터치 스크린, 체스쳐 사용 등의 방법으로 입력할 수 있다. 이러한 입력방법은 입출고정보 입력부(330)의 사용에 보조적인 방법으로 병행하여 이루어지거나 독립적으로 이루어질 수도 있고, 저장된 입출고정보를 추후 편집하거나 수정하는데 사용될 수도 있다.Entrance and exit information input unit 330 receives input and output related information of the clothing input and output to the storage unit 120 or the playback unit 130. For example, the data is read from a tag including an RFID or a barcode attached to the clothing, and checked for the arrival and departure time, the state, the clothing wearing information, and the like, and transmitted to the controller 320. On the other hand, the user can directly enter and exit the relevant information without using RFID or bar code. For example, the user interface unit 310 may input detailed information on the clothing to be currently worn by using a key input method, a mouse, a touch screen, and a chess game. Such an input method may be performed in parallel with or in an independent manner in the use of the warehouse information input unit 330, or may be used to later edit or modify the stored warehouse information.

제어부(320)는 사용자 인터페이스부(310) 및 입출고정보 입력부(330)를 제어하며 입출고된 의류에 대한 상태정보 및 착용이력을 포함하는 통합의류정보를 관리한다. 제어부(320)는 또한, 사용자 인터페이스부(310)를 웨이크-업 시킬지의 여부를 결정하여 그에 따라 사용자 인터페이스부(310)를 제어함으로써 전력소모를 감소시킨다. The controller 320 controls the user interface 310 and the warehouse information input unit 330 and manages the integrated clothing information including the status information and the wearing history of the clothing received and received. The controller 320 also determines whether to wake up the user interface 310 and controls the user interface 310 accordingly to reduce power consumption.

한편, 사용자 인터페이스부(310)의 일면에는 반사수단이 부착되어 있어, 제어부(320)는 이 반사수단을 제어하거나 사용자 인터페이스부(310)의 백라이트를 제어하여 사용자 인터페이스부(310)의 표면의 반사도를 높여 거울과 같은 효과를 만들어 낼 수 있다. 즉, 사용자가 접근하지 않거나 일정시간 동안 인터랙션이 없는 경우에는 사용자 인터페이스부(310)의 전원을 오프하여 거울과 같은 기능을 하도록 제어할 수 있다.Meanwhile, reflecting means is attached to one surface of the user interface 310, and the controller 320 controls the reflecting means or controls the backlight of the user interface 310 to reflect the surface of the user interface 310. You can raise the effect to create a mirror-like effect. That is, when the user does not approach or there is no interaction for a predetermined time, the user interface unit 310 may be controlled to perform a mirror-like function by turning off the power.

이러한 거울 기능 모드 사용의 온/오프는 사용자에 의해 제어될 수 있다. 즉, 사용자가 사용자 인터페이스부(310)의 거울 기능 모드 온/오프를 선택할 수 있도록 하여, 거울 기능 모드가 온인 경우 사용자의 접근을 감지하여 사용자 인터페이스부(310)로부터 사용자가 일정 거리 내에 있다고 감지하면 거울 기능이 동작하고 일정 거리 밖에 있으면 거울 기능이 동작하지 않도록 제어한다. 한편, 거울 기능 모드가 오프인 경우 사용자의 근접 여부를 감지하지 않고, 사용자가 일정 거리 밖에 있어도 거울 기능은 전혀 하지 않도록 제어한다. The on / off of using the mirror function mode can be controlled by the user. That is, when the user can select the mirror function mode on / off of the user interface unit 310 to detect the user's approach when the mirror function mode is on and detects that the user is within a certain distance from the user interface unit 310 If the mirror function is working and is out of a certain distance, the mirror function is controlled to not work. On the other hand, when the mirror function mode is off, it does not detect the proximity of the user, and controls not to perform the mirror function at all even if the user is outside a certain distance.

네트워크 접속부(340)는 유선 또는 무선으로 인터넷에 접속하여 통합의류정보를 송수신할 수 있다. 또한, 인터넷을 통해 사용자로부터 명령을 입력받아 해당 명령에 따른 동작을 수행할 수도 있다.The network connection unit 340 may transmit and receive integrated clothing information by connecting to the Internet by wire or wirelessly. In addition, the user may receive a command from the user through the Internet and perform an operation according to the command.

도 4a 내지 도 4b는 사용자의 손 동작을 인식하여 메뉴를 브라우징하는 과정을 설명하기 위한 참조도이다.4A to 4B are reference diagrams for explaining a process of browsing a menu by recognizing a user's hand gesture.

도 4a를 참조하면, 사용자의 손이 메뉴 표시부의 "관리" 항목 위에 접근하면 해당 메뉴가 하이라이트되어 다른 항목과 구별되어 표시되고, 그 상태에서 무엇인 가를 가져오는 손짓을 하면 해당 항목이 선택되어 도 4b와 같이 다음 메뉴로 이동하여 해당 정보를 사용자에게 제공한다. 도 4a와 같이 "관리" 항목이 선택되면, 기본정보 표시부에, "관리 메뉴를 선택하셨습니다, 다음 메뉴를 선택하세요" 라는 정보를 표시함과 아울러, 관리 메뉴의 하부 메뉴를 메뉴 표시부에 디스플레이한다. 이때 항목을 선택하는 제스쳐로는, 가져오는 손짓외에 여러가지 움직임으로 설정할 수 있다. Referring to FIG. 4A, when a user's hand approaches the "Management" item on the menu display unit, the corresponding menu is highlighted to be distinguished from other items, and when the user makes a gesture to get something in that state, the corresponding item is selected. Move to the next menu as shown in 4b and provide the information to the user. When the item "Management" is selected as shown in FIG. 4A, the basic information display unit displays information "You have selected a management menu, select the next menu" and displays a submenu of the management menu on the menu display unit. At this time, the gesture for selecting an item can be set by various movements in addition to the gestures to be brought.

도 5는 사용자의 손 동작에 따른 메뉴 선택의 일예를 도시한 도면이다.5 is a diagram illustrating an example of menu selection according to a user's hand gesture.

도 5를 참조하면, 하이라이트된 메뉴 위에서 손을 상하로 움직이면 메뉴를 선택하기 위해 하이라이트된 항목을 이동시키는 동작으로 해석할 수 있다. 이러한 동작을 통해 원하는 메뉴를 선택할 수 있다. 그리고 하이라이트된 항목을 선택하는 것으로 손을 우로 흔들거나 불러오는 손짓으로 설정할 수 있다. 또한, 선택된 항목을 취소하거나 전 단계로 되돌아가는 명령은 좌로 손을 움직이는 것으로 설정할 수 있다. 한편 이러한 손짓은 사용자의 편의에 따라 달리 설정할 수 있으며, 손짓외에 여러가지 신체의 움직임을 통해서도 가능하다.Referring to FIG. 5, when a hand is moved up and down on the highlighted menu, it may be interpreted as an operation of moving the highlighted item to select a menu. This action allows you to select the desired menu. You can also select the highlighted item to set your hand to shake or call up. In addition, the command to cancel the selected item or return to the previous step may be set by moving the hand to the left. On the other hand, such gestures can be set differently according to the user's convenience, and can also be performed through various body movements besides gestures.

도 6은 본 발명의 지능형 옷장 관리 방법의 플로우차트이다.6 is a flowchart of the intelligent closet management method of the present invention.

먼저, 의류의 입출고 관련정보를 입력받는다(S610). 입출고 관련 정보는 전술한 바와 같이 RF 태그, 바코드 등 여러가지 수단을 통해 입력받을 수 있다. 입출고 관련 정보는 RF 태그, 바코드 등을 사용하는 입출고정보 입력부(330)를 통한 입력뿐만 아니라, 사용자의 화면 터치, 체스쳐, 키패드, 마우스 등에 의한 사용자 인터페이스부(310)를 통한 직접 입력도 가능하다. 그리고, 입출고된 의류에 대한 상태정보 및 착용이력을 포함하는 통합의류정보를 관리하며, 사용자와의 인터랙션에 따른 관련 정보를 제공한다(S620).First, input and output of clothing information is received (S610). As described above, the entry and exit information may be input through various means such as an RF tag and a barcode. Entry and exit information is not only input through the entry and exit information input unit 330 using the RF tag, bar code, etc., but also directly input through the user interface unit 310 by the user's screen touch, chess, keypad, mouse, and the like. . In addition, it manages the integrated clothing information including the state information and the wearing history of the clothes entered and received, and provides the related information according to the interaction with the user (S620).

보다 구체적으로는 옷장에 부착된 사용자 인터페이스부를 통해, 사용자의 기본정보 또는, 날씨 및 기온을 포함하는 환경정보를 표시하고, 사용자의 제스쳐를 인식하여 메뉴를 선택받고, 그 선택된 메뉴에 따른 세부 정보를 더 표시한다. More specifically, through the user interface unit attached to the closet, the user's basic information or environment information including weather and temperature are displayed, the user's gesture is recognized to select a menu, and detailed information according to the selected menu is displayed. Display more.

한편, 전술한 지능형 옷장 관리 방법은 컴퓨터 프로그램으로 작성 가능하다. 상기 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 상기 프로그램은 컴퓨터가 읽을 수 있는 정보저장매체(computer readable media)에 저장되고, 컴퓨터에 의하여 읽혀지고 실행됨으로써 지능형 옷장 관리 방법을 구현한다. 상기 정보저장매체는 자기 기록매체, 광 기록매체, 및 캐리어 웨이브 매체를 포함한다.On the other hand, the above-described intelligent closet management method can be created by a computer program. The codes and code segments that make up the program can be easily deduced by a computer programmer in the field. In addition, the program is stored in a computer readable media, and read and executed by a computer to implement an intelligent closet management method. The information storage medium includes a magnetic recording medium, an optical recording medium, and a carrier wave medium.

이제까지 본 발명에 대하여 그 바람직한 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.The present invention has been described with reference to the preferred embodiments. It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. Therefore, the disclosed embodiments should be considered in an illustrative rather than a restrictive sense. The scope of the present invention is defined by the appended claims rather than by the foregoing description, and all differences within the scope of equivalents thereof should be construed as being included in the present invention.

전술한 바와 같이 본 발명에 따르면, 지능형 옷장을 사용하여 의류를 보다 효율적으로 관리할 수 있어 코디 정보, 의류이력관리 등을 통합 관리할 수 있으며, 날씨, 행사, 취향에 따라 사용자에게 적절한 옷을 추천할 수도 있어 옷장 이용의 편리성을 도모할 수 있다.As described above, according to the present invention, it is possible to manage clothes more efficiently by using an intelligent wardrobe, thereby managing coordination information, clothing history management, etc., and recommending appropriate clothes to users according to weather, events, and tastes. You can also make it easier to use a closet.

또한, 지능형 옷장을 관리하는 사용자 인터페이스를 접촉 또는 비접촉식 센서를 사용하여 만들고 사용자의 손짓 등의 움직임을 통해 명령을 입력받음으로써 사용의 편의성을 향상시킬 수 있다.In addition, the user interface for managing the intelligent closet can be made by using a contact or contactless sensor, and the user's convenience can be improved by receiving a command through movement of a user's hand.

Claims (11)

사용자에게 제공되는 정보와, 사용자와의 인터랙션을 수행하고 그에 따른 결과를 표시하는 사용자 인터페이스부;A user interface unit for performing the interaction with the user and displaying the information provided to the user and the result thereof; 의류의 입출고 관련정보를 포함하는 통합의류정보를 입력받는 입출고정보 입력부; 및Entry and exit information input unit for receiving the integrated clothing information including the entry and exit information of the clothing; And 상기 사용자 인터페이스부 및 입출고정보 입력부를 제어하며 상기 통합의류정보를 관리하는 제어부를 포함하며,It includes a control unit for controlling the user interface unit and the warehouse information input unit, and manages the integrated clothing information, 상기 제어부는 사용자가 소정 거리 밖에 있을 때는 상기 사용자 인터페이스부에 부착된 반사수단 또는 백라이트를 제어하여 거울로 만들고, 상기 사용자가 소정 거리 이내로 접근하면 상기 사용자 인터페이스부를 웨이크-업 시켜 사용자와 인터랙션하는 메뉴를 디스플레이하도록 제어하는 것을 특징으로 하는 지능형 옷장 관리 장치.The control unit controls the reflecting means or backlight attached to the user interface unit when the user is outside a predetermined distance to make a mirror, and when the user approaches within a predetermined distance to wake up the user interface unit to interact with the user menu Intelligent closet management device, characterized in that the control to display. 제1항에 있어서, 상기 입출고정보 입력부는 According to claim 1, wherein the entry and exit information input unit 상기 의류에 부착된 RFID 또는 바코드를 포함하는 태그로부터 데이터를 읽어 오는 것을 특징으로 하는 지능형 옷장 관리 장치.Intelligent wardrobe management device, characterized in that to read data from the tag including the RFID or barcode attached to the clothing. 제1항에 있어서, 상기 사용자 인터페이스부는The method of claim 1, wherein the user interface unit 사용자에게 메뉴를 제공하고, 상기 사용자의 제스쳐를 인식하여 메뉴를 선택받아, 선택된 메뉴를 표시하는 것을 특징으로 하는 지능형 옷장 관리 장치.And providing a menu to a user, recognizing the user's gesture, selecting a menu, and displaying the selected menu. 제1항에 있어서, 상기 사용자 인터페이스부는The method of claim 1, wherein the user interface unit 상기 사용자의 기본정보 또는, 날씨 및 기온을 포함하는 환경정보를 표시하고, 상기 사용자에게 추천의상을 적어도 하나 디스플레이하는 것을 특징으로 하는 지능형 옷장 관리 장치.And displaying basic information of the user or environment information including weather and temperature, and displaying at least one recommendation outfit to the user. 삭제delete 제1항 내지 제4항 중 어느 한 항에 있어서,5. The method according to any one of claims 1 to 4, 유선 또는 무선을 통해, 상기 통합의류정보를 송수신하거나 사용자로부터의 명령을 수신하는 네트워크 접속부를 더 포함하는 것을 특징으로 하는 지능형 옷장 관리 장치.Intelligent wire closet management device, characterized in that it further comprises a network connection for transmitting and receiving the integrated clothing information or a command from a user through a wire or wireless. 의류를 보관하는 수납부;Receiving unit for storing clothing; 의류에 부착된 불순물을 제거하고 냄새를 제거하거나 항균처리 또는 구김제거를 포함하는 복원가공을 수행하는 재생부; 및A regeneration unit for removing impurities attached to clothes and removing odors or performing restoration processing including antibacterial treatment or wrinkle removal; And 사용자와의 인터랙션에 따라 상기 수납부 또는 재생부에 입고된 의류의 상태또는 이력정보를 표시하고 통합관리하는 지능형 옷장 관리장치를 포함하는 것을 특징으로 하는 지능형 옷장.And an intelligent wardrobe management device for displaying and managing the status or history information of the clothing worn in the storage unit or the reproduction unit according to the interaction with the user. 제7항에 있어서, 상기 재생부는The method of claim 7, wherein the regeneration unit 에어 샤워부를 구비한 공기 공조장치를 사용하여 상기 의류를 클리닝하는 것을 특징으로 하는 지능형 옷장.Intelligent closet, characterized in that for cleaning the garment using an air conditioning unit having an air shower. 제7항에 있어서, 상기 사용자 인터페이스부는The method of claim 7, wherein the user interface unit 사용자에게 메뉴를 제공하고, 상기 사용자의 제스쳐를 인식하여 항목을 선택받아, 선택된 항목을 활성화하며 그에 해당하는 세부 항목을 더 표시하는 것을 특징으로 하는 지능형 옷장.And providing a menu to a user, recognizing the user's gesture, selecting an item, activating the selected item, and displaying a detailed item corresponding thereto. 의류의 입출고 관련정보를 포함하는 통합의류정보를 입력받는 입출고 정보 입력단계; 및A warehouse information input step of receiving the integrated clothing information including the warehouse related information of the clothing; And 상기 통합의류정보를 관리하며, 사용자와의 인터랙션을 수행하고 그에 따른 관련 정보를 제공하는 정보제공단계를 포함하고,And an information providing step of managing the integrated clothing information, performing an interaction with a user, and providing related information accordingly. 상기 정보제공단계는 옷장에 부착된 사용자 인터페이스부를 통해, 사용자가 소정 거리 밖에 있을 때는 상기 사용자 인터페이스부에 부착된 반사수단 또는 백라이트를 제어하여 거울로 만들고, 상기 사용자가 소정 거리 이내로 접근하면 상기 사용자 인터페이스부를 웨이크-업 시켜 사용자와 인터랙션하는 메뉴를 디스플레이하도록 제어하는 것을 특징으로 하는 지능형 옷장 관리 방법.The information providing step is a mirror by controlling a reflecting means or a backlight attached to the user interface unit when the user is outside a predetermined distance through the user interface unit attached to the closet, the user interface when the user approaches within a predetermined distance Intelligent wardrobe management method characterized in that the wake-up control of the wealth control to display a menu interacting with the user. 제10항에 있어서, 상기 정보제공단계는The method of claim 10, wherein the information providing step 상기 옷장에 부착된 사용자 인터페이스부를 통해, 상기 사용자의 기본정보 또는, 날씨 및 기온을 포함하는 환경정보를 표시하고, 상기 사용자의 제스쳐를 인식하여 메뉴를 선택받고, 그 선택된 메뉴에 따른 세부 정보를 더 표시하는 것을 특징으로 하는 지능형 옷장 관리 방법.Through the user interface unit attached to the wardrobe, the basic information of the user or environment information including weather and temperature are displayed, the user's gesture is recognized to select a menu, and the detailed information according to the selected menu is further added. Intelligent wardrobe management method characterized in that the display.
KR1020070065427A 2007-06-29 2007-06-29 A smart closet, a management apparatus and method thereof KR101362376B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070065427A KR101362376B1 (en) 2007-06-29 2007-06-29 A smart closet, a management apparatus and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070065427A KR101362376B1 (en) 2007-06-29 2007-06-29 A smart closet, a management apparatus and method thereof

Publications (2)

Publication Number Publication Date
KR20090001208A KR20090001208A (en) 2009-01-08
KR101362376B1 true KR101362376B1 (en) 2014-02-13

Family

ID=40484310

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070065427A KR101362376B1 (en) 2007-06-29 2007-06-29 A smart closet, a management apparatus and method thereof

Country Status (1)

Country Link
KR (1) KR101362376B1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106617742A (en) * 2016-12-07 2017-05-10 美的智慧家居科技有限公司 Intelligent wardrobe and implementing method thereof
WO2018128292A1 (en) * 2017-01-04 2018-07-12 엘지전자 주식회사 Airport robot and operation method therefor
KR20210101729A (en) 2020-02-11 2021-08-19 유지은 System and method for providing smart dress room service
US11447905B2 (en) 2018-12-31 2022-09-20 Samsung Electronics Co., Ltd. Clothing management apparatus and method for controlling thereof

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101008214B1 (en) * 2010-07-16 2011-01-17 진은규 Apparatus and method for auto providing and returning of operating gown
WO2012071576A2 (en) * 2010-11-24 2012-05-31 Dhiraj Daway System and method for providing wardrobe assistance
CN106570150A (en) * 2016-11-03 2017-04-19 美的智慧家居科技有限公司 Intelligent wardrobe and realization method thereof
CN106527366A (en) * 2016-11-17 2017-03-22 湖北物连网智能用品有限公司 Intelligent furniture control system and method
CN109527819A (en) * 2017-09-21 2019-03-29 深圳大森智能科技有限公司 It is a kind of to realize the method maintained automatically clothing and Intelligent clothes cabinet
CN107713384A (en) * 2017-09-23 2018-02-23 南京律智诚专利技术开发有限公司 A kind of Intelligent clothes cabinet control system
CN108345224A (en) * 2017-12-14 2018-07-31 海尔优家智能科技(北京)有限公司 A kind of device, electronics wardrobe and its implementation for managing wardrobe
CN108741713A (en) * 2018-05-08 2018-11-06 安徽上造智能设备科技有限公司 A kind of Intelligent clothes cabinet device and its control system based on image recognition
CN109164727B (en) * 2018-07-31 2023-05-26 神思(山东)医疗信息技术有限责任公司 Medical self-service wardrobe controlling means that sends out
CN109043862A (en) * 2018-08-01 2018-12-21 江苏捷阳科技股份有限公司 A kind of tele-control system and control method cooperating Intelligent clothes cabinet
CN110399896B (en) * 2019-04-01 2020-08-28 深圳远超智慧生活股份有限公司 Storage management system for clothes cabinet
CN110399954B (en) * 2019-07-29 2023-06-20 青岛海尔科技有限公司 Method and device for determining operation information, storage medium and electronic device

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010070701A (en) * 2001-05-31 2001-07-27 임성광 laundry franchise system
KR20030022253A (en) * 2003-02-25 2003-03-15 주식회사 삼광씨스템 Apparatus and Method for controlling of the electrically powered mobile rack
KR100529217B1 (en) * 2004-08-03 2005-11-17 주식회사 플라즈마트 The functionality door which is installed in a wardrobe

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010070701A (en) * 2001-05-31 2001-07-27 임성광 laundry franchise system
KR20030022253A (en) * 2003-02-25 2003-03-15 주식회사 삼광씨스템 Apparatus and Method for controlling of the electrically powered mobile rack
KR100529217B1 (en) * 2004-08-03 2005-11-17 주식회사 플라즈마트 The functionality door which is installed in a wardrobe

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106617742A (en) * 2016-12-07 2017-05-10 美的智慧家居科技有限公司 Intelligent wardrobe and implementing method thereof
WO2018128292A1 (en) * 2017-01-04 2018-07-12 엘지전자 주식회사 Airport robot and operation method therefor
KR20180080498A (en) * 2017-01-04 2018-07-12 엘지전자 주식회사 Robot for airport and method thereof
US11407116B2 (en) 2017-01-04 2022-08-09 Lg Electronics Inc. Robot and operation method therefor
KR102670610B1 (en) * 2017-01-04 2024-05-31 엘지전자 주식회사 Robot for airport and method thereof
US11447905B2 (en) 2018-12-31 2022-09-20 Samsung Electronics Co., Ltd. Clothing management apparatus and method for controlling thereof
US11718943B2 (en) 2018-12-31 2023-08-08 Samsung Electronics Co., Ltd. Clothing management apparatus and method for controlling thereof
KR20210101729A (en) 2020-02-11 2021-08-19 유지은 System and method for providing smart dress room service

Also Published As

Publication number Publication date
KR20090001208A (en) 2009-01-08

Similar Documents

Publication Publication Date Title
KR101362376B1 (en) A smart closet, a management apparatus and method thereof
CN103534722A (en) Article utilization
KR102070783B1 (en) A laundry treating apparatus, a control method of the laundry treating apparatus that learns user &#39;s course and option patterns through artificial intelligence and recommends customized courses and options, and an online system included of the same
US10260269B2 (en) Water-conducting domestic appliance and method for operating a water-conducting domestic appliance
EP3042506B1 (en) Mobile terminal and method of operating thereof with a washing machine
KR102428782B1 (en) Washer and operation method of the same
US20170321372A1 (en) System, apparatus, and method of handling, storing and managing garments
KR101821818B1 (en) A control method of electric device
EP2575289B1 (en) Electronic apparatus and computer program
KR20180126838A (en) Clothes treating apparatus
CN109298638A (en) Control method, system, intelligent foot pad and the intelligent gateway of smart home
CN109644207A (en) Electrical appliance state identifies device and method
JP2020062691A (en) Inspection device, inspection method, robot device and inspection method and program in robot device
KR102226137B1 (en) A home appliance and a controlling method thereof
JP2010182198A (en) Mobile terminal device, data management system, and program
CN113876988B (en) Method and device for disinfecting clothes and air conditioning equipment
CN111273581B (en) Control method of intelligent wardrobe and related product
US20230272569A1 (en) Clothing management apparatus and method for controlling thereof
CN204690378U (en) Washing machine
KR101083658B1 (en) Self Check-out System with Sterilizing Function for RFID tagged Materials
TWI669159B (en) Washing machine, system and method for cleaning portable accessories or accessories
KR20210101729A (en) System and method for providing smart dress room service
Batra et al. Armoire with Computerized Washing and Airing System
CN106012417A (en) Washing machine and control device and control method thereof
WO2022262605A1 (en) Automatic feeding apparatus for clothing treating agent and method for purchasing clothing treating agent

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170125

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180130

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190130

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20200130

Year of fee payment: 7