CN115206322A - 基于自动感应的智能橱柜及橱柜智能控制方法 - Google Patents

基于自动感应的智能橱柜及橱柜智能控制方法 Download PDF

Info

Publication number
CN115206322A
CN115206322A CN202211119350.0A CN202211119350A CN115206322A CN 115206322 A CN115206322 A CN 115206322A CN 202211119350 A CN202211119350 A CN 202211119350A CN 115206322 A CN115206322 A CN 115206322A
Authority
CN
China
Prior art keywords
intelligent
user
voice
cabinet
gas stove
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211119350.0A
Other languages
English (en)
Inventor
吴传书
朱海滨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Haixin Intelligent Kitchen Co ltd
Original Assignee
Guangdong Haixin Intelligent Kitchen Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Haixin Intelligent Kitchen Co ltd filed Critical Guangdong Haixin Intelligent Kitchen Co ltd
Priority to CN202211119350.0A priority Critical patent/CN115206322A/zh
Publication of CN115206322A publication Critical patent/CN115206322A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47B—TABLES; DESKS; OFFICE FURNITURE; CABINETS; DRAWERS; GENERAL DETAILS OF FURNITURE
    • A47B77/00—Kitchen cabinets
    • A47B77/04—Provision for particular uses of compartments or other parts ; Compartments moving up and down, revolving parts
    • A47B77/08—Provision for particular uses of compartments or other parts ; Compartments moving up and down, revolving parts for incorporating apparatus operated by power, including water power; for incorporating apparatus for cooking, cooling, or laundry purposes
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C15/00—Details
    • F24C15/20—Removing cooking fumes
    • F24C15/2042—Devices for removing cooking fumes structurally associated with a cooking range e.g. downdraft
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24C—DOMESTIC STOVES OR RANGES ; DETAILS OF DOMESTIC STOVES OR RANGES, OF GENERAL APPLICATION
    • F24C3/00—Stoves or ranges for gaseous fuels
    • F24C3/008—Ranges
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B21/00—Measuring arrangements or details thereof, where the measuring technique is not covered by the other groups of this subclass, unspecified or not relevant
    • G01B21/16—Measuring arrangements or details thereof, where the measuring technique is not covered by the other groups of this subclass, unspecified or not relevant for measuring distance of clearance between spaced objects
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B7/00—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00
    • G08B7/06—Signalling systems according to more than one of groups G08B3/00 - G08B6/00; Personal calling systems according to more than one of groups G08B3/00 - G08B6/00 using electric transmission, e.g. involving audible and visible signalling through the use of sound and light sources
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y40/00—IoT characterised by the purpose of the information processing
    • G16Y40/30—Control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47B—TABLES; DESKS; OFFICE FURNITURE; CABINETS; DRAWERS; GENERAL DETAILS OF FURNITURE
    • A47B2220/00—General furniture construction, e.g. fittings
    • A47B2220/0091—Electronic or electric devices
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L2012/2847—Home automation networks characterised by the type of home appliance used
    • H04L2012/285—Generic home appliances, e.g. refrigerators

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Sustainable Development (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Emergency Management (AREA)
  • Medical Informatics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Automation & Control Theory (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请涉及人工智能及物联网技术，提供了基于自动感应的智能橱柜及橱柜智能控制方法，应用于智能橱柜，智能橱柜包括橱柜柜体，设置在橱柜柜体上的智能洗碗机、智能燃气灶及智能抽油烟机，设置在智能抽油烟机上的触控显示屏，设置在触控显示屏上的摄像头，设置在智能抽油烟机上的第一接近传感器，设置在智能洗碗机上的第二接近传感器，和设置在橱柜柜体内的主机。实现了基于多个接近传感器感应用户对智能橱柜的具体使用情况，并自动控制智能橱柜中各厨房家电设备的开启或关闭状态，厨房电器设备在用户需要具体使用时可快速启动及时响应。

Description

基于自动感应的智能橱柜及橱柜智能控制方法
技术领域
本申请涉及物联网设备技术领域，尤其涉及基于自动感应的智能橱柜及橱柜智能控制方法。
背景技术
目前，用户在进厨房并使用橱柜上设置的燃气灶、抽油烟机等设备进行烧菜做饭时，一般都是用户手动开启设备开关，这样会存在一种情况就是例如燃气灶等可以生火的设备若是被未成年用户手动开启设备开关而使用，会导致火灾等危险情况发生，也即现有的厨房电器设备是不能感应到是哪一类用户具体使用。
而且，现有的厨房电器设备都是需要用户具体使用时手动开启，例如用户需要使用燃气灶时则站在燃气灶前并用手旋转燃气灶开关从而点燃燃气灶，同样的抽油烟机也是需要用户点击抽油烟机开关以打开抽烟烟机，不能自动开启并切换至待机状态，这样厨房电器设备在用户需要具体使用时启动响应速度较慢。
发明内容
本申请实施例提供了一种基于自动感应的智能橱柜及橱柜智能控制方法，旨在解决现有技术中厨房电器设备都是需要用户具体使用时手动开启，不能自动开启并切换至待机状态，这样厨房电器设备在用户需要具体使用时启动响应速度较慢的问题。
第一方面，本申请实施例提供了一种基于自动感应的智能橱柜的橱柜智能控制方法，应用于智能橱柜，所述基于自动感应的智能橱柜包括橱柜柜体，设置在所述橱柜柜体上的智能洗碗机、智能燃气灶及智能抽油烟机，设置在所述智能抽油烟机上的触控显示屏，设置在所述触控显示屏上的摄像头，设置在所述智能抽油烟机上的第一接近传感器，设置在所述智能洗碗机上的第二接近传感器，和设置在所述橱柜柜体内的主机，所述基于自动感应的智能橱柜的橱柜智能控制方法包括：
若通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于预设的第一距离阈值且第一持续时间超出预设第一时长阈值时，则启动所述智能抽油烟机与所述触控显示屏；其中，所述第一持续时间为所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于所述第一距离阈值的持续时间；
通过所述触控显示屏上的摄像头采集当前环境图像；
若确定所述当前环境图像存在人脸图像且人脸图像对应的用户身份为白名单用户，则将所述智能燃气灶的状态切换为可点火状态；
若确定所述智能燃气灶的状态切换为已点火状态，通过所述触控显示屏采集当前用户语音，并进行降噪处理得到与所述当前用户语音对应的当前用户语音指令；
获取与所述当前用户语音指令对应的语音数据并播放；
若通过所述第二接近传感器检测到所述智能洗碗机与用户之间的间距小于预设的第二距离阈值时且第二持续时间超出预设第二时长阈值时，则启动所述智能洗碗机；其中，所述第二持续时间为所述第二接近传感器检测到所述智能洗碗机与用户之间的间距小于所述第二距离阈值的持续时间；
若确定所述智能燃气灶的第一工作时长与所述智能洗碗机的第二工作时长的时长总和大于预设的第三时长阈值，则通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的当前间距；
若确定所述当前间距小于或等于所述第一距离阈值，则生成疲劳提示语音并播放。
第二方面，本申请实施例提供了一种基于自动感应的智能橱柜，其橱柜柜体，设置在所述橱柜柜体上的智能洗碗机、智能燃气灶及智能抽油烟机，设置在所述智能抽油烟机上的触控显示屏，设置在所述触控显示屏上的摄像头，设置在所述智能抽油烟机上的第一接近传感器，设置在所述智能洗碗机上的第二接近传感器，和设置在所述橱柜柜体内的主机；所述基于自动感应的智能橱柜用于实现上述第一方面所述的基于自动感应的智能橱柜的橱柜智能控制方法。
第三方面，本申请实施例又提供了一种计算机设备，其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述第一方面所述的基于自动感应的智能橱柜的橱柜智能控制方法。
第四方面，本申请实施例还提供了一种计算机可读存储介质，其中所述计算机可读存储介质存储有计算机程序，所述计算机程序当被处理器执行时使所述处理器执行上述第一方面所述的基于自动感应的智能橱柜的橱柜智能控制方法。
本申请实施例提供了一种基于自动感应的智能橱柜及橱柜智能控制方法，方法包括：若通过第一接近传感器检测到智能抽油烟机与用户之间的间距小于预设的第一距离阈值且第一持续时间超出预设第一时长阈值时，则启动智能抽油烟机与触控显示屏；通过触控显示屏上的摄像头采集当前环境图像；若确定当前环境图像存在人脸图像且人脸图像对应的用户身份为白名单用户，则将智能燃气灶的状态切换为可点火状态；若确定智能燃气灶的状态切换为已点火状态，通过触控显示屏采集当前用户语音，并进行降噪处理得到与当前用户语音对应的当前用户语音指令；获取与当前用户语音指令对应的语音数据并播放；若通过第二接近传感器检测到智能洗碗机与用户之间的间距小于预设的第二距离阈值时且第二持续时间超出预设第二时长阈值时，则启动智能洗碗机；若确定智能燃气灶的第一工作时长与智能洗碗机的第二工作时长的时长总和大于预设的第三时长阈值，则通过第一接近传感器检测到智能抽油烟机与用户之间的当前间距；若确定当前间距小于或等于第一距离阈值，则生成疲劳提示语音并播放。实现了基于多个接近传感器感应用户对智能橱柜的具体使用情况，并自动控制智能橱柜中各厨房家电设备的开启或关闭状态，厨房电器设备在用户需要具体使用时可快速启动及时响应。
附图说明
为了更清楚地说明本申请实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的基于自动感应的智能橱柜的结构示意图；
图2为本申请实施例提供的基于自动感应的智能橱柜的橱柜智能控制方法的流程示意图；
图3为本申请实施例提供的基于自动感应的智能橱柜的示意性框图；
图4为本申请实施例提供的计算机设备的示意性框图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和 “包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解，在本申请说明书和所附权利要求书中使用的术语“和/ 或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
为了更清楚的理解本申请的技术方案，下面对基于自动感应的智能橱柜进行详细介绍。
请同时参阅图1和图3，其中图1为本申请实施例提供的基于自动感应的智能橱柜的结构示意图；图3为本申请实施例提供的基于自动感应的智能橱柜的示意性框图，本申请中的所述基于自动感应的智能橱柜10，其核心结构为橱柜柜体11，其与现有大多数家庭中安装的橱柜相同，例如为L形结构的橱柜柜体11具体包括第一橱柜柜体111和与所述第一橱柜柜体111垂直设置的第二橱柜柜体112。而且，所述第一橱柜柜体111内设置有主机12，所述第一橱柜柜体111上设置有智能燃气灶13及智能抽油烟机14（一般是智能抽油烟机14设置于所述智能燃气灶13的上方），所述智能抽油烟机14上设置有触控显示屏141，所述触控显示屏141上设置有摄像头142。而且还在所述智能抽油烟机14上设置有第一接近传感器143。所述第二橱柜柜体112上设置有冲水槽及固定在所述冲水槽上的智能洗碗机15，且所述智能洗碗机15上还设置有第二接近传感器151。
其中，所述主机12内的主控板上搭载有CPU处理器或MCU处理器等处理器，所述主机12内的主控板上还设置有无线通讯模块（如4G通讯模块、5G通讯模块、Wi-Fi模块、蓝牙模块等）、电源模块等，所述触控显示屏141（可以理解为一个平板电脑，其具有触控功能、显示功能、采集用户声音功能及扬声器功能等），所述智能燃气灶13、智能抽油烟机14、智能洗碗机15、第一接近传感器143及第二接近传感器151与所述主机12连接。
由于在橱柜柜体11上设置了智能燃气灶13、智能抽油烟机14及智能洗碗机15，还设置了触控显示屏141、第一接近传感器143及第二接近传感器151，故该基于自动感应的智能橱柜10出了具备做菜、抽油烟及洗碗功能，而且还能在用户具体使用该基于自动感应的智能橱柜10时能在靠近某一具体设备（如智能抽油烟机14、或智能洗碗机15）时，基于第一接近传感器143或第二接近传感器151的自动感应来启动相应的具体设备，提高整个过程的自动化和智能化程度。
请参阅图2，图2为本申请实施例提供的基于自动感应的智能橱柜的橱柜智能控制方法的流程示意图，该基于自动感应的智能橱柜的橱柜智能控制方法应用于智能橱柜中。
如图2所示，该方法包括步骤S101~S108。
S101、若通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于预设的第一距离阈值且第一持续时间超出预设第一时长阈值时，则启动所述智能抽油烟机与所述触控显示屏；其中，所述第一持续时间为所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于所述第一距离阈值的持续时间。
在本实施例中，是以智能橱柜为执行主体来描述技术方案。若用户进入厨房，并靠近智能抽油烟机上设置的所述第一接近传感器时，一旦所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于预设的第一距离阈值（如将所述第一距离阈值设置为30-50cm区间内任意一个具体距离值），且该第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于预设的第一距离阈值的第一持续时间超过预设第一时长阈值（如将预设第一时长阈值设置为5秒、10秒、20秒、30秒等）时，则表示用户当前停留位置处已靠近智能燃气灶且用户的头部也已靠近所述智能抽油烟机，此时为了便于用户进一步使用所述基于自动感应的智能橱柜，可以自动开启所述智能抽油烟机与所述触控显示屏。由于是基于自动感应而启动智能橱柜，无需用户人工操作去开启智能抽油烟机和设置于其上的触控显示屏。而且，此时未开启所述智能燃气灶，也是为了确保用户的人身安全，只有在用户人工操作去开启智能燃气灶时才能点火开启，否则处于未点火状态。
S102、通过所述触控显示屏上的摄像头采集当前环境图像。
在本实施例中，由于是将所述摄像头集成在了触控显示屏上，也就是无需在橱柜柜体或是其他智能设备上再设置单独的摄像头，充分利用了所述触控显示屏上的摄像头。当所述触控显示屏已经呈启动状态时，所述摄像头是同时启动，从而可以通过所述摄像头采集其正对方向的图像，以得到当前环境图像。
由于所述触控显示屏是设置在所述智能抽油烟机上，还可以在所述触控显示屏上粘贴设置具有防油烟的保护贴膜层（如pet、opp、pvc三种材质的防油贴膜），以确保所述触控显示屏的屏幕不被油烟污染。
S103、若确定所述当前环境图像存在人脸图像且人脸图像对应的用户身份为白名单用户，则将所述智能燃气灶的状态切换为可点火状态。
在本实施例中，由于通过摄像头采集到了当前环境图像，可以将其进一步发送至主机进行是否存在人脸图像的检测。而且在检测到所述当前环境图像存在人脸图像后，可以基于主机中的人脸识别模型和主机本地已预先预录入的白名单用户人脸图像集，还能进一步判断该用户是否是智能橱柜的白名单用户。若该用户是智能橱柜的白名单用户，则表示该用户是能使用该智能橱柜的合法用户。一般将某一家庭内会烧饭做菜的家庭成员的人脸图片预先由摄像头采集并保存为白名单用户人脸图像集，如家庭内的成年成员，如家庭年的未成年成员记为用户A，则用户A的父亲、母亲、爷爷、奶奶、外公、外婆等成年成员的人脸图像则组成白名单用户人脸图像集。
由于只有在白名单内的白名单用户才能成功将所述智能燃气灶的状态切换为可点火状态从而进一步人工操作点燃智能燃气灶，有效避免了不在白名单内的其他用户点燃智能燃气灶（如家庭内的未成年用户）而导致有引发火灾或导致人身伤害的危险情况发生，提高了所述智能燃气灶的使用安全性。而且，白名单用户通过验证后，所述智能燃气灶的状态切换为可点火状态，并未直接点燃，仍是需要用户去进一步人工操作点燃智能燃气灶，实现了根据用户使用需求来点燃智能燃气灶。
在一实施例中，步骤S103包括：
所述摄像头将所述当前环境图像发送至所述主机；
所述主机通过预先存储的目标检测模型获取所述当前环境图像中的人脸检测结果；
若所述人脸检测结果中存在人脸图像区域，通过预先存储的人脸识别模型及预先预录入的白名单用户人脸图像集获取所述人脸图像区域中人脸图像对应的人脸识别结果；
若所述人脸识别结果对应的用户身份为所述白名单用户人脸图像集对应的白名单用户，则将所述智能燃气灶的状态切换为可点火状态。
在本实施例中，当所述智能抽油烟机上的摄像头采集到所述当前环境图像后，其中一种情况是不在所述触控显示屏上进行人脸识别，可以是发送至所述主机，由主机进行人脸识别。具体是先获取主机做预先存储的目标检测模型如YoloV3模型或YoloV5模型等进行人脸存在区域的检测，通过所述目标检测模型可以识别出所述当前环境图像与每一对象对应的预测框，每一对象对应预测框的左上角坐标，每一对象对应的预测框的长宽值，每一对象对应预测框所属分类类别（如属于人脸、电风扇，垃圾桶、饭碗等），以及每一对象对应预测框所属分类类别的置信度（一般某一对象对应预测框所属分类类别的置信度超过70%，则可认为该对象的分类类别是准确可信的）。在基于目标检测模型这一图像识别方式获取到了所述当前环境图像包括的对象后，可进行进一步判断是否有用户进入厨房以待加工做菜。
若所述人脸检测结果中存在人脸图像区域，即所述前环境图像中有一个预测框所属分类类别是人脸且置信度超过70%，则通过主机中预先存储的人脸识别模型提取所述人脸图像区域中人脸图像对应的人脸特征，再将人脸特征与预先预录入的白名单用户人脸图像集中各白名单用户人脸图像的白名单用户人脸特征计算相似度，取其中与人脸特征的相似度超过85%的白名单用户人脸特征所对应的白名单用户人脸图像作为目标人脸图像，最后获取目标人脸图像对应的用户身份信息（如上述示例中用户A的爸爸）与白名单用户人脸图像集对应的白名单用户进行比较，若确定所述人脸识别结果对应的用户身份为所述白名单用户人脸图像集对应的白名单用户则表示是智能橱柜中智能燃气灶的白名单用户，此时可以将所述智能燃气灶的状态切换为可点火状态以等待用户再次人工操作旋转所述智能燃气灶的点火按钮以正常开启所述智能燃气灶。由于之前已预先将所述智能燃气灶的状态切换为可点火状态，使得其处于一种类似于待机开机的状态，而非完全关机的状态，用户在可点火状态下能更快点燃所述智能燃气灶。
S104、若确定所述智能燃气灶的状态切换为已点火状态，通过所述触控显示屏采集当前用户语音，并进行降噪处理得到与所述当前用户语音对应的当前用户语音指令。
在本实施例中，当所述智能燃气灶的状态切换为已点火状态，则表示用户已开始做菜，此时可以基于所述触控显示屏上集成设置的麦克风咪头实时检测用户语音。由于在用户使用所述智能燃气灶和所述智能抽油烟机时会产生较大的设备声音，若不进行降噪处理可能会影响对用户声音采集的准确性。此时可以由触控显示屏利用其自带的降噪模型有效消除所述智能燃气灶和所述智能抽油烟机的设备声音，而只保留用户的声音。而且，在采集到当前用户语音并进行降噪处理后，还能进行语音识别得到语音文本，从而对应转换为当前用户语音指令（如语音指导用户做西红柿炒蛋、播放音乐等当前用户语音指令）。
在一实施例中，步骤S104包括：
获取所述触控显示屏中预先存储的第一反向波形信号和第二反向波形信号；
基于所述第一反向波形信号对所述当前用户语音的智能燃气灶噪音进行消除，并基于所述第二反向波形信号对所述当前用户语音的智能抽油烟机噪音进行消除，得到降噪后用户语音；
通过预先存储的语音识别模型对所述降噪后用户语音进行文本识别，得到与所述当前用户语音对应的当前用户语音指令。
在本实施例中，由于用户使用所述智能燃气灶和所述智能抽油烟机时会产生较大的设备声音，其可以视为一种平稳噪声，故可通过对其叠加反向波形的方式来进行降噪。在得到了降噪后用户语音后，可以从所述触控显示屏中预先存储的语音识别模型（如N-gram模型，也即多元模型等）对所述降噪后用户语音进行文本识别，得到了当前用户语音指令如播放做菜语音、播放XX1的XX2歌曲等。这样用户在使用所述智能燃气灶时，可以听音乐、也可以听做菜的音频引导，从而实现了一种智能化厨房的场景。
在一实施例中，所述基于所述第一反向波形信号对所述当前用户语音的智能燃气灶噪音进行消除，并基于所述第二反向波形信号对所述当前用户语音的智能抽油烟机噪音进行消除，得到降噪后用户语音，包括：
获取所述当前用户语音对应的当前语音信号，将所述当前语音信号与所述第一反向波形信号及所述第二反向波形信号叠加，得到降噪后用户语音。
在本实施例中，例如经过多次试验可以得到智能燃气灶在工作状态时产生的声音波形信号即第一反向波形信号，也能得到智能抽油烟机在工作状态时产生的声音波形信号即第二反向波形信号。在通过所述触控显示屏采集得到了当前用户语音后其对应的声音信号可以与所述第一反向波形信号及所述第二反向波形信号进行叠加，从而有效消除智能燃气灶噪音和智能抽油烟机噪音，最终得到降噪后用户语音。
S105、获取与所述当前用户语音指令对应的语音数据并播放。
在本实施例中，当识别获取到所述当前用户语音指令后，所述触控显示屏对应的平板电脑可以联网下载对应的语音数据，或是在本地搜索已存储的语音数据并进行播放，从而实现了智能厨房场景下，设备与用户的即时互动。
在一实施例中，步骤S105之后还包括：
若确定所述智能燃气灶的状态保持已点火状态、通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距大于或等于所述第一距离阈值且第三持续时间大于预设第三时长阈值时，则生成无人值守报警提示语音并播放；其中，所述第三持续时间为所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距大于或等于所述第一距离阈值的持续时间。
在本实施例中，若此时所述智能燃气灶已呈点火开启状态，此时可以通过所述第一接近传感器实时检测到所述智能抽油烟机与用户之间的间距，若所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距大于或等于所述第一距离阈值且第三持续时间大于预设第三时长阈值时，则表示用户暂时不在所述智能燃气灶前但所述智能燃气灶处于点火开启状态，也即智能燃气灶是无人值守状态。若智能燃气灶的无人值守状态持续时间较长则有可能导致火灾等危险情况发生，此时需要统计获取所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距大于或等于所述第一距离阈值的持续时间也即第三持续时间，在获取到数艘第三持续时间后判断其与预设第三时长阈值（如设置为1分钟、2分钟、5分钟等时长）的大小关系。若所述第三持续时间大于预设第三时长阈值时，则表说所述智能燃气灶处于无人值守状态超时，需要及时生成无人值守报警提示语音并播放，以及时提示用户回到智能燃气灶前进行有人值守，以避免危险情况的发生。
在一实施例中，步骤S105之后还包括：
通过所述触控显示屏上的摄像头采集获取当前用户视频并保存。
在本实施例中，当用户开启了所述智能燃气灶并开始做菜后，可以及时的启动所述触控显示屏上的摄像头以采集获取当前用户视频，从而有效的记录了用户在整个做菜过程中的视频并保存在所述触控显示屏的存储模块中。而且之后用户可以在家庭局域网内由所述触控显示屏发送至其他智能终端上进行分享和转发等操作。其中，所述摄像头采集获取当前用户视频时可以是基于用户语音来控制，例如用户说出录制视频时则启动录制，之后在用户说出停止录制视频时则停止录制并得到一个当前用户视频。
S106、若通过所述第二接近传感器检测到所述智能洗碗机与用户之间的间距小于预设的第二距离阈值时且第二持续时间超出预设第二时长阈值时，则启动所述智能洗碗机；其中，所述第二持续时间为所述第二接近传感器检测到所述智能洗碗机与用户之间的间距小于所述第二距离阈值的持续时间。
在本实施例中，若用户在做完菜吃完饭后需要洗碗时，会靠近智能洗碗机上设置的所述第二接近传感器，一旦所述第二接近传感器检测到所述智能洗碗机与用户之间的间距小于预设的第二距离阈值（如将所述第二距离阈值设置为与所述第一距离阈值相等，也设置为30-50cm区间内任意一个具体距离值），且该第二接近传感器检测到所述智能洗碗机与用户之间的间距小于预设的第二距离阈值的第二持续时间超过预设第二时长阈值（如将预设第二时长阈值设置为与预设第二时长阈值相等，也设置为5秒、10秒、20秒、30秒等）时，则表示用户当前停留位置处已靠近智能洗碗机，此时为了便于用户进一步使用所述基于自动感应的智能橱柜，可以自动开启所述智能洗碗机。由于是基于自动感应而启动智能洗碗机，无需用户人工操作去开启智能洗碗机。
S107、若确定所述智能燃气灶的第一工作时长与所述智能洗碗机的第二工作时长的时长总和大于预设的第三时长阈值，则通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的当前间距。
在本实施例中，当所述智能燃气灶被用户手动开启后，所述主机是可以统计其具体的工作时长也即所述第一工作时长是可以准确得到。同样的，用户使用智能洗碗机进行洗碗时，所述主机也是可以统计其具体的工作时长也即所述第二作时长是可以准确得到。在得到了所述第一工作时长和所述第二工作时长后，将两者求和得到时长总和。若所述时长总和大于预设的第三时长阈值，如将第三时长阈值设置为0.5小时、1小时、1.5小时等时长，则可以及时的通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的当前间距，从而进一步判断用户是否还在继续做菜。
S108、若确定所述当前间距小于或等于所述第一距离阈值，则生成疲劳提示语音并播放。
在本实施例中，当确定所述当前间距小于或等于所述第一距离阈值，则表示用户已持续使用智能燃气灶及智能洗碗机的时长超过第三时长阈值，需要提示用户及时的休息一段时间缓解烧饭做菜及洗碗的疲劳状态。可见，生成疲劳提示语音并播放，可以通过语音提示的方式来及时提示用户。
该方法实现了基于多个接近传感器感应用户对智能橱柜的具体使用情况，并自动控制智能橱柜中各厨房家电设备的开启或关闭状态，厨房电器设备在用户需要具体使用时可快速启动及时响应。
本申请实施例还提供一种基于自动感应的智能橱柜，该基于自动感应的智能橱柜用于执行前述基于自动感应的智能橱柜的橱柜智能控制方法的任一实施例。具体地，请同时参阅图1和图3，图1是本申请实施例提供的基于自动感应的智能橱柜的示意性框图，图3是本申请实施例提供的基于自动感应的智能橱柜的示意性框图。
其中，如图1和图3所示，图1为本申请实施例提供的基于自动感应的智能橱柜的结构示意图；图3为本申请实施例提供的基于自动感应的智能橱柜的示意性框图，本申请中的所述基于自动感应的智能橱柜10，其核心结构为橱柜柜体11，其与现有大多数家庭中安装的橱柜相同，例如为L形结构的橱柜柜体11具体包括第一橱柜柜体111和与所述第一橱柜柜体111垂直设置的第二橱柜柜体112。而且，所述第一橱柜柜体111内设置有主机12，所述第一橱柜柜体111上设置有智能燃气灶13及智能抽油烟机14（一般是智能抽油烟机14设置于所述智能燃气灶13的上方），所述智能抽油烟机14上设置有触控显示屏141，所述触控显示屏141上设置有摄像头142。而且还在所述智能抽油烟机14上设置有第一接近传感器143。所述第二橱柜柜体112上设置有冲水槽及固定在所述冲水槽上的智能洗碗机15，且所述智能洗碗机15上还设置有第二接近传感器151。
其中，所述主机12内的主控板上搭载有CPU处理器或MCU处理器等处理器，所述主机12内的主控板上还设置有无线通讯模块（如4G通讯模块、5G通讯模块、Wi-Fi模块、蓝牙模块等）、电源模块等，所述触控显示屏141（可以理解为一个平板电脑，其具有触控功能、显示功能、采集用户声音功能及扬声器功能等），所述智能燃气灶13、智能抽油烟机14、智能洗碗机15、第一接近传感器143及第二接近传感器151与所述主机12连接。
由于在橱柜柜体11上设置了智能燃气灶13、智能抽油烟机14及智能洗碗机15，还设置了触控显示屏141、第一接近传感器143及第二接近传感器151，故该基于自动感应的智能橱柜10出了具备做菜、抽油烟及洗碗功能，而且还能在用户具体使用该基于自动感应的智能橱柜10时能在靠近某一具体设备（如智能抽油烟机14、或智能洗碗机15）时，基于第一接近传感器143或第二接近传感器151的自动感应来启动相应的具体设备，提高整个过程的自动化和智能化程度。
所述基于自动感应的智能橱柜用于实现基于自动感应的智能橱柜的橱柜智能控制方法时，具体如下：
A1）若通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于预设的第一距离阈值且第一持续时间超出预设第一时长阈值时，则启动所述智能抽油烟机与所述触控显示屏；其中，所述第一持续时间为所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于所述第一距离阈值的持续时间；
A2）通过所述触控显示屏上的摄像头采集当前环境图像；
A3）若确定所述当前环境图像存在人脸图像且人脸图像对应的用户身份为白名单用户，则将所述智能燃气灶的状态切换为可点火状态；
A4）若确定所述智能燃气灶的状态切换为已点火状态，通过所述触控显示屏采集当前用户语音，并进行降噪处理得到与所述当前用户语音对应的当前用户语音指令；
A5）获取与所述当前用户语音指令对应的语音数据并播放；
A6）若通过所述第二接近传感器检测到所述智能洗碗机与用户之间的间距小于预设的第二距离阈值时且第二持续时间超出预设第二时长阈值时，则启动所述智能洗碗机；其中，所述第二持续时间为所述第二接近传感器检测到所述智能洗碗机与用户之间的间距小于所述第二距离阈值的持续时间；
A7）若确定所述智能燃气灶的第一工作时长与所述智能洗碗机的第二工作时长的时长总和大于预设的第三时长阈值，则通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的当前间距；
A8）若确定所述当前间距小于或等于所述第一距离阈值，则生成疲劳提示语音并播放。
在本实施例中，是以智能橱柜为执行主体来描述技术方案。若用户进入厨房，并靠近智能抽油烟机上设置的所述第一接近传感器时，一旦所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于预设的第一距离阈值（如将所述第一距离阈值设置为30-50cm区间内任意一个具体距离值），且该第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于预设的第一距离阈值的第一持续时间超过预设第一时长阈值（如将预设第一时长阈值设置为5秒、10秒、20秒、30秒等）时，则表示用户当前停留位置处已靠近智能燃气灶且用户的头部也已靠近所述智能抽油烟机，此时为了便于用户进一步使用所述基于自动感应的智能橱柜，可以自动开启所述智能抽油烟机与所述触控显示屏。由于是基于自动感应而启动智能橱柜，无需用户人工操作去开启智能抽油烟机和设置于其上的触控显示屏。而且，此时未开启所述智能燃气灶，也是为了确保用户的人身安全，只有在用户人工操作去开启智能燃气灶时才能点火开启，否则处于未点火状态。
由于是将所述摄像头集成在了触控显示屏上，也就是无需在橱柜柜体或是其他智能设备上再设置单独的摄像头，充分利用了所述触控显示屏上的摄像头。当所述触控显示屏已经呈启动状态时，所述摄像头是同时启动，从而可以通过所述摄像头采集其正对方向的图像，以得到当前环境图像。
由于所述触控显示屏是设置在所述智能抽油烟机上，还可以在所述触控显示屏上粘贴设置具有防油烟的保护贴膜层（如pet、opp、pvc三种材质的防油贴膜），以确保所述触控显示屏的屏幕不被油烟污染。
由于通过摄像头采集到了当前环境图像，可以将其进一步发送至主机进行是否存在人脸图像的检测。而且在检测到所述当前环境图像存在人脸图像后，可以基于主机中的人脸识别模型和主机本地已预先预录入的白名单用户人脸图像集，还能进一步判断该用户是否是智能橱柜的白名单用户。若该用户是智能橱柜的白名单用户，则表示该用户是能使用该智能橱柜的合法用户。一般将某一家庭内会烧饭做菜的家庭成员的人脸图片预先由摄像头采集并保存为白名单用户人脸图像集，如家庭内的成年成员，如家庭年的未成年成员记为用户A，则用户A的父亲、母亲、爷爷、奶奶、外公、外婆等成年成员的人脸图像则组成白名单用户人脸图像集。
由于只有在白名单内的白名单用户才能成功将所述智能燃气灶的状态切换为可点火状态从而进一步人工操作点燃智能燃气灶，有效避免了不在白名单内的其他用户点燃智能燃气灶（如家庭内的未成年用户）而导致有引发火灾或导致人身伤害的危险情况发生，提高了所述智能燃气灶的使用安全性。而且，白名单用户通过验证后，所述智能燃气灶的状态切换为可点火状态，并未直接点燃，仍是需要用户去进一步人工操作点燃智能燃气灶，实现了根据用户使用需求来点燃智能燃气灶。
在一实施例中，步骤A3）包括：
所述摄像头将所述当前环境图像发送至所述主机；
所述主机通过预先存储的目标检测模型获取所述当前环境图像中的人脸检测结果；
若所述人脸检测结果中存在人脸图像区域，通过预先存储的人脸识别模型及预先预录入的白名单用户人脸图像集获取所述人脸图像区域中人脸图像对应的人脸识别结果；
若所述人脸识别结果对应的用户身份为所述白名单用户人脸图像集对应的白名单用户，则将所述智能燃气灶的状态切换为可点火状态。
在本实施例中，当所述智能抽油烟机上的摄像头采集到所述当前环境图像后，其中一种情况是不在所述触控显示屏上进行人脸识别，可以是发送至所述主机，由主机进行人脸识别。具体是先获取主机做预先存储的目标检测模型如YoloV3模型或YoloV5模型等进行人脸存在区域的检测，通过所述目标检测模型可以识别出所述当前环境图像与每一对象对应的预测框，每一对象对应预测框的左上角坐标，每一对象对应的预测框的长宽值，每一对象对应预测框所属分类类别（如属于人脸、电风扇，垃圾桶、饭碗等），以及每一对象对应预测框所属分类类别的置信度（一般某一对象对应预测框所属分类类别的置信度超过70%，则可认为该对象的分类类别是准确可信的）。在基于目标检测模型这一图像识别方式获取到了所述当前环境图像包括的对象后，可进行进一步判断是否有用户进入厨房以待加工做菜。
若所述人脸检测结果中存在人脸图像区域，即所述前环境图像中有一个预测框所属分类类别是人脸且置信度超过70%，则通过主机中预先存储的人脸识别模型提取所述人脸图像区域中人脸图像对应的人脸特征，再将人脸特征与预先预录入的白名单用户人脸图像集中各白名单用户人脸图像的白名单用户人脸特征计算相似度，取其中与人脸特征的相似度超过85%的白名单用户人脸特征所对应的白名单用户人脸图像作为目标人脸图像，最后获取目标人脸图像对应的用户身份信息（如上述示例中用户A的爸爸）与白名单用户人脸图像集对应的白名单用户进行比较，若确定所述人脸识别结果对应的用户身份为所述白名单用户人脸图像集对应的白名单用户则表示是智能橱柜中智能燃气灶的白名单用户，此时可以将所述智能燃气灶的状态切换为可点火状态以等待用户再次人工操作旋转所述智能燃气灶的点火按钮以正常开启所述智能燃气灶。由于之前已预先将所述智能燃气灶的状态切换为可点火状态，使得其处于一种类似于待机开机的状态，而非完全关机的状态，用户在可点火状态下能更快点燃所述智能燃气灶。
当所述智能燃气灶的状态切换为已点火状态，则表示用户已开始做菜，此时可以基于所述触控显示屏上集成设置的麦克风咪头实时检测用户语音。由于在用户使用所述智能燃气灶和所述智能抽油烟机时会产生较大的设备声音，若不进行降噪处理可能会影响对用户声音采集的准确性。此时可以由触控显示屏利用其自带的降噪模型有效消除所述智能燃气灶和所述智能抽油烟机的设备声音，而只保留用户的声音。而且，在采集到当前用户语音并进行降噪处理后，还能进行语音识别得到语音文本，从而对应转换为当前用户语音指令（如语音指导用户做西红柿炒蛋、播放音乐等当前用户语音指令）。
在一实施例中，步骤A4)包括：
获取所述触控显示屏中预先存储的第一反向波形信号和第二反向波形信号；
基于所述第一反向波形信号对所述当前用户语音的智能燃气灶噪音进行消除，并基于所述第二反向波形信号对所述当前用户语音的智能抽油烟机噪音进行消除，得到降噪后用户语音；
通过预先存储的语音识别模型对所述降噪后用户语音进行文本识别，得到与所述当前用户语音对应的当前用户语音指令。
在本实施例中，由于用户使用所述智能燃气灶和所述智能抽油烟机时会产生较大的设备声音，其可以视为一种平稳噪声，故可通过对其叠加反向波形的方式来进行降噪。在得到了降噪后用户语音后，可以从所述触控显示屏中预先存储的语音识别模型（如N-gram模型，也即多元模型等）对所述降噪后用户语音进行文本识别，得到了当前用户语音指令如播放做菜语音、播放XX1的XX2歌曲等。这样用户在使用所述智能燃气灶时，可以听音乐、也可以听做菜的音频引导，从而实现了一种智能化厨房的场景。
在一实施例中，所述基于所述第一反向波形信号对所述当前用户语音的智能燃气灶噪音进行消除，并基于所述第二反向波形信号对所述当前用户语音的智能抽油烟机噪音进行消除，得到降噪后用户语音，包括：
获取所述当前用户语音对应的当前语音信号，将所述当前语音信号与所述第一反向波形信号及所述第二反向波形信号叠加，得到降噪后用户语音。
在本实施例中，例如经过多次试验可以得到智能燃气灶在工作状态时产生的声音波形信号即第一反向波形信号，也能得到智能抽油烟机在工作状态时产生的声音波形信号即第二反向波形信号。在通过所述触控显示屏采集得到了当前用户语音后其对应的声音信号可以与所述第一反向波形信号及所述第二反向波形信号进行叠加，从而有效消除智能燃气灶噪音和智能抽油烟机噪音，最终得到降噪后用户语音。
当识别获取到所述当前用户语音指令后，所述触控显示屏对应的平板电脑可以联网下载对应的语音数据，或是在本地搜索已存储的语音数据并进行播放，从而实现了智能厨房场景下，设备与用户的即时互动。
在一实施例中，步骤A5）还包括：
若确定所述智能燃气灶的状态保持已点火状态、通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距大于或等于所述第一距离阈值且第三持续时间大于预设第三时长阈值时，则生成无人值守报警提示语音并播放；其中，所述第三持续时间为所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距大于或等于所述第一距离阈值的持续时间。
在本实施例中，若此时所述智能燃气灶已呈点火开启状态，此时可以通过所述第一接近传感器实时检测到所述智能抽油烟机与用户之间的间距，若所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距大于或等于所述第一距离阈值且第三持续时间大于预设第三时长阈值时，则表示用户暂时不在所述智能燃气灶前但所述智能燃气灶处于点火开启状态，也即智能燃气灶是无人值守状态。若智能燃气灶的无人值守状态持续时间较长则有可能导致火灾等危险情况发生，此时需要统计获取所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距大于或等于所述第一距离阈值的持续时间也即第三持续时间，在获取到数艘第三持续时间后判断其与预设第三时长阈值（如设置为1分钟、2分钟、5分钟等时长）的大小关系。若所述第三持续时间大于预设第三时长阈值时，则表说所述智能燃气灶处于无人值守状态超时，需要及时生成无人值守报警提示语音并播放，以及时提示用户回到智能燃气灶前进行有人值守，以避免危险情况的发生。
在一实施例中，步骤A5）还包括：
通过所述触控显示屏上的摄像头采集获取当前用户视频并保存。
在本实施例中，当用户开启了所述智能燃气灶并开始做菜后，可以及时的启动所述触控显示屏上的摄像头以采集获取当前用户视频，从而有效的记录了用户在整个做菜过程中的视频并保存在所述触控显示屏的存储模块中。而且之后用户可以在家庭局域网内由所述触控显示屏发送至其他智能终端上进行分享和转发等操作。其中，所述摄像头采集获取当前用户视频时可以是基于用户语音来控制，例如用户说出录制视频时则启动录制，之后在用户说出停止录制视频时则停止录制并得到一个当前用户视频。
若用户在做完菜吃完饭后需要洗碗时，会靠近智能洗碗机上设置的所述第二接近传感器，一旦所述第二接近传感器检测到所述智能洗碗机与用户之间的间距小于预设的第二距离阈值（如将所述第二距离阈值设置为与所述第一距离阈值相等，也设置为30-50cm区间内任意一个具体距离值），且该第二接近传感器检测到所述智能洗碗机与用户之间的间距小于预设的第二距离阈值的第二持续时间超过预设第二时长阈值（如将预设第二时长阈值设置为与预设第二时长阈值相等，也设置为5秒、10秒、20秒、30秒等）时，则表示用户当前停留位置处已靠近智能洗碗机，此时为了便于用户进一步使用所述基于自动感应的智能橱柜，可以自动开启所述智能洗碗机。由于是基于自动感应而启动智能洗碗机，无需用户人工操作去开启智能洗碗机。
当所述智能燃气灶被用户手动开启后，所述主机是可以统计其具体的工作时长也即所述第一工作时长是可以准确得到。同样的，用户使用智能洗碗机进行洗碗时，所述主机也是可以统计其具体的工作时长也即所述第二作时长是可以准确得到。在得到了所述第一工作时长和所述第二工作时长后，将两者求和得到时长总和。若所述时长总和大于预设的第三时长阈值，如将第三时长阈值设置为0.5小时、1小时、1.5小时等时长，则可以及时的通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的当前间距，从而进一步判断用户是否还在继续做菜。
当确定所述当前间距小于或等于所述第一距离阈值，则表示用户已持续使用智能燃气灶及智能洗碗机的时长超过第三时长阈值，需要提示用户及时的休息一段时间缓解烧饭做菜及洗碗的疲劳状态。可见，生成疲劳提示语音并播放，可以通过语音提示的方式来及时提示用户。
该基于自动感应的智能橱柜实现了基于多个接近传感器感应用户对智能橱柜的具体使用情况，并自动控制智能橱柜中各厨房家电设备的开启或关闭状态，厨房电器设备在用户需要具体使用时可快速启动及时响应。
上述基于自动感应的智能橱柜可以实现为计算机程序的形式，该计算机程序可以在如图4所示的计算机设备上运行。
请参阅图4，图4是本申请实施例提供的计算机设备的示意性框图。参阅图4，该计算机设备500包括通过装置总线501连接的处理器502、存储器和网络接口505，其中，存储器可以包括存储介质503和内存储器504。
该存储介质503可存储操作***5031和计算机程序5032。该计算机程序5032被执行时，可使得处理器502执行基于自动感应的智能橱柜的橱柜智能控制方法。
该处理器502用于提供计算和控制能力，支撑整个计算机设备500的运行。
该内存储器504为存储介质503中的计算机程序5032的运行提供环境，该计算机程序5032被处理器502执行时，可使得处理器502执行基于自动感应的智能橱柜的橱柜智能控制方法。
该网络接口505用于进行网络通信，如提供数据信息的传输等。本领域技术人员可以理解，图4中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备500的限定，具体的计算机设备500可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
其中，所述处理器502用于运行存储在存储器中的计算机程序5032，以实现本申请实施例公开的基于自动感应的智能橱柜的橱柜智能控制方法。
本领域技术人员可以理解，图4中示出的计算机设备的实施例并不构成对计算机设备具体构成的限定，在其他实施例中，计算机设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。例如，在一些实施例中，计算机设备可以仅包括存储器及处理器，在这样的实施例中，存储器及处理器的结构及功能与图4所示实施例一致，在此不再赘述。
应当理解，在本申请实施例中，处理器502可以是中央处理单元 (CentralProcessing Unit，CPU)，该处理器502还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路 (Application Specific IntegratedCircuit，ASIC)、现成可编程门阵列 (Field-Programmable Gate Array，FPGA) 或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
在本申请的另一实施例中提供计算机可读存储介质。该计算机可读存储介质可以为非易失性的计算机可读存储介质，也可以为易失性的计算机可读存储介质。该计算机可读存储介质存储有计算机程序，其中计算机程序被处理器执行时实现本申请实施例公开的基于自动感应的智能橱柜的橱柜智能控制方法。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的设备、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
在本申请所提供的几个实施例中，应该理解到，所揭露的设备、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为逻辑功能划分，实际实现时可以有另外的划分方式，也可以将具有相同功能的单元集合成一个单元，例如多个单元或组件可以结合或者可以集成到另一个装置，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本申请实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备 ( 可以是个人计算机，后台服务器，或者网络设备等 ) 执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U 盘、移动硬盘、只读存储器 (ROM，Read-OnlyMemory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种基于自动感应的智能橱柜的橱柜智能控制方法，应用于智能橱柜，其特征在于，所述基于自动感应的智能橱柜包括橱柜柜体，设置在所述橱柜柜体上的智能洗碗机、智能燃气灶及智能抽油烟机，设置在所述智能抽油烟机上的触控显示屏，设置在所述触控显示屏上的摄像头，设置在所述智能抽油烟机上的第一接近传感器，设置在所述智能洗碗机上的第二接近传感器，和设置在所述橱柜柜体内的主机；所述方法包括：
若通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于预设的第一距离阈值且第一持续时间超出预设第一时长阈值时，则启动所述智能抽油烟机与所述触控显示屏；其中，所述第一持续时间为所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距小于所述第一距离阈值的持续时间；
通过所述触控显示屏上的摄像头采集当前环境图像；
若确定所述当前环境图像存在人脸图像且人脸图像对应的用户身份为白名单用户，则将所述智能燃气灶的状态切换为可点火状态；
若确定所述智能燃气灶的状态切换为已点火状态，通过所述触控显示屏采集当前用户语音，并进行降噪处理得到与所述当前用户语音对应的当前用户语音指令；
获取与所述当前用户语音指令对应的语音数据并播放；
若通过所述第二接近传感器检测到所述智能洗碗机与用户之间的间距小于预设的第二距离阈值时且第二持续时间超出预设第二时长阈值时，则启动所述智能洗碗机；其中，所述第二持续时间为所述第二接近传感器检测到所述智能洗碗机与用户之间的间距小于所述第二距离阈值的持续时间；
若确定所述智能燃气灶的第一工作时长与所述智能洗碗机的第二工作时长的时长总和大于预设的第三时长阈值，则通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的当前间距；
若确定所述当前间距小于或等于所述第一距离阈值，则生成疲劳提示语音并播放。
2.根据权利要求1所述的方法，其特征在于，所述若确定所述当前环境图像存在人脸图像且人脸图像对应的用户身份为白名单用户，则将所述智能燃气灶的状态切换为可点火状态，包括：
所述摄像头将所述当前环境图像发送至所述主机；
所述主机通过预先存储的目标检测模型获取所述当前环境图像中的人脸检测结果；
若所述人脸检测结果中存在人脸图像区域，通过预先存储的人脸识别模型及预先预录入的白名单用户人脸图像集获取所述人脸图像区域中人脸图像对应的人脸识别结果；
若所述人脸识别结果对应的用户身份为所述白名单用户人脸图像集对应的白名单用户，则将所述智能燃气灶的状态切换为可点火状态。
3.根据权利要求1所述的方法，其特征在于，所述通过所述触控显示屏采集当前用户语音，并进行降噪处理得到与所述当前用户语音对应的当前用户语音指令，包括：
获取所述触控显示屏中预先存储的第一反向波形信号和第二反向波形信号；
基于所述第一反向波形信号对所述当前用户语音的智能燃气灶噪音进行消除，并基于所述第二反向波形信号对所述当前用户语音的智能抽油烟机噪音进行消除，得到降噪后用户语音；
通过预先存储的语音识别模型对所述降噪后用户语音进行文本识别，得到与所述当前用户语音对应的当前用户语音指令。
4.根据权利要求3所述的方法，其特征在于，所述基于所述第一反向波形信号对所述当前用户语音的智能燃气灶噪音进行消除，并基于所述第二反向波形信号对所述当前用户语音的智能抽油烟机噪音进行消除，得到降噪后用户语音，包括：
获取所述当前用户语音对应的当前语音信号，将所述当前语音信号与所述第一反向波形信号及所述第二反向波形信号叠加，得到降噪后用户语音。
5.根据权利要求1所述的方法，其特征在于，所述获取与所述当前用户语音指令对应的语音数据并播放之后，还包括：
若确定所述智能燃气灶的状态保持已点火状态、通过所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距大于或等于所述第一距离阈值且第三持续时间大于预设第三时长阈值时，则生成无人值守报警提示语音并播放；其中，所述第三持续时间为所述第一接近传感器检测到所述智能抽油烟机与用户之间的间距大于或等于所述第一距离阈值的持续时间。
6.根据权利要求1所述的方法，其特征在于，所述获取与所述当前用户语音指令对应的语音数据并播放之后，还包括：
通过所述触控显示屏上的摄像头采集获取当前用户视频并保存。
7.一种基于自动感应的智能橱柜，其特征在于，包括橱柜柜体，设置在所述橱柜柜体上的智能洗碗机、智能燃气灶及智能抽油烟机，设置在所述智能抽油烟机上的触控显示屏，设置在所述触控显示屏上的摄像头，设置在所述智能抽油烟机上的第一接近传感器，设置在所述智能洗碗机上的第二接近传感器，和设置在所述橱柜柜体内的主机；所述基于自动感应的智能橱柜用于实现如权利要求1至6中任一项所述的基于自动感应的智能橱柜的橱柜智能控制方法。
8.根据权利要求7所述的基于自动感应的智能橱柜，其特征在于，所述橱柜柜体包括第一橱柜柜体和与所述第一橱柜柜体垂直设置的第二橱柜柜体，所述第一橱柜柜体内设置有主机，所述第一橱柜柜体上设置有智能燃气灶及智能抽油烟机。
9.一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至6中任一项所述的基于自动感应的智能橱柜的橱柜智能控制方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序当被处理器执行时使所述处理器执行如权利要求1至6任一项所述的基于自动感应的智能橱柜的橱柜智能控制方法。
CN202211119350.0A 2022-09-15 2022-09-15 基于自动感应的智能橱柜及橱柜智能控制方法 Pending CN115206322A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211119350.0A CN115206322A (zh) 2022-09-15 2022-09-15 基于自动感应的智能橱柜及橱柜智能控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211119350.0A CN115206322A (zh) 2022-09-15 2022-09-15 基于自动感应的智能橱柜及橱柜智能控制方法

Publications (1)

Publication Number Publication Date
CN115206322A true CN115206322A (zh) 2022-10-18

Family

ID=83573167

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211119350.0A Pending CN115206322A (zh) 2022-09-15 2022-09-15 基于自动感应的智能橱柜及橱柜智能控制方法

Country Status (1)

Country Link
CN (1) CN115206322A (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105627384A (zh) * 2016-03-21 2016-06-01 黄一宸 一种基于生物识别的燃气灶
CN208312488U (zh) * 2018-04-26 2019-01-01 志邦家居股份有限公司 一种具有语音交互功能的智能吸油烟机
CN109346066A (zh) * 2018-09-26 2019-02-15 珠海格力电器股份有限公司 一种语音降噪的方法及装置
CN111881775A (zh) * 2020-07-07 2020-11-03 烽火通信科技股份有限公司 一种人脸实时识别方法和装置
CN112149557A (zh) * 2020-09-22 2020-12-29 福州大学 一种基于人脸识别的人物身份跟踪方法及***
US20210164663A1 (en) * 2019-11-29 2021-06-03 Lg Electronics Inc. Integrated management method and system for kitchen environment using artificial intelligence
CN214098159U (zh) * 2020-11-17 2021-08-31 华帝股份有限公司 一种厨电设备的控制***
CN113587150A (zh) * 2021-07-15 2021-11-02 Tcl家用电器（中山）有限公司 集成灶锁定方法、装置、存储介质及集成灶
CN114429653A (zh) * 2020-10-29 2022-05-03 中车株洲电力机车研究所有限公司 一种人脸识别优化方法及其装置
CN114747951A (zh) * 2020-12-29 2022-07-15 珠海优特智厨科技有限公司 烹饪控制方法及装置、存储介质、烹饪设备

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105627384A (zh) * 2016-03-21 2016-06-01 黄一宸 一种基于生物识别的燃气灶
CN208312488U (zh) * 2018-04-26 2019-01-01 志邦家居股份有限公司 一种具有语音交互功能的智能吸油烟机
CN109346066A (zh) * 2018-09-26 2019-02-15 珠海格力电器股份有限公司 一种语音降噪的方法及装置
US20210164663A1 (en) * 2019-11-29 2021-06-03 Lg Electronics Inc. Integrated management method and system for kitchen environment using artificial intelligence
CN111881775A (zh) * 2020-07-07 2020-11-03 烽火通信科技股份有限公司 一种人脸实时识别方法和装置
CN112149557A (zh) * 2020-09-22 2020-12-29 福州大学 一种基于人脸识别的人物身份跟踪方法及***
CN114429653A (zh) * 2020-10-29 2022-05-03 中车株洲电力机车研究所有限公司 一种人脸识别优化方法及其装置
CN214098159U (zh) * 2020-11-17 2021-08-31 华帝股份有限公司 一种厨电设备的控制***
CN114747951A (zh) * 2020-12-29 2022-07-15 珠海优特智厨科技有限公司 烹饪控制方法及装置、存储介质、烹饪设备
CN113587150A (zh) * 2021-07-15 2021-11-02 Tcl家用电器（中山）有限公司 集成灶锁定方法、装置、存储介质及集成灶

Similar Documents

Publication Publication Date Title
US9386140B2 (en) Methods and apparatus notifying a user of the operating condition of a remotely located household appliance
US9159217B1 (en) Methods and apparatus notifying a remotely located user of the operating condition of a household appliance
CN108231079A (zh) 用于控制电子设备的方法、装置、设备以及计算机可读存储介质
CN109974235B (zh) 控制家电设备的方法、装置和家电设备
CN108679658B (zh) 溢出检测方法、装置、电子设备和智能家电
CN105581570B (zh) 浴室的控制***、方法和浴室镜
US10161674B2 (en) Method for controlling a refrigerator and refrigerator
CN116030812B (zh) 用于燃气灶的智能互联语音控制方法、装置、设备及介质
KR20200005741A (ko) 검출된 이벤트들에 관한 정보를 제공하기 위한 방법들, 시스템들 및 매체들
CN112579873A (zh) 烹饪食谱推荐方法、装置、存储介质及电子设备
CN111860218A (zh) 预警方法和装置、存储介质及电子装置
JP6152853B2 (ja) 制御方法及びプログラム
CN113028597B (zh) 语音的控制方法及装置
Moncrieff et al. Multi-modal emotive computing in a smart house environment
CN110989390A (zh) 智能家居的控制方法及装置
CN115206322A (zh) 基于自动感应的智能橱柜及橱柜智能控制方法
JP4631501B2 (ja) 宅内システム
CN111237815B (zh) 智能灶具控制方法、装置、电子设备及存储介质
CN111308929B (zh) 控制厨具进入烹饪托管模式的方法及装置、厨房控制***
JP6989683B2 (ja) 音声制御調理器具プラットフォーム
CN110848759B (zh) 加热设备防干烧的控制方法、装置、加热设备及存储介质
KR20230047434A (ko) 어시스턴트 디바이스(들)의 주변 감지에 기초한 어시스턴트 액션(들) 추론하기
CN112948782A (zh) 一种基于网络的集成灶安全控制方法和集成灶
CN112053530A (zh) 居住环境安全监测方法、装置及电子设备
CN110401775A (zh) 一种闹钟设定方法、闹钟设定装置及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20221018