CN106844614A - 一种户型图功能区域快速识别*** - Google Patents

一种户型图功能区域快速识别*** Download PDF

Info

Publication number
CN106844614A
CN106844614A CN201710036469.4A CN201710036469A CN106844614A CN 106844614 A CN106844614 A CN 106844614A CN 201710036469 A CN201710036469 A CN 201710036469A CN 106844614 A CN106844614 A CN 106844614A
Authority
CN
China
Prior art keywords
floor plan
image
functional area
functional
system module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710036469.4A
Other languages
English (en)
Inventor
曹冬
孙哲南
谭铁牛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin Zhongke Intelligent Identification Industry Technology Research Institute Co Ltd
Original Assignee
Tianjin Zhongke Intelligent Identification Industry Technology Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin Zhongke Intelligent Identification Industry Technology Research Institute Co Ltd filed Critical Tianjin Zhongke Intelligent Identification Industry Technology Research Institute Co Ltd
Priority to CN201710036469.4A priority Critical patent/CN106844614A/zh
Publication of CN106844614A publication Critical patent/CN106844614A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/22—Matching criteria, e.g. proximity measures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Library & Information Science (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Biophysics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Evolutionary Biology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种户型图功能区域快速识别***，包括图像处理***模块100、图像识别检测***模块200和户型图云服务***模块300，其中，图像识别检测***模块与图像处理***模块相连接，户型图云服务***模块，与图像识别检测***模块相连接。本发明公开的一种户型图功能区域快速识别***，其可以可靠、快速地识别户型图中具有的功能区域图像信息，满足人们对户型图的功能信息进行检索的需求，进而提高人们的工作和生活品质，有利于广泛地推广应用，具有重大的生产实践意义。

Description

一种户型图功能区域快速识别***
技术领域
本发明涉及图像处理领域、图像识别领域、户型图识别领域、数据库云计算等技术领域，特别是涉及一种户型图功能区域快速识别***。
背景技术
目前，随着人类科学技术的不断发展，深度学习(Deep Learning)正在成为机器学习领域的一个新兴领域。近几年，有关深度学习的应用越来越广，已经涉及到语音识别、图像识别、自然语言处理等领域。深度学习并将继续影响到机器学习和人工智能的其它关键领域。
如今在人工智能和大数据云计算这两个领域中，首先深度学习的出现带来了众多领域的变革，以往许多所不能解决的问题如无人驾驶都已经成为现实，图像功能区域识别检测领域也不例外，深度学习已经在向图像识别检测领域迈进，另外大数据云计算也同样为其他各领域提供了各种实现的可能。
伴随着图片成为互联网中的主要载体，难题随之出现，当信息由文字记载时，目前，人们可以通过关键词搜索，轻易找到所需要的内容并进行任意的编辑，而当信息是由图片进行记载时，例如拿户型图来表示住房的信息时，现有的技术就很难对户型图中的功能信息进行检索，即很难对户型图中卧室、客厅、卫生间、厨房等各功能区域的功能信息进行检索，从而影响了用户等从图片信息中找到关键内容的效率，虽然如户型图这样的图像带来了快捷的信息记录和分享方式，但是却降低了人们进行信息检索的效率，无法满足人们对户型图中各功能区域的信息进行检索的需求。
因此，目前迫切需要开发出一种技术，其可以可靠、快速地识别户型图中具有的功能区域图像，满足人们对户型图的功能信息进行检索的需求，进而提高人们的工作和生活品质。
发明内容
有鉴于此，本发明的目的是提供一种户型图功能区域快速识别***，其可以可靠、快速地识别户型图中具有的功能区域图像信息，满足人们对户型图的功能信息进行检索的需求，进而提高人们的工作和生活品质，有利于广泛地推广应用，具有重大的生产实践意义。
为此，本发明提供了一种户型图功能区域快速识别***，包括：
图像处理***模块，用于接收外部图像采集设备所采集的需要识别的户型图图像，然后对该户型图图像进行清晰度判断操作，当其清晰度不符合预设条件时，执行预处理操作，并将经过预处理操作的所述户型图图像发送给图像识别检测***模块，而当其清晰度符合预设条件时，直接将其发送给图像识别检测***模块；
图像识别检测***模块，与图像处理***模块相连接，用于接收所述图像处理***模块发来的所述户型图图像，并提取和识别出每个功能区域上均标有功能类别的所述户型图图像，然后发送给户型图云服务***模块；
户型图云服务***模块，与图像识别检测***模块相连接，用于存储预设的户型图数据库，并在接收到所述图像识别检测***模块发来的每个功能区域上均标有功能类别的所述户型图图像，将所述户型图图像内具有的每个功能区域图像上标记的功能类别分别与所述户型图数据库中预先存储的多个户型图图像内具有的每个功能区域图像上预先标记的功能类别进行相似度对比匹配，当匹配筛选出每个功能区域图像上预先标记的功能类别的相似度均大于预设值的一个或者多个户型图图像时，判断所述户型图图像内具有的每个功能区域图像上标记的功能类别标记准确，然后将每个功能区域上均标有功能类别的所述户型图图像发送给用户。
其中，所述户型图数据库预先存储在云端服务器中，所述户型图数据库包括多个户型图图像和每个户型图图像内具有的每个功能区域图像以及它们之间的对应关系，并且每个所述功能区域图像上预先标记有功能类别。
其中，在所述图像处理***模块中，所述预处理操作为光照补偿操作。
其中，所述图像识别检测***模块包括神经网络建立子模块、神经网络训练子模块和户型图图像检测识别子模块，其中：
神经网络建立子模块，用于建立预设深度卷积神经网络，所述预设深度卷积神经网络包括依次对所述图像处理***模块发来的所述户型图图像进行处理的输入层、第一层隐藏层、第二层隐藏层、第三层隐藏层、第四层隐藏层和输出层；
神经网络训练子模块，与神经网络建立子模块相连接，用于预先采集多个预设标准的户型图图像输入到所述预设深度卷积神经网络中，对所述预设深度卷积神经网络进行训练，直到使得所述预设深度卷积神经网络的模型收敛，完成所述预设深度卷积神经网络的训练；
图像检测识别子模块，分别与图像处理***模块和神经网络训练子模块相连接，用于将所述图像处理***模块发来的所述户型图图像，输入到所述神经网络训练子模块完成训练的所述预设深度卷积神经网络中，识别获得所述户型图图像内具有的每个功能区域图像以及每个功能区域图像对应的功能类别数据特征，同时将所述多个功能类别数据特征输入到所述输出层的预设分类器中分别进行功能类别分类，然后根据功能类别分类结果，在所述户型图图像内具有的每个功能区域图像上标记功能类别，从而获得每个功能区域上均标有功能类别的所述户型图图像。
其中，所述户型图云服务***模块包括户型图数据库存储子模块和功能区域对比匹配输出子模块，其中：
户型图数据库存储子模块，用于预先存储户型图数据库，所述户型图数据库包括多个户型图图像和每个户型图图像内具有的每个功能区域图像以及它们之间的对应关系，并且每个所述功能区域图像上预先标记有功能类别；
功能区域对比匹配输出子模块，分别与图像识别检测***模块和户型图数据库存储子模块相连接，用于接收所述图像识别检测***模块发来的所述户型图图像中具有的全部预设功能区域图像信息，并将其与所述户型图数据库中预先存储的每个户型图图像具有的全部预设功能区域图像信息进行对比匹配，根据对比匹配结果，筛选出对应的所述户型图数据库中的一个或者多个户型图图像，然后发送给用户。
其中，所述户型图云服务***模块还包括户型图更新子模块，该户型图更新子模块与功能区域对比匹配输出子模块相连接，用于从所述功能区域对比匹配输出子模块中获取每个功能区域上均标有功能类别的所述户型图图像，并发送给所述户型图数据库存储子模块进行存储。
其中，所述户型图云服务***模块为云端服务器。
由以上本发明提供的技术方案可见，与现有技术相比较，本发明提供了一种户型图功能区域快速识别***，其可以可靠、快速地识别户型图具有的功能区域图像信息，满足人们对户型图的功能信息进行检索的需求，进而提高人们的工作和生活品质，有利于广泛地推广应用，具有重大的生产实践意义。
附图说明
图1为本发明提供的一种户型图功能区域快速识别***的结构方框图
图2为在具体实施例中，待检测的一个户型图图像的示意图；
图3为在具体实施例中，经过本发明提供的一种户型图功能区域快速识别***进行识别后的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面结合附图和实施方式对本发明作进一步的详细说明。
图1为本发明提供的一种户型图功能区域快速识别***的结构方框图。
参见图1，本发明提供的一种户型图功能区域快速识别***，包括图像处理***模块100、图像识别检测***模块200和户型图云服务***模块300，其中：
图像处理***模块100，用于接收外部图像采集设备(例如手机或者计算机)所采集的需要识别的户型图图像，然后对该户型图图像进行清晰度判断操作，当其清晰度不符合预设条件时，执行预处理操作，并将经过预处理操作的所述户型图图像发送给图像识别检测***模块200，而当其清晰度符合预设条件时，直接将其发送给图像识别检测***模块200；
图像识别检测***模块200，其作为深度学习的***模块，与图像处理***模块100相连接，用于接收所述图像处理***模块100发来的所述户型图图像，并提取和识别出每个功能区域上均标有功能类别的所述户型图图像(该功能区域可以包括卧室、客厅、卫生间、厨房、窗户等各种功能区域，该功能类别可以包括卧室功能、客厅功能、卫生间功能、厨房功能、窗户功能等各种功能类别)，然后发送给户型图云服务***模块300；
户型图云服务***模块300，与图像识别检测***模块200相连接，用于存储预设的户型图数据库，并在接收到所述图像识别检测***模块200发来的每个功能区域上均标有功能类别的所述户型图图像，将所述户型图图像内具有的每个功能区域图像上标记的功能类别分别与所述户型图数据库中预先存储的多个户型图图像内具有的每个功能区域图像上预先标记的功能类别进行相似度对比匹配，当匹配筛选出每个功能区域图像上预先标记的功能类别的相似度均大于预设值(例如为98％)的一个或者多个户型图图像时，判断所述户型图图像内具有的每个功能区域图像上标记的功能类别标记准确(这即为识别的结果)，然后将每个功能区域上均标有功能类别的所述户型图图像发送给用户(例如直接发送给用户的手机、平板电脑等移动终端)。
其中，所述户型图数据库优选为预先存储在云端服务器中，所述户型图数据库包括多个(优选为海量)户型图图像和每个户型图图像内具有的每个功能区域图像以及它们之间的对应关系(即映射关系，例如一一对应关系或者一对多的关系)，并且每个所述功能区域图像上预先标记有功能类别。
在本发明中，所述外部图像采集设备可以为任意一种具有图像采集并传输功能的设备，例如手机和平板电脑等移动终端或者计算机PC。
在本发明中，在所述图像处理***模块100中，所述预处理操作优选为光照补偿操作，因此，通过光照补偿来提高外部图像采集设备(例如手机或者计算机)所采集的需要识别的户型图图像的质量，使得户型图图像的辨识度提高，且具有较高的清晰度，最后再把预处理后的图像传送到图像识别检测***模块200，在图像识别检测***模块200中进行识别与特征提取。
在本发明中，需要说明的是，所述图像处理***模块100主要通过拉布拉斯能量方法等现有的图像清晰度检测方法，来估计判断所述户型图图像的清晰度(拉布拉斯能量方法具体通过图片的诶的能量梯度分布来估计判断图像的清晰度)。
具体实现上，所述预设条件可以根据用户的需要预先进行任意设定。例如，当所述图像处理***模块100通过拉布拉斯能量方法来判断户型图图像的清晰度时，所述预设条件可以为预设的图像的拉布拉斯能量阈值，即根据预设的图像的拉布拉斯能量阈值进行判断，当外部图像采集设备所采集的的户型图图像的拉布拉斯能量值高于此阈值时，判断为清晰图像，否则判断为模糊图像则再进行预处理操作。
在本发明中，对于所述图像识别检测***模块200，其包括神经网络建立子模块、神经网络训练子模块和户型图图像检测识别子模块，这三个子模块分别进行深度卷积神经网络各层的建立过程、深度卷积神经网络的训练过程和户型图图像的检测识别过程的处理操作，其中：
神经网络建立子模块，用于建立预设深度卷积神经网络(Convolutional NeuralNetwork，CNN)，所述预设深度卷积神经网络包括依次对所述图像处理***模块100发来的所述户型图图像进行处理的输入层、第一层隐藏层、第二层隐藏层、第三层隐藏层、第四层隐藏层和输出层；
神经网络训练子模块，与神经网络建立子模块相连接，用于预先采集多个预设标准的户型图图像(例如用户指定的尺寸大小的户型图图像)输入到所述预设深度卷积神经网络中，对所述预设深度卷积神经网络进行训练，直到使得所述预设深度卷积神经网络的模型收敛，完成所述预设深度卷积神经网络的训练；
图像检测识别子模块，分别与图像处理***模块100和神经网络训练子模块相连接，用于将所述图像处理***模块100发来的所述户型图图像，输入到所述神经网络训练子模块完成训练的所述预设深度卷积神经网络中，识别获得所述户型图图像内具有的每个功能区域图像以及每个功能区域图像对应的功能类别数据特征(具体表现为深度卷积特征)，同时将所述多个功能类别数据特征输入到所述输出层的预设分类器(具体为softmax分类器)中分别进行功能类别分类，然后根据功能类别分类结果，在所述户型图图像内具有的每个功能区域图像上标记功能类别，从而获得每个功能区域上均标有功能类别的所述户型图图像。
在本发明中，需要说明的是，每个功能区域图像对应的功能类别数据特征，是指每个功能区域图像信息在所述预设深度卷积神经网络中所学习到的图像的卷积特征，此特征包含了每个功能区域图像的像素特征和结构边缘等响应的特征，为抽象特征，用于表征不同功能区域图像所对应的不同功能类别。
在本发明中，具体实现上，所述功能类别分类可以具体包括：卧室功能、客厅功能、厨房功能、客厅功能、餐厅功能、卫生间功能等多种功能类别分类。
对于本发明，首先通过神经网络建立子模块来设计本本发明***的预设深度卷积神经网络结构，之后在神经网络训练子模块中利用前一个模块(即神经网络建立子模块)设定好的预设深度卷积神经网络模型来进行户型图图像的训练，进而提取相应的图像特征，得到含有相应各功能区域对应的功能类别数据特征的模型，最后利用神经网络训练子模块得到的模型，在图像检测识别子模块中实现对要检测的户型图图像的检测与识别。
在本发明中，需要说明的是，首先，神经网络建立子模块只是用于预设深度卷积神经网络的构建，在神经网络训练子模块中，是通过所述神经网络建立子模块标定好的含有相应各个功能信息(即功能类别数据特征)的各个功能区域的数据，来用于神经网络建立子模块建立的模型进行训练与特征提取，得到最终检测识别用的、完成训练的预设深度卷积神经网络模型，然后在图像检测识别子模块中利用训练好的预设深度卷积神经网络模型对待检测的户型图图像进行检测，得到检测结果图像。
在本发明中，具体实现上，需要说明的是，对于神经网络建立子模块，所述预设卷积神经网络为基于当前主流深度学习检测器faster rcnn改进的深度卷积网络，本发明从需要训练大量的户型图数据和时间效率两方面的因素考虑，充分利用当前主流检测网络(具体为faster rcnn的区域建议网络RPN结构)，并设计了输入层、中间四层卷积隐藏层和输出层。首先，本发明充分利用了RPN网络结构特点，对图像在每个位置同时预测目标边界和目标损失得分，并利用端到端的训练方式，来达到高质量的区域建议框检测；另外，本发明的网络输入层用于输入多个预设标准的户型图图像的节点(data)信息，第一层隐藏层包含有128个输入值为户型图图像内功能区域图像对应的功能类别数据特征(具体表现为深度卷积特征，通过人工预先设定)的节点(或者其他预设多个)，第二层包含有输入值为功能区域图像对应的功能类别数据特征的节点数为64个(或者其他预设多个)，第三层包含有输入值为功能区域图像对应的功能类别数据特征的节点数为32个(或者其他预设多个)，第四层隐藏层包含有输入值为功能区域图像对应的功能类别数据特征的节点数为16个(或者其他预设多个)，输出层包含有16个输出值为户型图图像内功能区域图像对应的功能类别数据特征的节点。
需要说明的是，在本发明的预设深度卷积神经网络中，各节点采用人工计算的方式设定相应的数学模型和相关参数，在输入层中各节点设定的输入值为所需相应的户型图各功能区域对应的功能类别数据特征，四个隐藏层还有最后的输出层中对应节点的输入值分别为上一层输出的户型图图像中区域功能图像对应的功能类别数据特征值，另外每层都设置好相应的权值参数ω和偏置参数κ，各层之间的输入和输出关系表示为：y＝ωx+κ，在公式中，x表示输入神经元，y表示输出神经元，w为权重，κ为偏置。
另外，在本发明建立的预设深度卷积神经网络中，可以利用softmax分类器做输出层，来进行最后户型图图像具有的每个功能区域图像对应的功能类别数据特征的识别与功能分类，从而实现对户型图图像内多个功能区域的分类。
在本发明中，具体实现上，分类器的作用是根据前面预设深度卷积神经网络提取的特征，对所述户型图图像具有的每个功能区域图像对应的功能类别数据特征进行功能类别分类。具体实现上，本发明可以采用softmax分类器。所述户型图图像具有的每个功能区域图像对应的功能类别数据特征可以根据用户的需要在本发明的***中预先设置，所述功能类别可以包括客厅功能、卧室功能、厨房功能、卫生间功能和阳台功能等功能类别，当然，根据具体户型的不同，还可以增加其他的类别，例如储藏室功能类别。
对于softmax分类器，其可以计算不同类别的深度卷积特征的概率分布，根据不同概率分布来判断户型图图像中每个功能区域图像的类别。具体的操作过程是前一层的输出是一系特征值，通过将这些特征值乘以不同的权重然后进行归一化处理，即可得到不同功能区域图像的概率分布。
在本发明中，具体实现上，对于神经网络训练子模块，其采用优化的误差反向传播BP算法进行对预设深度卷积神经网络的训练，首先在训练之前，通过设定阈值和权值，使阈值和权值进行从-1到1范围内的随机初始化，在数据拟合时，本发明利用Sigmoid双余弦正切函数作为激励函数，把它放到中间层输出之后，来保证输出节点的值能在(0，1)这个范围内，另外，本发明可以通过设置一个损失函数loss来判断误差，损失函数的计算公式为：
其中，Y0为预设深度卷积神经网络的预测输出，而Ytrue为对应的标定输出，当最后的标定输出Ytrue与预测输出Y0相差很远时，这时对应的损失函数loss就会很大，预设深度卷积神经网络就会进行误差反传来更新网络的模型参数，当预设深度卷积神经网络每训练一次，对应的各层的权值参数ω和偏置参数κ就会更新一次，进而使最后的标定输出Ytrue与预测输出Y0差值越来越小，当预设深度卷积神经网络经过多次训练后，这时loss就会小于一定阈值，预设深度卷积神经网络中止训练，此时的训练过程结束，完成所述预设深度卷积神经网络的训练。
在本发明中，具体实现上，对于图像检测识别子模块，其基于神经网络训练子模块训练好的所述预设深度卷积神经网络，来对经过所述图像处理***模块100预处理的所述户型图图像或者未预处理而直接发来的所述户型图图像进行检测，识别获得所述户型图图像内具有的每个功能区域图像以及每个功能区域图像对应的功能类别数据特征(具体表现为深度卷积特征)，同时将所述多个功能类别数据特征输入到所述输出层的softmax分类器中进行分别进行功能类别分类，然后根据功能类别分类结果，在所述户型图图像内具有的每个功能区域图像上标记功能类别，从而获得每个功能区域上均标有功能类别的所述户型图图像，最终得到每个户型图图像具有的各功能区域图像的功能信息的分类与识别结果，即可以识别获得每个户型图图像的功能信息(也就是说，根据每个功能区域上标记的功能类别，就可以获知每个户型图包含的功能情况以及具体内部各功能区域的功能情况)。
需要说明的是，对于本发明，图像识别检测***模块200的作用过程包括神经网络各层的建立过程、神经网络训练过程和图像检测识别过程，本发明可以通过采用优化的误差反向传播(BP)算法来加快训练过程的收敛速度，进而避免因训练大量的样本而陷入局部极小的情况。
在本发明中，对于所述户型图云服务***模块300，其包括户型图数据库存储子模块和功能区域对比匹配输出子模块，其中：
户型图数据库存储子模块，用于预先存储户型图数据库(优选为预先存储在云端服务器中)，所述户型图数据库包括多个(优选为海量)户型图图像和每个户型图图像内具有的每个功能区域图像以及它们之间的对应关系(即映射关系，例如一一对应关系或者一对多的关系)，并且每个所述功能区域图像上预先标记有功能类别。
功能区域对比匹配输出子模块，分别与图像识别检测***模块200和户型图数据库存储子模块相连接，用于接收所述图像识别检测***模块200发来的所述户型图图像中具有的全部预设功能区域图像信息，并将其与所述户型图数据库中预先存储的每个户型图图像具有的全部预设功能区域图像信息进行对比匹配，根据对比匹配结果，筛选出对应的所述户型图数据库中的一个或者多个户型图图像(即为匹配后获得的识别结果和检索结果)，然后发送给用户(例如直接发送给用户的手机、平板电脑等移动终端)。
需要说明的是，对于本发明，具体实现上，可以预先在云端服务器中建立户型图数据库，所述户型图数据库包括多个(优选为海量)户型图图像和每个户型图图像中全部预设功能区域图像信息以及它们之间的对应关系(即映射关系，例如一一对应关系或者一对多的关系)。然后，通过功能区域对比匹配输出子模块把所需要进行对比匹配的所述图像识别检测***模块200发来的所述户型图图像中具有的每个功能区域图像上标记的功能类别，分别与所述户型图数据库中预先存储的多个户型图图像内具有的每个功能区域图像上预先标记的功能类别进行相似度对比匹配，当匹配筛选出每个预设功能区域的相似度均大于预设数值(例如为98％)的一个或者多个户型图图像(即为匹配后获得的识别结果和检索结果)时，判断所述户型图图像内具有的每个功能区域图像上标记的功能类别标记准确(这即为识别的结果)，然后将每个功能区域上均标有功能类别的所述户型图图像发送给用户(例如直接发送给用户的手机、平板电脑等移动终端)。
对于本发明，具体实现上，本发明提供的户型图功能区域快速识别***中，对于所述户型图云服务***模块300，其还包括户型图更新子模块，该户型图更新子模块与功能区域对比匹配输出子模块相连接，用于从所述功能区域对比匹配输出子模块中获取每个功能区域上均标有功能类别的所述户型图图像，并发送给所述户型图数据库存储子模块进行存储(即作为新的户型图图像，实现数据同步存储)。
因此，本发明提供的户型图功能区域快速识别***中，可以让户型图功能区域快速识别***又具有自我学习的功能，能够把刚刚进行图像检索识别的户型图图像进行学习，并把学习到的新的户型图图像添加到云端服务器中存储的户型图数据库中。
需要说明的是，对于本发明，户型图云服务***模块300可以对图像识别检测***模块200传来的户型图图像中具有的全部功能区域图像进行分析与比对，本发明的户型图数据库中涵盖了海量的户型图数据，从而能够实时有效对传来的户型图图像信息进行筛选与比对分析，同时具有自我学习、自我管理、并能接受来自大量移动端请求的功能，进行及时有效地对用户采集输入的户型图图像进行功能信息检索，在户型图数据库中识别检索获得与所输入的户型图图像内每个功能区域上标记的功能类别相匹配的一个或者多个户型图图像，因此，本发明可以可靠、快速地识别户型图中具有的功能区域图像信息，满足人们对户型图的功能信息进行检索的需求。
对于本发明提供的一种户型图功能区域快速识别***，其为用户进行服务的整体流程如下：
首先，需要详细了解户型图各功能区域功能信息的用户可以根据自己的情况，选择是在计算机PC端还是在移动端来采集并传送户型图图像到本发明提供的户型图功能区域快速识别***中；
然后，对于本发明提供的户型图功能区域快速识别***，其中的图像处理***模块100在接收到用户传来的户型图图像后，首先会对户型图图像的清晰程度进行判断，若传来的户型图图像的清晰程度符合预设条件，则直接传送到图像识别检测***模块200中以进行功能区域图像特征(即功能区域图像信息)的提取与识别，而如果传来的户型图图像的辨识度比较差，清晰程度不符合预设条件，则先将户型图图像进行预处理操作，主要是对图像进行光照补偿操作，通过光照补偿来提高户型图图像的质量，然后把经过预处理操作后的户型图图像传送到图像识别检测***模块200；
然后，图像识别检测***模块200在接收到图像处理***模块100传来的户型图图像信息后，利用本发明已经优化训练好的户型图检测神经网络模型进行检测，此模型是基于当前主流深度学习检测器faster rcnn设计的高质量快速提取图像特征的深度卷积神经网络模型；
然后，在图像识别检测***模块200，在检测并输出每个功能区域上标记有功能类别的户型图图像后，图像识别检测***模块200会将检测的结果送到户型图云服务***模块300进行进一步的筛选与比对分析；
然后，户型图云服务***模块300在接收到图像识别检测***模块200传来的户型图功能区域识别结果后，首先从预设的云端的户型图数据库***中进行各种户型图功能区域的索引；
然后，在户型图图像数据索引后，然后将索引的数据与图像识别检测***模块20的识别检测的户型图各功能区域的结果进行筛选与比对，来进一步提升整个***的识别的准确率，最后把户型图功能区域识别检测的结果反馈给用户。同时，户型图云服务***模块300又具有自我学习的功能，会把刚刚识别的新的户型图各功能区域的图像信息添加到云端数据库中进行更新与存储。
如图2、图3所示，根据本发明提供的基于深度学习的户型图功能区域快速识别***，其所检测的户型图图像在复杂多样的功能下，仍然可以鲁邦地达到户型图各功能区域检测识别的目的，准确标记出各个功能区域的功能类别其中，图2为待检测的户型图图像，图3为本发明基于深度学习的户型图功能区域快速识别***的检测结果示意图。
因此，基于以上技术方案可知，本发明包括以下的有益效果：
首先，本发明解决了现有技术难以对图片的功能信息进行检索，和用户从户型图信息中寻找各部分功能区域信息效率低的问题；
其次，创新性地加入深度学习的模块，充分利用深度卷积神经网络对图像高效率的特征提取与识别的优势，通过设计深度卷积网路模型，有效地分析提取所需展示给用户的户型图各功能区域的图像特征信息；
再次，本发明同时利用大数据云计算技术进行辅助，对提取出来了功能特征信息进行进一步的筛选比对，来增加识别的准确率，并实时地将检测结果反馈给用户；
最后，本发明提供的基于深度学***台，可以使售房的服务人员轻松有效地向购房用户展示售房信息，同时，本发明还可以在移动端或PC端上有效地向购房用户推送清晰的户型图功能区域信息展示，使用户可以直观地了解到购房信息；此外，本方明可以通过通讯设施与户型图云服务***模块完成数据交互；同时具有自我学习、自我管理、并能接受来自大量移动端请求的功能，能够及时有效地将户型图功能区域的识别结果反馈给用户。
在本发明中，具体实现上，所述图像处理***模块100和图像识别检测***模块200可以为中央处理器CPU、数字信号处理器DSP或者单片机MCU，或者为云端服务器。
在本发明中，具体实现上，所述户型图云服务***模块300可以为云端服务器，由云端服务器的数据存储器(例如硬盘)来预先存储所述户型图数据库。
综上所述，与现有技术相比较，本发明提供了一种户型图功能区域快速识别***，其可以可靠、快速地识别户型图中具有的功能区域图像信息，满足人们对户型图的功能信息进行检索的需求，进而提高人们的工作和生活品质，有利于广泛地推广应用，具有重大的生产实践意义。
通过使用本发明提供的技术，可以使得人们工作和生活的便利性得到很大的提高，极大地提高了人们的生活水平。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (7)

1.一种户型图功能区域快速识别***，其特征在于，包括：
图像处理***模块，用于接收外部图像采集设备所采集的需要识别的户型图图像，然后对该户型图图像进行清晰度判断操作，当其清晰度不符合预设条件时，执行预处理操作，并将经过预处理操作的所述户型图图像发送给图像识别检测***模块，而当其清晰度符合预设条件时，直接将其发送给图像识别检测***模块；
图像识别检测***模块，与图像处理***模块相连接，用于接收所述图像处理***模块发来的所述户型图图像，并提取和识别出每个功能区域上均标有功能类别的所述户型图图像，然后发送给户型图云服务***模块；
户型图云服务***模块，与图像识别检测***模块相连接，用于存储预设的户型图数据库，并在接收到所述图像识别检测***模块发来的每个功能区域上均标有功能类别的所述户型图图像，将所述户型图图像内具有的每个功能区域图像上标记的功能类别分别与所述户型图数据库中预先存储的多个户型图图像内具有的每个功能区域图像上预先标记的功能类别进行相似度对比匹配，当匹配筛选出每个功能区域图像上预先标记的功能类别的相似度均大于预设值的一个或者多个户型图图像时，判断所述户型图图像内具有的每个功能区域图像上标记的功能类别标记准确，然后将每个功能区域上均标有功能类别的所述户型图图像发送给用户。
2.如权利要求1所述的户型图功能区域快速识别***，其特征在于，所述户型图数据库预先存储在云端服务器中，所述户型图数据库包括多个户型图图像和每个户型图图像内具有的每个功能区域图像以及它们之间的对应关系，并且每个所述功能区域图像上预先标记有功能类别。
3.如权利要求1所述的户型图功能区域快速识别***，其特征在于，在所述图像处理***模块中，所述预处理操作为光照补偿操作。
4.如权利要求1所述的户型图功能区域快速识别***，其特征在于，所述图像识别检测***模块包括神经网络建立子模块、神经网络训练子模块和户型图图像检测识别子模块，其中：
神经网络建立子模块，用于建立预设深度卷积神经网络，所述预设深度卷积神经网络包括依次对所述图像处理***模块发来的所述户型图图像进行处理的输入层、第一层隐藏层、第二层隐藏层、第三层隐藏层、第四层隐藏层和输出层；
神经网络训练子模块，与神经网络建立子模块相连接，用于预先采集多个预设标准的户型图图像输入到所述预设深度卷积神经网络中，对所述预设深度卷积神经网络进行训练，直到使得所述预设深度卷积神经网络的模型收敛，完成所述预设深度卷积神经网络的训练；
图像检测识别子模块，分别与图像处理***模块和神经网络训练子模块相连接，用于将所述图像处理***模块发来的所述户型图图像，输入到所述神经网络训练子模块完成训练的所述预设深度卷积神经网络中，识别获得所述户型图图像内具有的每个功能区域图像以及每个功能区域图像对应的功能类别数据特征，同时将所述多个功能类别数据特征输入到所述输出层的预设分类器中分别进行功能类别分类，然后根据功能类别分类结果，在所述户型图图像内具有的每个功能区域图像上标记功能类别，从而获得每个功能区域上均标有功能类别的所述户型图图像。
5.如权利要求1至4中任一项所述的户型图功能区域快速识别***，其特征在于，所述户型图云服务***模块包括户型图数据库存储子模块和功能区域对比匹配输出子模块，其中：
户型图数据库存储子模块，用于预先存储户型图数据库，所述户型图数据库包括多个户型图图像和每个户型图图像内具有的每个功能区域图像以及它们之间的对应关系，并且每个所述功能区域图像上预先标记有功能类别；
功能区域对比匹配输出子模块，分别与图像识别检测***模块和户型图数据库存储子模块相连接，用于接收所述图像识别检测***模块发来的所述户型图图像中具有的全部预设功能区域图像信息，并将其与所述户型图数据库中预先存储的每个户型图图像具有的全部预设功能区域图像信息进行对比匹配，根据对比匹配结果，筛选出对应的所述户型图数据库中的一个或者多个户型图图像，然后发送给用户。
6.如权利要求5所述的户型图功能区域快速识别***，其特征在于，所述户型图云服务***模块还包括户型图更新子模块，该户型图更新子模块与功能区域对比匹配输出子模块相连接，用于从所述功能区域对比匹配输出子模块中获取每个功能区域上均标有功能类别的所述户型图图像，并发送给所述户型图数据库存储子模块进行存储。
7.如权利要求1所述的户型图功能区域快速识别***，其特征在于，所述户型图云服务***模块为云端服务器。
CN201710036469.4A 2017-01-18 2017-01-18 一种户型图功能区域快速识别*** Pending CN106844614A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710036469.4A CN106844614A (zh) 2017-01-18 2017-01-18 一种户型图功能区域快速识别***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710036469.4A CN106844614A (zh) 2017-01-18 2017-01-18 一种户型图功能区域快速识别***

Publications (1)

Publication Number Publication Date
CN106844614A true CN106844614A (zh) 2017-06-13

Family

ID=59124445

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710036469.4A Pending CN106844614A (zh) 2017-01-18 2017-01-18 一种户型图功能区域快速识别***

Country Status (1)

Country Link
CN (1) CN106844614A (zh)

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107545306A (zh) * 2017-07-05 2018-01-05 安徽奇智科技有限公司 一种基于云计算的大数据分析平台
CN108009598A (zh) * 2017-12-27 2018-05-08 北京诸葛找房信息技术有限公司 基于深度学习的户型图识别方法
CN108268748A (zh) * 2018-04-26 2018-07-10 南京信息工程大学 一种基于机器学习的住宅户型图电气设计方法
CN108764022A (zh) * 2018-04-04 2018-11-06 链家网（北京）科技有限公司 一种图像识别方法及***
CN108984765A (zh) * 2018-07-20 2018-12-11 我要家网络科技有限公司 一种基于智能图像分析的户型图找房方法
CN109711443A (zh) * 2018-12-14 2019-05-03 平安城市建设科技(深圳)有限公司 基于神经网络的户型图识别方法、装置、设备及存储介质
CN109740506A (zh) * 2018-12-29 2019-05-10 广东三维家信息科技有限公司 一种户型图像识别方法及装置
CN109993797A (zh) * 2019-04-04 2019-07-09 广东三维家信息科技有限公司 门窗位置检测方法及装置
CN110059690A (zh) * 2019-03-28 2019-07-26 广州智方信息科技有限公司 基于深度卷积神经网络的户型图语义自动分析方法及***
CN110059750A (zh) * 2019-04-17 2019-07-26 广东三维家信息科技有限公司 户型形状识别方法、装置和设备
CN110059721A (zh) * 2019-03-16 2019-07-26 平安城市建设科技(深圳)有限公司 户型图区域识别方法、装置、设备及计算机可读存储介质
CN110111426A (zh) * 2019-04-18 2019-08-09 贝壳技术有限公司 一种动静分离格局房屋的确定方法和装置
CN110197225A (zh) * 2019-05-28 2019-09-03 广东三维家信息科技有限公司 基于深度学习的户型空间匹配方法和***
CN110390153A (zh) * 2019-07-15 2019-10-29 贝壳技术有限公司 户型结构改造方案的生成方法、装置以及设备、存储介质
CN110390304A (zh) * 2019-07-24 2019-10-29 广东南方数码科技股份有限公司 自动分类方法、装置、电子设备及存储介质
CN110443895A (zh) * 2019-06-27 2019-11-12 贝壳技术有限公司 房屋照明方案生成方法和装置
CN110728235A (zh) * 2019-10-11 2020-01-24 广东三维家信息科技有限公司 户型区域标记方法及装置
CN110826627A (zh) * 2019-11-06 2020-02-21 广东三维家信息科技有限公司 图像相似度测量方法、装置及电子设备
CN111291649A (zh) * 2020-01-20 2020-06-16 广东三维家信息科技有限公司 图像识别方法、装置及电子设备
CN111400519A (zh) * 2019-12-05 2020-07-10 江苏艾佳家居用品有限公司 一种高效的定制化海量相似户型搜索方法
CN111798340A (zh) * 2020-06-24 2020-10-20 北京字节跳动网络技术有限公司 户型图标识方法、装置和电子设备
CN112116613A (zh) * 2020-09-25 2020-12-22 贝壳技术有限公司 模型训练方法、图像分割方法、图像矢量化方法及其***
CN114554503A (zh) * 2020-11-24 2022-05-27 中移物联网有限公司 一种组网信息确认方法、装置及用户设备
CN115529201A (zh) * 2022-05-31 2022-12-27 青岛海尔智能家电科技有限公司 基于数字孪生的生成家庭环境全景图的方法及***、装置、服务器、存储介质
CN116206325A (zh) * 2023-02-14 2023-06-02 南京艾小宝智能科技有限公司 一种户型图的识别***及其方法
CN116311325A (zh) * 2023-02-16 2023-06-23 江苏艾佳家居用品有限公司 一种基于人工智能模型的比例尺自动识别***

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101571875A (zh) * 2009-05-05 2009-11-04 程治永 一种基于图像识别的图像搜索***的实现方法
CN104217206A (zh) * 2013-05-31 2014-12-17 上海亚视信息科技有限公司 基于高清视频的实时上座率统计方法
CN105701502A (zh) * 2016-01-06 2016-06-22 福州大学 一种基于蒙特卡罗数据均衡的图像自动标注方法
CN106023220A (zh) * 2016-05-26 2016-10-12 史方 一种基于深度学习的车辆外观部件图像分割方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101571875A (zh) * 2009-05-05 2009-11-04 程治永 一种基于图像识别的图像搜索***的实现方法
CN104217206A (zh) * 2013-05-31 2014-12-17 上海亚视信息科技有限公司 基于高清视频的实时上座率统计方法
CN105701502A (zh) * 2016-01-06 2016-06-22 福州大学 一种基于蒙特卡罗数据均衡的图像自动标注方法
CN106023220A (zh) * 2016-05-26 2016-10-12 史方 一种基于深度学习的车辆外观部件图像分割方法

Cited By (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107545306A (zh) * 2017-07-05 2018-01-05 安徽奇智科技有限公司 一种基于云计算的大数据分析平台
CN108009598A (zh) * 2017-12-27 2018-05-08 北京诸葛找房信息技术有限公司 基于深度学习的户型图识别方法
CN108764022A (zh) * 2018-04-04 2018-11-06 链家网（北京）科技有限公司 一种图像识别方法及***
CN108268748A (zh) * 2018-04-26 2018-07-10 南京信息工程大学 一种基于机器学习的住宅户型图电气设计方法
CN108984765A (zh) * 2018-07-20 2018-12-11 我要家网络科技有限公司 一种基于智能图像分析的户型图找房方法
CN108984765B (zh) * 2018-07-20 2020-01-31 我要家网络科技有限公司 一种基于智能图像分析的户型图找房方法
CN109711443A (zh) * 2018-12-14 2019-05-03 平安城市建设科技(深圳)有限公司 基于神经网络的户型图识别方法、装置、设备及存储介质
CN109740506A (zh) * 2018-12-29 2019-05-10 广东三维家信息科技有限公司 一种户型图像识别方法及装置
CN110059721A (zh) * 2019-03-16 2019-07-26 平安城市建设科技(深圳)有限公司 户型图区域识别方法、装置、设备及计算机可读存储介质
CN110059690A (zh) * 2019-03-28 2019-07-26 广州智方信息科技有限公司 基于深度卷积神经网络的户型图语义自动分析方法及***
CN109993797B (zh) * 2019-04-04 2021-03-02 广东三维家信息科技有限公司 门窗位置检测方法及装置
CN109993797A (zh) * 2019-04-04 2019-07-09 广东三维家信息科技有限公司 门窗位置检测方法及装置
CN110059750A (zh) * 2019-04-17 2019-07-26 广东三维家信息科技有限公司 户型形状识别方法、装置和设备
CN110111426A (zh) * 2019-04-18 2019-08-09 贝壳技术有限公司 一种动静分离格局房屋的确定方法和装置
CN110197225A (zh) * 2019-05-28 2019-09-03 广东三维家信息科技有限公司 基于深度学习的户型空间匹配方法和***
CN110443895B (zh) * 2019-06-27 2020-08-18 贝壳找房(北京)科技有限公司 房屋照明方案生成方法和装置
CN110443895A (zh) * 2019-06-27 2019-11-12 贝壳技术有限公司 房屋照明方案生成方法和装置
CN110390153A (zh) * 2019-07-15 2019-10-29 贝壳技术有限公司 户型结构改造方案的生成方法、装置以及设备、存储介质
CN110390304A (zh) * 2019-07-24 2019-10-29 广东南方数码科技股份有限公司 自动分类方法、装置、电子设备及存储介质
CN110728235A (zh) * 2019-10-11 2020-01-24 广东三维家信息科技有限公司 户型区域标记方法及装置
CN110826627A (zh) * 2019-11-06 2020-02-21 广东三维家信息科技有限公司 图像相似度测量方法、装置及电子设备
CN111400519B (zh) * 2019-12-05 2022-08-12 江苏艾佳家居用品有限公司 一种高效的定制化海量相似户型搜索方法
CN111400519A (zh) * 2019-12-05 2020-07-10 江苏艾佳家居用品有限公司 一种高效的定制化海量相似户型搜索方法
CN111291649A (zh) * 2020-01-20 2020-06-16 广东三维家信息科技有限公司 图像识别方法、装置及电子设备
CN111291649B (zh) * 2020-01-20 2023-08-25 广东三维家信息科技有限公司 图像识别方法、装置及电子设备
CN111798340A (zh) * 2020-06-24 2020-10-20 北京字节跳动网络技术有限公司 户型图标识方法、装置和电子设备
CN112116613A (zh) * 2020-09-25 2020-12-22 贝壳技术有限公司 模型训练方法、图像分割方法、图像矢量化方法及其***
CN114554503A (zh) * 2020-11-24 2022-05-27 中移物联网有限公司 一种组网信息确认方法、装置及用户设备
CN114554503B (zh) * 2020-11-24 2023-11-10 中移物联网有限公司 一种组网信息确认方法、装置及用户设备
CN115529201A (zh) * 2022-05-31 2022-12-27 青岛海尔智能家电科技有限公司 基于数字孪生的生成家庭环境全景图的方法及***、装置、服务器、存储介质
CN116206325A (zh) * 2023-02-14 2023-06-02 南京艾小宝智能科技有限公司 一种户型图的识别***及其方法
CN116311325A (zh) * 2023-02-16 2023-06-23 江苏艾佳家居用品有限公司 一种基于人工智能模型的比例尺自动识别***
CN116311325B (zh) * 2023-02-16 2023-10-27 江苏艾佳家居用品有限公司 一种基于人工智能模型的比例尺自动识别***

Similar Documents

Publication Publication Date Title
CN106844614A (zh) 一种户型图功能区域快速识别***
CN106971152B (zh) 一种基于航拍图像的检测输电线路中鸟巢的方法
CN104992142B (zh) 一种基于深度学习和属性学习相结合的行人识别方法
CN110222611A (zh) 基于图卷积网络的人体骨架行为识别方法、***、装置
CN105938564A (zh) 基于主成分分析和神经网络的水稻病害识别方法及***
CN110245720B (zh) 一种基于深度学习的柑橘病虫害智能诊断方法及***
CN109543679A (zh) 一种基于深度卷积神经网络的死鱼识别方法及预警***
CN110532996A (zh) 视频分类的方法、信息处理的方法以及服务器
CN109978918A (zh) 一种轨迹追踪方法、装置和存储介质
CN104217214A (zh) 基于可配置卷积神经网络的rgb-d人物行为识别方法
CN107766582A (zh) 一种基于目标局部区域的图像检索方法
CN110139067A (zh) 一种野生动物监测数据管理信息***
CN109344699A (zh) 基于分层深度卷积神经网络的冬枣病害识别方法
CN110458082A (zh) 一种城市管理案件分类识别方法
Bertrand et al. Bark and leaf fusion systems to improve automatic tree species recognition
CN112115906A (zh) 基于深度学习目标检测和度量学习的开放性菜品识别方法
CN105590099A (zh) 一种基于改进卷积神经网络的多人行为识别方法
CN104680193B (zh) 基于快速相似性网络融合算法的在线目标分类方法与***
CN106845513A (zh) 基于条件随机森林的人手检测器及方法
CN114359727A (zh) 基于轻量级优化Yolo v4的茶叶病害识别方法及***
Hsieh et al. Fruit maturity and location identification of beef tomato using R-CNN and binocular imaging technology
CN102034107A (zh) 基于鲁棒视觉注意特征与稀疏表示的不良图像判别方法
CN111046213B (zh) 一种基于图像识别的知识库构建方法
CN107357815A (zh) 一种图片内容的识别方法及***
CN109325888A (zh) 一种基于人工神经网络的学生行为预测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170613