CN106713728A - 一种增强景点拍照信息的方法及*** - Google Patents

一种增强景点拍照信息的方法及*** Download PDF

Info

Publication number
CN106713728A
CN106713728A CN201510770236.8A CN201510770236A CN106713728A CN 106713728 A CN106713728 A CN 106713728A CN 201510770236 A CN201510770236 A CN 201510770236A CN 106713728 A CN106713728 A CN 106713728A
Authority
CN
China
Prior art keywords
information
picture
module
geographical position
photograph
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510770236.8A
Other languages
English (en)
Inventor
任伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201510770236.8A priority Critical patent/CN106713728A/zh
Publication of CN106713728A publication Critical patent/CN106713728A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2405—Monitoring of the internal components or processes of the server, e.g. server load

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明提供一种增强景点拍照信息的方法及***，所述方法包括：拍照生成相片时，增强管理记录拍摄的地理位置；所述相片的压缩数据流和所述地理位置上传至信息服务云平台；所述云平台将接收的数据流删除人脸区域，余下区域作为待处理图片；所述云平台通过接收到的拍摄地理位置筛选出所在景点的图片样本空间，将所述待处理图片与所述样本空间中每个样本点做特征点匹配，获取极大可能匹配的样本点索引号，再通过所述索引号，命中所述相片中建筑物或风景的资料及本地服务信息，最后回传至拍照设备；拍照设备解析回传的信息并触发新图层显示。所述***包括：拍照设备；分布式集群服务器，即信息服务云平台。本发明解决了景点相片缺失资料信息的问题。

Description

一种增强景点拍照信息的方法及***
技术领域
本发明涉及智能设备拍照技术领域，具体地，涉及一种增强景点拍照信息的方法及***。
背景技术
出门旅游，人们想知道建筑物或风景的历史背景知识，常常围住导游，倾听诉述。另外，景点拍照是人们保留记忆的必要手段，也缺少了相关信息的描述，随着时间的流逝，人们极大可能忘记了相关资料信息。可见，目前出门旅游拍照与相关信息的索取，完全是分开的，会增加人们的时间及消费成本，带来了不便。
发明内容
本发明实施例的主要目的在于提供一种增强景点拍照信息的方法及***，以解决旅游拍照与相关信息的索取，完全是分开的问题。通过本发明实施例，实现让相片“说话”，主动告诉人们所拍摄的景点中建筑物或风景相关信息以及周边服务信息。
本发明实施例提供一种增强景点拍照信息的方法，应用于可以拍照的智能设备和信息服务云平台，包括：拍照生成相片时，增强管理记录拍摄的地理位置；提取所述相片的压缩数据流；所述压缩数据流和所述地理位置通过网络上传至信息服务云平台；信息服务云平台对接收的所述数据流先做人脸识别，再将删除人脸区域后的数据流作为待处理图片；信息服务云平台通过接收到的拍摄地理位置筛选出所在景点的图片样本空间，将所述待处理图片与所述样本空间中每个样本点做特征点匹配，获取极大可能匹配的样本点索引号；信息服务云平台通过所述索引号，命中所述相片中建筑物或风景的历史知识以及本地服务信息，再回传至拍照设备；拍照设备解析回传的增强信息并创建新图层显示。
进一步地，在本发明一实施例中，所述的拍照生成相片时，增强管理记录拍摄的地理位置，包括：LBS定位功能，获取拍摄具体地理位置；增强管理功能，实时记录并保存拍摄的地理位置，与相片管理中的每张相片一一对应。
进一步地，在本发明一实施例中，所述的提取所述相片的压缩数据流，包括：图片压缩流提取功能，相片管理不论采用哪种格式保存原始相片，均采用指定压缩格式读取其二进制流，比如定义为jpeg格式。考虑到信息处理的实时性，需要判断当前环境网络带宽和相片大小，决定是否对数据流做灰度化处理，这样在保证图像特征点不失真的情况下数据流尽量小。
进一步地，在本发明一实施例中，所述的所述压缩数据流和所述地理位置通过网络上传至信息服务云平台，包括：网络监听功能，监听网络是否连接；通过http协议发送数据包与接收响应数据包；
进一步地，在本发明一实施例中，所述的信息服务云平台对接收的所述数据流先做人脸识别，再将删除人脸区域后的数据流作为待处理图片，包括：人脸识别功能，如果有人脸，锁定相片中所有出现的人脸区域；在所述相片中删除所有人脸区域，做降噪处理，目的减少特征值干扰。
进一步地，在本发明一实施例中，所述的信息服务云平台通过接收到的拍摄地理位置筛选出所在景点的图片样本空间，将所述待处理图片与所述样本空间中每个样本点做特征点匹配，获取极大可能匹配的样本点索引号，包括：信息服务云平台基于地理位置对所有样本图片做集合分类，划分不同的样本空间；信息服务云平台通过接收到的拍摄地理位置命中一个样本空间，如果未命中一个样本空间，则基于拍摄地理位置创建一个新的样本空间，并允许和鼓励用户将景点图片及相关描述信息作为新的样本点通过拍照设备上传至新建的样本空间；所述待处理图片与所述样本空间中每个样本点分别做图像匹配，计算各自匹配的特征点数目；比较所述特征点数目，取其最大值；如果所述最大值大于给定的阈值，则将该最大值所属的样本点作为极大可能匹配的图片，获取其索引号；如果所述最大值小于给定的阈值则无匹配图片，则允许并鼓励用户将景点图片及相关描述信息作为新的样本点通过拍照设备上传至所述的样本空间。
进一步地，在本发明一实施例中，所述的信息服务云平台通过所述索引号，命中所述相片中建筑物或风景的历史知识以及本地服务信息，再回传至拍照设备，包括：历史资料库，获取旅游景点相关建筑物或风景的历史背景知识；本地服务信息库，获取吃穿住行相关信息。
相应的，本发明还提供一种增强景点拍照信息的***，包括：
拍照设备，用于获取相片数据和拍摄地理位置；
分布式集群服务器，作为信息服务云平台，维护图片样本空间和相关信息，以及图像匹配处理。
进一步地，在本发明一实施例中，所述的拍照设备，包括：
拍照模块，摄像头获取当前影像，并保存为相片，并触发LBS定位模块、增强管理模块、网络模块；
LBS定位模块，获取拍摄的地理位置；
增强管理模块，数据库或文件实时保存每张所拍摄的相片的地理位置，触发数据流提取模块、增强信息显示模块；
数据流提取模块，采用指定压缩格式读取原始相片二进制流，通常采用jpeg格式，使其大小尽量小；
增强信息显示模块，解析回传的相关信息并创建新图层显示；
网络模块，监听网络是否连接；基于REST网络架构，通过http协议的post方法发送数据包与接收响应数据包。
进一步地，在本发明一实施例中，所述的分布式集群服务器，包括：
样本管理模块，基于地理位置对所有样本图片做集合分类，划分不同的样本空间，具有新建、删除样本空间功能以及添加、删除样本点功能。
地理位置检索模块，检索相片的拍摄地理位置是否存在，使得筛选出所在景点的样本空间；如果未检索到该位置，则记录该位置并创建对应样本空间，再触发开放平台模块，允许和鼓励用户将景点图片及相关描述信息作为新的样本点通过拍照设备上传至新建的样本空间；
开放平台模块，允许用户注册账户，上传自拍的景点图片及相关描述信息至样本空间。
人脸识别模块，识别相片中是否存在人脸，计算其区域；
降噪处理模块，删除人脸区域作为待处理图片，目的减少特征值干扰，提高匹配精度；
特征匹配模块，所述待处理图片与所述样本空间中每个样本点分别做图像匹配，计算各自匹配的特征点数目；比较所述特征点数目，取其最大值；如果所述最大值大于给定的阈值，则将该最大值所属的样本点作为极大可能匹配的图片，获取其索引号；如果所述最大值小于给定的阈值则无匹配图片，则触发开放平台模块，允许并鼓励用户将景点图片及相关描述信息作为新的样本点通过拍照设备上传至所述的样本空间；
知识管理模块，根据匹配的样本点的索引号，触发历史资料模块、周边饮食模块、交通信息，命中所述相片中建筑物或风景的历史背景知识以及本地服务信息，再回传至拍照设备。
历史资料模块，维护景点中建筑物或风景的历史信息或相关描述信息；
周边饮食模块，维护景点中相关餐馆信息；
交通信息模块，维护景点周边或景区内的公交通行信息。
借助于上述技术方案，本发明在设备拍照过程中通过LBS定位信息，获取所在景点图片样本空间，再基于图像匹配获取样本点的索引号，命中相片中建筑物或风景的历史资料、本地服务等信息。相比现有拍照技术，解决了旅游拍照与相关信息的索取，完全是分开的问题，不仅利于拍照时实时获取辅助信息，也便于后续相片查看，更加立体、多维度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明提供的拍照设备实时获取增强信息的方法流程示意图；
图2是本发明提供的拍照设备提取相片数据流的流程示意图；
图3是本发明提供的信息服务云平台处理增强请求的方法流程示意图；
图4是本发明提供的信息服务云平台对接收的相片数据流做图像匹配的流程示意图；
图5是本发明提供的***中拍照设备获取增强信息的结构框图；
图6是本发明提供的***中分布式集群服务器处理增强请求的结构框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明中，“拍照设备”可以是手机、pad、照相机或其他可以拍照的设备。
如图1所示，为本发明实施例一种拍照设备实时获取增强信息的方法流程示意图，包括：
步骤S11，拍照生成相片时，增强管理记录拍摄的地理位置。
具体的，该步骤是基于LBS定位功能，获取具体拍摄地理位置，再将所述的地理位置存储于增强管理的数据库或文件中。较佳的，LBS能够定位到拍照的精确地理位置。
LBS定位为基于位置的服务，是通过电信移动运营商的无线电通讯网络(如GSM网、CDMA网)或外部定位方式(如GPS)获取移动终端用户的位置信息(地理坐标，或大地坐标)，在地理信息***平台的支持下，为用户提供相应服务的一种增值业务。本发明对LBS定位服务的选取不作限定，可根据需要选择。
步骤S12，提取所述相片的压缩数据流。
具体的，考虑到网络带宽，采用压缩格式获取相片数据流，如jpeg格式。本发明对压缩格式不做限定，可根据实际情况而选定。在一种较佳的实施例中，考虑到信息处理的实时性，需要判断当前环境网络带宽和相片大小，对数据流做灰度化处理，这样在保证图像特征点不失真的情况下数据流尽量小。该步骤S12可按照如图2所示的具体步骤实现：
步骤S121，设定数据流大小门限阈值K和网络带宽门限阈值U。
具体的，数据流大小门限阈值K和网络带宽门限阈值U，2个值为预先定义，本发明不做具体限定，各个厂家根据实际情况调试设置，建议值：K＝2.5M、U＝10M。
步骤S122，以指定压缩格式读取相片数据流，并计算其大小ε。
具体的，不同的厂商，拍照时保存的原始相片格式可能不同，从而造成大小差异很大，所以本发明采用指定压缩格式读取相片数据流，建议采用jpeg格式。
步骤S123，如果ε＞K，则转步骤S124，否则转步骤S125。
步骤S124，所述相片数据流作灰度化，处理后作为待处理数据流。
具体的，可采用opencv图像灰度化通用方法CV_BGR2GRAY参数处理。opencv方法仅仅是一种图像处理主流方案，本发明对灰度化的方法不作限定，可根据需要选择其他图像处理方法。
步骤S125，计算当前网络带宽大小ψ。
步骤S126，如果ψ＜U，则转步骤S124。
步骤S13，所述压缩数据流和所述地理位置通过网络上传至信息服务云平台。
具体的，封装数据流与地理位置于一个数据包中，基于REST网络架构，通过http协议Post方法上传至信息云服务器。在一种较佳的实施例中，需要一直监听设备网络连接状态，保证数据发送的完整性。
步骤S14，解析所述信息服务云平台回传的信息，并页面显示。
具体的，拍照设备根据数据格式解析信息服务云平台回传的数据包，获取相关建筑物或风景的背景信息、吃穿住行服务信息，可以将其浮于相片显示，也可以另起按键触发新建图层显示。在一种较佳的实施例中，回传数据包采用json格式封装。
相应的，如图3所示，为本发明实施例一种信息服务云平台处理增强请求的方法流程示意图，包括：
步骤S21，基于地理位置对所有景点的样本图片分类，生成样本空间{PN|N表示地理位置}。
具体的，在庞大的的图片样本中，同类景点中的样本差异化不太明显，为了减少这种误差，提高精度，需要信息服务云平台基于地理位置对所有样本图片做分类，划分不同的样本空间，采用集合{PN|N表示地理位置}表示。
步骤S22，等待并接收拍照设备上传的地理位置m和相片数据流。
具体的，信息服务云平台一直处于网络监听状态，等待拍照设备上传增强请求信息；当处理完请求后，会立即回到该步骤。
步骤S23，如果m∈N，则转步骤S24，否则转步骤S25。
步骤S24，获取地理位置m的样本空间Pm。
具体的，信息服务云平台存在用户上传的地理位置m，从所有样本图片中获取该地理位置的样本空间Pm，目的减少查找范围，提高精度。
步骤S25，N＝N+m。
具体的，即信息服务云平台不存在用户上传的地理位置m，将自动记录该地理位置，新建样本空间Pm。
步骤S26，所述相片数据流分别与Pm中每个样本点做特征点匹配，获取与每个样本点匹配的特征点数目的集合{Ti|i表示样本点索引号}。
具体的，该步骤是将用户上传的相片与所在景点的样本图片做特征匹配。在一种较佳的实施例中，该步骤S26可按照如图4所示的具体步骤实现：
步骤S261，对所述相片数据流做人脸识别。
具体的，用户拍照时，往往是人景合一。采用人脸识别技术将相片中的所有人脸区域都识别出来。可采用opencv人脸识别API服务接口获取。opencv方法仅仅是一种图像处理主流方案，本发明对人脸识别的方法不作限定，可根据需要选择其他图像处理方法。
步骤S262，如果存在人脸区域，则转步骤S263。
步骤S263，去除人脸区域成为待处理数据流。
具体的，对于相片中的建筑物或风景识别，人物特征的出现会增加图像之间的相似度，反而会降低这种识别率，所以人脸是噪点区域，需要剔除。可采用opencv的挖掘出感兴趣的区域(Region of Interest，ROI)方法提取。Opencv设置ROI方法仅仅是一种图像处理主流方案，本发明对设置ROI方法不作限定，可根据需要选择其他图像处理方法。
步骤S264，所述待处理数据流与Pm中每个样本点做特征点匹配。
具体的，对于特征点匹配，工业界已有成熟图像处理算法库opencv，可以根据特征点匹配算法fast、sift、surf等API函数完成。在一种较佳的实施例中，考虑到信息处理的实时性，通常使用surf算法。本发明对从图像匹配的方法不作限定，可根据需要选择其他图像处理方法。
步骤S265，统计与每个样本点已匹配的特征点个数，并形成集合{Ti|i表示样本点索引号}。
具体的，相片与每个样本点匹配都会检索出多个匹配的特征点，各自计算匹配的特征点的数目，形成一个样本点匹配序列{Ti|i表示样本点索引号}。
步骤S27，比较集合{Ti}中每个元素，获取元素最大值max(T)。
具体的，匹配的特征点越多，说明图像之间的相似度就越大，所以筛选出集合{Ti}中的最大值。对于获取最大值方法，本发明不做限定，根据实际算法选择即可。
步骤S28，如果max(T)≥W(预定阈值)，则转步骤S29，否则转步骤S210。
具体的，厂家根据实际调试情况，自定义阈值W的大小，保证用户上传的相片数据流与匹配出的样本数据能吻合，减少相似建筑物或风景干扰匹配结果。
步骤S29，根据样本索引号i查找资料库、交通信息库、饮食信息库、其他本地服务库，回传命中信息至拍照设备。
步骤S210，回传无匹配样本消息至拍照设备，并通知用户将自拍的图片和相关描述信息作为新的样本点上传至样本空间Pm。
具体的，在一种较佳的实施例中，考虑到没有匹配图片信息时，不仅要告知用户，还允许用户上传原始相片以及所知的背景信息至景点所在的样本空间中，不仅扩充了样本容量，也增加了互动性，达到开放性。
本发明在设备拍照过程中通过LBS定位信息，获取所在景点图片样本空间，再基于图像匹配获取样本点的索引号，命中相片中建筑物或风景的历史资料、本地服务等信息。相比现有拍照技术，解决了旅游拍照与相关信息的索取，完全是分开的问题，不仅利于拍照时实时获取辅助信息，也便于后续相片查看，更加立体、多维度。
本发明还提供一种***，包括拍照设备和分布式集群服务器。
具体的，如图5所示，所述拍照设备包括：
拍照模块51，生成相片，并触发LBS定位模块52、增强管理模块53、网络模块54；
LBS定位模块52，获取拍摄的地理位置；
增强管理模块53，数据库或文件实时保存每张所拍摄的相片的地理位置，触发数据流提取模块55、增强信息显示模块56；
网络模块54，监听网络是否连接；基于REST网络架构，通过http协议的post方法发送数据包与接收响应数据包。
数据流提取模块55，采用指定压缩格式读取原始相片二进制流，通常采用jpeg格式，使其大小尽量小；
增强信息显示模块56，解析回传的相关信息并创建新图层显示；
图5所示的***中拍照设备与图1所示的获取增强信息的方法基于相同的发明思想实现，其具体实施方式可参照前述对拍照时拍照设备实时获取增强信息的方法介绍，此处不再赘述。
相应的，如图6所示，所述分布式集群服务器包括：
地理位置检索模块61，检索相片的拍摄地理位置是否存在，使得筛选出所在景点的样本空间；如果未检索到该位置，则记录该位置并创建对应样本空间，再触发开放平台模块70，允许和鼓励用户将景点图片及相关描述信息作为新的样本点通过拍照设备上传至新建的样本空间；
人脸识别模块62，识别相片中是否存在人脸，计算其区域；
降噪处理模块63，剔除人脸区域作为待处理图片，目的减少特征值干扰，提高匹配精度；
特征匹配模块64，所述待处理图片与所述样本空间中每个样本点分别做图像匹配，计算各自匹配的特征点数目；比较所述特征点数目，取其最大值；如果所述最大值大于给定的阈值，则将该最大值所属的样本点作为极大可能匹配的图片，获取其索引号；如果所述最大值小于给定的阈值则无匹配图片，则触发开放平台模块70，允许并鼓励用户将景点图片及相关描述信息作为新的样本点通过拍照设备上传至所述的样本空间；
样本管理模块65，基于地理位置对所有样本图片做集合分类，划分不同的样本空间，具有新建、删除样本空间功能以及添加、删除样本点功能。
知识管理模块66，根据匹配的样本点的索引号，触发历史资料模块、周边饮食模块、交通信息，命中所述相片中建筑物或风景的历史背景知识以及本地服务信息，再回传给拍照设备。
历史资料模块67，维护景点中建筑物或风景的历史信息或相关描述信息；
周边饮食模块68，维护景点中相关餐馆信息；
交通信息模块69，维护景点周边或景区内的公交通行信息。
开放平台模块70，允许用户注册账户，上传自拍的景点图片及相关描述信息至样本空间。
在一种较佳的实施例中，知识管理模块66包括：
对接第三方模块，厂商提供接口，与第三方公司合作，扩展历史资料模块67、周边饮食模块68、交通信息模块69，比如百度知道、大众点评、公交公司。
图6所示的***中分布式集群服务器与图3所示的信息服务云平台处理增强请求的方法基于相同的发明思想实现，其具体实施方式可参照前述对信息服务云平台处理增强请求的方法的介绍，此处不再赘述。
本发明在设备拍照过程中通过LBS定位信息，获取所在景点图片样本空间，再基于图像匹配获取样本点的索引号，命中相片中建筑物或风景的历史资料、本地服务等信息。相比现有拍照技术，解决了旅游拍照与相关信息的索取，完全是分开的问题，不仅利于拍照时实时获取辅助信息，也便于后续相片查看，更加立体、多维度。
以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
本领域技术人员还可以了解到本发明实施例列出的各种说明性逻辑块(illustrativelogical block)，单元，和步骤可以通过电子硬件、电脑软件，或两者的结合进行实现。为清楚展示硬件和软件的可替换性(interchangeability)，上述的各种说明性部件(illustrativecomponents)，单元和步骤已经通用地描述了它们的功能。这样的功能是通过硬件还是软件来实现取决于特定的应用和整个***的设计要求。本领域技术人员可以对于每种特定的应用，可以使用各种方法实现所述的功能，但这种实现不应被理解为超出本发明实施例保护的范围。
本发明实施例中所描述的各种说明性的逻辑块，或单元，或装置都可以通过通用处理器，数字信号处理器，专用集成电路(ASIC)，现场可编程门阵列或其它可编程逻辑装置，离散门或晶体管逻辑，离散硬件部件，或上述任何组合的设计来实现或操作所描述的功能。通用处理器可以为微处理器，可选地，该通用处理器也可以为任何传统的处理器、控制器、微控制器或状态机。处理器也可以通过计算装置的组合来实现，例如数字信号处理器和微处理器，多个微处理器，一个或多个微处理器联合一个数字信号处理器核，或任何其它类似的配置来实现。
本发明实施例中所描述的方法或算法的步骤可以直接嵌入硬件、处理器执行的软件模块、或者这两者的结合。软件模块可以存储于RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动磁盘、CD-ROM或本领域中其它任意形式的存储媒介中。示例性地，存储媒介可以与处理器连接，以使得处理器可以从存储媒介中读取信息，并可以向存储媒介存写信息。可选地，存储媒介还可以集成到处理器中。处理器和存储媒介可以设置于ASIC中，ASIC可以设置于用户终端中。可选地，处理器和存储媒介也可以设置于用户终端中的不同的部件中。
在一个或多个示例性的设计中，本发明实施例所描述的上述功能可以在硬件、软件、固件或这三者的任意组合来实现。如果在软件中实现，这些功能可以存储与电脑可读的媒介上，或以一个或多个指令或代码形式传输于电脑可读的媒介上。电脑可读媒介包括电脑存储媒介和便于使得让电脑程序从一个地方转移到其它地方的通信媒介。存储媒介可以是任何通用或特殊电脑可以接入访问的可用媒体。例如，这样的电脑可读媒体可以包括但不限于RAM、ROM、EEPROM、CD-ROM或其它光盘存储、磁盘存储或其它磁性存储装置，或其它任何可以用于承载或存储以指令或数据结构和其它可被通用或特殊电脑、或通用或特殊处理器读取形式的程序代码的媒介。此外，任何连接都可以被适当地定义为电脑可读媒介，例如，如果软件是从一个网站站点、服务器或其它远程资源通过一个同轴电缆、光纤电缆、双绞线、数字用户线(DSL)或以例如红外、无线和微波等无线方式传输的也被包含在所定义的电脑可读媒介中。所述的碟片(disk)和磁盘(disc)包括压缩磁盘、镭射盘、光盘、DVD、软盘和蓝光光盘，磁盘通常以磁性复制数据，而碟片通常以激光进行光学复制数据。上述的组合也可以包含在电脑可读媒介中。

Claims (10)

1.一种增强景点拍照信息的方法，其特征在于，所述增强景点拍照信息的方法，包括：
拍照生成相片时，增强管理记录拍摄的地理位置；
提取所述相片的压缩数据流；
所述压缩数据流和所述地理位置通过网络上传至信息服务云平台；
信息服务云平台对接收的所述数据流先做人脸识别，再将删除人脸区域后的数据流作为待处理图片；
信息服务云平台通过接收到的拍摄地理位置筛选出所在景点的图片样本空间，将所述待处理图片与所述样本空间中每个样本点做特征点匹配，获取极大可能匹配的样本点索引号；
信息服务云平台通过所述索引号，命中所述相片中建筑物或风景的历史知识以及本地服务信息，再回传至拍照设备；
拍照设备解析回传的增强信息并创建新图层显示。
2.根据权利要求1所述的增强景点拍照信息的方法，其特征在于，所述的拍照生成相片时，增强管理记录拍摄的地理位置，包括：
LBS定位功能，获取拍摄具体地理位置；
增强管理功能，实时记录并保存拍摄的地理位置，与相片管理中的每张相片一一对应，可以使用数据库或者文件保存数据。
3.根据权利要求1所述的增强景点拍照信息的方法，其特征在于，所述的提取所述相片的压缩数据流，包括：
图片压缩流提取功能，不论原始图片以何格式保存，将统一以指定的压缩格式读取其二进制流，目的使数据流尽量小，实时响应，比如定义为jpeg压缩格式；
判断当前环境网络带宽和数据流大小，基于预定阈值决定是否对数据流做灰度化处理，定义数据流大小门限阈值为K、网络带宽门限阈值为U、以压缩格式读取的相片数据流大小为ε、当前网络带宽大小ψ，如果ε＞K或者ψ＜U，则数据流灰度化。
4.根据权利要求1所述的增强景点拍照信息的方法，其特征在于，所述的信息服务云平台对接收的所述数据流先做人脸识别，再将删除人脸区域后的数据流作为待处理图片，包括：
人脸识别功能，如果有人脸，锁定相片中所有出现的人脸区域；
在所述相片中删除所有人脸区域，做降噪处理，目的减少特征值干扰，获取感兴趣的图像区域ROI。
5.根据权利要求1所述的增强景点拍照信息的方法，其特征在于，所述的信息服务云平台通过接收到的拍摄地理位置筛选出所在景点的图片样本空间，将所述待处理图片与所述样本空间中每个样本点做特征点匹配，获取极大可能匹配的样本点索引号，包括：
信息服务云平台基于地理位置对所有样本图片做集合分类，划分不同的样本空间，即{PN|N表示地理位置}；
定义信息服务云平台接收到的拍摄地理位置为m，如果m∈N，则命中到所在的样本空间Pm，获取Pm；如果则未命一个样本空间，所述平台会自动记录该地理位置m，即N＝N+m，并新建一个对应的样本空间Pm，允许和鼓励用户将景点图片及相关描述信息作为新的样本点通过拍照设备上传至新建的样本空间Pm；
所述待处理图片与样本空间Pm中每个样本点分别做图像匹配，统计各自匹配的特征点数目，即{Ti|i表示样本点索引号}；
比较集合{Ti}中每个元素，获取元素最大值max(T)；
定义阈值W，如果max(T)≥W，则将该最大值所属的样本点作为极大可能匹配的图片，获取其索引号i；如果max(T)＜W，则无匹配图片，允许并鼓励用户将景点图片及相关描述信息作为新的样本点通过拍照设备上传至样本空间Pm，i＝i+1。
6.根据权利要求1所述的增强景点拍照信息的方法，其特征在于，所述的信息服务云平台通过所述索引号，命中所述相片中建筑物或风景的历史知识以及本地服务信息，再回传至拍照设备，包括：
历史资料库，获取旅游景点相关建筑物或风景的历史背景知识；
周边饮食餐馆信息，获取餐馆位置和菜系特色；
周边交通信息，获取公交信息；
其他增值服务信息，获取其它本地服务信息。
7.一种***，其特征在于，包括：
拍照设备，用于获取相片数据和拍摄地理位置；
分布式集群服务器，作为信息服务云平台，维护图片样本空间和相关信息，以及图像匹配处理。
8.根据权利要求7所述的***，其特征在于，所述拍照设备包括：
拍照模块，摄像头获取当前影像，并保存为相片；
LBS定位模块，获取拍摄的地理位置；
增强管理模块，实时保存每张所拍摄的相片的地理位置；
数据流提取模块，采用指定压缩格式读取原始相片二进制流，使其大小尽量小，如定义为jpeg格式，；
增强信息显示模块，解析回传的相关信息并创建新图层显示；
网络模块，监听网络是否连接；基于REST网络架构，通过http协议的post方法发送数据包与接收响应数据包。
9.根据权利要求7所述的***，其特征在于，所述分布式集群服务器包括：
样本管理模块，基于地理位置对所有样本图片做集合分类，划分不同的样本空间，具有新建、删除样本空间功能以及添加、删除样本点功能。
地理位置检索模块，检索相片的拍摄地理位置是否存在，使得筛选出所在景点的样本空间；如果未检索到该位置，则记录该位置并创建对应样本空间，再触发开放平台模块，允许和鼓励用户将景点图片及相关描述信息作为新的样本点通过拍照设备上传至新建的样本空间，包括权利要求5中的所述样本空间的划分与命中；
开放平台模块，允许用户注册账户，上传自拍的景点图片及相关描述信息至样本空间。
人脸识别模块，识别相片中是否存在人脸，计算其区域；
降噪处理模块，删除人脸区域作为待处理图片，目的减少特征值干扰，提高匹配精度；
特征匹配模块，所述待处理图片与所述样本空间中每个样本点分别做图像匹配，统计各自匹配的特征点数目；比较所述特征点数目，取其最大值；如果所述最大值大于给定的阈值，则将该最大值所属的样本点作为极大可能匹配的图片，获取其索引号；如果所述最大值小于给定的阈值则无匹配图片，则触发开放平台模块，允许并鼓励用户将景点图片及相关描述信息作为新的样本点通过拍照设备上传至所述的样本空间，包括权利要求5中的所述特征点匹配与统计；
知识管理模块，根据匹配的样本点的索引号，触发历史资料模块、周边饮食模块、交通信息，命中所述相片中建筑物或风景的历史背景知识以及本地服务信息，再回传给拍照设备。
10.根据权利要求9所述的***，其特征在于，所述知识管理模块包括：
历史资料模块，维护景点中建筑物或风景的历史信息或相关描述信息；
周边饮食模块，维护景点中相关餐馆信息；
交通信息模块，维护景点周边或景区内的公交通行信息。
对接第三方模块，厂商提供接口，与第三方公司合作，扩展历史资料模块、周边饮食模块、交通信息模块，比如百度知道、大众点评、公交公司。
CN201510770236.8A 2015-11-12 2015-11-12 一种增强景点拍照信息的方法及*** Pending CN106713728A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510770236.8A CN106713728A (zh) 2015-11-12 2015-11-12 一种增强景点拍照信息的方法及***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510770236.8A CN106713728A (zh) 2015-11-12 2015-11-12 一种增强景点拍照信息的方法及***

Publications (1)

Publication Number Publication Date
CN106713728A true CN106713728A (zh) 2017-05-24

Family

ID=58929932

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510770236.8A Pending CN106713728A (zh) 2015-11-12 2015-11-12 一种增强景点拍照信息的方法及***

Country Status (1)

Country Link
CN (1) CN106713728A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109104570A (zh) * 2018-08-28 2018-12-28 广东小天才科技有限公司 一种基于可穿戴设备的拍摄方法及可穿戴设备
CN109345531A (zh) * 2018-10-10 2019-02-15 四川新网银行股份有限公司 一种基于图片识别用户拍摄距离的方法及***
CN110135222A (zh) * 2018-02-08 2019-08-16 上海荟宸信息科技有限公司 一种实现智慧商圈人脸特征信息采集终端数据传输的方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120327252A1 (en) * 2011-06-24 2012-12-27 Nichols Timothy L Guidance for image capture at different locations
CN102915326A (zh) * 2012-08-30 2013-02-06 杭州藕根科技有限公司 一种基于gps和图像搜索技术的移动终端景物辨识***
CN103781020A (zh) * 2013-12-27 2014-05-07 一派视觉（北京）数字科技有限公司 一种具有照相合成功能的终端导游方法及***
CN104298965A (zh) * 2014-09-12 2015-01-21 东北大学 一种面向移动终端的旅游景点及景物智能识别***及方法
CN104980643A (zh) * 2014-04-10 2015-10-14 腾讯科技（深圳）有限公司 图片处理方法、终端及***

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120327252A1 (en) * 2011-06-24 2012-12-27 Nichols Timothy L Guidance for image capture at different locations
CN102915326A (zh) * 2012-08-30 2013-02-06 杭州藕根科技有限公司 一种基于gps和图像搜索技术的移动终端景物辨识***
CN103781020A (zh) * 2013-12-27 2014-05-07 一派视觉（北京）数字科技有限公司 一种具有照相合成功能的终端导游方法及***
CN104980643A (zh) * 2014-04-10 2015-10-14 腾讯科技（深圳）有限公司 图片处理方法、终端及***
CN104298965A (zh) * 2014-09-12 2015-01-21 东北大学 一种面向移动终端的旅游景点及景物智能识别***及方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110135222A (zh) * 2018-02-08 2019-08-16 上海荟宸信息科技有限公司 一种实现智慧商圈人脸特征信息采集终端数据传输的方法
CN109104570A (zh) * 2018-08-28 2018-12-28 广东小天才科技有限公司 一种基于可穿戴设备的拍摄方法及可穿戴设备
CN109104570B (zh) * 2018-08-28 2021-06-25 广东小天才科技有限公司 一种基于可穿戴设备的拍摄方法及可穿戴设备
CN109345531A (zh) * 2018-10-10 2019-02-15 四川新网银行股份有限公司 一种基于图片识别用户拍摄距离的方法及***
CN109345531B (zh) * 2018-10-10 2019-07-30 四川新网银行股份有限公司 一种基于图片识别用户拍摄距离的方法及***

Similar Documents

Publication Publication Date Title
US11714523B2 (en) Digital image tagging apparatuses, systems, and methods
CN107278369A (zh) 人员查找的方法、装置及通信***
US9058686B2 (en) Information display system, information display apparatus, information provision apparatus and non-transitory storage medium
CN105814587A (zh) 本地实时面部识别
JP2008530676A (ja) 取得した画像を使用したアクセスのための情報の格納
CN104754234B (zh) 一种拍照方法及装置
RU2007112676A (ru) Способ добавления географических названий к изображениям на мобильном коммуникационном терминале
CN110019599A (zh) 获取兴趣点poi信息的方法、***、装置及电子设备
WO2018072207A1 (zh) 一种信息推送方法、装置和***
CN111277788B (zh) 一种基于mac地址的监控方法和监控***
CN112183353A (zh) 一种图像数据处理方法、装置和相关设备
CN106713728A (zh) 一种增强景点拍照信息的方法及***
CN106537799A (zh) 摄像头控制和图像流送
CN106708070A (zh) 一种航拍控制方法和装置
CN105072478A (zh) 一种基于可穿戴设备的人生记录***及其方法
CN104767816A (zh) 拍摄信息采集方法、装置和终端
US9661260B2 (en) Photograph or video tagging based on peered devices
CN108717464A (zh) 照片处理方法、装置及终端设备
CN105635318A (zh) 图像获取方法和***
KR100798917B1 (ko) 디지털 사진 컨텐츠 처리 시스템 및 그 시스템에서의디지털 사진 컨텐츠 송/수신 방법 및 장치
WO2021047664A1 (zh) 一种生物特征识别的方法及相关设备
CN104349169B (zh) 一种图像处理方法及电子设备
CN109168127A (zh) 资源推荐方法、装置、电子设备以及计算机可读介质
CN112712564A (zh) 相机的拍摄方法和装置、存储介质、电子装置
US9201498B2 (en) Information display system, information display apparatus and non-transitory storage medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170524

WD01 Invention patent application deemed withdrawn after publication