CN109117819B - 目标物识别方法、装置、存储介质及穿戴式设备 - Google Patents

目标物识别方法、装置、存储介质及穿戴式设备 Download PDF

Info

Publication number
CN109117819B
CN109117819B CN201811000674.6A CN201811000674A CN109117819B CN 109117819 B CN109117819 B CN 109117819B CN 201811000674 A CN201811000674 A CN 201811000674A CN 109117819 B CN109117819 B CN 109117819B
Authority
CN
China
Prior art keywords
target image
target
target object
feature information
attribute
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811000674.6A
Other languages
English (en)
Other versions
CN109117819A (zh
Inventor
魏苏龙
林肇堃
麦绮兰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201811000674.6A priority Critical patent/CN109117819B/zh
Publication of CN109117819A publication Critical patent/CN109117819A/zh
Application granted granted Critical
Publication of CN109117819B publication Critical patent/CN109117819B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1347Preprocessing; Feature extraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/193Preprocessing; Feature extraction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/13Hearing devices using bone conduction transducers

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Ophthalmology & Optometry (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请实施例公开了一种目标物识别方法、装置、存储介质及穿戴式设备。目标物识别方法包括:当目标物识别事件被触发时,获取摄像头采集的目标图像;其中,所述摄像头设置在穿戴式设备上;基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别;当所述目标图像中包含所述第一属性特征信息时,基于预先设定的细节特征信息,对所述目标图像进行第二特征识别;若所述目标图像中包含所述细节特征信息,则确定所述目标图像中包含目标物。本申请实施例通过采用上述技术方案,可简单、快速地进行目标物的识别、找寻,并可有效降低目标物识别过程中穿戴式设备的功耗,提高穿戴式设备的续航时间。

Description

目标物识别方法、装置、存储介质及穿戴式设备
技术领域
本申请实施例涉及穿戴式设备技术领域,尤其涉及目标物识别方法、装置、存储介质及穿戴式设备。
背景技术
随着社会的进步及科技的发展,穿戴式设备所应用的领域越来越多,穿戴式设备也越来越受用户欢迎,为用户的生活、工作带来了极大的便利。然而,相关技术中,穿戴式设备功耗较大,尤其是对目标物识别的过程,这严重影响了穿戴式设备的续航时间。
发明内容
本申请实施例提供的目标物识别方法、装置、存储介质及穿戴式设备,可以有效降低目标物识别过程中穿戴式设备的功耗,提高穿戴式设备的续航时间。
第一方面,本申请实施例提供了一种目标物识别方法,包括:
当目标物识别事件被触发时,获取摄像头采集的目标图像;其中,所述摄像头设置在穿戴式设备上;
基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别;
当所述目标图像中包含所述第一属性特征信息时,基于预先设定的细节特征信息,对所述目标图像进行第二特征识别;
若所述目标图像中包含所述细节特征信息,则确定所述目标图像中包含目标物。
第二方面,本申请实施例提供了一种目标物识别装置,包括:
目标图像获取模块,用于当目标物识别事件被触发时,获取摄像头采集的目标图像;其中,所述摄像头设置在穿戴式设备上;
第一特征识别模块,用于基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别;
第二特征识别模块,用于当所述目标图像中包含所述第一属性特征信息时,基于预先设定的细节特征信息,对所述目标图像进行第二特征识别;
目标物识别模块,用于若所述目标图像中包含所述细节特征信息,则确定所述目标图像中包含目标物。
第三方面,本本申请实施例还提供了一种包含穿戴式设备可执行指令的存储介质,所述穿戴式设备可执行指令在由穿戴式设备处理器执行时用于执行本申请实施例第一方面所述的目标物识别方法。
第四方面,本申请实施例还提供了一种穿戴式设备,包括:处理器、存储器以及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如本申请实施例第一方面所述的目标物识别方法。
本申请实施例中提供的目标物识别方案,当目标物识别事件被触发时,获取摄像头采集的目标图像,其中,摄像头设置在穿戴式设备上,然后基于预先设定的第一属性特征信息对目标图像进行第一特征识别,当目标图像中包含第一属性特征信息时,基于预先设定的细节特征信息对目标图像进行第二特征识别,并当目标图像中包含细节特征信息时,确定目标图像中包含目标物。通过采用上述技术方案,可简单、快速地进行目标物的识别、找寻,并可有效降低目标物识别过程中穿戴式设备的功耗,提高穿戴式设备的续航时间。
附图说明
图1为本申请实施例提供的一种目标物识别方法的流程示意图;
图2为本申请实施例提供的另一种目标物识别方法的流程示意图;
图3为本申请实施例提供的又一种目标物识别方法的流程示意图;
图4为本申请实施例提供的一种目标物识别装置的结构示意图;
图5为本申请实施例提供的一种穿戴式设备的结构示意图;
图6为本申请实施例提供的一种穿戴式设备的示意实物图。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本申请的技术方案。可以理解的是,此处所描述的具体实施例仅仅用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
图1为本申请实施例提供的目标物识别方法的流程示意图,该方法可以由目标物识别装置执行,其中该装置可由软件和/或硬件实现,一般可集成在穿戴式设备中。如图1所示,该方法包括:
步骤101、当目标物识别事件被触发时,获取摄像头采集的目标图像。
其中,所述摄像头设置在穿戴式设备上。
示例性的,本申请实施例中的穿戴式设备可以包括智能眼镜、智能头盔、智能手环及智能指环等智能设备。在穿戴式设备中装载有操作***。
在本申请实施例中,目标物识别事件的触发条件可以根据实际情况设置,本申请实施例不作具体限定。例如,可以在检测到用户的动作满足预设条件(如用户头部晃动的幅度大于预设阈值,或者用户头部晃动的频率大于预设阈值)时,触发目标物识别事件;或者可以在检测到用户按下穿戴式设备上设置的按钮时,触发目标物识别事件;或者可以当检测到用户输入预先设定的目标物识别指令时,触发目标物识别事件。当目标物识别事件被触发后,***可以通过读取标志位或接收触发指令等方式检测到目标物识别事件已被触发,具体的检测方式本申请实施例也不做限定。
在本申请实施例中,当目标物识别事件被触发时,获取摄像头采集的目标图像。其中,摄像头设置在穿戴式设备上,用于实时采集目标图像。以穿戴式设备为智能眼镜进行举例说明,摄像头可内置在智能眼镜的镜框中,当用户在佩戴智能眼镜时,内置在镜框中的摄像头可进行图像数据的实时采集。
步骤102、基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别。
在本申请实施例中,该穿戴式设备具有目标物快速识别功能。基于预先设定的第一属性特征信息对目标图像进行第一特征识别。可以理解的是,对目标图像进行特征分析,判断目标图像中是否包含预先设定的第一属性特征信息,或者判断目标图像是否满足预先设定的第一属性特征信息对应的特征条件。其中,第一属性特征信息可以理解为能够直接表征目标物类别的特征信息。示例性的,待识别的目标物为用户A的妈妈,即用户需要通过穿戴式设备在茫茫人群中找寻自己的妈妈,其中,用户A的妈妈为长头发、穿一身红色裙子、中年妇女。则第一属性特征可以包括:穿红色衣服、长头发、女。则基于预先设定的第一属性特征信息对目标图像进行第一特征识别,可包括:判断目标图像中是否包含有穿红色衣服、头发为长头发、性别为女的人物,若是,则继续执行步骤103,否则,确定该目标图像中不包含用户需要找寻、识别的目标物,则返回执行步骤101,即重新通过摄像头采集新的目标图像。
步骤103、当所述目标图像中包含所述第一属性特征信息时,基于预先设定的细节特征信息,对所述目标图像进行第二特征识别。
在本申请实施例中,当目标图像中包含所述第一属性特征信息时,表明目标图像中可能包含有用户需要找寻的目标物,则基于预先设定的细节特征信息对目标图像进行第二特征识别,以进一步确认在该目标图像是否确实包含有用户需要找寻的目标物。其中,细节特征信息可以理解为能够进一步表征目标物的细节特征。示例性的,细节特征信息可以包括人脸特征、虹膜特征或指纹特征等。例如,细节特征信息包括人脸特征,则当目标图像中是否包含有穿红色衣服、头发为长头发、性别为女的人物时,进一步度该目标图像中包含第一属性特征信息的局部区域进行分析,判断是否包含预先设定的细节特征信息,根据判断结果,确定该目标图像中是否包含目标物。也即,对目标图像中包含第一属性特征信息的局部区域进行人脸识别,判断是否与预先设定的人脸特征信息能够匹配成功。当匹配成功时,说明目标图像中包含所述人脸特征信息,否则,说明目标图像中不包含人脸特征信息。
步骤104、若所述目标图像中包含所述细节特征信息,则确定所述目标图像中包含目标物。
在本申请实施例中,当确定目标图像中包含细节特征信息时,确定目标图像中包含目标物,也即待寻找的目标物被包含于当前摄像头所采集的目标图像中。因此,可在目标图像采集方向,进一步寻找目标物。
可选的,在确定所述目标图像中包含目标物之后,还包括:将所述目标物的整体或局部进行放大显示;或者将所述目标物进行闪烁显示。这样设置的好处在于,可以通过穿戴式设备快速找寻到目标物。示例性的,以穿戴式设备为智能眼镜进行举例说明,当智能眼镜对摄像头采集的目标图像进行第一特征识别和第二特征识别,确定目标图像中包含目标物后,用户通过佩戴的智能眼镜观看目标图像采集方向的物体时,目标物给用户的视觉效果是整体放大或局部放大;或者,目标物闪烁显示,即目标物给用户的视觉效果是闪烁显示的,如目标物忽然变大,又忽然变小,或者目标物忽然变亮,又忽然变暗。这样能够使用户通过智能眼镜一眼就能看到待寻找的目标物。
可选的,在确定所述目标图像中包含目标物之后,还包括:执行提示操作。可选的,所述执行提示操作可包括:控制骨传导扬声器发送语音提示信息和/或振动器产生振动;其中,所述骨传导扬声器和所述振动器集成在所述穿戴式设备中。这样设置的好处在于,可以快速提示用户目标物包含于目标图像中,防止用户错过待找寻的目标物。以智能眼镜作为穿戴式设备为例,骨传导扬声器设置在至少一个镜腿的内侧壁,该骨传导扬声器将处理器发送的音频信号转换为振动信号,通过颅骨传递至人体内耳被听觉神经所感知,该语音提示内容可以是“目标物在您的正前方”。在一个实施例中,当确定目标图像中包含的目标物时,可通过穿戴式设备集成的振动器产生振动以提示用户。
本申请实施例中提供的目标物识别方法,当目标物识别事件被触发时,获取摄像头采集的目标图像,其中,摄像头设置在穿戴式设备上,然后基于预先设定的第一属性特征信息对目标图像进行第一特征识别,当目标图像中包含第一属性特征信息时,基于预先设定的细节特征信息对目标图像进行第二特征识别,并当目标图像中包含细节特征信息时,确定目标图像中包含目标物。通过采用上述技术方案,可简单、快速地进行目标物的识别、找寻,并可有效降低目标物识别过程中穿戴式设备的功耗,提高穿戴式设备的续航时间。
在一些实施例中,在基于预先设定的第一属性特征信息对所述目标图像进行第一特征识别之前,还包括:确定所述目标物的目标特征信息;对所述目标特征信息进行分类,得到所述第一属性特征信息和所述细节特征信息。这样设置的好处在于,可以准确确定待找寻的目标物的属性特征信息和细节特征信息,方便用户通过对图像进行二次特征识别后,准确、快速地找寻到目标物。示例性的,用户B带领自己的孩子去游玩天安门时,人多人杂,一不小心孩子消失在自己的视觉范围内,为了快速找寻到自己的孩子,需要快速明确该孩子的目标特征信息,如孩子的目标特征信息为:一个八岁的小男孩,身穿蓝色T恤,黑色短裤,头戴白色遮阳帽,大眼睛,鹅蛋脸,鼻翼右侧有一颗黑痣。可对这些目标特征信息进行分类,得到第一属性特征信息和细节特征信息,例如第一属性特征信息可以包括小男孩,身穿蓝色T恤,黑色短裤,头戴白色遮阳帽,而细节特征信息可以包括大眼睛,鹅蛋脸,鼻翼右侧有一颗黑痣及具体的人脸特征。这样可以方便用户B在找寻自己孩子的过程中,根据第一属性特征信息快速锁定有可能是自己孩子的目标图像,并在目标图像中包含第一属性特征信息时,进一步通过细节特征信息确认是否是待找寻的目标物。
图2为本申请实施例提供的目标物识别方法的流程示意图,可选的,基于预先设定的细节特征信息对所述目标图像进行第二特征识别包括:对所述目标图像按照预设放大比例进行放大处理;基于预先设定的细节特征信息,对放大处理后的目标图像进行第二特征识别。并且,在在确定所述目标图像中包含目标物之后,还包括:将所述目标物的整体或局部进行放大显示;或者将所述目标物进行闪烁显示。如图2所示,该方法包括:
步骤201、当目标物识别事件被触发时,获取摄像头采集的目标图像。
其中,所述摄像头设置在穿戴式设备上。
步骤202、基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别,判断所述目标图像中是否包含第一属性特征信息,若是,则执行步骤203,否则,返回执行步骤201。
步骤203、对所述目标图像按照预设放大比例进行放大处理。
在本申请实施例中,当确定目标图像中包含第一属性特征信息时,说明该目标图像中可能包含有待找寻的目标物,为了更加清楚地基于预先设定的细节特征信息对目标图像进行第二特征识别,可将目标图像放大,使目标图像中包含的细节特征更加清晰。其中,可对目标图像整体按照预设比例进行放大,如将整个目标图像放大2倍,也可将目标图像按照预设比例进行局部放大,如将目标图像中包含有第一属性特征信息的局部区域放大3倍。
步骤204、基于预先设定的细节特征信息,对放大处理后的目标图像进行第二特征识别,判断所述目标图像中是否包含细节特征信息,若是,则执行步骤205,否则,返回执行步骤201。
示例性的,基于预先设定的细节特征信息对放大处理后的目标图像进行第二特征识别,即对放大处理后的目标图像进行特征分析,判断放大处理后的目标图像中是否包含有预先设定的细节特征信息。
步骤205、确定所述目标图像中包含目标物。
步骤206、将所述目标物的整体或局部进行放大显示;或者将所述目标物进行闪烁显示。
本申请实施例中提供的目标物识别方法,当目标图像中包含第一属性特征信息时,对目标图像按照预设放大比例进行放大处理,并基于预先设定的细节特征信息,对放大处理后的目标图像进行第二特征识别,可使目标图像中包含的细节特征更加清晰,从而能够准确地确定目标图像中是否包含有目标图像。并在确定目标图像中包含目标物之后,将目标物的整体或局部进行放大显示,或者将目标物进行闪烁显示,可以通过穿戴式设备快速找寻到目标物。
图3为本申请实施例提供的目标物识别方法的流程示意图,可选的,在获取摄像头采集的目标图像之前,还包括:获取拍摄预览图像;基于预先设定的第二属性特征信息,对所述拍摄预览图像进行第三特征识别;其中,所述第二属性特征信息属于所述第一属性特征性信息的上位特征;所述获取摄像头采集的目标图像,包括:当所述拍摄预览图像中包含所述第二属性特征信息时,获取摄像头采集的目标图像,其中,所述目标图像与所述拍摄预览图像包含的图像内容相同。如图3所示,该方法包括:
步骤301、当目标物识别事件被触发时,获取拍摄预览图像。
其中,所述摄像头设置在穿戴式设备上。
在本申请实施例中,当目标物识别事件被触发时,在通过穿戴式设备上设置的摄像头进行拍摄时,摄像头先进入拍摄预览界面,此时,获取拍摄预览界面中的图像,即拍摄预览图像。可以理解的是,拍摄预览图像可以包括用户想要拍摄的内容(如人物、风景等)在拍摄预览界面呈现的图像。
步骤302、基于预先设定的第二属性特征信息,对所述拍摄预览图像进行第三特征识别,判断所述拍摄预览图像中是否包含所述第二属性特征信息,若是,则执行步骤303,否则,返回执行步骤301。
示例性的,待寻找的目标物为用户B的孩子,该孩子的目标特征信息为:一个八岁的小男孩,身穿蓝色T恤,黑色短裤,头戴白色遮阳帽,大眼睛,鹅蛋脸,鼻翼右侧有一颗黑痣。可对这些目标特征信息进行分类,得到第一属性特征信息和细节特征信息,例如第一属性特征信息可以包括小男孩,身穿蓝色T恤,黑色短裤,头戴白色遮阳帽,而细节特征信息可以包括大眼睛,鹅蛋脸,鼻翼右侧有一颗黑痣及具体的人脸特征。则可以确定第二属性特征信息为人物,或者小孩。因此,可基于预先设定的第二属性特征信息对拍摄预览图像进行第三特征信息,以判断拍摄预览图像中是否包含第二属性特征信息,也即判断该拍摄预览图像中是否包含人物或者是否包含孩子。当拍摄预览图像中包含第二属性特征信息时,说明在拍摄预览图像中有可能包含有待寻找的目标物,可执行步骤303,否则,说明在拍摄预览图像中不可能包含有待寻找的目标物,返回执行步骤301,即获取新的拍摄预览图像。
步骤303、获取摄像头采集的目标图像。
其中,所述目标图像与所述拍摄预览图像包含的图像内容相同。
步骤304、基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别,判断所述目标图像中是否包含第一属性特征信息,若是,则执行步骤305,否则,返回执行步骤303。
其中,第二属性特征信息属于第一属性特征性信息的上位特征。
步骤305、对所述目标图像按照预设放大比例进行放大处理。
步骤306、基于预先设定的细节特征信息,对放大处理后的目标图像进行第二特征识别,判断所述目标图像中是否包含细节特征信息,若是,则执行步骤307,否则,返回执行步骤303。
步骤307、确定所述目标图像中包含目标物。
步骤308、控制骨传导扬声器发送语音提示信息和/或振动器产生振动。
步骤309、将所述目标物的整体或局部进行放大显示;或者将所述目标物进行闪烁显示。
本申请实施例中提供的目标物识别方法,在获取摄像头采集的目标图像之前,获取拍摄预览图像,并基于预先设定的第二属性特征信息,对所述拍摄预览图像进行第三特征识别,其中,所述第二属性特征信息属于所述第一属性特征性信息的上位特征,当所述拍摄预览图像中包含所述第二属性特征信息时,获取摄像头采集的目标图像,其中,所述目标图像与所述拍摄预览图像包含的图像内容相同。通过上述技术方案,可在拍摄预览阶段,大致判断出拍摄预览图像中是否有可能包含待找寻的目标物,并在确定出拍摄预览图像中有可能包含有目标物时,获取目标图像,这样不仅可以减少穿戴式设备的内存,而且还可以有效降低穿戴式设备的功耗,提高穿戴式设备的续航时间。
图4为本申请实施例提供的一种目标物识别装置的结构示意图,该装置可由软件和/或硬件实现,一般集成在穿戴式设备中,可通过执行目标物识别方法来对目标物进行识别。如图4所示,该装置包括:
目标图像获取模块401,用于当目标物识别事件被触发时,获取摄像头采集的目标图像;其中,所述摄像头设置在穿戴式设备上;
第一特征识别模块402,用于基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别;
第二特征识别模块403,用于当所述目标图像中包含所述第一属性特征信息时,基于预先设定的细节特征信息,对所述目标图像进行第二特征识别;
目标物识别模块404,用于若所述目标图像中包含所述细节特征信息,则确定所述目标图像中包含目标物。
本申请实施例中提供的目标物识别装置,当目标物识别事件被触发时,获取摄像头采集的目标图像,其中,摄像头设置在穿戴式设备上,然后基于预先设定的第一属性特征信息,对目标图像进行第一特征识别,当目标图像中包含第一属性特征信息时,基于预先设定的细节特征信息,对目标图像进行第二特征识别,并当目标图像中包含细节特征信息时,确定目标图像中包含目标物。通过采用上述技术方案,可简单、快速地进行目标物的识别、找寻,并可有效降低目标物识别过程中穿戴式设备的功耗,提高穿戴式设备的续航时间。
可选的,该装置还包括:
目标特征信息确定模块,用于在基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别之前,确定所述目标物的目标特征信息;
目标特征信息分类模块,用于对所述目标特征信息进行分类,得到所述第一属性特征信息和所述细节特征信息。
可选的,所述第二特征识别模块,用于:
对所述目标图像按照预设放大比例进行放大处理;
基于预先设定的细节特征信息,对放大处理后的目标图像进行第二特征识别。
可选的,该装置还包括:
拍摄预览图像获取模块,用于在获取摄像头采集的目标图像之前,获取拍摄预览图像;
第三特征识别模块,用于基于预先设定的第二属性特征信息,对所述拍摄预览图像进行第三特征识别;其中,所述第二属性特征信息属于所述第一属性特征性信息的上位特征;
相应的,所述目标图像获取模块,用于:
当所述拍摄预览图像中包含所述第二属性特征信息时,获取摄像头采集的目标图像,其中,所述目标图像与所述拍摄预览图像包含的图像内容相同。
可选的,该装置还包括:
目标物显示模块,用于在确定所述目标图像中包含目标物之后,将所述目标物的整体或局部进行放大显示;或者将所述目标物进行闪烁显示。
可选的,该装置还包括:
提示模块,用于在确定所述目标图像中包含目标物之后,执行提示操作。
可选的,所述执行提示操作包括:
控制骨传导扬声器发送语音提示信息和/或振动器产生振动;其中,所述骨传导扬声器和所述振动器集成在所述穿戴式设备中。
本申请实施例还提供一种包含穿戴式设备可执行指令的存储介质,所述穿戴式设备可执行指令在由穿戴式设备处理器执行时用于执行一种目标物识别方法,该方法包括:
当目标物识别事件被触发时,获取摄像头采集的目标图像;其中,所述摄像头设置在穿戴式设备上;
基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别;
当所述目标图像中包含所述第一属性特征信息时,基于预先设定的细节特征信息,对所述目标图像进行第二特征识别;
若所述目标图像中包含所述细节特征信息,则确定所述目标图像中包含目标物。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如CD-ROM、软盘或磁带装置;计算机***存储器或随机存取存储器,诸如DRAM、DDR RAM、SRAM、EDO RAM,兰巴斯(Rambus)RAM等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机***中,或者可以位于不同的第二计算机***中,第二计算机***通过网络(诸如因特网)连接到第一计算机***。第二计算机***可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机***中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的目标物识别方法操作,还可以执行本发明任意实施例所提供的目标物识别方法中的相关操作。
本实施例在上述各实施例的基础上提供了一种穿戴式设备,图5是本申请实施例提供的一种穿戴式设备的结构示意图,图6是本申请实施例提供的一种穿戴式设备的示意实物图。如图5和图6所示,该穿戴式设备包括:存储器501、处理器(Central ProcessingUnit,CPU)502、显示部件503、触摸面板504、心率检测模组505、距离传感器506、摄像头507、骨传导扬声器508、麦克风509、呼吸灯510,这些部件通过一个或多个通信总线或信号线511来通信。
应该理解的是,图示穿戴式设备仅仅是穿戴式设备的一个范例,并且穿戴式设备可以具有比图中所示出的更多的或者更少的部件,可以组合两个或更多的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
下面就本实施例提供的用于目标物识别的穿戴式设备进行详细的描述,该穿戴式设备以智能眼镜为例。
存储器501,所述存储器501可以被CPU502访问,所述存储器501可以包括高速随机存取存储器,还可以包括非易失性存储器,例如一个或多个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
显示部件503,可用于显示图像数据以及操作***的操控界面,显示部件503嵌入在智能眼镜的镜框中,镜框内部设置有内部传输线路511,该内部传输线路511和显示部件503连接。
触摸面板504,该触摸面板504设置在至少一个智能眼镜镜腿的外侧,用于获取触摸数据,触摸面板504通过内部传输线路511和CPU502连接。其中,触摸面板504可检测用户的手指滑动、点击操作,并相应的把检测到的数据传输至处理器502进行处理以生成对应的控制指令,示例性的,可以是左移指令、右移指令、上移指令、下移指令等。示例性的,显示部件503可显示处理器502传输的虚拟图像数据,该虚拟图像数据可相应的根据触摸面板504检测到的用户操作进行相应变化,具体的,可以是进行画面切换,当检测到左移指令或右移指令后相应的切换上一个或下一个虚拟图像画面;当显示部件503显示视频播放信息时,该左移指令可以是进行播放内容的回播,右移指令可以是进行播放内容的快进;当显示部件503显示的为可编辑文字内容时,该左移指令、右移指令、上移指令、下移指令可以是对光标的位移操作,即光标的位置可根据用户对触摸板的触摸操作而进行移动;当显示部件503显示的内容为游戏动画画面时,该左移指令、右移指令、上移指令、下移指令可以是对游戏中的对象进行控制,如飞机游戏中,可通过该左移指令、右移指令、上移指令、下移指令分别控制飞机的飞行方向;当显示部件503可显示不同频道的视频画面时,该左移指令、右移指令、上移指令、下移指令可进行不同频道的切换,其中,上移指令和下移指令可以是切换到预置频道(如用户使用的常用频道);当显示部件503显示静态图片时,该左移指令、右移指令、上移指令、下移指令可进行不同图片之间的切换,其中,左移指令可以是切换到上一幅图片,右移指令可以是切换至下一幅图,上移指令可以是切换到上一图集,下移指令可以是切换至下一图集。该触摸面板504还可用于对显示部件503的显示开关进行控制,示例性的,当长按压触摸面板504触摸区域时,显示部件503通电显示图像界面,当再次长按压触摸面板504触摸区域时,显示部件503断电,当显示部件503通电后,可通过在触摸面板504进行上滑和下滑操作以调节显示部件503中显示图像的亮度或分辨率。
心率检测模组505,用于测得用户的心率数据,心率指每分钟的心跳次数,该心率检测模组505设置在镜腿内侧。具体的,该心率检测模组505可以是通过电脉冲测量的方式使用干性电极获取人体心电数据,根据心电数据中的振幅峰值确定心率大小;该心率检测模组505还可以是由采用光电法测量心率的光线发射和光线接收器组成,相应的,该心率检测模组505设置在镜腿底部,人体耳廓的耳垂处。心率检测模组505采集到心率数据后可相应的发送至处理器502中进行数据处理已得到佩戴者当前的心率值,在一个实施例中,处理器502在确定出用户的心率值后,可将该心率值实时显示在显示部件503中,可选的处理器502在确定出心率值较低(如小于50)或较高(如大于100)可相应的触发智能眼镜中集成的报警器,同时将该心率值和/或生成的报警信息通过通信模块发送至服务器。
距离传感器506,可设置在镜框上,该距离传感器506用于感应人脸到镜框的距离,该距离传感器506可采用红外感应原理实现。具体的,该距离传感器506将采集的距离数据发送至处理器502,处理器502根据该距离数据控制显示部件503的亮暗。示例性的,当确定出距离传感器506采集到的距离小于5厘米时,处理器502相应的控制显示部件503处于点亮状态,当确定出距离传感器为探测到有物体靠近时,相应的控制显示部件504处于关闭状态。
呼吸灯510,可设置在镜框的边缘,当显示部件503关闭显示画面时,该呼吸灯510可根据处理器502的控制而点亮呈渐变亮暗效果。
摄像头507,可以是设置在镜框的上边框的位置,采集用户前方的图像数据的前摄像模块,还可以采集用户眼球信息的后摄像模块,也可以是二者的结合。具体的,摄像头507采集前方图像时,将采集的图像发送至处理器502识别、处理,并根据识别结果触发相应的触发事件。示例性的,当用户在家中佩戴该穿戴设备时,通过对采集的前方图像进行识别,如果识别到家具物品,则相应的查询是否存在对应的控制事件,如果存在,则相应的将该控制事件对应的控制界面显示在显示部件503中,用户可通过触摸面板504进行对应的家具物品的控制,其中该家具物品和智能眼镜通过蓝牙或无线自组网进行网络连接;当用户在户外佩戴该穿戴设备时,可相应的开启目标识别模式,该目标识别模式可用于识别特定的人,摄像头507将采集的图像发送至处理器502进行人脸识别处理,如果识别到设定的预设人脸,则相应的可通过智能眼镜集成的扬声器进行声音播报,该目标识别模式还可以用于识别不同的植物,例如,处理器502根据触摸面板504的触摸操作以记录摄像头507采集的当前图像并通过通信模块发送至服务器以进行识别,服务器对采集图像中的植物进行识别并反馈相关的植物名称、介绍至智能眼镜,并将反馈数据显示在显示部件503中。摄像头507还可以是用于采集用户眼部如眼球的图像,通过对眼球的转动的识别生成不同的控制指令,示例性的,如眼球向上转动生成上移控制指令,眼球向下转动生成下移控制指令,眼球向左转动生成左移控制指令,眼球向右转动生成右移控制指令,其中合格,显示部件503可显示处理器502传输的虚拟图像数据,该虚拟图像数据可相应的根据摄像头507检测到的用户眼球的移动变化生成的控制指令而改变,具体的,可以是进行画面切换,当检测到左移控制指令或右移控制指令后相应的切换上一个或下一个虚拟图像画面;当显示部件503显示视频播放信息时,该左移控制指令可以是进行播放内容的回播,右移控制指令可以是进行播放内容的快进;当显示部件503显示的为可编辑文字内容时,该左移控制指令、右移控制指令、上移控制指令、下移控制指令可以是对光标的位移操作,即光标的位置可根据用户对触摸板的触摸操作而进行移动;当显示部件503显示的内容为游戏动画画面时,该左移控制指令、右移控制指令、上移控制指令、下移控制指令可以是对游戏中的对象进行控制,如飞机游戏中,可通过该左移控制指令、右移控制指令、上移控制指令、下移控制指令分别控制飞机的飞行方向;当显示部件503可显示不同频道的视频画面时,该左移控制指令、右移控制指令、上移控制指令、下移控制指令可进行不同频道的切换,其中,上移控制指令和下移控制指令可以是切换到预置频道(如用户使用的常用频道);当显示部件503显示静态图片时,该左移控制指令、右移控制指令、上移控制指令、下移控制指令可进行不同图片之间的切换,其中,左移控制指令可以是切换到上一幅图片,右移控制指令可以是切换至下一幅图,上移控制指令可以是切换到上一图集,下移控制指令可以是切换至下一图集。
骨传导扬声器508,骨传导扬声器508设置在至少一个镜腿的内壁侧,用于将接收到的处理器502发送的音频信号转换为振动信号。其中,骨传导扬声器508将声音通过颅骨传递至人体内耳,通过将音频的电信号转变为振动信号传递到颅骨耳蜗内,再被听觉神经所感知。通过骨传导扬声器508作为发声装置减少了硬件结构厚度,重量更轻,同时无电磁辐射也不会受到电磁辐射的影响,并且具备抗噪声、防水以及解放双耳的有点。
麦克风509,可设置在镜框的下边框上,用于采集外部(用户、环境)声音并传输至处理器502进行处理。示例性的,麦克风509对用户发出的声音进行采集并通过处理器502进行声纹识别,如果识别为认证用户的声纹,则相应的可接收后续的语音控制,具体的,用户可发出语音,麦克风509将采集到的语音发送至处理器502进行识别以根据识别结果生成对应的控制指令,如“开机”、“关机”、“提升显示亮度”、“降低显示亮度”,处理器502后续根据该生成的控制指令执行对应的控制处理。
上述实施例中提供的目标物识别装置、存储介质及穿戴式设备可执行本申请任意实施例所提供的目标物识别方法,具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节,可参见本申请任意实施例所提供的目标物识别方法。
注意,上述仅为本申请的较佳实施例及所运用技术原理。本领域技术人员会理解,本申请不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本申请的保护范围。因此,虽然通过以上实施例对本申请进行了较为详细的说明,但是本申请不仅仅限于以上实施例,在不脱离本申请构思的情况下,还可以包括更多其他等效实施例,而本申请的范围由所附的权利要求范围决定。

Claims (8)

1.一种目标物识别方法,其特征在于,包括:
当目标物识别事件被触发时,获取摄像头采集的目标图像;其中,所述摄像头设置在穿戴式设备上;
基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别;其中,所述第一属性特征信息包括用于表征目标物类别的特征信息;
当所述目标图像中包含所述第一属性特征信息时,基于预先设定的细节特征信息,对所述目标图像进行第二特征识别;其中,所述细节特征信息包括人脸特征、虹膜特征或指纹特征;
若所述目标图像中包含所述细节特征信息,则确定所述目标图像中包含目标物;
其中,在获取摄像头采集的目标图像之前,还包括:
获取拍摄预览图像;
基于预先设定的第二属性特征信息,对所述拍摄预览图像进行第三特征识别;其中,所述第二属性特征信息属于所述第一属性特征性信息的上位特征;
所述获取摄像头采集的目标图像,包括:
当所述拍摄预览图像中包含所述第二属性特征信息时,获取摄像头采集的目标图像,其中,所述目标图像与所述拍摄预览图像包含的图像内容相同;
其中,基于预先设定的细节特征信息对所述目标图像进行第二特征识别包括:
对所述目标图像按照预设放大比例进行放大处理;
基于预先设定的细节特征信息,对放大处理后的目标图像进行第二特征识别。
2.根据权利要求1所述的方法,其特征在于,在基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别之前,还包括:
确定所述目标物的目标特征信息;
对所述目标特征信息进行分类,得到所述第一属性特征信息和所述细节特征信息。
3.根据权利要求1所述的方法,其特征在于,在确定所述目标图像中包含目标物之后,还包括:
将所述目标物的整体或局部进行放大显示;或者
将所述目标物进行闪烁显示。
4.根据权利要求1所述的方法,其特征在于,在确定所述目标图像中包含目标物之后,还包括:
执行提示操作。
5.根据权利要求4所述的方法,其特征在于,所述执行提示操作包括:
控制骨传导扬声器发送语音提示信息和/或振动器产生振动;其中,所述骨传导扬声器和所述振动器集成在所述穿戴式设备中。
6.一种目标物识别装置,其特征在于,包括:
目标图像获取模块,用于当目标物识别事件被触发时,获取摄像头采集的目标图像;其中,所述摄像头设置在穿戴式设备上;
第一特征识别模块,用于基于预先设定的第一属性特征信息,对所述目标图像进行第一特征识别;其中,所述第一属性特征信息包括用于表征目标物类别的特征信息;
第二特征识别模块,用于当所述目标图像中包含所述第一属性特征信息时,基于预先设定的细节特征信息,对所述目标图像进行第二特征识别;其中,所述细节特征信息包括人脸特征、虹膜特征或指纹特征;
目标物识别模块,用于若所述目标图像中包含所述细节特征信息,则确定所述目标图像中包含目标物;
其中,所述装置还包括:
拍摄预览图像获取模块,用于在获取摄像头采集的目标图像之前,获取拍摄预览图像;
第三特征识别模块,用于基于预先设定的第二属性特征信息,对所述拍摄预览图像进行第三特征识别;其中,所述第二属性特征信息属于所述第一属性特征性信息的上位特征;
相应的,所述目标图像获取模块,用于:
当所述拍摄预览图像中包含所述第二属性特征信息时,获取摄像头采集的目标图像,其中,所述目标图像与所述拍摄预览图像包含的图像内容相同;
其中,所述第二特征识别模块,用于:
对所述目标图像按照预设放大比例进行放大处理;
基于预先设定的细节特征信息,对放大处理后的目标图像进行第二特征识别。
7.一种包含穿戴式设备可执行指令的存储介质,其特征在于,所述穿戴式设备可执行指令在由穿戴式设备处理器执行时用于执行如权利要求1-5中任一所述的目标物识别方法。
8.一种穿戴式设备,包括:处理器、存储器以及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1-5中任一所述的目标物识别方法。
CN201811000674.6A 2018-08-30 2018-08-30 目标物识别方法、装置、存储介质及穿戴式设备 Active CN109117819B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811000674.6A CN109117819B (zh) 2018-08-30 2018-08-30 目标物识别方法、装置、存储介质及穿戴式设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811000674.6A CN109117819B (zh) 2018-08-30 2018-08-30 目标物识别方法、装置、存储介质及穿戴式设备

Publications (2)

Publication Number Publication Date
CN109117819A CN109117819A (zh) 2019-01-01
CN109117819B true CN109117819B (zh) 2021-03-02

Family

ID=64861365

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811000674.6A Active CN109117819B (zh) 2018-08-30 2018-08-30 目标物识别方法、装置、存储介质及穿戴式设备

Country Status (1)

Country Link
CN (1) CN109117819B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112083572B (zh) * 2019-06-14 2022-11-15 Oppo广东移动通信有限公司 头戴式设备支架及头戴式设备
CN112287850A (zh) * 2020-10-30 2021-01-29 维沃移动通信有限公司 物品信息识别方法、装置、电子设备和可读存储介质
CN113129334A (zh) * 2021-03-11 2021-07-16 宇龙计算机通信科技(深圳)有限公司 物体追踪方法、装置、存储介质及可穿戴电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105554373A (zh) * 2015-11-20 2016-05-04 宇龙计算机通信科技(深圳)有限公司 一种拍照处理的方法、装置以及终端
CN106778770A (zh) * 2016-11-23 2017-05-31 河池学院 一种视觉智能机器人的图像识别方法
CN107820619A (zh) * 2017-09-21 2018-03-20 达闼科技(北京)有限公司 一种分级交互决策方法、交互终端以及云端服务器

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105095848B (zh) * 2014-12-01 2019-06-21 北京云识图信息技术有限公司 目标识别的方法及***
CN205015903U (zh) * 2015-10-16 2016-02-03 南开大学 一种穿戴式人脸识别眼镜
CN107358144A (zh) * 2017-05-20 2017-11-17 深圳信炜科技有限公司 图像识别***及电子装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105554373A (zh) * 2015-11-20 2016-05-04 宇龙计算机通信科技(深圳)有限公司 一种拍照处理的方法、装置以及终端
CN106778770A (zh) * 2016-11-23 2017-05-31 河池学院 一种视觉智能机器人的图像识别方法
CN107820619A (zh) * 2017-09-21 2018-03-20 达闼科技(北京)有限公司 一种分级交互决策方法、交互终端以及云端服务器

Also Published As

Publication number Publication date
CN109117819A (zh) 2019-01-01

Similar Documents

Publication Publication Date Title
CN108052079B (zh) 设备控制方法、装置、设备控制装置及存储介质
CN109259724B (zh) 一种用眼监控方法、装置、存储介质及穿戴式设备
JP2019145108A (ja) 顔に対応する3次元アバターを用いて顔の動きが反映された3dアバターを含むイメージを生成する電子装置
CN112118380B (zh) 相机操控方法、装置、设备及存储介质
CN109254659A (zh) 穿戴式设备的控制方法、装置、存储介质及穿戴式设备
CN108712603B (zh) 一种图像处理方法及移动终端
CN109117819B (zh) 目标物识别方法、装置、存储介质及穿戴式设备
CN109145847B (zh) 识别方法、装置、穿戴式设备及存储介质
CN109116991A (zh) 穿戴式设备的控制方法、装置、存储介质及穿戴式设备
WO2020029306A1 (zh) 一种图像拍摄方法及电子设备
CN109040462A (zh) 行程提醒方法、装置、存储介质及穿戴式设备
CN109561213A (zh) 一种护眼模式控制方法、终端及计算机可读存储介质
CN109241900B (zh) 穿戴式设备的控制方法、装置、存储介质及穿戴式设备
CN109240639A (zh) 音频数据的获取方法、装置、存储介质及终端
CN109358744A (zh) 信息共享方法、装置、存储介质及穿戴式设备
CN109061903B (zh) 数据显示方法、装置、智能眼镜及存储介质
CN109819167A (zh) 一种图像处理方法、装置和移动终端
CN109189225A (zh) 显示界面调整方法、装置、穿戴式设备及存储介质
CN109067627A (zh) 家电设备控制方法、装置、穿戴式设备及存储介质
CN109257490B (zh) 音频处理方法、装置、穿戴式设备及存储介质
CN112114653A (zh) 终端设备的操控方法、装置、设备及存储介质
CN114983338A (zh) 一种皮肤检测方法和电子设备
CN109361727B (zh) 信息共享方法、装置、存储介质及穿戴式设备
CN109240498B (zh) 交互方法、装置、穿戴式设备及存储介质
CN208537830U (zh) 一种穿戴式设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant