CN102868934B - 基于智能电视的视频对象信息检索方法及装置 - Google Patents
基于智能电视的视频对象信息检索方法及装置 Download PDFInfo
- Publication number
- CN102868934B CN102868934B CN201210273566.2A CN201210273566A CN102868934B CN 102868934 B CN102868934 B CN 102868934B CN 201210273566 A CN201210273566 A CN 201210273566A CN 102868934 B CN102868934 B CN 102868934B
- Authority
- CN
- China
- Prior art keywords
- information
- visual characteristic
- video picture
- face visual
- characteristic information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 41
- 230000000007 visual effect Effects 0.000 claims abstract description 133
- 239000013598 vector Substances 0.000 claims description 20
- 238000012544 monitoring process Methods 0.000 claims description 17
- 238000013507 mapping Methods 0.000 claims description 14
- 238000005516 engineering process Methods 0.000 claims description 11
- 238000012545 processing Methods 0.000 claims description 5
- 230000004044 response Effects 0.000 abstract description 5
- 230000008569 process Effects 0.000 description 8
- 230000001815 facial effect Effects 0.000 description 6
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 210000000056 organ Anatomy 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于智能电视的视频对象信息检索方法及装置。根据本发明,接收视频图片抓取请求,响应于所述视频图片抓取请求,抓取当前播放的视频图片;识别抓取的视频图片中的人脸视觉特征信息,查询获取与所识别的人脸视觉特征信息匹配的信息并进行展示。应用本发明,可以简化检索流程、降低检索所需的时间。
Description
技术领域
本发明涉及数字电视技术,尤其涉及一种基于智能电视的视频对象信息检索方法及装置。
背景技术
随着国家三网融合的发展,电视市场逐渐成熟,越来越多的企业开始发展智能电视(DTV,DefinitionTelevision)。智能电视是指具备开放式操作***与芯片,拥有开放式应用平台,可实现双向人机交互功能,能通过自主安装应用程序实现新功能或增值服务,并可借助三网接入、3C融合等满足多样化和个性化需求的终端应用平台。
不同的用户分别有自己喜好的演员,因而,用户在观看到自己喜好的演员演出的影视剧时,希望能够通过对该演员信息的检索,了解关于该演员的一些信息,例如,该演员的近况信息、该演员曾出演的影视剧信息、与该演员演出电视剧的陌生演员信息等。
图1为现有基于智能电视的演员信息检索方法流程示意图。参见图1,该流程包括:
步骤101,接收用户输入的演员信息检索请求,触发弹出预先设置的检索界面;
本步骤中,用户在观看影视剧的过程中,如果需要了解关于该演员的一些信息,则可以通过遥控器按键向智能电视机发送演员信息检索请求,智能电视机接收到演员信息检索请求后,弹出检索界面,以供用户进行演员信息检索。
实际用用中,可以预先在遥控器上设置进行演员信息检索的按键,当用户按下该按键,自动生成演员信息检索请求,输出至智能电视机。
步骤102,接收用户输入的演员信息关键字,查询获取与该演员信息关键字匹配的信息并进行展示。
本步骤中,用户在弹出的检索界面的检索框中,输入与待检索演员相关的关键字,例如,在检索框中输入“高圆圆”,智能电视机在接收到包含高圆圆的检索关键字后,从预先存储的电子节目指南(EPG,ElectronicProgramGuide)或通过互联网上的服务器,查找与关键字高圆圆相匹配的信息,并将该匹配的信息呈现给用户。
由上述可见,现有基于智能电视的演员信息检索方法,通过输入与演员相关的关键字,查询获取与关键字匹配的信息,用户无论是用键盘还是手写输入,都需要进入检索界面,在检索框中输入关键字,操作较为繁琐,检索所需的时间较长;进一步地,需要用户熟悉演员,对于忘记或不知道名字的演员,无法直接输入其演员关键字进行检索,而需要先通过影视剧作品的名称作为关键字,查询获取演出该影视剧作品的各演员信息,从中获取需要检索的演员信息,再以该演员信息作为关键字进行检索,使得操作流程更为繁琐,检索所需的时间更长,降低了用户的业务体验。
发明内容
本发明的实施例提供一种基于智能电视的视频对象信息检索方法,简化检索流程、降低检索所需的时间。
本发明的实施例还提供一种基于智能电视的视频对象信息检索装置,简化检索流程、降低检索所需的时间。
为达到上述目的,本发明实施例提供的一种基于智能电视的视频对象信息检索方法,包括:
接收视频图片抓取请求,响应于所述视频图片抓取请求,抓取当前播放的视频图片;
识别抓取的视频图片中的人脸视觉特征信息,查询获取与所识别的人脸视觉特征信息匹配的信息并进行展示。
所述接收视频图片抓取请求包括:
预先在遥控器上设置抓取视频图片的按键;
接收用户按下抓取视频图片按键的操作指令,生成视频图片抓取请求,向智能电视机输出。
所述接收视频图片抓取请求包括:
监测到用户操作与智能电视机屏幕接触,触发弹出预先设置的功能菜单;
监测到用户操作选取功能菜单中的视频图片抓取控件,输出视频图片抓取请求。
所述功能菜单包含:视频图片抓取控件、视频对象信息检索控件以及频道切换控件。
在所述监测到用户操作与智能电视机屏幕接触之后,触发弹出预先设置的功能菜单之前,进一步包括:
判断用户操作与智能电视机屏幕接触的时间是否超过预先设置的时间阈值,如果是,触发弹出预先设置的功能菜单,否则,不作处理。
所述抓取当前播放的视频图片包括:
通过智能电视机内置的摄像头对当前播放的视频图片进行摄像;或,
通过智能电视机内安装的摄像软件对当前播放的视频图片进行摄像;或,
通过智能电视机外置的摄像头对当前播放的视频图片进行摄像;或,
获取当前播放的时间信息,从存储的视频图片帧中,获取与当前播放的时间信息相匹配的视频图片帧。
在所述抓取当前播放的视频图片后,进一步包括:
将抓取的视频图片进行展示,接收用户对视频图片的编辑,获取包含待检索对象的视频图片。
所述识别抓取的视频图片中的人脸视觉特征信息包括:
利用人脸识别技术,识别出视频图片中的人脸;
提取识别的人脸特征部分,得到人脸视觉特征信息。
所述查询获取与该人脸视觉特征信息匹配的信息包括:
预先获取包含人脸视觉特征信息与视频对象信息映射关系的人脸视觉特征信息库;
将从视频图片中得到的人脸视觉特征信息,与人脸视觉特征信息库进行匹配,获取与得到的人脸视觉特征信息相匹配的人脸视觉特征信息;
根据人脸视觉特征信息与视频对象信息的映射关系,获取该人脸视觉特征信息映射的视频对象信息;
根据获取的视频对象信息,查询获取与该视频对象信息匹配的信息并进行展示。
所述将从视频图片中得到的人脸视觉特征信息,与人脸视觉特征信息库进行匹配,获取与得到的人脸视觉特征信息相匹配的人脸视觉特征信息包括:
计算得到的人脸视觉特征信息与人脸视觉特征信息库中各人脸视觉特征信息之间的矢量距离;
如果计算得到的最小矢量距离小于预先设置的矢量阈值,选取该最小矢量距离对应的人脸视觉特征信息库中的人脸视觉特征信息,为匹配的人脸视觉特征信息。
所述查询获取与该视频对象信息匹配的信息包括:
从预先存储的电子节目指南中,获取与该视频对象信息匹配的信息;或,
通过互联网上的服务器,获取与该视频对象信息匹配的信息。
一种基于智能电视的视频对象信息检索装置,该装置包括:视频图片抓取模块、识别模块以及查询模块,其中,
视频图片抓取模块,用于接收视频图片抓取请求,并响应于所述视频图片抓取请求,抓取当前播放的视频图片;
识别模块,用于识别抓取的视频图片中的人脸视觉特征信息;
查询模块,用于查询获取与识别模块中识别的人脸视觉特征信息相匹配的信息,并进行展示。
进一步包括:
编辑模块,用于将抓取的视频图片进行展示,接收用户对视频图片的编辑,获取包含待检索对象的视频图片。
所述视频图片抓取模块包括:第一监测单元、第二监测单元以及视频图片抓取单元,其中,
第一监测单元,用于在监测到用户操作与智能电视机屏幕接触后,触发弹出预先设置的功能菜单;
第二监测单元,用于在监测到用户操作选取功能菜单中的视频图片抓取控件后,输出视频图片抓取请求。
视频图片抓取单元,用于根据接收的视频图片抓取请求,抓取当前播放的视频图片。
所述查询模块包括:人脸视觉特征信息库单元、匹配单元、视频对象信息获取单元以及查询单元,其中,
人脸视觉特征信息库单元,用于预先获取包含人脸视觉特征信息与视频对象信息映射关系的人脸视觉特征信息库;
匹配单元,用于将从视频图片中得到的人脸视觉特征信息,与人脸视觉特征信息库进行匹配,获取与得到的人脸视觉特征信息相匹配的人脸视觉特征信息;
视频对象信息获取单元,用于根据人脸视觉特征信息与视频对象信息的映射关系,获取该人脸视觉特征信息映射的视频对象信息;
查询单元,根据获取的视频对象信息,查询获取与该视频对象信息匹配的信息并进行展示。
由上述技术方案可见,本发明实施例提供的一种基于智能电视的视频对象信息检索方法及装置,接收视频图片抓取请求,抓取当前播放的视频图片;识别抓取的视频图片中的人脸视觉特征信息,查询获取与该人脸视觉特征信息匹配的信息并进行展示。这样,无需用户输入关键词信息,也无需用户记忆相关视频对象信息,简化了检索流程,降低了检索所需的时间。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,以下将对实施例或现有技术描述中所需要使用的附图作简单地介绍。显而易见地,以下描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员而言,还可以根据这些附图所示实施例得到其它的实施例及其附图。
图1为现有基于智能电视的演员信息检索方法流程示意图。
图2为本发明实施例基于智能电视的视频对象信息检索方法流程示意图。
图3为本发明实施例基于智能电视的视频对象信息检索方法具体流程示意图。
图4为本发明实施例基于智能电视的视频对象信息检索装置结构示意图。
具体实施方式
以下将结合附图对本发明各实施例的技术方案进行清楚、完整的描述,显然,所描述的实施例仅仅是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所得到的所有其它实施例,都属于本发明所保护的范围。
现有基于智能电视的演员(视频对象)信息检索方法,通过在检索框中输入关键字获取演员相关信息,输入关键字的操作较为繁琐;进一步地,对于忘记或不知道名字的演员,需要进行多次检索才能获取相关信息,操作流程更为繁琐。
人脸识别技术是指利用分析、比较人脸视觉特征信息,进行身份鉴别的计算机技术,是生物特征识别技术之一。广泛应用于考勤、门禁、信息安全、智能视频监控、海关、通行检验等领域或场景,通过采集人脸视觉特征信息,与预先存储的人脸视觉特征信息库进行匹配,从而可以确定采集的人脸视觉特征信息对应的用户信息。
本发明实施例中,考虑采用人脸识别技术,对用户观看的电视节目中待检索的视频对象进行人脸识别,自动识别出视频对象,查询获取与该视频对象匹配的信息并进行展示。因而,无需用户输入关键词信息,也无需用户记忆相关视频对象信息,简化了检索流程,降低了检索所需的时间,从而提升用户的业务体验。
较佳地,本发明实施例中,视频对象为演员。
图2为本发明实施例基于智能电视的视频对象信息检索方法流程示意图。参见图2,该流程包括:
步骤201,接收视频图片抓取请求,响应于所述视频图片抓取请求,抓取当前播放的视频图片;
本步骤中,接收视频图片抓取请求包括:
A11,预先在遥控器上设置抓取视频图片的按键;
本步骤中,与现有预先在遥控器上设置进行视频对象信息检索的按键相类似,可以通过扩展遥控器上的功能按键,增加抓取视频图片的功能按键。
A12,接收用户按下抓取视频图片按键的操作指令,生成视频图片抓取请求,向智能电视机输出。
本步骤中,用户在观看影视剧的过程中,如果需要了解关于该视频对象的一些信息,则可以通过按下遥控器上的抓取视频图片按键,向遥控器输出操作指令,遥控器根据该操作指令,生成视频图片抓取请求,向智能电视机输出,智能电视机接收该视频图片抓取请求,触发后续流程。如果用户按下遥控器上设置的进行视频对象信息检索的按键,则按照现有流程进行操作,在此不再赘述。
当然,实际应用中,接收视频图片抓取请求也可以包括:
A21,监测到用户操作与智能电视机屏幕接触,触发弹出预先设置的功能菜单;
本步骤中,如果智能电视机中设置有操作***,则可以采用该方法,与触摸屏的移动电话操作相类似,可以在智能电视机中预先设置好用户需要的功能菜单,例如,预先设置的功能菜单中包含:视频图片抓取控件、视频对象信息检索控件、频道切换控件等。
本发明实施例中,用户操作包括:用户鼠标操作、触摸笔操作以及手指操作。
用户在观看影视剧的过程中,如果需要了解关于该视频对象的一些信息,则可以通过触碰智能电视机屏幕,以表示希望对智能电视机进行操作。
实际应用中,为了有效减少用户由于误操作触碰智能电视机屏幕而导致弹出功能菜单,本发明实施例中,在监测到用户操作与智能电视机屏幕接触之后,触发弹出预先设置的功能菜单之前,进一步包括:
判断用户操作与智能电视机屏幕接触的时间是否超过预先设置的时间阈值,如果是,触发弹出预先设置的功能菜单,否则,不作处理。
本步骤中,通过设置用户操作驻留在智能电视机屏幕的时间,以确定用户是否真正需要对智能电视机进行操作,如果用户操作与智能电视机屏幕接触的时间没有超过预先设置的时间阈值,表明该用户操作为误操作,则不作处理。
A22,监测到用户操作选取功能菜单中的视频图片抓取控件,输出视频图片抓取请求。
本步骤中,用户根据弹出的功能菜单,从中选取需要执行的功能,通过点击选取的功能控件,触发生成执行该功能控件对应的请求,例如,如果用户点击功能菜单中的视频对象信息检索控件,则生成视频对象信息检索请求并输出,如果用户点击功能菜单中的视频图片抓取控件,则生成视频图片抓取请求并输出。
抓取当前播放的视频图片包括:
通过智能电视机内置的摄像头对当前播放的视频图片进行摄像;或,
通过智能电视机内安装的摄像软件对当前播放的视频图片进行摄像;或,
通过智能电视机外置的摄像头对当前播放的视频图片进行摄像;或,
获取当前播放的时间信息,从存储的视频图片帧中,获取与当前播放的时间信息相匹配的视频图片帧。
本步骤中,抓取当前播放的视频图片的方式有多种,既可以通过摄像头抓取视频图片,也可以通过摄像软件抓取视频图片,还可以根据时间信息查询并获取视频图片。通过摄像软件以及时间信息抓取视频图片的方式,还可以降低在智能电视机设置摄像头的成本。
本发明实施例中,在抓取当前播放的视频图片后,还可以进一步包括:
将抓取的视频图片进行展示,接收用户对视频图片的编辑,获取包含待检索对象的视频图片。
本步骤中,在抓取当前播放的视频图片后,当前抓取的视频图片中,可能包含有多个对象,为了减少智能电视机处理视频图片所需的资源开销,本发明实施例中,可以对抓取的视频图片进行编辑,使编辑后的视频图片尽量只包含待检索对象,例如,只包含待检索对象的人脸部分。
步骤202,识别抓取的视频图片中的人脸视觉特征信息,在数据库中进行查询获取与所识别的人脸视觉特征信息匹配的信息并进行展示。
本步骤中,识别抓取的视频图片中的人脸视觉特征信息包括:
A31,利用人脸识别技术,识别出视频图片中的人脸;
本步骤中,基于人的脸部特征进行识别,可以采用区域特征分析算法进行识别。关于人脸识别技术,为现有技术,具体可参见相关技术文献,在此不再赘述。
A32,提取识别的人脸特征部分,得到人脸视觉特征信息。
本步骤中,通过提取特征区域中的人脸特征部分(人脸纹理特征),进行数据化处理,得到人脸视觉特征信息。
人脸视觉特征信息包括:人脸的轮廓特征点信息以及面部器官的特征点信息等,其中,面部器官的特征点信息可以包括:左眼特征点信息、右眼特征点信息、耳朵特征点信息、嘴特征点信息以及鼻特征点信息。本发明实施例中,左眼特征点信息可以是左眼的位置信息。
在数据库中进行查询获取与所识别的人脸视觉特征信息匹配的信息包括:
A41,预先获取包含人脸视觉特征信息与视频对象信息映射关系的人脸视觉特征信息库即数据库;
本步骤中,人脸视觉特征信息库可以由各运营商的相关技术人员,通过人脸识别技术以及训练方法,获取各视频对象的人脸视觉特征信息,并建立人脸视觉特征信息与视频对象信息的映射关系,形成人脸视觉特征信息库。
A42,将从视频图片中得到的人脸视觉特征信息,与人脸视觉特征信息库进行匹配,获取与得到的人脸视觉特征信息相匹配的人脸视觉特征信息;
本步骤中,匹配的方法可以是计算得到的人脸视觉特征信息与人脸视觉特征信息库中各人脸视觉特征信息之间的矢量距离,如果计算得到的最小矢量距离小于预先设置的矢量阈值,选取该最小矢量距离对应的人脸视觉特征信息库中的人脸视觉特征信息,为匹配的人脸视觉特征信息。
矢量距离可以是欧氏距离,也可以是两个矢量之间的内积距离。
实际应用中,如果经过匹配,人脸视觉特征信息库中不存在与得到的人脸视觉特征信息相匹配的人脸视觉特征信息,则可以进一步向用户展示匹配失败信息,用户根据展示的匹配失败信息,可以通过现有发送视频对象信息检索请求的方式重新进行检索。
A43,根据人脸视觉特征信息与视频对象信息的映射关系,获取该人脸视觉特征信息映射的视频对象信息;
本步骤中,在人脸视觉特征信息库中,获取匹配的人脸视觉特征信息,根据人脸视觉特征信息库中人脸视觉特征信息与视频对象信息的映射关系,可以获取该匹配的人脸视觉特征信息映射的视频对象信息。
A44,根据获取的视频对象信息,查询获取与该视频对象信息匹配的信息并进行展示。
本步骤中,查询获取与该视频对象信息匹配的信息包括:
从预先存储的电子节目指南中,获取与该视频对象信息匹配的信息;或,
通过互联网上的服务器,获取与该视频对象信息匹配的信息。
图3为本发明实施例基于智能电视的视频对象信息检索方法具体流程示意图。参见图3,以视频对象为演员为例,该流程包括:
步骤301,接收操作指令,抓取当前视频图片;
本步骤中,智能电视机根据用户下发的操作指令,抓取当前播放的视频图片并存储。
步骤302,在抓取的视频图片中识别和提取人脸特征部分信息;
本步骤中,利用人脸识别技术,识别出视频图片中的人脸,然后,通过预先设置的提取算法,提取出人脸特征部分信息。
步骤303,将所述提取的人脸特征部分信息与数据库中存储的演员脸部特征信息进行匹配;
步骤304,确定所述数据库中存储有与所述提取的人脸特征部分信息相匹配的演员脸部特征信息,查表得出该演员的姓名;
本步骤中,如果提取的人脸特征部分信息与数据库中存储的某一演员脸部特征信息相符,则可以通过查表,得出该演员的姓名。
步骤305,以该演员的姓名为关键字进行检索,获取与该演员的姓名相匹配的信息。
本步骤中,可在电子节目指南中进行检索,也可通过互联网上的服务器进行检索。
这样,本发明实施例的视频对象信息检索方法,通过视频图片中的人脸识别,获取视频对象的脸部数据,将脸部数据同步到云端,进行视频对象的识别,非常适合于在看电视时使用;进一步地,可以通过EPG或者互联网***平台进行更新或者添加视频对象的脸部数据,从而实现根据视频对象面部特征与姓名的关联,在观看影视剧节目时,可以快速地进行视频对象信息查找;而且,本发明通过抓取当前视频图片,并自动识别视频对象身份,进一步将搜索得到的与该视频对象有关的信息呈现在电视屏幕上,因此,有效地提高了视频对象信息获取的效率。
图4为本发明实施例基于智能电视的视频对象信息检索装置结构示意图。参见图4,该装置包括:视频图片抓取模块、识别模块以及查询模块,其中,
视频图片抓取模块,用于接收视频图片抓取请求,并响应于所述视频图片抓取请求,抓取当前播放的视频图片;
识别模块,用于识别抓取的视频图片中的人脸视觉特征信息;
查询模块,用于查询获取与识别模块中识别的人脸视觉特征信息相匹配的信息,并进行展示。
较佳地,该装置进一步包括:
编辑模块,用于将抓取的视频图片进行展示,接收用户对视频图片的编辑,获取包含待检索对象的视频图片。
其中,
视频图片抓取模块包括:第一监测单元、第二监测单元以及视频图片抓取单元(图中未示出),其中,
第一监测单元,用于在监测到用户操作与智能电视机屏幕接触后,触发弹出预先设置的功能菜单;
第二监测单元,用于在监测到用户操作选取功能菜单中的视频图片抓取控件后,输出视频图片抓取请求。
视频图片抓取单元,用于根据接收的视频图片抓取请求,抓取当前播放的视频图片。
查询模块包括:人脸视觉特征信息库单元、匹配单元、视频对象信息获取单元以及查询单元(图中未示出),其中,
人脸视觉特征信息库单元,用于预先获取包含人脸视觉特征信息与视频对象信息映射关系的人脸视觉特征信息库;
匹配单元,用于将从视频图片中得到的人脸视觉特征信息,与人脸视觉特征信息库进行匹配,获取与得到的人脸视觉特征信息相匹配的人脸视觉特征信息;
视频对象信息获取单元,用于根据人脸视觉特征信息与视频对象信息的映射关系,获取该人脸视觉特征信息映射的视频对象信息;
查询单元,根据获取的视频对象信息,查询获取与该视频对象信息匹配的信息并进行展示。
显然,本领域技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若对本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也包含这些改动和变型在内。
Claims (10)
1.一种基于智能电视的视频对象信息检索方法,其特征在于,包括:
接收智能电视上配置的功能菜单中的视频图片抓取控件所生成的视频图片抓取请求,响应于所述视频图片抓取请求,按照当前播放的时间信息获取与该时间信息匹配的视频图片帧来抓取当前播放的视频图片;
识别抓取的视频图片中的人脸视觉特征信息,查询获取与所识别的人脸视觉特征信息匹配的信息并进行展示;
其中,所述识别抓取的视频图片中的人脸视觉特征信息包括:利用人脸识别技术,识别出视频图片中的人脸;提取识别的人脸特征部分,得到人脸视觉特征信息;
所述查询获取与所识别的人脸视觉特征信息匹配的信息包括:
预先获取包含人脸视觉特征信息与视频对象信息映射关系的人脸视觉特征信息库;
将从视频图片中得到的人脸视觉特征信息,与人脸视觉特征信息库进行匹配,获取与得到的人脸视觉特征信息相匹配的人脸视觉特征信息;
根据人脸视觉特征信息与视频对象信息的映射关系,获取该人脸视觉特征信息映射的视频对象信息;
根据获取的视频对象信息,查询获取与该视频对象信息匹配的信息并进行展示;
所述将从视频图片中得到的人脸视觉特征信息,与人脸视觉特征信息库进行匹配,获取与得到的人脸视觉特征信息相匹配的人脸视觉特征信息包括:
计算得到的人脸视觉特征信息与人脸视觉特征信息库中各人脸视觉特征信息之间的矢量距离;矢量距离是欧氏距离或内积距离;
如果计算得到的最小矢量距离小于预先设置的矢量阈值,选取该最小矢量距离对应的人脸视觉特征信息库中的人脸视觉特征信息,为匹配的人脸视觉特征信息。
2.根据权利要求1所述的方法,其中,所述智能电视上配置的功能菜单中的视频图片抓取控件所生成的视频图片抓取请求具体为:
监测到用户操作与智能电视机屏幕接触,触发弹出预先设置的功能菜单;
监测到用户操作选取功能菜单中的视频图片抓取控件,输出视频图片抓取请求。
3.根据权利要求2所述的方法,其中,所述功能菜单包含:视频图片抓取控件、视频对象信息检索控件以及频道切换控件。
4.根据权利要求3所述的方法,其中,在所述监测到用户操作与智能电视机屏幕接触之后,触发弹出预先设置的功能菜单之前,进一步包括:
判断用户操作与智能电视机屏幕接触的时间是否超过预先设置的时间阈值,如果是,触发弹出预先设置的功能菜单,否则,不作处理。
5.根据权利要求1至4任一项所述的方法,其中,所述按照当前播放的时间信息获取与该时间信息匹配的视频图片帧来抓取当前播放的视频图片包括:
获取当前播放的时间信息,从存储的视频图片帧中,获取与当前播放的时间信息相匹配的视频图片帧。
6.根据权利要求5所述的方法,其中,在所述抓取当前播放的视频图片后,进一步包括:
将抓取的视频图片进行展示,接收用户对视频图片的编辑,获取包含待检索对象的视频图片。
7.根据权利要求1所述的方法,其中,所述查询获取与该视频对象信息匹配的信息包括:
从预先存储的电子节目指南中,获取与该视频对象信息匹配的信息;或,
通过互联网上的服务器,获取与该视频对象信息匹配的信息。
8.一种基于智能电视的视频对象信息检索装置,其特征在于,该装置包括:视频图片抓取模块、识别模块以及查询模块,其中,
视频图片抓取模块,用于接收智能电视上配置的功能菜单中的视频图片抓取控件所生成的视频图片抓取请求,并响应所述视频图片抓取请求,按照当前播放的时间信息获取与该时间信息匹配的视频图片帧来抓取当前播放的视频图片;
识别模块,用于识别抓取的视频图片中的人脸视觉特征信息;
查询模块,用于查询获取与识别模块中识别的人脸视觉特征信息相匹配的信息,并进行展示;
其中,所述查询模块包括:人脸视觉特征信息库单元、匹配单元、视频对象信息获取单元以及查询单元,其中,
人脸视觉特征信息库单元,用于预先获取包含人脸视觉特征信息与视频对象信息映射关系的人脸视觉特征信息库;
匹配单元,用于将从视频图片中得到的人脸视觉特征信息,与人脸视觉特征信息库进行匹配,获取与得到的人脸视觉特征信息相匹配的人脸视觉特征信息;
视频对象信息获取单元,用于根据人脸视觉特征信息与视频对象信息的映射关系,获取该人脸视觉特征信息映射的视频对象信息;
查询单元,根据获取的视频对象信息,查询获取与该视频对象信息匹配的信息并进行展示;
所述将从视频图片中得到的人脸视觉特征信息,与人脸视觉特征信息库进行匹配,获取与得到的人脸视觉特征信息相匹配的人脸视觉特征信息包括:
计算得到的人脸视觉特征信息与人脸视觉特征信息库中各人脸视觉特征信息之间的矢量距离;矢量距离是欧氏距离或内积距离;
如果计算得到的最小矢量距离小于预先设置的矢量阈值,选取该最小矢量距离对应的人脸视觉特征信息库中的人脸视觉特征信息,为匹配的人脸视觉特征信息。
9.根据权利要求8所述的装置,其特征在于,进一步包括:
编辑模块,用于将抓取的视频图片进行展示,接收用户对视频图片的编辑,获取包含待检索对象的视频图片。
10.根据权利要求8或9所述的装置,其特征在于,所述视频图片抓取模块包括:
视频图片抓取单元,用于根据接收的视频图片抓取请求,抓取当前播放的视频图片。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210273566.2A CN102868934B (zh) | 2012-08-01 | 2012-08-01 | 基于智能电视的视频对象信息检索方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210273566.2A CN102868934B (zh) | 2012-08-01 | 2012-08-01 | 基于智能电视的视频对象信息检索方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102868934A CN102868934A (zh) | 2013-01-09 |
CN102868934B true CN102868934B (zh) | 2016-06-29 |
Family
ID=47447491
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210273566.2A Active CN102868934B (zh) | 2012-08-01 | 2012-08-01 | 基于智能电视的视频对象信息检索方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102868934B (zh) |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9247309B2 (en) * | 2013-03-14 | 2016-01-26 | Google Inc. | Methods, systems, and media for presenting mobile content corresponding to media content |
US9705728B2 (en) | 2013-03-15 | 2017-07-11 | Google Inc. | Methods, systems, and media for media transmission and management |
CN103428537B (zh) * | 2013-07-30 | 2017-03-01 | 小米科技有限责任公司 | 一种视频处理方法和装置 |
CN103826142A (zh) * | 2013-11-15 | 2014-05-28 | 安徽科大讯飞信息科技股份有限公司 | 基于实时节目内容定制推送方法及*** |
CN104754413B (zh) * | 2013-12-30 | 2020-04-21 | 北京三星通信技术研究有限公司 | 基于图像搜索识别电视信号并推荐信息的方法和设备 |
US9491522B1 (en) | 2013-12-31 | 2016-11-08 | Google Inc. | Methods, systems, and media for presenting supplemental content relating to media content on a content interface based on state information that indicates a subsequent visit to the content interface |
US10002191B2 (en) | 2013-12-31 | 2018-06-19 | Google Llc | Methods, systems, and media for generating search results based on contextual information |
US9456237B2 (en) | 2013-12-31 | 2016-09-27 | Google Inc. | Methods, systems, and media for presenting supplemental information corresponding to on-demand media content |
CN104881407A (zh) * | 2014-02-27 | 2015-09-02 | 福州瑞芯微电子有限公司 | 基于特征识别的信息推荐***及方法 |
CN103870559A (zh) * | 2014-03-06 | 2014-06-18 | 海信集团有限公司 | 一种基于播放的视频获取信息的方法及设备 |
CN104063512A (zh) * | 2014-07-10 | 2014-09-24 | 福州瑞芯微电子有限公司 | 基于特征识别的信息推荐装置和方法 |
CN104184923B (zh) * | 2014-08-27 | 2018-01-09 | 天津三星电子有限公司 | 用于视频中检索人物信息的***和方法 |
CN104391711B (zh) * | 2014-08-28 | 2018-05-29 | 小米科技有限责任公司 | 一种设置屏幕保护的方法及装置 |
CN104602128A (zh) * | 2014-12-31 | 2015-05-06 | 北京百度网讯科技有限公司 | 视频处理方法和视频处理装置 |
CN104967889A (zh) * | 2015-06-30 | 2015-10-07 | 小米科技有限责任公司 | 控制智能电视进行视频信息处理的方法及装置 |
CN106528568A (zh) * | 2015-09-11 | 2017-03-22 | 中兴通讯股份有限公司 | 一种信息提供方法及*** |
CN105260473A (zh) * | 2015-10-28 | 2016-01-20 | 汤占宇 | 一种信息查询***及方法 |
CN106131704A (zh) * | 2016-08-30 | 2016-11-16 | 天脉聚源(北京)传媒科技有限公司 | 一种节目搜索的方法和装置 |
CN107124569B (zh) * | 2016-09-12 | 2018-05-22 | 平安科技(深圳)有限公司 | 视频通话调节方法和装置 |
CN107480236B (zh) * | 2017-08-08 | 2021-03-26 | 深圳创维数字技术有限公司 | 一种信息查询方法、装置、设备和介质 |
CN108388397A (zh) * | 2018-02-13 | 2018-08-10 | 维沃移动通信有限公司 | 一种信息处理方法及终端 |
CN109919105B (zh) * | 2019-03-11 | 2022-04-05 | 四川长虹电器股份有限公司 | 一种基于智能电视画面的对象识别方法和*** |
CN114153342A (zh) * | 2020-08-18 | 2022-03-08 | 深圳市万普拉斯科技有限公司 | 视觉信息展示方法、装置、计算机设备和存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101291400A (zh) * | 2008-05-14 | 2008-10-22 | 深圳创维-Rgb电子有限公司 | 一种通过屏幕指示用户操作遥控器的电视机 |
CN101957911A (zh) * | 2010-09-29 | 2011-01-26 | 汉王科技股份有限公司 | 一种人脸识别方法及*** |
CN102012919A (zh) * | 2010-11-26 | 2011-04-13 | 深圳市同洲电子股份有限公司 | 电视截屏图像关联搜索方法、装置及数字电视终端 |
CN102509235A (zh) * | 2011-10-31 | 2012-06-20 | 福州博远无线网络科技有限公司 | 基于智能手持设备的移动视频的购物交互方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100502461C (zh) * | 2005-05-16 | 2009-06-17 | 日本胜利株式会社 | 电子设备 |
EP1772816A1 (en) * | 2005-10-09 | 2007-04-11 | Omron Corporation | Apparatus and method for detecting particular subject |
US7925112B2 (en) * | 2007-02-28 | 2011-04-12 | Honeywell International Inc. | Video data matching using clustering on covariance appearance |
CN101917566A (zh) * | 2010-09-04 | 2010-12-15 | 冠捷显示科技(厦门)有限公司 | 基于人脸分析的电视智能控制方法 |
-
2012
- 2012-08-01 CN CN201210273566.2A patent/CN102868934B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101291400A (zh) * | 2008-05-14 | 2008-10-22 | 深圳创维-Rgb电子有限公司 | 一种通过屏幕指示用户操作遥控器的电视机 |
CN101957911A (zh) * | 2010-09-29 | 2011-01-26 | 汉王科技股份有限公司 | 一种人脸识别方法及*** |
CN102012919A (zh) * | 2010-11-26 | 2011-04-13 | 深圳市同洲电子股份有限公司 | 电视截屏图像关联搜索方法、装置及数字电视终端 |
CN102509235A (zh) * | 2011-10-31 | 2012-06-20 | 福州博远无线网络科技有限公司 | 基于智能手持设备的移动视频的购物交互方法 |
Also Published As
Publication number | Publication date |
---|---|
CN102868934A (zh) | 2013-01-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102868934B (zh) | 基于智能电视的视频对象信息检索方法及装置 | |
JP5358083B2 (ja) | 人物画像検索装置及び画像検索装置 | |
KR101783115B1 (ko) | 명령 처리를 위한 텔레스트레이션 시스템 | |
JP7281449B2 (ja) | 個人向けのガイドや、コンテンツ及びサービスや、ターゲットを絞った広告を、意図的なユーザ登録なしで提供するためのユーザ認識方法および装置 | |
CN105122242A (zh) | 用于呈现与媒体内容相对应的方法、***以及介质 | |
EP3591651A1 (en) | Method and apparatus for providing image contents | |
US20130124551A1 (en) | Obtaining keywords for searching | |
KR101846756B1 (ko) | Tv 프로그램 식별 방법, 장치, 단말기, 서버, 및 시스템 | |
EP3188034A1 (en) | Display terminal-based data processing method | |
US10175863B2 (en) | Video content providing scheme | |
JP2021034003A (ja) | 人物識別方法、装置、電子デバイス、記憶媒体、及びプログラム | |
CN104505091A (zh) | 人机语音交互方法及*** | |
KR20150112708A (ko) | 디스플레이 장치 및 그의 동작 방법 | |
CN111343512B (zh) | 信息获取方法、显示设备及服务器 | |
US11763720B2 (en) | Methods, systems, and media for detecting a presentation of media content on a display device | |
CN112672208B (zh) | 视频播放方法、装置、电子设备、服务器及*** | |
US20130147705A1 (en) | Display apparatus and control method thereof | |
CN111950425B (zh) | 对象获取方法、装置、客户端、服务器、***和存储介质 | |
CN105653171A (zh) | 基于指纹识别的终端控制方法、终端控制装置及终端 | |
WO2022033228A1 (zh) | 一种数据处理方法及装置 | |
CN111010598A (zh) | 一种截屏应用方法及智能电视 | |
KR102298066B1 (ko) | 영상 콘텐츠 제공 방법 및 영상 콘텐츠 제공 장치 | |
KR20130076977A (ko) | 방송 수신 장치 및 그 제어 방법 | |
CN112052784A (zh) | 物品的搜索方法、装置、设备及计算机可读存储介质 | |
CN109769130B (zh) | 基于收视大数据的遥控器个性化设置方法及*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C41 | Transfer of patent application or patent right or utility model | ||
TR01 | Transfer of patent right |
Effective date of registration: 20170110 Address after: 266100 Shandong Province, Qingdao city Laoshan District Songling Road No. 399 Patentee after: Poly Polytron Technologies Inc Address before: 266061 Laoshan, Qingdao province Hongkong District No. East Road, room 248, room 131 Patentee before: Hisense Media Networks Co., Ltd. |