CN113987602A - 图像数据的处理方法和电子设备 - Google Patents
图像数据的处理方法和电子设备 Download PDFInfo
- Publication number
- CN113987602A CN113987602A CN202111265900.5A CN202111265900A CN113987602A CN 113987602 A CN113987602 A CN 113987602A CN 202111265900 A CN202111265900 A CN 202111265900A CN 113987602 A CN113987602 A CN 113987602A
- Authority
- CN
- China
- Prior art keywords
- image
- target
- user
- processing
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/70—Protecting specific internal or peripheral components, in which the protection of a component leads to protection of the entire computer
- G06F21/82—Protecting input, output or interconnection devices
- G06F21/84—Protecting input, output or interconnection devices output devices, e.g. displays or monitors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
- G06F21/6245—Protecting personal data, e.g. for financial or medical purposes
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Bioethics (AREA)
- Medical Informatics (AREA)
- Databases & Information Systems (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请公开了一种图像数据的处理方法和电子设备,属于人工智能领域。该方法包括:获取利用摄像头采集到的第一图像,该第一图像包括目标用户的脸部图像区域;在该第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对该第一图像进行隐私处理,或者输出提示信息。
Description
技术领域
本申请属于人工智能领域,具体涉及一种图像数据的处理方法和电子设备。
背景技术
随着人工智能领域的快速发展,某些应用程序在业务处理过程中,需要调用相机应用以调用摄像头采集目标用户的人脸图像数据,进而基于该人脸图像数据进行相应的业务处理,例如,基于该人脸图像数据进行人脸识别、视频会议等业务处理。
但是,某些应用程序在业务处理过程中,可能会存在用户处于隐私暴露的环境中而不自知,进而导致用户的隐私数据泄露的问题。
发明内容
本申请实施例的目的是提供一种图像数据的处理方法和电子设备,能够解决现有技术中存在用户的隐私数据泄露的问题。
第一方面,本申请实施例提供了一种图像数据的处理方法,该方法包括:
获取利用摄像头采集到的第一图像,所述第一图像包括目标用户的脸部图像区域;
在所述第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对所述第一图像进行隐私处理,或者输出提示信息。
第二方面,本申请实施例提供了一种电子设备,该电子设备包括:
第一图像获取模块,用于获取利用摄像头采集到的第一图像,所述第一图像包括目标用户的脸部图像区域;
第一图像处理模块,用于在所述第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对所述第一图像进行隐私处理,或者输出提示信息。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括:处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的图像数据的处理方法的步骤。
第四方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的图像数据的处理方法。
本申请实施例中,先获取利用摄像头采集到的第一图像,该第一图像包括目标用户的脸部图像区域,并在该第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对该第一图像进行隐私处理,或者输出提示信息,即通过将摄像头实际采集到的第一图像与该第一图像在目标应用的界面上实际显示的内容进行匹配,若匹配度小于或等于目标值,则摄像头实际采集到的第一图像不能完整地显示在该目标应用的界面上,且该第一图像中未在目标应用的界面上显示的部分可能包含用户的隐私数据,因此会存在用户的隐私数据被泄露而不自知的风险,因此在将该第一图像传输至目标应用之前,需要对该第一图像中未在目标应用的界面上显示的部分进行隐私处理,从而得到不包含用户隐私数据的图像,或者输出提示信息,这样能够减少因第一图像中未在目标应用的界面上显示的部分存在用户隐私数据而导致用户隐私数据泄露的风险,从而实现根源上避免了目标用户的隐私数据的泄露,达到了保护用户隐私数据的效果,以及提升了目标应用在调用摄像头进行拍摄时所拍摄的图像数据的安全性。
附图说明
图1是本申请实施例提供的图像数据的处理方法的第一种流程示意图;
图2是本申请实施例提供的图像数据的处理方法的第二种流程示意图;
图3是本申请实施例提供的图像数据的处理方法的第一种图像隐私保护处理的实现原理示意图;
图4是本申请实施例提供的图像数据的处理方法的第二种图像隐私保护处理的实现原理示意图;
图5是本申请实施例提供的图像数据的处理方法的第三种流程示意图;
图6是本申请实施例提供的电子设备的第一种模块组成示意图;
图7是本申请实施例提供的电子设备的第二种模块组成示意图;
图8是本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的图像数据的处理方法和电子设备进行详细地说明。
图1为本申请实施例提供的图像数据的处理方法的第一种流程示意图,图1中的方法能够由电子设备执行,特别是电子设备中的处理器,如图1所示,该方法至少包括以下步骤:
S102,获取利用摄像头采集到的第一图像,该第一图像包括目标用户的脸部图像区域;
其中,在获取利用摄像头采集到的第一图像之前,还包括:目标应用调用相机应用,以调用摄像头采集第一图像。
具体的,电子设备在检测到用户针对目标应用的指定业务的访问请求的情况下,若当前业务处理节点需要采集用户的图像数据,则调用相机应用,以调用摄像头采集用户的第一图像;例如,用户使用支付应用时,若检测到当前业务处理节点为人脸识别,则调用相机应用,以调用摄像头采集用户的第一图像;又如,用户使用视频分享应用程序时,若检测到当前业务处理节点为视频创作拍摄,则调用相机应用,以调用摄像头采集用户的第一图像。
进一步的,考虑到目标应用的图像显示方式的不同,会导致第一图像在目标应用的界面中可能为部分显示,即目标应用调用摄像头采集到的第一图像没有完整显示在上述界面中,并且由于第一图像中未在目标应用的界面上显示的部分可能包含用户的隐私数据,因此,如果直接将该第一图像传输至目标应用,可能存在用户由于观测不到完整的第一图像而导致的用户隐私数据被泄露的风险,因此需要对第一图像进行隐私处理,或输出提示信息,基于此,在目标应用获取到第一图像之前,由电子设备中的处理器获取利用摄像头采集到的第一图像,该第一图像可以包括摄像头所采集的目标用户的脸部图像区域、以及除该脸部图像区域之外的其他图像区域,该其他图像区域可以包括除目标用户人脸以外的其他用户脸部图像区域、目标用户的非脸部图像区域、其他用户的非脸部图像区域、目标用户当前所处环境的图像区域中至少一项;
S104,在上述第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对上述第一图像进行隐私处理,或者输出提示信息。
具体的,若摄像头采集到的第一图像与目标应用的界面的显示内容匹配度小于或等于目标值,则确定目标应用的显示方式为图像部分区域显示,即第一图像在目标应用的界面中为部分显示;若摄像头采集到的第一图像与界面的显示内容匹配度大于目标值,则确定目标应用的显示方式为图像全部区域显示,即第一图像在目标应用的界面中全部显示。
具体的,针对摄像头采集到的第一图像与界面的显示内容匹配度小于或等于目标值,即目标应用的图像显示方式为图像部分区域显示的情况,电子设备中的处理器在获取利用摄像头采集到的第一图像之后,需要对该第一图像进行隐私处理,或者输出提示信息;其中,上述对第一图像进行隐私处理的方式可以为对除目标用户的脸部图像区域之外的其他图像区域中的目标图像区域进行图像替换处理,即将目标图像区域替换或填充为可公开的数据,例如,预设图像(可以是统一颜色的背景,也可以是其他背景),进而得到不包含目标用户的隐私数据的第二图像,再传输至目标应用;上述输出提示信息的方式可以为在界面中向用户显示提示信息、语音提醒、震动等方式,以提示目标用户调整位姿,例如,以悬浮窗的形式,显示第一图像(即摄像头真实拍摄到的画面内容),以提示目标用户基于该第一图像调整位姿,即基于实时显示在悬浮窗上真实的拍摄画面调整位姿,以确保后续采集到的图像中不包含用户的隐私数据,具体的,可以提示用户继续使用相机,并调整位姿、或者提示用户暂时终止使用相机功能。
本申请实施例中,通过将摄像头实际采集到的第一图像与该第一图像在目标应用的界面上实际显示的内容进行匹配,若匹配度小于或等于目标值,则摄像头实际采集到的第一图像不能完整地显示在该目标应用的界面上,且该第一图像中未在目标应用的界面上显示的部分可能包含用户的隐私数据,因此会存在用户的隐私数据被泄露而不自知的风险,因此在将该第一图像传输至目标应用之前,需要对该第一图像中未在目标应用的界面上显示的部分进行隐私处理,从而得到不包含用户隐私数据的图像,或者输出提示信息,这样能够减少因第一图像中未在目标应用的界面上显示的部分存在用户隐私数据而导致用户隐私数据泄露的风险,从而实现根源上避免了目标用户的隐私数据的泄露,达到了保护用户隐私数据的效果,以及提升了目标应用在调用摄像头进行拍摄时所拍摄的图像数据的安全性。
其中,考虑到对第一图像进行隐私处理得到的第二图像是不包含用户隐私数据的第二图像,因此可以直接将该第二图像传输至目标应用,基于此,如图2所示,上述步骤S104中,在对上述第一图像进行隐私处理,或者输出提示信息之后,还包括:
S106,将基于第一图像得到的第二图像传输至目标应用,该目标应用基于该第二图像进行相应的业务处理。
具体的,本申请提供的图像数据的处理方法的具体应用场景可以是:人脸识别、视频会议、短视频发布等需要使用目标应用进行相应的业务处理的同时,还需要调用相机应用,以调用摄像头进行拍摄的场景;其中,目标应用和相机应用是不同的应用;
在具体实施时,针对人脸识别的应用场景,目标应用需要基于摄像头所采集的目标用户的脸部图像区域对目标用户进行人脸识别;针对视频会议的应用场景,目标应用需要将摄像头所采集的目标用户的人像数据在显示界面(显示屏)上显示;针对短视频发布的应用场景,目标应用需要将摄像头所采集的目标用户的短视频数据在显示界面(显示屏)上显示。
在具体实施时,以人脸识别场景为例,由于目标应用对目标用户进行人脸识别时只对目标用户的脸部数据进行识别,因此,目标应用的显示界面上只显示摄像头所采集的第一图像中目标用户的脸部图像区域,即第一图像与界面的显示内容匹配度小于或等于目标值(即第一图像在目标应用的显示界面上部分显示),但摄像头所采集的第一图像不仅包括目标用户的脸部图像区域,还包括除目标用户的脸部图像区域之外的其他图像区域,因此,目标用户将观测不到由摄像头采集并传输至目标应用、可能包含目标用户隐私数据的其他图像区域,进而导致目标用户隐私数据的泄露;基于此,为了保护目标用户的隐私数据,在目标应用获取到第一图像之前,首先由电子设备的处理器获取利用摄像头采集到的目标用户的第一图像(即目标用户的脸部图像区域和除目标用户的脸部图像区域之外的其他图像区域),然后由处理器对上述第一图像中目标用户的其他图像区域进行隐私处理,进而得到第二图像,并将基于对第一图像进行隐私处理得到的第二图像传输至目标应用,即将上述目标用户的脸部图像区域和隐私处理后的其他图像区域的组合确定为第二图像,再将该第二图像传输至目标应用,以使该目标应用基于该第二图像中目标用户的脸部图像区域对目标用户进行人脸识别;或者输出提示信息,并以悬浮窗的形式,显示第一图像(即摄像头真实拍摄到的画面内容),以提示目标用户基于该第一图像调整位姿,即基于实时显示在悬浮窗上真实的拍摄画面调整位姿,以确保后续采集到的图像中不包含用户的隐私数据,进而以确保后续采集到的图像中不包含用户的隐私数据。
本申请中由于处理器预先将摄像头采集并传输至目标应用、可能包含目标用户隐私数据的、除目标用户的脸部图像区域之外的其他图像区域进行隐私保护处理,因此最后传输至目标应用的其他图像区域中不包含目标用户的隐私数据,从而达到从根源上避免用户隐私数据的泄露的目的,进而实现保护用户隐私数据的作用。
其中,考虑到对第一图像进行隐私处理时,可以是将该第一图像中包含隐私数据的目标图像区域替换为可公开的数据,基于此,上述步骤S104中,对上述第一图像进行隐私处理,具体包括:对第一图像中除目标用户的脸部图像区域之外的其他图像区域中的目标图像区域进行图像替换处理;
具体的,针对在第一图像与界面的显示内容匹配度小于或等于目标值的情况下(即在目标应用的图像显示方式为图像部分区域显示),首先获取利用摄像头采集到的目标用户的第一图像,然后对上述第一图像除所述目标用户的脸部图像区域之外的其他图像区域中包含目标用户隐私数据的目标图像区域进行图像替换处理,将目标用户的隐私数据替换为可公开的数据,进而得到不包含目标用户隐私数据的第二图像;
进一步的,可以将上述不包含目标用户隐私数据的第二图像传输至目标应用,基于此,将基于上述第一图像得到的第二图像传输至目标应用,具体包括:基于图像替换后的其他图像区域和目标用户的脸部图像区域,生成目标用户的第二图像;将该第二图像传输至目标应用。
其中,考虑到除了可以对第一图像进行隐私处理,还可以输出提示信息,以使目标用户基于该提示信息进行位姿调整,以确保后续摄像头采集到的图像中不包含用户的隐私数据,基于此,上述步骤S104中,输出提示信息,具体包括:以悬浮窗的形式,显示第一图像,以提示目标用户基于该第一图像调整位姿。
具体的,在电子设备的显示屏上按照目标应用的原图像显示方式的同时,还可以以缩略图或者悬浮窗等形式完整显示摄像头实际拍摄的图像画面,(即在目标应用的显示界面上不仅按照目标应用的原图像显示方式部分显示第一图像,还在缩略图或者悬浮窗完整显示第一图像),基于此,可以提示目标用户基于完整显示的第一图像调整位姿,以便使得用户通过位姿调整来确保摄像头的图像拍摄范围不会包含隐私数据。
进一步的,在目标用户确定通过位姿调整后第一图像中不包含用户隐私数据的情况下,可以将摄像头采集到的图像传输至目标应用,基于此,在输出提示信息之后,还包括:在接收到目标用户位姿调整结束的确认输入的情况下,获取利用摄像头采集到的第三图像;将该第三图像传输至目标应用。
具体的,接收目标用户基于实时观测到的完整显示的第一图像所反馈的目标用户位姿调整结束的确认输入(即接收目标用户基于实时观测到的完整显示的第一图像所反馈的第一图像中不包含目标用户隐私数据的确认输入),基于该确认输入,获取利用摄像头所采集的目标用户进行位姿调整后的第三图像,由于该第三图像中不包含目标用户的隐私数据,即基于位姿调整后的第一图像,确定不包含用户隐私信息的第三图像,因此,电子设备中的处理器在接收到摄像头所采集到的第三图像后,可以直接将该第三图像传输至目标应用。
其中,考虑到针对不同的情况可以采用不同的隐私处理方式或多种隐私处理方式的组合,以增加隐私处理的灵活性、以及为了进一步的提高用户隐私数据的安全性,因此,可以将对目标用户的第一图像中除目标用户的脸部图像区域之外的其他图像区域进行隐私处理、以及输出提示信息两种方式进行结合。
具体的,首先以悬浮窗的形式,显示目标用户第一图像,以提示目标用户基于第一图像调整位姿,并接收目标用户基于实时观测到的第一图像所反馈的位姿调整结束的确认输入(即第一图像中不包含目标用户隐私数据的确认输入),为了提升该确认输入的准确性,可以由电子设备的处理器先获取利用摄像头所采集的目标用户进行位姿调整后的第一图像,并在该第一图像与目标应用的界面的显示内容匹配度小于或等于目标值的情况下,对该第一图像进行隐私处理,即对该第一图像进行隐私风险识别,如果识别出存在隐私泄露的风险,则对第一图像中包含用户隐私数据的目标图像区域进行图像替换处理,基于图像替换处理后的第一图像,确定不包含用户隐私数据目标用户的第二图像;或者直接对第一图像中的目标图像区域进行图像替换处理,并基于图像替换处理后的第一图像,确定不包含用户隐私数据目标用户的第二图像。
在本申请实施例中,通过设置输出提示信息,以提示目标用户调整位姿、以及对第一图像区域中的目标图像区域进行图像替换处理等不同的隐私保护处理方式,以增加隐私保护的灵活性,并且将两种方式进行结合,可以进一步提升用户隐私数据的安全性。
进一步的,针对上述输出提示信息的方式,以提示目标用户进行位姿调整,并在接收到目标用户位姿调整结束的确认输入的情况下,获取利用摄像头采集到的第三图像,具体包括:
步骤一,在目标应用的显示界面上以悬浮窗的形式,显示目标用户的脸部图像区域和除目标用户的脸部图像区域之外的其他图像区域;
具体的,在目标应用的显示界面的指定区域上弹出悬浮窗,该悬浮窗可以是半透明悬浮窗、全透明悬浮窗中至少一种悬浮窗,并在该悬浮窗上显示完整的目标用户的第一图像(即目标用户的脸部图像区域和除目标用户的脸部图像区域之外的其他图像区域);
步骤二,提示目标用户基于上述悬浮窗中显示的目标用户的第一图像进行位姿调整;
其中,上述位姿调整可以包括电子设备的位姿调整(即对摄像头的位姿进行调整)、以及目标用户本身的位姿调整中至少一项;上述位姿调整的标准是目标用户通过实时观测悬浮窗中显示的第一图像区域中不包含目标用户的隐私数据;
步骤三,在接收到目标用户位姿调整结束的确认输入的情况下,获取利用摄像头采集到的第三图像;
其中,在接收到目标用户位姿调整结束的确认输入后所获取的第三图像(即目标用户进行位姿调整后的第三图像)中不包含目标用户的隐私数据(即位姿调整的目标是调整后的目标用户的脸部图像区域之外的其他图像区域不包含用户的隐私数据)。
具体的,如图3所示,在目标应用的显示界面上弹出悬浮窗,该悬浮窗可以向目标用户完整显示第一图像(即目标用户的脸部图像区域和除目标用户的脸部图像区域之外的其他图像区域),即图3中的(b)所示的显示效果,并提示目标用户基于上述悬浮窗中显示的目标用户的第一图像进行位姿调整,在接收到目标用户位姿调整结束的确认输入的情况下,即当接收到目标用户基于在目标应用的界面中观测到的图像所反馈的第一图像中不包含目标用户隐私数据的确认输入时,将基于位姿调整后的第一图像确定为第三图像(即获取利用摄像头采集到的第三图像),并将上述第三图像传输至目标应用,以使目标应用基于该第三图像进行相应的业务处理。
进一步的,针对上述对第一图像进行隐私处理的方式,对目标用户的第一图像中除目标用户的脸部图像区域之外的其他图像区域中的目标图像区域进行图像替换处理,具体包括:
步骤一,确定第一图像中除目标用户的脸部图像区域之外的其他图像区域中的目标图像区域;其中,该目标图像区域包括:其他图像区域、或者其他图像区域中界面上未显示的图像区域;
具体的,针对目标图像区域包括其他图像区域的情况,对第一图像进行图像识别处理,确定目标用户的脸部图像区域所在区域,将该脸部图像区域所在区域之外的图像区域确定为目标图像区域;针对目标图像区域包括其他图像区域中界面上未显示的图像区域的情况,基于预存的目标应用的显示界面的显示区域与未显示区域的位置关系,将未显示区域确定为目标图像区域;其中,预存的目标应用的显示界面的显示区域与未显示区域的位置关系可以是基于预设的默认图像在显示屏上完整图像显示区域与在目标应用的显示界面上图像部分区域显示区域的比例关系所确定的,具体的,可以先将默认图像传输至目标应用(由处理器传输至目标应用的、可公开的图像),再获取默认图像在目标应用的显示界面上所显示的图像部分区域显示区域,并计算该默认图像中的图像部分区域显示区域和完整图像显示区域的比例关系。
步骤二,基于预设图像,对上述目标图像区域进行图像替换处理;
具体的,将上述第一图像中目标图像区域中的图像内容,替换为预设图像,即对该目标图像区域进行图像替换处理,即更新上述第一图像区域中的目标图像区域,其中,上述预设图像可以是马赛克背景、统一颜色的背景等可公开的背景图像。
进一步的,将上述第一图像中目标用户的脸部图像区域、图像替换处理后的除目标用户的脸部图像区域之外的其他图像区域的组合确定为目标用户的第二图像。
具体的,针对目标图像区域为其他图像区域中的情况,基于预设图像,对第一图像中除目标用户的脸部图像区域之外的其他图像区域进行图像替换处理,得到更新后的第一图像(即将第一图像中的其他图像区域替换为预设图像);如图4所示,针对目标图像区域为第一图像的其他图像区域中界面上未显示的图像区域的情况,在目标应用的显示界面上显示第一图像(包括已显示的图像区域和未显示的图像区域),即图4中的(a)所示的显示效果,其中,第一图像的完整显示效果即为图4中(b),将第一图像中除目标用户的脸部图像区域之外的其他图像区域中未显示的图像区域替换为预设图像,得到目标用户的脸部图像区域(即已显示的图像区域中目标用户脸部图像区域)、除目标用户的脸部图像区域之外的其他图像区域中已显示的图像区域、以及其他图像区域中未显示的图像区域图像替换处理后的的组合,即图4中(c)所示的显示效果,上述其他图像区域中包括,图像替换处理后的其他图像区域中未显示的图像区域(即为预设图像)、以及其他图像区域中界面上已显示的图像区域的组合。
本申请实施例中,对第一图像进行隐私处理的方式中,在对目标用户的第一图像中的目标图像区域进行图像替换时,通过灵活设置目标图像区域的范围,进一步提升了隐私保护处理的灵活性。
在具体实施时,可以在获取到利用摄像头采集的第一图像后,直接触发执行图像隐私保护机制,即直接触发上述步骤S104中,对第一图像进行隐私处理,或者输出提示信息;进一步的,考虑到只有目标应用的图像显示方式为图像部分区域显示时,存在隐私数据泄露的风险比较大,因此,为了提高图像隐私保护的针对性,从而实现在确保用户隐私数据的安全性的情况下,提高目标应用的业务处理响应效率,即先确认第一图像与目标应用的界面的显示内容匹配度小于或等于目标值,即只有确定目标应用的图像显示方式为图像部分区域显示的情况下,才触发执行图像隐私保护机制,具体的,如图5所示,上述步骤S104,在第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对第一图像进行隐私处理,或者输出提示信息之前,具体包括:
S108,获取界面的显示内容;
S110,将利用摄像头采集到的第一图像与界面的显示内容进行图像内容比对,确定该第一图像与该显示内容匹配度。
具体的,由于在获取到利用摄像头采集的第一图像之后,该第一图像中可能包含用户的隐私数据,因此不能直接将该第一图像传输至目标应用,因此可以在获取利用摄像头采集到的第一图像的同时,执行步骤S108,获取界面的显示内容,以确保该界面上的显示内容与摄像头采集到的第一图像是在同一拍摄环境所采集的,具有一部分相同的图像内容,以使该第一图像与该显示内容可以进行图像内容比对,确定该第一图像与该显示内容匹配度,进而确定目标应用的图像显示方式。其中,上述步骤S108,获取界面的显示内容也可以在S102,获取利用摄像头采集到的第一图像之前执行,或在S102,获取利用摄像头采集到的第一图像之后执行,以解决目标应用可能会自动调用摄像头采集目标用户的第一图像,进而泄露用户隐私数据的问题。
具体的,将摄像头采集到的第一图像与界面的显示内容进行图像内容比对,确定该第一图像与该显示内容匹配度,若第一图像与界面的显示内容匹配度小于或等于目标值,则确定目标应用的显示界面上目标用户的第一图像为图像部分区域显示;若第一图像与界面的显示内容匹配度大于目标值,则确定目标应用的显示界面上目标用户的第一图像为图像全部区域显示。
进一步的,针对确定摄像头采集到的第一图像与目标应用界面的显示内容匹配度的过程,除了上述在获取利用摄像头采集到的第一图像的同时,获取界面的显示内容,并将摄像头采集到的第一图像与界面的显示内容进行图像内容比对的方式,还可以基于默认图像来确定摄像头采集到的第一图像与目标应用界面的显示内容匹配度,具体的,可以是每次目标应用通过调起摄像头采集目标用户的第一图像的情况下均基于默认图像来确定该第一图像与目标应用界面的显示内容匹配度,进而确定目标应用的图像显示方式,即确定第一图像为图像部分区域显示、还是图像全部区域显示;也可以是首次安装目标应用或者目标应用存在版本更新等目标应用满足预设使用条件的情况下,基于默认图像来来确定该第一图像与目标应用界面的显示内容匹配度,进而确定目标应用的图像显示方式,并存储该目标应用的图像显示方式(例如,图像部分区域显示或者图像全部区域显示),这样后续可以直接基于预存的该目标应用的显示方式标签来确定第一图像为图像部分区域显示、还是图像全部区域显示;
具体的,若确定目标应用的显示方式为图像部分区域显示,则执行上述步骤S104中,对上述第一图像进行隐私处理,或者输出提示信息。
若确定目标应用的显示方式为图像全部区域显示,则直接将目标用户的第一图像传输至目标应用;其中,为了进一步保证隐私数据的安全,在确定在目标应用的显示方式为图像全部区域显示后,可以先提示目标用户确认目标应用的界面中显示的第一图像不存在隐私泄露风险,在接收到目标用户的确认信息后,再将目标用户的第一图像传输至目标应用,以使目标应用基于该第一图像进行相应的业务处理。
具体的,针对基于默认图像确定摄像头采集到的第一图像与目标应用界面的显示内容匹配度,进而确定目标应用的图像显示方式的过程,具体包括:
步骤一,在目标应用的显示界面上显示默认图像,并对该显示界面进行截图,得到第四图像;
其中,上述默认图像与摄像头所采集的目标用户的第一图像不同,该默认图像为处理器直接传输至目标应用的默认图像(可公开图像),不包含目标用户的隐私数据。
步骤二,将摄像头所采集的第一图像与默认图像在目标应用的界面中的显示内容进行图像内容比对,确定该第一图像与该显示内容匹配度,即判断上述默认图像与上述第四图像之间的相同图像所占面积是否小于或等于目标值;
其中,上述相同图像所占面积具体为上述默认图像与上述第四图像之间的相同图像在第四图像(即显示界面)上所占的面积;具体的,若所占面积小于或等于目标值(即第一图像与界面的显示内容匹配度小于或等于目标值),则确定在目标应用的图像显示方式为图像部分区域显示,则对第一图像进行隐私处理,或者输出提示信息;若所占面积大于目标值(即第一图像与界面的显示内容匹配度大于目标值),则确定在目标应用的图像显示方式为图像全部区域显示,则可以直接将目标用户的第一图像传输至目标应用;
在具体实施时,针对确定目标应用的图像显示方式的过程,可以是每次均基于默认图像确定,即在每次检测到目标应用调用摄像头进行拍摄时,均执行一次上述基于默认图像确定目标应用的图像显示方式的过程;
或者,可以是直接基于预先存储的目标应用的图像显示方式标签进行确定;具体的,预先基于默认图像确定目标应用的图像显示方式(即目标应用的图像显示方式标签),并对目标图像的图像显示方式进行标记,例如,可以存储目标应用与图像显示方式标签之间的对应关系,该图像显示方式标签包括:图像部分区域显示或者图像全部区域显示;然后,在目标应用的使用过程中,可以直接基于该图像显示方式标签,快速确定目标应用对应的图像显示方式;其中,若图像显示方式为图像部分区域显示,则确定第一图像与界面的显示内容匹配度小于或等于目标值,进而对第一图像进行隐私处理,或者输出提示信息。
具体的,针对电子设备上安装的每个指定应用(包括目标应用和其他具有调用相机应用功能的应用程序),均预先执行一次上述图像显示方式的确定过程(即确定指定应用针对默认图像的图像显示方式为图像部分区域显示、还是图像全部区域显示),并根据图像显示方式的确定结果对指定应用的图像显示方式进行标记,进一步的,在图像显示方式为图像部分区域显示的目标应用调用摄像头(相机应用)的情况下,在获取利用摄像头采集到的第一图像之后,先自动执行步骤S104中,对第一图像进行隐私处理,再将基于该第一图像得到的第二图像传输至目标应用,或者输出提示信息,以提示用户调整位姿。
进一步的,考虑到可能存在目标用户的图像数据在目标应用的图像显示方式变更的情况,因此需要在图像显示方式变更后,对目标应用的图像显示方式标签进行变更,因此,引入针对目标应用的图像显示方式标签的核验机制;具体的,在检测到目标应用存在应用版本更新的情况下,执行上述步骤一至步骤二,即再次基于默认图像确定目标应用的图像显示方式,并基于新的图像显示方式更新原图像显示方式,以便后续基于更新后的图像显示方式标签,来决定是否触发执行上述S104中,对第一图像进行隐私处理,或者输出提示信息的步骤。
更进一步的,考虑到即使未检测出目标应用的版本更新,可能也会存在目标应用的图像显示方式存在变更的情况,由于针对已将目标应用标记为图像全部区域显示的情况,一旦图像显示方式存在变更,但未对目标应用的原图像显示方式进行更新,此时可能存在用户隐私数据泄露的情况,基于此,可以按照预设时间间隔对已标记为图像全部区域显示的目标应用执行标签核验过程,具体的,针对显示方式标签为图像全部区域显示的目标应用,不仅在检测到应用版本更新的情况,执行一次上述基于默认图像确定目标应用的图像显示方式,而且,还按照预设时间间隔,执行上述基于默认图像确定目标应用的图像显示方式,按照预设时间间隔执行上述基于默认图像确定目标应用的图像显示方式(即确定指定应用针对默认图像的图像显示方式为图像部分区域显示、还是图像全部区域显示),然后根据图像显示方式的识别结果来确定是否需要对目标应用的图像显示方式标签进行更新,具体的,若本次识别出的图像显示方式标签与上一次识别出的图像显示方式标签不一致,则基于本次识别出的图像显示方式标签更新目标应用的图像显示方式。
本申请实施例中,采用预先记录目标应用的图像显示方式标签,这样在目标应用的使用过程中,可以直接基于该图像显示方式标签确定目标应用的图像显示方式为图像部分区域显示、还是图像全部区域显示,无需每次均执行一次基于默认图像确定目标应用的图像显示方式,因此,可以提高目标应用针对用户业务请求的响应效率,但是可能存在因应用版本更新,导致应用的拍摄界面的显示方式发生变化,从而导致显示方式标签发生变化,因此,需要引入上述标签核验机制对目标应用的图像显示方式进行验证,以便提高针对第一图像进行隐私保护的准确度,从而进一步提高目标用户的隐私数据的安全性。
进一步的,可以在确定第一图像与界面的显示内容匹配度小于或等于目标值的情况下,即确定第一图像在目标应用的显示界面上为图像部分区域显示的情况(即目标应用的图像显示方式为图像部分区域显示),直接对该第一图像进行隐私处理,或者输出提示信息;进一步的,考虑到第一图像在目标应用的显示界面上为图像部分区域显示的情况,第一图像中可能会包含用户观测不到的隐私数据,此时将存在用户隐私数据泄露的风险,对应的,第一图像中也可能不包含用户隐私数据,因此,为了提高图像隐私保护处理的针对性,从而实现在确保用户隐私数据的安全性的情况下,可以先对第一图像进行图像识别,来确定是否包含用户隐私数据,只有包含用户隐私数据的情况下,才执行对第一图像进行隐私保护处理的过程,基于此,在确定第一图像与界面的显示内容匹配度小于或等于目标值,即在确定目标应用的图像显示方式为图像部分区域显示的情况下,对上述第一图像进行隐私处理,或者输出提示信息,具体包括:
利用预先训练好的图像识别模型对上述第一图像进行图像识别,得到隐私风险识别结果;若所述隐私风险识别结果为存在隐私泄露风险,则对上述第一图像进行隐私处理,或者输出提示信息。
其中,可以采用现有的机器学习方法对预设的图像识别模型的模型参数进行迭代训练更新,得到更新后的模型参数,直到图像识别模型对应的模型函数收敛,进而得到训练好的图像识别模型,其中,该图像识别模型用于对第一图像进行图像识别,进而得到隐私风险识别结果。
其中,在利用图像识别模型进行预测时,若输入至预先训练好的图像识别模型中的第一图像中包含目标用户的隐私数据,则确定图像识别模型的识别结果为存在隐私泄露风险;若上述隐私风险识别结果为存在隐私泄露风险,则对第一图像进行隐私处理,从而得到不包含目标用户隐私数据的第二图像,再将第二图像传输至目标应用进行相关的业务处理;或者输出提示信息,以使目标用户基于实时观测到的图像内容调整位姿。
具体的,确定第一图像与界面的显示内容匹配度小于或等于目标值之后,即确定在目标应用的图像显示方式为图像部分区域显示之后,可以直接对第一图像进行隐私处理,进一步的,为了提高隐私处理的针对性,也可以先对第一图像进行隐私风险识别,若识别出第一图像中包含目标用户的隐私数据,再对第一图像进行隐私处理;其中,针对增加对第一图像中隐私数据识别过程的情况,可以基于识别出的包含隐私数据的第一图像中隐私数据所在的图像区域,输出相应的提示信息,提示目标用户进行位姿调整,例如,可以提示目标用户“隐私泄露,请调整角度”、“隐私泄露,请注意衣物穿戴”、以及“隐私泄露,请更换拍摄场所”,在具体实施时,可以在悬浮窗中显示的第一图像标记出隐私数据所在的图像区域,以使用户快速识别隐私数据所在位置;和/或直接将包含隐私数据的第一图像中隐私数据所在的图像区域替换为预设图像。
若输入至预先训练好的图像识别模型中的第一图像中不包含目标用户的隐私数据,则确定图像识别模型的识别结果为不存在隐私泄露风险,则直接将第一图像传输至目标应用进行相应的业务处理,进一步的,为了提高识别结果的准确性,也可以先提示用户确认不存在隐私泄露风险,在检测到用户的确认信息后,再将上述第一图像传输至目标应用进行相应的业务处理。
本申请实施例中的图像数据的处理方法,先获取利用摄像头采集到的第一图像,该第一图像包括目标用户的脸部图像区域,并在该第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对该第一图像进行隐私处理,或者输出提示信息,即通过将摄像头实际采集到的第一图像与该第一图像在目标应用的界面上实际显示的内容进行匹配,若匹配度小于或等于目标值,则摄像头实际采集到的第一图像不能完整地显示在该目标应用的界面上,且该第一图像中未在目标应用的界面上显示的部分可能包含用户的隐私数据,因此会存在用户的隐私数据被泄露而不自知的风险,因此在将该第一图像传输至目标应用之前,需要对该第一图像中未在目标应用的界面上显示的部分进行隐私处理,从而得到不包含用户隐私数据的图像,或者输出提示信息,这样能够减少因第一图像中未在目标应用的界面上显示的部分存在用户隐私数据而导致用户隐私数据泄露的风险,从而实现根源上避免了目标用户的隐私数据的泄露,达到了保护用户隐私数据的效果,以及提升了目标应用在调用摄像头进行拍摄时所拍摄的图像数据的安全性。
需要说明的是,本申请实施例提供的图像数据的处理方法,执行主体可以为电子设备,特别是电子设备中的处理器,或者该电子设备中的用于执行图像数据的处理方法的控制模块。本申请实施例中以电子设备执行图像数据的处理方法为例,说明本申请实施例提供的电子设备。
对应上述实施例提供的图像数据的处理方法,基于相同的技术构思,本申请实施例还提供了一种电子设备,图6为本申请实施例提供的电子设备的模块组成示意图,该电子设备用于执行图1至图5描述的图像数据的处理方法,如图6所示,该电子设备包括:
第一图像获取模块602,用于获取利用摄像头采集到的第一图像,所述第一图像包括目标用户的脸部图像区域;
第一图像处理模块604,用于在所述第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对所述第一图像进行隐私处理,或者输出提示信息。
本申请实施例中,通过将摄像头实际采集到的第一图像与该第一图像在目标应用的界面上实际显示的内容进行匹配,若匹配度小于或等于目标值,则摄像头实际采集到的第一图像不能完整地显示在该目标应用的界面上,且该第一图像中未在目标应用的界面上显示的部分可能包含用户的隐私数据,因此会存在用户的隐私数据被泄露而不自知的风险,因此在将该第一图像传输至目标应用之前,需要对该第一图像中未在目标应用的界面上显示的部分进行隐私处理,从而得到不包含用户隐私数据的图像,或者输出提示信息,这样能够减少因第一图像中未在目标应用的界面上显示的部分存在用户隐私数据而导致用户隐私数据泄露的风险,从而实现根源上避免了目标用户的隐私数据的泄露,达到了保护用户隐私数据的效果,以及提升了目标应用在调用摄像头进行拍摄时所拍摄的图像数据的安全性。
可选的,如图7所示,所述电子设备,还包括,第二图像传输模块606,用于:
将基于所述第一图像得到的第二图像传输至目标应用,所述目标应用基于所述第二图像进行相应的业务处理。
可选的,如图7所示,所述电子设备,还包括:
界面内容获取模块608,用于获取界面的显示内容;
图像比对模块610,用于将所述第一图像与所述显示内容进行图像内容比对,确定所述第一图像与所述显示内容匹配度。
可选的,所述第一图像还包括:除所述目标用户的脸部图像区域之外的其他图像区域;
所述第一图像处理模块604,具体用于:
对所述其他图像区域中的目标图像区域进行图像替换处理;
所述第二图像传输模块606,具体用于:
基于图像替换后的其他图像区域和所述目标用户的脸部图像区域,生成所述目标用户的第二图像;
将所述第二图像传输至目标应用。
可选的,所述第一图像处理模块604,还具体用于:
确定所述其他图像区域中的目标图像区域,所述目标图像区域包括:所述其他图像区域、或者所述其他图像区域中界面上未显示的图像区域;
基于预设图像,对所述目标图像区域进行图像替换处理。
可选的,所述第一图像处理模块604,还具体用于:
以悬浮窗的形式,显示所述第一图像,以提示所述目标用户基于所述第一图像调整位姿。
可选的,所述电子设备还包括:
第三图像获取模块,用于在接收到所述目标用户位姿调整结束的确认输入的情况下,获取利用所述摄像头采集到的第三图像;
第三图像传输模块,用于将所述第三图像传输至目标应用。
本申请实施例中的电子设备,先获取利用摄像头采集到的第一图像,该第一图像包括目标用户的脸部图像区域,并在该第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对该第一图像进行隐私处理,或者输出提示信息,即通过将摄像头实际采集到的第一图像与该第一图像在目标应用的界面上实际显示的内容进行匹配,若匹配度小于或等于目标值,则摄像头实际采集到的第一图像不能完整地显示在该目标应用的界面上,且该第一图像中未在目标应用的界面上显示的部分可能包含用户的隐私数据,因此会存在用户的隐私数据被泄露而不自知的风险,因此在将该第一图像传输至目标应用之前,需要对该第一图像中未在目标应用的界面上显示的部分进行隐私处理,从而得到不包含用户隐私数据的图像,或者输出提示信息,这样能够减少因第一图像中未在目标应用的界面上显示的部分存在用户隐私数据而导致用户隐私数据泄露的风险,从而实现根源上避免了目标用户的隐私数据的泄露,达到了保护用户隐私数据的效果,以及提升了目标应用在调用摄像头进行拍摄时所拍摄的图像数据的安全性。
本申请实施例中的电子设备可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的电子设备可以为具有操作***的装置。该操作***可以为安卓(Android)操作***,可以为ios操作***,还可以为其他可能的操作***,本申请实施例不作具体限定。
本申请实施例提供的电子设备能够实现图1至图5的图像数据的处理方法实施例实现的各个过程,为避免重复,这里不再赘述。
可选地,如图8所示,本申请实施例还提供一种电子设备,包括处理器810,存储器809,存储在存储器809上并可在所述处理器810上运行的程序或指令,该程序或指令被处理器810执行时实现上述图像数据的处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图8为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备包括但不限于:射频单元801、网络模块802、音频输出单元803、输入单元804、传感器805、显示单元806、用户输入单元807、接口单元808、存储器809、处理器810、以及电源811等部件。
本领域技术人员可以理解,电子设备还可以包括给各个部件供电的电源811(比如电池),电源811可以通过电源管理***与处理器810逻辑相连,从而通过电源管理***实现管理充电、放电、以及功耗管理等功能。图8中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,处理器810,用于获取利用摄像头采集到的第一图像,所述第一图像包括目标用户的脸部图像区域;
在所述第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对所述第一图像进行隐私处理,或者输出提示信息。
本申请实施例中,通过将摄像头实际采集到的第一图像与该第一图像在目标应用的界面上实际显示的内容进行匹配,若匹配度小于或等于目标值,则摄像头实际采集到的第一图像不能完整地显示在该目标应用的界面上,且该第一图像中未在目标应用的界面上显示的部分可能包含用户的隐私数据,因此会存在用户的隐私数据被泄露而不自知的风险,因此在将该第一图像传输至目标应用之前,需要对该第一图像中未在目标应用的界面上显示的部分进行隐私处理,从而得到不包含用户隐私数据的图像,或者输出提示信息,这样能够减少因第一图像中未在目标应用的界面上显示的部分存在用户隐私数据而导致用户隐私数据泄露的风险,从而实现根源上避免了目标用户的隐私数据的泄露,达到了保护用户隐私数据的效果,以及提升了目标应用在调用摄像头进行拍摄时所拍摄的图像数据的安全性。
可选的,上述处理器810,还用于在对所述第一图像进行隐私处理,或者输出提示信息之后,将基于所述第一图像得到的第二图像传输至目标应用,所述目标应用基于所述第二图像进行相应的业务处理。
可选的,上述处理器810,还用于在所述第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对所述第一图像进行隐私处理,或者输出提示信息之前,获取界面的显示内容;将所述第一图像与所述显示内容进行图像内容比对,确定所述第一图像与所述显示内容匹配度。
可选的,所述第一图像还包括:除所述目标用户的脸部图像区域之外的其他图像区域;上述处理器810,还用于对所述其他图像区域中的目标图像区域进行图像替换处理;基于图像替换后的其他图像区域和所述目标用户的脸部图像区域,生成所述目标用户的第二图像;将所述第二图像传输至目标应用。
可选的,上述处理器810,还用于确定所述其他图像区域中的目标图像区域,所述目标图像区域包括:所述其他图像区域、或者所述其他图像区域中界面上未显示的图像区域;基于预设图像,对所述目标图像区域进行图像替换处理。
可选的,上述处理器810,还用于以悬浮窗的形式,显示所述第一图像,以提示所述目标用户基于所述第一图像调整位姿。
可选的,上述处理器810,还用于在输出提示信息之后,在接收到所述目标用户位姿调整结束的确认输入的情况下,获取利用所述摄像头采集到的第三图像;将所述第三图像传输至目标应用。
本申请实施例中的电子设备,先获取利用摄像头采集到的第一图像,该第一图像包括目标用户的脸部图像区域,并在该第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对该第一图像进行隐私处理,或者输出提示信息,即通过将摄像头实际采集到的第一图像与该第一图像在目标应用的界面上实际显示的内容进行匹配,若匹配度小于或等于目标值,则摄像头实际采集到的第一图像不能完整地显示在该目标应用的界面上,且该第一图像中未在目标应用的界面上显示的部分可能包含用户的隐私数据,因此会存在用户的隐私数据被泄露而不自知的风险,因此在将该第一图像传输至目标应用之前,需要对该第一图像中未在目标应用的界面上显示的部分进行隐私处理,从而得到不包含用户隐私数据的图像,或者输出提示信息,这样能够减少因第一图像中未在目标应用的界面上显示的部分存在用户隐私数据而导致用户隐私数据泄露的风险,从而实现根源上避免了目标用户的隐私数据的泄露,达到了保护用户隐私数据的效果,以及提升了目标应用在调用摄像头进行拍摄时所拍摄的图像数据的安全性。
应理解的是,本申请实施例中,射频单元801可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器810处理;另外,将上行的数据发送给基站。通常,射频单元801包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元801还可以通过无线通信***与网络和其他设备通信。
电子设备通过网络模块802为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元803可以将射频单元801或网络模块802接收的或者在存储器809中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元803还可以提供与电子设备执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元803包括扬声器、蜂鸣器以及受话器等。
输入单元804可以包括图形处理器(Graphics Processing Unit,GPU)8041和麦克风8042,图形处理器8041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元806可包括显示面板8061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板8061。用户输入单元807包括触控面板8071以及其他输入设备8072。触控面板8071,也称为触摸屏。触控面板8071可包括触摸检测装置和触摸控制器两个部分。其他输入设备8072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器809可用于存储软件程序以及各种数据,包括但不限于应用程序和操作***。处理器810可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作***、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器810中。
电子设备还包括至少一种传感器805,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板8061的亮度,接近传感器可在电子设备移动到耳边时,关闭显示面板8061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器805还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元806用于显示由用户输入的信息或提供给用户的信息。显示单元806可包括显示面板8061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板8061。
用户输入单元807可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元807包括触控面板8071以及其他输入设备8072。触控面板8071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板8071上或在触控面板8071附近的操作)。触控面板8071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器810,接收处理器810发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板8071。除了触控面板8071,用户输入单元807还可以包括其他输入设备8072。具体地,其他输入设备8072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板8071可覆盖在显示面板8061上,当触控面板8071检测到在其上或附近的触摸操作后,传送给处理器810以确定触摸事件的类型,随后处理器810根据触摸事件的类型在显示面板8061上提供相应的视觉输出。虽然在图8中,触控面板8071与显示面板8061是作为两个独立的部件来实现电子设备的输入和输出功能,但是在某些实施例中,可以将触控面板8071与显示面板8061集成而实现电子设备的输入和输出功能,具体此处不做限定。
接口单元808为外部装置与电子设备连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源811(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元808可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到电子设备内的一个或多个元件或者可以用于在电子设备和外部装置之间传输数据。
存储器809可用于存储软件程序以及各种数据。存储器809可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作***、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器809可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器810是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器809内的软件程序和/或模块,以及调用存储在存储器809内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。处理器810可包括一个或多个处理单元;优选的,处理器810可集成应用处理器810和调制解调处理器810,其中,应用处理器810主要处理操作***、用户界面和应用程序等,调制解调处理器810主要处理无线通信。可以理解的是,上述调制解调处理器810也可以不集成到处理器810中。
电子设备还可以包括给各个部件供电的电源811(比如电池),优选的,电源811可以通过电源811管理***与处理器810逻辑相连,从而通过电源811管理***实现管理充电、放电、以及功耗管理等功能。
另外,电子设备包括一些未示出的功能模块,在此不再赘述。
优选的,本申请实施例还提供一种电子设备,包括处理器810,存储器809,存储在存储器809上并可在所述处理器810上运行的程序或指令,该程序或指令被处理器810执行时实现上述图像数据的处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器810执行时实现上述图像数据的处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器810为上述实施例中所述的电子设备中的处理器810。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等。
本申请实施例还提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述图像数据的处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为***级芯片、***芯片、芯片***或片上***芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (16)
1.一种图像数据的处理方法,其特征在于,所述方法包括:
获取利用摄像头采集到的第一图像,所述第一图像包括目标用户的脸部图像区域;
在所述第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对所述第一图像进行隐私处理,或者输出提示信息。
2.根据权利要求1所述的方法,其特征在于,在对所述第一图像进行隐私处理,或者输出提示信息之后,还包括:
将基于所述第一图像得到的第二图像传输至目标应用,所述目标应用基于所述第二图像进行相应的业务处理。
3.根据权利要求1所述的方法,其特征在于,所述在所述第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对所述第一图像进行隐私处理,或者输出提示信息之前,还包括:
获取界面的显示内容;
将所述第一图像与所述显示内容进行图像内容比对,确定所述第一图像与所述显示内容匹配度。
4.根据权利要求2所述的方法,其特征在于,所述第一图像还包括:除所述目标用户的脸部图像区域之外的其他图像区域;
所述对所述第一图像进行隐私处理,包括:
对所述其他图像区域中的目标图像区域进行图像替换处理;
所述将基于所述第一图像得到的第二图像传输至目标应用,包括:
基于图像替换后的其他图像区域和所述目标用户的脸部图像区域,生成所述目标用户的第二图像;
将所述第二图像传输至目标应用。
5.根据权利要求4所述的方法,其特征在于,所述对所述其他图像区域中的目标图像区域进行图像替换处理,包括:
确定所述其他图像区域中的目标图像区域,所述目标图像区域包括:所述其他图像区域、或者所述其他图像区域中界面上未显示的图像区域;
基于预设图像,对所述目标图像区域进行图像替换处理。
6.根据权利要求1所述的方法,其特征在于,所述输出提示信息,包括:
以悬浮窗的形式,显示所述第一图像,以提示所述目标用户基于所述第一图像调整位姿。
7.根据权利要求6所述的方法,其特征在于,所述输出提示信息之后,还包括:
在接收到所述目标用户位姿调整结束的确认输入的情况下,获取利用所述摄像头采集到的第三图像;
将所述第三图像传输至目标应用。
8.一种电子设备,其特征在于,所述电子设备包括:
第一图像获取模块,用于获取利用摄像头采集到的第一图像,所述第一图像包括目标用户的脸部图像区域;
第一图像处理模块,用于在所述第一图像与界面的显示内容匹配度小于或等于目标值的情况下,对所述第一图像进行隐私处理,或者输出提示信息。
9.根据权利要求8所述的电子设备,其特征在于,所述电子设备,还包括:
第二图像传输模块,用于将基于所述第一图像得到的第二图像传输至目标应用,所述目标应用基于所述第二图像进行相应的业务处理。
10.根据权利要求8所述的电子设备,其特征在于,所述电子设备,还包括:
界面内容获取模块,用于获取界面的显示内容;
图像比对模块,用于将所述第一图像与所述显示内容进行图像内容比对,确定所述第一图像与所述显示内容匹配度。
11.根据权利要求9所述的电子设备,其特征在于,所述第一图像还包括:除所述目标用户的脸部图像区域之外的其他图像区域;
所述第一图像处理模块,具体用于:
对所述其他图像区域中的目标图像区域进行图像替换处理;
所述第二图像传输模块,具体用于:
基于图像替换后的其他图像区域和所述目标用户的脸部图像区域,生成所述目标用户的第二图像;
将所述第二图像传输至目标应用。
12.根据权利要求11所述的电子设备,其特征在于,所述第一图像处理模块,还具体用于:
确定所述其他图像区域中的目标图像区域,所述目标图像区域包括:所述其他图像区域、或者所述其他图像区域中界面上未显示的图像区域;
基于预设图像,对所述目标图像区域进行图像替换处理。
13.根据权利要求8所述的电子设备,其特征在于,所述第一图像处理模块,还具体用于:
以悬浮窗的形式,显示所述第一图像,以提示所述目标用户基于所述第一图像调整位姿。
14.根据权利要求13所述的电子设备,其特征在于,所述电子设备,还包括:
第三图像获取模块,用于在接收到所述目标用户位姿调整结束的确认输入的情况下,获取利用所述摄像头采集到的第三图像;
第三图像传输模块,用于将所述第三图像传输至目标应用。
15.一种电子设备,其特征在于,包括:处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1至7中任一项所述的图像数据的处理方法的步骤。
16.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1至7中任一项所述的图像数据的处理方法的步骤。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111265900.5A CN113987602A (zh) | 2021-10-28 | 2021-10-28 | 图像数据的处理方法和电子设备 |
PCT/CN2022/127267 WO2023072038A1 (zh) | 2021-10-28 | 2022-10-25 | 图像数据的处理方法和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111265900.5A CN113987602A (zh) | 2021-10-28 | 2021-10-28 | 图像数据的处理方法和电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113987602A true CN113987602A (zh) | 2022-01-28 |
Family
ID=79743783
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111265900.5A Pending CN113987602A (zh) | 2021-10-28 | 2021-10-28 | 图像数据的处理方法和电子设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN113987602A (zh) |
WO (1) | WO2023072038A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023072038A1 (zh) * | 2021-10-28 | 2023-05-04 | 维沃移动通信有限公司 | 图像数据的处理方法和电子设备 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4555589B2 (ja) * | 2004-03-31 | 2010-10-06 | 京セラ株式会社 | 携帯端末 |
CN103415839B (zh) * | 2012-09-19 | 2016-09-28 | 华为终端有限公司 | 拍照处理方法及终端设备 |
CN104125396B (zh) * | 2014-06-24 | 2018-06-08 | 小米科技有限责任公司 | 图像拍摄方法和装置 |
CN109743503A (zh) * | 2019-01-17 | 2019-05-10 | 维沃移动通信有限公司 | 提示方法和终端 |
CN110719402B (zh) * | 2019-09-24 | 2021-07-06 | 维沃移动通信(杭州)有限公司 | 图像处理方法及终端设备 |
CN112770049A (zh) * | 2020-12-30 | 2021-05-07 | 维沃移动通信有限公司 | 拍摄方法、装置及存储介质 |
CN113987602A (zh) * | 2021-10-28 | 2022-01-28 | 维沃移动通信有限公司 | 图像数据的处理方法和电子设备 |
-
2021
- 2021-10-28 CN CN202111265900.5A patent/CN113987602A/zh active Pending
-
2022
- 2022-10-25 WO PCT/CN2022/127267 patent/WO2023072038A1/zh unknown
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023072038A1 (zh) * | 2021-10-28 | 2023-05-04 | 维沃移动通信有限公司 | 图像数据的处理方法和电子设备 |
Also Published As
Publication number | Publication date |
---|---|
WO2023072038A1 (zh) | 2023-05-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110913132B (zh) | 对象跟踪方法及电子设备 | |
CN110719402B (zh) | 图像处理方法及终端设备 | |
CN110109593B (zh) | 一种截屏方法及终端设备 | |
CN108595946B (zh) | 一种保护隐私的方法及终端 | |
CN109241775B (zh) | 一种隐私保护方法及终端 | |
CN111163260B (zh) | 一种摄像头启动方法及电子设备 | |
CN108459788B (zh) | 一种图片显示方法及终端 | |
CN110149628B (zh) | 一种信息处理方法及终端设备 | |
CN111125696B (zh) | 信息提示方法及电子设备 | |
CN109544172B (zh) | 一种显示方法及终端设备 | |
CN111124231B (zh) | 图片生成方法及电子设备 | |
CN111125800B (zh) | 一种图标显示方法及电子设备 | |
CN109815679B (zh) | 权限管理方法和移动终端 | |
CN109104573B (zh) | 一种确定对焦点的方法及终端设备 | |
CN109067979B (zh) | 一种提示方法及移动终端 | |
CN111125680A (zh) | 一种权限设置方法及终端设备 | |
CN108109188B (zh) | 一种图像处理方法及移动终端 | |
CN107809515B (zh) | 一种显示控制方法及移动终端 | |
CN111093033B (zh) | 一种信息处理方法及设备 | |
WO2023072038A1 (zh) | 图像数据的处理方法和电子设备 | |
CN110795746B (zh) | 一种信息处理方法及电子设备 | |
CN110677537B (zh) | 便签信息显示方法、便签信息发送方法及电子设备 | |
CN110929238B (zh) | 一种信息处理方法及设备 | |
CN110740265B (zh) | 图像处理方法及终端设备 | |
CN109753776B (zh) | 一种信息处理的方法、装置以及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |