CN108833257A - 一种应用于群组的图片覆盖方法 - Google Patents

一种应用于群组的图片覆盖方法 Download PDF

Info

Publication number
CN108833257A
CN108833257A CN201810550426.2A CN201810550426A CN108833257A CN 108833257 A CN108833257 A CN 108833257A CN 201810550426 A CN201810550426 A CN 201810550426A CN 108833257 A CN108833257 A CN 108833257A
Authority
CN
China
Prior art keywords
social client
voice signal
picture
user
group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810550426.2A
Other languages
English (en)
Other versions
CN108833257B (zh
Inventor
向敏明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
XI'AN YULE CULTURAL TECHNOLOGY Co.,Ltd.
Original Assignee
Dongguan Huarui Electronic Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dongguan Huarui Electronic Technology Co Ltd filed Critical Dongguan Huarui Electronic Technology Co Ltd
Priority to CN201810550426.2A priority Critical patent/CN108833257B/zh
Publication of CN108833257A publication Critical patent/CN108833257A/zh
Application granted granted Critical
Publication of CN108833257B publication Critical patent/CN108833257B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/52—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail for supporting social networking services

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明实施例涉及社交技术领域，公开一种应用于群组的图片覆盖方法，该方法包括：社交客户端检测针对群组的群组会话界面上发布的任一目标图片输入的覆盖指令；社交客户端根据该覆盖指令，提示从该群组中选取出在群组会话界面上发布有声音信号的任意两个用户，以形成第一用户对；社交客户端将第一用户对与目标图片进行关联，并且在群组会话界面上利用预设的非隐私图片覆盖目标图片；其中，第一用户对作为用于移除已覆盖目标图片的非隐私图片的第一依据。实施本发明实施例，能够有效的防止群组的群组会话界面上发布的隐私照片被他人偷看到，降低隐私照片发生泄露的风险。

Description

一种应用于群组的图片覆盖方法
技术领域
本发明涉及社交技术领域，尤其涉及一种应用于群组的图片覆盖方法。
技术领域
目前，包括微信、QQ在内的各种社交客户端上通常会创建有群组，位于群组内的用户有时候会在群组会话界面上发布一些隐私图片。在实践中发现，当社交客户端的群组的群组会话界面上发布有隐私照片时，如果社交客户端所在的用户设备(如手机)未锁屏，那么群组会话界面上发布的隐私照片很容易被其他人员偷看到，从而隐私图片发生泄露。
发明内容
本发明实施例公开了一种应用于群组的图片覆盖方法，能够有效的防止群组的群组会话界面上发布的隐私照片被他人偷看到，降低隐私照片发生泄露的风险。
其中，一种应用于群组的图片覆盖方法，所述群组被创建在社交客户端中，所述方法包括：
所述社交客户端检测针对所述群组的群组会话界面上发布的任一目标图片输入的覆盖指令；
所述社交客户端根据所述覆盖指令，提示从所述群组中选取出在所述群组会话界面上发布有声音信号的任意两个用户，以形成第一用户对；
所述社交客户端将所述第一用户对与所述目标图片进行关联，并且在所述群组会话界面上利用预设的非隐私图片覆盖所述目标图片；其中，所述第一用户对作为用于移除已覆盖所述目标图片的所述非隐私图片的第一依据。
作为一种可选的实施方式，本发明实施例中，所述社交客户端在所述群组会话界面上利用预设的非隐私图片覆盖所述目标图片之后，所述方法还包括：
所述社交客户端检测针对所述群组会话界面上的已覆盖所述目标图片的所述非隐私图片的移除指令；
所述社交客户端根据所述移除指令，提示从所述群组中选取任意两个用户，以形成第二用户对；
所述社交客户端判断所述第二用户对与作为用于移除已覆盖所述目标图片的所述非隐私图片的第一依据的所述第一用户对是否相同；
若相同，所述社交客户端将所述群组会话界面上的已覆盖所述目标图片的所述非隐私图片进行移除，以重新显示所述目标图片。
作为一种可选的实施方式，本发明实施例中，所述社交客户端将所述第一用户对与所述目标图片进行关联之后，以及在所述群组会话界面上利用预设的非隐私图片覆盖所述目标图片之前，所述方法还包括：
所述社交客户端提示从所述群组会话界面上选取出所述第一用户对包含的一个用户发布的第一声音信号，以及提示从所述群组会话界面上选取出所述第一用户对包含的另一个用户发布的第二声音信号；
所述社交客户端对选取的所述第一声音信号以及所述第二声音信号进行合成得到验证声音信号；
所述社交客户端将所述验证声音信号与所述目标图片进行关联，并执行所述的在所述群组会话界面上利用预设的非隐私图片覆盖所述目标图片的步骤；其中，所述验证声音信号作为用于移除已覆盖所述目标图片的所述非隐私图片的第二依据；
所述社交客户端判断出所述第二用户对与作为用于移除已覆盖所述目标图片的所述非隐私图片的第一依据的所述第一用户对相同之后，以及所述社交客户端将所述群组会话界面上的已覆盖所述目标图片的所述非隐私图片进行移除，以重新显示所述目标图片之前，所述方法还包括：
所述社交客户端提示从所述群组会话界面上选取出所述第二用户对包含的一个用户发布的第三声音信号，以及提示从所述群组会话界面上选取出所述第二用户对包含的另一个用户发布的第四声音信号；
所述社交客户端对选取的所述第三声音信号以及所述第四声音信号进行合成得到合成声音信号；
所述社交客户端判断所述合成声音信号与作为用于移除已覆盖所述目标图片的所述非隐私图片的第二依据的所述验证声音信号是否匹配，若匹配，执行所述的将所述群组会话界面上的已覆盖所述目标图片的所述非隐私图片进行移除，以重新显示所述目标图片的步骤。
作为一种可选的实施方式，本发明实施例中，所述社交客户端对选取的所述第一声音信号以及所述第二声音信号进行合成得到验证声音信号，包括：
所述社交客户端确定选取的所述第一声音信号与所述第二声音信号之间的对齐点；其中，所述对齐点是指所述第一声音信号与所述第二声音信号合成的开始位置；
所述社交客户端根据所述对齐点将所述第一声音信号与所述第二声音信号合成为验证声音信号。
作为一种可选的实施方式，本发明实施例中，所述社交客户端确定选取的所述第一声音信号与所述第二声音信号之间的对齐点，包括：
所述社交客户端计算选取的所述第一声音信号的第一时长以及所述第二声音信号的第二时长；其中，所述第一时长表示所述第一声音信号的声音持续的时间；所述第二时长表示所述第二声音信号的声音持续的时间；
所述社交客户端计算所述第一时长和所述第二时长之间的差值；
所述社交客户端判断所述差值是否小于或等于预设数值，若是，对所述第一声音信号和所述第二声音信号中的任一声音信号进行周期上的缩放，以获得最终持续时长相同的第一声音信号和第二声音信号，再以所述最终持续时长相同的第一声音信号和第二声音信号的首个音频帧作为对齐点。
作为一种可选的实施方式，本发明实施例中，所述社交客户端对所述第一声音信号和所述第二声音信号中的任一声音信号进行周期上的缩放，包括：
若所述第一声音信号的第一时长相对于所述第二声音信号的第二时长较短，所述社交客户端根据所述差值确定所述差值占所述第一声音信号的第一时长的比例X；
所述社交客户端计算所述第一声音信号的音频帧数Y；
所述社交客户端计算放大系数Z，所述Z＝X*(Y/(Y-1))；
所述社交客户端按照所述放大系数，对所述第一声音信号中除了首个音频帧之外的其他音频帧进行等比例放大，以使得放大后的第一声音信号的最终持续时长与所述第二声音信号的第二时长相同。
作为一种可选的实施方式，本发明实施例中，若所述差值大于所述预设数值，所述方法还包括：
所述社交客户端使用相同的默认采样频率对所述第一声音信号以及所述第二声音信号分别进行采样，得到第一采样组和第二采样组；
所述社交客户端根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组；其中，所述互相关权值与所述差值正相关，所述互相关组中包含有多个数值；
所述社交客户端将所述互相关组中的多个数值进行比较，找出最大的数值；
所述社交客户端使用所述最大的数值对应的音频帧位置作为对齐点。
作为一种可选的实施方式，本发明实施例中，所述社交客户端根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组，包括：
其中，Sn[t]表示互相关组，x[m]表示所述第一采样组中的第m个采样数据，y[m-t]表示所述第二采样组中的第(m-t)个采样数据，t表示时间的偏移量，t为整数，取值为从0到m，Wt表示窗函数，其中n＝l*f，l为互相关权值，f为所述默认采样频率。
作为一种可选的实施方式，本发明实施例中，所述社交客户端判断所述合成声音信号与作为用于移除已覆盖所述目标图片的所述非隐私图片的第二依据的所述验证声音信号是否匹配，包括：
所述社交客户端判断所述合成声音信号与作为用于移除已覆盖所述目标图片的所述非隐私图片的第二依据的所述验证声音信号之间的所述对齐点是否相同；
若相同，所述社交客户端判断所述合成声音信号的声纹特征对应的第一多维向量与所述验证声音信号的声纹特征对应的第二多维向量是否匹配，若匹配，确定所述合成声音信号与所述验证声音信号相匹配；若不匹配，确定所述合成声音信号与所述验证声音信号不匹配；
其中，所述合成声音信号的声纹特征对应的第一多维向量由梅尔频率倒谱系数、线性预测倒谱系数、所述梅尔频率倒谱系数的一阶差分、所述线性预测倒谱系数的一阶差分、能量、所述能量的一阶差分以及Gammatone滤波器倒谱系数共同组成。
本发明实施例中，社交客户端可以检测针对群组的群组会话界面上发布的任一目标图片输入的覆盖指令，并提示从该群组中选取出在群组会话界面上发布有声音信号的任意两个用户，以形成第一用户对；社交客户端可以将第一用户对与目标图片进行关联，并且在群组会话界面上利用预设的非隐私图片覆盖目标图片，第一用户对作为用于移除已覆盖目标图片的非隐私图片的第一依据。可见，实施本发明实施例，即使在社交客户端所在的用户设备(如手机)未锁屏的情况下，也能够有效的防止群组的群组会话界面上发布的隐私照片被他人偷看到，降低隐私照片发生泄露的风险。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例公开的一种应用于群组的图片覆盖方法的流程示意图；
图2为本发明实施例公开的另一种应用于群组的图片覆盖方法的流程示意图；
图3为本发明实施例公开的另一种应用于群组的图片覆盖方法的流程示意图；
图4是本发明实施例公开的一种社交客户端的群组会话界面的变化示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，本发明实施例的术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、***、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种应用于群组的图片覆盖方法，即使在社交客户端所在的用户设备(如手机)未锁屏的情况下，也能够有效的防止群组的群组会话界面上发布的隐私照片被他人偷看到，降低隐私照片发生泄露的风险。以下进行结合附图进行详细描述。
请参阅图1，图1为本发明实施例公开的一种应用于群组的图片覆盖方法的流程示意图。在图1所示的应用于群组的图片覆盖方法中，群组被创建在社交客户端中，社交客户端可以包括但不限于微信、QQ；社交客户端可以安装在移动手机、平板电脑等用户设备上。如图1所示，该应用于群组的图片覆盖方法可以包括以下步骤：
101、社交客户端检测针对群组的群组会话界面上发布的任一目标图片输入的覆盖指令。
作为一种可选的实施方式，社交客户端执行步骤101之后，以及社交客户端执行步骤102之前，还可以执行以下步骤：
社交客户端采集社交客户端的当前使用者的人脸图像的色彩信息；
社交客户端对当前使用者的人脸图像的色彩信息进行二值化处理；
社交客户端将二值化处理后的当前使用者的人脸图像分成多个像素块，并对每个像素块内所有像素对应的像素值进行或运算，得到每个像素块的或运算结果组成当前使用者的人脸图像的下采样图片；
社交客户端将得到的下采样图片划分为多个像素区域，通过对每个像素区域中所有像素点的或运算结果求和，获得组成所述当前使用者的人脸图像的每个像素区域的特征信息；
社交客户端根据当前使用者的人脸图像的每个像素区域的特征信息判断当前使用者的人脸图像与社交客户端预先存储的合法用户的人脸图像是否相匹配，若匹配，执行步骤102；若不匹配，结束本流程。其中，这种实施方式可以在准确的识别出社交客户端的当前使用者是社交客户端预先存储的合法用户时才执行后续的图片覆盖，防止非法用户肆意触发社交客户端对群组的群组会话界面上发布的任一目标图片进行覆盖，从而可以提升图片覆盖的合法性、可靠性。
作为另一种可选的实施方式，社交客户端根据当前使用者的人脸图像的每个像素区域的特征信息判断出当前使用者的人脸图像与社交客户端预先存储的合法用户的人脸图像相匹配之后，以及社交客户端执行步骤102之前，还可以执行以下步骤：
社交客户端对该覆盖指令对应的触及指纹图像做预处理，预处理包括分别对触及指纹图像的图像分割、图像增强、图像二值化和细化处理，获得输入细化指纹图像；
社交客户端在输入细化指纹图像中提取指纹细节点，并对输入细化指纹图像进行跟踪，并提取输入细化指纹图像中脊线上的采样点，以及提取输入细化指纹图像的采样点的凸包，生成含有指纹细节点、所有脊线上采样点和采样点的凸包的输入指纹特征；
社交客户端识别输入指纹特征与社交客户端预先存储的合法用户的指纹特征是否相匹配，如果相匹配，才执行步骤102；如果不匹配，结束本流程。其中，这种实施方式可以在更加准确的识别出社交客户端的当前使用者是社交客户端预先存储的合法用户时才执行后续的图片覆盖，防止非法用户肆意触发社交客户端对群组的群组会话界面上发布的任一目标图片进行覆盖，从而可以提升图片覆盖的合法性、可靠性。
102、社交客户端根据该覆盖指令，提示从群组中选取出在群组会话界面上发布有声音信号的任意两个用户，以形成第一用户对。
本发明实施例中，社交客户端可以根据该覆盖指令，从群组中选取出在群组会话界面上发布有声音信号的各个用户，并弹出第一用户对选择界面，该第一用户对选择界面上包括从群组中选取出的在群组会话界面上发布有声音信号各个用户的标识；相应地，社交客户端可以检测社交客户端的当前使用者从该第一用户对选择界面上选择的任意两个用户的标识，从而实现从群组中选取出在群组会话界面上发布有声音信号的任意两个用户，以形成第一用户对。
其中，在群组会话界面上发布有声音信号的各个用户是指当前在群组会话界面上可以查看到的发布有声音信号的各个用户。
103、社交客户端将第一用户对与目标图片进行关联，并且在群组会话界面上利用预设的非隐私图片覆盖目标图片；其中，第一用户对作为用于移除已覆盖目标图片的非隐私图片的第一依据。
其中，社交客户端将第一用户对与目标图片进行关联是指社交客户端将第一用户对中的两个用户的标识的对应关系与目标图片进行关联。
在图1所描述的方法中，即使在社交客户端所在的用户设备(如手机)未锁屏的情况下，也能够有效的防止群组的群组会话界面上发布的隐私照片被他人偷看到，降低隐私照片发生泄露的风险。此外，在图1所描述的方法中，可以防止非法用户肆意触发社交客户端对群组的群组会话界面上发布的任一目标图片进行覆盖，从而可以提升图片覆盖的合法性、可靠性。
请参阅图2，图2本发明实施例公开的另一种应用于群组的图片覆盖方法的流程示意图。如图2所示，该应用于群组的图片覆盖方法可以包括以下步骤：
201、社交客户端检测针对群组的群组会话界面上发布的任一目标图片输入的覆盖指令。
作为一种可选的实施方式，社交客户端执行步骤201之后，以及社交客户端执行步骤202之前，还可以执行以下步骤：
社交客户端采集社交客户端的当前使用者的人脸图像的色彩信息；
社交客户端对当前使用者的人脸图像的色彩信息进行二值化处理；
社交客户端将二值化处理后的当前使用者的人脸图像分成多个像素块，并对每个像素块内所有像素对应的像素值进行或运算，得到每个像素块的或运算结果组成当前使用者的人脸图像的下采样图片；
社交客户端将得到的下采样图片划分为多个像素区域，通过对每个像素区域中所有像素点的或运算结果求和，获得组成所述当前使用者的人脸图像的每个像素区域的特征信息；
社交客户端根据当前使用者的人脸图像的每个像素区域的特征信息判断当前使用者的人脸图像与社交客户端预先存储的合法用户的人脸图像是否相匹配，若匹配，执行步骤202；若不匹配，结束本流程。其中，这种实施方式可以在准确的识别出社交客户端的当前使用者是社交客户端预先存储的合法用户时才执行后续的图片覆盖，防止非法用户肆意触发社交客户端对群组的群组会话界面上发布的任一目标图片进行覆盖，从而可以提升图片覆盖的合法性、可靠性。
作为另一种可选的实施方式，社交客户端根据当前使用者的人脸图像的每个像素区域的特征信息判断出当前使用者的人脸图像与社交客户端预先存储的合法用户的人脸图像相匹配之后，以及社交客户端执行步骤202之前，还可以执行以下步骤：
社交客户端对该覆盖指令对应的触及指纹图像做预处理，预处理包括分别对触及指纹图像的图像分割、图像增强、图像二值化和细化处理，获得输入细化指纹图像；
社交客户端在输入细化指纹图像中提取指纹细节点，并对输入细化指纹图像进行跟踪，并提取输入细化指纹图像中脊线上的采样点，以及提取输入细化指纹图像的采样点的凸包，生成含有指纹细节点、所有脊线上采样点和采样点的凸包的输入指纹特征；
社交客户端识别输入指纹特征与社交客户端预先存储的合法用户的指纹特征是否相匹配，如果相匹配，才执行步骤202；如果不匹配，结束本流程。其中，这种实施方式可以在更加准确的识别出社交客户端的当前使用者是社交客户端预先存储的合法用户时才执行后续的图片覆盖，防止非法用户肆意触发社交客户端对群组的群组会话界面上发布的任一目标图片进行覆盖，从而可以提升图片覆盖的合法性、可靠性。
202、社交客户端根据该覆盖指令，提示从群组中选取出在群组会话界面上发布有声音信号的任意两个用户，以形成第一用户对。
本发明实施例中，社交客户端可以根据该覆盖指令，从群组中选取出在群组会话界面上发布有声音信号的各个用户，并弹出第一用户对选择界面，该第一用户对选择界面上包括从群组中选取出的在群组会话界面上发布有声音信号各个用户的标识；相应地，社交客户端可以检测社交客户端的当前使用者从该第一用户对选择界面上选择的任意两个用户的标识，从而实现从群组中选取出在群组会话界面上发布有声音信号的任意两个用户，以形成第一用户对。
其中，在群组会话界面上发布有声音信号的各个用户是指当前在群组会话界面上可以查看到的发布有声音信号的各个用户。
203、社交客户端将第一用户对与目标图片进行关联，并且在群组会话界面上利用预设的非隐私图片覆盖目标图片；其中，第一用户对作为用于移除已覆盖目标图片的非隐私图片的第一依据。
204、社交客户端检测针对群组会话界面上的已覆盖目标图片的非隐私图片的移除指令。
205、社交客户端根据移除指令，提示从群组中选取任意两个用户，以形成第二用户对。
本发明实施例中，社交客户端可以根据该根据移除指令，弹出第二用户对选择界面，该第二用户对选择界面上包括群组中的所有用户的标识；相应地，社交客户端可以检测社交客户端的当前使用者从该第二用户对选择界面上选择的任意两个用户的标识，从而实现从群组中选取出任意两个用户，以形成第二用户对。
206、社交客户端判断选取的该第二用户对与作为用于移除已覆盖目标图片的非隐私图片的第一依据的第一用户对是否相同；若相同，执行步骤207；若不相同，结束本流程。
207、社交客户端将该群组会话界面上的已覆盖目标图片的非隐私图片进行移除，以重新显示目标图片。
在图2所描述的方法中，只有当社交客户端从群组中选取出的任意两个用户形成的第二用户对与目标图片关联的、且在群组会话界面上发布有声音信号的第一用户对相同时，才将该群组会话界面上的已覆盖目标图片的非隐私图片进行移除，以重新显示目标图片；反之，如果社交客户端从群组中选取出的任意两个用户形成的第二用户对与目标图片关联的、且在群组会话界面上发布有声音信号的第一用户不相同时，该群组会话界面上的已覆盖目标图片的非隐私图片不会被移除，目标图片依旧被覆盖。可见，实施图2所描述的方法，即使在社交客户端所在的用户设备(如手机)未锁屏的情况下，也能够有效的防止群组的群组会话界面上发布的隐私照片被他人偷看到，降低隐私照片发生泄露的风险。此外，在图2所描述的方法中，可以防止非法用户肆意触发社交客户端对群组的群组会话界面上发布的任一目标图片进行覆盖，从而可以提升图片覆盖的合法性、可靠性。
请参阅图3，图3本发明实施例公开的另一种应用于群组的图片覆盖方法的流程示意图。如图3所示，该应用于群组的图片覆盖方法可以包括以下步骤：
301、社交客户端检测针对群组的群组会话界面上发布的任一目标图片输入的覆盖指令。
302、社交客户端根据该覆盖指令，提示从群组中选取出在群组会话界面上发布有声音信号的任意两个用户，以形成第一用户对。
303、社交客户端将第一用户对与目标图片进行关联，提示从群组会话界面上选取出第一用户对包含的一个用户发布的第一声音信号，以及提示从群组会话界面上选取出第一用户对包含的另一个用户发布的第二声音信号。
其中，第一用户对包含的一个用户发布的第一声音信号可以是第一用户对包含的一个用户在群组会话界面上发布的语音信号或环境声信号，第一用户对包含的另一个用户发布的第一声音信号可以是第一用户对包含的另一个用户在群组会话界面上发布的语音信号或环境声信号，本发明实施例不作限定。
304、社交客户端对选取的第一声音信号以及第二声音信号进行合成得到验证声音信号。
作为一种可选的实施方式，本发明实施中，社交客户端在执行步骤304之前，社交客户端可以先判断第一声音信号以及第二声音信号是否均为语音信号，若第一声音信号以及第二声音信号均为语音信号，才执行步骤304。
举例来说，社交客户端可以采取以下方式来精确的判断第一声音信号是否为语音信号，即：
社交客户端对第一声音信号进行快速傅里叶变换得到频域信号；
社交客户端根据频域信号计算谱幅度值；
社交客户端根据谱幅度值计算概率密度；
社交客户端根据概率密度计算第一声音信号的谱熵；
社交客户端根据谱熵确定第一声音信号是否为语音信号；
其中，社交客户端根据谱熵确定第一声音信号是否为语音信号，可以包括：
社交客户端计算第一声音信号的能量；
社交客户端根据第一声音信号的能量以及谱熵确定第一声音信号是否为语音信号，即社交客户端可以计算第一声音信号的能量与第一声音信号的谱熵的乘积，并对该乘积进行开平方运算，获得该乘积对应的开平方值；以及，社交客户端可以判断该乘积对应的开平方值是否大于预置门限值，若是，则确定第一声音信号是语音信号，若否，则确定第一声音信号不是语音信号。
305、社交客户端将验证声音信号与目标图片进行关联，在群组会话界面上利用预设的非隐私图片覆盖目标图片；其中，第一用户对作为用于移除已覆盖目标图片的非隐私图片的第一依据；验证声音信号作为用于移除已覆盖目标图片的所述非隐私图片的第二依据。
306、社交客户端检测针对群组会话界面上的已覆盖目标图片的非隐私图片的移除指令。
307、社交客户端根据移除指令，提示从群组中选取任意两个用户，以形成第二用户对。
308、社交客户端判断第二用户对与作为用于移除已覆盖目标图片的非隐私图片的第一依据的第一用户对是否相同；若相同，执行步骤309-步骤311；若不相同，结束本流程。
309、社交客户端提示从群组会话界面上选取出第二用户对包含的一个用户发布的第三声音信号，以及提示从群组会话界面上选取出第二用户对包含的另一个用户发布的第四声音信号。
310、社交客户端对选取的第三声音信号以及第四声音信号进行合成得到合成声音信号。
311、社交客户端判断合成声音信号与作为用于移除已覆盖目标图片的非隐私图片的第二依据的所述验证声音信号是否匹配，若匹配，执行步骤312；若不匹配，结束本流程。
312、社交客户端将该群组会话界面上的已覆盖目标图片的非隐私图片进行移除，以重新显示目标图片。
作为一种可选的实施方式，上述步骤304中，社交客户端对选取的第一声音信号以及第二声音信号进行合成得到验证声音信号，包括：
社交客户端确定选取的第一声音信号与第二声音信号之间的对齐点；其中，对齐点是指第一声音信号与第二声音信号合成的开始位置；换句话说，第一声音信号与第二声音信号要合成的话，需要找到从哪个音频帧开始合成，这个音频帧就可以理解为对齐点；
社交客户端根据对齐点将第一声音信号与第二声音信号合成为验证声音信号。
作为一种可选的实施方式，社交客户端确定选取的第一声音信号与第二声音信号之间的对齐点，包括：
社交客户端计算选取的第一声音信号的第一时长以及第二声音信号的第二时长；其中，第一时长表示第一声音信号的声音持续的时间；第二时长表示第二声音信号的声音持续的时间；
社交客户端计算第一时长和第二时长之间的差值；
社交客户端判断该差值是否小于或等于预设数值，若是，对第一声音信号和第二声音信号中的任一声音信号进行周期上的缩放，以获得最终持续时长相同的第一声音信号和第二声音信号，再以最终持续时长相同的第一声音信号和第二声音信号的首个音频帧作为对齐点。
本发明实施例中，如果该差值小于或等于预设数值，则说明两个声音信号(即第一声音信号和第二声音信号)在输入时的差距较小，此时可以对其中的一个声音信号(如第一声音信号)进行周期上的缩放，例如对时长较长的声音信号进行周期上的压缩(也就是俗称的快进)，和/或对时长较短的声音信号进行周期上的放大(也就是俗称的慢进)，使得两个声音信号的最终持续时长相同，再以两个声音信号的首个音频帧作为对齐点进行对齐。
其中，该预设数值的取值范围可以为0至0.1秒。
作为一种可选的实施方式，社交客户端对第一声音信号和第二声音信号中的任一声音信号进行周期上的缩放，包括：
若第一声音信号的第一时长相对于第二声音信号的第二时长较短，社交客户端根据该差值确定该差值占第一声音信号的第一时长的比例X；
社交客户端计算第一声音信号的音频帧数Y；
社交客户端计算放大系数Z，Z＝X*(Y/(Y-1))；
社交客户端按照放大系数，对第一声音信号中除了首个音频帧之外的其他音频帧进行等比例放大，以使得放大后的第一声音信号的最终持续时长与第二声音信号的第二时长相同。
举例来说，第一声音信号为1秒，有100个音频帧，则每个音频帧0.01秒，第二声音信号为1.1秒，需要把第一声音信号放大至1.1秒。第一帧不动，放大后续的99帧，先确定放大的系数Z为0.1*(100/(100-1))＝0.101，即10.1％；此时后续的99帧，每帧需要放大10.1％，放大后的每帧为0.01*(1+10.1％)＝0.01101，放大后这99帧的长度为1.09秒，再加上没有动的第一帧0.01秒，就为1.1秒了，即放大后的第一声音信号的最终持续时长与第二声音信号的第二时长相同。
本发明实施例中，如果该差值大于预设数值，则说明两个声音信号(即第一声音信号和第二声音信号)在输入时的差距较大，如果此时还是对其中的一个声音信号进行周期上的缩放，则缩放后会造成比较严重的失真，后续的校验会出现问题，所以可以采用互相关算法来确定对齐点。即，在该差值大于预设数值时，该方法还包括：
社交客户端使用相同的默认采样频率对第一声音信号以及第二声音信号分别进行采样，得到第一采样组和第二采样组；
社交客户端根据默认采样频率(例如8000Hz到10000Hz)、第一采样组、第二采样组以及互相关权值生成互相关组；其中，互相关权值与该差值正相关(例如该互相关权值可以为该差值的1.5倍)，互相关组中包含有多个数值；
社交客户端将互相关组中的多个数值进行比较，找出最大的数值；
社交客户端使用最大的数值对应的音频帧位置作为对齐点。
其中，社交客户端根据默认采样频率、第一采样组、第二采样组以及互相关权值生成互相关组，包括：
其中，Sn[t]表示互相关组，x[m]表示所述第一采样组中的第m个采样数据，y[m-t]表示所述第二采样组中的第(m-t)个采样数据，t表示时间的偏移量，t为整数，取值为从0到m，Wt表示窗函数，其中n＝l*f，l为互相关权值，f为默认采样频率。
其中，社交客户端使用最大的数值对应的音频帧位置作为对齐点可以为：
社交客户端找到所述最大的数值后，可以根据上述的公式(1)反推出m是多少，也就是哪一个采样数据，然后再确定该采样数据所在的音频帧是哪一个，并且使用该音频帧作为对齐点。
本发明实施例中，社交客户端在获取到第一声音信号和第二声音信号之后，并不是逐一的对这两个声音信号进行验证，而是把这两个声音信号进行合成得到验证声音信号，然后后续在需要移除非隐私图片时再将合成声音信号与验证声音信号进行匹配，而声音信号合成后，会产生更多的可验证参数(例如对齐点是否相同、声纹特征是否匹配等)，相比于逐一验证两个声音信号，提高了验证的安全性。
作为一种可选的实施方式，上述步骤311中，社交客户端判断合成声音信号与作为用于移除已覆盖目标图片的非隐私图片的第二依据的验证声音信号是否匹配，包括：
社交客户端判断合成声音信号与作为用于移除已覆盖目标图片的非隐私图片的第二依据的验证声音信号之间的对齐点是否相同；其中，对齐点相同包括对齐点对应的两个混合音频帧(一个混合音频帧属于合成声音信号，另一个混合音频帧属于验证声音信号)的混合帧内容相同，以及对齐点对应的两个混合音频帧的帧时间也相同；
若相同，社交客户端判断合成声音信号的声纹特征对应的第一多维向量与验证声音信号的声纹特征对应的第二多维向量是否匹配，若匹配，确定合成声音信号与验证声音信号相匹配；若不匹配，确定合成声音信号与验证声音信号不匹配；
其中，合成声音信号的声纹特征对应的第一多维向量由梅尔频率倒谱系数、线性预测倒谱系数、所述梅尔频率倒谱系数的一阶差分、所述线性预测倒谱系数的一阶差分、能量、所述能量的一阶差分以及Gammatone滤波器倒谱系数共同组成。其中，实施上述实施方式，可以提高声音匹配的准确性。
在图3所描述的方法中，即使在社交客户端所在的用户设备(如手机)未锁屏的情况下，也能够有效的防止群组的群组会话界面上发布的隐私照片被他人偷看到，降低隐私照片发生泄露的风险。此外，在图3所描述的方法中，可以防止非法用户肆意触发社交客户端对群组的群组会话界面上发布的任一目标图片进行覆盖，从而可以提升图片覆盖的合法性、可靠性。
请参阅图4，图4为本发明实施例公开的一种社交客户端的群组会话界面的变化示意图。在图4所示的群组会话界面中，不同的头像分别代表群组中不同的用户，而相同的头像代表群组中的同一个用户。如图4中的A所示，社交客户端可以检测社交客户端的当前使用者通过触及操作输入的针对群组的群组会话界面上发布的任一目标图片的覆盖指令；如图4中的B所示，社交客户端可以根据该覆盖指令，提示从群组中选取出在群组会话界面上发布有声音信号的任意两个用户，以形成第一用户对；其中，社交客户端的当前使用者可以在群组会话界面上针对发布有声音信号任意两个用户进行打钩，被打钩的两个用户表示被选取出的两个用户，这两个用户可以形成第一用户对；如图4中的C所示，社交客户端在将第一用户对与目标图片进行关联之后，可以在群组会话界面上利用预设的非隐私图片覆盖目标图片；其中，第一用户对作为用于移除已覆盖目标图片的非隐私图片的第一依据。这样，即使在社交客户端所在的用户设备(如手机)未锁屏的情况下，也能够有效的防止群组的群组会话界面上发布的隐私照片被他人偷看到，降低隐私照片发生泄露的风险。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(Random Access Memory，RAM)、可编程只读存储器(Programmable Read-only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种应用于群组的图片覆盖方法进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (9)

1.一种应用于群组的图片覆盖方法，所述群组被创建在社交客户端中，其特征在于，所述方法包括：
所述社交客户端检测针对所述群组的群组会话界面上发布的任一目标图片输入的覆盖指令；
所述社交客户端根据所述覆盖指令，提示从所述群组中选取出在所述群组会话界面上发布有声音信号的任意两个用户，以形成第一用户对；
所述社交客户端将所述第一用户对与所述目标图片进行关联，并且在所述群组会话界面上利用预设的非隐私图片覆盖所述目标图片；其中，所述第一用户对作为用于移除已覆盖所述目标图片的所述非隐私图片的第一依据。
2.根据权利要求1所述的应用于群组的图片覆盖方法，其特征在于，所述社交客户端在所述群组会话界面上利用预设的非隐私图片覆盖所述目标图片之后，所述方法还包括：
所述社交客户端检测针对所述群组会话界面上的已覆盖所述目标图片的所述非隐私图片的移除指令；
所述社交客户端根据所述移除指令，提示从所述群组中选取任意两个用户，以形成第二用户对；
所述社交客户端判断选取的所述第二用户对与作为用于移除已覆盖所述目标图片的所述非隐私图片的第一依据的所述第一用户对是否相同；
若相同，所述社交客户端将所述群组会话界面上的已覆盖所述目标图片的所述非隐私图片进行移除，以重新显示所述目标图片。
3.根据权利要求2所述的应用于群组的图片覆盖方法，其特征在于，所述社交客户端将所述第一用户对与所述目标图片进行关联之后，以及在所述群组会话界面上利用预设的非隐私图片覆盖所述目标图片之前，所述方法还包括：
所述社交客户端提示从所述群组会话界面上选取出所述第一用户对包含的一个用户发布的第一声音信号，以及提示从所述群组会话界面上选取出所述第一用户对包含的另一个用户发布的第二声音信号；
所述社交客户端对选取的所述第一声音信号以及所述第二声音信号进行合成得到验证声音信号；
所述社交客户端将所述验证声音信号与所述目标图片进行关联，并执行所述的在所述群组会话界面上利用预设的非隐私图片覆盖所述目标图片的步骤；其中，所述验证声音信号作为用于移除已覆盖所述目标图片的所述非隐私图片的第二依据；
所述社交客户端判断出所述第二用户对与作为用于移除已覆盖所述目标图片的所述非隐私图片的第一依据的所述第一用户对相同之后，以及所述社交客户端将所述群组会话界面上的已覆盖所述目标图片的所述非隐私图片进行移除，以重新显示所述目标图片之前，所述方法还包括：
所述社交客户端提示从所述群组会话界面上选取出所述第二用户对包含的一个用户发布的第三声音信号，以及提示从所述群组会话界面上选取出所述第二用户对包含的另一个用户发布的第四声音信号；
所述社交客户端对选取的所述第三声音信号以及所述第四声音信号进行合成得到合成声音信号；
所述社交客户端判断所述合成声音信号与作为用于移除已覆盖所述目标图片的所述非隐私图片的第二依据的所述验证声音信号是否匹配，若匹配，执行所述的将所述群组会话界面上的已覆盖所述目标图片的所述非隐私图片进行移除，以重新显示所述目标图片的步骤。
4.根据权利要求3所述的应用于群组的图片覆盖方法，其特征在于，所述社交客户端对选取的所述第一声音信号以及所述第二声音信号进行合成得到验证声音信号，包括：
所述社交客户端确定选取的所述第一声音信号与所述第二声音信号之间的对齐点；其中，所述对齐点是指所述第一声音信号与所述第二声音信号合成的开始位置；
所述社交客户端根据所述对齐点将所述第一声音信号与所述第二声音信号合成为验证声音信号。
5.根据权利要求4所述的应用于群组的图片覆盖方法，其特征在于，所述社交客户端确定选取的所述第一声音信号与所述第二声音信号之间的对齐点，包括：
所述社交客户端计算选取的所述第一声音信号的第一时长以及所述第二声音信号的第二时长；其中，所述第一时长表示所述第一声音信号的声音持续的时间；所述第二时长表示所述第二声音信号的声音持续的时间；
所述社交客户端计算所述第一时长和所述第二时长之间的差值；
所述社交客户端判断所述差值是否小于或等于预设数值，若是，对所述第一声音信号和所述第二声音信号中的任一声音信号进行周期上的缩放，以获得最终持续时长相同的第一声音信号和第二声音信号，再以所述最终持续时长相同的第一声音信号和第二声音信号的首个音频帧作为对齐点。
6.根据权利要求5所述的应用于群组的图片覆盖方法，其特征在于，所述社交客户端对所述第一声音信号和所述第二声音信号中的任一声音信号进行周期上的缩放，包括：
若所述第一声音信号的第一时长相对于所述第二声音信号的第二时长较短，所述社交客户端根据所述差值确定所述差值占所述第一声音信号的第一时长的比例X；
所述社交客户端计算所述第一声音信号的音频帧数Y；
所述社交客户端计算放大系数Z，所述Z＝X*(Y/(Y-1))；
所述社交客户端按照所述放大系数，对所述第一声音信号中除了首个音频帧之外的其他音频帧进行等比例放大，以使得放大后的第一声音信号的最终持续时长与所述第二声音信号的第二时长相同。
7.根据权利要求5或6所述的应用于群组的图片覆盖方法，其特征在于，若所述差值大于所述预设数值，所述方法还包括：
所述社交客户端使用相同的默认采样频率对所述第一声音信号以及所述第二声音信号分别进行采样，得到第一采样组和第二采样组；
所述社交客户端根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组；其中，所述互相关权值与所述差值正相关，所述互相关组中包含有多个数值；
所述社交客户端将所述互相关组中的多个数值进行比较，找出最大的数值；
所述社交客户端使用所述最大的数值对应的音频帧位置作为对齐点。
8.根据权利要求7所述的应用于群组的图片覆盖方法，其特征在于，所述社交客户端根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组，包括：
其中，Sn[t]表示互相关组，x[m]表示所述第一采样组中的第m个采样数据，y[m-t]表示所述第二采样组中的第(m-t)个采样数据，t表示时间的偏移量，t为整数，取值为从0到m，Wt表示窗函数，其中n＝l*f，l为互相关权值，f为所述默认采样频率。
9.根据权利要求4-8任一项所述的应用于群组的图片覆盖方法，其特征在于，所述社交客户端判断所述合成声音信号与作为用于移除已覆盖所述目标图片的所述非隐私图片的第二依据的所述验证声音信号是否匹配，包括：
所述社交客户端判断所述合成声音信号与作为用于移除已覆盖所述目标图片的所述非隐私图片的第二依据的所述验证声音信号之间的所述对齐点是否相同；
若相同，所述社交客户端判断所述合成声音信号的声纹特征对应的第一多维向量与所述验证声音信号的声纹特征对应的第二多维向量是否匹配，若匹配，确定所述合成声音信号与所述验证声音信号相匹配；若不匹配，确定所述合成声音信号与所述验证声音信号不匹配；
其中，所述合成声音信号的声纹特征对应的第一多维向量由梅尔频率倒谱系数、线性预测倒谱系数、所述梅尔频率倒谱系数的一阶差分、所述线性预测倒谱系数的一阶差分、能量、所述能量的一阶差分以及Gammatone滤波器倒谱系数共同组成。
CN201810550426.2A 2018-05-31 2018-05-31 一种应用于群组的图片覆盖方法 Active CN108833257B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810550426.2A CN108833257B (zh) 2018-05-31 2018-05-31 一种应用于群组的图片覆盖方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810550426.2A CN108833257B (zh) 2018-05-31 2018-05-31 一种应用于群组的图片覆盖方法

Publications (2)

Publication Number Publication Date
CN108833257A true CN108833257A (zh) 2018-11-16
CN108833257B CN108833257B (zh) 2021-01-19

Family

ID=64146986

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810550426.2A Active CN108833257B (zh) 2018-05-31 2018-05-31 一种应用于群组的图片覆盖方法

Country Status (1)

Country Link
CN (1) CN108833257B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130339452A1 (en) * 2012-06-18 2013-12-19 Lutebox Ltd. Social networking system and methods of implementation
CN104951682A (zh) * 2015-06-05 2015-09-30 小米科技有限责任公司 隐私保护方法及装置
CN105451198A (zh) * 2014-09-30 2016-03-30 阿里巴巴集团控股有限公司 即时通信中分享图片的方法和装置
CN105760778A (zh) * 2016-02-17 2016-07-13 北京金山安全软件有限公司 一种提升隐私图片安全性的方法、装置及电子设备
CN107666395A (zh) * 2016-07-28 2018-02-06 中兴通讯股份有限公司 一种群文件管理方法、用户终端、群聊***

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130339452A1 (en) * 2012-06-18 2013-12-19 Lutebox Ltd. Social networking system and methods of implementation
CN105451198A (zh) * 2014-09-30 2016-03-30 阿里巴巴集团控股有限公司 即时通信中分享图片的方法和装置
CN104951682A (zh) * 2015-06-05 2015-09-30 小米科技有限责任公司 隐私保护方法及装置
CN105760778A (zh) * 2016-02-17 2016-07-13 北京金山安全软件有限公司 一种提升隐私图片安全性的方法、装置及电子设备
CN107666395A (zh) * 2016-07-28 2018-02-06 中兴通讯股份有限公司 一种群文件管理方法、用户终端、群聊***

Also Published As

Publication number Publication date
CN108833257B (zh) 2021-01-19

Similar Documents

Publication Publication Date Title
RU2738325C2 (ru) Способ и устройство аутентификации личности
AU2017305245B2 (en) Call classification through analysis of DTMF events
CN105991593B (zh) 一种识别用户风险的方法及装置
CN106778179B (zh) 一种基于超声波唇语识别的身份认证方法
EP3575993B1 (en) Method and system for validating remote live identification via video-recording
CN106778613A (zh) 一种基于人脸分割区域匹配的身份验证方法及装置
Chetty et al. Automated lip feature extraction for liveness verification in audio-video authentication
CN109117622B (zh) 一种基于音频指纹的身份认证方法
CN109326294A (zh) 一种文本相关的声纹密钥生成方法
CN113886792A (zh) 一种声纹识别和人脸识别相结合的印控仪应用方法和***
Zhao et al. Anti-forensics of environmental-signature-based audio splicing detection and its countermeasure via rich-features classification
CN106599841A (zh) 一种基于全脸匹配的身份验证方法及装置
CN108880815A (zh) 身份验证方法、装置和***
CN106650657A (zh) 一种基于全脸二进制匹配的身份验证方法及装置
Alegre et al. Evasion and obfuscation in automatic speaker verification
CN109033897A (zh) 一种基于跨群组机制的图像处理方法
CN108833257A (zh) 一种应用于群组的图片覆盖方法
EP3767872A1 (fr) Procede de generation de cle privee a partir de caracteristiques biometriques
CN108574781B (zh) 一种应用于即时通讯客户端对话记录的图像处理方法
CN109039864A (zh) 一种基于社交客户端的文字内容的处理方法
CN108959887A (zh) 一种应用于即时通讯客户端的群组控制方法
Karantaidis et al. Efficient Capon-based approach exploiting temporal windowing for electric network frequency estimation
CN109002728A (zh) 一种基于一键触发的群组显示控制方法
CN109165533A (zh) 一种基于跨群组机制的短视频的防窥视方法
BR102014023647A2 (pt) método e sistema para detecção de fraudes em aplicações baseadas em processamento de voz

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20201223

Address after: Room 12207, 22 / F, unit 1, building 5, No. 57, Keji 3rd road, Zhangba Street office, hi tech Zone, Xi'an City, Shaanxi Province

Applicant after: XI'AN YULE CULTURAL TECHNOLOGY Co.,Ltd.

Address before: Room 403, No.35, Sanxiang, xiashou new village, Xicheng District, Dongguan City, Guangdong Province 523073

Applicant before: DONGGUAN HUARUI ELECTRONIC TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: An image overlay method applied to groups

Effective date of registration: 20220819

Granted publication date: 20210119

Pledgee: Xi'an innovation financing Company limited by guarantee

Pledgor: XI'AN YULE CULTURAL TECHNOLOGY Co.,Ltd.

Registration number: Y2022610000513

PE01 Entry into force of the registration of the contract for pledge of patent right