CN110545234B - 一种基于人脸识别和场景共享的社交或信息交互方法 - Google Patents

一种基于人脸识别和场景共享的社交或信息交互方法 Download PDF

Info

Publication number
CN110545234B
CN110545234B CN201910748279.4A CN201910748279A CN110545234B CN 110545234 B CN110545234 B CN 110545234B CN 201910748279 A CN201910748279 A CN 201910748279A CN 110545234 B CN110545234 B CN 110545234B
Authority
CN
China
Prior art keywords
user
scene
information
client
demand
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910748279.4A
Other languages
English (en)
Other versions
CN110545234A (zh
Inventor
金德奎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Facebook Technology Co ltd
Original Assignee
Shenzhen Facebook Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Facebook Technology Co ltd filed Critical Shenzhen Facebook Technology Co ltd
Priority to CN201910748279.4A priority Critical patent/CN110545234B/zh
Publication of CN110545234A publication Critical patent/CN110545234A/zh
Application granted granted Critical
Publication of CN110545234B publication Critical patent/CN110545234B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9535—Search customisation based on user profiles and personalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9536—Search customisation based on social or collaborative filtering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9537—Spatial or temporal dependent retrieval, e.g. spatiotemporal queries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9538—Presentation of query results
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/046—Interoperability with other network applications or services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21—Monitoring or handling of messages
    • H04L51/222—Monitoring or handling of messages using geographical location information, e.g. messages transmitted or received in proximity of a certain spot or area
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/52—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail for supporting social networking services

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Computing Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明提供了一种基于人脸识别和场景共享的社交或信息交互方法，场景需求用户或场景提供用户通过***服务器向***用户的设备客户端发送场景需求信息或场景提供信息供***用户查看，点击连接按钮与对应的场景需求用户或场景提供用户建立通讯连接。场景提供用户通过其设备摄像头获取的当前场景的画面发送到场景需求用户客户端实时显示播放，并获取当前场景的目标用户人脸图像，提取人脸特征数据与数据库的用户人脸特征数据进行对比匹配，判断是否为***注册用户，若是，则根据匹配结果将所述目标用户至少包括头像的信息发送给场景需求用户并在其设备客户端显示，以供所述场景需求用户查看及根据需要进一步与所述目标用户进行社交或信息交互。

Description

一种基于人脸识别和场景共享的社交或信息交互方法
技术领域
本发明涉及一种社交或信息交互方法，特别是涉及一种基于人脸识别和场景共享的社交或信息交互方法。
背景技术
目前，互联网通讯技术的应用越来越广泛，用户通过如微信、QQ、陌陌、Facebook等社交平台就能实现异地视频和语音通话，还可以通过直播平台观看异地直播，还能在社交平台上分享图片。但现有技术中的异地图片或视频获取都是在好友之间进行的，如一个用户通过社交平台与他的好友视频通话，或发送图片给好友。而陌生人之间只有通过社交圈或社区发图片或视频，在直播平台做直播或观看直播，这种异地的图片或视频传播是被动的，别人发什么，你就看什么，而自己想要在当前时刻看到异地某个现实场景并获取该场景的信息以及和该场景的用户进行社交或信息交互是现有技术不能做到的。因此，如何满足用户在异地就可以通过在现实场景中的用户使用该用户的设备看到自己想要看的场景图像，实现与该场景中更多的用户进行社交或信息交互，获取信息以及包括该场景的图片或视频，成为我们需要解决的问题。
发明内容
本发明需要解决的技术问题是提供一种基于人脸识别和场景共享的社交或信息交互方法，克服了现有技术中存在的问题。所述技术方案如下：
一种基于人脸识别和场景共享的社交或信息交互方法，其特征在于：
***用户在其设备客户端通过摄像头提取自己的人脸特征数据，与自己的注册ID绑定，并存储于数据库；
场景需求用户或场景提供用户在其设备客户端通过***服务器向***用户的设备客户端发送包括所需求的或所提供的场景名称、地理位置或地名至少其中之一的场景需求信息或场景提供信息；
或，场景需求用户或场景提供在其设备客户端向***服务器发送包括所需求的或所提供的场景名称、地理位置或地名至少其中之一的场景需求请求或场景提供请求；
用户在其设备客户端查看***推送的***用户的场景需求信息或场景提供信息，点击连接按钮，与该按钮对应的场景需求用户或场景提供用户的设备客户端建立通讯连接；
或，***服务器根据场景需求用户或场景提供在其设备客户端向***服务器发送的包括所需求的或所提供的场景名称、地理位置或地名至少其中之一的场景需求请求或场景提供请求，对用户进行匹配，若匹配成功，场景需求用户客户端与场景提供用户客户端建立通讯连接；
场景提供用户通过其设备摄像头，将实时获取的当前场景的画面发送到场景需求用户客户端实时显示播放；
场景提供用户的设备摄像头获取当前场景的目标用户人脸图像，提取人脸特征数据；
将所提取的人脸特征数据与数据库的用户人脸特征数据进行对比匹配，判断是否为***注册用户；
若是，则根据匹配结果将所述目标用户至少包括头像的信息发送给场景需求用户并在其设备客户端显示，以供所述场景需求用户查看及根据需要进一步与所述目标用户进行社交或信息交互。
场景需求用户在其设备客户端点击所述目标用户至少包括头像的信息，弹出信息交互窗口，给所述目标用户发送信息。
所述目标用户接收所述场景需求用户发送的信息，并在其设备客户端显示，在其设备客户端显示的还有所述场景需求用户的头像和昵称至少其中之一，或在其设备客户端显示场景需求用户的头像和昵称至少其中之一以及附加显示所述场景提供用户的头像和昵称至少其中之一。
所述目标用户接收所述场景需求用户发送的信息，并在其设备客户端显示，在其设备客户端显示的还有所述场景需求用户的头像和昵称至少其中之一，并同时显示“通过场景提供用户连接”相同或相近的文字描述作为标记，或以代表上述含义的标志符号作为标记，对所述场景提供用户的头像或昵称进行标注。
当场景需求用户通过场景提供用户的设备摄像头人脸识别识别匹配一个以上的用户信息时，将所述一个以上的至少包括头像的信息通过横向或纵向列表方式在所述场景需求用户的设备客户端显示。
在所述至少包括用户头像的信息设置收藏按钮，点击所述收藏按钮对所述目标用户或场景提供用户的信息进行收藏。
场景需求用户在其设备客户端设置当通过场景提供用户人脸识别匹配出当前场景的目标用户，仅向场景需求用户的设备客户端推送所述目标用户至少包括头像的信息，或同时向场景需求用户和场景提供用户的设备客户端推送所述目标用户至少包括头像的信息。
根据场景需求用户和场景提供用户以及目标用户的设置，将场景需求用户和场景提供用户以及目标用户划分在同一个临时群内，实现三方在群内发送消息，进行社交或信息交互。
场景需求用户通过其客户端向场景提供用户实时发送镜头方向控制指令，以便于场景需求用户寻找目标用户或场景；
所述镜头方向控制指令包括在场景需求用户设备客户端显示的镜头方向控制盘和控制按钮以及在场景提供用户设备客户端显示的镜头方向指示框和指示标的视觉操作指令，或语音指令；
场景提供用户设备客户端显示的镜头方向指示标相对于指示框的偏移方向和偏移量与场景需求用户的设备客户端的镜头方向控制按钮相对于控制盘的偏移方向和偏移量通过***服务器进行同步显示，场景提供用户根据其设备客户端显示的方向指示标的偏移方向和偏移量控制其设备摄像头获取当前场景的方向以及停止移动；
在所述场景需求用户的设备客户端设置拍照/录像按钮，与场景提供用户设备客户端摄像头的拍照/录像按钮绑定，当场景需求用户在其设备客户端按动拍照/录像按钮时，拍照/录像指令通过***服务器实时发送给场景提供用户的设备客户端，控制场景提供用户的设备摄像头拍照/录像，然后将拍照/录像的照片/视频发送给场景需求用户。
场景需求用户通过其客户端向场景提供用户实时发送行走方向控制指令，以便于场景需求用户寻找当目标用户或场景；
所述镜头方向控制指令包括在场景需求用户设备客户端显示的行走方向控制盘和在场景提供用户设备客户端显示的行走方向指示框的视觉操作指令，或语音指令；
场景提供用户设备客户端显示的行走方向指示标相对于指示框的偏移方向和偏移量与场景需求用户的设备客户端的行走方向控制按钮相对于控制盘的偏移方向和偏移量通过***服务器进行同步显示，场景提供用户根据其设备客户端显示的方向指示标的偏移方向和偏移量控制其行走的运动轨迹，以便于设备摄像头获取场景需求用户所需的场景及目标用户。
本发明还包括场景浏览界面和需求发布界面，场景需求用户或场景提供用户在场景需求界面上发布场景需求或场景提供信息，用户在场景浏览界面浏览查找自己的需求。
场景浏览界面包括场景需求用户或场景提供用户发布的信息图标，所述信息图标包括用户的头像、昵称、所提供场景图片或视频至少其中之一，并在所述信息图标上或信息图标旁用文字显示所述用户的场景信息，点击所述信息图标或场景信息，与该用户建立场景共享连接；
或，场景浏览界面包括场景需求用户或场景提供用户发布的信息图标，所述信息图标包括用户的头像、昵称、所提供场景图片或视频至少其中之一，并在所述信息图标上或信息图标旁用文字显示所述用户的场景信息，点击所述信息图标或场景信息，弹出消息窗口，给所述用户发送消息，在消息窗口设置场景连接按钮，点击场景连接按钮，与所述用户建立场景共享连接。
本发明还包括地图界面，场景需求用户或场景提供用户在地图界面上标注自己的位置，在地图界面上发布需求，用户在地图界面查找需求。地图界面包括用户在其所在的地理位置上显示用户的信息图标，所述信息图标包括用户的头像和昵称至少其中之一，在所述用户图标旁显示所述用户的场景信息，点击用户图标或场景信息，与该用户建立场景共享连接；
或，在所述用户图标旁显示所述用户的场景信息，点击用户图标或场景信息，弹出消息窗口，给所述用户发送消息，在消息窗口设置场景连接按钮，点击场景连接按钮，与所述用户建立场景共享连接。
本发明还包括打赏设置按钮和/或打赏按钮；打赏设置按钮设置在需求发布界面上，由用户进行打赏金额的设置；打赏按钮设置在场景浏览界面的发布的信息图标或场景信息上或设置在点击所述信息图标或场景信息弹出消息窗口上，或不设置打赏按钮，在完成此次场景共享后直接扣除赏金，或仍设置打赏按钮，待完成此次场景共享后由场景需求用户根据此次的场景共享情况点击打赏按钮，支付赏金。
本发明还包括展会界面或会议界面，以展会为例以下统称展会界面，包括根据以下方法所对应的界面及模块，包括展商用户的内部参展人员与展位的注册与绑定界面及模块，展商用户头像、公司信息及产品信息界面及模块；
将展会各展位的参展商作为***的展会现场观众用户以及展会现场之外的场景需求用户的目标用户，所述展商用户在自己参展的每个工作人员通过人脸注册为本***的注册用户后，又将每个工作人员的人脸注册信息与所述参展商的名称及展位号绑定，保存到数据库中，成为一个展商用户，上传设置所述展商用户头像、公司信息及产品信息；
当现场的场景提供用户走到所述展商展位，其设备摄像头获取到所述展商的一个工作人员时，获取该人脸识别特征数据，与数据库中的展商用户的人脸数据进行对比匹配，是否为展商用户，若是，则将所述展商用户的头像及展商信息发送到场景需求用户的设备客户端，供场景需求用户查看，进一步，与所述展商用户进行社交或信息交互。
本发明所述的方法中所包括的界面及对应的模块根据上述方法的描述应存在于本发明中，每个界面及按钮实现相应的方法由对应的模块进行技术支持，在此不做详细描述。
本发明所述的用户设备包括具有摄像头的手机、平板电脑、智能眼镜、AR眼镜、MR眼镜、可穿戴设备，还包括可与客户端连接通讯的数码照相机、摄像机、带有照相机或摄像机的无人机以及其它专业或非专业摄影摄像设备。
本发明提供了一种基于人脸识别和场景共享的社交或信息交互方法，场景需求用户或场景提供用户在其设备客户端通过***服务器向***用户的设备客户端发送包括所需求的或所提供的场景名称、地理位置或地名至少其中之一的场景需求信息或场景提供信息，用户在其设备客户端查看场景需求信息或场景提供信息，点击连接按钮，与该按钮对应的场景需求用户或场景提供用户的设备客户端建立通讯连接。场景提供用户通过其设备摄像头，将实时获取的当前场景的画面发送到场景需求用户客户端实时显示播放，场景提供用户的设备摄像头获取当前场景的目标用户人脸图像，提取人脸特征数据，将所提取的人脸特征数据与数据库的用户人脸特征数据进行对比匹配，判断是否为***注册用户，若是，则根据匹配结果将所述目标用户至少包括头像的信息发送给场景需求用户并在其设备客户端显示，以供所述场景需求用户查看及根据需要进一步与所述目标用户进行社交或信息交互。
本发明通过在一个场景中的场景提供用户的设备摄像头所获取的该场景图像实时发送给在另一个场景中的场景需求用户的设备客户端实时显示出来，并通过镜头方向控制盘和镜头方向指示框以及行走方向控制盘和行走方向指示框来控制场景提供用户的设备镜头所获取的场景，寻找场景中喜欢的人或物，并通过人脸识别技术识别当前的场景中已在***注册的目标用户，将该目标用户对外展示的信息推送给场景需求用户，进一步点击该目标用户头像，可弹出消息窗口，实现了场景需求用户通过现场的场景提供用户的帮助与该目标用户进行社交或信息交互，还能对当前场景进行拍照或录像。本发明所述的展会场景界面使得场景需求用户足不出户就能通过在展会现场的场景提供用户的设备获取自己感兴趣的展会的参展商信息及产品信息，拍摄自己感兴趣的照片或录像，以及还可以和展会现场的众多目标用户进行社交或信息交互，给用户一个更新更好的体验。因此，本发明与现有技术相比具有显著的技术进步。
附图说明
图1是本发明方法的流程图一。
图2是本发明方法的流程图二。
图3是本发明方法的流程图三。
图4是本发明方法的流程图四。
图5是本发明方法的流程图五。
图6是本发明方法的流程图六。
图7是本发明方法的流程图七。
图8是本发明方法的流程图八。
图9是本发明方法的流程图九。
图10是本发明方法的流程图十。
图11是本发明方法的流程图十一
图12是本发明方法的示意图一。
图13是本发明方法的示意图二。
图14是本发明方法的示意图三。
图15是本发明方法的示意图四。
图16是本发明方法的示意图五。
图17是本发明方法的示意图六。
图18是本发明方法的示意图七。
图19是本发明方法的示意图八。
图20是本发明方法的示意图九。
图21是本发明方法的示意图十。
图22是本发明方法的示意图十一。
图23是本发明方法的示意图十二。
图24是本发明方法的示意图十三。
图25是本发明方法的示意图十四。
图26是本发明方法的示意图十五。
图27是本发明方法的示意图十六。
图28是本发明方法的示意图十七。
具体实施方式
下面结合附图和实施方式对本发明做进一步的描述。
本发明的一种基于人脸识别和场景共享的社交或信息交互方法，包括以下步骤：
如图1、图12、图27和图28所示，***用户在其设备客户端通过摄像头提取自己的人脸特征数据，与自己的注册ID绑定，并存储于数据库。场景需求用户或场景提供用户在其设备客户端通过***服务器向***用户的设备客户端发送包括所需求的或所提供的场景名称、地理位置或地名至少其中之一的场景需求信息或场景提供信息；或，场景需求用户或场景提供在其设备客户端向***服务器发送包括所需求的或所提供的场景名称、地理位置或地名至少其中之一的场景需求请求或场景提供请求。用户在其设备客户端501或601查看***推送的***用户的场景需求信息或场景提供信息514或614，点击连接按钮510或514或615或614，与该按钮对应的场景需求用户或场景提供用户的设备客户端建立通讯连接，如图27和图28所示；或另一实施方式，***服务器根据场景需求用户或场景提供在其设备客户端向***服务器发送的包括所需求的或所提供的场景名称、地理位置或地名至少其中之一的场景需求请求或场景提供请求，对用户进行匹配，若匹配成功，场景需求用户客户端与场景提供用户客户端建立通讯连接。场景提供用户通过其设备摄像头，将实时获取的当前场景的画面发送到场景需求用户客户端101实时显示播放，如图6所示。如图12所示，场景提供用户的设备摄像头获取当前场景的目标用户30u的人脸图像102，提取人脸特征数据；将所提取的人脸特征数据与数据库的用户人脸特征数据进行对比匹配，判断是否为***注册用户；若是，则根据匹配结果将所述目标用户30u至少包括头像310和昵称311的信息发送给场景需求用户210并在其设备客户端201显示，如图13所示，以供所述场景需求用户查看及根据需要进一步与所述目标用户进行社交或信息交互。
如图2和图13所示，场景需求用户210在其设备客户端201点击所述目标用户30u至少包括头像310的信息，弹出信息交互窗口202，给所述目标用户发送信息。
如图3和图14所示，所述目标用户30u接收所述场景需求用户发送的信息，并在其设备客户端301显示，在其设备客户端显示的还有所述场景需求用户的头像210和昵称211至少其中之一，或在其设备客户端301显示场景需求用户的头像210和昵称211至少其中之一以及附加显示所述场景提供用户的头像110和昵称111至少其中之一。
如图4和图14所示，与上述实施方式不同之处在于，所述目标用户30u接收所述场景需求用户发送的信息，并在其设备客户端301显示，在其设备客户端显示的还有所述场景需求用户的头像210和昵称211至少其中之一，并同时显示“通过场景提供用户连接”相同或相近的文字描述作为标记，或以代表上述含义的标志符号112作为标记，对所述场景提供用户的头像110或昵称111进行标注。
如图14和15所示，根据场景提供用户或目标用户的设置，在目标用户的客户端界面301可不显示场景提供用户的头像和昵称而只显示标志符号112，或仅显示昵称111和标志符号112。
如图5和图19所示，当场景需求用户通过场景提供用户的设备摄像头人脸识别识别匹配一个以上的用户信息时，将所述一个以上的至少包括头像的信息通过横向或纵向列表方式在所述场景需求用户的设备客户端201显示。
如图16所示，可将在目标用户设备客户端界面301显示的场景需求用户的头像210及昵称211放在明显的位置如放在左边第一个位置或位于前面而场景提供用户的头像110和昵称111放在第二位置或位于后面，并以小头像来区别，省去了场景提供的标志符号112。
如图17所示，本发明的另一个实施例为，当目标用户需要与场景提供用户发消息时，点击场景提供用户的头像110，使其头像变大或位于场景需求用户头像210的前面，即可给场景提供用户发消息。
如图6所示，在所述至少包括用户头像的信息设置收藏按钮，点击所述收藏按钮对所述目标用户或场景提供用户的信息进行收藏。
如图7所示，场景需求用户在其设备客户端设置当通过场景提供用户人脸识别匹配出当前场景的目标用户，仅向场景需求用户的设备客户端推送所述目标用户至少包括头像的信息，或同时向场景需求用户和场景提供用户的设备客户端推送所述目标用户至少包括头像的信息。
如图8和图18所示，根据场景需求用户和场景提供用户以及目标用户的设置，将场景需求用户和场景提供用户以及目标用户划分在同一个临时群内，实现三方在群内发送消息，进行社交或信息交互。
如图9、图20至图24所示，场景需求用户通过其客户端向场景提供用户实时发送镜头方向控制指令，以便于场景需求用户寻找目标用户或场景；所述镜头方向控制指令包括在场景需求用户设备客户端201显示的镜头方向控制盘203、控制按钮204以及在场景提供用户设备客户端显示的镜头方向指示框103和指示标104的视觉操作指令，或语音指令；场景提供用户设备客户端101显示的镜头方向指示标104相对于指示框103的偏移方向和偏移量与场景需求用户的设备客户端201的镜头方向控制按钮相对于控制盘的偏移方向和偏移量通过***服务器进行同步显示，场景提供用户根据其设备客户端101显示的方向指示标104的偏移方向和偏移量控制其设备摄像头获取当前场景的方向以及停止移动；在所述场景需求用户的设备客户端201设置拍照/录像按钮210，与场景提供用户设备客户端101摄像头的拍照/录像按钮绑定，当场景需求用户在其设备客户端201按动拍照/录像按钮210时，拍照/录像指令通过***服务器实时发送给场景提供用户的设备客户端，控制场景提供用户的设备摄像头拍照/录像，然后将拍照/录像的照片/视频发送给场景需求用户。
如图10、图25和图26所示，场景需求用户通过其客户端201向场景提供用户实时发送行走方向控制指令，以便于场景需求用户寻找当目标用户或场景；所述行走方向控制指令包括在场景需求用户设备客户端201显示的行走方向控制盘206和控制按钮207以及在场景提供用户设备客户端101显示的行走方向指示框103和指示标104的视觉操作指令，或语音指令；场景提供用户设备客户端101显示的行走方向指示标104相对于指示框103的偏移方向和偏移量与场景需求用户的设备客户端201的行走方向控制按钮207相对于控制盘206的偏移方向和偏移量通过***服务器进行同步显示，场景提供用户根据其设备客户端显示的方向指示标的偏移方向和偏移量控制其行走的运动轨迹，以便于设备摄像头获取场景需求用户所需的场景及目标用户。
如图11所示，本发明还包括展会界面或会议界面，以展会为例以下统称展会界面，包括根据以下方法所对应的界面及模块，包括展商用户的内部参展人员与展位的注册与绑定界面及模块，展商用户头像、公司信息及产品信息界面及模块；将展会各展位的参展商作为***的展会现场观众用户以及展会现场之外的场景需求用户的目标用户，所述展商用户在自己参展的每个工作人员通过人脸注册为本***的注册用户后，又将每个工作人员的人脸注册信息与所述参展商的名称及展位号绑定，保存到数据库中，成为一个展商用户，上传设置所述展商用户头像、公司信息及产品信息；当现场的场景提供用户走到所述展商展位，其设备摄像头获取到所述展商的一个工作人员时，获取该人脸识别特征数据，与数据库中的展商用户的人脸数据进行对比匹配，是否为展商用户，若是，则将所述展商用户的头像及展商信息发送到场景需求用户的设备客户端，供场景需求用户查看，进一步，与所述展商用户进行社交或信息交互。
如图27和图28所示，本发明还包括场景浏览界面和需求发布界面，场景需求用户或场景提供用户在场景需求界面上发布场景需求或场景提供信息，用户在场景浏览界面浏览查找自己的需求。
场景浏览界面501或601包括场景需求用户或场景提供用户发布的信息图标，所述信息图标包括用户的头像510、昵称511、所提供场景图片或视频615以及提供场景符号512和需求场景符号513至少其中之一，并在所述信息图标上或信息图标旁用文字显示所述用户的场景信息514或614，点击所述信息图标或场景信息，与该用户建立场景共享连接。
另一实施例为，场景浏览界面501或601包括场景需求用户或场景提供用户发布的信息图标，所述信息图标包括用户的头像510、昵称511、所提供场景图片或视频615以及提供场景符号512和需求场景符号513至少其中之一，并在所述信息图标上或信息图标旁用文字显示所述用户的场景信息，点击所述信息图标或场景信息，弹出消息窗口，给所述用户发送消息，在消息窗口设置场景连接按钮，点击场景连接按钮，与所述用户建立场景共享连接。
本发明还包括地图界面，场景需求用户或场景提供用户在地图界面上标注自己的位置，在地图界面上发布需求，用户在地图界面查找需求。地图界面包括用户在其所在的地理位置上显示用户的信息图标，所述信息图标包括用户的头像和昵称至少其中之一，在所述用户图标旁显示所述用户的场景信息，点击用户图标或场景信息，与该用户建立场景共享连接；
另一实施例为，在所述用户图标旁显示所述用户的场景信息，点击用户图标或场景信息，弹出消息窗口，给所述用户发送消息，在消息窗口设置场景连接按钮，点击场景连接按钮，与所述用户建立场景共享连接。
本发明还包括打赏设置按钮和/或打赏按钮；打赏设置按钮设置在需求发布界面上，由用户进行打赏金额的设置；打赏按钮设置在场景浏览界面的发布的信息图标或场景信息上或设置在点击所述信息图标或场景信息弹出消息窗口上，或不设置打赏按钮，在完成此次场景共享后直接扣除赏金，或仍设置打赏按钮，待完成此次场景共享后由场景需求用户根据此次的场景共享情况点击打赏按钮，支付赏金。
如图27和图28所示，本发明还包括场景需求搜索框，位于场景需求信息界面或场景提供信息界面的上端，供用户搜索查询需要的场景信息。
以上所述的仅是本发明的优选实施方式，应当指出，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。

Claims (9)

1.一种基于人脸识别和场景共享的社交或信息交互方法，其特征在于：
***用户在其设备客户端通过摄像头提取自己的人脸特征数据，与自己的注册ID绑定，并存储于数据库；
场景需求用户或场景提供用户在其设备客户端通过***服务器向***用户的设备客户端发送包括所需求的或所提供的场景名称、地理位置或地名至少其中之一的场景需求信息或场景提供信息；
或，场景需求用户或场景提供在其设备客户端向***服务器发送包括所需求的或所提供的场景名称、地理位置或地名至少其中之一的场景需求请求或场景提供请求；
用户在其设备客户端查看***推送的***用户的场景需求信息或场景提供信息，点击连接按钮，与该按钮对应的场景需求用户或场景提供用户的设备客户端建立通讯连接；
或，***服务器根据场景需求用户或场景提供在其设备客户端向***服务器发送的包括所需求的或所提供的场景名称、地理位置或地名至少其中之一的场景需求请求或场景提供请求，对用户进行匹配，若匹配成功，场景需求用户客户端与场景提供用户客户端建立通讯连接；
场景提供用户通过其设备摄像头，将实时获取的当前场景的画面发送到场景需求用户客户端实时显示播放；
场景提供用户的设备摄像头获取当前场景的目标用户人脸图像，提取人脸特征数据；
将所提取的人脸特征数据与数据库的用户人脸特征数据进行对比匹配，判断是否为***注册用户；
若是，则根据匹配结果将所述目标用户至少包括头像的信息发送给场景需求用户并在其设备客户端显示，以供所述场景需求用户查看及根据需要进一步与所述目标用户进行社交或信息交互；
镜头方向控制指令包括在场景需求用户设备客户端显示的镜头方向控制盘和控制按钮以及在场景提供用户设备客户端显示的镜头方向指示框和指示标的视觉操作指令，或语音指令；
行走方向控制指令包括在场景需求用户设备客户端显示的行走方向控制盘和在场景提供用户设备客户端显示的行走方向指示框的视觉操作指令，或语音指令；
还包括展会界面或会议界面，其中，所述展会界面包括展商用户的内部参展人员与展位的注册与绑定界面及模块，展商用户头像、公司信息及产品信息界面及模块；
将展会各展位的参展商作为***的展会现场观众用户以及展会现场之外的场景需求用户的目标用户，所述展商用户在自己参展的每个工作人员通过人脸注册为本***的注册用户后，又将每个工作人员的人脸注册信息与所述参展商的名称及展位号绑定，保存到数据库中，成为一个展商用户，上传设置所述展商用户头像、公司信息及产品信息；
当现场的场景提供用户走到所述展商展位，其设备摄像头获取到所述展商的一个工作人员时，获取该人脸识别特征数据，与数据库中的展商用户的人脸数据进行对比匹配，是否为展商用户，若是，则将所述展商用户的头像及展商信息发送到场景需求用户的设备客户端，供场景需求用户查看，进一步，与所述展商用户进行社交或信息交互。
2.如权利要求1所述的方法，其特征在于：
场景需求用户在其设备客户端点击所述目标用户至少包括头像的信息，弹出信息交互窗口，给所述目标用户发送信息。
3.如权利要求2所述的方法，其特征在于：
所述目标用户接收所述场景需求用户发送的信息，并在其设备客户端显示，在其设备客户端显示的还有所述场景需求用户的头像和昵称至少其中之一，或在其设备客户端显示场景需求用户的头像和昵称至少其中之一以及附加显示所述场景提供用户的头像和昵称至少其中之一；
或，所述目标用户接收所述场景需求用户发送的信息，并在其设备客户端显示，在其设备客户端显示的还有所述场景需求用户的头像和昵称至少其中之一，并同时显示“通过场景提供用户连接”相同或相近的文字描述作为标记，或以代表上述含义的标志符号作为标记，对所述场景提供用户的头像或昵称进行标注。
4.如权利要求1或2所述的方法，其特征在于：
当场景需求用户通过场景提供用户的设备摄像头人脸识别匹配一个以上的用户信息时，将所述一个以上的至少包括头像的信息通过横向或纵向列表方式在所述场景需求用户的设备客户端显示。
5.如权利要求1-3中任一项所述的方法，其特征在于：
在所述至少包括用户头像的信息设置收藏按钮，点击所述收藏按钮对所述目标用户或场景提供用户的信息进行收藏。
6.如权利要求1或2所述的方法，其特征在于：
场景需求用户在其设备客户端设置当通过场景提供用户人脸识别匹配出当前场景的目标用户，仅向场景需求用户的设备客户端推送所述目标用户至少包括头像的信息，或同时向场景需求用户和场景提供用户的设备客户端推送所述目标用户至少包括头像的信息。
7.如权利要求1或2所述的方法，其特征在于：
根据场景需求用户和场景提供用户以及目标用户的设置，将场景需求用户和场景提供用户以及目标用户划分在同一个临时群内，实现三方在群内发送消息，进行社交或信息交互。
8.如权利要求1或2所述的方法，其特征在于：
场景需求用户通过其客户端向场景提供用户实时发送镜头方向控制指令，以便于场景需求用户寻找目标用户或场景；
场景提供用户设备客户端显示的镜头方向指示标相对于指示框的偏移方向和偏移量与场景需求用户的设备客户端的镜头方向控制按钮相对于控制盘的偏移方向和偏移量通过***服务器进行同步显示，场景提供用户根据其设备客户端显示的方向指示标的偏移方向和偏移量控制其设备摄像头获取当前场景的方向以及停止移动；
在所述场景需求用户的设备客户端设置拍照/录像按钮，与场景提供用户设备客户端摄像头的拍照/录像按钮绑定，当场景需求用户在其设备客户端按动拍照/录像按钮时，拍照/录像指令通过***服务器实时发送给场景提供用户的设备客户端，控制场景提供用户的设备摄像头拍照/录像，然后将拍照/录像的照片/视频发送给场景需求用户。
9.如权利要求1或2所述的方法，其特征在于：
场景需求用户通过其客户端向场景提供用户实时发送行走方向控制指令，以便于场景需求用户寻找当目标用户或场景；
场景提供用户设备客户端显示的行走方向指示框的方向指示标志与场景需求用户的设备客户端的行走方向控制盘的控制方向和偏移量通过***服务器进行同步显示，场景提供用户根据其设备客户端显示的方向指示标志的偏移方向和偏移量控制其行走的运动轨迹，以便于设备摄像头获取场景需求用户所需的场景及目标用户。
CN201910748279.4A 2019-08-05 2019-08-05 一种基于人脸识别和场景共享的社交或信息交互方法 Active CN110545234B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910748279.4A CN110545234B (zh) 2019-08-05 2019-08-05 一种基于人脸识别和场景共享的社交或信息交互方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910748279.4A CN110545234B (zh) 2019-08-05 2019-08-05 一种基于人脸识别和场景共享的社交或信息交互方法

Publications (2)

Publication Number Publication Date
CN110545234A CN110545234A (zh) 2019-12-06
CN110545234B true CN110545234B (zh) 2024-03-01

Family

ID=68710947

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910748279.4A Active CN110545234B (zh) 2019-08-05 2019-08-05 一种基于人脸识别和场景共享的社交或信息交互方法

Country Status (1)

Country Link
CN (1) CN110545234B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102694826A (zh) * 2011-03-22 2012-09-26 百度在线网络技术（北京）有限公司 一种用于获取与现实场景相关的共享对象的设备和方法
CN103412953A (zh) * 2013-08-30 2013-11-27 苏州跨界软件科技有限公司 基于增强现实的社交方法
CN106844677A (zh) * 2017-01-24 2017-06-13 宇龙计算机通信科技(深圳)有限公司 一种信息分享的方法及装置
CN108668174A (zh) * 2017-03-28 2018-10-16 张克 一种实现视频资源和社交相融合的方法和视频社交融合***
CN108734595A (zh) * 2017-04-17 2018-11-02 金德奎 一种照片拍摄和获取方法及其社交方法
CN109005099A (zh) * 2017-06-06 2018-12-14 金德奎 一种现实场景共享方法及其社交或游戏方法
CN109120504A (zh) * 2017-06-26 2019-01-01 金德奎 一种影像设备共享方法及其社交方法
CN109461003A (zh) * 2018-11-30 2019-03-12 阿里巴巴集团控股有限公司 基于多视角的多人脸场景刷脸支付风险防控方法和设备
CN109508523A (zh) * 2017-09-11 2019-03-22 金德奎 一种基于人脸识别的社交方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102694826A (zh) * 2011-03-22 2012-09-26 百度在线网络技术（北京）有限公司 一种用于获取与现实场景相关的共享对象的设备和方法
CN103412953A (zh) * 2013-08-30 2013-11-27 苏州跨界软件科技有限公司 基于增强现实的社交方法
CN106844677A (zh) * 2017-01-24 2017-06-13 宇龙计算机通信科技(深圳)有限公司 一种信息分享的方法及装置
CN108668174A (zh) * 2017-03-28 2018-10-16 张克 一种实现视频资源和社交相融合的方法和视频社交融合***
CN108734595A (zh) * 2017-04-17 2018-11-02 金德奎 一种照片拍摄和获取方法及其社交方法
CN109005099A (zh) * 2017-06-06 2018-12-14 金德奎 一种现实场景共享方法及其社交或游戏方法
CN109120504A (zh) * 2017-06-26 2019-01-01 金德奎 一种影像设备共享方法及其社交方法
CN109508523A (zh) * 2017-09-11 2019-03-22 金德奎 一种基于人脸识别的社交方法
CN109461003A (zh) * 2018-11-30 2019-03-12 阿里巴巴集团控股有限公司 基于多视角的多人脸场景刷脸支付风险防控方法和设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
移动互联时代社交媒体场景化应用分析;袁雨晴;;中国传媒科技(第03期) *

Also Published As

Publication number Publication date
CN110545234A (zh) 2019-12-06

Similar Documents

Publication Publication Date Title
EP3238445B1 (en) Interactive binocular video display
US20180300097A1 (en) Communication to an Audience at an Event
CN103620600B (zh) 用于实现虚拟标记的方法及设备
CN103635954B (zh) 基于地理和可视信息增强可视数据流的***
CN106548517B (zh) 基于增强现实技术进行视频会议的方法及装置
EP2207113B1 (en) Automated annotation of a view
US20140178029A1 (en) Novel Augmented Reality Kiosks
US9264474B2 (en) System and method of portraying the shifting level of interest in an object or location
CN109120504B (zh) 一种影像设备共享方法及其社交方法
CN106683195B (zh) 一种基于室内定位的ar场景渲染方法
KR102014761B1 (ko) 공간객체 검색결과 정렬 방법, 시스템 및 컴퓨터 독취가능 저장장치
CN108733272B (zh) 适地性空间物件可视范围管理方法与***
TWI617931B (zh) 適地性空間物件遠距管理方法與系統
WO2021218547A1 (zh) 用于在现实场景中叠加直播人物影像的方法和电子设备
JP2022008888A (ja) サーバ、端末、配信システム、配信方法、および情報処理方法
TW201823929A (zh) 移動物件的虛擬訊息遠距管理方法與應用系統
CN110545234B (zh) 一种基于人脸识别和场景共享的社交或信息交互方法
CN110750155A (zh) 一种与图像互动的方法、装置、介质和电子设备
US11847297B2 (en) Method of providing real-time VR service through avatar
CN112437332B (zh) 一种目标多媒体信息的播放方法和装置
JP7466213B2 (ja) 撮像方法及びシステム
CN115062207A (zh) 一种数据获取方法及***
CN108093196A (zh) 一种客户、工厂及专卖店之间互动***
WO2016019898A1 (zh) 即时照片分享装置和方法
JP2002232858A (ja) ドキュメント処理方法および装置並びにプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20240131

Address after: 107, 1st floor, Tsinghua Information Port scientific research building, Nanshan District, Shenzhen, Guangdong 518000

Applicant after: Shenzhen Facebook Technology Co.,Ltd.

Country or region after: China

Address before: 107, 1st floor, Tsinghua Information Port scientific research building, Nanshan District, Shenzhen, Guangdong 518000

Applicant before: Jin Dekui

Country or region before: China

GR01 Patent grant
GR01 Patent grant