CN108229855A - 服务质量监测方法及装置、计算机可读存储介质、终端 - Google Patents

服务质量监测方法及装置、计算机可读存储介质、终端 Download PDF

Info

Publication number
CN108229855A
CN108229855A CN201810117924.8A CN201810117924A CN108229855A CN 108229855 A CN108229855 A CN 108229855A CN 201810117924 A CN201810117924 A CN 201810117924A CN 108229855 A CN108229855 A CN 108229855A
Authority
CN
China
Prior art keywords
result
service quality
monitoring
face
video data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810117924.8A
Other languages
English (en)
Inventor
王华勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Xiaoyi Technology Co Ltd
Original Assignee
Shanghai Xiaoyi Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Xiaoyi Technology Co Ltd filed Critical Shanghai Xiaoyi Technology Co Ltd
Priority to CN201810117924.8A priority Critical patent/CN108229855A/zh
Publication of CN108229855A publication Critical patent/CN108229855A/zh
Priority to US16/266,615 priority patent/US20190244034A1/en
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/53Recognition of crowd images, e.g. recognition of crowd congestion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/167Detection; Localisation; Normalisation using comparisons between temporally consecutive images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0639Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06398Performance of employee with respect to a job function
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10Complex mathematical operations
    • G06F17/18Complex mathematical operations for evaluating statistical data, e.g. average values, frequency distributions, probability functions, regression analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0639Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06393Score-carding, benchmarking or key performance indicator [KPI] analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/105Human resources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/165Detection; Localisation; Normalisation using facial parts and geometric relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • G06V40/176Dynamic expression
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/23Recognition of whole body movements, e.g. for sport training

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Operations Research (AREA)
  • Educational Administration (AREA)
  • Development Economics (AREA)
  • Software Systems (AREA)
  • Quality & Reliability (AREA)
  • Mathematical Physics (AREA)
  • Computational Mathematics (AREA)
  • Marketing (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Tourism & Hospitality (AREA)
  • Pure & Applied Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Computational Linguistics (AREA)
  • Game Theory and Decision Science (AREA)
  • Probability & Statistics with Applications (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Algebra (AREA)
  • Databases & Information Systems (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Geometry (AREA)
  • Computer Vision & Pattern Recognition (AREA)

Abstract

一种服务质量监测方法及装置、计算机可读存储介质、终端,服务质量监测方法包括:在获取到的视频数据中进行人脸检测或者着装检测,以得到人脸或着装;如果所述人脸与预设人脸不匹配或所述着装与预设着装不匹配,则确定所述人脸对应的用户为顾客,所述预设人脸对应的用户包括迎宾员;对所述视频数据中的迎宾员进行面部表情检测、动作检测和/或语音检测,以得到检测结果;根据所述检测结果对服务质量进行评估,以得到评价结果。本发明技术方案可以高效实现服务质量的监测和评定。

Description

服务质量监测方法及装置、计算机可读存储介质、终端
技术领域
本发明涉及数据处理技术领域,尤其涉及一种服务质量监测方法及装置、计算机可读存储介质、终端。
背景技术
在餐饮、酒店等服务行业,当顾客进门时,基本都配有迎宾员服务。通过微笑服务、鞠躬、致欢迎语等一系列动作,对顾客进行迎接服务。在服务行业,尽管服务内容有所区别,但需要确保迎宾服务质量。
目前亟需一种对迎宾服务的监测方法,以提高服务质量。
发明内容
本发明解决的技术问题是如何高效实现服务质量的监测和评定。
为解决上述技术问题,本发明实施例提供一种服务质量监测方法,服务质量监测方法包括:在获取到的视频数据中进行人脸检测或者着装检测,以得到人脸或着装;如果所述人脸与预设人脸不匹配或所述着装与预设着装不匹配,则确定所述人脸对应的用户为顾客,所述预设人脸对应的用户包括迎宾员;对所述视频数据中的迎宾员进行面部表情检测、动作检测和/或语音检测,以得到检测结果;根据所述检测结果对服务质量进行评估,以得到评价结果。
可选的,所述对所述视频数据中的迎宾员进行面部表情检测、动作检测和/或语音检测包括:检测获取所述迎宾员的面部表情,并将所述面部表情与预设表情进行匹配,以得到表情匹配结果,并加入所述检测结果;和/或,检测获取所述迎宾员的执行动作,并将所述执行动作与预设动作进行匹配,以得到动作匹配结果,并加入所述检测结果;和/或,检测获取所述迎宾员的语音文本,并将所述语音文本与预设文本进行匹配,以得到语音匹配结果,并加入所述检测结果。
可选的,所述根据所述检测结果对服务质量进行评估包括:根据检测结果中各个迎宾员的表情匹配结果、动作匹配结果和/或语音匹配结果确定各个迎宾员的服务质量,并加入所述评价结果。
可选的,所述服务质量监测方法还包括:在所述视频数据中检测到所述顾客离开时,结束本次监测过程。
可选的,所述服务质量监测方法还包括:记录每次监测过程对应的视频数据的起始时刻和结束时刻,所述起始时刻为确定所述人脸对应的用户为顾客的时刻,所述结束时刻为检测到所述顾客离开的时刻;将每次监测过程的评价结果与每次监测过程对应的视频数据相关联。
可选的,所述服务质量监测方法还包括:根据每次监测过程对应的视频数据及其相关联的评价结果统计各个迎宾员的服务次数、服务时间和服务质量,以作为统计结果;根据所述统计结果对各个迎宾员进行考勤评估。
为解决上述技术问题,本发明实施例还公开了一种服务质量监测装置,服务质量监测装置包括:初始检测模块,适于在获取到的视频数据中进行人脸检测或者着装检测,以得到人脸或着装;用户确定模块,适于在所述人脸与预设人脸不匹配或所述着装与预设着装不匹配时,确定所述人脸对应的用户为顾客,所述预设人脸对应的用户包括迎宾员;内容检测模块,适于对所述视频数据中的迎宾员进行面部表情检测、动作检测和/或语音检测,以得到检测结果;评估模块,适于根据所述检测结果对服务质量进行评估,以得到评价结果。
可选的,所述内容检测模块包括:面部表情检测单元,适于检测获取所述迎宾员的面部表情,并将所述面部表情与预设表情进行匹配,以得到表情匹配结果,并加入所述检测结果;执行动作检测单元,适于检测获取所述迎宾员的执行动作,并将所述执行动作与预设动作进行匹配,以得到动作匹配结果,并加入所述检测结果;语音检测单元,适于检测获取所述迎宾员的语音文本,并将所述语音文本与预设文本进行匹配,以得到语音匹配结果,并加入所述检测结果。
可选的,所述评估模块包括:服务质量评估单元,适于根据检测结果中各个迎宾员的表情匹配结果、动作匹配结果和/或语音匹配结果确定各个迎宾员的服务质量,并加入所述评价结果。
可选的,所述服务质量监测装置还包括:监测结束判定模块,适于在所述视频数据中检测到所述顾客离开时,结束本次监测过程。
可选的,所述服务质量监测装置还包括:监测记录模块,适于记录每次监测过程对应的视频数据的起始时刻和结束时刻,所述起始时刻为确定所述人脸对应的用户为顾客的时刻,所述结束时刻为检测到所述顾客离开的时刻;关联模块,适于将每次监测过程的评价结果与每次监测过程对应的视频数据相关联。
可选的,所述服务质量监测装置还包括:统计模块,适于根据每次监测过程对应的视频数据及其相关联的评价结果统计各个迎宾员的服务次数、服务时间和服务质量,以作为统计结果;考勤评估模块,适于根据所述统计结果对各个迎宾员进行考勤评估。
本发明实施例还公开了一种计算机可读存储介质,其上存储有计算机指令,所述计算机指令运行时执行权所述服务质量监测方法的步骤。
本发明实施例还公开了一种终端,包括存储器和处理器,所述存储器上存储有可在所述处理器上运行的计算机指令,所述处理器运行所述计算机指令时执行所述服务质量监测方法的步骤。
与现有技术相比,本发明实施例的技术方案具有以下有益效果:
本发明技术方案在获取到的视频数据中进行人脸检测或者着装检测,以得到人脸或着装;如果所述人脸与预设人脸不匹配或所述着装与预设着装不匹配,则确定所述人脸对应的用户为顾客,所述预设人脸对应的用户包括迎宾员;对所述视频数据中的迎宾员进行面部表情检测、动作检测和/或语音检测,以得到检测结果;根据所述检测结果对服务质量进行评估,以得到评价结果。本发明技术方案基于视频数据中的人脸或着装,确定顾客和迎宾员;并在顾客出现时,对迎宾员的面部表情、动作和/或语音进行检测;并根据检测结果对迎宾员的服务质量进行评估,避免了人为判定时的主观性和人力成本,实现了服务质量监测的准确性,降低了监测成本,从而提高了监测效率。此外,在视频数据中检测出顾客后,才对迎宾员的面部表情、动作和/或语音进行检测,避免了无顾客时的无效检测,减小检测设备的功耗。
进一步地,本发明技术方案记录每次监测过程对应的视频数据的起始时刻和结束时刻,所述起始时刻为确定所述人脸对应的用户为顾客的时刻,所述结束时刻为检测到所述顾客离开的时刻;将每次监测过程的评价结果与每次监测过程对应的视频数据相关联。本发明技术方案通过确定并记录每次监测过程的开始时刻和结束时刻,再将对应的视频数据与对应的评价结果进行关联,实现评价结果的可回溯性以及可验证性,提高用户体验。
进一步地,本发明技术方案根据每次监测过程对应的视频数据及其相关联的评价结果统计各个迎宾员的服务次数、服务时间和服务质量,以作为统计结果;根据所述统计结果对各个迎宾员进行考勤评估。本发明技术方案还可以利用监测过程的视频数据对迎宾员进行考勤评估;也即同时实现服务质量的评估和考勤的评估,提高监测效率。
附图说明
图1是本发明实施例一种服务质量监测方法的流程图;
图2是本发明实施例一种具体应用场景的示意图;
图3是本发明实施例一种服务质量监测方法的部分流程图;
图4是本发明实施例一种服务质量监测装置的结构示意图;
图5是本发明实施例一种服务质量监测装置的部分结构示意图。
具体实施方式
如背景技术中所述,目前亟需一种对迎宾服务的监测方法,以提高服务质量。
为使本发明的上述目的、特征和优点能够更为明显易懂,下面结合附图对本发明的具体实施例做详细的说明。
图1是本发明实施例一种服务质量监测方法的流程图。
图1所示的服务质量监测方法可以包括以下步骤:
步骤S101:在获取到的视频数据中进行人脸检测或者着装检测,以得到人脸或着装;
步骤S102:如果所述人脸与预设人脸不匹配或所述着装与预设着装不匹配,则确定所述人脸对应的用户为顾客,所述预设人脸对应的用户包括迎宾员;
步骤S103:对所述视频数据中的迎宾员进行面部表情检测、动作检测和/或语音检测,以得到检测结果;
步骤S104:根据所述检测结果对服务质量进行评估,以得到评价结果。
本实施例中,所述服务质量监测方法可以用于摄像设备。摄像设备利用其拍摄得到的视频数据进行监测。所述服务质量监测方法也可以用于其他任意具有计算机能力的终端设备。
本实施例中的视频数据可以是利用摄像设备针对迎宾区域所拍摄的视频。所述迎宾区域可以是服务场所的入口处,例如可以是餐厅门口、酒店门口等。
在具体实施中,摄像设备可以安装配置于任意可实施的位置,以保证摄像设备所拍摄的画面能够覆盖迎宾区域。
请参照图2,在一种具体应用场景中,在服务场所门口附近固定位置安装摄像机30,摄像机30的角度范围可覆盖门口及服务有效范围。摄像机30通电接网,可以执行实时监控。顾客20和迎宾员10出现在监测范围内时,可以对顾客20和迎宾员10进行监测。
继续参照图1,在步骤S101的具体实施中,可以对视频数据中出现的人物的人脸或着装进行检测,得到人脸或着装。
可以理解的是,人脸检测和着装检测可以使用任意可实施的图形化检测技术,本实施例对此不做限制。
在步骤S102的具体实施中,预设人脸对应的用户可以包括迎宾员,还可以包括工作人员。预设着装可以包括迎宾员的工作服,也可以包括工作人员的工作服。预设人脸和预设着装可以是预先采集好的,并可以在检测过程中直接调用。具体地,可以预先采集预设人脸和预设着装,并存储下来。
如果所述人脸与预设人脸相匹配或所述着装与预设着装相匹配,则表示人脸对应的用户为非顾客,也即视频数据中的用户为迎宾员或工作人员。在这种情况下,迎宾员不需要执行迎宾服务,故而也不需要对服务质量进行监测。
如果所述人脸与预设人脸不匹配或所述着装与预设着装不匹配,则确定所述人脸对应的用户为顾客。在这种情况下,迎宾员需要执行迎宾服务,故而需要对服务质量进行监测。
在确定检测到顾客之后,在步骤S103的具体实施中,对视频数据中的迎宾员的面部表情、动作以及语音进行检测。检测结果包括迎宾员的面部表情、动作和语音文本。
具体而言,对迎宾员的面部表情、动作以及语音中的哪些内容进行检测取决于迎宾服务的具体内容。例如,迎宾服务包括微笑、鞠躬和欢迎词时,需要对迎宾员的面部表情、动作和语音同时进行检测。
具体而言,可以将检测结果中的面部表情与预设面部表情进行匹配,将检测结果中的动作与预设动作进行匹配,将检测结果中的语音文本与预设文本进行匹配,上述匹配过程的匹配结果可以表征评价结果。
具体地,预设面部表情、预设动作和预设文本可以是预先配置好的。预设面部表情、预设动作和预设文本可以根据实际的应用环境进行适应性的组合和配置,本发明实施例对此不做限制。
在具体应用场景中,可以预先对服务标准进行勾选配置,包括但不限于:是否需要鞠躬、是否需要微笑、是否需要说服务语等。
进而在步骤S104的具体实施中,可以根据检测结果对各个迎宾员的服务质量进行评估。换言之,面部表情与预设面部表情的匹配度越高,评价结果中的服务质量越高;动作与预设动作的匹配度越高,评价结果中的服务质量越高;语音文本与预设文本的匹配度越高,评价结果中的服务质量越高。
在步骤S102的另一种具体实施中,如果在视频数据中检测到的全部人脸与所述预设人脸均不匹配,则发出报警信息。也就是说,在视频数据中检测到的全部人脸与所述预设人脸均不匹配时,表明在迎宾区域没有迎宾员,需要报警提示相关人员,以及时进行安排,保证服务质量。
本发明实施例基于视频数据中的人脸或着装,确定顾客和迎宾员;并在顾客出现时,对迎宾员的面部表情、动作和/或语音进行检测;并根据检测结果对迎宾员的服务质量进行评估,避免了人为判定时的主观性和人力成本,实现了服务质量监测的准确性,降低了监测成本,从而提高了监测效率。此外,在视频数据中检测出顾客后,才对迎宾员的面部表情、动作和/或语音进行检测,避免了无顾客时的无效检测,减小检测设备的功耗。
进一步地,在获取到针对各个迎宾员的服务质量的评价结果之后,如果评价结果表明迎宾员的服务质量没有达到设定标准,例如迎宾员执行鞠躬和说服务语时没有微笑,则可以记录该迎宾员的标识并上报至服务器。具体地,可以通过对该迎宾员进行人脸识别获取该迎宾员的工号、名字等。
更近一步地,如果评价结果表明迎宾员的服务质量没有达到设定标准,则还可以发出警示信息。
本发明一个优选实施例中,图1所示步骤S103可以包括以下步骤:
检测获取所述迎宾员的面部表情,并将所述面部表情与预设表情进行匹配,以得到表情匹配结果,并加入所述检测结果;
和/或,检测获取所述迎宾员的执行动作,并将所述执行动作与预设动作进行匹配,以得到动作匹配结果,并加入所述检测结果;
和/或,检测获取所述迎宾员的语音文本,并将所述语音文本与预设文本进行匹配,以得到语音匹配结果,并加入所述检测结果。
本实施例中,检测结果包括表情匹配结果和/或动作匹配结果和/或语音匹配结果。
具体而言,表情匹配结果可以包括两种,匹配和不匹配;也可以包括三种,完全匹配、基本匹配和不匹配;或者,表情匹配结果还可以划分为更多的类别。
类似地,动作匹配结果和语音匹配结果也可以划分为多种类别。
具体实施中,可以采用面部识别技术进行面部表情的检测和匹配,以检测迎宾员是否做出预设面部表情;可以采用人形检测技术实现动作的检测和匹配,例如可以检测迎宾员的头部和肩部的位置,以及上身弯曲的角度,以判断迎宾员是否执行鞠躬动作。可以采用语音检测技术进行语音检测,以判断迎宾员是否输出预设文本,例如,预设文本可以是“欢迎光临”。进一步地,由于迎宾服务的应用场景通常存在较多的杂音,因此还可以对采集到的语音进行降噪操作,再进行语音文本的识别,以提高识别效率和准确性。
本发明另一个优选实施例中,请参照图3,服务质量监测方法还可以包括以下步骤:
步骤S301:在所述视频数据中检测到所述顾客离开时,结束本次监测过程。
本实施例中,检测到所述顾客离开是指检测到顾客离开视频画面。
从顾客进入迎宾区域到顾客离开迎宾区域,迎宾员需要执行一次完整的迎宾服务。由此,从在视频数据中检测到顾客到检测到顾客离开视频画面,可以视为一次完整的监测过程。在监测过程内,需要对迎宾员的服务质量进行监测,视频数据中不存在顾客时,则不需要对迎宾员的服务质量进行监测。
本发明实施例通过避免对全部的视频数据进行监测,可以在保证监测准确性的基础上提高监测效率。
步骤S302:记录每次监测过程对应的视频数据的起始时刻和结束时刻,所述起始时刻为确定所述人脸对应的用户为顾客的时刻,所述结束时刻为检测到所述顾客离开的时刻;
步骤S303:将每次监测过程的评价结果与每次监测过程对应的视频数据相关联。
本实施例中,在确定一次监测过程后,可以将监测过程与对应的视频数据相关联。进而,可以将本次监测过程的得到的评价结果与本次监测过程对应的视频数据相关联。
通过确定并记录每次监测过程的开始时刻和结束时刻,再将对应的视频数据与对应的评价结果进行关联,可以实现评价结果的可回溯性以及可验证性,提高用户体验。
例如,一次监测过程的起始时刻为2018年1月22日13点,结束时刻为2018年1月22日13点5分;本次监测过程的评价结果为服务质量较差。从而在用户需要核实此次服务过程时,可以根据记录的起始时刻和结束时刻调取对应的视频数据。避免了用户在大量的视频数据中查找,节省了时间成本和人力成本,提高了监测效率。
步骤S304:根据每次监测过程对应的视频数据及其相关联的评价结果统计各个迎宾员的服务次数、服务时间和服务质量,以作为统计结果;
步骤S305:根据所述统计结果对各个迎宾员进行考勤评估。
本实施例中,在确定了各个监测过程对应的视频数据后,可以根据各个监测过程对应的视频数据统计各个迎宾员的服务次数和服务时间;可以根据视频数据相关联的评价结果统计各个迎宾员的服务质量。
具体地,一段时间内的视频数据按照监测过程的起始时刻和结束时刻被划分为多个子视频数据。服务次数可以是出现该迎宾员的子视频数据的数量。服务时间可以是出现该迎宾员的子视频数据的总时长。服务质量可以是针对该迎宾员的所有评价结果的评估。
进而在步骤S305的具体实施中,可以利用统计结果对各个迎宾员的考勤结果进行评估。例如,迎宾员的服务次数是否达到预设次数;迎宾员的服务时间是否达到预设时长;迎宾员的服务质量是否达标等。
请参照图4,本发明实施例还公开了一种服务质量监测装置40。
服务质量监测装置40可以包括初始检测模块401、用户确定模块402、内容检测模块403和评估模块404。
其中,初始检测模块401适于在获取到的视频数据中进行人脸检测或者着装检测,以得到人脸或着装;
用户确定模块402适于在所述人脸与预设人脸不匹配或所述着装与预设着装不匹配时,确定所述人脸对应的用户为顾客,所述预设人脸对应的用户包括迎宾员;
内容检测模块403适于对所述视频数据中的迎宾员进行面部表情检测、动作检测和/或语音检测,以得到检测结果;
评估模块404适于根据所述检测结果对服务质量进行评估,以得到评价结果。
本实施例中,基于视频数据中的人脸或着装,确定顾客和迎宾员;并在顾客出现时,对迎宾员的面部表情、动作和/或语音进行检测;并根据检测结果对迎宾员的服务质量进行评估,避免了人为判定时的主观性和人力成本,实现了服务质量监测的准确性,降低了监测成本,从而提高了监测效率。此外,在视频数据中检测出顾客后,才对迎宾员的面部表情、动作和/或语音进行检测,避免了无顾客时的无效检测,减小检测设备的功耗。
本发明一个具体实施例中,内容检测模块403可以包括面部表情检测单元(图未示),适于检测获取所述迎宾员的面部表情,并将所述面部表情与预设表情进行匹配,以得到表情匹配结果,并加入所述检测结果;
执行动作检测单元(图未示),适于检测获取所述迎宾员的执行动作,并将所述执行动作与预设动作进行匹配,以得到动作匹配结果,并加入所述检测结果;
语音检测单元(图未示),适于检测获取所述迎宾员的语音文本,并将所述语音文本与预设文本进行匹配,以得到语音匹配结果,并加入所述检测结果。
本发明一个优选实施例中,评估模块404可以包括服务质量评估单元(图未示),适于根据检测结果中各个迎宾员的表情匹配结果、动作匹配结果和/或语音匹配结果确定各个迎宾员的服务质量,并加入所述评价结果。
本发明另一个优选实施例中,请参照图5,服务质量监测装置50可以包括监测结束判定模块501,适于在所述视频数据中检测到所述顾客离开时,结束本次监测过程。
监测记录模块502,适于记录每次监测过程对应的视频数据的起始时刻和结束时刻,所述起始时刻为确定所述人脸对应的用户为顾客的时刻,所述结束时刻为检测到所述顾客离开的时刻;
关联模块503,适于将每次监测过程的评价结果与每次监测过程对应的视频数据相关联。
本发明实施例通过确定并记录每次监测过程的开始时刻和结束时刻,再将对应的视频数据与对应的评价结果进行关联,实现评价结果的可回溯性以及可验证性,提高用户体验。
统计模块504,适于根据每次监测过程对应的视频数据及其相关联的评价结果统计各个迎宾员的服务次数、服务时间和服务质量,以作为统计结果;
考勤评估模块505,适于根据所述统计结果对各个迎宾员进行考勤评估。
本发明实施例还可以利用监测过程的视频数据对迎宾员进行考勤评估;也即同时实现服务质量的评估和考勤的评估,提高监测效率。
关于所述服务质量监测装置40的工作原理、工作方式的更多内容,可以参照图1至图3中的相关描述,这里不再赘述。
本发明实施例还公开了一种计算机可读存储介质,其上存储有计算机指令,所述计算机指令运行时可以执行图1或图3中所示的服务质量监测方法的步骤。所述存储介质可以包括ROM、RAM、磁盘或光盘等。所述存储介质还可以包括非挥发性存储器(non-volatile)或者非瞬态(non-transitory)存储器等。
本发明实施例还公开了一种终端,所述终端可以包括存储器和处理器,所述存储器上存储有可在所述处理器上运行的计算机指令。所述处理器运行所述计算机指令时可以执行图1或图3中所示的服务质量监测方法的步骤。所述终端包括但不限于手机、计算机、平板电脑等终端设备。
虽然本发明披露如上,但本发明并非限定于此。任何本领域技术人员,在不脱离本发明的精神和范围内,均可作各种更动与修改,因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (14)

1.一种服务质量监测方法,其特征在于,包括:
在获取到的视频数据中进行人脸检测或者着装检测,以得到人脸或着装;
如果所述人脸与预设人脸不匹配或所述着装与预设着装不匹配,则确定所述人脸对应的用户为顾客,所述预设人脸对应的用户包括迎宾员;
对所述视频数据中的迎宾员进行面部表情检测、动作检测和/或语音检测,以得到检测结果;
根据所述检测结果对服务质量进行评估,以得到评价结果。
2.根据权利要求1所述的服务质量监测方法,其特征在于,所述对所述视频数据中的迎宾员进行面部表情检测、动作检测和/或语音检测包括:
检测获取所述迎宾员的面部表情,并将所述面部表情与预设表情进行匹配,以得到表情匹配结果,并加入所述检测结果;
和/或,检测获取所述迎宾员的执行动作,并将所述执行动作与预设动作进行匹配,以得到动作匹配结果,并加入所述检测结果;
和/或,检测获取所述迎宾员的语音文本,并将所述语音文本与预设文本进行匹配,以得到语音匹配结果,并加入所述检测结果。
3.根据权利要求2所述的服务质量监测方法,其特征在于,所述根据所述检测结果对服务质量进行评估包括:
根据检测结果中各个迎宾员的表情匹配结果、动作匹配结果和/或语音匹配结果确定各个迎宾员的服务质量,并加入所述评价结果。
4.根据权利要求1所述的服务质量监测方法,其特征在于,还包括:
在所述视频数据中检测到所述顾客离开时,结束本次监测过程。
5.根据权利要求4所述的服务质量监测方法,其特征在于,还包括:
记录每次监测过程对应的视频数据的起始时刻和结束时刻,所述起始时刻为确定所述人脸对应的用户为顾客的时刻,所述结束时刻为检测到所述顾客离开的时刻;
将每次监测过程的评价结果与每次监测过程对应的视频数据相关联。
6.根据权利要求5所述的服务质量监测方法,其特征在于,还包括:
根据每次监测过程对应的视频数据及其相关联的评价结果统计各个迎宾员的服务次数、服务时间和服务质量,以作为统计结果;
根据所述统计结果对各个迎宾员进行考勤评估。
7.一种服务质量监测装置,其特征在于,包括:
初始检测模块,适于在获取到的视频数据中进行人脸检测或者着装检测,以得到人脸或着装;
用户确定模块,适于在所述人脸与预设人脸不匹配或所述着装与预设着装不匹配时,确定所述人脸对应的用户为顾客,所述预设人脸对应的用户包括迎宾员;
内容检测模块,适于对所述视频数据中的迎宾员进行面部表情检测、动作检测和/或语音检测,以得到检测结果;
评估模块,适于根据所述检测结果对服务质量进行评估,以得到评价结果。
8.根据权利要求7所述的服务质量监测装置,其特征在于,所述内容检测模块包括:
面部表情检测单元,适于检测获取所述迎宾员的面部表情,并将所述面部表情与预设表情进行匹配,以得到表情匹配结果,并加入所述检测结果;
执行动作检测单元,适于检测获取所述迎宾员的执行动作,并将所述执行动作与预设动作进行匹配,以得到动作匹配结果,并加入所述检测结果;
语音检测单元,适于检测获取所述迎宾员的语音文本,并将所述语音文本与预设文本进行匹配,以得到语音匹配结果,并加入所述检测结果。
9.根据权利要求8所述的服务质量监测装置,其特征在于,所述评估模块包括:
服务质量评估单元,适于根据检测结果中各个迎宾员的表情匹配结果、动作匹配结果和/或语音匹配结果确定各个迎宾员的服务质量,并加入所述评价结果。
10.根据权利要求7所述的服务质量监测装置,其特征在于,还包括:
监测结束判定模块,适于在所述视频数据中检测到所述顾客离开时,结束本次监测过程。
11.根据权利要求10所述的服务质量监测装置,其特征在于,还包括:
监测记录模块,适于记录每次监测过程对应的视频数据的起始时刻和结束时刻,所述起始时刻为确定所述人脸对应的用户为顾客的时刻,所述结束时刻为检测到所述顾客离开的时刻;
关联模块,适于将每次监测过程的评价结果与每次监测过程对应的视频数据相关联。
12.根据权利要求11所述的服务质量监测装置,其特征在于,还包括:
统计模块,适于根据每次监测过程对应的视频数据及其相关联的评价结果统计各个迎宾员的服务次数、服务时间和服务质量,以作为统计结果;
考勤评估模块,适于根据所述统计结果对各个迎宾员进行考勤评估。
13.一种计算机可读存储介质,其上存储有计算机指令,其特征在于,所述计算机指令运行时执行权利要求1至6中任一项所述服务质量监测方法的步骤。
14.一种终端,包括存储器和处理器,所述存储器上存储有可在所述处理器上运行的计算机指令,其特征在于,所述处理器运行所述计算机指令时执行权利要求1至6中任一项所述服务质量监测方法的步骤。
CN201810117924.8A 2018-02-06 2018-02-06 服务质量监测方法及装置、计算机可读存储介质、终端 Pending CN108229855A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810117924.8A CN108229855A (zh) 2018-02-06 2018-02-06 服务质量监测方法及装置、计算机可读存储介质、终端
US16/266,615 US20190244034A1 (en) 2018-02-06 2019-02-04 Methods and apparatuses for processing video data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810117924.8A CN108229855A (zh) 2018-02-06 2018-02-06 服务质量监测方法及装置、计算机可读存储介质、终端

Publications (1)

Publication Number Publication Date
CN108229855A true CN108229855A (zh) 2018-06-29

Family

ID=62671025

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810117924.8A Pending CN108229855A (zh) 2018-02-06 2018-02-06 服务质量监测方法及装置、计算机可读存储介质、终端

Country Status (2)

Country Link
US (1) US20190244034A1 (zh)
CN (1) CN108229855A (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109242563A (zh) * 2018-09-03 2019-01-18 索信科技(北京)有限公司 一种智能化信息监测应用方法和***
CN109858949A (zh) * 2018-12-26 2019-06-07 秒针信息技术有限公司 一种基于监控摄像的顾客满意度评估方法和评估***
CN109886727A (zh) * 2019-01-08 2019-06-14 秒针信息技术有限公司 揽客效率的评估方法及装置
CN110210338A (zh) * 2019-05-17 2019-09-06 广东履安实业有限公司 一种对目标人员的着装信息进行检测识别的方法及***
CN110309768A (zh) * 2019-06-28 2019-10-08 上海眼控科技股份有限公司 车检工位的工作人员检测方法及设备
CN110895685A (zh) * 2019-11-25 2020-03-20 创新奇智(上海)科技有限公司 基于深度学习的微笑服务质量评价***及评价方法
CN111325069A (zh) * 2018-12-14 2020-06-23 珠海格力电器股份有限公司 产线数据处理方法、装置、计算机设备和存储介质
CN111353804A (zh) * 2018-12-24 2020-06-30 中移(杭州)信息技术有限公司 一种服务评价方法、装置、终端设备和介质
CN111447547A (zh) * 2018-12-28 2020-07-24 K11集团有限公司 基于用户即时位置的服务提醒***和方法
CN112200697A (zh) * 2020-12-04 2021-01-08 深圳市房多多网络科技有限公司 远程视频看房方法、装置、设备以及计算机存储介质
CN112348390A (zh) * 2020-11-17 2021-02-09 广州顶新时代电子***科技有限公司 一种基于服务质量的智能考核***
CN112633037A (zh) * 2019-09-24 2021-04-09 北京国双科技有限公司 一种对象监测方法、装置、存储介质及电子设备
CN112966932A (zh) * 2021-03-04 2021-06-15 上海明略人工智能(集团)有限公司 导游服务质量评价方法及***
CN116214528A (zh) * 2023-05-10 2023-06-06 深圳市安信达存储技术有限公司 一种人形机器人存储控制方法及控制***

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103530912A (zh) * 2013-09-27 2014-01-22 深圳市迈瑞思智能技术有限公司 一种具有情绪识别功能的考勤***及方法
US20150086072A1 (en) * 2013-09-25 2015-03-26 Palo Alto Research Center Incorporated Methods and systems for monitoring a worker performing a crowdsourced task
CN106851216A (zh) * 2017-03-10 2017-06-13 山东师范大学 一种基于人脸和语音识别的课堂行为监控***及方法
CN106875310A (zh) * 2017-04-19 2017-06-20 哈尔滨理工大学 基于智能视频的智能教室教学多功能***

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150086072A1 (en) * 2013-09-25 2015-03-26 Palo Alto Research Center Incorporated Methods and systems for monitoring a worker performing a crowdsourced task
CN103530912A (zh) * 2013-09-27 2014-01-22 深圳市迈瑞思智能技术有限公司 一种具有情绪识别功能的考勤***及方法
CN106851216A (zh) * 2017-03-10 2017-06-13 山东师范大学 一种基于人脸和语音识别的课堂行为监控***及方法
CN106875310A (zh) * 2017-04-19 2017-06-20 哈尔滨理工大学 基于智能视频的智能教室教学多功能***

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109242563A (zh) * 2018-09-03 2019-01-18 索信科技(北京)有限公司 一种智能化信息监测应用方法和***
CN111325069B (zh) * 2018-12-14 2022-06-10 珠海格力电器股份有限公司 产线数据处理方法、装置、计算机设备和存储介质
CN111325069A (zh) * 2018-12-14 2020-06-23 珠海格力电器股份有限公司 产线数据处理方法、装置、计算机设备和存储介质
CN111353804A (zh) * 2018-12-24 2020-06-30 中移(杭州)信息技术有限公司 一种服务评价方法、装置、终端设备和介质
CN109858949A (zh) * 2018-12-26 2019-06-07 秒针信息技术有限公司 一种基于监控摄像的顾客满意度评估方法和评估***
CN111447547A (zh) * 2018-12-28 2020-07-24 K11集团有限公司 基于用户即时位置的服务提醒***和方法
CN109886727A (zh) * 2019-01-08 2019-06-14 秒针信息技术有限公司 揽客效率的评估方法及装置
CN110210338A (zh) * 2019-05-17 2019-09-06 广东履安实业有限公司 一种对目标人员的着装信息进行检测识别的方法及***
CN110309768A (zh) * 2019-06-28 2019-10-08 上海眼控科技股份有限公司 车检工位的工作人员检测方法及设备
CN112633037A (zh) * 2019-09-24 2021-04-09 北京国双科技有限公司 一种对象监测方法、装置、存储介质及电子设备
CN110895685A (zh) * 2019-11-25 2020-03-20 创新奇智(上海)科技有限公司 基于深度学习的微笑服务质量评价***及评价方法
CN112348390A (zh) * 2020-11-17 2021-02-09 广州顶新时代电子***科技有限公司 一种基于服务质量的智能考核***
CN112200697A (zh) * 2020-12-04 2021-01-08 深圳市房多多网络科技有限公司 远程视频看房方法、装置、设备以及计算机存储介质
CN112966932A (zh) * 2021-03-04 2021-06-15 上海明略人工智能(集团)有限公司 导游服务质量评价方法及***
CN116214528A (zh) * 2023-05-10 2023-06-06 深圳市安信达存储技术有限公司 一种人形机器人存储控制方法及控制***
CN116214528B (zh) * 2023-05-10 2023-10-03 深圳市安信达存储技术有限公司 一种人形机器人存储控制方法及控制***

Also Published As

Publication number Publication date
US20190244034A1 (en) 2019-08-08

Similar Documents

Publication Publication Date Title
CN108229855A (zh) 服务质量监测方法及装置、计算机可读存储介质、终端
CN108269333A (zh) 人脸识别方法、应用服务器及计算机可读存储介质
CN109858371B (zh) 人脸识别的方法及装置
CN108629791A (zh) 行人跟踪方法和装置及跨摄像头行人跟踪方法和装置
US10769645B2 (en) Method and device for calculating customer traffic volume
CN111050130B (zh) 一种摄像头控制方法、装置及存储介质
CN105335750A (zh) 客户身份识别***及识别方法
CN108197586A (zh) 脸部识别方法和装置
US20140148709A1 (en) System and method for integrating heart rate measurement and identity recognition
CN104644189A (zh) 一种心理活动的分析方法
CN109905680A (zh) 操作的监控方法及装置、存储介质、电子装置
CN109815370A (zh) 一种归档方法及装置
CN108875517A (zh) 视频处理方法、装置和***及存储介质
CN110705476A (zh) 数据分析方法、装置、电子设备和计算机存储介质
CN110909684A (zh) 基于人体检测的工作状态检查***及方法
CN107920223A (zh) 一种对象行为检测方法及装置
CN109559336A (zh) 对象追踪方法、装置及存储介质
CN109902550A (zh) 行人属性的识别方法和装置
CN111666915A (zh) 监控方法、装置、设备以及存储介质
CN109922311A (zh) 基于音视频联动的监控方法、装置、终端及存储介质
CN109271929A (zh) 检测方法和装置
CN110674728B (zh) 基于视频图像识别玩手机方法、装置、服务器及存储介质
CN109583296A (zh) 一种防止误检测方法、装置、***及计算机存储介质
CN111191995A (zh) 一种基于互联网平台实现门店智能监控及会员到店智能提醒的方法
CN112686744A (zh) 外访业务监控方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180629