NL1039419C2 - METHOD FOR ANALYSIS OF A VIDEO RECORDING. - Google Patents

METHOD FOR ANALYSIS OF A VIDEO RECORDING. Download PDF

Info

Publication number
NL1039419C2
NL1039419C2 NL1039419A NL1039419A NL1039419C2 NL 1039419 C2 NL1039419 C2 NL 1039419C2 NL 1039419 A NL1039419 A NL 1039419A NL 1039419 A NL1039419 A NL 1039419A NL 1039419 C2 NL1039419 C2 NL 1039419C2
Authority
NL
Netherlands
Prior art keywords
person
video recording
value
list
degree
Prior art date
Application number
NL1039419A
Other languages
Dutch (nl)
Inventor
Lucas Jacob Wemes
Klaas Cornelis Boer
Original Assignee
Allprofs Group B V
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Allprofs Group B V filed Critical Allprofs Group B V
Priority to NL1039419A priority Critical patent/NL1039419C2/en
Application granted granted Critical
Publication of NL1039419C2 publication Critical patent/NL1039419C2/en

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/167Personality evaluation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1123Discriminating type of movement, e.g. walking or running
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/70Multimodal biometrics, e.g. combining information from different biometric modalities
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00Evaluating a particular growth phase or type of persons or animals
    • A61B2503/20Workers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2576/00Medical imaging apparatus involving image processing or analysis
    • A61B2576/02Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4803Speech analysis specially adapted for diagnostic purposes
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Psychology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Educational Technology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Developmental Disabilities (AREA)
  • Image Analysis (AREA)

Description

WERKWIJZE VOOR ANALYSE VAN EEN VIDEO-OPNAMEMETHOD FOR ANALYSIS OF A VIDEO RECORDING

De uitvinding is gelegen in een vakgebied waarin het analyseren van persoonlijkheidskenmerken van belang is bij een keuze voor een persoon. Een 5 werkwijze waarbij uit een groep van personen een persoon gekozen wordt die bijvoorbeeld het meest geschikt is voor het vervullen van een functie, wordt vaak toegepast bij het werven en selecteren van kandidaten voor een vacature. Voor de vacature is vaak een eerste profiel van een ideale kandidaat opgesteld. Het eerste profiel omvat een aantal harde kenmerken van de ideale kandidaat, zoals opleiding, 10 salaris, woonplaats, en een aantal zachte kenmerken of persoonlijkheidskenmerken, zoals overtuigingskracht, vriendelijkheid, betrouwbaarheid.The invention lies in a field in which the analysis of personality traits is important in a choice for a person. A method whereby a person is selected from a group of persons who is, for example, the most suitable for fulfilling a position, is often applied when recruiting and selecting candidates for a vacancy. A first profile of an ideal candidate has often been drawn up for the vacancy. The first profile comprises a number of hard characteristics of the ideal candidate, such as education, salary, place of residence, and a number of soft characteristics or personality characteristics, such as persuasiveness, kindness, reliability.

Voor het analyseren van persoonlijkheidskenmerken zijn voor een deskundige, die persoonlijkheidskenmerken van de te onderzoeken persoon onderzoekt, vele technieken beschikbaar. Zo is het in het vakgebied gebruikelijk om 15 persoonlijkheidskenmerken te meten door een te onderzoeken persoon meerdere vragen stellen, waarbij de persoon bijvoorbeeld kan kiezen tussen antwoorden zoals “waar” en “onwaar”, waarbij vaak bijvoorbeeld nog drie tussenvormen mogelijk zijn. Op basis van de door de persoon gegeven antwoorden kan een tweede profiel van de persoon samengesteld worden dat betrekking heeft op het onderzochte 20 persoonlijkheidskenmerk. Bij de werving en selectie dient het tweede profiel zo veel mogelijk overeen te komen met de in het eerste profiel vastgestelde persoonlijkheidskenmerken.Many techniques are available for analyzing personality traits for an expert examining the personality traits of the person to be examined. For example, it is customary in the art to measure personality traits by asking a person to be investigated multiple questions, whereby the person can, for example, choose between answers such as "true" and "false", whereby for example, three intermediate forms are often still possible. On the basis of the answers given by the person, a second profile of the person can be compiled that relates to the personality trait investigated. When recruiting and selecting, the second profile must correspond as much as possible with the personality traits established in the first profile.

Het is gebruikelijk om voorafgaand aan het opstellen en rapporteren van de analyse, het tweede profiel in een gesprek te toetsen. Hierdoor wordt de kans kleiner 25 dat de onderzoeker een tweede profiel van de onderzochte persoon opstelt dat het persoonlijkheidskenmerk onvolledig of verkeerd beschrijft.It is customary to test the second profile in a conversation prior to drafting and reporting the analysis. This reduces the chance that the researcher draws up a second profile of the person under investigation that describes the personality trait incomplete or incorrectly.

Bij het analyseren van de persoonlijkheidskenmerken wordt vaak gebruik gemaakt van een op een computer werkzame toepassing, waarbij de te onderzoeken persoon vragen beantwoordt die door de toepassing gesteld worden, waarbij de 30 onderzoeker antwoorden ontvangt en verwerkt voor analyse van het persoonlijkheidskenmerk, en waarbij een eerste waarde wordt toegekend aan een persoonlijkheidskenmerk van de persoon. De toepassing kan via het internet werkzaam zijn, waarbij de antwoorden middels een verbinding naar de toepassing verstuurbaar zijn voor verwerking door de onderzoeker. De toepassing kan ook buiten 35 het internet op een computer werkzaam zijn, waarbij de antwoorden middels een gegevensbestand naar de onderzoeker verstuurbaar zijn.When analyzing the personality traits, a computer-based application is often used, where the person to be examined answers questions asked by the application, the investigator receives answers and processes them for analysis of the personality trait, and where a first value is assigned to a personality trait of the person. The application can be active via the internet, whereby the answers can be sent via a connection to the application for processing by the researcher. The application can also operate on a computer outside the internet, the answers being sent to the researcher by means of a data file.

Bij een dergelijke werkwijze, valt de onderzochte persoon die een onvoldoende 1039419 2 eerste waarde op het persoonlijkheidskenmerk scoort buiten de keuze. Indien uit de antwoorden een score voor de eerste waarde blijkt, waarbij het zinvol is de onderzochte persoon verder te onderzoeken, wordt een persoonlijk gesprek tussen de onderzoeker en de te onderzoeken persoon gehouden voor een controle op de uit de 5 analyse van het persoonlijkheidskenmerk verkregen eerste waarde betreffende het persoonlijkheidskenmerk van de persoon.In such a method, the person examined who scores an insufficient first value on the personality trait is not a choice. If the answers show a score for the first value, whereby it is useful to further investigate the person under investigation, a personal conversation between the investigator and the person to be investigated is held for a check on the first obtained from the analysis of the personality trait. value concerning the personality characteristic of the person.

Het is een nadeel van de bekende werkwijze dat er een mogelijkheid is dat een middels de toepassing verkregen eerste waarde een vals, onvolledig of verkeerd beeld verschaft van het middels de toepassing gemeten persoonlijkheidskenmerk. De 10 middels de toepassing gestelde vragen kunnen door een persoon zodanig beantwoord worden dat een voor de persoon gunstige, maar feitelijk onterecht hoge score voor de eerste waarde behaald wordt, waardoor de persoon een vertekend beeld verschaft van zijn persoonlijkheidskenmerk. Hierdoor raakt een verzameling van kandidaten die belangstelling getoond hebben voor de vacature in meer of mindere mate vervuild.It is a drawback of the known method that there is a possibility that a first value obtained through the application provides a false, incomplete or incorrect image of the personality trait measured by the application. The questions asked through the application can be answered by a person in such a way that a favorable, but in fact incorrectly high score for the first value is achieved for the person, whereby the person provides a distorted image of his personality trait. As a result, a collection of candidates who have expressed an interest in the vacancy becomes more or less polluted.

15 Het is een doel van de uitvinding een verbeterde analyse van het persoonlijkheidskenmerk van de te onderzoeken persoon te verschaffen, waarbij voor het toetsen van het persoonlijkheidskenmerk van de persoon, de persoon objectief, nauwkeurig, en betrouwbaar vergeleken wordt met vooraf in het eerste profiel opgestelde eisen.It is an object of the invention to provide an improved analysis of the personality trait of the person to be investigated, wherein prior to testing the personality trait of the person, the person is objectively, accurately and reliably compared with pre-established in the first profile requirements.

20 De werkwijze volgens de uitvinding verschaft daartoe een analyse van een video-opname, omvattende de stappen van: het verschaffen van een op een computer werkzame toepassing voor communicatie met een persoon, het middels de toepassing ontvangen van antwoorden op door de 25 toepassing aan de persoon voorgelegde vragen, het middels de toepassing ontvangen van de video-opname waarin opgenomen beeld en geluid van de persoon aanwezig is, het analyseren van de antwoorden, waarbij een eerste waarde wordt toegekend aan een persoonlijkheidskenmerk van de persoon, 30 - het analyseren van de video-opname, waarbij het opgenomen beeld en geluid geanalyseerd wordt, het op basis van het analyseren van het opgenomen beeld en geluid toekennen van een tweede waarde aan het persoonlijkheidskenmerk van de persoon, het vergelijken van de eerste waarde met de tweede waarde, waarbij 35 voor de eerste en de tweede waarde een eerste mate van overeenkomst bepaald wordt, en het verschaffen van een uitgangssignaal omvattende een resultaat van 3 de eerste mate van overeenkomst. Hierdoor wordt het mogelijk om het persoonlijkheidskenmerk van de persoon enerzijds te bepalen op basis van de antwoorden die de persoon gegeven heeft op vragen die door de toepassing voorgelegd zijn, waarbij aan het persoonlijkheidskenmerk de eerste waarde toegekend 5 wordt. Anderzijds wordt het persoonlijkheidskenmerk bepaald op basis van de door de persoon opgenomen video-opname die een presentatie van de persoon omvat. Bij analyse van de video-opname wordt het opgenomen beeld en geluid van de video-opname nauwkeurig, objectief en betrouwbaar gemeten, geanalyseerd, en gekwantificeerd, waarbij aan het persoonlijkheidskenmerk de tweede waarde 10 toegekend wordt. Vervolgens wordt bepaald in hoeverre de eerste waarde overeenkomt met de tweede waarde. De vergelijking verschaft informatie over de betrouwbaarheid van de eerste waarde, welke betrouwbaarheid in de vorm van het uitgangssignaal beschikbaar komt.To that end, the method according to the invention provides an analysis of a video recording, comprising the steps of: providing an application operating on a computer for communication with a person, receiving responses to the application by the application to the person questions submitted to the person, receiving the video recording containing the recorded image and sound of the person by means of the application, analyzing the answers, whereby a first value is assigned to a personality characteristic of the person, - analyzing the video recording, in which the recorded image and sound are analyzed, assigning a second value to the personality trait of the person on the basis of analyzing the recorded image and sound, comparing the first value with the second value, wherein for the first and the second value a first degree of similarity is determined, and the provision of a starting signal including a result of the first degree of agreement. This makes it possible, on the one hand, to determine the personality trait of the person on the basis of the answers given by the person to questions submitted by the application, whereby the personality trait is assigned the first value 5. On the other hand, the personality characteristic is determined on the basis of the video recording recorded by the person, which comprises a presentation of the person. When analyzing the video recording, the recorded image and sound of the video recording are accurately, objectively and reliably measured, analyzed, and quantified, with the personality value being assigned the second value. Next, it is determined to what extent the first value corresponds to the second value. The comparison provides information about the reliability of the first value, which reliability becomes available in the form of the output signal.

In een uitvoeringsvorm, omvat het analyseren van de video-opname het 15 isoleren van meerdere beelden van de video-opname, waarbij voor het bepalen van de tweede waarde elk geïsoleerd beeld onderworpen wordt aan de stappen van: het herkennen van op de beelden aanwezige vormen die bij mensen in het algemeen voorkomen, het bepalen van een reeks markeringspunten op de op de beelden 20 aanwezige vormen, het ten opzichte van een oorsprong en een assenkruis bepalen van coördinaten van de reeks markeringspunten. Hierdoor wordt het mogelijk om de coördinaten te bepalen van de reeks markeringspunten die karakteristiek zijn voor de persoon, voor het analyseren in welke mate verplaatsingen van het silhouet van de 25 persoon aanwezige zijn, welke verplaatsingen een mate zijn voor bijvoorbeeld het uitstralen van zenuwen, rust, en/of vertrouwen. Na analyse van de coördinaten van de reeks markeringspunten bij alle geïsoleerde beelden tezamen wordt een waarde aan de tweede waarde toegekend voor het bepalen van in de video-opname geanalyseerde persoonlijkheidskenmerken.In one embodiment, analyzing the video recording comprises isolating multiple images from the video recording, wherein for determining the second value each isolated image is subjected to the steps of: recognizing shapes present on the images which occur in humans in general, determining a series of marking points on the forms present on the images 20, determining coordinates of the series of marking points with respect to an origin and an axial cross. This makes it possible to determine the coordinates of the series of marker points that are characteristic of the person, to analyze to what extent movements of the silhouette of the person are present, which movements are a degree for, for example, radiating nerves, rest , and / or trust. After analyzing the coordinates of the set of marker points for all isolated images together, a value is assigned to the second value for determining personality traits analyzed in the video recording.

30 In een uitvoeringsvorm, zijn de op de beelden aanwezige vormen bepaald door omtrekslijnen van tenminste een uit lippen, ogen, wenkbrauwen en neus van de afgebeelde persoon, en/of door een silhouet dat zich althans ten dele uitstrekt langs een hoofd van de afgebeelde persoon, en/of langs een hals en/of langs schouders van de persoon. Hierdoor wordt het mogelijk om de coördinaten te bepalen van de door de 35 omtrekslijnen van genoemde gezichtsonderdelen bepaalde reeks van markeringspunten. Middels een verloop in de coördinaten van elk markeringspunt wordt geanalyseerd in welke mate lachende gezichtsuitdrukkingen, verbaasde of 4 bedenkelijke gezichtsuitdrukkingen vorkomen.In one embodiment, the shapes present on the images are defined by circumferential lines of at least one of lips, eyes, eyebrows and nose of the person depicted, and / or by a silhouette extending at least partially along a head of the person depicted and / or along a person's neck and / or shoulders. This makes it possible to determine the coordinates of the series of marking points determined by the circumferential lines of said face parts. By means of a variation in the coordinates of each marking point, it is analyzed to what extent smiling facial expressions, surprised or 4 questionable facial expressions occur.

In een uitvoeringsvorm, worden bepaalde coördinaten van de markeringspunten van een geïsoleerd beeld vergeleken met bepaalde coördinaten van dezelfde markeringspunten van een opeenvolgend geïsoleerd beeld voor het bepalen van een 5 mate van de verplaatsing van de markeringspunten van het op het geïsoleerd beeld volgende geïsoleerd beeld. Hierdoor wordt het mogelijk om tijdens de video-opname door de persoon gemaakte verplaatsingen van met de genoemde gezichtsonderdelen corresponderende markeringspunten te meten. In afhankelijkheid van een mate van verplaatsingen van de markeringspunten die corresponderen met de mondhoeken, kan 10 bijvoorbeeld een mate van een persoonlijkheidskenmerk zoals, zenuwachtigheid, vertrouwen, vrolijkheid en/of vriendelijkheid bepaald worden. In afhankelijkheid van een mate van verplaatsingen van de markeringspunten die corresponderen met de wenkbrauwen, kan een mate van een persoonlijkheidskenmerk zoals betrokkenheid en/of mate voor serieus zijn bepaald worden. Dergelijke persoonlijkheidskenmerken 15 zijn middels de toepassing ook al middels de toepassing ontvangen antwoorden op door de toepassing aan de persoon voorgelegde vragen getoetst, waarbij aan de persoonlijkheidskenmerken een eerste waarde is toegekend. Na analyse van de bewegingen wordt een waarde aan de tweede waarde toegekend, waarbij na vergelijking van de tweede waarde met de eerste waarde het uitgangssignaal 20 informatie verschaft over het geanalyseerde persoonlijkheidskenmerk.In one embodiment, certain coordinates of the marking points of an isolated image are compared with certain coordinates of the same marking points of a consecutive isolated image to determine a degree of movement of the marking points of the isolated image following the isolated image. This makes it possible to measure movements made by the person during the video recording of marking points corresponding to said face parts. Depending on a degree of displacement of the marking points corresponding to the corners of the mouth, a degree of a personality trait such as, nervousness, trust, cheerfulness and / or kindness can for instance be determined. Depending on a degree of displacement of the marker points corresponding to the eyebrows, a degree of a personality trait such as involvement and / or degree of seriousness can be determined. Such personality traits 15 have also been tested by means of the application for answers received by the application to questions put to the person, whereby the personality traits are assigned a first value. After analysis of the movements, a value is assigned to the second value, wherein after comparison of the second value with the first value, the output signal 20 provides information about the analyzed personality trait.

In een uitvoeringsvorm, omvat het analyseren van de video-opname de stappen van: het uit het geluid van de video-opname bepalen van een eerste lijst van eerste tijdstippen waarop een geluidvolume eerste piekwaarden omvat, 25 - het uit de geïsoleerde beelden van de video-opname bepalen van een tweede lijst van tweede tijdstippen waarop de mate van verplaatsing van de markeringspunten tweede piekwaarden omvat, het vergelijken van de eerste lijst met de tweede lijst, waarbij voor de eerste en de tweede tijdstippen een tweede mate van overeenkomst bepaald wordt, en 30 - het verschaffen van de tweede waarde omvattende een resultaat van de tweede mate van overeenkomst.In one embodiment, analyzing the video recording comprises the steps of: determining from the sound of the video recording a first list of first times at which a sound volume comprises first peak values, - extracting from the isolated images of the video determining recording of a second list of second times at which the degree of movement of the marker points comprises second peak values, comparing the first list with the second list, wherein a second degree of agreement is determined for the first and the second times, and - providing the second value comprising a result of the second degree of agreement.

Hierdoor wordt het mogelijk om een verband te detecteren tussen het stemvolume van de door de persoon gesproken woorden en de door de persoon tijdens de opname van de presentatie gemaakte bewegingen. Dit is van belang 35 bijvoorbeeld bij het meten van een mate waarin de persoon overtuigingskracht in de video-opname laat zien, waarbij een expressie bijvoorbeeld meetbaar is door een toegenomen geluidsintensiteit in combinatie met een verhoogde mate van beweging 5 van een of meerdere markeringspunten van de persoon. Uit de video-opname wordt de tweede mate van overeenkomst bepaald voor de mate waarin het stemvolume en de bewegingen van de persoon in hoofdzaak gelijktijdig optredende piekwaarden vertonen. Het resultaat van de tweede mate van overeenkomst levert de tweede 5 waarde op, die vergelijkbaar is met de eerder bepaalde eerste waarde, welke vergelijking verdere informatie verschaft over het persoonlijkheidskenmerk, zoals eerlijkheid en/of betrouwbaarheid.This makes it possible to detect a relationship between the voice volume of the words spoken by the person and the movements made by the person during the recording of the presentation. This is important, for example, when measuring an extent to which the person shows persuasiveness in the video recording, where an expression can be measured, for example, by an increased sound intensity in combination with an increased degree of movement of one or more marking points of the person. The second degree of similarity is determined from the video recording for the extent to which the voice volume and the movements of the person exhibit substantially simultaneously occurring peak values. The result of the second degree of agreement yields the second value, which is comparable to the previously determined first value, which comparison provides further information about the personality trait, such as honesty and / or reliability.

In een uitvoeringsvorm, omvat het vergelijken van de eerste lijst met de tweede lijst het vergelijken van elk in de eerste lijst aanwezig eerste tijdstip met de in de 10 tweede lijst aanwezige tweede tijdstippen, en omvat het bepalen van de tweede mate van overeenkomst de stappen van: het bepalen van een aantal in de eerste lijst aanwezige tijdstippen die in hoofdzaak gelijk zijn aan een in de tweede lijst aanwezig tweede tijdstip, het vergelijken van het aantal met een vooraf bepaalde drempelwaarde. 15 Hierdoor wordt meting mogelijk van het aantal tijdstippen waarop zowel een maximum in het stemvolume optreedt, als waarop een maximum in de door de persoon tijdens de opname van de presentatie gemaakte bewegingen optreedt. Indien het gemeten aantal kleiner is dan de vooraf bepaalde drempelwaarde, dan heeft de persoon onvoldoende op het te toetsen persoonlijkheidskenmerk gescoord, waarbij het resultaat van de 20 tweede mate van overeenkomst een onvoldoende is.In one embodiment, comparing the first list with the second list comprises comparing each first time present in the first list with the second times present in the second list, and determining the second degree of similarity includes the steps of : determining a number of times present in the first list that are substantially equal to a second time present in the second list, comparing the number with a predetermined threshold value. This makes it possible to measure the number of times at which both a maximum occurs in the voting volume and at which a maximum occurs in the movements made by the person during the recording of the presentation. If the measured number is smaller than the predetermined threshold value, then the person did not score sufficiently on the personality trait to be tested, the result of the second degree of agreement being insufficient.

De uitvinding zal nu meer in detail worden beschreven aan de hand van enkele uitvoeringsvormen onder verwijzing naar de figuren. Getoond wordt in:The invention will now be described in more detail with reference to a few embodiments with reference to the figures. Shown is:

Figuur 1 een bij de werkwijze volgens de uitvinding geïsoleerd beeld uit de video-opname volgens de uitvinding, waarop vormen herkenbaar zijn die bij mensen in 25 het algemeen voorkomen, en waarbij een reeks markeringspunten van op de op de beelden aanwezige vormen gekozen zijn,Fig. 1 shows an image isolated from the video recording according to the invention in the method according to the invention, on which shapes are recognizable that generally occur in humans, and wherein a series of marking points of the shapes present on the images are selected,

Figuur 2 een bij de werkwijze volgens de uitvinding verder geïsoleerd beeld van een persoon ten opzichte van het geïsoleerd beeld van figuur 1,Figure 2 shows an image of a person further isolated with the method according to the invention relative to the isolated image of Figure 1,

Figuur 3 een bij de werkwijze volgens de uitvinding verder geïsoleerd beeld van 30 de persoon ten opzichte van het geïsoleerd beeld van figuur 1 of 2,Figure 3 shows an image of the person further isolated in the method according to the invention relative to the isolated image of figure 1 or 2,

Figuur 4 een bij de werkwijze volgens de uitvinding verder geïsoleerd beeld van de persoon ten opzichte van het geïsoleerd beeld van figuur 1, 2 of 3,Figure 4 shows an image of the person further isolated in the method according to the invention relative to the isolated image of figures 1, 2 or 3,

Figuur 5 en 6 een bij de werkwijze volgens de uitvinding, waarbij de reeks markeringspunten gekozen zijn op omtrekslijnen van tenminste een uit lippen, ogen, 35 wenkbrauwen en neus van de afgebeelde persoon,Figures 5 and 6 show a method in accordance with the invention, in which the series of marking points are selected on circumferential lines of at least one of lips, eyes, eyebrows and nose of the person depicted,

Figuur 7 een grafiek omvattende gemeten waarden van het geluidsvolume van de video-opname, en 6Figure 7 is a graph comprising measured values of the sound volume of the video recording, and 6

Figuur 8 een grafiek omvattende gemeten waarden van in de video-opname bepaalde verplaatsingen van de reeks van markeringspunten.Figure 8 is a graph comprising measured values of displacements of the series of marker points determined in the video recording.

In alle figuren duiden gelijke verwijzingscijfers gelijke onderdelen aan. Voor het analyseren van persoonlijkheidskenmerken bij een keuze voor een persoon zijn vele 5 technieken beschikbaar. Een op zich bekende werkwijze omvat het aan de persoon voorleggen van een vragenlijst die bij beantwoording met “waar” of “onwaar” of tussen “waar” en “onwaar” gelegen tussenvormen, een redelijk inzicht verschaft in een mate waarin de persoon een eerste waarde scoort voor het te onderzoeken persoonlijkheidskenmerk.In all figures, the same reference numerals indicate the same parts. Many techniques are available for analyzing personality traits when choosing a person. A method known per se comprises submitting to the person a questionnaire which, when answered with "true" or "false" or between "true" and "false" intermediate forms, provides a reasonable insight into the extent to which the person has a first value scores for the personality trait to be investigated.

10 Een onderzoeker die de te onderzoeken persoon test op het persoonlijkheidskenmerk kan de middels de vragenlijst verkregen eerste waarde gebruiken bij een verdere keuze, bijvoorbeeld uit een groep personen die de vragenlijst naar wens gemaakt hebben. Het is voordelig om de vragenlijst door de personen op afstand te laten maken. In dit voorbeeld verschaft de onderzoeker de persoon een op 15 een computer werkzame toepassing voor communicatie met een persoon. De persoon vult vanuit zijn eigen omgeving de vragenlijst in en verstuurt de antwoorden op door de toepassing aan de persoon voorgelegde vragen naar de onderzoeker die de antwoorden ontvangt voor verwerking. Deze werkwijze vereist niet per se dat de onderzoeker en de persoon elkaar hoeven te ontmoeten. Het versturen van informatie, 20 zoals via het internet, is voldoende voor het, althans in eerste instantie, analyseren van het persoonlijkheidskenmerk van de persoon.10 A researcher who tests the person to be examined on the personality trait can use the first value obtained through the questionnaire in a further choice, for example from a group of people who have made the questionnaire as desired. It is advantageous for the people to make the questionnaire remotely. In this example, the researcher provides the person with a computer-based application for communication with a person. The person fills in the questionnaire from his own environment and sends the answers to the questions submitted by the application to the researcher who receives the answers for processing. This method does not necessarily require the researcher and the person to meet. Sending information, such as via the internet, is sufficient for analyzing the personality characteristic of the person, at least in the first instance.

De onderzoeker heeft echter meer informatie van de persoon nodig, bijvoorbeeld voor het toetsen of de middels de antwoorden op door de toepassing aan de persoon voorgelegde vragen met betrekking tot het te onderzoeken 25 persoonlijkheidskenmerk voldoende van toepassing zijn op de persoon. De werkwijze volgens de uitvinding is daartoe voorzien van een analyse van een video-opname, welke video-opname beeld en geluid omvat van de persoon, die de video-opname zelf heeft kunnen opnemen, zoals middels een in de handel verkrijgbare camera.However, the researcher needs more information from the person, for example for testing whether the person's questions about the personality trait to be investigated are sufficiently applicable to the person by means of the answers to questions submitted by the application to the person concerned. To this end, the method according to the invention is provided with an analysis of a video recording, which video recording comprises image and sound of the person who was able to record the video recording himself, such as by means of a commercially available camera.

Het analyseren van de video-opname, waarbij het opgenomen beeld en geluid 30 geanalyseerd wordt, vereist deskundigheid van de onderzoeker, waarbij kennis, ervaring, gevoel, inlevingsvermogen, en intuïtie een belangrijke rol spelen. Op basis van het analyseren van het opgenomen beeld en geluid wordt door de onderzoeker een tweede waarde aan het persoonlijkheidskenmerk van de persoon toegekend. Bij het vergelijken van de tweede waarde met de eerste waarde, wordt een eerste mate 35 van overeenkomst bepaald. De eerste mate van overeenkomst geeft een indicatie over de overeenkomst tussen een middels de vragenlijst verkregen indruk van het persoonlijkheidskenmerk, zoals de eerste waarde, en een middels de video-opname 7 verkregen indruk van het persoonlijkheidskenmerk, zoals de tweede waarde.Analyzing the video recording, in which the recorded image and sound is analyzed, requires expertise from the researcher, in which knowledge, experience, feeling, empathy, and intuition play an important role. Based on the analysis of the recorded image and sound, the researcher assigns a second value to the personality characteristic of the person. When comparing the second value with the first value, a first degree of similarity is determined. The first degree of similarity provides an indication of the similarity between an impression of the personality characteristic obtained through the questionnaire, such as the first value, and an impression of the personality characteristic obtained through the video recording 7, such as the second value.

De werkwijze volgens de uitvinding verschaft een uitgangssignaal omvattende een resultaat van de eerste mate van overeenkomst, waarbij aangegeven wordt in welke mate, zoals voldoende of onvoldoende, de score van het onderzochte 5 persoonlijkheidskenmerk op basis van de vragenlijst overeenkomt met de analyse gebaseerd op de video-opname, waaruit vervolgens het voldoen van het persoonlijkheidskenmerk van de persoon aan vooraf gestelde eisen afleidbaar is. De werkwijze volgens de uitvinding is geschikt voor analyse van een massaal aanbod van personen, waarbij per persoon een resultaat van de eerste mate van overeenkomst 10 bepaald wordt.The method according to the invention provides an output signal comprising a result of the first degree of agreement, indicating to what extent, such as sufficient or insufficient, the score of the examined personality characteristic based on the questionnaire corresponds to the analysis based on the video recording, from which the fulfillment of the personality characteristic of the person to predetermined requirements can be deduced. The method according to the invention is suitable for analyzing a massive supply of people, wherein a result of the first degree of agreement is determined per person.

Het analyseren van de video-opname volgens de uitvinding omvat het isoleren van meerdere beelden van de video-opname voor het per geïsoleerd beeld 20 analyseren van de op het beeld 20 geprojecteerde persoon 22. Figuur 1 toont een geïsoleerd beeld 20 waarop een contour, grenslijn of een silhouet 21 van een hoofd 26, 15 hals 27, en/of schouders 28 zichtbaar is. De toepassing is ingericht voor het herkennen van het silhouet 21, waarbij het silhouet 21 gevormd wordt door op het beeld 20 aanwezige vormen die bij mensen in het algemeen voorkomen. Van op de op de beelden 20 aanwezige vormen wordt op elk geïsoleerd beeld 20 een reeks markeringspunten 1-15 bepaald, in dit voorbeeld volgens een vooraf bepaald patroon. 20 In het voorbeeld van figuur 1 verloopt het patroon als volgt. Een eerste markeringspunt 1 is gelegen op de x-as waar een laagste punt van de grenslijn 21 van de rechter schouder 28 van de persoon de x-as snijdt. Op de grenslijn 21 is een tweede markeringspunt 2 gelegen in hoofdzaak halverwege een grenslijndeel 23 dat verloopt tussen het eerste markeringspunt 1 en de hals 27. Op de grenslijn 21 is een 25 derde markeringspunt 3 gelegen op een plek waar de rechter schouder 28 overgaat in de hals 27. Op de grenslijn 21 is een vierde markeringspunt 4 gelegen halverwege de hoogte van de hals 27. Op de grenslijn 21 is een vijfde markeringspunt 5 gelegen op een plek waar een gezicht 26 van de persoon 22 een door een rechter kaak gevormd hoekpunt heeft. Op de grenslijn 21 is een zesde markeringspunt 6 gelegen op een plek 30 die overeenkomt met een rechter oorlel van de persoon 22. Op de grenslijn 21 is een zevende, achtste en negende markeringspunt 7, 8, 9 gelegen op een plek waar het gezicht 26 respectievelijk een rechter bovenhoek, een hoogste punt, en een linker bovenhoek heeft. Op de grenslijn 21 is een tiende markeringspunt 10 gelegen op een plek die overeenkomt met een linker oorlel van de persoon 22. Op de grenslijn 21 is 35 een elfde markeringspunt 11 gelegen op een plek waar een gezicht 26 van de persoon 22 een door een linker kaak gevormd hoekpunt heeft. Op de grenslijn 21 is een twaalfde markeringspunt 12 gelegen halverwege de hoogte van de hals 27. Op de 8 grenslijn 21 is een dertiende markeringspunt 13 gelegen op een plek waar de hals 27 overgaat in de linker schouder 29. Op de grenslijn 21 is een veertiende markeringspunt 14 gelegen in hoofdzaak halverwege een grenslijndeel 24 dat verloopt tussen de hals 27 en het vijftiende markeringspunt 15 dat gelegen is op de x-as waar een laagste punt 5 van de grenslijn 21 van de linker schouder 29 van de persoon 22 de x-as snijdt.The analysis of the video recording according to the invention comprises the isolation of several images of the video recording for the analysis of the person 22 projected onto the image 20 for each isolated image. Figure 1 shows an isolated image 20 on which a contour, boundary line or a silhouette 21 of a head 26, neck 27, and / or shoulders 28 is visible. The application is arranged for recognizing the silhouette 21, wherein the silhouette 21 is formed by forms present on the image 20 which generally occur in humans. From the shapes present on the images 20 a series of marking points 1-15 is determined on each isolated image 20, in this example according to a predetermined pattern. In the example of figure 1, the pattern proceeds as follows. A first marking point 1 is located on the x-axis where a lowest point of the boundary line 21 of the person's right shoulder 28 intersects the x-axis. On the boundary line 21 a second marking point 2 is situated substantially midway between a boundary line part 23 which runs between the first marking point 1 and the neck 27. On the boundary line 21 a third marking point 3 is situated at a place where the right shoulder 28 merges into the neck 27. On the boundary line 21, a fourth marking point 4 is located halfway the height of the neck 27. On the boundary line 21, a fifth marking point 5 is situated at a place where a face 26 of the person 22 has a corner point formed by a right jaw . On the boundary line 21, a sixth marking point 6 is located at a spot 30 corresponding to a right ear lobe of the person 22. On the boundary line 21, a seventh, eighth and ninth marking point 7, 8, 9 is located at a place where the face 26 has a top right corner, a highest point, and a top left corner, respectively. On the boundary line 21, a tenth marking point 10 is located at a location corresponding to a left ear lobe of the person 22. On the boundary line 21, an eleventh marking point 11 is located at a place where a face 26 of the person 22 is joined by a left jaw shaped corner point. On the boundary line 21 is a twelfth marking point 12 located halfway up the height of the neck 27. On the 8 boundary line 21 a thirteenth marking point 13 is situated at a place where the neck 27 merges into the left shoulder 29. On the boundary line 21 is a fourteenth marker 14 located substantially midway between a boundary line portion 24 extending between the neck 27 and the fifteenth marker 15 located on the x-axis where a lowest point 5 of the boundary line 21 of the left shoulder 29 of the person 22 the x-axis cuts.

De toepassing is ingericht voor het op in hoofdzaak elk geïsoleerd beeld 20 plaatsen van een oorsprong O en een assenkruis X, Y. De oorsprong O is bij wijze van voorbeeld aangebracht in de linker onderhoek van het beeld 20. Ten opzichte van de oorsprong O worden coördinaten bepaald van de reeks markeringspunten 1-15. Van 10 elk geïsoleerd beeld 20 worden de coördinaten van de reeks markeringspunten 1-15 opgeslagen voor het bepalen van de verplaatsingen die tijdens de video-opname door de persoon 22 gemaakt en opgenomen zijn. De verplaatsingen of bewegingen van de persoon 22 zijn nuttig bij het bepalen van het te onderzoeken persoonlijkheidskenmerk.The application is arranged for placing an origin O and an axial cross X, Y on substantially each isolated image 20. The origin O is provided, for example, in the lower left corner of the image 20. Relative to the origin O coordinates determined from the set of marker points 1-15. Of each isolated image 20, the coordinates of the series of marking points 1-15 are stored for determining the displacements made and recorded by the person 22 during the video recording. The movements or movements of the person 22 are useful in determining the personality trait to be investigated.

In de beschreven voorbeelden worden coördinaten bepaald van de 15 markeringspunten 1-15 van een geïsoleerd beeld 20 en van een opeenvolgend bijvoorbeeld in figuur 2 getoond geïsoleerd beeld 120. Vervolgens worden de coördinaten van dezelfde markeringspunten 1-15 met elkaar vergeleken voor het bepalen van een mate van de verplaatsing van de markeringspunten 1-15 opeenvolgende beelden 20,120.In the described examples, coordinates are determined of the marking points 1-15 of an isolated image 20 and of an isolated image 120 shown successively for example in Fig. 2. Next, the coordinates of the same marking points 1-15 are compared with each other to determine a degree of movement of the marking points 1-15 consecutive images 20,120.

20 Figuur 1 toont een in een eerste geïsoleerd beeld 20 aanwezig silhouet 21 van de persoon 22. Figuur 2 toont een na het eerste geïsoleerd beeld 20 volgende tweede geïsoleerd beeld 120, waarbij het eerste beeld 20 ter illustratie met een stippellijn 21’ in figuur 2 opgenomen is. Bij vergelijking van de reeks van markeringspunten 1-15 van het tweede beeld 120 met de reeks van markeringspunten 1-15 van het eerste beeld 25 20 is, in dit voorbeeld, een in hoofdzaak zijwaartse verplaatsing 130 meetbaar. De mate waarin zijwaartse verplaatsingen 130 optreden komt bijvoorbeeld overeen met een mate van onrust waarmee de persoon 22 zijn boodschap vertelt. Volgens niet getoonde patronen bepalen de zijwaartse verplaatsingen 130, in een bepaalde mate, de tweede waarde, waarbij de invloed ervan op het te onderzoeken 30 persoonlijkheidskenmerk middels weegfactoren meer of minder benadrukt kan worden.Figure 1 shows a silhouette 21 of the person 22 present in a first isolated image 20. Figure 2 shows a second isolated image 120 following the first isolated image 20, the first image 20 illustrating with a dotted line 21 'in Figure 2. is included. When comparing the series of marking points 1-15 of the second image 120 with the series of marking points 1-15 of the first image, a substantially lateral displacement 130 can be measured in this example. The extent to which lateral movements 130 occur corresponds, for example, to a degree of unrest with which the person 22 tells his message. According to patterns not shown, the lateral displacements 130 determine, to a certain extent, the second value, whereby the influence thereof on the personality trait to be investigated can be emphasized more or less by means of weighting factors.

Figuur 3 toont een na het tweede geïsoleerd beeld 120 volgende derde geïsoleerd beeld 220, waarbij het eerste beeld 20 ter illustratie met een stippellijn 21’ in figuur 3 opgenomen is. Bij vergelijking van de reeks van markeringspunten 1-15 van het derde beeld 220 met de reeks van markeringspunten 1-15 van het eerste beeld 20 35 is, in dit voorbeeld, een in hoofdzaak neerwaartse verplaatsing 230 meetbaar, zoals die optreedt bij een knikbeweging van het hoofd 26, waarbij rotatie om een in hoofdzaak horizontale as 235 optreedt. De mate waarin op- en neerwaartse verplaatsingen 230 9 van het hoofd 26 optreden komt bijvoorbeeld overeen met een mate van overtuigingskracht waarmee de persoon 22 zijn boodschap vertelt. Volgens niet getoonde patronen bepalen op- en neerwaartse verplaatsingen 230, in een bepaalde mate, de tweede waarde, waarbij de invloed ervan op het te onderzoeken 5 persoonlijkheidskenmerk middels weegfactoren meer of minder benadrukt kan worden.Figure 3 shows a third isolated image 220 following the second isolated image 120, the first image 20 being shown in Figure 3 with a dotted line 21 '. When comparing the series of marking points 1-15 of the third image 220 with the series of marking points 1-15 of the first image, a substantially downward displacement 230 can be measured, as occurs with a kinking movement of the head 26, with rotation about a substantially horizontal axis 235 occurring. The extent to which up and down movements 230 9 of the head 26 occur, for example, corresponds to a degree of persuasiveness with which the person 22 tells his message. According to patterns not shown, up and down movements 230 determine, to a certain extent, the second value, whereby the influence thereof on the personality trait to be investigated can be emphasized more or less by means of weighting factors.

Figuur 4 toont een na het derde geïsoleerd beeld 220 volgende vierde geïsoleerd beeld 320, waarbij het eerste beeld 20 ter illustratie met een stippellijn 21’ in figuur 4 opgenomen is. Bij vergelijking van de reeks van markeringspunten 1-15 van het vierde beeld 320 met de reeks van markeringspunten 1-15 van het eerste beeld 20 10 is, in dit voorbeeld, een in hoofdzaak roterende verplaatsing 330 van het hoofd meetbaar om een in hoofdzaak verticale as 335. De mate waarin roterende verplaatsing 330 van het hoofd 26 optreden komt bijvoorbeeld overeen met een mate waarin de persoon 22 gauw afgeleid is en moeite heeft zich te concentreren. Volgens niet getoonde patronen bepalen roterende bewegingen 330, in een bepaalde mate, de 15 tweede waarde, waarbij de invloed ervan op het te onderzoeken persoonlijkheidskenmerk middels weegfactoren meer of minder benadrukt kan worden.Figure 4 shows a fourth isolated image 320 following the third isolated image 220, the first image 20 being shown in Figure 4 with a dotted line 21 '. When comparing the series of marking points 1-15 of the fourth image 320 with the series of marking points 1-15 of the first image, a substantially rotating displacement 330 of the head can be measured around a substantially vertical axis 335. The extent to which rotating displacement 330 of the head 26 occurs, for example, corresponds to an extent to which the person 22 is easily distracted and has difficulty concentrating. According to patterns not shown, rotating movements 330 determine, to a certain extent, the second value, whereby the influence thereof on the personality trait to be investigated can be emphasized more or less by means of weighting factors.

Bij het analyseren van de video-opname volgens de uitvinding worden de op de beelden 20,120, 220, 320 aanwezige vormen bepaald door in figuren 5 en 6 getoonde omtrekslijnen 41, 42, 43,44. Voor personen of mensen in het algemeen, vormen 20 grenslijnen om mond of lippen 41, ogen 42, wenkbrauwen 43 en neus 44 van de afgebeelde persoon 22 duidelijk herkenbare omtrekslijnen 41,42,43, 44. De toepassing is ingericht voor het herkennen van de omtrekslijnen 41, 42, 43, 44 op de geïsoleerde beelden 20, waarbij op elk beeld 20 een verdere reeks markeringspunten 16 bepaald wordt die gelegen zijn op de omtrekslijnen 41,42,43,44, in een volgens 25 figuren 5 en 6 vooraf bepaald verder patroon.When analyzing the video recording according to the invention, the shapes present on the images 20, 120, 220, 320 are determined by circumferential lines 41, 42, 43, 44 shown in Figures 5 and 6. For persons or people in general, boundary lines around mouth or lips 41, eyes 42, eyebrows 43 and nose 44 of the person depicted 22 form clearly recognizable peripheral lines 41,42,43,44. The application is adapted to recognize the circumferential lines 41, 42, 43, 44 on the isolated images 20, wherein on each image 20 a further series of marking points 16 is determined which are located on the circumferential lines 41,42,43,44 in a predetermined according to figures 5 and 6 further pattern.

Figuur 5 toont een in een eerste geïsoleerd beeld 420 aanwezige omtrekslijnen 41,42, 43, 44 langs de wenkbrauwen 43, de ogen 42, de neus 44 en de mond 41 van de persoon 22. Figuur 6 toont een na het eerste geïsoleerd beeld 420 volgende tweede geïsoleerd beeld 520, waarbij het eerste beeld 420 ter illustratie met stippellijnen in 30 figuur 5 opgenomen is. Bij vergelijking van de verdere reeks van markeringspunten 16 van het tweede beeld 520 met dezelfde verdere reeks van markeringspunten 16 van het eerste beeld 420 is, in dit voorbeeld, een verandering van een gezichtsuitdrukking meetbaar. Daar waar figuur 5 een lachende gezichtuitdrukking toont, toont figuur 6 een verbaasde of bedenkelijke gezichtsuitdrukking. Volgens niet getoonde patronen 35 bepalen veranderingen van de gezichtsuitdrukking, in een bepaalde mate, de tweede waarde, waarbij de invloed ervan op het te onderzoeken persoonlijkheidskenmerk middels weegfactoren meer of minder benadrukt kan worden.Figure 5 shows circumferential lines 41,42, 43, 44 present in a first isolated image 420 along the eyebrows 43, the eyes 42, the nose 44 and the mouth 41 of the person 22. Figure 6 shows a 420 after the first isolated image next second isolated image 520, wherein the first image 420 is included with dotted lines in figure 5 for illustration. When comparing the further series of marking points 16 of the second image 520 with the same further series of marking points 16 of the first image 420, a change of a facial expression can be measured in this example. Where figure 5 shows a smiling face expression, figure 6 shows a surprised or questionable face expression. According to patterns not shown, changes in the facial expression determine, to a certain extent, the second value, whereby the influence thereof on the personality trait to be investigated can be emphasized more or less by means of weighting factors.

1010

Het analyseren van de video-opname volgens de uitvinding omvat het analyseren van een schematisch in figuur 7 getoonde grafiek van het geluid 70 of het stemgeluid 70 van de persoon 22. Uit het geluid 70 van de video-opname wordt een eerste lijst bepaald van in figuur 7 getoonde eerste tijdstippen 71, 72, 73, 74, 75, op 5 welke eerste tijdstippen 71, 72, 73, 74, 75 een geluidvolume 70 eerste piekwaarden omvat. De toepassing is ingericht voor het herkennen van de eerste piekwaarden, waarbij in figuur 7 vijf piekwaarden aanwezig zijn waarvan de eerste tijdstippen 71,72, 73, 74, 75 opgeslagen worden in de eerste lijst.Analyzing the video recording according to the invention comprises analyzing a graph of the sound 70 or the voice sound 70 of the person 22 schematically shown in FIG. 7. From the sound 70 of the video recording a first list is determined of in Figure 7 shows first times 71, 72, 73, 74, 75, at which first times 71, 72, 73, 74, 75 a sound volume 70 comprises first peak values. The application is arranged for recognizing the first peak values, wherein in figure 7 there are five peak values of which the first times 71.72, 73, 74, 75 are stored in the first list.

Het analyseren van de video-opname volgens de uitvinding omvat het 10 analyseren van een schematisch in figuur 8 getoonde grafiek van een mate van verplaatsing 80 van de markeringspunten 1-16 die in de video-opname meetbaar zijn. Uit de geïsoleerde beelden 20 van de video-opname wordt een tweede lijst bepaald van tweede tijdstippen 81, 82, 83, 84, op welke tweede tijdstippen 81, 82, 83, 84 de mate van verplaatsing 80 van de markeringspunten 1-16 tweede piekwaarden omvat.Analyzing the video recording according to the invention comprises analyzing a graph schematically shown in Figure 8 of a degree of displacement 80 of the marking points 1-16 that can be measured in the video recording. From the isolated images 20 of the video recording a second list is determined of second times 81, 82, 83, 84, at which second times 81, 82, 83, 84 the degree of displacement 80 of the mark points 1-16 second peak values includes.

15 De toepassing is ingericht voor het herkennen van de tweede piekwaarden, waarbij in figuur 8 vier piekwaarden aanwezig zijn waarvan tenminste de tweede tijdstippen 81, 82, 83, 84 opgeslagen worden in de tweede lijst.The application is arranged for recognizing the second peak values, wherein in figure 8 there are four peak values of which at least the second instants 81, 82, 83, 84 are stored in the second list.

De werkwijze volgens de uitvinding omvat, vervolgens, het vergelijken van de eerste lijst met de tweede lijst, waarbij voor de eerste en de tweede tijdstippen 71, 72, 20 73, 74, 75, 81, 82, 83, 84, een tweede mate van overeenkomst bepaald wordt. In figuur 7 en 8 is de tijd op de x-as uitgezet. In dit voorbeeld wordt het eerst optredende eerste tijdstip 71, vergeleken met de optredende tweede tijdstippen 81, 82, 83, 84. Bij het vergelijken blijkt geen van de tweede tijdstippen 81, 82, 83, 84 overeen te komen met het eerst optredende tijdstip 71. Dat wil zeggen dat bij het eerst optredende eerste 25 tijdstip 71 slechts een piek in stemvolume gemeten is, zonder dat op dat moment het lichaam van de persoon 22 een piek vertoont in de mate van beweging. Uit deze combinatie van het gemeten stemvolume en de gemeten beweging van het lichaam van de persoon 22, is een middels het stemvolume verschafte benadrukking afleidbaar, waarbij het lichaam van de persoon 22 een mate van rust uitstraalt. De mate waarin 30 deze combinatie optreedt is een mate waarin de persoon bijvoorbeeld vertrouwen schept bij iemand die naar de door de persoon vertelde boodschap luistert.The method according to the invention further comprises comparing the first list with the second list, wherein for the first and second time points 71, 72, 73, 74, 75, 81, 82, 83, 84, a second degree determined by agreement. In figures 7 and 8 the time is plotted on the x-axis. In this example, the first time 71 occurring first is compared with the second moments 81, 82, 83, 84 occurring. In the comparison, none of the second times 81, 82, 83, 84 appears to correspond to the first time 71 occurring That is to say, at the first first instant 71 occurring only a peak in voice volume is measured, without the body of the person 22 showing a peak in the amount of movement at that moment. From this combination of the measured voice volume and the measured movement of the body of the person 22, an emphasis provided by the voice volume can be deduced, wherein the body of the person 22 radiates a degree of rest. The extent to which this combination occurs is a degree to which the person, for example, creates confidence in someone who listens to the message told by the person.

Vervolgens wordt het tweede optredende eerste tijdstip 72 vergeleken met de optredende tweede tijdstippen 81, 82, 83, 84, waarbij het tweede optredende eerste tijdstip 72 overeenkomt met het eerst optredende tweede tijdstip 81. Dat wil zeggen dat 35 op het tweede optredende eerste tijdstip 72, dat in hoofdzaak gelijk is aan het eerst optredende tweede tijdstip 81, zowel het stemvolume als de mate van beweging van de persoon 22 een piekwaarde vertoont. Uit deze combinatie van het gemeten 11 stemvolume en de gemeten beweging van het lichaam van de persoon 22, is een middels het stemvolume en de beweging van de persoon 22 verschafte benadrukking afleidbaar, waarbij het lichaam van de persoon 22 een mate van onrust uitstraalt, zoals bij in hoofdzaak zijwaartse verplaatsingen 130, of een mate van benadrukking of 5 overtuigingskracht uitstraalt, zoals bij op- en neerwaartse verplaatsingen 230 van het hoofd 26.Next, the second occurring first time point 72 is compared with the occurring second time points 81, 82, 83, 84, the second occurring first time point 72 corresponding to the first occurring second time point 81. That is, at the second first time point 72 occurring which is substantially equal to the first second instant 81, both the voice volume and the amount of movement of the person 22 has a peak value. From this combination of the measured 11 voice volume and the measured movement of the body of the person 22, an emphasis provided by the voice volume and the movement of the person 22 can be deduced, the body of the person 22 radiating a degree of unrest such as with substantially lateral movements 130, or a degree of emphasis or persuasiveness radiates, such as with up and down movements 230 of the head 26.

Figuren 7 en 8 tonen dat het derde optredende eerste tijdstip 73 niet overeenkomt met een van de optredende tweede tijdstippen 81,82, 83, 84, en dat het vierde en vijfde optredende eerste tijdstip 74, 75 in hoofdzaak overeenkomen met 10 respectievelijk het derde en vierde optredende tweede tijdstip 83, 84.Figures 7 and 8 show that the third occurring first time point 73 does not correspond to one of the occurring second times points 81.82, 83, 84, and that the fourth and fifth occurring first time points 74, 75 substantially correspond to the third and third fourth occurring second time point 83, 84.

Het bepalen van de tweede mate van overeenkomst omvat de stap van het bepalen van een aantal in de eerste lijst aanwezige tijdstippen 72, 74,75 die in hoofdzaak gelijk zijn aan een in de tweede lijst aanwezig tijdstip 81, 83, 84 welk aantal in het voorbeeld van figuren 7 en 8 gelijk is aan drie.Determining the second degree of similarity includes the step of determining a number of times 72, 74.75 present in the first list which are substantially equal to a time 81, 83, 84 present in the second list, which number in the second list example of figures 7 and 8 equals three.

15 Het bepalen van de tweede mate van overeenkomst omvat vervolgens de stap van het vergelijken van het aantal met een vooraf bepaalde drempelwaarde. Ter illustratie van de werking van het vergelijken is vooraf bijvoorbeeld een drempelwaarde van zes gekozen. Dat wil bijvoorbeeld zeggen dat bij een video-opname die 60 seconden duurt, een maal per 10 seconden bijvoorbeeld met stemverheffing 20 gesproken frasen in hoofdzaak tegelijkertijd optreden met een knikkende beweging van het gezicht 26. In dit voorbeeld is het aantal van drie kleiner dan zes, waarbij de tweede mate van overeenkomst bijvoorbeeld 50% is, welk percentage verkregen is door deling van drie door zes. De tweede mate van overeenkomst levert in dit geval een resultaat op dat duidbaar is door “juist onvoldoende”, waarbij aan de tweede 25 waarde bijvoorbeeld een cijfer, zoals een rapportcijfer, vijf toegekend wordt. Vervolgens wordt de tweede waarde vergeleken met de eerste waarde, van welke vergelijking een resultaat oplevert dat tenslotte door het uitgangssignaal uitgedrukt wordt, waarbij het uitgangssignaal het resultaat van de eerste mate van overeenkomst omvat.Determining the second degree of agreement then comprises the step of comparing the number with a predetermined threshold value. To illustrate the operation of the comparison, for example, a threshold value of six has been selected in advance. That is, for example, in the case of a video recording which lasts 60 seconds, phrases spoken once every 10 seconds, for example with voice raising, 20 occur substantially simultaneously with a kinking movement of the face 26. In this example, the number of three is less than six. wherein the second degree of agreement is, for example, 50%, which percentage is obtained by dividing three by six. In this case, the second degree of similarity yields a result that can be clearly identified by 'just insufficient', whereby the second value is assigned, for example, a figure, such as a report figure, five. Subsequently, the second value is compared with the first value, the comparison of which yields a result which is finally expressed by the output signal, the output signal comprising the result of the first degree of correspondence.

De uitvinding is vanzelfsprekend niet beperkt tot de beschreven en getoonde 30 uitvoeringsvorm, maar strekt zich tot elke uitvoeringsvorm uit die valt binnen de reikwijdte van de beschermingsomvang, zoals gedefinieerd in de conclusies en bezien in het licht van de voorgaande beschrijving en bijbehorende tekeningen.The invention is of course not limited to the described and shown embodiment, but extends to any embodiment that falls within the scope of the scope of protection, as defined in the claims and viewed in the light of the foregoing description and accompanying drawings.

i 039* 1 9039 * 1 9

Claims (6)

1. Werkwijze voor analyse van een video-opname, omvattende de stappen van: het verschaffen van een op een computer werkzame toepassing voor 5 communicatie met een persoon (22), het middels de toepassing ontvangen van antwoorden op door de toepassing aan de persoon voorgelegde vragen, het middels de toepassing ontvangen van de video-opname waarin opgenomen beeld (20) en geluid (70) van de persoon aanwezig is, 10. het analyseren van de antwoorden, waarbij een eerste waarde wordt toegekend aan een persoonlijkheidskenmerk van de persoon, het analyseren van de video-opname, waarbij het opgenomen beeld (20) en geluid (70) geanalyseerd wordt, het op basis van het analyseren van het opgenomen beeld (20) en 15 geluid (70) toekennen van een tweede waarde aan het persoonlijkheidskenmerk van de persoon, het vergelijken van de eerste waarde met de tweede waarde, waarbij voor de eerste en de tweede waarde een eerste mate van overeenkomst bepaald wordt, en 20. het verschaffen van een uitgangssignaal omvattende een resultaat van de eerste mate van overeenkomst.A method for analyzing a video recording, comprising the steps of: providing an application operating on a computer for communication with a person (22), receiving responses to the person submitted by the application to the person questions, receiving by means of the application the video recording in which recorded image (20) and sound (70) of the person are present, 10. analyzing the answers, whereby a first value is assigned to a personality characteristic of the person, analyzing the video recording, wherein the recorded image (20) and sound (70) are analyzed, assigning a second value to the personality trait on the basis of analyzing the recorded image (20) and sound (70) of the person, comparing the first value with the second value, a first degree of correspondence being determined for the first and the second value, and 20. providing an output signal comprising a result of the first degree of agreement. 2. Werkwijze volgens conclusie 1, waarbij het analyseren van de video-opname het isoleren omvat van meerdere beelden (20,120, 220, 320, 420, 520) van de video- 25 opname, waarbij voor het bepalen van de tweede waarde elk geïsoleerd beeld (20 , 120, 220, 320, 420, 520) onderworpen wordt aan de stappen van: het herkennen van op de beelden (20,120, 220, 320, 420, 520) aanwezige vormen die bij mensen in het algemeen voorkomen, het bepalen van een reeks markeringspunten (1-16) op de op de 30 beelden (20 , 120, 220, 320, 420, 520) aanwezige vormen, het ten opzichte van een oorsprong (O) en een assenkruis (X, Y) bepalen van coördinaten van de reeks markeringspunten (1-16).2. Method as claimed in claim 1, wherein analyzing the video recording comprises isolating a plurality of images (20, 120, 220, 320, 420, 520) from the video recording, wherein for determining the second value each isolated image (20, 120, 220, 320, 420, 520) is subjected to the steps of: recognizing shapes present on the images (20,120, 220, 320, 420, 520) that occur in humans in general, determining a series of marking points (1-16) on the forms present on the 30 images (20, 120, 220, 320, 420, 520), determining coordinates relative to an origin (O) and an axial cross (X, Y) of the set of marker points (1-16). 3. Werkwijze volgens conclusie 2, waarbij de op de beelden (20,120, 220, 320, 35 420, 520) aanwezige vormen bepaald zijn door omtrekslijnen (41,42, 43, 44) van tenminste een uit lippen (41), ogen (42), wenkbrauwen (43) en neus (44) van de afgebeelde persoon (22), en/of door een silhouet (21) dat zich althans ten dele uitstrekt 1039419 langs een hoofd (26) van de afgebeelde persoon (22), en/of langs een hals (27) en/of langs schouders (28, 29) van de persoon (22).The method according to claim 2, wherein the shapes present on the images (20, 120, 220, 320, 420, 520) are defined by circumferential lines (41, 42, 43, 44) of at least one of eyes (41) 42), eyebrows (43) and nose (44) of the depicted person (22), and / or through a silhouette (21) extending at least in part along a head (26) of the depicted person (22), and / or along a neck (27) and / or along shoulders (28, 29) of the person (22). 4. Werkwijze volgens conclusie 3, waarbij bepaalde coördinaten van de 5 markeringspunten (1-16) van een geïsoleerd beeld (20) vergeleken worden met bepaalde coördinaten van dezelfde markeringspunten (1-16) van een opeenvolgend geïsoleerd beeld (120, 220, 320) voor het bepalen van een mate van de verplaatsing van de markeringspunten (1-16) van het op het geïsoleerd beeld (20) volgende geïsoleerd beeld (120, 220, 320). 10The method of claim 3, wherein certain coordinates of the 5 marking points (1-16) of an isolated image (20) are compared with certain coordinates of the same marking points (1-16) of a consecutive isolated image (120, 220, 320 ) for determining a degree of displacement of the marking points (1-16) of the isolated image (120, 220, 320) following the isolated image (20). 10 5. Werkwijze volgens conclusie 4, waarbij het analyseren van de video-opname de stappen omvat van: het uit het geluid (70) van de video-opname bepalen van een eerste lijst van eerste tijdstippen (71, 72, 73, 74, 75) waarop een geluidvolume (70) eerste 15 piekwaarden omvat, het uit de geïsoleerde beelden (20,120, 220, 320, 420, 520) van de video-opname bepalen van een tweede lijst van tweede tijdstippen (81, 82, 83, 84) waarop de mate van verplaatsing (80) van de markeringspunten (1-16) tweede piekwaarden omvat, 20. het vergelijken van de eerste lijst met de tweede lijst, waarbij voor de eerste en de tweede tijdstippen (71, 72, 73, 74, 75, 81, 82, 83, 84) een tweede mate van overeenkomst bepaald wordt, en het verschaffen van de tweede waarde omvattende een resultaat van de tweede mate van overeenkomst. 25The method of claim 4, wherein analyzing the video recording comprises the steps of: determining from the sound (70) of the video recording a first list of first times (71, 72, 73, 74, 75) ) on which a sound volume (70) comprises first 15 peak values, determining from the isolated images (20, 120, 220, 320, 420, 520) of the video recording a second list of second times (81, 82, 83, 84) wherein the amount of displacement (80) of the mark points (1-16) comprises second peak values, 20. comparing the first list with the second list, wherein for the first and second time points (71, 72, 73, 74), 75, 81, 82, 83, 84) a second degree of agreement is determined, and providing the second value comprising a result of the second degree of agreement. 25 6. Werkwijze volgens conclusie 5, waarbij het vergelijken van de eerste lijst met de tweede lijst het vergelijken omvat van elk in de eerste lijst aanwezig eerste tijdstip (71,72, 73, 74, 75) met de in de tweede lijst aanwezige tweede tijdstippen (81,82, 83, 84), en waarbij het bepalen van de tweede mate van overeenkomst de stappen omvat 30 van: het bepalen van een aantal in de eerste lijst aanwezige tijdstippen (71, 72, 73, 74, 75) die in hoofdzaak gelijk zijn aan een in de tweede lijst aanwezig tweede tijdstip (81, 82, 83, 84), het vergelijken van het aantal met een vooraf bepaalde drempelwaarde. 1 0 3 9 4 1 9The method of claim 5, wherein comparing the first list with the second list comprises comparing each first time (71.72, 73, 74, 75) present in the first list with the second times present in the second list (81,82, 83, 84), and wherein determining the second degree of similarity comprises the steps of: determining a number of times (71, 72, 73, 74, 75) present in the first list substantially equal to a second time point (81, 82, 83, 84) present in the second list, comparing the number with a predetermined threshold value. 1 0 3 9 4 1 9
NL1039419A 2012-02-28 2012-02-28 METHOD FOR ANALYSIS OF A VIDEO RECORDING. NL1039419C2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
NL1039419A NL1039419C2 (en) 2012-02-28 2012-02-28 METHOD FOR ANALYSIS OF A VIDEO RECORDING.

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
NL1039419A NL1039419C2 (en) 2012-02-28 2012-02-28 METHOD FOR ANALYSIS OF A VIDEO RECORDING.
NL1039419 2012-02-28

Publications (1)

Publication Number Publication Date
NL1039419C2 true NL1039419C2 (en) 2013-09-02

Family

ID=46208705

Family Applications (1)

Application Number Title Priority Date Filing Date
NL1039419A NL1039419C2 (en) 2012-02-28 2012-02-28 METHOD FOR ANALYSIS OF A VIDEO RECORDING.

Country Status (1)

Country Link
NL (1) NL1039419C2 (en)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002087443A1 (en) * 2001-04-28 2002-11-07 Manchester Metropolitan University Analysis of the behaviour of a subject
US20030133599A1 (en) * 2002-01-17 2003-07-17 International Business Machines Corporation System method for automatically detecting neutral expressionless faces in digital images
US7027621B1 (en) * 2001-03-15 2006-04-11 Mikos, Ltd. Method and apparatus for operator condition monitoring and assessment
WO2008064431A1 (en) * 2006-12-01 2008-06-05 Latrobe University Method and system for monitoring emotional state changes
US20080260212A1 (en) * 2007-01-12 2008-10-23 Moskal Michael D System for indicating deceit and verity
US20100266213A1 (en) * 2009-04-16 2010-10-21 Hill Daniel A Method of assessing people's self-presentation and actions to evaluate personality type, behavioral tendencies, credibility, motivations and other insights through facial muscle activity and expressions
US20110007174A1 (en) * 2009-05-20 2011-01-13 Fotonation Ireland Limited Identifying Facial Expressions in Acquired Digital Images
US20110263946A1 (en) * 2010-04-22 2011-10-27 Mit Media Lab Method and system for real-time and offline analysis, inference, tagging of and responding to person(s) experiences

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7027621B1 (en) * 2001-03-15 2006-04-11 Mikos, Ltd. Method and apparatus for operator condition monitoring and assessment
WO2002087443A1 (en) * 2001-04-28 2002-11-07 Manchester Metropolitan University Analysis of the behaviour of a subject
US20030133599A1 (en) * 2002-01-17 2003-07-17 International Business Machines Corporation System method for automatically detecting neutral expressionless faces in digital images
WO2008064431A1 (en) * 2006-12-01 2008-06-05 Latrobe University Method and system for monitoring emotional state changes
US20080260212A1 (en) * 2007-01-12 2008-10-23 Moskal Michael D System for indicating deceit and verity
US20100266213A1 (en) * 2009-04-16 2010-10-21 Hill Daniel A Method of assessing people's self-presentation and actions to evaluate personality type, behavioral tendencies, credibility, motivations and other insights through facial muscle activity and expressions
US20110007174A1 (en) * 2009-05-20 2011-01-13 Fotonation Ireland Limited Identifying Facial Expressions in Acquired Digital Images
US20110263946A1 (en) * 2010-04-22 2011-10-27 Mit Media Lab Method and system for real-time and offline analysis, inference, tagging of and responding to person(s) experiences

Similar Documents

Publication Publication Date Title
Myford et al. Detecting and measuring rater effects using many-facet Rasch measurement: Part I
US10607188B2 (en) Systems and methods for assessing structured interview responses
Gorman et al. Evaluating frame-of-reference rater training effectiveness using performance schema accuracy.
Grimm et al. Construct validity.
US20110043759A1 (en) Method and system for determining familiarity with stimuli
US11475788B2 (en) Method and system for evaluating and monitoring compliance using emotion detection
Stake et al. The evolving syntheses of program value
US20240005813A1 (en) Method and apparatus of diagnostic test
US10786173B2 (en) Similarity evaluation method using brain waves, evaluation device, evaluation system, and program
CN111528859A (en) Child ADHD screening and evaluating system based on multi-modal deep learning technology
CN108186030B (en) Stimulation information providing device and cognitive index analysis method for potential value test
CN109716382A (en) Use the method and system of mood check and evaluation and monitoring compliance
Jastrzębski et al. Galton and Spearman revisited: Can single general discrimination ability drive performance on diverse sensorimotor tasks and explain intelligence?
RU2519774C1 (en) Method for determining occupational guidance
Sfetcu Models of Emotional Intelligence in Research and Education.
JP2007200198A (en) Call center system
Tannenbaum Applied performance measurement: Practical issues and challenges
EP3035233A1 (en) Assessment method for facial expressions
NL1039419C2 (en) METHOD FOR ANALYSIS OF A VIDEO RECORDING.
Greguras Managerial experience and the measurement equivalence of performance ratings
Lane Modeling rater response processes in evaluating score meaning
CN114399827B (en) College graduate career character testing method and system based on facial micro-expression
RU2640709C1 (en) Method of student's knowledge evaluation at computer-based testing
Bostrom Affective, cognitive, and behavioral dimensions of communicative attitudes
CN114998440A (en) Multi-mode-based evaluation method, device, medium and equipment

Legal Events

Date Code Title Description
V1 Lapsed because of non-payment of the annual fee

Effective date: 20150901