FR3034887B1 - Dispositif et procede de commande gestuelle en temps reel de signal audio - Google Patents
Dispositif et procede de commande gestuelle en temps reel de signal audio Download PDFInfo
- Publication number
- FR3034887B1 FR3034887B1 FR1553023A FR1553023A FR3034887B1 FR 3034887 B1 FR3034887 B1 FR 3034887B1 FR 1553023 A FR1553023 A FR 1553023A FR 1553023 A FR1553023 A FR 1553023A FR 3034887 B1 FR3034887 B1 FR 3034887B1
- Authority
- FR
- France
- Prior art keywords
- audio signal
- hand
- sound intensity
- human body
- sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000005236 sound signal Effects 0.000 title claims abstract description 101
- 238000000034 method Methods 0.000 title claims abstract description 22
- 230000000694 effects Effects 0.000 claims abstract description 24
- 230000033001 locomotion Effects 0.000 claims description 26
- 238000013523 data management Methods 0.000 claims description 13
- 230000002123 temporal effect Effects 0.000 claims description 10
- 230000004048 modification Effects 0.000 claims description 9
- 238000012986 modification Methods 0.000 claims description 9
- 230000008859 change Effects 0.000 claims description 8
- 238000007726 management method Methods 0.000 claims description 8
- 238000000605 extraction Methods 0.000 claims description 7
- 230000003287 optical effect Effects 0.000 claims description 7
- 230000015572 biosynthetic process Effects 0.000 claims description 4
- 238000006073 displacement reaction Methods 0.000 claims description 4
- 238000003786 synthesis reaction Methods 0.000 claims description 4
- 238000005562 fading Methods 0.000 claims description 3
- 230000003247 decreasing effect Effects 0.000 claims description 2
- 238000001514 detection method Methods 0.000 claims description 2
- 230000008901 benefit Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 230000005484 gravity Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000003292 diminished effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000010363 phase shift Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
- 238000001429 visible spectrum Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
- H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
- H04L51/10—Multimedia information
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
Claims (5)
- REVENDICATIONS1. Dispositif de commande gestuelle en temps réel de la reproduction d'un signal audio, ce dispositif étant agencé pour recevoir un fichier audio ou audio-vidéo (1) encodant un signal audio d'origine (11), ce dispositif comprenant : - un capteur optique (2) agencé pour détecter dans un champ de captation (21) multidimensionnel une position d'au moins une partie (91a, 91b) d'un corps humain (9), - un système de traitement informatique (3) comprenant : o un module de gestion de données gestuelles (31) agencé pour générer des données gestuelles (311) à partir de positions successives de l'au moins une partie dudit au moins un corps humain (9) détectées par le capteur optique (2), o un module de gestion de données audio agencé pour générer en continu un signal audio d'arrivée à partir du signal audio d'origine extrait progressivement du fichier audio ou audio-vidéo, o un module de traitement de signal (34) agencé pour appliquer des effets sonores au signal audio d'arrivée (321) en fonction des données gestuelles, l'au moins une partie (91a, 91b) du corps humain (9) étant au moins une main (91a, 91b), et le capteur optique (2) et le module de gestion de données gestuelles (31) étant en outre agencés pour générer des données gestuelles à partir d’un degré de fermeture et/ou d'un degré d'inclinaison de l'au moins une main (91a, 91b).
- 2. Dispositif selon la revendication 1, caractérisé en ce que le système de traitement informatique (3) comprend en outre un module de gestion de hauteur sonore (37) agencé pour maintenir une hauteur sonore du signal audio d'arrivée (321) lorsque la vitesse de lecture est modifiée. 3. Procédé de commande gestuelle en temps réel de reproduction d’un signal audio comprenant : - une détection dans un champ de captation (21) multidimensionnel d'une position d'au moins une partie (91a, 91b) d'un corps humain (9) par un capteur optique (2), l'au moins une partie du corps humain (9) étant au moins une main (91a, 91b), - une génération de données gestuelles (311) à partir de positions successives de l'au moins une partie dudit corps humain (9) et à partir d'un degré de fermeture et/ou d'un degré d'inclinaison de l'au moins une main (91a, 91b), - une opération de lecture dans laquelle un signal audio d'origine (11) est progressivement extrait d'un fichier audio ou audio-vidéo (1) en fonction de paramètres de lecture, - un stockage d’un signal audio de travail (361) correspondant au signal audio d'origine extrait au fur et à mesure de l'opération de lecture, - une génération en continu d'un signal audio d'arrivée (321) à partir du signal audio de travail (361), - une modification d'au moins l'un des paramètres de lecture suivants en fonction des données gestuelles : o un mode de lecture pouvant prendre un état « actif » dans lequel l'opération de lecture est mise en œuvre et un état « inactif » dans lequel l'opération de lecture n'est pas mise en œuvre, o une vitesse de lecture, la vitesse de lecture étant la vitesse d'extraction du signal audio d'origine (11) au cours de l'opération de lecture, - une application d'effets sonores au signal audio d’arrivée (321) en fonction des données gestuelles,
- 4. Procédé selon la revendication 3, caractérisé en ce que les effets sonores appliqués au signal audio d'arrivée (321) comprennent une modification d'une intensité sonore. 5. Procédé selon la revendication 4, caractérisé en ce que l'intensité sonore du signal audio d'arrivée (321) est modifiée lorsque les données gestuelles générées (311) traduisent un déplacement de l'au moins une partie dudit corps humain (9) entre deux positions successives situées dans un plan vertical du champ de captation (21).
- 6. Procédé selon la revendication 5, caractérisé en ce que l'intensité sonore du signal audio d'arrivée (321) est augmentée lorsqu'une première position parmi lesdites au moins deux positions successives est située à une altitude inférieure à celle d'une deuxième position, et en ce que l'intensité sonore du signal audio d'arrivée (321) est diminuée lorsque la première position est située à une altitude supérieure à celle de la deuxième position. 7. Procédé selon l'une des revendications 4 à 6, caractérisé en ce que la modification de l'intensité sonore comprend un traitement d'égalisation en fréquence. 8. Procédé selon l'une des revendications 4 à 7, caractérisé en ce que la modification de l’intensité sonore comprend un effet de fondu dans lequel l'intensité sonore passe progressivement d'une première valeur d'intensité sonore à une deuxième valeur d'intensité sonore. 9. Procédé selon la revendication 8, caractérisé en ce que l'intensité sonore passe progressivement de la première valeur d'intensité sonore à la deuxième valeur d’intensité sonore lorsque les données gestuelles générées (311) traduisent un mouvement de supination ou de pronation de la main. 10. Procédé selon la revendication 9, caractérisé en ce que la deuxième valeur est inférieure à la première valeur lorsque les données gestuelles générées (311) traduisent un mouvement de supination de la main. 11. Procédé selon l’une des revendications 8 à 10, caractérisé en ce que la modification de l'intensité sonore s'accompagne d’un traitement de réverbération. 12. Procédé selon l'une des revendications 3 à 11, caractérisé en ce que les effets sonores appliqués au signal audio d'arrivée (321) comprennent une opération d'étirement temporel au cours de laquelle : - l'opération de lecture est interrompue, le signal audio d'arrivée (321) est généré par combinaison d'un ou plusieurs échantillons du signal audio de travail (361).
- 13. Procédé selon la revendication 12, caractérisé en ce que l'opération d'étirement temporel est réalisée pendant toute la durée où les données gestuelles générées (311) traduisent un mouvement de préhension de la main au cours duquel des doigts de la main sont refermés sur la paume de la main. 14. Procédé selon la revendication 12 ou 13, caractérisé en ce que l'opération d'étirement temporel comprend un traitement de synthèse granulaire. 15. Procédé selon l'une des revendications 12 à 14, caractérisé en ce que l'opération d'étirement temporel comprend un traitement de réverbération. 16. Procédé selon l'une des revendications 3 à 15, caractérisé en ce que la vitesse de lecture est modifiée en fonction d’une différence entre, d’une part, un premier intervalle de temps séparant une première et une deuxième position prises par l'au moins une partie dudit corps humain (9) et, d’autre part, un deuxième intervalle de temps séparant une troisième position d’une quatrième position successive prise par l'au moins une partie dudit corps humain (9). 17. Procédé selon la revendication 16, caractérisé en ce que la vitesse de lecture est ralentie lorsque le deuxième intervalle de temps est plus court que le premier intervalle de temps, et en ce que la vitesse de lecture est accélérée lorsque le deuxième intervalle de temps est plus long que le premier intervalle de temps.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR1553023A FR3034887B1 (fr) | 2015-04-08 | 2015-04-08 | Dispositif et procede de commande gestuelle en temps reel de signal audio |
PCT/EP2016/057613 WO2016162416A1 (fr) | 2015-04-08 | 2016-04-07 | Dispositif et procede de commande gestuelle en temps reel de signal audio |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR1553023 | 2015-04-08 | ||
FR1553023A FR3034887B1 (fr) | 2015-04-08 | 2015-04-08 | Dispositif et procede de commande gestuelle en temps reel de signal audio |
Publications (2)
Publication Number | Publication Date |
---|---|
FR3034887A1 FR3034887A1 (fr) | 2016-10-14 |
FR3034887B1 true FR3034887B1 (fr) | 2019-09-13 |
Family
ID=53758339
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
FR1553023A Active FR3034887B1 (fr) | 2015-04-08 | 2015-04-08 | Dispositif et procede de commande gestuelle en temps reel de signal audio |
Country Status (2)
Country | Link |
---|---|
FR (1) | FR3034887B1 (fr) |
WO (1) | WO2016162416A1 (fr) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
BE1030666B1 (nl) * | 2022-06-28 | 2024-01-30 | Rods&Cones Holding Bv | Handbeweging- of handposeherkenning voor smartglasses |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1408443B1 (fr) * | 2002-10-07 | 2006-10-18 | Sony France S.A. | Procédé et appareil d'analyse de gestes d'un homme, pour exemple de commande pour appareils par reconnaissance de gestes |
US9123316B2 (en) * | 2010-12-27 | 2015-09-01 | Microsoft Technology Licensing, Llc | Interactive content creation |
US20120250877A1 (en) * | 2011-03-31 | 2012-10-04 | Taiyi Cheng | Method and system for processing audio signals in a central audio hub |
-
2015
- 2015-04-08 FR FR1553023A patent/FR3034887B1/fr active Active
-
2016
- 2016-04-07 WO PCT/EP2016/057613 patent/WO2016162416A1/fr active Application Filing
Also Published As
Publication number | Publication date |
---|---|
FR3034887A1 (fr) | 2016-10-14 |
WO2016162416A1 (fr) | 2016-10-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
FR2976111A1 (fr) | Equipement audio comprenant des moyens de debruitage d'un signal de parole par filtrage a delai fractionnaire, notamment pour un systeme de telephonie "mains libres" | |
EP2772916B1 (fr) | Procédé de débruitage d'un signal audio par un algorithme à gain spectral variable à dureté modulable dynamiquement | |
CA2917795A1 (fr) | Facteur d'echelle optimise pour l'extension de bande de frequence dans un decodeur de signaux audiofrequences | |
CA2337176A1 (fr) | Procede d'ajustement du volume sonore d'un enregistrement sonore numerique | |
FR2950461A1 (fr) | Procede de filtrage optimise des bruits non stationnaires captes par un dispositif audio multi-microphone, notamment un dispositif telephonique "mains libres" pour vehicule automobile | |
FR2945696A1 (fr) | Procede de selection d'un microphone parmi deux microphones ou plus, pour un systeme de traitement de la parole tel qu'un dispositif telephonique "mains libres" operant dans un environnement bruite. | |
WO1984002416A1 (fr) | Dispositif de creation sonore | |
WO2020128088A1 (fr) | Mesure temporelle a haute precision d'evenements vibro-acoustiques en synchronisation avec un signal sonore sur dispositif a ecran tactile | |
EP2396788A2 (fr) | Dispositif et procede de controle du defilement d'un fichier de signaux a reproduire | |
EP2783364A1 (fr) | Procede et dispositif de controle d'un systeme de reduction active de bruit | |
US20230290335A1 (en) | Detection of live speech | |
EP2104937A1 (fr) | Procede de creation d'un nouveau sommaire d'un document audiovisuel comportant deja un sommaire et des reportages et recepteur mettant en uvre le procede | |
FR3034887B1 (fr) | Dispositif et procede de commande gestuelle en temps reel de signal audio | |
FR3002713A1 (fr) | Generation d'une signature d'un signal audio musical | |
FR3004831A1 (fr) | Controle numerique des effets sonores d'un instrument de musique. | |
EP4086751B1 (fr) | Commande par glissement sur des boutons virtuels | |
FR3078196A1 (fr) | Procede et dispositif de synchronisation d'enregistrements comprenant un signal audio provenant de differents dispositifs d'acquisition co-localises | |
FR3052319A1 (fr) | Combine audio micro/casque comprenant des moyens de detection d'activite vocale multiples a classifieur supervise. | |
EP3797509B1 (fr) | Traitement d'un bruit impulsionnel dans une séquence vidéo | |
Furoh et al. | Detection for Lombard speech with second-order mel-frequency cepstral coefficient and spectral envelope in beginning of talking-speech | |
FR3035561A1 (fr) | Systeme de creation et de restitution d'un document composite | |
EP2987339B1 (fr) | Procédé de restitution sonore d'un signal numérique audio | |
WO2016170289A1 (fr) | Terminal apte a qualifier une appreciation portee a un document multimedia | |
FR3040091A1 (fr) | Procede de parametrage de la reactivite d’un dispositif electronique observee suite a la reception d’une commande emise depuis un equipement de controle voisin et dispositif adapte pour la mise en oeuvre d’un tel procede | |
FR2988894A1 (fr) | Procede de detection de la voix |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PLFP | Fee payment |
Year of fee payment: 2 |
|
PLSC | Publication of the preliminary search report |
Effective date: 20161014 |
|
PLFP | Fee payment |
Year of fee payment: 3 |
|
PLFP | Fee payment |
Year of fee payment: 4 |
|
PLFP | Fee payment |
Year of fee payment: 5 |
|
PLFP | Fee payment |
Year of fee payment: 6 |
|
PLFP | Fee payment |
Year of fee payment: 7 |
|
TP | Transmission of property |
Owner name: HINS, FR Effective date: 20210906 |
|
TP | Transmission of property |
Owner name: QUALCOMM TECHNOLOGIES, INC., US Effective date: 20211208 |
|
PLFP | Fee payment |
Year of fee payment: 8 |
|
PLFP | Fee payment |
Year of fee payment: 9 |
|
PLFP | Fee payment |
Year of fee payment: 10 |