| Multimodal anomaly detection in discourse using speech and facial expressions (Détection d'anomalie dans le discours en utilisant la voix et les expressions faciales) | ||
Fayet, Cédric - (2018-12-18) / Universite de Rennes 1 Multimodal anomaly detection in discourse using speech and facial expressions Langue : Anglais Directeur de thèse: Marteau, Pierre-François Laboratoire : IRISA Ecole Doctorale : MATHSTIC Thématique : Informatique | ||
Mots-clés : anomalie, expressions faciales, parole, apprentissage artificiel , Multimodalité (linguistique), Expression du visage, Apprentissage automatique Résumé : Cette thèse traite de la détection multimodale des anomalies dans le discours en utilisant les expressions faciales et l'expressivité dans la voix. Ces deux modalités sont des vecteurs d’émotions, des intentions, et peuvent refléter l'état d'esprit d'un être humain. Dans ce travail, un corpus de discours contenant des anomalies induites ou actées a été construit. Il a permis de mettre à l'épreuve une chaîne de détection à base de classification semi-supervisée. GMM, One Class SVM et Isolation Forest sont quelques exemples de modèles utilisés. Cela a également permis d'étudier la contribution de chacune des modalités et leur apport conjoint sur l'efficacité de la détection. Résumé (anglais) : This thesis is about multimodal anomaly detection in discourse using facial expressions ans speech expressivity. These two modalities are vectors of emotions, intentions, and can reflect the state of mind of a human being. In this work, a corpus on discourse containing some induced and acted anomalies has been built. This corpus has enabled testing a detection chain based on semi-supervised classification. GMM, One class SVM and Isolation forest are examples of models that have been used. It also has enabled to study the contribution of each modality and their joint contribution to the detection efficiency. Identifiant : rennes1-ori-wf-1-12059 | ||
| Exporter au format XML |