Catégories de traits paralinguistiques

Table des matières

Résumé
Remerciements
Table des matières
Liste des tableaux
Liste des figures
Liste des symboles
Chapitre 1 – Introduction
1.1 Contexte et motivations
1.2 Problématique
1.3 Objectif principal
1.4 Objectifs spécifiques
1.5 Domaines d’application de la reconnaissance des traits paralinguistiques
1.6 Organisation du manuscrit
Chapitre 2 – Traits paralinguistiques de la parole
2.1 Introduction
2.2 Historique et définition de la paralinguistique
2.3 Catégories de traits paralinguistiques
2.4 Corpus de données de traits paralinguistiques
2.4.1 L’ annotation des corpus
2.4.2 Évaluation de l’ annotation
2.4.3 Corpus de données de traits paralinguistiques
2.5 Parole émotionnelle
2.5.1 Définition et théories des émotions
2.5.2 Les corpus de la parole émotionnelle
2.5.3 Unités de base et descripteurs pour la reconnaissance des émotions
2.6 Variété native et non native d’une langue
2. 7 Conclusion
Chapitre 3 – Reconnaissance automatique de traits paralinguistiques de la parole
3.1. Introduction
3.2. Rappel sur les descripteurs prosodiques
3.2.1 Le pitch
3.2.2 L’ intensité
3.2.3 La durée
3.3. Le rythme de la parole
3.3.1 L’hypothèse de Pike et Abercrombie relative au rythme
3.3.2 Les métriques du rythme de la parole
3.4. Qualité de la voix
3.5. Les paramètres acoustiques basés sur une analyse dans le domaine spectral
3.6. Classification des traits paralinguistiques
3.6.1 Méthodes de sélection des paramètres acoustiques
3.6.2 Les approches statiques de la classification
3.7. Conclusion
Chapitre 4 – Nouveaux descripteurs pour la reconnaissance des émotions et des accents
4.1. Introduction
4.2. État de l’art sur les rythmes des familles pairwise (PVI)
4.3. Proposition d’une nouvelle métrique: OPVI
4.3.1 Définition de OPVI
4.3.2 Performance de la métrique OPVI dans la classification des accents natifs et non natifs
4.4. Métriques rythmiques à base d’intensité
4.5. Un modèle d’audition pour extraire des descripteurs distinctifs
4.5.1 Modèle d’ oreille de Caelen
4.5.2 Classification des accents natifs et non natifs par le modèle d’audition
4.6. Conclusion
Chapitre 5 – Nouvelles approches de classification
5.1. Introduction
5.2. Combinaison des approches: une voie prometteuse
5.3. Les algorithmes d’optimisation par évolution différentielle (DE)
5.4. L’optimisation par essaims particulaires (OEP)
5.5. Apprentissage supervisé profond des traits paralinguistiques
5.5.1. Machines de Boltzmann restreintes (RBM)
5.5.2. Approche profonde optimisée à base de RBM
5.5.3. Approche complète de combinaison (GMM-RL-PSO)
5.6. Résultats
5.6.1. Combinaison en série
5.6.2. Combinaison parallèle
5.6.3. Combinaison des différentes méthodes de sélection
5.6.4. Approche complète de combinaison (GMM-RL-PSO)
5.6.5. Optimisation multiobjectif
5.6.6. L’optimisation de RBM
5.7. Conclusion
Chapitre 6 – Résultats globaux et discussions
6.1. Introduction
6.2. Corpus utilisés et prétraitement du signal vocaL
6.2.1. Emotional Prosody Speech and Transcript
6.2.2. Corpus des accents : Linguistic Data Consortium (LDC) West Point Arabic
6.3. Paramètres acoustiques expérimentés
6.4. Évaluation de la métrique OPVI et les autres métriques de rythme
6.5. Évaluation des paramètres auditifs et les métriques rythmiques à base d’intensité
6.6. Combinaison et optimisation des méthodes de sélection de paramètres
6.7. Optimisation de la sélection des paramètres par l’évolution différentielle (DE)
6.8. Conclusion
Chapitre 7 – Conclusion générale
7.1. Recommandations
Bibliographies