Speaker adaptation of deep neural network acoustic models using Gaussian mixture model framework in automatic speech recognition systems
الملخص
Utilisation de modèles gaussiens pour l'adaptation au locuteur de réseaux de neurones profonds dans un contexte de modélisation acoustique pour la reconnaissance de la parole Les différences entre conditions d'apprentissage et conditions de test peuvent considérablement dégrader la qualité des transcriptions produites par un système de reconnaissance automatique de la parole (RAP). L'adaptation est un moyen efficace pour réduire l'inadéquation entre les modèles du système et les données liées à un locuteur ou un canal acoustique particulier. Il existe deux types dominants de modèles acoustiques utilisés en RAP : les modèles de mélanges gaussiens (GMM) et les réseaux de neurones profonds (DNN). L'approche par modèles de Markov cachés (HMM) combinés à des GMM (GMM-HMM) a été l'une des techniques les plus utilisées dans les systèmes de RAP pendant de nombreuses décennies. Plusieurs techniques d'adaptation ont été développées pour ce type de modèles. Les modèles acoustiques combinant HMM et DNN (DNN-HMM) ont récemment permis de grandes avancées et surpassé les modèles GMM-HMM pour diverses tâches de RAP, mais l'adaptation au locuteur reste très difficile pour les modèles DNN-HMM. L'objectif principal de cette thèse est de développer une méthode de transfert efficace des algorithmes d'adaptation des modèles GMM aux modèles DNN. Une nouvelle approche pour l'adaptation au locuteur des modèles acoustiques de type DNN est proposée et étudiée : elle s'appuie sur l'utilisation de fonctions dérivées de GMM comme entrée d'un DNN. La technique proposée fournit un cadre général pour le transfert des algorithmes d'adaptation développés pour les GMM à l'adaptation des DNN. Elle est étudiée pour différents systèmes de RAP à l'état de l'art et s'avère efficace par rapport à d'autres techniques d'adaptation au locuteur, ainsi que complémentaire.
الكلمات المفتاحية
غير متوفر
التخصصات
رسائل وأطاريح مشابهة
- Training Methods for Deep Neural Network-Based Acoustic Models in Speech Recognition Tamás Grósz · University of Szeged · 2018
- Streaming Automatic Speech Recognition with Hybrid Architectures and Deep Neural Network Models Javier Jorge Cano · Universitat Politècnica de València · 2022
- Rapid adaptation of deep neural network for speech recognition 博史 関 ; セキ ヒロシ · Toyohashi University · 2019
- Acoustic Modelling using Deep Neural Networks for Automatic Speech Recognition Gueorgui Pironkov · 2017
- ADAPTATION OF HYBRID DEEP NEURAL NETWORK-HIDDEN MARKOV MODEL SPEECH RECOGNITION SYSTEM USING A SUB-SPACE APPROACH Muhammad Rizwan · Georgia Institute of Technology · 2017
- IMPLEMENTASI MODEL CONVOLUTIONAL RECURRENT NEURAL NETWORK (CRNN) DENGAN BIDIRECTIONAL LONG SHORT-TERM MEMORY (BI-LSTM) UNTUK PENGENALAN EMOSI PADA SUARA ADHIRAJASA M. RADITYA · Lampung University · 2025
