Mme DO Thi Ngoc Diep, doctorante en co-tutelle MICA - LIG Grenoble, a soutenu brillament sa thèse à Grenoble le 20 décembre 2011 et ainsi obtenu le titre de Docteur en Sciences. Cette thèse est une co-tutelle vraie entre le LIG Grenoble et l'Institut MICA Hanoi...
Titre : Extraction de corpus parallèle pour la traduction automatique depuis et vers une langue peu dotée
Co-directeur de thèse (LIG) : M. Laurent BESACIER
Co-directeur de thèse (MICA) : M. Eric CASTELLI
Membres du jury :
| M. Christian BOITET |
Professeur à l'Université Joseph Fourier - Grenoble |
Président |
| M. Holger SCHWENK |
Professeur à l'Université du Maine |
Rapporteur |
| M. Kamel SMAILI |
Professeur à l'Univesité Nancy 2 |
Rapporteur |
| M. Georges LINARES |
Professeur à l'Université d'Avignon et des Pays de Vaucluse |
Examinateur |
| M. Laurent BESACIER |
Professeur à l'Université Joseph Fourier - Grenoble |
Directeur |
| M. Eric CASTELLI |
CR HDR CNRS - Professeur à l'Institut Polytechnique de Hanoi |
Directeur |
Résumé:
Les systèmes de traduction automatique obtiennent aujourd'hui de bons résultats sur certains couples de langues comme anglais – français, anglais – chinois, anglais – espagnol, etc. Les approches de traduction empiriques, particulièrement l'approche de traduction automatique probabiliste, nous permettent de construire rapidement un système de traduction si des corpus dedonnées adéquats sont disponibles. En effet, la traduction automatique probabiliste est fondée sur l'apprentissage de modèles à partir de grands corpus parallèles bilingues pour les langues source et cible. Toutefois, la recherche surla traduction automatique pour des paires de langues dites «peu dotés» doit faire face au défi du manque de données.
Nous avons ainsi abordé le problème d'acquisition d'un grand corpus de textes bilingues parallèles pour construire le système de traduction automatique probabiliste. L'originalité de notre travail réside dans le fait que nous nous concentrons sur les langues peu dotées, où des corpus de textes bilingues parallèles sont inexistants dans la plupart des cas. Ce manuscrit présente notre méthodologie d'extraction d'un corpus d'apprentissage parallèle à partir d'un corpus comparable, une ressource de données plus riche et diversifiée sur l'Internet. Nous proposons trois méthodes d'extraction. La première méthode suit l'approche de recherche classique qui utilise des caractéristiques générales des documents ainsi que des informations lexicales du document pour extraire à lafois les documents comparables et les phrases parallèles. Cependant, cette méthode requiert des données supplémentaires sur la paire de langues. Ladeuxième méthode est une méthode entièrement non supervisée qui ne requiert aucune donnée supplémentaire à l'entrée, et peut être appliquée pour n'importe quelle paires de langues, même des paires de langues peu dotées. La dernière méthode est une extension de la deuxième méthode qui utilise une troisième langue, pour améliorer les processus d'extraction de deux paires de langues. Les méthodes proposées sont validées par des expériences appliquées sur lalangue peu dotée vietnamienne et les langues française et anglaise.
Mots clés : langues peu dotées, traduction automatique probabiliste, extractionde données parallèles, corpus comparable, méthode non supervisée, triangulation, alignement, métriques d'évaluation, etc.
Abstract :
Nowadays, machine translation has reached good results when applied to several language pairs such as English – French, English – Chinese, English – Spanish, etc. Empirical translation, particularly statistical machine translation allows us to build quickly a translation system if adequate data is available because statistical machine translation is based on models trained from large parallel bilingual corpora in source and target languages. However, research on machine translation for under-resourced language pairs always faces to the lack of training data.
Thus, we have addressed the problem of retrieving a large parallel bilingual text corpus to build a statistical machine translation system. The originality of our work lies in the fact that we focus on under-resourced languages for which parallel bilingual corpora do not exist in most cases. This manuscript presents our methodology for extracting a parallel corpus from a comparable corpus, a richer and more diverse data resource over the Web. We propose three methods of extraction. The first method follows the classical approach using general characteristics of documents as well as lexical information of the document to retrieve both parallel documents and parallel sentence pairs. However, this method requires additional data of the language pair. The second method is a completely unsupervised method that does not require additional data and it can be applied to any language pairs, even under resourced language pairs. The last method deals with the extension of the second method using a third language to improve the extraction process (triangulation). The proposed methods are validated by a number of experiments applied on the under resourced Vietnamese language and the English and French languages.
Key words: under resourced languages, statistical machine translation, mining parallel data, comparable corpus, unsupervised method, triangulation, alignments, evaluation metrics, etc.
