SlideServe
Menu
Préférences
© SlideServe · v2026

Exploring Phrase Table Enhancement and Word Alignment Techniques in Machine Translation

eliza avatar
4 diapositives · 186 Views · Jul 14, 2014

This project focuses on systematic studies of heuristics for phrase table generation, utilizing the Moses pipeline. It includes experiments with various alignment models, such as GIZA and Berkeley aligners, to evaluate their impacts on phrase tables and translation quality. Comparative analysis is made between phrase-based and hierarchical decoding along different language pairs. The project also explores methods to detect discontinuous phrases, apply Parts-of-Speech features to improve alignments, and refine MT systems with confidence estimation and DNT lists for better outcomes.

Exploring Phrase Table Enhancement and Word Alignment Techniques in Machine Translation - slide 1
01 / 4Exploring Phrase Table Enhancement and Word Alignment Techniques in Machine Translation
1 / 17

Télécharger la présentation

Exploring Phrase Table Enhancement and Word Alignment Techniques in Machine Translation
Une image / un lien ci-dessous est fourni (tel quel) pour télécharger la présentation

Politique de téléchargement : le contenu du site vous est fourni TEL QUEL pour votre information et votre usage personnel ; il ne peut être vendu, concédé sous licence ni partagé sur d’autres sites sans l’accord de son auteur.Le contenu vous est fourni TEL QUEL, pour votre information et votre usage personnel uniquement. Téléchargez la présentation en cliquant sur ce lien. Lors du téléchargement, si vous ne parvenez pas à télécharger une présentation, l’éditeur a peut-être supprimé le fichier de son serveur.Pendant le téléchargement, si vous ne parvenez pas à obtenir une présentation, le fichier a peut-être été supprimé par l’éditeur.

F I N

Plus de contenu associé

Transcription de la présentation

  1. Suggestions for Class Projects • Systematic study of phrase table generation heuristics (experimentation) • use Moses pipeline, different heuristics, systematic changes of alignment density, alignment quality, corpus size to extract phrase pairs • Comparison of Moses phrase-based and hierarchical decoding (experimentation) • experiment with at least 2 language pairs; analyze the differences • Compare GIZA and Berkeley aligner (experimentation) • compare AER; impact on phrase table; impact on resulting translation • Word alignment for language without word boundaries (experimentation) • can standard work alignment models help to detect word/morpheme boundaries; experiment with simple (e.g. Spanish) and difficult language (e.g Inupiac)

  2. Suggestions for Class Projects • Detect discontinuous phrase pairs (implementation) • analyze dis-contiguous phrases in hand aligned data; implement extension to PESA aligner to detect dis-contiguous phrases • Use Parts-of-Speech features to improve phrase alignment (implementation) • evaluate phrase alignment quality; implement extension to PESA aligner; evaluate impact on translation

  3. Suggestions for Class Projects • Sentence-level Confidence Estimation of MT quality, possibly including identifying poor MT translations • Tuning an MT system to different automatic metrics (including the new METEOR-tuning), and comparing the outcomes • Learning DNT (Do Not Translate) Lists and Incorporating them into Moses • Improving a Baseline Moses MT System by:      - Filtering out bad word-alignments      - Filtering the phrase-table      - Adding decoding features • Building a Hierarchical or Syntax-based MT system for any language-pair