Publication

Validation of an Automatic Metric for the Accuracy of Pronoun Translation (APT)

2016
Reports

Résumé

In this paper, we define and assess a reference-based metric to evaluate the accuracy of pronoun translation (APT). The metric automatically aligns a candidate and a reference translation using GIZA++ augmented with specific heuristics, and then counts the number of identical or different pronouns, with provision for legitimate variations and omitted pronouns. All counts are then combined into one score. The metric is applied to the results of seven systems (including the baseline) that participated in the DiscoMT 2015 shared task on pronoun translation from English to French. The APT metric reaches around 0.993-0.999 Pearson correlation with human judges (depending on the parameters of APT), while other automatic metrics such as BLEU, METEOR, or those specific to pronouns used at DiscoMT 2015 reach only 0.972-0.986 Pearson correlation.

Source officielle

https://infoscience.epfl.ch/entities/publication/594c98b6-b219-4113-944d-d4842aaaed53

À propos de ce résultat

Cette page est générée automatiquement et peut contenir des informations qui ne sont pas correctes, complètes, à jour ou pertinentes par rapport à votre recherche. Il en va de même pour toutes les autres pages de ce site. Veillez à vérifier les informations auprès des sources officielles de l'EPFL.

Graph Chat

Chattez avec Graph Search

Posez n’importe quelle question sur les cours, conférences, exercices, recherches, actualités, etc. de l’EPFL ou essayez les exemples de questions ci-dessous.

AVERTISSEMENT : Le chatbot Graph n'est pas programmé pour fournir des réponses explicites ou catégoriques à vos questions. Il transforme plutôt vos questions en demandes API qui sont distribuées aux différents services informatiques officiellement administrés par l'EPFL. Son but est uniquement de collecter et de recommander des références pertinentes à des contenus que vous pouvez explorer pour vous aider à répondre à vos questions.

2016
Reports

Résumé

Source officielle

https://infoscience.epfl.ch/entities/publication/594c98b6-b219-4113-944d-d4842aaaed53

À propos de ce résultat

Concepts associés (32)

Pronom personnel en français

En grammaire française, le pronom personnel est une catégorie de pronoms servant à désigner les trois types de personnes grammaticales. La classification des pronoms en trois personnes distinctes a été héritée de la culture grecque qui appelait Personae les figurations réalisées par la flexion verbale. Image:PronomPersonnel2Je.png|vignette|Je. Image:PronomPersonnel2Tu.png|vignette|Tu. Image:PronomPersonnel2Il.png|vignette|Il. Image:PronomPersonnel2Elle.png|vignette|Elle. Les trois personnes grammaticales sont : 1.

English pronouns

The English pronouns form a relatively small category of words in Modern English whose primary semantic function is that of a pro-form for a noun phrase. Traditional grammars consider them to be a distinct part of speech, while most modern grammars see them as a subcategory of noun, contrasting with common and proper nouns. Still others see them as a subcategory of determiner (see the DP hypothesis). In this article, they are treated as a subtype of the noun category.

Pronom

En grammaire française, le pronom est un mot-outil variable dont le rôle principal est de se substituer à un élément quelconque, linguistique ou non. Le pronom est donc avant tout un représentant. Étymologiquement, pronom signifie mis pour le nom (le préfixe pro- a le sens de à la place de). C'est-à-dire que le pronom remplace un nom, auquel il se rapporte. Par ailleurs, le pronom peut parfois être le noyau d'un syntagme (appelé syntagme pronominal) : Nous avons vu de vraiment intéressant.

Afficher plus

Publications associées (4)

Afficher plus

Validation of an Automatic Metric for the Accuracy of Pronoun Translation (APT)

Chattez avec Graph Search

Evaluation Methodologies for Biometric Presentation Attack Detection

English Spoken Term Detection in Multilingual Recordings

Flow control for multiple access queues