| Téléchargement | - Voir la version finale : Test set sampling affects system rankings: expanded human evaluation of WMT20 English-Inuktitut systems (PDF, 613 Kio)
|
|---|
| Lien | https://aclanthology.org/2022.wmt-1.8 |
|---|
| Auteur | Rechercher : Knowles, Rebecca1; Rechercher : Lo, Chi-kiu1 |
|---|
| Affiliation | - Conseil national de recherches du Canada. Technologies numériques
|
|---|
| Format | Texte, Article |
|---|
| Conférence | Seventh Conference on Machine Translation (WMT), December 2022, Abu Dhabi, United Arab Emirates (Hybrid) |
|---|
| Résumé | We present a collection of expanded human annotations of the WMT20 English-Inuktitut machine translation shared task, covering the Nunavut Hansard portion of the dataset. Additionally, we recompute News rankings to take into account the completed set of human annotations and certain irregularities in the annotation task construction. We show the effect of these changes on the downstream task of the evaluation of automatic metrics. Finally, we demonstrate that character-level metrics correlate well with human judgments for the task of automatically evaluating translation into this polysynthetic language. |
|---|
| Date de publication | 2022-12 |
|---|
| Maison d’édition | Association for Computational Linguistics |
|---|
| Licence | |
|---|
| Dans | |
|---|
| Langue | anglais |
|---|
| Publications évaluées par des pairs | Oui |
|---|
| Exporter la notice | Exporter en format RIS |
|---|
| Signaler une correction | Signaler une correction (s'ouvre dans un nouvel onglet) |
|---|
| Identificateur de l’enregistrement | d52a4c28-7e45-48ef-a575-998fc349eeb8 |
|---|
| Enregistrement créé | 2023-03-04 |
|---|
| Enregistrement modifié | 2023-03-06 |
|---|
