Abstract
L’alignement et la mesure d’accord sur des textes multi-annotés sont des enjeux majeurs pour la constitution de corpus de référence. Nous défendons dans cet article l’idée que ces deux tâches sont par essence interdépendantes, la mesure d’accord nécessitant de s’appuyer sur des annotations alignées, tandis que les choix d’alignements ne peuvent se faire qu’à l’aune de la mesure qu’ils induisent. Nous proposons des principes formels relevant cette gageure, qui s’appuient notamment sur la notion de désordre du système constitué par l’ensemble des jeux d’annotations d’un texte. Nous posons que le meilleur alignement est celui qui minimise ce désordre, et que la valeur de désordre obtenue rend compte simultanément du taux d’accord. Cette approche, qualifiée d’holiste car prenant en compte l’intégralité du système pour opérer, est algorithmiquement lourde, mais nous sommes parvenus à produire une implémentation d’une version légèrement dégradée de cette dernière, et l’avons intégrée à la plate-forme d’annotation Glozz.- Anthology ID:
- 2011.jeptalnrecital-long.16
- Volume:
- Actes de la 18e conférence sur le Traitement Automatique des Langues Naturelles. Articles longs
- Month:
- June
- Year:
- 2011
- Address:
- Montpellier, France
- Editors:
- Mathieu Lafourcade, Violaine Prince
- Venue:
- JEP/TALN/RECITAL
- SIG:
- Publisher:
- ATALA
- Note:
- Pages:
- 177–188
- Language:
- French
- URL:
- https://aclanthology.org/2011.jeptalnrecital-long.16
- DOI:
- Cite (ACL):
- Yann Mathet and Antoine Widlöcher. 2011. Une approche holiste et unifiée de l’alignement et de la mesure d’accord inter-annotateurs (A holistic and unified approach to aligning and measuring inter-annotator agreement). In Actes de la 18e conférence sur le Traitement Automatique des Langues Naturelles. Articles longs, pages 177–188, Montpellier, France. ATALA.
- Cite (Informal):
- Une approche holiste et unifiée de l’alignement et de la mesure d’accord inter-annotateurs (A holistic and unified approach to aligning and measuring inter-annotator agreement) (Mathet & Widlöcher, JEP/TALN/RECITAL 2011)
- PDF:
- https://preview.aclanthology.org/emnlp-22-attachments/2011.jeptalnrecital-long.16.pdf