@inproceedings{wisniewski-2019-combien,
    title = "Combien d{'}exemples de tests sont-ils n{\'e}cessaires {\`a} une {\'e}valuation fiable ? Quelques observations sur l'{\'e}valuation de l{'}analyse morphosyntaxique du fran{\c{c}}ais. (Some observations on the evaluation of {P}o{S} taggers)",
    author = "Wisniewski, Guillaume",
    editor = "Morin, Emmanuel  and
      Rosset, Sophie  and
      Zweigenbaum, Pierre",
    booktitle = "Actes de la Conf{\'e}rence sur le Traitement Automatique des Langues Naturelles (TALN) PFIA 2019. Volume II : Articles courts",
    month = "7",
    year = "2019",
    address = "Toulouse, France",
    publisher = "ATALA",
    url = "https://preview.aclanthology.org/fix-sig-urls/2019.jeptalnrecital-court.7/",
    pages = "215--222",
    language = "fra",
    abstract = "L{'}objectif de ce travail est de pr{\'e}senter plusieurs observations, sur l'{\'e}valuation des analyseurs morphosyntaxique en fran{\c{c}}ais, visant {\`a} remettre en cause le cadre habituel de l{'}apprentissage statistique dans lequel les ensembles de test et d{'}apprentissage sont fix{\'e}s arbitrairement et ind{\'e}pendemment du mod{\`e}le consid{\'e}r{\'e}. Nous montrons qu{'}il est possible de consid{\'e}rer des ensembles de test plus petits que ceux g{\'e}n{\'e}ralement utilis{\'e}s sans cons{\'e}quences sur la qualit{\'e} de l'{\'e}valuation. Les exemples ainsi {\guillemotleft} {\'e}conomis{\'e}s {\guillemotright} peuvent {\^e}tre utilis{\'e}s en apprentissage pour am{\'e}liorer les performances des syst{\`e}mes notamment dans des t{\^a}ches d{'}adaptation au domaine."
}