@inproceedings{coavoux-2020-quapporte,
    title = "Qu{'}apporte {BERT} {\`a} l{'}analyse syntaxique en constituants discontinus ? Une suite de tests pour {\'e}valuer les pr{\'e}dictions de structures syntaxiques discontinues en anglais (What does {BERT} contribute to discontinuous constituency parsing ? A test suite to evaluate discontinuous constituency structure predictions in {E}nglish)",
    author = "Coavoux, Maximin",
    editor = "Benzitoun, Christophe  and
      Braud, Chlo{\'e}  and
      Huber, Laurine  and
      Langlois, David  and
      Ouni, Slim  and
      Pogodalla, Sylvain  and
      Schneider, St{\'e}phane",
    booktitle = "Actes de la 6e conf{\'e}rence conjointe Journ{\'e}es d'{\'E}tudes sur la Parole (JEP, 33e {\'e}dition), Traitement Automatique des Langues Naturelles (TALN, 27e {\'e}dition), Rencontre des {\'E}tudiants Chercheurs en Informatique pour le Traitement Automatique des Langues (R{\'E}CITAL, 22e {\'e}dition). Volume 2 : Traitement Automatique des Langues Naturelles",
    month = "6",
    year = "2020",
    address = "Nancy, France",
    publisher = "ATALA et AFCP",
    url = "https://preview.aclanthology.org/fix-sig-urls/2020.jeptalnrecital-taln.17/",
    pages = "189--196",
    language = "fra",
    abstract = "Cet article propose d{'}analyser les apports d{'}un mod{\`e}le de langue pr{\'e}-entra{\^i}n{\'e} de type BERT (bidirectional encoder representations from transformers) {\`a} l{'}analyse syntaxique en constituants discontinus en anglais (PTB, Penn Treebank). Pour cela, nous r{\'e}alisons une comparaison des erreurs d{'}un analyseur syntaxique dans deux configurations (i) avec un acc{\`e}s {\`a} BERT affin{\'e} lors de l{'}apprentissage (ii) sans acc{\`e}s {\`a} BERT (mod{\`e}le n{'}utilisant que les donn{\'e}es d{'}entra{\^i}nement). Cette comparaison s{'}appuie sur la construction d{'}une suite de tests que nous rendons publique. Nous annotons les phrases de la section de validation du Penn Treebank avec des informations sur les ph{\'e}nom{\`e}nes syntaxiques {\`a} l{'}origine des discontinuit{\'e}s. Ces annotations nous permettent de r{\'e}aliser une {\'e}valuation fine des capacit{\'e}s syntaxiques de l{'}analyseur pour chaque ph{\'e}nom{\`e}ne cible. Nous montrons que malgr{\'e} l{'}apport de BERT {\`a} la qualit{\'e} des analyses (jusqu'{\`a} 95 en F1 ), certains ph{\'e}nom{\`e}nes complexes ne sont toujours pas analys{\'e}s de mani{\`e}re satisfaisante."
}