@inproceedings{ducel-etal-2024-evaluation,
    title = "{\'E}valuation automatique des biais de genre dans des mod{\`e}les de langue auto-r{\'e}gressifs",
    author = {Ducel, Fanny  and
      N{\'e}v{\'e}ol, Aur{\'e}lie  and
      Fort, Kar{\"e}n},
    editor = "Balaguer, Mathieu  and
      Bendahman, Nihed  and
      Ho-dac, Lydia-Mai  and
      Mauclair, Julie  and
      G Moreno, Jose  and
      Pinquier, Julien",
    booktitle = "Actes de la 31{\`e}me Conf{\'e}rence sur le Traitement Automatique des Langues Naturelles, volume 1 : articles longs et prises de position",
    month = "7",
    year = "2024",
    address = "Toulouse, France",
    publisher = "ATALA and AFPC",
    url = "https://preview.aclanthology.org/ingest-emnlp/2024.jeptalnrecital-taln.5/",
    pages = "64--84",
    language = "fra",
    abstract = "Nous proposons un outil pour mesurer automatiquement les biais de genre dans des textes g{\'e}n{\'e}r{\'e}s par des grands mod{\`e}les de langue dans des langues flexionnelles. Nous {\'e}valuons sept mod{\`e}les {\`a} l{'}aide de 52 000 textes en fran{\c{c}}ais et 2 500 textes en italien, pour la r{\'e}daction de lettres de motivation. Notre outil s{'}appuie sur la d{\'e}tection de marqueurs morpho-syntaxiques de genre pour mettre au jour des biais. Ainsi, les mod{\`e}les favorisent largement la g{\'e}n{\'e}ration de masculin : le genre masculin est deux fois plus pr{\'e}sent que le f{\'e}minin en fran{\c{c}}ais, et huit fois plus en italien. Les mod{\`e}les {\'e}tudi{\'e}s exacerbent {\'e}galement des st{\'e}r{\'e}otypes attest{\'e}s en sociologie en associant les professions st{\'e}r{\'e}otypiquement f{\'e}minines aux textes au f{\'e}minin, et les professions st{\'e}r{\'e}otypiquement masculines aux textes au masculin."
}