@inproceedings{herserant-guigue-2025-seval,
title = "Seval-ex : Un paradigme bas{\'e} sur les phrases atomiques pour une {\'e}valuation explicable de la qualit{\'e} des r{\'e}sum{\'e}s",
author = "Herserant, Tanguy and
Guigue, Vincent",
editor = "Bechet, Fr{\'e}d{\'e}ric and
Chifu, Adrian-Gabriel and
Pinel-sauvagnat, Karen and
Favre, Benoit and
Maes, Eliot and
Nurbakova, Diana",
booktitle = "Actes de la 20e Conf{\'e}rence en Recherche d{'}Information et Applications (CORIA)",
month = "6",
year = "2025",
address = "Marseille, France",
publisher = "ATALA {\textbackslash}{\textbackslash}{\&} ARIA",
url = "https://preview.aclanthology.org/corrections-2025-10/2025.jeptalnrecital-coria.19/",
pages = "217--229",
language = "fra",
abstract = "L'{\'e}valuation de la qualit{\'e} des r{\'e}sum{\'e}s de texte demeure un d{\'e}fi critique en Traitement Automatique du Langage Naturel. Les approches actuelles font face {\`a} un compromis entre performance et interpr{\'e}tabilit{\'e}. Nous pr{\'e}sentons SEval-Ex, un framework qui comble cette lacune en d{\'e}composant l'{\'e}valuation des r{\'e}sum{\'e}s en phrases atomiques, permettant {\`a} la fois une haute performance et une explicabilit{\'e}. SEval-Ex emploie un pipeline en deux {\'e}tapes : extraction des phrases atomiques {\`a} partir du texte source et du r{\'e}sum{\'e} via un LLM, puis mise en correspondance de ces phrases. Contrairement aux approches existantes qui ne fournissent que des scores globaux, notre m{\'e}thode g{\'e}n{\`e}re un parcours d{\'e}taill{\'e} des d{\'e}cisions gr{\^a}ce {\`a} un alignement entre les phrases. Les exp{\'e}riences sur SummEval d{\'e}montrent que SEval-Ex atteint des performances {\'e}tat de l{'}art avec une corr{\'e}lation de 0.580 sur la coh{\'e}rence avec les jugements humains, surpassant GPT-4 (0.521) tout en maintenant l{'}interpr{\'e}tabilit{\'e} et la robustesse contre l{'}hallucination."
}
Markdown (Informal)
[Seval-ex : Un paradigme basé sur les phrases atomiques pour une évaluation explicable de la qualité des résumés](https://preview.aclanthology.org/corrections-2025-10/2025.jeptalnrecital-coria.19/) (Herserant & Guigue, JEP/TALN/RECITAL 2025)
ACL