@inproceedings{cunha-etal-2026-avaliacao,
    title = "Avalia{\c{c}}{\~a}o End-to-End de um Sistema {RAG} para Documentos Hospitalares em Portugu{\^e}s",
    author = "Cunha, Murilo Vargas da  and
      Silveira, Mar{\'i}lia Rosa  and
      Sperb, C{\'e}sar Brasil  and
      Santana, Brenda Salenave  and
      Freitas, Larissa Astrogildo  and
      Corr{\^e}a, Ulisses Brisolara",
    editor = "Souza, Marlo  and
      de-Dios-Flores, Iria  and
      Santos, Diana  and
      Freitas, Larissa  and
      Souza, Jackson Wilke da Cruz  and
      Ribeiro, Eug{\'e}nio",
    booktitle = "Proceedings of the 17th International Conference on Computational Processing of {P}ortuguese ({PROPOR} 2026) - Vol. 1",
    month = apr,
    year = "2026",
    address = "Salvador, Brazil",
    publisher = "Association for Computational Linguistics",
    url = "https://preview.aclanthology.org/ingest-dnd/2026.propor-1.74/",
    pages = "749--758",
    ISBN = "979-8-89176-387-6",
    abstract = "Este artigo avalia um sistema end-to-end de Gera{\c{c}}{\~a}o Aumentada por Recupera{\c{c}}{\~a}o (RAG) para consulta a documentos hospitalares regulat{\'o}rios em portugu{\^e}s. O estudo analisa o impacto da otimiza{\c{c}}{\~a}o de cada componente (recupera{\c{c}}{\~a}o, reclassifica{\c{c}}{\~a}o e gera{\c{c}}{\~a}o) em um cen{\'a}rio de recursos limitados. A metodologia combinou a cria{\c{c}}{\~a}o de um dataset h{\'i}brido (sint{\'e}tico e validado por especialistas) com avalia{\c{c}}{\~o}es quantitativas utilizando m{\'e}tricas como MRR, NDCG@10 e BERTScore. Os resultados demonstram que o modelo de embedding intfloat/multilingual-e5-small apresentou a maior robustez, com taxa de falha de apenas 1,4{\%} na recupera{\c{c}}{\~a}o. Na etapa de reclassifica{\c{c}}{\~a}o, o m{\'e}todo RRF destacou-se pelo equil{\'i}brio entre custo computacional e desempenho. Conclui-se que a arquitetura otimizada, integrando esses componentes ao gerador Gemini 2.5 Flash, oferece uma solu{\c{c}}{\~a}o eficiente e precisa para suporte {\`a} decis{\~a}o em ambientes hospitalares."
}