@inproceedings{alahverdzhieva-lascarides-2011-integration,
    title = "Int{\'e}gration de la parole et du geste d{\'e}ictique dans une grammaire multimodale (Integration of Speech and Deictic Gesture in a Multimodal Grammar)",
    author = "Alahverdzhieva, Katya  and
      Lascarides, Alex",
    editor = "Lafourcade, Mathieu  and
      Prince, Violaine",
    booktitle = "Actes de la 18e conf{\'e}rence sur le Traitement Automatique des Langues Naturelles. Articles longs",
    month = jun,
    year = "2011",
    address = "Montpellier, France",
    publisher = "ATALA",
    url = "https://preview.aclanthology.org/jlcl-multiple-ingestion/2011.jeptalnrecital-long.35/",
    pages = "400--411",
    language = "fra",
    abstract = "Dans cet article, nous pr{\'e}sentons une analyse {\`a} base de contraintes de la relation forme-sens des gestes d{\'e}ictiques et de leur signal de parole synchrone. En nous basant sur une {\'e}tude empirique de corpus multimodaux, nous d{\'e}finissons quels {\'e}nonc{\'e}s multimodaux sont bien form{\'e}s, et lesquels ne pourraient jamais produire le sens voulu dans la situation communicative. Plus pr{\'e}cis{\'e}ment, nous formulons une grammaire multimodale dont les r{\`e}gles de construction utilisent la prosodie, la syntaxe et la s{\'e}mantique de la parole, la forme et le sens du signal d{\'e}ictique, ainsi que la performance temporelle de la parole et la deixis afin de contraindre la production d`un arbre de syntaxe combinant parole et gesture d{\'e}ictique ainsi que la repr{\'e}sentation unifi{\'e}e du sens pour l`action multimodale correspondant {\`a} cet arbre. La contribution de notre projet est double : nous ajoutons aux ressources existantes pour le TAL un corpus annot{\'e} de parole et de gestes, et nous cr{\'e}ons un cadre th{\'e}orique pour la grammaire au sein duquel la composition s{\'e}mantique d`un {\'e}nonc{\'e} d{\'e}coule de la synchronie entre geste et parole."
}