La prédiction d’événements chez les humains et dans les modèles de langue

07 October 2024 par Claudia Pichon-Starke
Cette étude, publiée par Philippe Blache et des chercheurs de Hong Kong Polytechnic University et Purdue University, se consacre notamment à l'importance des connecteurs de discours..

Nous sommes heureux de vous annoncer un nouvel article publié par Philippe Blache (LPL) en collaboration avec des chercheurs de Hong Kong Polytechnic University (Projet Procore) et Purdue University :

Référence : James Britton, Yan Cong, Yu-Yin Hsu, Emmanuele Chersoni, Philippe Blache. On the influence of discourse connectives on the predictions of humans and language models. Frontiers in Human Neuroscience, 2024, 18, pp.1363120. ⟨10.3389/fnhum.2024.1363120⟩. ⟨hal-04717106⟩

Article en texte intégral : https://doi.org/10.3389/fnhum.2024.1363120

Résumé :
Cet article étudie la manière dont les humains et les modèles de langue traitent les prédictions d'événements dans les phrases, en se concentrant sur le rôle des connecteurs de discours tels que et, mais, et parce que. Les humains trouvent que les séquences de phrases congruentes sont plus faciles à comprendre, et ces connecteurs aident à clarifier les relations entre les événements, en particulier lorsque les prédictions doivent être inversées (par exemple, les concessives et les contrastives). L'étude a utilisé des stimuli d'histoires en italien et en chinois mandarin pour tester la plausibilité et la cohérence avec ou sans connecteurs. Les résultats montrent que les modèles de langue mandarine sont quelque peu sensibles à ces facteurs, mais qu'ils ont du mal avec les inversions de prédiction, tandis que les modèles italiens n'ont pas montré d'alignement significatif avec les données humaines.

 

Crédits d'image : Auteurs