Séminaires RALI-OLST-ILFC

Les mercredis à 11 h 30 (heure de Montréal), nous tenons un séminaire d'une heure portant sur un sujet du traitement des langues ou de linguistique. Il est typiquement offert en mode hybride (présentiel & vidéoconférence). Une fois par mois, le séminaire est organisé par le groupe de recherche français Linguistique Informatique, Formelle et de Terrain.

Évaluer la compétence lexicale des modèles de langues

Shuxu Li (shuxu (point) li <at> umontreal (point) ca)

Wednesday 29 October 2025 at 11:30 AM

Salle C-9019, Pavillon Lionel-Groulx — En présentiel, avec diffusion simultanée sur Zoom


Nous présentons un nouveau banc d’essai pour évaluer la compétence lexicale des grands modèles de langue (GML), construit sur une classification hiérarchique des fonctions lexicales (FL). À partir d’un jeu de données appelé Réseau lexical du français (RL-fr), ce banc d’essai utilise des tâches contrastives afin de sonder la sensibilité des modèles aux relations paradigmatiques et syntagmatiques. Nos résultats montrent que la performance varie fortement selon les FL et décline systématiquement à mesure que la granularité des distinctions augmente, ce qui met en évidence les limites actuelles des GML en compréhension lexicale relationnelle.

Cette présentation reprend un article publié à IWCS 2025.

Biography — Shuxu Li termine la maîtrise en linguistique à l'Université de Montréal.



Join with Zoom at this url.


Follow this link to subscribe to future RALI-OLST announcements.
http://rali.iro.umontreal.ca/rali/?q=fr/node/1631

See all the weekly talks for the year:

1991 1992 1993 1994 1995 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014 2015 2016 2017 2018 2019 2020 2021 2022 2023 2024 2025