RALI-OLST-ILFC Weekly Talks

On Wednesdays at 11:30 a.m. (Montreal time), we hold a one-hour talk on a language processing or linguistics topic. It is typically offered in hybrid mode (in person/videoconference). Once a month, the talk is organized by the French research group Linguistique Informatique, Formelle et de Terrain.

Évaluer la compétence lexicale des modèles de langues

Shuxu Li (shuxu (point) li <at> umontreal (point) ca)

Le mercredi 29 octobre 2025 à 11 h 30

Salle C-9019, Pavillon Lionel-Groulx — En présentiel, avec diffusion simultanée sur Zoom


Nous présentons un nouveau banc d’essai pour évaluer la compétence lexicale des grands modèles de langue (GML), construit sur une classification hiérarchique des fonctions lexicales (FL). À partir d’un jeu de données appelé Réseau lexical du français (RL-fr), ce banc d’essai utilise des tâches contrastives afin de sonder la sensibilité des modèles aux relations paradigmatiques et syntagmatiques. Nos résultats montrent que la performance varie fortement selon les FL et décline systématiquement à mesure que la granularité des distinctions augmente, ce qui met en évidence les limites actuelles des GML en compréhension lexicale relationnelle.

Cette présentation reprend un article publié à IWCS 2025.

Biographie — Shuxu Li termine la maîtrise en linguistique à l'Université de Montréal.



Joignez-vous à nous avec Zoom à l'aide de cette URL.


Suivez ce lien pour vous inscrire à la liste de diffusion RALI-OLST.
http://rali.iro.umontreal.ca/rali/?q=fr/node/1631

Liste de tous les séminaires pour l'année :

1991 1992 1993 1994 1995 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014 2015 2016 2017 2018 2019 2020 2021 2022 2023 2024 2025