ENGINEERINGNET.BE - Ce développement s'inscrit dans le projet européen LLMs4EU, une initiative paneuropéenne de 40 millions d'euros coordonnée par l'Alliance for Language Technologies (ALT-EDIC).
Ce classement est une fonctionnalité supplémentaire de la LIST AI Sandbox, une plateforme conçue pour tester, évaluer et améliorer les technologies d’IA dans un environnement contrôlé et transparent.
Les capacités des LLMs restent largement concentrées sur les langues disposant de nombreuses ressources, comme l’anglais.
Cela expose plusieurs langues européennes - dont le luxembourgeois - au risque d’être marginalisées sur le plan numérique.
Contrairement à la plupart des évaluations centrées sur l’anglais, l’outil du LIST teste les modèles à l'aide d’examens linguistiques réels développés par l’Institut National des Langues Luxembourg (INLL).
Ces examens standardisés couvrent les niveaux du Cadre européen commun de référence pour les langues de A1 à B2 et offrent une grille d’évaluation rigoureuse et réaliste. 54 modèles de langage ont été testés. Les résultats ont mis en évidence des problèmes récurrents.
De nombreux modèles commettent les mêmes types d’erreurs : mauvaise compréhension du contexte, fautes de grammaire, voire erreurs logiques simples.
Ces tendances soulignent les difficultés persistantes des systèmes d'IA à traiter des langues qui n’ont pas été au centre de leur entraînement.
La contribution du Luxembourg au projet LLMs4EU repose également sur des partenaires tels que l'Université du Luxembourg et le Zenter fir d'Lëtzebuerger Sprooch (ZLS), qui œuvrent pour que le développement de l'IA reflète l’identité linguistique et culturelle du pays.
La contribution du LIST renforce le rôle du Luxembourg dans la construction d'une IA plus responsable, plus équitable - et plus européenne.
