Call for submission

Thématiques

Nous sollicitons des propositions de communication sur tous les travaux abordant la question de l'évaluation de LLM.

Cela inclut notamment les recherches concernant :

• l’évaluation de modèles de fondation, fine-tunés ou de systèmes complets (RAG par exemple)
• la création ou adaptation de benchmarks, pour du français ou autres langues d’intérêt, qu’elles soient bien ou peu dotées, en domaine général ou spécialisé, ou pour des langues bruitées ou non standard (eg. réseaux sociaux, commandes vocales…)
• l’évaluation sur des tâches de TAL (traduction, résumé, extraction d’information…)
• l’adaptation des méthodologies d’évaluation existantes aux systèmes génératifs
• les dimensions éthiques, biais, privacy, alignement culturel ou législatif
• les dimensions de performances en temps de calcul, mémoire, frugalité énergétique
• l’évaluation avec des utilisateurs, ergonomie, aspects cognitifs
• l’évaluation de modèles multimodaux (eg. texte-image, texte-parole…)
• …

 Les actes de l’atelier seront publiés.

Format et type d'articles

Plusieurs types d'article sont acceptés :

• contribution nouvelle,
• état de l'art,
• travaux en cours,
• version courte/traduite d’un article accepté dans une grande conférence.

La taille des articles est laissée libre entre 4 pages et 10 pages, références non comprises.

Les relectures se faisant en double-aveugle, les soumissions doivent être anonymisées. La feuille de style est celle de la conférence TALN 2025

Les auteurs sont invités à se conformer aux bonnes pratiques du domaine : https://aclrollingreview.org/responsibleNLPresearch/

Les articles sont à soumettre sur cette page.

Calendrier de l'appel

• soumission : 15 avril
• retour aux auteurs : 5 mai
• version finale : TBC