Announcing NeurIPS 2025 E2LM Competition: Early Training Evaluation of Language Models

Annonce de la compétition NeurIPS 2025 E2LM visant à capturer les signaux en phase précoce d'entraînement des LLMs dans le domaine scientifique. Les submissions seront évaluées via ScoreSQ, ScoreRC et ScoreCS, avec Score = α1·ScoreSQ + α2·ScoreRC + α3·ScoreCS et des poids α1=0.5, α2=0.1, α3=0.4. L'inscription se fait sur Hugging Face et l'évaluation s'appuie sur lm-evaluation-harness, avec des phases allant de juillet à novembre 2025 et résultats prévus le 04 novembre 2025.

Source

HuggingFace Blog

Ingéré

04 JUIL. 2025 · 19:10

Score édito

3.0 / 5