Introducing RTEB: A New Standard for Retrieval Evaluation

L’article présente RTEB, un nouveau benchmark de retrieval conçu pour mesurer fidèlement la généralisation des modèles d’embeddings en mixant données publiques et privées. Il critique les benchmarks existants, trop corrompus par le « teaching to the test » et un décalage avec les cas d’usage réels. RTEB vise à offrir une évaluation transparente et reproductible pour orienter le développement de modèles robustes.

Source

HuggingFace Blog

Ingested

OCT 01, 2025 · 19:10

Editorial score

4.0 / 5