Ce que contiendra la fiche d’un modèle
Aucun modèle n’est encore publié. Chacun sera accompagné d’une Model Card indiquant :
- la tâche, l’architecture d’origine et ce qui a été modifié ;
- les données d’entraînement et les restrictions de licence qui en découlent ;
- les résultats de chaque exécution, avec des intervalles de confiance ;
- pour la vitesse, le matériel, la taille d’entrée et la précision numérique ;
- comment reproduire le résultat.
Un chiffre sans jeu de données ni découpage ne veut rien dire : un modèle dépourvu de ces informations n’entrera pas dans le catalogue.
Les ablations sont obligatoires
Si une architecture est modifiée, il faut montrer ce que chaque changement a apporté. Un modèle dépourvu de ces vérifications (ablations) est marqué « sans ablation – inéligible au benchmark ».
Une licence de code ne couvre pas automatiquement les poids : ils suivent la restriction la plus stricte parmi les données utilisées.