modèle frontière

En profondeur

Une définition relative

La définition est relative, et c’est ce qui la rend particulière parmi les catégories de cet étage. Elle désigne les modèles qui repoussent la limite de ce qui est réalisable, ceux dont les capacités n’avaient pas encore été atteintes. Aucune valeur ne la fixe : ni un nombre de paramètres, ni un budget de calcul, ni un score. Il en découle deux propriétés de forme. La frontière est une zone occupée simultanément par un petit nombre de modèles, issus d’un petit nombre d’organisations, et sa composition se renouvelle. Un modèle y entre parce qu’il fait ce que nul autre ne faisait, et il en sort quand ce geste est devenu courant : la catégorie qualifie donc un modèle par son voisinage, pas par son contenu.

Un déclencheur

Ce qui donne au terme son poids, c’est qu’il sert de déclencheur. Les politiques de sûreté que les organisations se donnent, comme les textes qui encadrent le domaine, s’en servent pour attacher des obligations à un très petit nombre de modèles : évaluations de capacités dangereuses avant mise à disposition, documentation, signalement des incidents, suivi après déploiement. Le raisonnement est le même partout : plutôt que d’encadrer tous les modèles de la même façon, on encadre ceux dont les capacités pourraient produire un risque à l’échelle de la société, en assumant que la liste bougera. Comme une capacité se mesure mal et se conteste bien, ces textes s’appuient rarement sur elle et retiennent un indice indirect, le plus courant étant le volume de calcul engagé pendant l’entraînement, assorti d’un seuil révisable. Ce n’est pas une définition, c’est une approximation opérationnelle : elle a le mérite d’être vérifiable, et le défaut de vieillir vite, puisque les progrès des méthodes d’entraînement font baisser le calcul nécessaire pour une capacité donnée. Pour une organisation qui achète, le mot signale surtout un régime : plus de documentation, plus de contrôles annoncés, et des délais de mise à disposition plus longs.

Trois pièges

Trois pièges méritent d’être nommés. Le premier est commercial : personne ne protège le terme, toute organisation qui publie un modèle a intérêt à le dire frontière, et l’emploi promotionnel du mot a largement dépassé son emploi descriptif. Le deuxième est de le lire comme un niveau de qualité pour votre usage : la frontière se constate sur les tâches les plus difficiles, celles où les autres modèles échouent, et la plupart des usages professionnels n’en font pas partie. Un modèle frontière y coûte plus cher et répond plus lentement pour un résultat équivalent, et c’est un jeu de cas à vous, jamais un classement public, qui tranche la question. Le troisième est la confusion avec le benchmark, dont les épreuves saturent et se contaminent, si bien qu’un rang y renseigne mal sur la position réelle. Reste une conséquence structurelle : les modèles de la frontière sont presque toujours servis à distance et leurs poids restent fermés, parce que des poids publiés ne se retirent plus et ne se surveillent plus, ce qui rend inapplicables les obligations attachées au statut. Le contraste avec les modèles à poids ouverts n’est donc pas un hasard, et l’écart entre les deux se mesure en mois plutôt qu’en générations.