
Anthropic a publié pour la première fois des métriques détaillant comment Claude participe à la création de futurs modèles d'IA. Selon les données citées par The Decoder, Claude « dirige » désormais » 26% de ce travail, contre moins de 1% en février.
Cependant, cette formulation exige de la prudence. La source souligne que l'échelle globale du travail reste peu claire et que l'évaluation provient de Claude lui-même. De plus, le terme « dirige » signifie moins que ce que cette métrique pourrait laisser supposer.
Cette publication est importante car elle représente une tentative d'Anthropic de mesurer la participation de l'IA à ses propres recherches, mais les données présentées sont insuffisantes pour comparer 26% à une part de travail entièrement autonome ou pour conclure à l'indépendance du modèle.
commentaire éditorial
Pourquoi c’est important
La conséquence probable est un intérêt accru pour les métriques de participation de l'IA au développement des systèmes d'IA. Le prochain signal observable sera une publication d'Anthropic définissant précisément la métrique et soumise à une vérification indépendante. Une incertitude substantielle subsiste car seul un résumé de la source est disponible et l'évaluation est attribuée à Claude lui-même.