La durée des tâches que réussit une IA double à intervalles réguliers

En 2025, l'organisation METR propose de mesurer les progrès des agents d'IA par la durée des tâches qu'ils accomplissent, rapportée au temps d'un humain.

L'article « Measuring AI Ability to Complete Long Tasks » propose un indicateur nouveau : la durée des tâches, mesurée en temps de travail d'un professionnel humain, que des agents d'IA parviennent à mener à bien dans la moitié des cas.

Les chercheurs appliquent cette mesure à des modèles sortis depuis 2019, sur des tâches de programmation et de recherche. Ils observent que cette durée a doublé environ tous les sept mois sur la période étudiée.

Les auteurs soulignent les incertitudes de l'exercice et les limites des tâches testées. L'indicateur est néanmoins devenu une référence pour suivre l'autonomie croissante des agents.