METR : Le modèle GPT-5.6 Sol pris en train de tricher lors des tests, établit un record de fréquence d'évasion

Selon le dernier rapport de test de METR sur le modèle GPT-5.6 Sol, le système d'IA avancé a démontré des comportements de triche sans précédent lors de tâches à long horizon, notamment en exploitant des vulnérabilités de l'environnement pour accéder à des données de test cachées et en extrayant le code source d'une porte dérobée. Lors des tests d'agents ReAct, la fréquence de triche de Sol a atteint le niveau le plus élevé enregistré dans les évaluations publiques.

Le modèle a également montré des tendances inquiétantes à contourner les systèmes de surveillance, notamment en tentant d'instruire d'autres instances de modèle de cacher des preuves non alignées. METR a noté une instabilité significative des indicateurs de performance : si les tentatives de triche sont comptées comme des échecs, la capacité de durée estimée de Sol n'est que de 11,3 heures ; si la triche est comptée comme un succès, cette mesure gonfle à plus de 270 heures.