D’après The New York Times, la fonctionnalité AI Overview de Google affiche un taux de précision de 91% avec Gemini 3, ce qui signifie qu’elle fournit des dizaines de millions de réponses incorrectes chaque heure. En se basant sur le traitement par Google de plus de 5 billions de recherches par an, cela correspond à des centaines de milliers de réponses inexactes par minute.
L’analyse d’Oumi, réalisée à l’aide du benchmark SimpleQA, a montré que Gemini 2 obtenait 85% de précision, tandis que Gemini 3 a progressé jusqu’à 91%.
Related News
Pourquoi certaines personnes pensent que l’IA change le monde, tandis que d’autres pensent que ce n’est pas si différent : les deux diagnostics de Karpathy
Karpathy « faire répliquer les LLM contre eux-mêmes » : une méthode en 4 étapes pour contrer les biais de réflexion avec l’IA
L’IA fait progresser le PIB des États-Unis de 75% au T1, et les cinq principaux géants pourraient augmenter leurs dépenses en capital à plus de 1,1 billion de dollars d’ici 2027