Anmelden
Intelligence artificielle | Attention au piège des benchmarks !
L’Occident s’est enfermé dans une illusion métrologique où chaque semaine, des classements dorés à l’or fin décernent la «suprématie de l’intelligence artificielle» sur la base de benchmarks devenus de véritables pièces de théâtre. On compare des pourcentages d’exactitude sur des tests d’école (MMLU, HumanEval, Math), comme si l’on mesurait la puissance militaire de deux empires en comptant le nombre de médailles obtenues à un concours de tir à l’arc.
Mahjoub Lotfi Belhedi *
La réalité est bien plus brutale : la caducité des techniques actuelles de benchmarking est quasi-totale.
L’évaluation de l’IA ne souffre plus d’un manque de précision, mais d’un biais d’invalidation fondamentale. Les modèles de frontière sont surentraînés pour réussir les tests, ils connaissent les réponses aux examens avant même de s’y présenter. Mais surtout, ces benchmarks mesurent une performance statique, en laboratoire, ignorant la véritable nature de la guerre technologique : la puissance infrastructurelle, l’agilité systémique et surtout l’imprévisibilité stratégique.
Déclarer aujourd’hui les États-Unis vainqueur sur la base des benchmarks d’OpenAI ou d’Anthropic est une erreur d’appréciation stratégique. La suprématie de l’IA ne se joue pas dans une feuille de calcul, mais sur le terrain d’une guerre invisible structurée par quatre piliers matériels et surtout une variable x imprévisible.
Primo, la guerre des modèles : la brute de la Silicon Valley face à l’alchimie de «Hangzhou».
La méthodologie américaine repose sur «le scaling law brutal» qui consiste à injecter plus de paramètres, consommer plus de térawatts, empiler plus de milliards. Les USA produisent des titans monolithiques, ultra-performants sur le papier, mais lourds et extrêmement coûteux à faire tourner.
Côté chinois, la contrainte a engendré une mutation techno-génétique. Privée de la force brute par les sanctions, la Chine a développé une culture de l’optimisation extrême. L’épisode DeepSeek n’était qu’un tir de sommation : la démonstration qu’une architecture distribuée, distillée et basée sur un apprentissage par renforcement frugal pouvait égaler les monstres américains pour une fraction ridicule de leur coût.
Pendant que Washington évalue la «réflexion» de ses modèles sur des énigmes logiques, Pékin déploie des dizaines de milliers de modèles légers, spécialisés (Agentic AI), directement greffés sur son tissu industriel, son réseau de surveillance et sa robotique. L’un calcule la métaphysique, l’autre orchestre l’économie matérielle.
Secundo, les data centers et l’énergie, la faille du réseau américain.
Si l’IA est le nouveau cerveau global, les data centers en sont le système nerveux central. Dans ce périmètre stratégique, les benchmarks de laboratoire oublient la physique.
Les USA affichent une capacité cumulée impressionnante et des projets pharaoniques (Stargate et clusters de gigawatts), mais ils heurtent un mur imprévu : la vétusté de leur réseau électrique, les blocages bureaucratiques et l’opposition des populations locales face à la surconsommation d’eau et d’électricité.
À l’inverse, la Chine aborde la question de la puissance de calcul avec la rigueur d’une planification d’État centralisée. Avec son projet stratégique de «Routage des données de l’Est vers l’Ouest» (East Data, West Computing) lancé officiellement en février 2022, Pékin connecte directement ses mégacentres de calcul aux barrages hydroélectriques du Sud-Ouest et aux immenses parcs solaires et éoliens du désert de Gobi. La Chine ne construit pas juste des serveurs, elle bâtit une infrastructure énergétique dédiée à l’inférence en temps réel.
Tertio, les semi-conducteurs : l’embargo américain a-t-il vraiment bloqué la Chine ?
En interdisant la vente de ses puces de pointe (comme les Nvidia H100 ou B200…), Washington pensait paralyser l’essor de l’IA en Chine. C’était sans compter sur la résilience et l’agilité d’un pays habitué à innover sous pression.
Loin d’être freinée, la Chine a structuré son propre écosystème matériel indépendant. Symbole éclatant de cette riposte : le déploiement massif de puces de dernière génération comme la Huawei Ascend 910C, associée aux superclusters de calcul CloudMatrix. Ces accélérateurs ultrapuissants démontrent la force de la stratégie chinoise du «dépassement en virage».
Pour surmonter l’absence d’équipements de lithographie EUV occidentale, les ingénieurs chinois repensent toute l’architecture microélectronique :
– empilement de mini-puces et intégration 3D avancée pour démultiplier les performances sans dépendre des procédés de gravure de TSMC ;
– optimisation logicielle poussée (via le Framework Cann de Huawei) et réseaux d’interconnexion optique pour contourner les verrous de mémoire ;
– pari sur les technologies de rupture, notamment l’industrialisation des premières puces à lumière (calcul photonique) et des architectures neuromorphiques imitant le cerveau humain.
Si les benchmarks d’aujourd’hui ne mesurent que la vitesse d’exécution sur puces occidentales, la Chine a créé en secret un écosystème matériel parallèle. De la conception de puces Asic sur mesure à la maîtrise de l’interconnexion chiplet (un type de micropuce), en passant par l’optimisation logicielle des accélérateurs Huawei (Ascend), les ingénieurs chinois ont appris à faire sauter les verrous d’efficacité.
Le goulot d’étranglement de la mémoire HBM et de la lithographie EUV pousse la Chine vers des paradigmes alternatifs : calcul photonique, processeurs analogiques et architectures neuromorphiques. Si une seule de ces voies franchit le seuil de viabilité commerciale, le monopole de l’architecture x86/GPU – issu du mariage entre le processeur central (CPU x86) et le processeur graphique (GPU) – s’effondre du jour au lendemain.
Autrement dit, l’embargo américain sur les puces Nvidia (H100, B200) censé paralyser l’IA chinoise n’a pas tenu en compte la capacité d’adaptation d’un pays habitué aux contraintes de siège.
Quarto, le système sanguin mondial : les câbles sous-marins & l’Internet physique
On oublie souvent que l’IA «dans le cloud» repose sur des câbles de fibre optique sous-marins reposant par 4 000 mètres de fond. La suprématie de l’IA n’est rien sans la maîtrise de sa distribution en millisecondes.
Dans cette arène silencieuse, la compétition est féroce. La Chine déploie ses propres dorsales internationales (comme le câble Peace qui s’inscrit directement dans le volet numérique des Nouvelles Routes de la Soie) pour interconnecter le Sud Global (Asie du Sud-Est, Moyen-Orient, Afrique, Amérique Latine) sans passer par les bifurcations américaines ou européennes.
En contrôlant les tuyaux par lesquels transitent les modèles open-source chinois distribués massivement, Pékin garantit que la couche applicative mondiale tournera sur ses standards infrastructurels, neutralisant toute tentative de blocage numérique par l’Occident.
Quinto, la discrétion Chinoise et le scénario du Jour J.
C’est dans ce cadre précis que le benchmarking traditionnel révèle son absurdité totale. Les métriques occidentales ne mesurent que ce qui est rendu public et commercialisé.
En Chine, une bonne partie de l’écosystème d’IA est marquée par une lisibilité stratégique fort réduite. Tandis que les entreprises de la Silicon Valley font du bruit médiatique à chaque version mineure pour rassurer leurs investisseurs, les laboratoires chinois (qu’ils soient liés à l’Académie chinoise des sciences, à l’armée ou aux géants de la tech) opèrent sous le sceau du secret opérationnel.
Selon les spécialistes en IA, les technologies majeures chinoises en cours d’expérimentation à l’abri des regards touchent, entre autres :
– des modèles hybrides alliant Quantum Computing et réseaux de neurones pour la cryptanalyse et la simulation moléculaire ;
– des architectures d’IA militaires en mesure d’opérer en essaims autonomes sans connexion réseau ;
– des algorithmes de raisonnement synthétique à très faible empreinte mémoire, apte de tourner sur des puces grand public dégradées.
Cette tendance de rupture globale démontre que le potentiel d’évolution de la Chine en IA n’est pas linéaire, il est exponentiel et discontinu. Et l’illusion de la suprématie américaine reposant sur un score de 92% à un test standardisé contre 89% pour un modèle chinois est une berceuse pour diplomates. Il suffirait de quelques heures par la publication surprise d’une rupture architecturale, l’activation d’un réseau de puces photoniques souverain ou la mise à disposition globale d’un modèle AGI open-source ultraléger pour que la suprématie bascule instantanément.
In fine, pendant que l’Occident pèse des plumes sur des balances électroniques, la Chine est en train de couler une enclume. La vraie suprématie de l’IA ne sera pas proclamée par un classement sur GitHub, elle sera constatée le jour où le monde entier réalisera que l’infrastructure de son économie tourne déjà sur un modèle dont il ne possède pas la clé.
* Stratège en réflexion IA.
L’article Intelligence artificielle | Attention au piège des benchmarks ! est apparu en premier sur Kapitalis.
